اختبار مرتبط بالدليل · متوسط المستوى
مسابقة فك التشفير التفاضلي
تختبر تقييم الخبراء‑الهواة، كبت الرموز المشتركة، تصفية المعقولية، الاستخدام أثناء الترميز، وتقييم التوليد التبايني.
سؤال 1 من 8
في فك التشفير المتباين، ما هو الدور الذي يلعبه نموذج "الهواة" الصغير؟
معاينة كل سؤال8 أسئلة
تظهر الإجابات والتفسيرات أثناء إجراء الاختبار.
- في فك التشفير المتباين، ما هو الدور الذي يلعبه نموذج "الهواة" الصغير؟
- يتم طرح احتمالات السجل الخاصة به لمنع أوضاع الفشل المشتركة
- يقوم بإنشاء نص الإخراج النهائي مباشرة
- يتم ضبطه على أخطاء الخبير
- ويحل محل الخبير عندما يكون الخبير غير متأكد
- لماذا يؤدي طرح احتمالات الهواة إلى تقليل التكرار والإخراج اللطيف؟
- يتم تدريب الهاوي على عدم تكرار الكلمات مطلقًا
- يتم تفضيل الرموز المميزة العامة والمتكررة في كلا النموذجين، وبالتالي فإن التباين يلغيها
- يقوم الهواة بحذف الرموز المكررة بعد جيلها
- التكرار مستحيل بمجرد تصويت نموذجين
- What does the adaptive plausibility constraint do in contrastive decoding?
- It guarantees every remaining continuation is coherent and true
- It replaces the expert distribution with the amateur distribution
- It filters out candidates whose expert probability is too low relative to the expert’s top token
- It forces every token to have equal probability
- ما هي صيغة التسجيل تقريبًا في فك التشفير المتباين؟
- سجل p_amateur ناقص سجل p_expert
- مرات p_expert p_amateur
- متوسط الاحتمالين
- سجل p_expert ناقص معامل ضرب سجل p_amateur
- الميزة العملية الرئيسية لفك التشفير التقابلي هي أنه:
- يعمل في وقت الاستدلال دون أي تدريب إضافي
- يتطلب إعادة تدريب كلا النموذجين معًا
- يعمل فقط على مهام التصنيف
- يلغي الحاجة إلى نموذج كبير
- ما هي الطريقة اللاحقة التي توسع الفكرة المتباينة لتشمل طبقات النموذج الواحد؟
- بحث شعاع
- DoLa، الذي يتناقض مع الطبقات المبكرة والمتأخرة
- فك التشفير الجشع
- تحجيم درجة الحرارة
- The expert assigns probability 0.4 to its top token and the plausibility threshold is 0.1 of that value. What is the minimum probability for a candidate to remain eligible?
- 0.4
- 0.1
- 0.04
- 0.004
- Why can contrastive decoding require more inference work than using the expert model alone?
- It must retrain both models for every prompt
- It replaces the vocabulary with image patches
- It runs only the amateur model
- It scores candidates with both an expert and an amateur model at inference time