اختبار مرتبط بالدليل · متوسط المستوى
إجبار المعلم في مسابقة نماذج التسلسل
يفحص كيف تُدرّب بادئات الحقيقة على مُفكِّد التسلسل، كيف تدعم أقنعة السببية التدريب المتوازي، ولماذا يختلف الاستدلال.
سؤال 1 من 8
أثناء فرض المعلم، ما الذي يتم تغذيته كمدخل في كل خطوة من خطوات فك التشفير؟
معاينة كل سؤال8 أسئلة
تظهر الإجابات والتفسيرات أثناء إجراء الاختبار.
- أثناء فرض المعلم، ما الذي يتم تغذيته كمدخل في كل خطوة من خطوات فك التشفير؟
- الحقيقة الأرضية الرمز السابق
- التنبؤ السابق للنموذج
- رمز عشوائي
- رمز الإخراج النهائي
- During teacher-forced training, what target is paired with decoder input y_(t−1)?
- The previous ground-truth token
- The next target token y_t
- A token sampled from the validation set
- The maximum-probability output from an earlier training run
- يُعرف عدم تطابق اختبار التدريب الناتج عن إجبار المعلم بما يلي:
- اختفاء التدرجات
- انهيار الوضع
- انحياز التعرض
- تسرب التسمية
- في وحدة فك ترميز المحولات، ما هي الآلية التي تسمح بتشغيل التدريب الإجباري للمدرس بالتوازي عبر المواقف؟
- التسرب
- التطبيع دفعة
- بحث شعاع
- قناع انتباه سببي (نظرة للأمام).
- في وقت الاستدلال، لماذا لا يمكن استخدام إجبار المعلم؟
- لا توجد رموز مستقبلية للحقيقة الأرضية لإطعامها
- وظيفة الخسارة غير متوفرة
- وحدة معالجة الرسومات بطيئة جدًا
- تم تعطيل أقنعة الانتباه
- ما هي الخسارة التي يتم استخدامها عادةً في كل خطوة أثناء التدريب الذي يفرضه المعلم؟
- يعني الخطأ التربيعي على السجلات الخام
- إنتروبيا متقاطعة بين التوزيع المتوقع والرمز الحقيقي التالي
- المفصلي الخسارة على التضمين
- فقدان تشابه جيب التمام
- The target sequence is “red, blue, green.” Under teacher forcing, which token is supplied when training the prediction of “green”?
- The model’s prediction for “green”
- The future token after “green”
- The ground-truth previous token “blue”
- A randomly sampled vocabulary item
- At decoder position t, which tokens must a causal attention mask block?
- The source sequence
- All earlier target tokens
- The current position’s own input
- Target tokens at positions later than t