اختبار وكلاء الانعكاس والتصحيح الذاتي

تظهر الإجابات والتفسيرات أثناء إجراء الاختبار.

1. ما هي السمة المميزة لكيفية "تعلم" وكيل الانعكاس؟
   • يقوم بتخزين الانعكاسات المكتوبة في السياق دون تغيير أوزان النماذج
   • يقوم بتحديث أوزان النموذج من خلال الضبط الدقيق
   • يقوم بتنزيل إصدار نموذجي جديد بعد كل فشل
   • يطلب من الإنسان إعادة تسمية بيانات التدريب الخاصة به
2. في إطار التفكير، ماذا يفعل المقيم؟
   • فهو يولد الإجراء التالي للوكيل
   • إنه يسجل نتيجة محاولة إنتاج إشارة ردود الفعل
   • يقوم بحذف الذكريات القديمة لتوفير المساحة
   • يقوم بترجمة المهمة إلى لغة أخرى
3. لماذا تعتبر جودة إشارة التقييم مهمة جدًا في الانعكاس؟
   • لأنه يحدد معدل التعلم للنموذج
   • لأنه يقرر عدد وحدات معالجة الرسومات المستخدمة
   • لأن الإشارة الخاطئة يمكن أن تجعل الوكيل يفكر في الدروس غير الصحيحة ويعززها
   • لأنه يحدد درجة حرارة النموذج اللغوي
4. On which coding benchmark did the Reflexion paper report a 91% pass@1 result?
   • إيماج نت
   • COCO detection
   • WMT translation
   • HumanEval
5. ما هي المخاطر المفتوحة الحقيقية مع عوامل التصحيح الذاتي؟
   • يمكنهم تكرار "إصلاح" المخرجات التي كانت صحيحة بالفعل إلى ما لا نهاية
   • أنها تتطلب بيانات مصنفة لكل رمز مميز
   • لا يمكنهم العمل على الأجهزة القياسية
   • إنهم يفسدون النموذج الأساسي بشكل دائم
6. Where does Reflexion keep feedback for a later attempt?
   • In updated model weights
   • In an episodic memory buffer supplied as text context
   • In a hardware cache shared across users
   • In the original training corpus
7. What is the role of the Actor in Reflexion?
   • It changes the base model weights
   • It authenticates citations automatically
   • It generates the actions or attempt for the task
   • It sets the benchmark score after the run
8. What kinds of feedback can Reflexion use?
   • Only gradient updates from fine-tuning
   • Only human ratings in every task
   • Only token likelihood from pretraining
   • Signals such as scalar outcomes or language feedback from external or simulated sources