اختبار مرتبط بالدليل · متوسط المستوى
اختبار تجميع خليط الوكلاء
قم بمراجعة أدوار المقترح والمجمع الخاصة بوزارة الزراعة، والمشاركة الطبقية للمسودات، وتأثيرات التعاون، ومقايضات تكلفة الاستدلال.
سؤال 1 من 8
في خليط الوكلاء، ما هو دور نموذج التجميع؟
معاينة كل سؤال8 أسئلة
تظهر الإجابات والتفسيرات أثناء إجراء الاختبار.
- في خليط الوكلاء، ما هو دور نموذج التجميع؟
- لتجميع ردود نماذج المقترحين في إجابة واحدة محسنة
- لحذف جميع المسودة باستثناء واحدة بشكل عشوائي
- لترجمة المطالبة إلى رمز
- لتدريب النماذج المقترحة
- ما هي الخاصية الرئيسية لـ LLMs التي تعتمد عليها ورقة مذكرة التفاهم؟
- أن ماجستير إدارة الأعمال لا يمكنه قراءة مخرجات النماذج الأخرى
- أن ماجستير إدارة الأعمال ينتج إجابات أفضل عندما تظهر إجابات أقرانه ("التعاون")
- أن LLMs يتفقون دائمًا
- أن النماذج الأكبر ليست ضرورية
- كيف تختلف وزارة الزراعة عن التصويت بالأغلبية البسيطة؟
- فهو يختار الإجابة الأكثر شيوعًا حرفيًا
- ويستخدم نموذج واحد فقط
- يقرأ المجمّع جميع المسودات كسياق وينشئ توليفة جديدة
- إنه يتجاهل مقدمي الاقتراحات تمامًا
- لماذا يعتبر التنوع بين النماذج المقترحة ذا قيمة في وزارة الزراعة؟
- ويضمن مخرجات متطابقة
- فهو يقلل من عدد الطبقات إلى الصفر
- يجعل جميع الإجابات خاطئة
- تساهم العائلات النموذجية المختلفة في نقاط قوة تكميلية يمكن للمجمع دمجها
- ما هي التكلفة العملية الرئيسية لنهج وزارة الزراعة؟
- زمن استجابة وحوسبة أعلى، نظرًا لأن كل طبقة تضاعف استدعاءات النماذج
- ولا يتطلب أي استنتاج على الإطلاق
- يمكنه إخراج كلمة واحدة فقط
- يقوم بحذف المطالبة الأصلية
- ماذا ورد في تقرير وزارة الزراعة حول النماذج مفتوحة المصدر في AlpacaEval 2.0؟
- لم يتمكنوا من تشغيل المعيار
- لقد تجاوزت مذكرة التفاهم للنماذج المفتوحة درجة GPT-4 Omni
- سجلت النماذج المفتوحة دائمًا صفرًا
- تم اختبار النماذج المغلقة فقط
- What information is given to an agent in a later Mixture-of-Agents layer?
- Only the original prompt with all earlier drafts removed
- Only a majority-vote label
- The outputs produced by agents in the preceding layer
- A gradient update from each previous model
- What is the purpose of placing several proposer models in the first MoA layer?
- Train a shared base model from scratch
- Choose one response by majority vote and discard the rest
- Compress all outputs into a single token
- Create a set of candidate responses for later agents and the aggregator to use