استدلال اللغة الطبيعية واختبار الاستلزام

تظهر الإجابات والتفسيرات أثناء إجراء الاختبار.

1. ما هي التسميات الثلاثة القياسية في الاستدلال باللغة الطبيعية؟
   • استلزام، تناقض، محايد
   • إيجابية، سلبية، محايدة
   • صحيح، كاذب، غير معروف
   • الموضوع، الفعل، الكائن
2. في NLI، ماذا يعني "الاستلزام"؟
   • الجملتان لا علاقة لهما
   • يجب أن تكون الفرضية صحيحة في ضوء الفرضية
   • يجب أن تكون الفرضية خاطئة في ضوء الفرضية
   • الجمل متطابقة نحويا
3. بالنظر إلى الفرضية "رجل يعزف على الجيتار على المسرح"، ما هي الفرضية التي تعتبر تناقضًا؟
   • شخص يؤدي الموسيقى
   • الجمهور يحب الأغنية
   • المرحلة فارغة
   • موسيقي يحمل آلة موسيقية
4. ما هي قطعة أثرية التعليق التوضيحي في مجموعة بيانات NLI؟
   • A model that reasons perfectly with very little data
   • A dataset where every annotator agrees
   • A premise that is always longer than its hypothesis
   • A spurious cue that lets a model guess labels without reasoning about the premise-hypothesis relation
5. ما هي مجموعات البيانات المستخدمة على نطاق واسع لتدريب وتقييم NLI؟
   • SNLI وMultiNLI
   • إيماج نت و سيفار
   • MNIST وSVHN
   • WikiText وبن تريبانك
6. How can NLI support a check of a generated claim against source evidence?
   • Measure the generated claim’s length
   • Classify whether the evidence entails, contradicts, or leaves the claim neutral
   • Count unique words only
   • Translate the claim into another language
7. In NLI, what does the neutral label mean?
   • The hypothesis is guaranteed true
   • The hypothesis is guaranteed false
   • The premise neither entails nor contradicts the hypothesis
   • The two sentences are grammatically identical
8. How does a common transformer NLI classifier present a sentence pair to the model?
   • Encode only the hypothesis and discard the premise
   • Convert both sentences into audio first
   • Train a separate model for every word
   • Concatenate the premise and hypothesis with a separator token