گائیڈ سے منسلک کوئز · درمیانہ سطح
نقاب پوش زبان ماڈلنگ کوئز
ماسکڈ لینگویج ماڈلنگ، BERT کی ٹوکن سلیکشن اسکیم اور بعد میں دو طرفہ پری ٹریننگ کے متبادل کو سمجھیں۔
سوال 1 کی 8
نقاب پوش زبان کی ماڈلنگ میں بنیادی تربیتی کام کیا ہے؟
ہر سوال کا جائزہ لیں۔8 سوالات
جب آپ کوئز دیتے ہیں تو جوابات اور وضاحتیں ظاہر ہوتی ہیں۔
- نقاب پوش زبان کی ماڈلنگ میں بنیادی تربیتی کام کیا ہے؟
- ارد گرد کے سیاق و سباق سے جان بوجھ کر پوشیدہ الفاظ کی پیش گوئی کرنا
- کسی جملے کے بعد اگلے لفظ کی پیشین گوئی کرنا
- دو زبانوں کے درمیان متن کا ترجمہ کرنا
- گرائمر کی درستگی کے ذریعہ جملے کی درجہ بندی کرنا
- BERT عموماً پیشگی تربیت کے دوران کتنے فیصد ٹوکنز کو ماسک کرتا ہے؟
- تقریباً 50%
- تقریباً 15%
- تقریباً 1%
- تقریباً 90%
- ایم ایل ایم ایک ماڈل کو دو طرفہ تفہیم کیوں دیتا ہے؟
- یہ جملے پیچھے پڑھتا ہے۔
- یہ دو الگ الگ ماڈل استعمال کرتا ہے۔
- ہر ٹوکن اس کے بائیں اور دائیں دونوں طرف کے الفاظ میں شامل ہوتا ہے۔
- یہ صرف پچھلے لفظ کو دیکھتا ہے۔
- BERT کی ماسکنگ اسکیم میں، [MASK] بننے کے بجائے تقریباً 10% منتخب عہدوں کا کیا ہوتا ہے؟
- وہ مکمل طور پر حذف کردیئے گئے ہیں۔
- وہ نقل شدہ ہیں۔
- وہ کیپٹلائزڈ ہیں۔
- انہیں ایک بے ترتیب لفظ سے بدل دیا جاتا ہے۔
- کن عہدوں پر ایم ایل ایم کے نقصان کا حساب کیا جاتا ہے؟
- صرف نقاب پوش عہدے
- جملہ میں ہر ٹوکن
- صرف پہلا اور آخری ٹوکن
- صرف اوقاف کے ٹوکن
- اگلی ٹوکن پیشن گوئی کے مقابلے میں، ایم ایل ایم کیا تجارت کرتا ہے؟
- سیاق و سباق کو استعمال کرنے کی صلاحیت
- روانی سے بائیں سے دائیں متن بنانے کی صلاحیت
- الفاظ تک رسائی
- توجہ کا استعمال
- How does RoBERTa’s dynamic masking differ from BERT’s original setup?
- It masks only the first token of every sentence
- It predicts future tokens with a causal decoder
- The masked positions can be regenerated across training passes instead of remaining fixed
- It replaces all masked tokens with random numbers
- What auxiliary objective did the original BERT pretraining recipe combine with MLM?
- Image patch reconstruction
- Audio speaker diarization
- A reward model for code generation
- Next-sentence prediction