گائیڈ سے منسلک کوئز · درمیانہ سطح

SWE بینچ اور کوڈنگ ایجنٹ بینچ مارکس کوئز

جانچتا ہے کہ SWE-بینچ کے کام کیسے بنائے جاتے ہیں، FAIL_TO_PASS اور PASS_TO_PASS اسکورنگ، لائٹ اور تصدیق شدہ سب سیٹ، اور اسکافولڈز نتائج کیوں بدلتے ہیں۔

سوال 1 کی 8

What does a SWE-bench task ask the system to do?