गाइड से जुड़ी प्रश्नोत्तरी · मध्यम स्तर

SWE-बेंच और कोडिंग एजेंट बेंचमार्क क्विज़

परीक्षण करें कि SWE-बेंच कार्य कैसे बनाए जाते हैं, FAIL_TO_PASS और PASS_TO_PASS स्कोरिंग, लाइट और सत्यापित उपसमुच्चय, और क्यों मचान परिणाम बदलते हैं।

प्रश्न 1 का 8

What does a SWE-bench task ask the system to do?