کیا ہے GSM8K?

Python پروگرامنگ کے مسائل کا ایک بینچ مارک یونٹ ٹیسٹ کے ذریعے کوڈ جنریشن کی درستگی کی پیمائش کرنے کے لیے استعمال ہوتا ہے۔

قابل اعتماد حوالہ لیبل جو ماڈل آؤٹ پٹس کو تربیت دینے یا جانچنے کے لیے استعمال ہوتے ہیں۔

مشین لرننگ ماڈلز کو تربیت دینے یا جانچنے کے لیے استعمال کیے گئے انسانی شامل کردہ لیبلز یا میٹا ڈیٹا۔

عمارت کے نظاموں کا وسیع میدان جو کاموں کو انجام دیتا ہے جس میں پیٹرن کی شناخت، استدلال، زبان، یا فیصلہ سازی کی ضرورت ہوتی ہے۔

ایک معیاری ٹیسٹ یا ڈیٹا سیٹ جو ماڈل کی کارکردگی کی پیمائش اور موازنہ کرنے کے لیے استعمال ہوتا ہے۔

استدلال یا بازیافت کے لیے استعمال ہونے والے اداروں اور رشتوں کا گراف ڈھانچہ۔