Kedis ku xidhan hagaha · Dhexdhexaad Heerka

Kediska Wasakhaynta Benchmark

Wuxuu tijaabiyaa sida walxaha bartilmaameedka ah ugu qulqulaan xogta tababarka, hababka ogaanshaha sida n-gram overlap iyo Min-K% Prob, iyo yaraynta sida kanariyada iyo kala qaybsanaanta waqtiga.

Wadooyinka haga ee la xidhiidhaWasakhaynta Benchmark
Su'aal 1 ee 8

Waa maxay faddaraynta bartilmaameedka?

Horudhac su'aal kasta8 su'aalo

Jawaabaha iyo sharraxaadaha waxay soo baxayaan markaad qaadanayso kediska.

  1. Waa maxay faddaraynta bartilmaameedka?
    • Marka bartilmaameedku ka kooban yahay furayaasha jawaabta khaldan
    • Marka model lagu tijaabiyo su'aalo aad u yar
    • Marka walxaha imtixaanka bartilmaameedka ama jawaabahoodu ay ka soo muuqdaan xogta tababarka moodeelka
    • Marka laba bar-tilmaameedyadu cabbiraan xirfad isku mid ah
  2. Waa maxay ujeedada xadhkaha kanary-ga ee lagu daray hawlaha kursiga-weyn?
    • Si loo ogolaado kooxaha xogta inay dukumentiyadaas ka soo saaraan xogta tababarka oo ay tijaabiyaan in moodal arkay iyaga
    • Si loo sireeyo jawaabaha
    • Si loo calaamadiyo hawlaha ugu adag
    • Si loo garto qaabka ka jawaabay jawaab kasta
  3. Maxay daraasadda GSM1k soo jeedisay?
    • Dhammaan moodooyinka ayaa dhibco sare ka keenay dhibaatooyinka cusub
    • GSM8K wax qalad ah malaha
    • Wasakhaynta lama cabbiri karo xogta tababarka la'aanteed
    • Qaar ka mid ah moodooyinka ayaa si muuqata uga hooseeyey dhibaatooyinka cusub, ee u dhigma marka loo eego GSM8K
  4. Waa maxay falanqaynta isku-dhafan ee waraaqda GPT-3 socodsiisay?
    • Ku dhejinta isku midka ah dukumentiyada buuxa
    • 13-garaam oo isku dhafan oo u dhexeeya bartilmaameedyada iyo xogta tababarka
    • Dib u eegista bini'aadamka ee dukumeenti kasta oo tababar ah
    • Min-K% Prob ee bartilmaameed kasta
  5. Waa maxay fikradda asaasiga ah ee Min-K% Prob?
    • Ka saarida ugu yar ee boqolkiiba k ee erayada xogta tababarka
    • Tababar qaab labaad si loo kala saaro qoraalka wasakhaysan
    • Qoraalka qaabku arkay waxa ay u janjeertaa in ay leedahay calaamado yar-yar oo aad u hooseeya
    • Cabbiraadda dhererka jawaabaha moodeelka
  6. Sidee bay u kala qaybsanaanta waqtiga ku salaysan, sida ku jirta LiveCodeBench, u caawisaa ogaanshaha faddaraynta?
    • Waxay barbar dhigaysaa waxqabadka dhibaatooyinka la daabacay ka hor iyo ka dib joojinta tababarka moodeelka
    • Waxay cabbirtaa inta moodalku qaadanayo inuu ka jawaabo
    • Waxay u kala qaybisaa moodalka lakabyo hore iyo kuwo cusub
    • Waxa kaliya oo ay tirisaa dhibaatooyinka laga jawaabo waqti xaddidan gudahooda
  7. Waa maxay sababta helitaan la'aanta isku dhafka saxda ah aysan u cadeyneynin in bartilmaameedku nadiif yahay?
    • Isbarbardhigga saxda ah aad buu u gaabiyaa in la ordo
    • Beeniyeyaasha waxay beddelaan jawaabahooda waqti ka dib
    • Moodooyinka weligood ma xafidaan qoraalka saxda ah
    • Nuqullada la soo koobay ama la turjumay waxay simbiriirixi karaan xargaha isbarbar-dhigga ee dhaafay
  8. Ka-saarista n-gram, maxaa dhacaya haddii n la doorto mid aad u yar?
    • Nuqullo dhow oo leh wax-ka-beddel yar ayaa la tebay
    • Waxyaalo badan oo been abuur ah oo weedho caadi ah ayaa la calaamadeeyay
    • Shaandheeyaha ayaa gabi ahaanba joojiya shaqada
    • Kaliya jawaabaha, ma aha su'aalo, waa la is waafajiyaa