Τι είναι Pass@k?

Μια μέτρηση μοντέλου γλώσσας που μετρά πόσο εκπλήσσεται το μοντέλο από τα αληθινά επόμενα διακριτικά.

Ένα μοντέλο που βαθμολογεί ένα ερώτημα και ένα έγγραφο μαζί σε ένα πέρασμα για κρίσεις συνάφειας υψηλής ακρίβειας.

Ένα σημείο αναφοράς για προβλήματα προγραμματισμού Python που χρησιμοποιείται για τη μέτρηση της ορθότητας δημιουργίας κώδικα μέσω δοκιμών μονάδας.

Ένας δομημένος τρόπος για ένα σύστημα λογισμικού να στέλνει αιτήματα και να λαμβάνει απαντήσεις από ένα άλλο σύστημα.

Μια εργασία όπου ένα μοντέλο εκχωρεί μια είσοδο σε μία ή περισσότερες προκαθορισμένες κατηγορίες.

Μέθοδοι που μεταφέρουν ένα μοντέλο εκπαιδευμένο σε έναν τομέα για να αποδώσει καλύτερα σε έναν άλλο τομέα.