Όρος Γλωσσάρι AI

Τι είναι Pass@k;

Ορισμός

Μια μέτρηση κωδικού αξιολόγησης που μετρά την πιθανότητα τουλάχιστον ένα από τα k δείγματα που δημιουργούνται να περάσει τις δοκιμές.

Περιηγηθείτε στο πλήρες Γλωσσάρι AIΕξερευνήστε όλους τους δωρεάν οδηγούς AI

Σχετικοί όροι

PerplexityΜια μέτρηση μοντέλου γλώσσας που μετρά πόσο εκπλήσσεται το μοντέλο από τα αληθινά επόμενα διακριτικά.Cross-Encoder (Διασταυρούμενος κωδικοποιητής)Ένα μοντέλο που βαθμολογεί ένα ερώτημα και ένα έγγραφο μαζί σε ένα πέρασμα για κρίσεις συνάφειας υψηλής ακρίβειας.HumanEvalΈνα σημείο αναφοράς για προβλήματα προγραμματισμού Python που χρησιμοποιείται για τη μέτρηση της ορθότητας δημιουργίας κώδικα μέσω δοκιμών μονάδας.API (Διεπαφή προγραμματισμού εφαρμογών)Ένας δομημένος τρόπος για ένα σύστημα λογισμικού να στέλνει αιτήματα και να λαμβάνει απαντήσεις από ένα άλλο σύστημα.ΤαξινόμησηΜια εργασία όπου ένα μοντέλο εκχωρεί μια είσοδο σε μία ή περισσότερες προκαθορισμένες κατηγορίες.Προσαρμογή ΤομέαΜέθοδοι που μεταφέρουν ένα μοντέλο εκπαιδευμένο σε έναν τομέα για να αποδώσει καλύτερα σε έναν άλλο τομέα.

Μάθετε περισσότερα στους δωρεάν οδηγούς μας

Dense Passage RetrievalPass@k Metric ExplainedGenerative AI for First-Pass Document ReviewAI for Leveled Reading Passages

Δείτε επίσης

LLM-as-JudgeMMLUBi-EncoderGSM8KHybrid SearchFactualityRerankerCitations