Terme du glossaire IA

Qu’est-ce que Pass@k ?

Définition

Une métrique d'évaluation de code mesurant la chance qu'au moins un des k échantillons générés réussisse les tests.

Parcourez le glossaire complet de l'IAExplorez tous les guides gratuits sur l'IA

Termes associés

PerplexityUne métrique de modèle de langage mesurant à quel point le modèle est surpris par les vrais prochains jetons.Encodeur croiséUn modèle qui évalue une requête et un document ensemble en une seule passe pour des jugements de pertinence de haute précision.HumanEvalUn benchmark des problèmes de programmation Python utilisé pour mesurer l'exactitude de la génération de code via des tests unitaires.API (interface de programmation d'applications)Une manière structurée permettant à un système logiciel d'envoyer des requêtes et de recevoir des réponses d'un autre système.ClassementTâche dans laquelle un modèle attribue une entrée à une ou plusieurs catégories prédéfinies.Adaptation de domaineMéthodes qui transfèrent un modèle formé dans un domaine pour mieux fonctionner dans un autre domaine.

Apprenez-en davantage dans nos guides gratuits

Dense Passage RetrievalPass@k Metric ExplainedGenerative AI for First-Pass Document ReviewAI for Leveled Reading Passages

Voir aussi

LLM-as-JudgeMMLUBi-EncoderGSM8KHybrid SearchFactualityRerankerCitations