À suivreGuide suivant
Suppression non maximale
IA visuelle
GUIDE IA du langage
Pertinence marginale maximale
La pertinence marginale maximale (MMR) est une méthode de reclassement qui équilibre la pertinence d'un résultat par rapport à sa différence par rapport aux résultats déjà choisis.
Écoutez ce guideNarré par l'IA · ~2 min
Sur cette page2 minutes de lecture
Aperçu
C'est important car le classement par pertinence pure renvoie souvent des passages quasi-dupliqués qui gaspillent de l'espace dans une fenêtre contextuelle RAG.
Plongée profonde
Lorsqu'un système de recherche classe les documents uniquement en fonction de leur pertinence par rapport à une requête, les premiers résultats sont souvent redondants : cinq passages disent tous la même chose. MMR, introduit par Carbonell et Goldstein en 1998, corrige ce problème en sélectionnant les résultats un par un. À chaque étape, il sélectionne le candidat qui maximise un mélange pondéré : lambda multiplié par sa pertinence par rapport à la requête, moins (1 moins lambda) multiplié par sa similarité maximale avec tout ce qui est déjà sélectionné. Un lambda proche de 1 favorise la pertinence pure ; proche de 0, il favorise la diversité. Dans la génération augmentée par récupération, MMR est populaire pour récupérer un ensemble varié de morceaux afin que le modèle de langage voit des preuves complémentaires plutôt que la répétition du même fait, améliorant ainsi la couverture sans élargir le contexte.
Mise en œuvre dans le monde réel
Un chatbot RAG utilise la récupération MMR afin que ses 5 principaux morceaux couvrent différents aspects d'une politique au lieu de cinq paraphrases du même paragraphe.
Un outil de synthèse de recherche applique le MMR pour sélectionner des passages qui minimisent les chevauchements, produisant ainsi un résumé plus large et moins répétitif.
Un agrégateur de nouvelles classe les articles avec MMR pour montrer une couverture variée d'un événement plutôt que dix médias répétant une seule histoire.
Le récupérateur de magasin vectoriel de LangChain expose search_type='mmr' avec fetch_k et lambda_mult pour diversifier les documents renvoyés.
L’avenir de la pertinence marginale maximale
MMR reste un défaut léger dans les clients de bases de données vectorielles comme LangChain et Chroma, où il est proposé en mode de récupération sur une seule ligne. Les systèmes futurs l'associent de plus en plus à des objectifs de diversité apprise, à une sélection basée sur des clusters et à des reclassements de codeurs croisés qui jugent la nouveauté de manière plus sémantique que la distance cosinusoïdale. À mesure que les fenêtres contextuelles s’agrandissent, l’accent passe de l’économie d’espace à la conservation de preuves véritablement complémentaires, en gardant pertinente une sélection soucieuse de la diversité comme le MMR, même lorsque la capacité brute est abondante.
Le mettre en pratique
Pourquoi c'est important
- Vitesse et échelle. Les flux de travail linguistiques peuvent évoluer plus rapidement sans sacrifier la cohérence.
- Accès et portée. Il étend l’accès à toutes les langues et styles de communication.
- Décisions plus claires. Les équipes peuvent consacrer plus de temps au jugement tandis que l’automatisation gère les répétitions.
Attention à
- Les faits hallucinés peuvent discrètement entrer dans des rapports, des flux de support ou des résultats de recherche.
- La sensibilité des invites peut créer des résultats incohérents pour des demandes similaires.
- Les données textuelles sensibles peuvent être exposées si les contrôles d’accès sont faibles.
Prochaines étapes
- Définissez le format de sortie, le ton et les normes de qualité avant le déploiement.
- Établissez des réponses auprès de sources fiables chaque fois que la précision est importante.
- Gardez un point de contrôle d’examen humain pour les résultats à enjeux élevés.
- Suivez les modèles de défaillance et recyclez régulièrement les invites ou les flux de travail.
Continuez à explorer
Newsletter gratuite
Recevez le briefing quotidien sur l'IA
Trois histoires d'IA vérifiées chaque matin de la semaine, écrites dans un anglais simple. Gratuit pour toujours, sans publicité.
Un e-mail chaque jour de la semaine. Désabonnez-vous en un clic. Nous ne vendons ni ne partageons jamais votre adresse.
Testez-vous
Take the Maximum Marginal Relevance quiz
Commentaires instantanés sur chaque réponse et un certificat partageable avec une pièce d'identité vérifiable une fois que vous avez réussi un cours.
Soutenez l’enseignement gratuit de l’IA. AI Understanding est une organisation à but non lucratif 501(c)(3) : pas de publicité, pas de paywall, jamais. Faire un don
Questions fréquemment posées
Qu’est-ce que la pertinence marginale maximale ?
La pertinence marginale maximale (MMR) est une méthode de reclassement qui équilibre la pertinence d'un résultat par rapport à sa différence par rapport aux résultats déjà choisis. C'est important car le classement par pertinence pure renvoie souvent des passages quasi-dupliqués qui gaspillent de l'espace dans une fenêtre contextuelle RAG.
Quel est le principal problème que le MMR est censé résoudre ?
MMR répond à la tendance du classement axé uniquement sur la pertinence à faire apparaître de nombreux résultats qui disent essentiellement la même chose, en récompensant la nouveauté.
Dans la formule MMR, que souligne une valeur lambda proche de 1 ?
Pertinence des pondérations lambda ; près de 1, le terme de pertinence domine, tandis que près de 0, le terme de diversité (faible similarité) domine.
Comment MMR sélectionne-t-il ses résultats ?
Le MMR est une méthode itérative gourmande : chaque sélection maximise la pertinence moins la similarité maximale avec les éléments déjà choisis.
How can an embedding-based MMR implementation measure query relevance and document redundancy?
The general algorithm permits suitable similarity functions; cosine is a common choice for vector representations.
Pourquoi le MMR est-il particulièrement utile dans la génération augmentée par récupération (RAG) ?
En diversifiant les morceaux récupérés, MMR aide le modèle à voir des preuves variées plutôt que la répétition du même fait, améliorant ainsi la couverture.
Continuez à apprendre
Guides associés
Plus de guides sélectionnés pour ce sujet