À suivreGuide suivant
RAG spéculatif et rédaction augmentée par récupération
Technique
GUIDE IA du langage
Self-RAG learns when to retrieve and uses reflection tokens to assess passages and generated segments.
Écoutez ce guideNarré par l'IA · ~2 min
These critiques can guide generation, but they are model predictions rather than independent proof that an answer is correct.
Self-RAG, introduced by Asai and colleagues in 2023, interleaves generation with learned retrieval and critique decisions. Retrieve tokens indicate whether external passages should be fetched. IsRelevant evaluates a passage's relevance; IsSupported predicts whether the generated segment is supported; IsUseful assesses response utility. The method can make retrieval decisions as generation progresses, rather than using only one fixed retrieval step for the whole response. It is compared with fixed-retrieval baselines in the paper, not proof that every other RAG system always retrieves or never checks evidence. Critiques influence candidate selection and can improve results in studied settings, but predicted support can be mistaken and still needs evaluation.
Comparing adaptive retrieval with a baseline that retrieves for every input.
Using predicted passage relevance to score alternative evidence contexts.
Weighting predicted support when choosing generated answer segments.
Evaluating support judgments against independently checked references.
La récupération réflexive converge avec le RAG agentique, où les modèles planifient des recherches en plusieurs étapes, appellent des outils et s'autocorrigent au fil des itérations. Attendez-vous à une intégration plus étroite de l'autocritique avec les modèles de vérification, à la récupération via des graphiques de connaissances et à un apprentissage par renforcement qui récompense les réponses fidèles et bien citées. À mesure que les modèles de raisonnement mûrissent, la récupération à la demande et auto-évaluée deviendra probablement un comportement par défaut plutôt qu'un cadre distinct, le modèle décidant de manière dynamique de la quantité de preuves requise par chaque affirmation.
Newsletter gratuite
Trois histoires d'IA vérifiées chaque matin de la semaine, écrites dans un anglais simple. Gratuit pour toujours, sans publicité.
Un e-mail chaque jour de la semaine. Désabonnez-vous en un clic. Nous ne vendons ni ne partageons jamais votre adresse.
Testez-vous
Commentaires instantanés sur chaque réponse et un certificat partageable avec une pièce d'identité vérifiable une fois que vous avez réussi un cours.
Soutenez l’enseignement gratuit de l’IA. AI Understanding est une organisation à but non lucratif 501(c)(3) : pas de publicité, pas de paywall, jamais. Faire un don
Self-RAG learns when to retrieve and uses reflection tokens to assess passages and generated segments. These critiques can guide generation, but they are model predictions rather than independent proof that an answer is correct.
Retrieve tokens support adaptive retrieval. Other RAG designs may also be adaptive, so this contrast is scoped to the fixed-retrieval baseline.
Les jetons de réflexion comme IsRelevant, IsSupported et IsUseful permettent au modèle de critiquer les passages et sa propre sortie.
The token is a model-generated support judgment that can guide generation but may be wrong.
Self-RAG apprend à partir de données de formation annotées avec des jetons de réflexion, fréquemment générés par un modèle d'enseignant plus performant tel que GPT-4.
En critiquant la pertinence de chaque passage, Self-RAG peut ignorer les extractions hors sujet au lieu de les intégrer dans la réponse.
Continuez à apprendre
Plus de guides sélectionnés pour ce sujet
À suivreGuide suivant
RAG spéculatif et rédaction augmentée par récupération
Technique