Il prossimoProssimamente in Costruire con Sistemi di IA
Database vettoriali
Tecnico
GUIDA ALL'AI linguistica
La qualità del recupero misura se un sistema di ricerca restituisce prove utili per una query e le colloca dove un lettore o un modello downstream può utilizzarle.
Ascolta questa guidaNarrato dall'IA · ~2 min
Pertinenza, copertura, freschezza e autorizzazione sono tutte questioni importanti. Un punteggio di somiglianza elevato da solo non dimostra che un passaggio risponde alla domanda.
Define relevance with the intended task in mind. A document about a product may be topically related but fail to answer a specific question about a version or date. Label examples of fully supporting evidence, partial evidence, and irrelevant material. Measure the candidate set and ranking separately. Recall at a chosen cutoff asks how much relevant material was retrieved; precision asks how much of the retrieved material is relevant. Rank-aware metrics assess whether the best evidence appears early. State the cutoff and labeling method with every score. Inspect failure patterns: exact identifiers missed by semantic search, synonyms missed by keyword search, outdated documents ranked above current ones, or passages cut away from their qualifications. Hybrid retrieval and reranking can help some cases, but must be evaluated on the same fixed examples. Include access restrictions and unanswerable queries in the test set. A system should not improve apparent relevance by returning unauthorized documents. When no adequate evidence exists, measure whether the application communicates that limitation instead of producing an unsupported answer.
04Esempio lavorato
In una raccolta costruita, quattro passaggi rispondono a una domanda. Una ricerca restituisce cinque passaggi, di cui tre rilevanti.
La precisione al cinque è 3/5 = 60%; il ricordo alle cinque è 3/4 = 75%.
Ispeziona il passaggio rilevante mancante e i due risultati irrilevanti prima di scegliere un cambio di accordatura.
Cosa mostra
Questi conteggi inventati mostrano due diverse proprietà di recupero; nessuno dei due da solo misura la correttezza della risposta finale.
Prova il recupero di un codice ordine esatto e una domanda di supporto parafrasata.
Controlla se le versioni attuali delle policy superano quelle archiviate.
Newsletter gratuita
Tre storie verificate sull'IA ogni mattina nei giorni feriali, scritte in un inglese semplice. Gratuito per sempre, senza pubblicità.
Un'email ogni giorno feriale. Disiscriviti con un clic. Non vendiamo né condividiamo mai il tuo indirizzo.
Mettiti alla prova
Feedback immediato su ogni risposta e un certificato condivisibile con un ID verificabile una volta superato un corso.
Sostieni l'istruzione gratuita sull'IA. AI Understanding è un'organizzazione non profit 501(c)(3) — nessun annuncio, nessun paywall, mai. Fai una donazione
No. Più passaggi potrebbero migliorare la copertura ma anche aggiungere un contesto irrilevante o conflittuale. Misurare il compromesso nell'applicazione completa.
Continua a imparare
Altre guide selezionate per questo argomento
Il prossimoProssimamente in Costruire con Sistemi di IA
Database vettoriali
Tecnico