Quiz collegato alla guida · Medio Livello
Quiz correttivo RAG (CRAG).
Test RAG correttivi: il valutatore di recupero, le azioni corrette, errate e ambigue, il perfezionamento della conoscenza e i compromessi di fallback della ricerca web.
Domanda 1 di 8
Quale debolezza principale del RAG standard affronta CRAG?
Anteprima di ogni domanda8 domande
Le risposte e le spiegazioni vengono visualizzate mentre rispondi al quiz.
- Quale debolezza principale del RAG standard affronta CRAG?
- Il generatore si fida di qualunque cosa restituisca il retriever
- Gli incorporamenti sono troppo piccoli
- I modelli non possono leggere documenti lunghi
- I database vettoriali sono troppo lenti
- Nel documento originale del CRAG, che tipo di modello fungeva da valutatore del recupero?
- Un grande generatore in stile GPT
- Un modello T5-large perfezionato
- Un indice BM25
- Un recensore umano
- Cosa fa CRAG quando tutti i documenti recuperati ottengono un punteggio basso?
- Risposte comunque dai documenti
- Restituisce un errore all'utente
- Li scarta, riscrive la query e utilizza la ricerca web
- Raddoppia il numero di documenti recuperati dallo stesso indice
- Qual è lo scopo della fase di scomposizione e ricomposizione?
- Per tradurre documenti in un'altra lingua
- Per comprimere gli incorporamenti
- Classificare le pagine web in base alla popolarità
- Per dividere i documenti in strisce e conservare solo i pezzi rilevanti
- Quando il valutatore non è sicuro della pertinenza, quale azione intraprende CRAG?
- Ambiguo: combina una conoscenza interna raffinata con i risultati web
- Corretto: utilizzare solo documenti interni
- Errato: utilizza solo i risultati web
- Fermati e chiedi all'utente di riformulare
- Quale affermazione su CRAG è un'idea sbagliata secondo la guida?
- Aggiunge costi e latenza
- Può avvolgere altri metodi RAG
- CRAG verifica che la risposta finale sia corretta
- Può utilizzare la ricerca web come fallback
- Qual è il compromesso derivante dalla fissazione di una soglia di pertinenza molto rigida?
- I documenti deboli passano più spesso
- Il fallback si attiva spesso, aggiungendo chiamate Web e latenza
- Il sistema smette di utilizzare un valutatore
- Le risposte diventano più brevi
- Perché registrare il percorso (corretto, ambiguo, errato) seguito da ciascuna query?
- È richiesto dalla licenza CRAG
- Addestra automaticamente il modello di incorporamento
- Elimina la necessità di soglie
- Rivela lacune di copertura nella base di conoscenza che vale la pena colmare