Quiz połączony z przewodnikiem · Średni Poziom

Korygujący quiz RAG (CRAG).

Testy Korygujące RAG: narzędzie do oceny wyszukiwania, działania prawidłowe, nieprawidłowe i niejednoznaczne, udoskonalanie wiedzy i kompromisy związane z wyszukiwaniem internetowym.

Powiązane ścieżki prowadząceKorygujące RAG
Pytanie 1 z 8

Jaką podstawową słabość standardowego RAG rozwiązuje CRAG?

Podgląd każdego pytania8 pytania

Odpowiedzi i wyjaśnienia pojawiają się w miarę rozwiązywania quizu.

  1. Jaką podstawową słabość standardowego RAG rozwiązuje CRAG?
    • Generator ufa wszystkiemu, co zwraca retriever
    • Osadzenia są za małe
    • Modelki nie potrafią czytać długich dokumentów
    • Bazy danych wektorowych są zbyt wolne
  2. Jaki model służył jako ewaluator wyszukiwania w oryginalnej pracy CRAG?
    • Duży generator w stylu GPT
    • Dopracowany, duży model T5
    • Indeks BM25
    • Recenzent-człowiek
  3. Co robi CRAG, gdy wszystkie odzyskane dokumenty mają niską ocenę?
    • W każdym razie odpowiedzi z dokumentów
    • Zwraca błąd użytkownikowi
    • Odrzuca je, przepisuje zapytanie i korzysta z wyszukiwarki internetowej
    • Podwaja liczbę pobranych dokumentów z tego samego indeksu
  4. Jaki jest cel kroku rozkładania, a następnie ponownego komponowania?
    • Aby przetłumaczyć dokumenty na inny język
    • Aby skompresować elementy osadzone
    • Aby uszeregować strony internetowe według popularności
    • Aby podzielić dokumenty na paski i zachować tylko istotne fragmenty
  5. Kiedy oceniający nie jest pewien co do trafności, jakie działania podejmuje CRAG?
    • Niejednoznaczny: połącz wyrafinowaną wiedzę wewnętrzną z wynikami internetowymi
    • Poprawnie: używaj wyłącznie dokumentów wewnętrznych
    • Źle: używaj tylko wyników z Internetu
    • Zatrzymaj się i poproś użytkownika o przeformułowanie
  6. Które stwierdzenie na temat CRAG jest według przewodnika błędnym przekonaniem?
    • Zwiększa koszty i opóźnienia
    • Może zawijać inne metody RAG
    • CRAG sprawdza, czy ostateczna odpowiedź jest poprawna
    • Może używać wyszukiwania internetowego jako rozwiązania awaryjnego
  7. Jaki jest kompromis w postaci ustalenia bardzo rygorystycznego progu trafności?
    • Słabe dokumenty przepływają częściej
    • Często uruchamia się funkcja powrotu, co zwiększa liczbę połączeń internetowych i opóźnienia
    • System przestaje korzystać z modułu oceniającego
    • Odpowiedzi stają się krótsze
  8. Po co rejestrować ścieżkę (poprawną, niejednoznaczną, niepoprawną) dla każdego zapytania?
    • Wymaga tego licencja CRAG
    • Automatycznie trenuje model osadzania
    • Eliminuje to potrzebę stosowania progów
    • Ujawnia luki w bazie wiedzy, które warto naprawić