Kvíz spojený s průvodcem · Těžko úroveň

Kvíz Cache-Augmented Generation (CAG).

Otestujte si, jak rozumíte generování rozšířeným o mezipaměť: jak jsou KV mezipaměti předem načteny a znovu použity, resetování mezipaměti mezi dotazy a limity velikosti korpusu.

Související vodicí cestyRozšířená generace mezipaměti
Otázka 1 z 8

Co používá CAG místo načítání podle dotazu?

Náhled každé otázky8 otázky

Odpovědi a vysvětlení se zobrazují, jak budete v kvízu.

  1. Co používá CAG místo načítání podle dotazu?
    • A keyword search engine
    • Fine-tuning the model on the documents
    • A new vector index per question
    • Preloading the whole knowledge base into the KV cache once and reusing it
  2. Co je KV cache v transformátoru?
    • A database of user accounts
    • The stored attention keys and values computed for tokens the model has already read
    • A list of document URLs
    • The model's trained weights
  3. Proč systém CAG zkrátí mezipaměť po každé odpovědi?
    • To save the answer for training
    • To delete the documents permanently
    • To restore the documents-only state so the next query does not see the previous question and answer
    • To switch to a different model
  4. Jaké je hlavní omezení CAG?
    • The entire corpus must fit in the model's context window
    • It requires a vector database
    • It cannot answer questions quickly
    • Mění váhy modelu
  5. Proč CAG odpovídá rychleji než vkládání dokumentů do každého požadavku?
    • It skips generating output tokens
    • The model only needs to compute the new question tokens on top of the cached prefix
    • Používá menší model
    • It retrieves fewer documents
  6. Which knowledge base is the best fit for CAG?
    • A news archive updated every hour
    • Millions of customer records with per-user permissions
    • An entire web crawl
    • A small, stable product manual that rarely changes
  7. Which statement about CAG is a misconception?
    • CAG removes retrieval errors because all documents are present
    • Changing documents requires rebuilding the cache
    • CAG fine-tunes the model's weights on the documents
    • Hosted prompt caching is related to the idea
  8. Which techniques reduce the memory needed for a large KV cache?
    • Grouped-query attention and cache quantization
    • Přidání více hlav pozornosti
    • Using longer prompts
    • Raising the sampling temperature