Викторина, связанная с руководством · Жесткий Уровень

Точная настройка моделей внедрения для поисковой викторины

Тестирует пары положительных и отрицательных результатов, контрастные потери для встраивания обучения, а также способы измерения и предотвращения ложноотрицательных результатов при извлечении RAG.

Вопрос 1 из 8

Что является серьезным минусом во внедрении тонкой настройки?

Предварительный просмотр каждого вопроса8 вопросы

Ответы и пояснения появляются по мере прохождения теста.

  1. Что является серьезным минусом во внедрении тонкой настройки?
    • A passage that looks relevant to the query but does not answer it
    • A passage from a different language
    • Any randomly chosen passage
    • A query with no answer
  2. Почему жесткие негативы более полезны, чем легкие негативы?
    • They are cheaper to store
    • The base model already separates easy negatives, so hard ones teach new distinctions
    • They remove the need for positives
    • They shorten training time to zero
  3. Что такое ложноотрицательный результат в данном контексте?
    • A positive pair with a typo
    • A mined negative that actually does answer the query
    • A query that retrieves nothing
    • A vector with all zeros
  4. Какая потеря обычно используется для обучения моделей внедрения на парах запрос-проход?
    • Mean squared error on token counts
    • A contrastive loss such as InfoNCE (MultipleNegativesRankingLoss)
    • Cross-entropy on next-word prediction only
    • Hinge loss on image pixels
  5. Что нужно сделать с индексом документа после перехода на новую, точно настроенную модель внедрения?
    • Nothing; old vectors still work
    • Re-embed the entire collection with the new model
    • Delete half the documents
    • Convert vectors to text
  6. Which alternative might give larger gains than fine-tuning with less effort?
    • Removing all metadata
    • Improving chunking, adding BM25 hybrid search or a reranker
    • Using a smaller context window
    • Lowering the embedding dimension to 2
  7. Which metrics does the guide recommend for evaluating retrieval?
    • BLEU and ROUGE
    • recall@k and nDCG@10
    • Perplexity only
    • Training loss only
  8. Why should synthetic questions generated from documents be filtered?
    • They are always in the wrong language
    • They often copy the document's wording, making the task too easy
    • They cannot be embedded
    • They violate the loss function