Викторина, связанная с руководством · Жесткий Уровень
Точная настройка моделей внедрения для поисковой викторины
Тестирует пары положительных и отрицательных результатов, контрастные потери для встраивания обучения, а также способы измерения и предотвращения ложноотрицательных результатов при извлечении RAG.
Вопрос 1 из 8
Что является серьезным минусом во внедрении тонкой настройки?
Предварительный просмотр каждого вопроса8 вопросы
Ответы и пояснения появляются по мере прохождения теста.
- Что является серьезным минусом во внедрении тонкой настройки?
- A passage that looks relevant to the query but does not answer it
- A passage from a different language
- Any randomly chosen passage
- A query with no answer
- Почему жесткие негативы более полезны, чем легкие негативы?
- They are cheaper to store
- The base model already separates easy negatives, so hard ones teach new distinctions
- They remove the need for positives
- They shorten training time to zero
- Что такое ложноотрицательный результат в данном контексте?
- A positive pair with a typo
- A mined negative that actually does answer the query
- A query that retrieves nothing
- A vector with all zeros
- Какая потеря обычно используется для обучения моделей внедрения на парах запрос-проход?
- Mean squared error on token counts
- A contrastive loss such as InfoNCE (MultipleNegativesRankingLoss)
- Cross-entropy on next-word prediction only
- Hinge loss on image pixels
- Что нужно сделать с индексом документа после перехода на новую, точно настроенную модель внедрения?
- Nothing; old vectors still work
- Re-embed the entire collection with the new model
- Delete half the documents
- Convert vectors to text
- Which alternative might give larger gains than fine-tuning with less effort?
- Removing all metadata
- Improving chunking, adding BM25 hybrid search or a reranker
- Using a smaller context window
- Lowering the embedding dimension to 2
- Which metrics does the guide recommend for evaluating retrieval?
- BLEU and ROUGE
- recall@k and nDCG@10
- Perplexity only
- Training loss only
- Why should synthetic questions generated from documents be filtered?
- They are always in the wrong language
- They often copy the document's wording, making the task too easy
- They cannot be embedded
- They violate the loss function