Тест, свързан с ръководство · Среден Ниво
Подсказващ тест за планиране и решаване
Проверява структурата на подканите „планирай след това изпълнявай“, грешките, към които е насочена, насоките за PS+ и границите на своите референтни доказателства.
Въпрос 1 на 8
Каква основна промяна прави подканянето „Планирай и решавай“ в стандартната последователност от нулеви изстрели?
Визуализирайте всеки въпрос8 въпроси
Отговорите и обясненията се появяват, докато отговаряте на теста.
- Каква основна промяна прави подканянето „Планирай и решавай“ в стандартната последователност от нулеви изстрели?
- Първо моли модела да изработи план, след което да го изпълни стъпка по стъпка
- Той прецизира модела на данни за планиране
- Той премахва изцяло разсъжденията стъпка по стъпка
- Изисква десетки обработени примери в подканата
- За справяне с кои специфични слабости на обикновената последователна мисъл е предназначена Планирай и решавай?
- Бавна скорост на извод и голямо използване на паметта
- Липсващи стъпки за разсъждение и грешки в изчисленията
- Токсични или предубедени резултати
- Неспособност за извеждане на каквото и да е разсъждение изобщо
- Какво добавя подобреният PS+ вариант към основната подкана за планиране и решаване?
- Втори езиков модел за оценка на отговора
- Достъп до API за калкулатор
- Инструкции за извличане на променливи, изчисляване на междинни резултати и обръщане на внимание на числата
- Изискване за отговор в JSON
- Ключово предимство на Планирай и решавай пред последователността от няколко изстрела е, че то:
- Винаги постига перфектна точност
- Изисква преквалификация на модела
- Работи само върху задачи за зрение
- Няма нужда от ръчно изработени примери в подканата
- На кой тип бенчмарк е оценен планирането и решаването?
- Бенчмаркове за аритметични и математически текстови задачи като GSM8K
- Набори от данни за класификация на изображения
- Корпуси за разпознаване на реч
- Задачи за сгъване на протеини
- Защо генерирането на план преди подробните стъпки обикновено помага на авторегресивен модел?
- Той изтрива оригиналния въпрос от контекста
- Подцелите на плана обуславят по-късните разсъждения, които моделът произвежда
- Той удвоява броя на параметрите на модела
- Превключва модела в режим без текст
- A prompt asks a model to list subgoals before solving a word problem. Which Plan-and-Solve stage does that implement?
- A few-shot worked example
- The final answer verification stage
- The planning stage that decomposes the task before execution
- A decoding-time beam search
- A PS+ prompt reminds the model to extract quantities and calculate intermediate results. What is the intent of those reminders?
- Replace the problem statement with demonstrations
- Change the model’s parameters during inference
- Guarantee every answer is correct
- Reduce calculation and step omissions by directing attention to variables and intermediate quantities