СледваСледващо ръководство
Търсене с насочен лъч с ограничения
Езиков AI
Език AI РЪКОВОДСТВО
Beam search is a decoding algorithm that retains a fixed number of high-scoring partial sequences at each step.
Чуйте това ръководствоAI-разказан · ~2 min
It is used in sequence generation tasks, with results shaped by model scores and any normalization or penalties.
At each decoding step, beam search expands the current partial candidates and retains the top-scoring continuations. A wider beam explores more options but increases search cost and does not necessarily improve perceived quality. GNMT uses length normalization to mitigate short-output bias and a coverage penalty to encourage source-word coverage in translation. Diverse beam search modifies group selection to reduce redundant candidates.
A beam of width k keeps up to k partial sequences rather than only one greedy continuation.
GNMT used length normalization and a coverage penalty in its translation system.
Diverse beam search adds a penalty to reduce overlap among candidate sequences from beam groups.
For open-ended text, compare beam outputs with sampling because likelihood-ranked outputs can be repetitive or bland in the evaluated settings.
Select decoding criteria for the task and measure both search cost and output quality. For translation, report source coverage and reference-based metrics; for open-ended generation, include human evaluation where appropriate. The cited sources describe particular methods and experiments rather than a single universally best beam configuration.
Безплатен бюлетин
Три проверени AI истории всяка делнична сутрин, написани на достъпен език. Безплатно завинаги, без реклами.
Един имейл всеки делничен ден. Отписване с едно кликване. Никога не продаваме и не споделяме вашия имейл адрес.
Тествайте себе си
Незабавна обратна връзка за всеки отговор и сертификат за споделяне с подлежащ на проверка идентификационен номер, след като преминете курс.
Подкрепете безплатното AI образование. AI Understanding е 501(c)(3) с нестопанска цел — без реклами, без платен достъп, никога. Направете дарение
Beam search is a decoding algorithm that retains a fixed number of high-scoring partial sequences at each step. It is used in sequence generation tasks, with results shaped by model scores and any normalization or penalties.
Ширината на лъча е броят на горните частични последователности, задържани и разширени на всяка стъпка; по-големите ширини изследват повече кандидати.
Алчното декодиране отнема само горния токен на всяка стъпка; хеджиране при търсене на лъч чрез проследяване на няколко обещаващи последователности едновременно.
Всеки допълнителен токен добавя отрицателна логаритмична вероятност, така че без нормализиране по-късите последователности дават по-висок резултат несправедливо.
Beam search превъзхожда, когато целта е едно точно, плавно изобразяване, поради което стана стандарт за превод.
Контраинтуитивно, по-широките лъчи в генерирането на невронен текст често предпочитат общи, повтарящи се последователности, а не интересни.
Продължавай да учиш
Още ръководства, избрани за тази тема
СледваСледващо ръководство
Търсене с насочен лъч с ограничения
Езиков AI