Глоссарий терминов искусственного интеллекта

Что такое Выборка Top-p (ядра)?

Определение

Стратегия декодирования, которая производит выборку из наименьшего набора токенов, сумма вероятностей которых равна p.

Просмотрите полный глоссарий AIИзучите все бесплатные руководства по искусственному интеллекту

Связанные термины

Топ-k выборкаСтратегия декодирования, которая производит выборку только из k наиболее вероятных следующих токенов.Защищенное декодированиеСтратегия генерации, которая ограничивает выходные токены допустимыми структурами или вариантами, совместимыми с политикой.РеранкерМодель, которая изменяет порядок исходного набора полученных результатов, чтобы наиболее релевантные элементы располагались вверху.Поиск лучаАлгоритм декодирования, который сохраняет несколько верхних последовательностей-кандидатов на каждом этапе для поиска выходных данных с более высокой вероятностью.ТемператураНастройка выборки, контролирующая случайность генерируемых выходных данных.ТокенФрагмент текста, обрабатываемый языковыми моделями, например фрагмент слова или символ.

Узнайте больше в наших бесплатных руководствах.

Typical SamplingSpeculative Sampling VerificationEntropy-Based SamplingEarly Stopping

См. также

Transfer LearningTool UseTransformerTokenizationTraining LossUnsupervised LearningValidation SetSystem Prompt