Глоссарий терминов искусственного интеллекта

Что такое Perplexity?

Определение

Метрика языковой модели, измеряющая, насколько модель удивлена ​​истинными следующими токенами.

Связанные термины

Пас@к
Метрика оценки кода, измеряющая вероятность того, что хотя бы один из k сгенерированных образцов пройдет тесты.
Контекстное окно
Максимальное количество входных токенов, которые языковая модель может обработать одновременно.
Топ-k выборка
Стратегия декодирования, которая производит выборку только из k наиболее вероятных следующих токенов.
Доверительный интервал
Статистический диапазон, который, вероятно, содержит истинное значение измеренного показателя модели.
Штраф за частоту
Настройка декодирования, которая снижает вероятность появления токенов пропорционально тому, как часто они появлялись на данный момент.
Штраф за присутствие
Настройка декодирования, которая снижает вероятность появления токенов вообще, поощряя новые темы.

Узнайте больше в наших бесплатных руководствах.

Mirostat Perplexity ControlPerplexity and Language MetricsPerplexity AI

См. также

Parameter-Efficient Fine-Tuning (PEFT)PipelineParameterPrecisionOverfittingPretrainingOpen-Source ModelPrompt
Просмотрите полный глоссарий AIИзучите все бесплатные руководства по искусственному интеллекту