Глоссарий терминов искусственного интеллекта

Что такое Perplexity?

Определение

Метрика языковой модели, измеряющая, насколько модель удивлена ​​истинными следующими токенами.

Просмотрите полный глоссарий AIИзучите все бесплатные руководства по искусственному интеллекту

Связанные термины

Пас@кМетрика оценки кода, измеряющая вероятность того, что хотя бы один из k сгенерированных образцов пройдет тесты.Контекстное окноМаксимальное количество входных токенов, которые языковая модель может обработать одновременно.Топ-k выборкаСтратегия декодирования, которая производит выборку только из k наиболее вероятных следующих токенов.Доверительный интервалСтатистический диапазон, который, вероятно, содержит истинное значение измеренного показателя модели.Штраф за частотуНастройка декодирования, которая снижает вероятность появления токенов пропорционально тому, как часто они появлялись на данный момент.Штраф за присутствиеНастройка декодирования, которая снижает вероятность появления токенов вообще, поощряя новые темы.

Узнайте больше в наших бесплатных руководствах.

Mirostat Perplexity ControlPerplexity and Language MetricsPerplexity AI

См. также

Parameter-Efficient Fine-Tuning (PEFT)PipelineParameterPrecisionOverfittingPretrainingOpen-Source ModelPrompt