Termo do glossário de IA

O que é Penalidade de frequência?

Definição

Uma configuração de decodificação que reduz a probabilidade de tokens proporcionalmente à frequência com que apareceram até o momento.

Navegue pelo glossário completo de IAExplore todos os guias gratuitos de IA

Termos relacionados

Penalidade de presençaUma configuração de decodificação que reduz a probabilidade de aparecimento de tokens, incentivando novos tópicos.Pena de RepetiçãoUma configuração de decodificação que reduz a probabilidade de tokens que o modelo já produziu para reduzir loops.PerplexityUma métrica de modelo de linguagem que mede o quão surpreso o modelo fica com os próximos tokens verdadeiros.Amostragem Top-kUma estratégia de decodificação que faz amostras apenas dos k próximos tokens mais prováveis.Decodificação ProtegidaUma estratégia de geração que restringe tokens de saída a estruturas válidas ou escolhas compatíveis com políticas.Decodificação EspeculativaUm método de aceleração de inferência em que um modelo pequeno propõe tokens que um modelo maior verifica em paralelo.

Saiba mais em nossos guias gratuitos

Repetition Penalty and Decoding ControlsMel-Frequency Cepstral CoefficientsTime-Frequency Masking for Source SeparationHigh-Frequency Trading Explained

Veja também

Beam SearchParent-Document RetrievalMulti-Query RetrievalRAG-FusionSelf-PlayPost-trainingMid-trainingWatermarking