O que é Intervalo de confiança?

Uma métrica de modelo de linguagem que mede o quão surpreso o modelo fica com os próximos tokens verdadeiros.

Quão bem as pontuações de confiança de um modelo correspondem às probabilidades reais de correção.

Os recursos de processamento necessários para treinar e executar modelos, geralmente medidos em FLOPS ou horas de GPU.

Uma previsão incorreta em que um modelo perde um caso verdadeiro positivo.

Um valor de configuração definido antes do treinamento, como taxa de aprendizagem, tamanho do lote ou profundidade.

Uma estratégia de decodificação que faz amostras apenas dos k próximos tokens mais prováveis.