O que é Calibração?

Alinhar a confiança do usuário nos resultados da IA com a confiabilidade real do sistema em cada tarefa.

O desempenho de um modelo em dados novos e não vistos fora do conjunto de treinamento.

Com que precisão as afirmações de um modelo correspondem às informações verificáveis do mundo real.

Uma função objetivo comum usada para treinar modelos de classificação penalizando probabilidades incorretas.

Um intervalo estatístico que provavelmente contém o valor real de uma métrica de modelo medida.

Um modelo que pontua uma consulta e um documento em uma única passagem para julgamentos de relevância de alta precisão.