Cos'è Valutazione umana?

Un test o un set di dati standardizzato utilizzato per misurare e confrontare le prestazioni del modello.

Un punto di riferimento per i problemi di parole matematiche delle scuole elementari utilizzato per valutare il ragionamento passo dopo passo nei modelli linguistici.

Un set di dati conservato utilizzato per misurare la qualità del modello dopo l'addestramento.

Calcolo di inferenza aggiuntivo utilizzato durante la generazione della risposta per migliorare la qualità o il ragionamento.

Una metrica di valutazione del codice che misura la possibilità che almeno uno dei k campioni generati superi i test.

Politiche, standard e meccanismi di supervisione che guidano il modo in cui l’intelligenza artificiale viene sviluppata e utilizzata nella società.