Cos'è MMLU?

Utilizzare un modello linguistico per valutare o confrontare i risultati di altri modelli durante la valutazione.

Un punto di riferimento per i problemi di parole matematiche delle scuole elementari utilizzato per valutare il ragionamento passo dopo passo nei modelli linguistici.

Contesto archiviato che un agente AI utilizza attraverso passaggi o sessioni per migliorare la continuità.

Un modello in grado di elaborare o generare più tipi di dati come testo, immagine e audio.

Un catalogo centrale per il controllo delle versioni, l'approvazione e il monitoraggio dei modelli nei vari ambienti.

Un ipotetico sistema di intelligenza artificiale in grado di eseguire la maggior parte dei compiti intellettuali a livello umano in molti domini.