Hva er MMLU?

Bruke en språkmodell for å score eller sammenligne resultater fra andre modeller under evaluering.

En målestokk for matematikkordproblemer på grunnskolen som brukes til å evaluere trinnvise resonnementer i språkmodeller.

Lagret kontekst en AI-agent bruker på tvers av trinn eller økter for å forbedre kontinuiteten.

En modell som kan behandle eller generere flere datatyper som tekst, bilde og lyd.

En sentral katalog for versjonering, godkjenning og sporing av modeller på tvers av miljøer.

Et hypotetisk AI-system som kan utføre de fleste intellektuelle oppgaver på menneskelig nivå på tvers av mange domener.