とは何ですか MMLU?

言語モデルを使用して、評価中に他のモデルからの出力をスコアリングまたは比較します。

言語モデルにおける段階的な推論を評価するために使用される、小学校の算数の文章題のベンチマーク。

AI エージェントが継続性を向上させるためにステップまたはセッション全体で使用する保存されたコンテキスト。

テキスト、画像、音声などの複数のデータ型を処理または生成できるモデル。

環境全体でモデルのバージョン管理、承認、追跡を行うための中央カタログ。

多くの領域にわたって人間レベルでほとんどの知的タスクを実行できる仮説的な AI システム。