MMLU読み: えむえむえるゆー

MMLUとは（詳しく解説）

MMLU (Massive Multitask Language Understanding) は LLM の知識量を測る代表的ベンチマークで、 57 分野 (数学 / 法律 / 医学 / 歴史 等) の選択式問題 約 1.5 万問。 2026 年現在、 GPT-5 / Claude Opus 4.7 / Gemini Ultra が 89-92% 前後で人間専門家平均 (89.8%) を超えた。 ただし モデルが学習データで MMLU の問題を見ている可能性 (リーク問題) が指摘され、 上位モデル間の比較指標としては飽和。 後継として MMLU-Pro / GPQA が登場している。 AI PICKS では LLM 比較記事で 必ず MMLU + 後継指標を併記している。

MMLUに関連するAIツール

MMLUの関連記事

ガイド9/15 更新14分で読めますAIのべりすとの代替AI小説ツール7選、無料枠と日本語性能で選ぶ (2026年版)AIのべりすとの無料枠は1回の出力が約150〜210文字で、最大180分の待機も発生します。代替7ツールを無料枠・日本語性能・商用利用の3軸で整理し、汎用AIは月3,000円前後、オープンソースのローカル実行なら0円という費用感まで比較。目的別の選び方も決めました。ChatGPTClaudeGemini

ガイド8/20 更新13分で読めますGemini無料トライアルの登録手順と期間 クレカ無しで使う方法 (2026年版)Gemini無料トライアルの登録手順を5ステップで整理しました。期間の考え方、クレジットカードなしで始める3つの方法、自動課金を止める解約タイミング、2026年の料金プラン早見表まで網羅。無料プランだけで足りるかどうかの判断材料もまとめています。GeminiChatGPTClaude

ガイド10/19 更新14分で読めますChatGPTのカスタム指示のおすすめ例10選｜コピペ用の最強1セット (2026年版)ChatGPTのカスタム指示の設定場所と書き方、コピペで使えるおすすめ例10選、そのまま貼れる最強の1セットをまとめました。2026年の設定画面にある選択式のトーン設定との違い、各欄1,500文字の上限、効かないときの切り分け、メモリ・Projectsとの使い分けまで整理します。ChatGPTClaudeGemini