AWS、「Amazon Bedrock」のOpenAIモデルを実測比較 正解1件0.0021ドルでLunaが最安
- AWSが「Amazon Bedrock」で動くOpenAIモデルの実測比較を公開しました。
- 7月30日の値下げ後、AIMEの正解1件あたりは0.0021ドルでした。
- 生成AIのモデル選びで費用を抑えたい企業の担当者が対象です。
AWSが、機械学習ブログで「Amazon Bedrock」上のOpenAIモデルの実測比較を公開しました。1トークンあたりの単価ではなく、正解1件にいくらかかったかを測っています。
比べたのは「Amazon Bedrock」で動くgpt-5.6-luna、gpt-5.6-terra、gpt-5.6-solです。これにOpenAI APIのgpt-5.4-mini、gpt-5.4-nanoを加えました。数学コンテストのAIME、大学院レベルの科学問題GPQA Diamond、MMLU-Proで正答率と費用を測っています。採点は自動チェックとgpt-5.5による採点の組み合わせです。
AIMEの正答率はsolが75%、miniが37%でした。GPQA Diamondは68%と43%、MMLU-Proは82%と59%です。2026年7月30日にlunaが80%、terraが20%値下げされました。これを反映すると、AIMEの正解1件あたりの費用はlunaが0.0021ドル、miniが0.0139ドルです。
「Amazon Bedrock」側は推論 (答えを出す前に考える処理) を切って動かし、OpenAI API側は初期設定のまま動かしています。対象の問題数は48件から198件で、小さな差は目安として読む前提です。検証に使った仕組みはオープンソースで置かれており、自社の業務タスクで同じ測り方を試せます。
つまり、AIのモデルは「1トークンいくら」で比べても実際の請求額は読めない、という話です。安いモデルほど間違いが混ざり、やり直した分だけ費用が積み上がります。そこで正解1件にいくらかかったかで測り直すと、安いはずのモデルが最安ではなくなりました。電卓を安く買っても、打ち間違いが多ければ結局やり直しの手間がかかるのと似ています。
モデル比較の記事なのに、最初に出てくるのが単価表への疑いでした。筆者はこの切り出し方をちょっと意外に感じています。
安いモデルほど間違えます。やり直した分は、そのまま請求に乗ります。当たり前のようでいて、稟議に出てくるのはたいてい単価の方。値下げ幅よりも、正解1件あたりの費用を持っていった方が話は早そうです。
単価競争から、成果あたりの費用へ。検証の仕組みをオープンソースで置いてきたのは、かなり実務寄りの姿勢だと思います。同じ指標を持ち出す競合も、そのうち出てきそうです。
次の値下げ発表で、各社が正解1件あたりの費用まで添えてくるかを見たいところです。
生成AIの導入費用を見積もっている人は、単価表ではなく自社の業務で正解1件にいくらかかるかを測れるようになります。
