モデル × effort の一覧表

1 行がモデルと effort の組み合わせ、列が各ベンチマークのスコアです。値は出典へのリンクです。列の見出しを押すと並べ替えます。出典区分や測定条件(比較グループ)の違う値は混ぜずに並べます。並べ替えには、その列で先にある区分(公式 → 第三者 → 論文)のうち値の最も多い比較グループの値を使い、その値が無い行は末尾に回します。

  • 公式 公式発表
  • 第三者 第三者の計測
  • 論文 論文
  • ≈グラフから読み取った近似値
  • 計測・報告: 出典に記載のある、値を計測または報告した主体(記載のある値だけ)

183 行

モデル × effort ごとのベンチマークスコア
%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%Elo・並べ替えは公式の値EloElo・並べ替えは公式の値Elo%%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値%%・並べ替えは公式の値%・並べ替えは公式の値%%スコアスコアスコア%%スコア%%スコアスコア%スコア%スコア%%%%%%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値%スコアスコア%%%%%%%%%スコアEloElo%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値スコア・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値%・並べ替えは公式の値スコア・並べ替えは公式の値%・並べ替えは公式の値%%%%・並べ替えは第三者の値%%
Claude Fable 5.2Anthropic・記載なし記載なし———74.6%公式計測・報告: Anthropic——69.9%公式計測・報告: Anthropic—————1,785公式計測・報告: Anthropic—66.1%公式計測・報告: Anthropic51.4%公式計測・報告: Anthropic—————89.3%公式計測・報告: Anthropic——————————————64.9%公式計測・報告: Anthropic——————————————————————————————————————173.44第三者計測・報告: Epoch AI————————————————————————————
Claude Fable 5.2Anthropic・LowLow—————34.2%公式計測・報告: Anthropic——————————68.4%公式計測・報告: Anthropic——————————64.2%公式計測・報告: Anthropic—71.4%公式計測・報告: Anthropic26.9公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Fable 5.2Anthropic・MedMed—————37.6%公式計測・報告: Anthropic——————————68.6%公式計測・報告: Anthropic——————————66.4%公式計測・報告: Anthropic—73.6%公式計測・報告: Anthropic32.4公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Fable 5.2Anthropic・High(既定)High既定—————45.3%公式計測・報告: Anthropic——————————71.5%公式計測・報告: Anthropic——————————69.8%公式計測・報告: Anthropic—79.3%公式計測・報告: Anthropic61公式計測・報告: Anthropic——————41.3%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————
Claude Fable 5.2Anthropic・XhighXhigh—————49.1%公式計測・報告: Anthropic——————————73.4%公式計測・報告: Anthropic——————————71.4%公式計測・報告: Anthropic—80.6%公式計測・報告: Anthropic74.1公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Fable 5.2Anthropic・MaxMax—————45.6%公式計測・報告: Anthropic——————————74.2%公式計測・報告: Anthropic——————————73.4%公式計測・報告: Anthropic—82.1%公式計測・報告: Anthropic83.5公式計測・報告: Anthropic—————————————————————————————————————93.9%第三者計測・報告: Epoch AI95.1%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI99.7%第三者計測・報告: Epoch AI94.0%第三者計測・報告: Epoch AI79.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Mythos 5.2Anthropic・記載なし記載なし———75.3%公式計測・報告: Anthropic——————————————————————————————76.3%公式計測・報告: Anthropic85.1公式計測・報告: Anthropic————————————————————————————————————————————————————————————————————
Claude Mythos 5.2Anthropic・LowLow—————————————————————————————————72.4%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.2Anthropic・MedMed—————————————————————————————————73.3%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.2Anthropic・High(既定)High既定—————————————————————————————————83.2%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.2Anthropic・XhighXhigh—————————————————————————————————88.1%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.2Anthropic・MaxMax—————————————————————————————————89.6%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Opus 5.5Anthropic・記載なし記載なし———58.7%公式計測・報告: Anthropic——62.3%公式計測・報告: Anthropic———1,846公式計測・報告: Artificial Analysis—1,800公式計測・報告: Anthropic—61.2%公式計測・報告: Anthropic42.5%公式計測・報告: Anthropic67.7%公式計測・報告: Anthropic——81.8%公式計測・報告: Anthropic—87.2%公式計測・報告: Anthropic—————64.4%公式計測・報告: Anthropic——————67.6%公式計測・報告: Anthropic82.6公式計測・報告: Anthropic39.4%公式計測・報告: Anthropic21.3%公式計測・報告: Anthropic—————————————————————————————————————168.54第三者計測・報告: Epoch AI————————————————————————————
Claude Opus 5.5Anthropic・LowLow38.5%公式計測・報告: Anthropic———47.3%公式計測・報告: Anthropic14.7%公式計測・報告: Anthropic—43.7%公式計測・報告: Anthropic43.7%公式計測・報告: Anthropic——1,224公式計測・報告: Anthropic—1,285公式計測・報告: Anthropic——23.3%公式計測・報告: Zapier57.4%公式計測・報告: Anthropic——————————57.0%公式計測・報告: Anthropic31.2%公式計測・報告: Anthropic31.2%公式計測・報告: Anthropic6.3公式計測・報告: Anthropic——59.4%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Opus 5.5Anthropic・Med(既定)Med既定57.6%公式計測・報告: Anthropic———54.6%公式計測・報告: Anthropic30.1%公式計測・報告: Anthropic—52.5%公式計測・報告: Anthropic52.5%公式計測・報告: Anthropic——1,576公式計測・報告: Anthropic—1,642公式計測・報告: Anthropic——28.6%公式計測・報告: Zapier63.0%公式計測・報告: Anthropic——————————59.0%公式計測・報告: Anthropic62.8%公式計測・報告: Anthropic62.8%公式計測・報告: Anthropic19.1公式計測・報告: Anthropic——66.1%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Opus 5.5Anthropic・HighHigh64.2%公式計測・報告: Anthropic———54.0%公式計測・報告: Anthropic34.5%公式計測・報告: Anthropic—56.0%公式計測・報告: Anthropic56.0%公式計測・報告: Anthropic——1,692公式計測・報告: Anthropic—1,705公式計測・報告: Anthropic——32.0%公式計測・報告: Zapier63.9%公式計測・報告: Anthropic——————————59.2%公式計測・報告: Anthropic67.3%公式計測・報告: Anthropic67.3%公式計測・報告: Anthropic29.7公式計測・報告: Anthropic——70.0%公式計測・報告: Anthropic————————————————————————————————————————78.9%第三者計測・報告: Epoch AI—1,506第三者計測・報告: LMArena1,542第三者計測・報告: LMArena——————————————————————————
Claude Opus 5.5Anthropic・XhighXhigh66.4%公式計測・報告: Anthropic———51.4%公式計測・報告: Anthropic43.4%公式計測・報告: Anthropic—56.0%公式計測・報告: Anthropic56.0%公式計測・報告: Anthropic——1,820公式計測・報告: Anthropic—1,780公式計測・報告: Anthropic——34.4%公式計測・報告: Zapier66.4%公式計測・報告: Anthropic——————————62.4%公式計測・報告: Anthropic71.3%公式計測・報告: Anthropic71.3%公式計測・報告: Anthropic54.5公式計測・報告: Anthropic——76.4%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Opus 5.5Anthropic・MaxMax64.8%公式計測・報告: Anthropic——58.7%公式計測・報告: Anthropic54.4%公式計測・報告: Anthropic45.5%公式計測・報告: Anthropic—57.8%公式計測・報告: Anthropic57.8%公式計測・報告: Anthropic——1,846公式計測・報告: Anthropic—1,822公式計測・報告: Anthropic——40.0%公式計測・報告: Zapier67.7%公式計測・報告: Anthropic67.7%公式計測・報告: Anthropic——81.8%公式計測・報告: Anthropic——————89.0%公式計測・報告: Anthropic64.4%公式計測・報告: Anthropic72.3%公式計測・報告: Anthropic72.3%公式計測・報告: Anthropic65.3公式計測・報告: Anthropic——81.3%公式計測・報告: Anthropic——————————————————————————————————90.6%第三者計測・報告: Epoch AI91.2%第三者計測・報告: Epoch AI95.0%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI72.2%第三者計測・報告: Epoch AI67.0%第三者計測・報告: Epoch AI95.6%第三者計測・報告: Epoch AI—————————————————————————————
Claude Sonnet 5.5Anthropic・記載なし記載なし——————————1,844公式計測・報告: Artificial Analysis—1,824公式計測・報告: Anthropic———64.5%公式計測・報告: Anthropic64.5%公式計測・報告: Anthropic——80.1%公式計測・報告: Anthropic———————61.6%公式計測・報告: Anthropic61.6%公式計測・報告: Anthropic———————————————————————————————————————————————166.56第三者計測・報告: Epoch AI————————————————————————————
Claude Sonnet 5.5Anthropic・LowLow20.0%公式計測・報告: Anthropic20.0%公式計測・報告: Anthropic———29.3%公式計測・報告: Anthropic——35.8%公式計測・報告: Anthropic——1,179公式計測・報告: Anthropic—1,264公式計測・報告: Anthropic————41.4%公式計測・報告: Anthropic——57.9%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5.5Anthropic・MedMed28.8%公式計測・報告: Anthropic28.8%公式計測・報告: Anthropic———36.5%公式計測・報告: Anthropic——39.2%公式計測・報告: Anthropic——1,324公式計測・報告: Anthropic—1,461公式計測・報告: Anthropic————43.2%公式計測・報告: Anthropic——66.0%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5.5Anthropic・High(既定)High既定43.0%公式計測・報告: Anthropic43.0%公式計測・報告: Anthropic———49.4%公式計測・報告: Anthropic——47.8%公式計測・報告: Anthropic——1,551公式計測・報告: Anthropic—1,634公式計測・報告: Anthropic————47.9%公式計測・報告: Anthropic——73.2%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5.5Anthropic・XhighXhigh61.5%公式計測・報告: Anthropic61.5%公式計測・報告: Anthropic———52.1%公式計測・報告: Anthropic52.1%公式計測・報告: Anthropic——53.1%公式計測・報告: Anthropic——1,731公式計測・報告: Anthropic—1,746公式計測・報告: Anthropic————53.0%公式計測・報告: Anthropic——81.1%公式計測・報告: Anthropic———————————————————————————————————————————————————————1,473第三者計測・報告: LMArena1,500第三者計測・報告: LMArena——————————————————————————
Claude Sonnet 5.5Anthropic・MaxMax70.6%公式計測・報告: Anthropic70.6%公式計測・報告: Anthropic———46.2%公式計測・報告: Anthropic——55.5%公式計測・報告: Anthropic——1,840公式計測・報告: Anthropic—1,811公式計測・報告: Anthropic————56.9%公式計測・報告: Anthropic——83.9%公式計測・報告: Anthropic———————————————————————————————————————————————95.6%第三者計測・報告: Epoch AI88.8%第三者計測・報告: Epoch AI80.5%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI46.5%第三者計測・報告: Epoch AI59.0%第三者計測・報告: Epoch AI97.8%第三者計測・報告: Epoch AI—————————————————————————————
Claude Haiku 5.5Anthropic・記載なし記載なし————46.4%公式計測・報告: Anthropic———————1,578公式計測・報告: Anthropic———57.4%公式計測・報告: Anthropic——————————46.4%公式計測・報告: Anthropic———————————————————————————————————————————————160.43第三者計測・報告: Epoch AI————————————————————————————
Claude Haiku 5.5Anthropic・LowLow12.7%公式計測・報告: Anthropic—————————1,125公式計測・報告: Anthropic——————30.9%公式計測・報告: Anthropic——42.0%公式計測・報告: Anthropic————————————————————————————————————————————————————24.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Haiku 5.5Anthropic・Med(既定)Med既定20.3%公式計測・報告: Anthropic—————————1,277公式計測・報告: Anthropic——————35.5%公式計測・報告: Anthropic——53.3%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————
Claude Haiku 5.5Anthropic・HighHigh24.8%公式計測・報告: Anthropic—————————1,420公式計測・報告: Anthropic——————39.7%公式計測・報告: Anthropic——61.3%公式計測・報告: Anthropic——————————————————————————————————————————————————97.2%第三者計測・報告: Epoch AI————1,422第三者計測・報告: LMArena1,454第三者計測・報告: LMArena——————————————————————————
Claude Haiku 5.5Anthropic・XhighXhigh31.5%公式計測・報告: Anthropic—————————1,513公式計測・報告: Anthropic——————44.1%公式計測・報告: Anthropic——67.6%公式計測・報告: Anthropic——————————————————————————————————————————————————98.9%第三者計測・報告: Epoch AI————————————————————————————————
Claude Haiku 5.5Anthropic・MaxMax39.2%公式計測・報告: Anthropic—————————1,620公式計測・報告: Anthropic——————45.9%公式計測・報告: Anthropic——72.4%公式計測・報告: Anthropic———————————————————————————————————————————————89.7%第三者計測・報告: Epoch AI75.1%第三者計測・報告: Epoch AI46.3%第三者計測・報告: Epoch AI—23.8%第三者計測・報告: Epoch AI55.0%第三者計測・報告: Epoch AI78.9%第三者計測・報告: Epoch AI—————————————————————————————
Claude Fable 5.1Anthropic・記載なし記載なし———52.6%公式計測・報告: Anthropic52.6%公式計測・報告: Anthropic——56.3%公式計測・報告: Anthropic—————1,669公式計測・報告: Anthropic—61.5%公式計測・報告: Anthropic31.4%公式計測・報告: Zapier31.4%公式計測・報告: Anthropic65.6%公式計測・報告: Anthropic——80.7%公式計測・報告: Anthropic—83.5%公式計測・報告: Anthropic————88.4%公式計測・報告: Anthropic—————————27.6%公式計測・報告: Anthropic17.9%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————
Claude Fable 5.1Anthropic・LowLow40.2%公式計測・報告: Anthropic———52.8%公式計測・報告: Anthropic20.6%公式計測・報告: Anthropic—45.1%公式計測・報告: Anthropic——1,450公式計測・報告: Anthropic—————60.2%公式計測・報告: Anthropic——————————36.6%公式計測・報告: Anthropic63.3%公式計測・報告: Anthropic63.3%公式計測・報告: Anthropic12.1公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Fable 5.1Anthropic・MedMed43.4%公式計測・報告: Anthropic———50.9%公式計測・報告: Anthropic21.5%公式計測・報告: Anthropic—46.8%公式計測・報告: Anthropic——1,536公式計測・報告: Anthropic—————62.4%公式計測・報告: Anthropic——————————42.2%公式計測・報告: Anthropic64.5%公式計測・報告: Anthropic64.5%公式計測・報告: Anthropic15.7公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Fable 5.1Anthropic・High(既定)High既定49.4%公式計測・報告: Anthropic———50.3%公式計測・報告: Anthropic25.7%公式計測・報告: Anthropic—49.2%公式計測・報告: Anthropic——1,617公式計測・報告: Anthropic—————63.1%公式計測・報告: Anthropic——————————46.0%公式計測・報告: Anthropic66.7%公式計測・報告: Anthropic66.7%公式計測・報告: Anthropic25.8公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Fable 5.1Anthropic・XhighXhigh51.3%公式計測・報告: Anthropic———48.7%公式計測・報告: Anthropic32.4%公式計測・報告: Anthropic—51.6%公式計測・報告: Anthropic——1,721公式計測・報告: Anthropic—————65.2%公式計測・報告: Anthropic——————————47.0%公式計測・報告: Anthropic67.7%公式計測・報告: Anthropic67.7%公式計測・報告: Anthropic40.5公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Fable 5.1Anthropic・MaxMax55.8%公式計測・報告: Anthropic———50.3%公式計測・報告: Anthropic31.7%公式計測・報告: Anthropic—51.8%公式計測・報告: Anthropic——1,735公式計測・報告: Anthropic—————65.6%公式計測・報告: Anthropic——————————44.8%公式計測・報告: Anthropic68.7%公式計測・報告: Anthropic68.7%公式計測・報告: Anthropic44.4公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————
Claude Mythos 5.1Anthropic・記載なし記載なし——————————————————————————————————61.7%公式計測・報告: Anthropic79.1公式計測・報告: Anthropic————————————————————————————————————————————————————————————————————
Claude Mythos 5.1Anthropic・LowLow—————————————————————————————————65.9%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.1Anthropic・MedMed—————————————————————————————————69.8%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.1Anthropic・High(既定)High既定—————————————————————————————————73.8%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.1Anthropic・XhighXhigh—————————————————————————————————77.8%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Mythos 5.1Anthropic・MaxMax—————————————————————————————————78.3%公式計測・報告: Anthropic——————————————————————————————————————————————————————————————————————
Claude Fable 5Anthropic・記載なし記載なし———————————————————————————————————————————————————————————————————————————164.13第三者計測・報告: Epoch AI————————————————————————————
Claude Fable 5Anthropic・LowLow————————————————————————————————————————————————————————————————————78.8%第三者計測・報告: Epoch AI——97.8%第三者計測・報告: Epoch AI—31.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Fable 5Anthropic・High(既定)High既定————————————————————————————————————————————————————————————————————83.3%第三者計測・報告: Epoch AI——100.0%第三者計測・報告: Epoch AI—45.0%第三者計測・報告: Epoch AI63.9%第三者計測・報告: Epoch AI—————————————————————————————
Claude Fable 5Anthropic・XhighXhigh————————————————————————————————————————————————————————————————————————70.7%第三者計測・報告: Epoch AI———————————————————————————————
Claude Fable 5Anthropic・MaxMax————————————————————————————————————————————————————————————————————85.9%第三者計測・報告: Epoch AI87.0%第三者計測・報告: Epoch AI90.2%第三者計測・報告: Epoch AI99.7%第三者計測・報告: Epoch AI—47.0%第三者計測・報告: Epoch AI70.0%第三者計測・報告: Epoch AI——————————————————————————39.7%第三者計測・報告: Sierra——
Claude Opus 5Anthropic・記載なし記載なし———29.0%公式計測・報告: Anthropic————————————63.6%公式計測・報告: Anthropic——74.0%公式計測・報告: Anthropic——————83.4%公式計測・報告: Anthropic—————————————————————————————————————————————————————————————————————————————
Claude Opus 5Anthropic・LowLow28.5%公式計測・報告: Anthropic———42.0%公式計測・報告: Anthropic——40.7%公式計測・報告: Anthropic——1,294公式計測・報告: Anthropic————20.4%公式計測・報告: Zapier————————————50.5%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————
Claude Opus 5Anthropic・MedMed41.2%公式計測・報告: Anthropic———53.4%公式計測・報告: Anthropic——43.3%公式計測・報告: Anthropic——1,476公式計測・報告: Anthropic————23.9%公式計測・報告: Zapier————————————58.1%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————
Claude Opus 5Anthropic・High(既定)High既定47.0%公式計測・報告: Anthropic———48.0%公式計測・報告: Anthropic——44.7%公式計測・報告: Anthropic——1,581公式計測・報告: Anthropic————20.6%公式計測・報告: Zapier————————————64.6%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————
Claude Opus 5Anthropic・XhighXhigh50.6%公式計測・報告: Anthropic———43.6%公式計測・報告: Anthropic——46.1%公式計測・報告: Anthropic——1,676公式計測・報告: Anthropic————25.3%公式計測・報告: Zapier————————————67.0%公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————
Claude Opus 5Anthropic・MaxMax52.3%公式計測・報告: Anthropic———48.0%公式計測・報告: Anthropic——46.6%公式計測・報告: Anthropic——1,708公式計測・報告: Anthropic————26.9%公式計測・報告: Zapier————————————67.2%公式計測・報告: Anthropic————————————————————————————————————————————————————————————————————————48.7%第三者計測・報告: Sierra——
Claude Opus 4.8Anthropic・記載なし記載なし————————————————————————————————————————————————————————————————————85.4%第三者計測・報告: Epoch AI——84.4%第三者計測・報告: Epoch AI—19.0%第三者計測・報告: Epoch AI—159.94第三者計測・報告: Epoch AI————————————————————————————
Claude Opus 4.8Anthropic・LowLow————————————————————————————————————————————————————————————————————88.4%第三者計測・報告: Epoch AI——97.8%第三者計測・報告: Epoch AI—29.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Opus 4.8Anthropic・MaxMax————————————————————————————————————————————————————————————————————91.0%第三者計測・報告: Epoch AI80.0%第三者計測・報告: Epoch AI56.1%第三者計測・報告: Epoch AI98.3%第三者計測・報告: Epoch AI53.0%第三者計測・報告: Epoch AI52.0%第三者計測・報告: Epoch AI65.6%第三者計測・報告: Epoch AI——————————————————————————39.7%第三者計測・報告: Sierra——
Claude Opus 4.7Anthropic・記載なし記載なし———————————————————————————————————————————————————————————————————————————157.44第三者計測・報告: Epoch AI————————————82.3%公式計測・報告: Anthropic———————————————
Claude Opus 4.7Anthropic・LowLow—————————————————————————————————————————————————————————————————————————26.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Opus 4.7Anthropic・High(既定)High既定——————————————————————————————————————————————————————————————————————————31.1%第三者計測・報告: Epoch AI—————————————————————————————
Claude Opus 4.7Anthropic・XhighXhigh————————————————————————————————————————————————————————————————————90.2%第三者計測・報告: Epoch AI——97.8%第三者計測・報告: Epoch AI51.7%第三者計測・報告: Epoch AI36.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Opus 4.7Anthropic・MaxMax————————————————————————————————————————————————————————————————————86.4%第三者計測・報告: Epoch AI70.2%第三者計測・報告: Epoch AI31.7%第三者計測・報告: Epoch AI86.7%第三者計測・報告: Epoch AI—41.0%第三者計測・報告: Epoch AI———————————————————————————40.2%第三者計測・報告: Sierra——
Claude Opus 4.6Anthropic・記載なし記載なし——————————————————————————————————————————————————————————————73.8%公式計測・報告: Anthropic————————————156.34第三者計測・報告: Epoch AI————————————————————————————
Claude Opus 4.6Anthropic・MaxMax————————————————53.0%公式計測・報告: Anthropic———————————————————————————————————————————————————88.4%第三者計測・報告: Epoch AI66.0%第三者計測・報告: Epoch AI26.8%第三者計測・報告: Epoch AI91.1%第三者計測・報告: Epoch AI47.0%第三者計測・報告: Epoch AI21.0%第三者計測・報告: Epoch AI33.3%第三者計測・報告: Epoch AI——————————————————————————27.3%第三者計測・報告: Sierra——
Claude Opus 4.5Anthropic・記載なし記載なし————————————————————————————————————————————————————————————————————80.7%第三者計測・報告: Epoch AI——48.1%第三者計測・報告: Epoch AI—5.0%第三者計測・報告: Epoch AI—151.92第三者計測・報告: Epoch AI————————————————————————————
Claude Opus 4.5Anthropic・High(既定)High既定————————————————————————————————————————————————————————————————————————————————————————————————————84.0%第三者計測・報告: Sierra24.7%第三者計測・報告: Sierra79.6%第三者計測・報告: Sierra92.3%第三者計測・報告: Sierra
Claude Sonnet 5Anthropic・記載なし記載なし——————————1,449公式計測・報告: Artificial Analysis—————54.9%公式計測・報告: Anthropic——57.0%公式計測・報告: Anthropic———————15.6%公式計測・報告: Anthropic————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5Anthropic・LowLow3.2%公式計測・報告: Anthropic———28.7%公式計測・報告: Anthropic——24.1%公式計測・報告: Anthropic————923公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5Anthropic・MedMed4.4%公式計測・報告: Anthropic———35.2%公式計測・報告: Anthropic——28.0%公式計測・報告: Anthropic————1,056公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5Anthropic・High(既定)High既定4.5%公式計測・報告: Anthropic———39.4%公式計測・報告: Anthropic——30.8%公式計測・報告: Anthropic————1,177公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5Anthropic・XhighXhigh7.0%公式計測・報告: Anthropic———42.7%公式計測・報告: Anthropic——32.0%公式計測・報告: Anthropic————1,274公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 5Anthropic・MaxMax10.3%公式計測・報告: Anthropic———42.4%公式計測・報告: Anthropic——34.1%公式計測・報告: Anthropic————1,359公式計測・報告: Anthropic———————————————————————————————————————————————————————————————————————————————————————————
Claude Sonnet 4.6Anthropic・記載なし記載なし———————————————————————————————————————————————————————————————————————————152.86第三者計測・報告: Epoch AI————————————————————————————
Claude Sonnet 4.6Anthropic・MedMed————————————————————————————————————————————————————————————————————83.3%第三者計測・報告: Epoch AI——82.2%第三者計測・報告: Epoch AI—16.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Sonnet 4.6Anthropic・High(既定)High既定————————————————————————————————————————————————————————————————————83.3%第三者計測・報告: Epoch AI——75.6%第三者計測・報告: Epoch AI35.5%第三者計測・報告: Epoch AI19.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Sonnet 4.6Anthropic・MaxMax————————————————————————————————————————————————————————————————————78.8%第三者計測・報告: Epoch AI——71.1%第三者計測・報告: Epoch AI32.8%第三者計測・報告: Epoch AI23.0%第三者計測・報告: Epoch AI——————————————————————————————
Claude Sonnet 4.5Anthropic・記載なし記載なし————————————————————————————————————————————————————————————————————73.7%第三者計測・報告: Epoch AI——35.6%第三者計測・報告: Epoch AI23.7%第三者計測・報告: Epoch AI6.0%第三者計測・報告: Epoch AI—147.63第三者計測・報告: Epoch AI————————————————————————72.0%第三者計測・報告: Sierra25.3%第三者計測・報告: Sierra72.4%第三者計測・報告: Sierra84.9%第三者計測・報告: Sierra
Claude Haiku 4.5Anthropic・記載なし記載なし0.0%公式計測・報告: Anthropic—————————735公式計測・報告: Anthropic—614公式計測・報告: Anthropic———18.7%公式計測・報告: Anthropic10.2%公式計測・報告: Anthropic——15.7%公式計測・報告: Anthropic——————6.4%公式計測・報告: Anthropic————————————————————————————————————————————————————————————————————————————
GPT-6 AstraOpenAI・記載なし記載なし———64.6%公式計測・報告: OpenAI68.1%公式——65.5%公式—————1,569公式—52.0%公式41.4%公式57.2%公式57.2%公式————79.5%公式—————71.0%公式————————29.8%公式計測・報告: Anthropic20.8%公式64.7公式計測・報告: OpenAI36.6公式計測・報告: OpenAI——————————————————————————————82.9%第三者計測・報告: Epoch AI————169第三者計測・報告: Epoch AI————————————————————————————
GPT-6 AstraOpenAI・LowLow49.7%公式計測・報告: OpenAI———45.3%公式31.1%公式————1,366公式————30.3%公式計測・報告: Zapier——————————————————————————————————————————————————————87.8%第三者計測・報告: Epoch AI—————————————————————————————————
GPT-6 AstraOpenAI・MedMed53.9%公式計測・報告: OpenAI———48.8%公式36.8%公式————1,468公式————34.1%公式計測・報告: Zapier——————————————————————————————————————————————————————97.6%第三者計測・報告: Epoch AI—————————————————————————————————
GPT-6 AstraOpenAI・HighHigh57.9%公式計測・報告: OpenAI———50.9%公式38.3%公式————1,485公式————37.1%公式計測・報告: Zapier——————————————————————————————————————————————————————97.6%第三者計測・報告: Epoch AI———46.7%第三者計測・報告: Epoch AI—————————————————————————————
GPT-6 AstraOpenAI・XhighXhigh57.6%公式計測・報告: OpenAI———50.6%公式41.4%公式————1,516公式————39.0%公式計測・報告: Zapier——————————————————————————————————————————————————————97.6%第三者計測・報告: Epoch AI—————————————————————————————————
GPT-6 AstraOpenAI・MaxMax56.7%公式計測・報告: OpenAI———53.3%公式42.8%公式————1,542公式————41.4%公式計測・報告: Zapier————————————————————————————————————————————————————95.8%第三者計測・報告: Epoch AI93.7%第三者計測・報告: Epoch AI97.6%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI75.6%第三者計測・報告: Epoch AI74.0%第三者計測・報告: Epoch AI60.0%第三者計測・報告: Epoch AI—1,474第三者計測・報告: LMArena1,494第三者計測・報告: LMArena——————————————————————————
GPT-6.1 SolOpenAI・記載なし記載なし———————————————————————————————————————————————————————————————————————————168.48第三者計測・報告: Epoch AI————————————————————————————
GPT-6.1 SolOpenAI・MaxMax————————————————————————————————————————————————————————————————————95.4%第三者計測・報告: Epoch AI93.7%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI73.9%第三者計測・報告: Epoch AI68.0%第三者計測・報告: Epoch AI61.1%第三者計測・報告: Epoch AI—1,482第三者計測・報告: LMArena1,486第三者計測・報告: LMArena——————————————————————————
GPT-6.1 TerraOpenAI・記載なし記載なし———————————————————————————————————————————————————————————————————————————167.67第三者計測・報告: Epoch AI————————————————————————————
GPT-6.1 TerraOpenAI・MaxMax————————————————————————————————————————————————————————————————————94.3%第三者計測・報告: Epoch AI90.9%第三者計測・報告: Epoch AI92.7%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI57.3%第三者計測・報告: Epoch AI—76.7%第三者計測・報告: Epoch AI—————————————————————————————
GPT-6 LunaOpenAI・記載なし記載なし16.4%公式———42.4%公式———————1,336公式——————————————29.1%公式———————————————————————————————————————————————156.41第三者計測・報告: Epoch AI————————————————————————————
GPT-6 LunaOpenAI・LowLow——————————1,036公式—————————19.2%公式———————————————————————————————————————————————————————————————————————————————————
GPT-6 LunaOpenAI・Med(既定)Med既定——————————1,262公式—————————37.5%公式———————————————————————————————————————————————————————————————————————————————————
GPT-6 LunaOpenAI・HighHigh——————————1,344公式—————————42.3%公式———————————————————————————————————————————————————————————————————————————————————
GPT-6 LunaOpenAI・XhighXhigh——————————1,364公式—————————44.8%公式———————————————————————————————————————————————————————————————————————————————————
GPT-6 LunaOpenAI・MaxMax——————————1,437公式—————————48.9%公式———————————————————————————————————————————————90.5%第三者計測・報告: Epoch AI79.0%第三者計測・報告: Epoch AI56.1%第三者計測・報告: Epoch AI98.9%第三者計測・報告: Epoch AI41.4%第三者計測・報告: Epoch AI36.0%第三者計測・報告: Epoch AI26.7%第三者計測・報告: Epoch AI—1,441第三者計測・報告: LMArena1,432第三者計測・報告: LMArena——————————————————————————
GPT-6 SolOpenAI・記載なし記載なし——————————1,487公式計測・報告: Artificial Analysis————————————————53.6%公式———————————————————————————————————————————————163.75第三者計測・報告: Epoch AI————————————————————————————
GPT-6 SolOpenAI・LowLow————37.3%公式———————905公式———————————————————————————————————————————————————————————————————————————————————————————
GPT-6 SolOpenAI・Med(既定)Med既定————45.9%公式———————1,142公式———————————————————————————————————————————————————————————————————————————————————————————
GPT-6 SolOpenAI・HighHigh————47.7%公式———————1,289公式———————————————————————————————————————————————————————————————————————————————————————————
GPT-6 SolOpenAI・XhighXhigh————48.4%公式———————1,364公式———————————————————————————————————————————————————————————————————————————————————————————
GPT-6 SolOpenAI・MaxMax————49.3%公式———————1,483公式———————————————————————————————————————————————————————94.3%第三者計測・報告: Epoch AI89.8%第三者計測・報告: Epoch AI90.0%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI60.7%第三者計測・報告: Epoch AI56.0%第三者計測・報告: Epoch AI48.9%第三者計測・報告: Epoch AI—————————————————————————————
GPT-5.6 SolOpenAI・記載なし記載なし———22.4%公式——————————————————————————————————60.5公式計測・報告: OpenAI33.1公式計測・報告: OpenAI———————————————————————————————————162.99第三者計測・報告: Epoch AI————————————————————————————
GPT-5.6 SolOpenAI・NoneNone————————————————————————————————————————————————————————————————————82.8%第三者計測・報告: Epoch AI——68.9%第三者計測・報告: Epoch AI—7.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.6 SolOpenAI・LowLow7.9%公式計測・報告: OpenAI———35.4%公式——24.6%公式24.6%公式——1,289公式————11.7%公式計測・報告: Zapier————————————————————————————————————————————————————89.9%第三者計測・報告: Epoch AI——95.6%第三者計測・報告: Epoch AI—31.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.6 SolOpenAI・Med(既定)Med既定20.9%公式計測・報告: OpenAI———39.9%公式——31.1%公式31.1%公式——1,403公式————19.6%公式計測・報告: Zapier————————————————————————————————————————————————————————————————————————————————————————
GPT-5.6 SolOpenAI・HighHigh26.1%公式計測・報告: OpenAI———45.1%公式——35.7%公式35.7%公式——1,480公式————24.8%公式計測・報告: Zapier——————————————————————————————————————————————————————————20.0%第三者計測・報告: Epoch AI—————————————————————————————
GPT-5.6 SolOpenAI・XhighXhigh28.5%公式計測・報告: OpenAI———46.8%公式——37.7%公式37.7%公式——1,548公式————26.3%公式計測・報告: Zapier—————————————————————————————————————————————————————————————————————————————————————46.9%第三者計測・報告: Sierra——
GPT-5.6 SolOpenAI・MaxMax37.3%公式計測・報告: OpenAI———47.5%公式——41.7%公式41.7%公式——1,588公式————28.8%公式計測・報告: Zapier————————————————————————————————————————————————————93.5%第三者計測・報告: Epoch AI89.1%第三者計測・報告: Epoch AI82.9%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI69.7%第三者計測・報告: Epoch AI59.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.6 TerraOpenAI・記載なし記載なし——————————————————————————————————————57.7公式計測・報告: OpenAI32.7公式計測・報告: OpenAI———————————————————————————————————160.73第三者計測・報告: Epoch AI————————————————————————————
GPT-5.6 TerraOpenAI・NoneNone————————————————————————————————————————————————————————————————————77.3%第三者計測・報告: Epoch AI——53.3%第三者計測・報告: Epoch AI—5.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.6 TerraOpenAI・LowLow————————————————————————————————————————————————————————————————————87.4%第三者計測・報告: Epoch AI——88.9%第三者計測・報告: Epoch AI—27.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.6 TerraOpenAI・MaxMax————————————————————————————————————————————————————————————————————93.3%第三者計測・報告: Epoch AI86.0%第三者計測・報告: Epoch AI70.7%第三者計測・報告: Epoch AI99.7%第三者計測・報告: Epoch AI43.2%第三者計測・報告: Epoch AI47.0%第三者計測・報告: Epoch AI41.1%第三者計測・報告: Epoch AI—————————————————————————————
GPT-5.6 LunaOpenAI・記載なし記載なし——————————————————————————————————————55.7公式計測・報告: OpenAI32公式計測・報告: OpenAI———————————————————————————————————156.67第三者計測・報告: Epoch AI————————————————————————————
GPT-5.6 LunaOpenAI・NoneNone————————————————————————————————————————————————————————————————————63.6%第三者計測・報告: Epoch AI39.7%第三者計測・報告: Epoch AI—40.0%第三者計測・報告: Epoch AI—3.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.6 LunaOpenAI・LowLow————————————————————————————————————————————————————————————————————82.3%第三者計測・報告: Epoch AI41.4%第三者計測・報告: Epoch AI—66.7%第三者計測・報告: Epoch AI—17.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.6 LunaOpenAI・MaxMax————————————————————————————————————————————————————————————————————91.6%第三者計測・報告: Epoch AI82.1%第三者計測・報告: Epoch AI61.0%第三者計測・報告: Epoch AI98.3%第三者計測・報告: Epoch AI41.0%第三者計測・報告: Epoch AI43.0%第三者計測・報告: Epoch AI21.1%第三者計測・報告: Epoch AI—————————————————————————————
GPT-5.5OpenAI・記載なし記載なし———————————————————————————————————————————————————————————————————————————160.1第三者計測・報告: Epoch AI————————————————————————————
GPT-5.5OpenAI・NoneNone————————————————————————————————————————————————————————————————————77.3%第三者計測・報告: Epoch AI——57.8%第三者計測・報告: Epoch AI—9.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.5OpenAI・LowLow————————————————————————————————————————————————————————————————————90.7%第三者計測・報告: Epoch AI——84.4%第三者計測・報告: Epoch AI—30.0%第三者計測・報告: Epoch AI——————————————————————————————
GPT-5.5OpenAI・HighHigh——————————————————————————————————————————————————————————————————————————10.0%第三者計測・報告: Epoch AI—————————————————————————————
GPT-5.5OpenAI・XhighXhigh—————————————————————————————————————————————————————————————————————85.3%第三者計測・報告: Epoch AI72.5%第三者計測・報告: Epoch AI—63.0%第三者計測・報告: Epoch AI63.0%第三者計測・報告: Epoch AI23.3%第三者計測・報告: Epoch AI——————————————————————————44.6%第三者計測・報告: Sierra——
GPT-5.4OpenAI・XhighXhigh—————————————————————————————————————————————————————————————————————————————————————————————————————39.4%第三者計測・報告: Sierra——
GPT-5.2OpenAI・None(既定)None既定————————————————————————————————————————————————————————————————————————————————————————————————————52.5%第三者計測・報告: Sierra12.6%第三者計測・報告: Sierra75.0%第三者計測・報告: Sierra57.2%第三者計測・報告: Sierra
GPT-5.2OpenAI・HighHigh————————————————————————————————————————————————————————————————————————————————————————————————————83.0%第三者計測・報告: Sierra32.2%第三者計測・報告: Sierra81.6%第三者計測・報告: Sierra89.7%第三者計測・報告: Sierra
Gemini 4 CarbonGoogle・記載なし記載なし———64.8%公式——61.2%公式—————1,611公式—61.8%公式53.9%公式—————81.5%公式—————72.5%公式———————————————————————————————————————————————169.76第三者計測・報告: Epoch AI————————————————————————————
Gemini 4 CarbonGoogle・LowLow—————32.4%公式——————————————————————————————————————————————————————————————————————————————————————————————————
Gemini 4 CarbonGoogle・Med(既定)Med既定—————41.1%公式——————————————————————————————————————————————————————————————————————————————————————————————————
Gemini 4 CarbonGoogle・HighHigh65.2%公式計測・報告: Artificial Analysis——64.8%公式計測・報告: Artificial Analysis—38.4%公式61.2%公式計測・報告: Proximal——9.6%公式計測・報告: Google—————53.9%公式計測・報告: Zapier—————81.5%公式計測・報告: Google—77.4%公式計測・報告: Google———72.5%公式—————————————59公式計測・報告: Artificial Analysis70.4%公式計測・報告: Vals AI16,484公式計測・報告: Andon Labs58.6%公式計測・報告: Andon Labs96.2%公式計測・報告: Google—72.0%公式計測・報告: Surge AI71.0%公式計測・報告: Collinear AI / Artificial Analysis54.8%公式計測・報告: Google88.2%公式計測・報告: Google—————————————————96.5%第三者計測・報告: Epoch AI90.5%第三者計測・報告: Epoch AI95.1%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI77.7%第三者計測・報告: Epoch AI78.0%第三者計測・報告: Epoch AI——1,526第三者計測・報告: LMArena1,563第三者計測・報告: LMArena——————————————————————————
Gemini 4 ArgonGoogle・記載なし記載なし57.4%公式計測・報告: Google———————77.9%公式計測・報告: Google—————————————69.2%公式計測・報告: Google—39.5%公式計測・報告: Google—————————————————————99.7%公式計測・報告: Google————65.4%公式計測・報告: Google19.6%公式計測・報告: Google91.9%公式計測・報告: Google45.3%公式計測・報告: Google88.8%公式計測・報告: Google91.7%公式計測・報告: Google——————————————————166.48第三者計測・報告: Epoch AI————————————————————————————
Gemini 4 ArgonGoogle・HighHigh57.1%公式計測・報告: Artificial Analysis——52.9%公式計測・報告: Artificial Analysis——55.0%公式計測・報告: Proximal————————51.3%公式計測・報告: Zapier—————74.7%公式計測・報告: Google—69.0%公式計測・報告: Google———71.6%公式—————————————50公式計測・報告: Artificial Analysis69.2%公式計測・報告: Vals AI13,718公式計測・報告: Andon Labs54.4%公式計測・報告: Andon Labs84.2%公式計測・報告: Google—76.0%公式計測・報告: Surge AI68.0%公式計測・報告: Collinear AI / Artificial Analysis42.0%公式計測・報告: Google83.4%公式計測・報告: Google—————————————————96.4%第三者計測・報告: Epoch AI86.0%第三者計測・報告: Epoch AI78.1%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI76.0%第三者計測・報告: Epoch AI59.0%第三者計測・報告: Epoch AI58.9%第三者計測・報告: Epoch AI—1,522第三者計測・報告: LMArena1,540第三者計測・報告: LMArena——————————————————————————
Gemini 3.8 FlashGoogle・記載なし記載なし19.1%公式計測・報告: Google—89.4%公式計測・報告: Google—————73.7%公式計測・報告: Google——1,545公式計測・報告: Google——————54.9%公式計測・報告: Google———59.0%公式計測・報告: Google————————————————————————————61.4%公式計測・報告: Google10.0%公式計測・報告: Google——86.2%公式計測・報告: Google87.8%公式計測・報告: Google35.0%公式計測・報告: Google86.2%公式計測・報告: Google88.8%公式計測・報告: Google56.5%公式計測・報告: Google——————————————158.79第三者計測・報告: Epoch AI————————————————————————————
Gemini 3.8 FlashGoogle・HighHigh————————————————————————————————————————————————————————————————————95.4%第三者計測・報告: Epoch AI68.4%第三者計測・報告: Epoch AI22.0%第三者計測・報告: Epoch AI98.9%第三者計測・報告: Epoch AI69.7%第三者計測・報告: Epoch AI58.0%第三者計測・報告: Epoch AI38.9%第三者計測・報告: Epoch AI—————————————————————————————
Gemini 3.6 FlashGoogle・記載なし記載なし—5.4%公式計測・報告: Google78.0%公式計測・報告: Google———————————————51.2%公式計測・報告: Google———33.8%公式計測・報告: Google—24.2%公式計測・報告: Google——————————————————————————————76.1%公式計測・報告: Google84.2%公式計測・報告: Google22.0%公式計測・報告: Google85.2%公式計測・報告: Google80.6%公式計測・報告: Google41.2%公式計測・報告: Google——————————————155.21第三者計測・報告: Epoch AI—————————————89.4%公式計測・報告: Google———————91.8%公式計測・報告: Google——————
Gemini 3.6 FlashGoogle・MinimalMinimal————————————————————————————————————————————————————————————————————85.9%第三者計測・報告: Epoch AI——80.0%第三者計測・報告: Epoch AI—29.0%第三者計測・報告: Epoch AI——————————————————————————————
Gemini 3.6 FlashGoogle・LowLow————————————————————————————————————————————————————————————————————86.4%第三者計測・報告: Epoch AI——82.2%第三者計測・報告: Epoch AI—42.0%第三者計測・報告: Epoch AI——————————————————————————————
Gemini 3.6 FlashGoogle・HighHigh————————————————————————————————————————————————————————————————————94.1%第三者計測・報告: Epoch AI59.0%第三者計測・報告: Epoch AI22.0%第三者計測・報告: Epoch AI94.2%第三者計測・報告: Epoch AI66.2%第三者計測・報告: Epoch AI40.0%第三者計測・報告: Epoch AI23.3%第三者計測・報告: Epoch AI—————————————————————————————
Gemini 3.5 Flash-LiteGoogle・記載なし記載なし———————————————————————————————————————————————————————————————————————————145.63第三者計測・報告: Epoch AI————————————————————————————
Gemini 3.5 Flash-LiteGoogle・Minimal(既定)Minimal既定————————————————————————————————————————————————————————————————————74.2%第三者計測・報告: Epoch AI——51.1%第三者計測・報告: Epoch AI—7.0%第三者計測・報告: Epoch AI——————————————————————————————
Gemini 3.5 Flash-LiteGoogle・LowLow————————————————————————————————————————————————————————————————————75.8%第三者計測・報告: Epoch AI——60.0%第三者計測・報告: Epoch AI—21.0%第三者計測・報告: Epoch AI——————————————————————————————
Gemini 3.5 Flash-LiteGoogle・HighHigh————————————————————————————————————————————————————————————————————83.3%第三者計測・報告: Epoch AI26.0%第三者計測・報告: Epoch AI0.0%第三者計測・報告: Epoch AI71.1%第三者計測・報告: Epoch AI—16.0%第三者計測・報告: Epoch AI——————————————————————————————
Gemini 3.1 Pro PreviewGoogle・記載なし記載なし——————————————————————————————————————————————————————————83.3%公式計測・報告: Google—————————94.1%第三者計測・報告: Epoch AI59.7%第三者計測・報告: Epoch AI26.8%第三者計測・報告: Epoch AI95.6%第三者計測・報告: Epoch AI———156.18第三者計測・報告: Epoch AI——54.2%公式計測・報告: Google—————————76.2%公式計測・報告: Google—80.5%公式計測・報告: Google——————84.9%公式計測・報告: Google26.3%公式計測・報告: Google—————
Gemini 3.1 Pro PreviewGoogle・High(既定)High既定————————————————————————————————————————————————————————————————————94.4%第三者計測・報告: Epoch AI——95.6%第三者計測・報告: Epoch AI73.5%第三者計測・報告: Epoch AI51.0%第三者計測・報告: Epoch AI8.9%第三者計測・報告: Epoch AI——————————————————————————26.0%第三者計測・報告: Sierra——
Gemini 3.1 Flash-LiteGoogle・記載なし記載なし———————————————————————————————————————————————————————————————————————————145.01第三者計測・報告: Epoch AI————————————————————————————
Gemini 3.1 Flash-LiteGoogle・Minimal(既定)Minimal既定————————————————————————————————————————————————————————————————————73.7%第三者計測・報告: Epoch AI21.4%第三者計測・報告: Epoch AI—37.8%第三者計測・報告: Epoch AI————————————————————————————————
Gemini 3.1 Flash-LiteGoogle・LowLow————————————————————————————————————————————————————————————————————74.2%第三者計測・報告: Epoch AI22.5%第三者計測・報告: Epoch AI—44.4%第三者計測・報告: Epoch AI————————————————————————————————
Gemini 3.1 Flash-LiteGoogle・HighHigh————————————————————————————————————————————————————————————————————81.8%第三者計測・報告: Epoch AI27.7%第三者計測・報告: Epoch AI—80.0%第三者計測・報告: Epoch AI————————————————————————————————
Gemini 3 Flash PreviewGoogle・記載なし記載なし——58.0%公式計測・報告: Google———————————————————————————————————————————————————————80.3%公式計測・報告: Google—————————83.2%第三者計測・報告: Epoch AI51.2%第三者計測・報告: Epoch AI17.1%第三者計測・報告: Epoch AI92.8%第三者計測・報告: Epoch AI———152.32第三者計測・報告: Epoch AI——49.6%公式計測・報告: Google—————————65.1%公式計測・報告: Google—81.2%公式計測・報告: Google——————67.2%公式計測・報告: Google22.1%公式計測・報告: Google—————
Gemini 3 Flash PreviewGoogle・High(既定)High既定————————————————————————————————————————————————————————————————————89.4%第三者計測・報告: Epoch AI——95.6%第三者計測・報告: Epoch AI66.8%第三者計測・報告: Epoch AI40.0%第三者計測・報告: Epoch AI——————————————————————————82.5%第三者計測・報告: Sierra27.3%第三者計測・報告: Sierra76.8%第三者計測・報告: Sierra91.2%第三者計測・報告: Sierra
Gemini 2.5 ProGoogle・記載なし記載なし————————————————————————————————————————————————————————————————————85.3%第三者計測・報告: Epoch AI24.6%第三者計測・報告: Epoch AI0.0%第三者計測・報告: Epoch AI84.7%第三者計測・報告: Epoch AI———144.87第三者計測・報告: Epoch AI————————————————————————————
Gemini 2.5 ProGoogle・HighHigh—————————————————————————————————————————————————————————————————————————————————————————————————————13.7%第三者計測・報告: Sierra——
Gemini 2.5 FlashGoogle・記載なし記載なし———————————————————————————————————————————————————————————————————————————140.81第三者計測・報告: Epoch AI————————————————————————————
Gemini 3.7 FlashGoogle・記載なし記載なし—14.9%公式計測・報告: Google85.8%公式計測・報告: Google———————————————53.6%公式計測・報告: Google———47.9%公式計測・報告: Google—26.3%公式計測・報告: Google——————————————————————————————82.1%公式計測・報告: Google85.4%公式計測・報告: Google34.0%公式計測・報告: Google84.5%公式計測・報告: Google87.1%公式計測・報告: Google43.5%公式計測・報告: Google——————————————158.36第三者計測・報告: Epoch AI—————————————88.7%公式計測・報告: Google———————97.0%公式計測・報告: Google——————
Gemini 3.7 FlashGoogle・HighHigh————————65.3%公式計測・報告: Google———————————————————————————————————————————————————————————94.8%第三者計測・報告: Epoch AI71.6%第三者計測・報告: Epoch AI36.6%第三者計測・報告: Epoch AI97.2%第三者計測・報告: Epoch AI69.2%第三者計測・報告: Epoch AI66.0%第三者計測・報告: Epoch AI41.1%第三者計測・報告: Epoch AI—————————————————————————————
Gemini 3.5 FlashGoogle・記載なし記載なし——76.2%公式計測・報告: Google———————————————————————————————————————————————————————84.2%公式計測・報告: Google———————————————————55.1%公式計測・報告: Google—————————78.4%公式計測・報告: Google—83.6%公式計測・報告: Google——————77.3%公式計測・報告: Google26.6%公式計測・報告: Google—————
Gemini 3 Pro PreviewGoogle・High(既定)High既定————————————————————————————————————————————————————————————————————————————————————————————————————80.5%第三者計測・報告: Sierra18.0%第三者計測・報告: Sierra75.9%第三者計測・報告: Sierra91.0%第三者計測・報告: Sierra
Grok 4.7xAI・記載なし記載なし———————————————————————————————————————————————————————————————————————————156.18第三者計測・報告: Epoch AI————————————————————————————
Grok 4.7xAI・High(既定)High既定————————71.0%公式計測・報告: xAI———————————————————————————————————————————————————————————————————————————————————————————————
Grok 4.7xAI・XhighXhigh37.6%公式計測・報告: xAI——————46.3%公式計測・報告: xAI————1,657公式計測・報告: xAI———————————————————————————56.7%公式計測・報告: xAI———————————19.6%公式計測・報告: xAI————————64.0%公式計測・報告: xAI——————92.7%第三者計測・報告: Epoch AI53.0%第三者計測・報告: Epoch AI17.1%第三者計測・報告: Epoch AI98.1%第三者計測・報告: Epoch AI56.0%第三者計測・報告: Epoch AI41.0%第三者計測・報告: Epoch AI54.4%第三者計測・報告: Epoch AI—————————————————————————————
Grok 4.6xAI・記載なし記載なし———————————————————————————————————————————————————————————————————————————157.79第三者計測・報告: Epoch AI————————————————————————————
Grok 4.6xAI・High(既定)High既定20.3%公式計測・報告: xAI——————40.4%公式計測・報告: xAI65.2%公式計測・報告: xAI———1,546公式計測・報告: xAI———————————————————————————48.5%公式計測・報告: xAI———————————15.8%公式計測・報告: xAI————————53.0%公式計測・報告: xAI——————94.0%第三者計測・報告: Epoch AI——97.8%第三者計測・報告: Epoch AI49.3%第三者計測・報告: Epoch AI33.0%第三者計測・報告: Epoch AI——————————————————————————————
Grok 4.6xAI・XhighXhigh————————————————————————————————————————————————————————————————————93.2%第三者計測・報告: Epoch AI66.0%第三者計測・報告: Epoch AI31.7%第三者計測・報告: Epoch AI99.2%第三者計測・報告: Epoch AI48.9%第三者計測・報告: Epoch AI33.0%第三者計測・報告: Epoch AI41.1%第三者計測・報告: Epoch AI—————————————————————————————
Grok 4.5xAI・High(既定)High既定—————————————————————————————————————————————————————————————————————————————————————————————————————47.9%第三者計測・報告: Sierra——
DeepSeek-V4-Pro-0813DeepSeek・記載なし記載なし———————————————————————————————————————————————————————————————————————————155.94第三者計測・報告: Epoch AI————————————————————————————
DeepSeek-V4-Pro-0813DeepSeek・MaxMax————————————————————————————————————————————————————————————————————91.7%第三者計測・報告: Epoch AI64.6%第三者計測・報告: Epoch AI26.8%第三者計測・報告: Epoch AI98.6%第三者計測・報告: Epoch AI52.9%第三者計測・報告: Epoch AI46.0%第三者計測・報告: Epoch AI33.3%第三者計測・報告: Epoch AI—————————————————————————————
DeepSeek-V4.1-Flash-1017DeepSeek・記載なし記載なし42.3%公式計測・報告: DeepSeek———————77.0%公式計測・報告: DeepSeek——————————————————————————————————————————————————————————————————159.41第三者計測・報告: Epoch AI————————————————————————————
DeepSeek-V4.1-Flash-1017DeepSeek・MaxMax————————————————————————————————————————————————————————————————————93.2%第三者計測・報告: Epoch AI71.2%第三者計測・報告: Epoch AI46.3%第三者計測・報告: Epoch AI99.4%第三者計測・報告: Epoch AI42.5%第三者計測・報告: Epoch AI46.0%第三者計測・報告: Epoch AI——————————————————————————————
DeepSeek-V4.1-FlashDeepSeek・記載なし記載なし31.2%公式計測・報告: DeepSeek30.0%公式計測・報告: DeepSeek90.6%公式計測・報告: DeepSeek—————74.2%公式計測・報告: DeepSeek———————————————31.8%公式計測・報告: DeepSeek—78.9%公式計測・報告: DeepSeek———————————————————————62.8%公式計測・報告: DeepSeek—————————————————89.8%第三者計測・報告: Epoch AI67.4%第三者計測・報告: Epoch AI26.8%第三者計測・報告: Epoch AI98.3%第三者計測・報告: Epoch AI42.9%第三者計測・報告: Epoch AI48.0%第三者計測・報告: Epoch AI64.4%第三者計測・報告: Epoch AI156.7第三者計測・報告: Epoch AI—————20.3%公式計測・報告: DeepSeek64公式計測・報告: DeepSeek—54.8%公式計測・報告: DeepSeek—————————89.6%公式計測・報告: DeepSeek49.0%公式計測・報告: DeepSeek————————
GLM-5.3Z.ai・記載なし記載なし—28.3%公式計測・報告: Z.ai88.2%公式計測・報告: Z.ai—————66.9%公式計測・報告: Z.ai———————62.5%公式計測・報告: Z.ai————————28.5%公式計測・報告: Z.ai————————————————————————————————————84.5%公式計測・報告: Z.ai54.4%公式計測・報告: Z.ai———————————157.1第三者計測・報告: Epoch AI——————58公式計測・報告: Z.ai—48.2%公式計測・報告: Z.ai———————————————————
GLM-5.3Z.ai・Max(既定)Max既定——————————————————————————————————————————————————————39.8%公式計測・報告: Z.ai—————————————90.9%第三者計測・報告: Epoch AI68.8%第三者計測・報告: Epoch AI29.3%第三者計測・報告: Epoch AI91.1%第三者計測・報告: Epoch AI41.0%第三者計測・報告: Epoch AI37.0%第三者計測・報告: Epoch AI—————42.5%公式計測・報告: Z.ai————————————————————————
GLM-5.3-FlashZ.ai・記載なし記載なし————————63.4%公式計測・報告: Z.ai——————————————————————————————————————————————————————————————————153.82第三者計測・報告: Epoch AI————————48.8%公式計測・報告: Z.ai———————————————————
GLM-5.3-FlashZ.ai・Max(既定)Max既定————————————————————————————————————————————————————————————————————90.2%第三者計測・報告: Epoch AI55.8%第三者計測・報告: Epoch AI17.1%第三者計測・報告: Epoch AI93.9%第三者計測・報告: Epoch AI—21.0%第三者計測・報告: Epoch AI——————————————————————————————
GLM-5.2Z.ai・記載なし記載なし—————————————————————————————————————————————————————————————————————————————————————————————————————37.1%第三者計測・報告: Sierra——
GLM-5Z.ai・記載なし記載なし————————————————————————————————————————————————————————————————————————————————————————————————————82.5%第三者計測・報告: Sierra9.8%第三者計測・報告: Sierra73.7%第三者計測・報告: Sierra86.8%第三者計測・報告: Sierra
Kimi K3.1 ProMoonshot AI・記載なし記載なし———————————————————————————————————————————————————————————————————————————161.37第三者計測・報告: Epoch AI————————————————————————————
Kimi K3.1 ProMoonshot AI・Max(既定)Max既定65.7%公式計測・報告: Moonshot AI——38.1%公式計測・報告: Moonshot AI————75.5%公式計測・報告: Moonshot AI—————————————————90.2%公式計測・報告: Moonshot AI————92.7公式計測・報告: Moonshot AI72.8公式計測・報告: Moonshot AI————————————————20.7%公式計測・報告: Moonshot AI———————34.6%公式計測・報告: Moonshot AI89.0%公式計測・報告: Moonshot AI—————64.4公式計測・報告: Moonshot AI58.6公式計測・報告: Moonshot AI——94.2%第三者計測・報告: Epoch AI78.3%第三者計測・報告: Epoch AI65.9%第三者計測・報告: Epoch AI100.0%第三者計測・報告: Epoch AI62.2%第三者計測・報告: Epoch AI45.0%第三者計測・報告: Epoch AI—————51.7%公式計測・報告: Moonshot AI—31.5%公式計測・報告: Moonshot AI————92.1%公式計測・報告: Moonshot AI——93.4%公式計測・報告: Moonshot AI84.1%公式計測・報告: Moonshot AI90.0%公式計測・報告: Moonshot AI——95.4%公式計測・報告: Moonshot AI63.0%公式計測・報告: Moonshot AI67.4公式計測・報告: Moonshot AI——36.5%公式計測・報告: Moonshot AI————
Kimi K3Moonshot AI・記載なし記載なし———————————————————————————————————————————————————————————————————————————158.58第三者計測・報告: Epoch AI————————————————————————————
Kimi K3Moonshot AI・LowLow————————————————————————————————————————————————————————————————————84.9%第三者計測・報告: Epoch AI——68.9%第三者計測・報告: Epoch AI—18.0%第三者計測・報告: Epoch AI——————————————————————————————
Kimi K3Moonshot AI・HighHigh————————————————————————————————————————————————————————————————————91.9%第三者計測・報告: Epoch AI——93.3%第三者計測・報告: Epoch AI—37.0%第三者計測・報告: Epoch AI——————————————————————————————
Kimi K3Moonshot AI・Max(既定)Max既定——88.3%公式計測・報告: Moonshot AI—————67.5%公式計測・報告: Moonshot AI—————————————————————————————————————————————36.6%公式計測・報告: Moonshot AI———84.8%公式計測・報告: Moonshot AI—————————93.1%第三者計測・報告: Epoch AI72.2%第三者計測・報告: Epoch AI39.0%第三者計測・報告: Epoch AI97.2%第三者計測・報告: Epoch AI50.6%第三者計測・報告: Epoch AI36.0%第三者計測・報告: Epoch AI54.4%第三者計測・報告: Epoch AI—————42.0%公式計測・報告: Moonshot AI——48.3%公式計測・報告: Moonshot AI—30.8%公式計測・報告: Moonshot AI91.2%公式計測・報告: Moonshot AI84.2%公式計測・報告: Moonshot AI—91.3%公式計測・報告: Moonshot AI81.6%公式計測・報告: Moonshot AI83.4%公式計測・報告: Moonshot AI94.3%公式計測・報告: Moonshot AI97.8%公式計測・報告: Moonshot AI85.7%公式計測・報告: Moonshot AI41.0%公式計測・報告: Moonshot AI63.3公式計測・報告: Moonshot AI————37.1%第三者計測・報告: Sierra——
Mistral Large 4Mistral AI・記載なし記載なし28.3%公式計測・報告: Mistral AI———————61.7%公式計測・報告: Mistral AI————1,393公式計測・報告: Mistral AI—59.9%公式計測・報告: Mistral AI——————————————————————————————————————————————————59.4%公式計測・報告: Mistral AI93.0%公式計測・報告: Mistral AI———————152.69第三者計測・報告: Epoch AI————————————————————————————
Mistral Large 4Mistral AI・HighHigh————————————————————————————————————————————————————————————————————88.1%第三者計測・報告: Epoch AI58.6%第三者計測・報告: Epoch AI26.8%第三者計測・報告: Epoch AI98.3%第三者計測・報告: Epoch AI20.0%第三者計測・報告: Epoch AI33.0%第三者計測・報告: Epoch AI27.8%第三者計測・報告: Epoch AI—————————————————————————————
Qwen3.8-MaxAlibaba(Qwen)・記載なし記載なし——86.6%公式計測・報告: Alibaba (Qwen)—————56.6%公式計測・報告: Alibaba (Qwen)——————————————————————————————————————————————————————————————————157.59第三者計測・報告: Epoch AI——67.7%公式計測・報告: Alibaba (Qwen)———55.9公式計測・報告: Alibaba (Qwen)41.0%公式計測・報告: Alibaba (Qwen)—27.3%公式計測・報告: Alibaba (Qwen)——————————————————
Qwen3.8-MaxAlibaba(Qwen)・Xhigh(既定)Xhigh既定————————————————————————————————————————————————————————————————————92.7%第三者計測・報告: Epoch AI74.7%第三者計測・報告: Epoch AI46.3%第三者計測・報告: Epoch AI99.4%第三者計測・報告: Epoch AI45.8%第三者計測・報告: Epoch AI46.0%第三者計測・報告: Epoch AI52.2%第三者計測・報告: Epoch AI——————————————————————————55.2%第三者計測・報告: Sierra——
Qwen3.8-27BAlibaba(Qwen)・記載なし記載なし————————42.2%公式計測・報告: Alibaba (Qwen)—————————————————————————————————————————————————————————————————————61.7%公式計測・報告: Alibaba (Qwen)———42.3公式計測・報告: Alibaba (Qwen)—————————90.0%公式計測・報告: Alibaba (Qwen)94.6%公式計測・報告: Alibaba (Qwen)——————————
Qwen3.5-397B-A17BAlibaba(Qwen)・記載なし記載なし————————————————————————————————————————————————————————————————————————————————————————————————————81.5%第三者計測・報告: Sierra9.8%第三者計測・報告: Sierra84.4%第三者計測・報告: Sierra97.8%第三者計測・報告: Sierra

列のベンチマーク

Terminal-Bench 4.0
エージェント型コーディング。CLI 環境で複雑な多段階の専門タスクを完遂できるかを測る(v4.0)。並べ替えには「Anthropic 発表の Accuracy vs Cost 図(Opus 5.5・Sonnet 5.5 ページ)」の値を使います。
Terminal-Bench 3.0
エージェント型コーディング。Terminal-Bench の 3.0 版。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
Terminal-Bench 2.1
エージェント型コーディング。Terminal-Bench の 2.1 版。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
Terminal-Bench-Science 0.1
エージェント型コーディング。ターミナル上で行うエージェント型の科学研究タスク評価(v0.1)。並べ替えには「Introducing Claude Fable 5.2 and Claude Mythos 5.2」の値を使います。
FrontierCode v1.1(main set)
エージェント型コーディング。エージェントのコード変更が OSS のメンテナにマージされるかを評価(v1.1、main set)。並べ替えには「Anthropic 発表の Accuracy vs Cost 図(Opus 5.5・Sonnet 5.5 ページ)」の値を使います。
FrontierCode 2.0
エージェント型コーディング。OSS リポジトリのメンテナにマージされるコード変更を書けるかを評価(v2.0)。
FrontierSWE 2
エージェント型コーディング。Proximal の高難度ソフトウェアエンジニアリング・エージェント評価(v2)。並べ替えには「Introducing Claude Fable 5.2 and Claude Mythos 5.2」の値を使います。
CursorBench 4.0
エージェント型コーディング。実際の Cursor セッション由来の曖昧な複数ファイルタスクでコーディングエージェントを評価(v4.0)。並べ替えには「Introducing Claude Opus 5.5」の値を使います。
DeepSWE v1.1
エージェント型コーディング。長期のソフトウェアエンジニアリングタスクの成功率(v1.1)。並べ替えには「Grok 4.7 (xAI news)」の値を使います。
SWE-sweep
エージェント型コーディング。長期のソフトウェア改修タスクの subtask 加重報酬。
GDPval-AA v2.1
知識。Artificial Analysis による 44 職種の実務タスクでのエージェント評価(Elo、v2.1)。並べ替えには「Introducing Claude Opus 5.5」の値を使います。
GDPval-AA v2
知識。Artificial Analysis による知的労働タスクの評価(Elo、v2)。
AA-Briefcase v1.1(Elo)
知識。Artificial Analysis の長期的なナレッジワーク評価(Elo、v1.1)。並べ替えには「Introducing Claude Sonnet 5.5」の値を使います。
AA-Briefcase(Elo・版の記載なし)
知識。Artificial Analysis の長期的なナレッジワーク評価(Elo)。出典に版の記載が無いため v1.1 とは分けている。
AA-Briefcase v1.1(rubric)
知識。AA-Briefcase v1.1 のルーブリック得点。
AutomationBench
ツール利用。Zapier 作成。多数の連携アプリをまたぐ業務ワークフローを遂行できるか。並べ替えには「Introducing Claude Opus 5.5」の値を使います。
Humanity's Last Exam(ツールあり)
推論。専門家レベルの学術知識・推論テスト(ツールあり)。並べ替えには「Introducing Claude Fable 5.2 and Claude Mythos 5.2」の値を使います。
Humanity's Last Exam(ツールなし)
推論。専門家レベルの学術知識・推論テスト(ツールなし)。
HLE-Verified
推論。Humanity's Last Exam の検証済みサブセット。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
OSWorld 2.1(partial)
コンピュータ操作。実コンピュータ操作で長い多段階タスクを完了できるか(v2.1、partial credit)。並べ替えには「Introducing Claude Sonnet 5.5」の値を使います。
OSWorld 2.1(offline subset)
コンピュータ操作。OSWorld 2.1 のオフライン subset(Claude Haiku 5.5 発表ページの表記)。
OSWorld 2.1(offline set・partial)
コンピュータ操作。OSWorld 2.1 のオフラインセット(82 タスク)の partial score。並べ替えには「Introducing Claude Fable 5.2 and Claude Mythos 5.2」の値を使います。
OSWorld 2.0
コンピュータ操作。OSWorld 2.0 の partial score。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
Agents' Last Exam v1.1(rubric score)
コンピュータ操作。長時間のエージェント実務タスク(v1.1、122 タスク、averaged rubric score)。
Agents' Last Exam(pass rate・版の記載なし)
コンピュータ操作。Agents' Last Exam の pass rate。出典に版の記載が無いため v1.1(rubric score)とは分けている。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
Agents' Last Exam(版・指標の記載なし)
コンピュータ操作。Agents' Last Exam。出典に版と指標の記載が無いため、ほかの Agents' Last Exam とは分けている。
Chartography(ツールあり)
マルチモーダル。チャート・図の読み取り精度(ツールあり)。並べ替えには「Introducing Claude Opus 5.5」の値を使います。
Chartography(ツールなし)
マルチモーダル。チャート・図の読み取り精度(ツールなし)。Surge AI 提供。並べ替えには「Introducing Claude Fable 5.2 and Claude Mythos 5.2」の値を使います。
WANDR
ツール利用。Perplexity による大規模データ収集タスクのエージェント評価。
WANDR(relaxed score)
ツール利用。WANDR の relaxed score。
BenchCAD 2.1(ツールあり)
その他。ハードウェア設計(形状・回路)が参照とどれだけ一致するかを 0〜100 の部分点で評価(v2.1、ツールあり)。
BenchCAD(ツールあり・版の記載なし)
その他。CAD 生成評価(ツールあり)。出典に版の記載が無いため BenchCAD 2.1 とは分けている。
BenchCAD(ツールなし・版の記載なし)
その他。CAD 生成評価(ツールなし)。出典に版の記載が無い。
CVE Rediscovery
その他。Anthropic 内部評価。修正前のスナップショットから公開 CVE を独自に発見できる割合。
CyScenarioBench
その他。サイバーセキュリティのシナリオ評価(ラボごとに固有タスク)。
De novo binder design(24 時間)
その他。タンパク質の de novo バインダー設計(24 時間)。
RoboDojo Sim
その他。シミュレーション上の双腕ロボット制御。
Remote Labor Index(RLI)
知識。リモート労働タスクの遂行度を測る指標。
HealthBench Professional(長さ調整スコア)
知識。OpenAI の医療対話評価(専門家向け)。長さ調整スコア。
HealthBench Hard(長さ調整スコア)
知識。OpenAI の医療対話評価の難問サブセット。長さ調整スコア。
HealthBench Professional
知識。医療専門家向けタスク評価。長さ調整の有無は出典に記載なし。
Artificial Analysis Intelligence Index v5.0
その他。Artificial Analysis による複数評価の総合指数(v5.0、with tools)。
Vals Index v2.2
その他。Vals AI の総合指数(v2.2)。
Vending-Bench 2
その他。自販機経営シミュレーション。スコアは最終残高(USD)。
Blueprint-Bench 2
マルチモーダル。図面理解の類似度スコア。
GraphWalks BFS(256k〜1M)
長文脈。256k〜1M トークンの文脈でのグラフ探索(BFS、F1)。
GraphWalks BFS(128k 以下)
長文脈。128k トークンまでの文脈でのグラフ探索(BFS、F1)。
RiemannBench
数学。Surge の研究数学ベンチマーク。
CWE-bench v1
コーディング。脆弱性パッチ適用(programmatic pass@1、v1)。
ExploitGym
その他。脆弱性エクスプロイトの成功率。並べ替えには「Gemini 4 Carbon (Google DeepMind models page, benchmark table)」の値を使います。
SEC-bench Pro
その他。脆弱性発見(PoC 作成)の pass@1。並べ替えには「Gemini 4 Carbon (Google DeepMind models page, benchmark table)」の値を使います。
Vals Finance Agent v2
ツール利用。金融アナリスト業務のエージェント評価(v2)。並べ替えには「Gemini 4 Argon model card」の値を使います。
Harvey Legal Agent Benchmark
ツール利用。法務エージェント業務の all-pass 率。並べ替えには「Grok 4.7 (xAI news)」の値を使います。
Vibe Code Bench
コーディング。アプリ生成(vibe coding)の評価。
PostTrainBench
その他。ML の post-training の実務エンジニアリング評価。出典に版の記載が無いもの(v1.2 は posttrainbench-1-2 で分けている)。並べ替えには「Gemini 4 Argon model card」の値を使います。
LABBench 2
知識。生物学研究タスクの評価。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
LVBench
マルチモーダル。長尺動画の理解。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
GDP.PDF
知識。PDF を扱う業務タスクの all-pass 率。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
CharXiv Reasoning
マルチモーダル。論文の図表の推論(ツールなし)。並べ替えには「Gemini 3.5 Flash model card」の値を使います。
BioMysteryBench(Human Solvable)
知識。生物学のミステリー課題(人間が解ける群)。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
BioMysteryBench(Human Difficult)
知識。生物学のミステリー課題(人間にも難しい群)。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
EEBench
その他。xAI の発表で使われた評価(詳細は出典に記載なし)。
CyberGym
その他。脆弱性再現のサイバーセキュリティ評価。並べ替えには「Introducing Claude Opus 4.7」の値を使います。
ExploitBench
その他。エクスプロイト作成の評価。
OfficeQA Pro v2
知識。オフィス文書の QA 評価(v2)。
Frontier Finance
知識。金融実務の評価。
SWE-Atlas-QnA
コーディング。コードベース理解の QA。
Cybench
その他。CTF 形式のサイバーセキュリティ評価。
GPQA Diamond
推論。大学院レベルの科学 4 択問題 198 問(Epoch AI が自前で実行)。
FrontierMath Tiers 1-3(v2)
数学。Epoch AI の非公開の研究レベル数学問題 Tier 1-3(v2)。
FrontierMath Tier 4(v2)
数学。FrontierMath の最難関 Tier 4(v2、非公開)。
OTIS Mock AIME 2024-2025
数学。AIME 形式の数学コンテスト問題(Epoch AI が実行)。
SimpleQA Verified
知識。短答の事実知識問題(検証済み版、Epoch AI が実行)。
Chess Puzzles(Epoch AI)
推論。チェスのタクティクス問題(Epoch AI が実行)。
MirrorCode
コーディング。Epoch AI が実行するコーディング課題。
Epoch Capabilities Index(ECI)
その他。Epoch AI が多数のベンチマークを統合した能力指標(モデル単位、effort は統合)。
LMArena Text(style control・overall)
文章。LMArena のテキスト対戦の人間投票によるレーティング(スタイルコントロールあり、サイトの既定表示)。
LMArena Text Coding(style control なし)
コーディング。LMArena のテキスト対戦の coding カテゴリ(スタイルコントロールなし)。
SWE-Bench Pro
エージェント型コーディング。ソフトウェアエンジニアリングのエージェント課題(公開セット)の解決率。出典ごとにタスクの修正やハーネスが違う(conditions に記載)。並べ替えには「Gemini 3.5 Flash model card」の値を使います。
SWE-Marathon v1.1
エージェント型コーディング。長時間のソフトウェアエンジニアリング課題(v1.1)。並べ替えには「GLM-5.3 (Hugging Face model card, zai-org)」の値を使います。
SWE-Marathon(版の記載なし)
エージェント型コーディング。長時間のソフトウェアエンジニアリング課題。出典に版の記載が無い、または v1.1 の最終版より前のタスクで評価したため v1.1 とは分けている。
ProgramBench(Almost Solved)
エージェント型コーディング。プログラムをゼロから作る課題で、ほぼ解けた(スコア 95% 以上)タスクの割合。並べ替えには「DeepSeek-V4.1-Flash (Hugging Face model card, deepseek-ai)」の値を使います。
NL2Repo-Bench
エージェント型コーディング。自然言語の仕様からリポジトリ全体を作る課題のスコア。並べ替えには「DeepSeek-V4.1-Flash (Hugging Face model card, deepseek-ai)」の値を使います。
MLS-Bench-Lite
エージェント型コーディング。機械学習研究のエンジニアリング課題(Lite 版)。並べ替えには「Kimi K3 (Hugging Face model card, moonshotai)」の値を使います。
AutomationBench v1.0.6
ツール利用。Zapier 作成の業務ワークフロー自動化(v1.0.6)。版の違う automationbench(Anthropic の図)や公開 600 タスク版とは分けている。並べ替えには「DeepSeek-V4.1-Flash (Hugging Face model card, deepseek-ai)」の値を使います。
AutomationBench(公開 600 タスク)
ツール利用。AutomationBench の公開 600 タスクのサブセット。並べ替えには「Kimi K3 (Hugging Face model card, moonshotai)」の値を使います。
BrowseComp
ツール利用。Web を調べて答えを探すエージェント課題。並べ替えには「Kimi K3.1 Pro (Hugging Face model card, moonshotai)」の値を使います。
MCP Atlas
ツール利用。MCP サーバーを使う多段のツール利用ワークフロー。出典ごとにサブセット・採点者が違う(conditions に記載)。
OSWorld-Verified
コンピュータ操作。実コンピュータ操作のタスク(検証済み版)。出典ごとに実行方法が違う(conditions に記載)。並べ替えには「Gemini 3.5 Flash model card」の値を使います。
CharXiv Reasoning(ツールあり)
マルチモーダル。論文の図表の推論(ツールあり。Python・検索など出典ごとに違う)。並べ替えには「Gemini 3.7 Flash model card」の値を使います。
MMMU-Pro
マルチモーダル。多分野の画像つき問題の理解と推論(ツールなし)。並べ替えには「Gemini 3.5 Flash model card」の値を使います。
MMMU-Pro(ツールあり)
マルチモーダル。MMMU-Pro を Python などのツールありで解いたもの。並べ替えには「Kimi K3.1 Pro (Hugging Face model card, moonshotai)」の値を使います。
MathVision
数学。図を含む数学問題(ツールなし)。並べ替えには「Kimi K3 (Hugging Face model card, moonshotai)」の値を使います。
MathVision(ツールあり)
数学。図を含む数学問題をコード実行などのツールありで解いたもの。並べ替えには「Kimi K3 (Hugging Face model card, moonshotai)」の値を使います。
BabyVision(ツールあり)
マルチモーダル。基礎的な視覚推論(ツールあり)。並べ替えには「DeepSeek-V4.1-Flash (Hugging Face model card, deepseek-ai)」の値を使います。
ZeroBench main(ツールあり・pass@5)
マルチモーダル。難しい画像推論問題(main set)をツールありで 5 回試行した pass@5。並べ替えには「DeepSeek-V4.1-Flash (Hugging Face model card, deepseek-ai)」の値を使います。
OfficeQA Pro
知識。オフィス文書の QA 評価(v2 とは分けている)。並べ替えには「Kimi K3.1 Pro (Hugging Face model card, moonshotai)」の値を使います。
MRCR v2(8-needle・128k)
長文脈。長文中の複数の情報を取り出す評価(8-needle、128k までの平均)。並べ替えには「Gemini 3.5 Flash model card」の値を使います。
MRCR v2(8-needle・1M)
長文脈。長文中の複数の情報を取り出す評価(8-needle、1M トークン)。
PostTrainBench v1.2
その他。ML の post-training の実務エンジニアリング評価(v1.2)。版の記載が無い posttrainbench とは分けている。
τ²-bench airline (v1.0.1)
ツール利用。ツールを使う会話エージェントが、ユーザー役のシミュレータと対話して航空会社の顧客対応のタスクを方針どおりに完了できるか(pass^1)。tau2_bench_version v1.0.1 の提出(ユーザーシミュレータは gpt-5.2。提出の user_simulator)。1.0.0 で airline のタスク修正(CHANGELOG の [1.0.0] の "Airline task fixes (27 tasks)")があったが、ここに載せた提出の submission_date(2026-02-26〜03-02)は 1.0.0 のリリース(2026-03-18)より前で、修正を含むかは提出から分からない。v1.0.1 の採点の変更は banking_knowledge だけで、このドメインには及ばない(CHANGELOG の [1.0.1] の "Other domains are unaffected")。
τ²-bench banking_knowledge (v1.0.1)
ツール利用。ツールを使う会話エージェントが、ユーザー役のシミュレータと対話して、知識ベースの検索が要る銀行の顧客対応のタスクを方針どおりに完了できるか(pass^1)。tau2_bench_version v1.0.1 の提出。v1.0.1 で banking_knowledge の採点を直したので、1.0.1 より前の版の値とは比べられない(CHANGELOG の [1.0.1] の "banking_knowledge scores are not comparable across this release")。並べ替えには「τ²-bench v1.0.1 banking_knowledge(Sierra の実行・検索 alltools)」の値を使います。
τ²-bench retail (v1.0.1)
ツール利用。ツールを使う会話エージェントが、ユーザー役のシミュレータと対話して小売の顧客対応のタスクを方針どおりに完了できるか(pass^1)。tau2_bench_version v1.0.1 の提出(ユーザーシミュレータは gpt-5.2。提出の user_simulator)。1.0.0 で retail のタスク修正(CHANGELOG の [1.0.0] の "Retail task fixes (26 tasks)")があったが、ここに載せた提出の submission_date(2026-02-26〜03-02)は 1.0.0 のリリース(2026-03-18)より前で、修正を含むかは提出から分からない。v1.0.1 の採点の変更は banking_knowledge だけで、このドメインには及ばない(CHANGELOG の [1.0.1] の "Other domains are unaffected")。
τ²-bench telecom (v1.0.1)
ツール利用。ツールを使う会話エージェントが、ユーザー役のシミュレータと対話して通信会社の技術サポート(ユーザーも端末を操作する二重制御)のタスクを方針どおりに完了できるか(pass^1)。tau2_bench_version v1.0.1 の提出(ユーザーシミュレータは gpt-5.2。提出の user_simulator)。CHANGELOG の [1.0.0] には telecom のタスク修正の項は無い。v1.0.1 の採点の変更は banking_knowledge だけで、このドメインには及ばない(CHANGELOG の [1.0.1] の "Other domains are unaffected")。