Chess Puzzles(Epoch AI)
チェスのタクティクス問題(Epoch AI が実行)。
- 分類
- 推論
- 単位
- パーセント(%)
- 高いほど良い
- 比較グループ
- 1グループ
- 今選べるモデルの順位・順位を付けた結果 8 件
- すべてのモデル(記録): 1 グループ・62 件
ランキング
出典区分(公式・第三者・論文)と測定条件が違う値は比べられないため、比較グループ(同じ出典か、同じ条件と確認できた出典の集まり)ごとに分けて順位を付けています。
今 Claude Code / Codex で選べるモデル(旧モデルを除く)だけで順位を付けています。
第三者の結果(Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.0)
| 順位 | モデル | effort | スコア | 出典のコスト(指標) | 計測・報告 | 出典 |
|---|---|---|---|---|---|---|
| 1 | Claude Fable 5.2 | Max | 79.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5.2 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-fable-5-2_max, Best score (across scorers)=0.79, stderr=0.040936018074033236, Started at=2026-11-06T01:14:45.000Z |
| 2 | GPT-6 Astra | Max | 74.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Astra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-6-astra_max, Best score (across scorers)=0.74, stderr=0.0440844002276808, Started at=2026-10-13T13:42:38.000Z |
| 3 | GPT-6.1 Sol | Max | 68.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6.1 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-6.1-sol_max, Best score (across scorers)=0.68, stderr=0.04688261722621507, Started at=2026-10-13T12:40:12.000Z |
| 4 | Claude Opus 5.5 | Max | 67.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-5-5_max, Best score (across scorers)=0.67, stderr=0.04725815626252609, Started at=2026-10-13T13:01:31.000Z |
| 5 | Claude Sonnet 5.5 | Max | 59.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-sonnet-5-5_max, Best score (across scorers)=0.59, stderr=0.04943110704237103, Started at=2026-10-13T13:00:38.000Z |
| 6 | Claude Haiku 5.5 | Max | 55.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Haiku 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-haiku-5-5_max, Best score (across scorers)=0.55, stderr=0.049999999999999996, Started at=2026-10-13T12:40:01.000Z |
| 7 | GPT-6 Luna | Max | 36.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Luna (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-6-luna_max, Best score (across scorers)=0.36, stderr=0.04824181513244218, Started at=2026-10-13T13:37:06.000Z |
| 8 | Claude Haiku 5.5 | Low | 24.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Haiku 5.5 (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-haiku-5-5_low, Best score (across scorers)=0.24, stderr=0.04292346959909278, Started at=2026-10-13T07:50:03.000Z |
すべてのモデルの順位(記録)
旧モデルと Claude Code / Codex で選べないモデルを含めて、比較グループごとに順位を付け直したものです。順位を付ける顔ぶれが違うので、上の順位とは違います。
旧モデル・選べないモデルを含む順位を開く(62 件)
第三者の結果(Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.0)
| 順位 | モデル | effort | スコア | 出典のコスト(指標) | 計測・報告 | 出典 |
|---|---|---|---|---|---|---|
| 1 | Claude Fable 5.2 | Max | 79.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5.2 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-fable-5-2_max, Best score (across scorers)=0.79, stderr=0.040936018074033236, Started at=2026-11-06T01:14:45.000Z |
| 2 | Gemini 4 Carbon | High | 78.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 4 Carbon (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-4-carbon_high, Best score (across scorers)=0.78, stderr=0.04163331998932266, Started at=2026-11-02T23:17:42.000Z |
| 3 | GPT-6 Astra | Max | 74.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Astra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-6-astra_max, Best score (across scorers)=0.74, stderr=0.0440844002276808, Started at=2026-10-13T13:42:38.000Z |
| 4 | GPT-6.1 Sol | Max | 68.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6.1 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-6.1-sol_max, Best score (across scorers)=0.68, stderr=0.04688261722621507, Started at=2026-10-13T12:40:12.000Z |
| 5 | Claude Opus 5.5 | Max | 67.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-5-5_max, Best score (across scorers)=0.67, stderr=0.04725815626252609, Started at=2026-10-13T13:01:31.000Z |
| 6 | Gemini 3.7 Flash | High | 66.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.7 Flash (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.7-flash_high, Best score (across scorers)=0.66, stderr=0.04760952285695234, Started at=2026-10-13T13:00:23.000Z所在 chess_puzzles.csv のデータ行 154 件目(ファイルの 210 行目)、id=Xu34dKTAdpBWL6advf6DMg、Model version=gemini-3.7-flash_high |
| 7 | GPT-5.5 | Xhigh | 63.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.5 (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.5_xhigh, Best score (across scorers)=0.63, stderr=0.048523658709390974, Started at=2026-10-13T13:54:48.000Z所在 chess_puzzles.csv のデータ行 78 件目(ファイルの 129 行目)、id=DFWQcrbMegFAcEWZKWoJxC、Model version=gpt-5.5_xhigh |
| 8 | Gemini 4 Argon | High | 59.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 4 Argon (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-4-argon_high, Best score (across scorers)=0.59, stderr=0.04943110704237103, Started at=2026-10-13T17:15:18.000Z |
| 8 | Claude Sonnet 5.5 | Max | 59.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-sonnet-5-5_max, Best score (across scorers)=0.59, stderr=0.04943110704237103, Started at=2026-10-13T13:00:38.000Z |
| 8 | GPT-5.6 Sol | Max | 59.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-sol_max, Best score (across scorers)=0.59, stderr=0.049431107042371025, Started at=2026-10-13T13:50:12.000Z所在 chess_puzzles.csv のデータ行 88 件目(ファイルの 139 行目)、id=oWqwMmwEd7LU3eU5Ftak64、Model version=gpt-5.6-sol_max |
| 11 | Gemini 3.8 Flash | High | 58.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.8 Flash (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.8-flash_high, Best score (across scorers)=0.58, stderr=0.04960449637488583, Started at=2026-10-13T12:39:05.000Z所在 chess_puzzles.csv のデータ行 163 件目(ファイルの 220 行目)、id=Hpyy6CpmXmd5q7Zbdq63CR、Model version=gemini-3.8-flash_high |
| 12 | GPT-6 Sol | Max | 56.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Sol (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-6-sol_max, Best score (across scorers)=0.56, stderr=0.049888765156985884, Started at=2026-10-13T13:41:42.000Z所在 chess_puzzles.csv のデータ行 105 件目(ファイルの 159 行目)、id=N9uFn7EZFsvHNcHEwEy3J6、Model version=gpt-6-sol_max |
| 13 | Claude Haiku 5.5 | Max | 55.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Haiku 5.5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-haiku-5-5_max, Best score (across scorers)=0.55, stderr=0.049999999999999996, Started at=2026-10-13T12:40:01.000Z |
| 14 | Claude Opus 4.8 | Max | 52.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.8"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-8_max, Best score (across scorers)=0.52, stderr=0.05021167315686782, Started at=2026-10-13T13:35:27.000Z所在 chess_puzzles.csv のデータ行 117 件目(ファイルの 171 行目)、id=PEZpuEuU65bu3ZtvjLytHq、Model version=claude-opus-4-8_max |
| 15 | Gemini 3.1 Pro Preview | High | 51.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.1 Pro Preview"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.1-pro-preview_high, Best score (across scorers)=0.51, stderr=0.05024183937956913, Started at=2026-10-13T13:34:13.000Z所在 chess_puzzles.csv のデータ行 123 件目(ファイルの 177 行目)、id=FTDFCpXzDTgfgWBNdHLHGc、Model version=gemini-3.1-pro-preview_high |
| 16 | DeepSeek-V4.1-Flash | 記載なし | 48.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "DeepSeek V4.1 Flash (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。; 出典の effort 表記「max」は公式の effort 一覧を取得できていないため effort なし出典の該当箇所chess_puzzles.csv: Model version=deepseek-v4.1-flash_max, Best score (across scorers)=0.48, stderr=0.05021167315686782, Started at=2026-10-13T12:39:44.000Z所在 chess_puzzles.csv のデータ行 160 件目(ファイルの 216〜217 行目。複数行のレコード)、id=ACpDTbhRPwce2BWQTWD8iC、Model version=deepseek-v4.1-flash_max |
| 17 | GPT-5.6 Terra | Max | 47.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Terra (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-terra_max, Best score (across scorers)=0.47, stderr=0.05016135580465918, Started at=2026-10-13T13:53:13.000Z所在 chess_puzzles.csv のデータ行 85 件目(ファイルの 136 行目)、id=J2ZgtxyaQZfyDMPTPxS8nm、Model version=gpt-5.6-terra_max |
| 17 | Claude Fable 5 | Max | 47.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-fable-5_max, Best score (across scorers)=0.47, stderr=0.05016135580465918, Started at=2026-10-13T13:34:37.000Z所在 chess_puzzles.csv のデータ行 121 件目(ファイルの 175 行目)、id=bxS76CJuVws8iwWU2Wr2PM、Model version=claude-fable-5_max |
| 19 | Qwen3.8-Max | Xhigh | 46.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Qwen3.8 Max (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=qwen3.8-max_xhigh, Best score (across scorers)=0.46, stderr=0.05009082659620331, Started at=2026-10-13T13:13:49.000Z所在 chess_puzzles.csv のデータ行 143 件目(ファイルの 199 行目)、id=bq5y6Tp83KLtxC58UDfpyN、Model version=qwen3.8-max_xhigh |
| 19 | DeepSeek-V4.1-Flash-1017 | Max | 46.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "DeepSeek V4.1 Flash 1017 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=deepseek-v4.1-flash-1017_max, Best score (across scorers)=0.46, stderr=0.05009082659620331, Started at=2026-10-19T22:39:00.000Z所在 chess_puzzles.csv のデータ行 11 件目(ファイルの 23 行目)、id=4sRo7TxavQAsjaEALPZdDy、Model version=deepseek-v4.1-flash-1017_max |
| 19 | DeepSeek-V4-Pro-0813 | Max | 46.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "DeepSeek V4 Pro 0813 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=deepseek-v4-pro-0813_max, Best score (across scorers)=0.46, stderr=0.05009082659620331, Started at=2026-10-13T13:13:34.000Z所在 chess_puzzles.csv のデータ行 144 件目(ファイルの 200 行目)、id=C56VHYLMeww2wXebeJh3gg、Model version=deepseek-v4-pro-0813_max |
| 22 | Kimi K3.1 Pro | Max | 45.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Kimi K3.1 Pro (Together, max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。; Epoch は Together の推論 API 経由で実行(Model version kimi-k3.1-pro-together)出典の該当箇所chess_puzzles.csv: Model version=kimi-k3.1-pro-together_max, Best score (across scorers)=0.45, stderr=0.05, Started at=2026-11-06T00:59:23.000Z所在 chess_puzzles.csv のデータ行 2 件目(ファイルの 3 行目)、id=8eSYUWwajdBjKiiM9CwnKu、Model version=kimi-k3.1-pro-together_max |
| 22 | Claude Fable 5 | High | 45.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5 (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-fable-5_high, Best score (across scorers)=0.45, stderr=0.05, Started at=2026-10-13T13:24:08.000Z所在 chess_puzzles.csv のデータ行 133 件目(ファイルの 189 行目)、id=9ZFhnyMNCKZ8XdR58WGD3D、Model version=claude-fable-5_high |
| 24 | GPT-5.6 Luna | Max | 43.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Luna (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-luna_max, Best score (across scorers)=0.43, stderr=0.0497569851956243, Started at=2026-10-13T13:53:45.000Z所在 chess_puzzles.csv のデータ行 82 件目(ファイルの 133 行目)、id=LUfGWqWQim7rdBPgSpbrXS、Model version=gpt-5.6-luna_max |
| 25 | Gemini 3.6 Flash | Low | 42.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.6 Flash"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.6-flash_low, Best score (across scorers)=0.42, stderr=0.04960449637488583, Started at=2026-10-13T13:12:52.000Z所在 chess_puzzles.csv のデータ行 148 件目(ファイルの 204 行目)、id=hJ6XXLBm9yfXtSbbhWuwpw、Model version=gemini-3.6-flash_low |
| 26 | Claude Opus 4.7 | Max | 41.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.7 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-7_max, Best score (across scorers)=0.41, stderr=0.04943110704237103, Started at=2026-10-13T13:36:23.000Z所在 chess_puzzles.csv のデータ行 114 件目(ファイルの 168 行目)、id=XXPqVNR7WCFFA2Rnzjcbk6、Model version=claude-opus-4-7_max |
| 26 | Grok 4.7 | Xhigh | 41.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Grok 4.7 (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=grok-4.7_xhigh, Best score (across scorers)=0.41, stderr=0.04943110704237103, Started at=2026-10-13T12:39:21.000Z所在 chess_puzzles.csv のデータ行 162 件目(ファイルの 219 行目)、id=L5Ck7pMy8bVmVMMLwxJN7f、Model version=grok-4.7_xhigh |
| 28 | Gemini 3 Flash Preview | High | 40.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3 Flash Preview"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3-flash-preview_high, Best score (across scorers)=0.4, stderr=0.0492365963917331, Started at=2026-10-13T13:42:10.000Z所在 chess_puzzles.csv のデータ行 104 件目(ファイルの 158 行目)、id=UUNZJtgib9XbCjLEdhtGaT、Model version=gemini-3-flash-preview_high |
| 28 | Gemini 3.6 Flash | High | 40.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.6 Flash"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.6-flash_high, Best score (across scorers)=0.4, stderr=0.0492365963917331, Started at=2026-10-13T13:14:52.000Z所在 chess_puzzles.csv のデータ行 140 件目(ファイルの 196 行目)、id=ZDeGG5QYkdgVqzGPmmnbfx、Model version=gemini-3.6-flash_high |
| 30 | GLM-5.3 | Max | 37.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GLM-5.3 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=glm-5.3_max, Best score (across scorers)=0.37, stderr=0.048523658709390974, Started at=2026-10-13T21:22:18.000Z所在 chess_puzzles.csv のデータ行 26 件目(ファイルの 56 行目)、id=kG3hbd8qLEd6fLAJHyQTiN、Model version=glm-5.3_max |
| 30 | Kimi K3 | High | 37.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Kimi K3 (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=kimi-k3_high, Best score (across scorers)=0.37, stderr=0.048523658709390974, Started at=2026-10-13T17:10:13.000Z所在 chess_puzzles.csv のデータ行 31 件目(ファイルの 63〜65 行目。複数行のレコード)、id=X2QNPHFXuWosA6AiuvVtDv、Model version=kimi-k3_high |
| 32 | GPT-6 Luna | Max | 36.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-6 Luna (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-6-luna_max, Best score (across scorers)=0.36, stderr=0.04824181513244218, Started at=2026-10-13T13:37:06.000Z |
| 32 | Claude Opus 4.7 | Xhigh | 36.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.7 (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-7_xhigh, Best score (across scorers)=0.36, stderr=0.04824181513244218, Started at=2026-10-13T13:35:58.000Z所在 chess_puzzles.csv のデータ行 115 件目(ファイルの 169 行目)、id=RHbNnWqK6x8f6pR2AZ8VAq、Model version=claude-opus-4-7_xhigh |
| 32 | Kimi K3 | Max | 36.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Kimi K3 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=kimi-k3_max, Best score (across scorers)=0.36, stderr=0.048241815132442176, Started at=2026-10-13T17:13:35.000Z所在 chess_puzzles.csv のデータ行 30 件目(ファイルの 60〜62 行目。複数行のレコード)、id=nzQV9YvictnDF2EwxqTJQs、Model version=kimi-k3_max |
| 35 | Mistral Large 4 | High | 33.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Mistral Large 4 Preview (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。; Epoch の表記は Mistral Large 4 Preview(2026-10-06 版。2026-10-29 の Mistral Large 4 は別の Model version mistral-large-4-0-oss で、ここには入れていない)出典の該当箇所chess_puzzles.csv: Model version=mistral-large-4-0_high, Best score (across scorers)=0.33, stderr=0.04725815626252608, Started at=2026-10-15T22:52:59.000Z所在 chess_puzzles.csv のデータ行 12 件目(ファイルの 24〜35 行目。複数行のレコード)、id=eNdDCt2u6A8mPisK56SApU、Model version=mistral-large-4-0_high |
| 35 | Grok 4.6 | Xhigh | 33.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Grok 4.6 (xhigh)"。effort は Epoch の Model version 接尾辞 _xhigh。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=grok-4.6_xhigh, Best score (across scorers)=0.33, stderr=0.04725815626252608, Started at=2026-10-13T13:14:03.000Z所在 chess_puzzles.csv のデータ行 142 件目(ファイルの 198 行目)、id=NiuExVccWkWbWqi6ex6vvf、Model version=grok-4.6_xhigh |
| 35 | Grok 4.6 | High | 33.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Grok 4.6 (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=grok-4.6_high, Best score (across scorers)=0.33, stderr=0.04725815626252608, Started at=2026-10-13T13:00:07.000Z所在 chess_puzzles.csv のデータ行 156 件目(ファイルの 212 行目)、id=YoAJyC3j8dZ6ZpDZ5rSDLw、Model version=grok-4.6_high |
| 38 | GPT-5.6 Sol | Low | 31.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Sol (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-sol_low, Best score (across scorers)=0.31, stderr=0.04648231987117317, Started at=2026-10-13T13:49:48.000Z所在 chess_puzzles.csv のデータ行 89 件目(ファイルの 140 行目)、id=V6aVGtn9gAmRep2oBGsqVN、Model version=gpt-5.6-sol_low |
| 38 | Claude Fable 5 | Low | 31.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Fable 5 (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-fable-5_low, Best score (across scorers)=0.31, stderr=0.04648231987117317, Started at=2026-10-13T13:23:41.000Z所在 chess_puzzles.csv のデータ行 134 件目(ファイルの 190 行目)、id=2jKf4iEfVQnHkgAwEtD9Nn、Model version=claude-fable-5_low |
| 40 | GPT-5.5 | Low | 30.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.5 (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.5_low, Best score (across scorers)=0.3, stderr=0.04605661864718382, Started at=2026-10-13T13:54:20.000Z所在 chess_puzzles.csv のデータ行 80 件目(ファイルの 131 行目)、id=4EayGByBV2xodNBkrZMcFb、Model version=gpt-5.5_low |
| 41 | Claude Opus 4.8 | Low | 29.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.8"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-8_low, Best score (across scorers)=0.29, stderr=0.045604802157206865, Started at=2026-10-13T13:35:16.000Z所在 chess_puzzles.csv のデータ行 118 件目(ファイルの 172 行目)、id=icTHLT2S2egxYtgbjQHUng、Model version=claude-opus-4-8_low |
| 41 | Gemini 3.6 Flash | Minimal | 29.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.6 Flash"。effort は Epoch の Model version 接尾辞 _minimal。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.6-flash_minimal, Best score (across scorers)=0.29, stderr=0.04560480215720686, Started at=2026-10-13T13:12:45.000Z所在 chess_puzzles.csv のデータ行 149 件目(ファイルの 205 行目)、id=beSbPHiiWcwJBSzYRh7Kh4、Model version=gemini-3.6-flash_minimal |
| 43 | GPT-5.6 Terra | Low | 27.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Terra (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-terra_low, Best score (across scorers)=0.27, stderr=0.044619604333847374, Started at=2026-10-13T13:51:29.000Z所在 chess_puzzles.csv のデータ行 86 件目(ファイルの 137 行目)、id=bA5j9K2shzZVFGTMQ5g6EU、Model version=gpt-5.6-terra_low |
| 44 | Claude Opus 4.7 | Low | 26.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.7 (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-7_low, Best score (across scorers)=0.26, stderr=0.0440844002276808, Started at=2026-10-13T13:35:50.000Z所在 chess_puzzles.csv のデータ行 116 件目(ファイルの 170 行目)、id=NyAvSf73nUe84HuY6Vpjkh、Model version=claude-opus-4-7_low |
| 45 | Claude Haiku 5.5 | Low | 24.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Haiku 5.5 (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-haiku-5-5_low, Best score (across scorers)=0.24, stderr=0.04292346959909278, Started at=2026-10-13T07:50:03.000Z |
| 46 | Claude Sonnet 4.6 | Max | 23.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 4.6 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-sonnet-4-6_max, Best score (across scorers)=0.23, stderr=0.04229525846816507, Started at=2026-10-13T13:44:15.000Z所在 chess_puzzles.csv のデータ行 95 件目(ファイルの 146 行目)、id=6P9AJQmBzaPmE7ossbqLjz、Model version=claude-sonnet-4-6_max |
| 47 | Claude Opus 4.6 | Max | 21.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.6 (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-6_max, Best score (across scorers)=0.21, stderr=0.040936018074033236, Started at=2026-10-13T13:43:19.000Z所在 chess_puzzles.csv のデータ行 98 件目(ファイルの 149 行目)、id=aKc2rzsA6YPYwCkE7nhvvB、Model version=claude-opus-4-6_max |
| 47 | Gemini 3.5 Flash-Lite | Low | 21.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.5 Flash-Lite"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.5-flash-lite_low, Best score (across scorers)=0.21, stderr=0.040936018074033236, Started at=2026-10-13T13:25:11.000Z所在 chess_puzzles.csv のデータ行 132 件目(ファイルの 188 行目)、id=d5QCJNq9uLtxjhiMhqXLmg、Model version=gemini-3.5-flash-lite_low |
| 47 | GLM-5.3-Flash | Max | 21.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GLM-5.3-Flash (max)"。effort は Epoch の Model version 接尾辞 _max。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=glm-5.3-flash_max, Best score (across scorers)=0.21, stderr=0.040936018074033236, Started at=2026-10-13T15:54:34.000Z所在 chess_puzzles.csv のデータ行 33 件目(ファイルの 69〜71 行目。複数行のレコード)、id=fWNxmiSUC7BX8whqvzssY8、Model version=glm-5.3-flash_max |
| 50 | Claude Sonnet 4.6 | High | 19.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 4.6 (high)"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-sonnet-4-6_high, Best score (across scorers)=0.19, stderr=0.039427724440366255, Started at=2026-10-13T13:36:50.000Z所在 chess_puzzles.csv のデータ行 112 件目(ファイルの 166 行目)、id=Atc4F5iuMZu3vNBWVGCBnv、Model version=claude-sonnet-4-6_high |
| 50 | Claude Opus 4.8 | 記載なし | 19.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.8"。effort は Epoch の Model version 接尾辞 _none。データ取得 2026-11-12。; 出典の effort 表記「none」は公式の effort 一覧に無いため effort なし出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-8_none, Best score (across scorers)=0.19, stderr=0.039427724440366255, Started at=2026-10-13T13:34:59.000Z所在 chess_puzzles.csv のデータ行 119 件目(ファイルの 173 行目)、id=jDWEviMweCdzGxLfz8sdBm、Model version=claude-opus-4-8_none |
| 52 | Kimi K3 | Low | 18.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Kimi K3 (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=kimi-k3_low, Best score (across scorers)=0.18, stderr=0.03861229196653691, Started at=2026-10-13T17:06:54.000Z所在 chess_puzzles.csv のデータ行 32 件目(ファイルの 66〜68 行目。複数行のレコード)、id=VPSX7EnwWuBrCPnpYGMUEM、Model version=kimi-k3_low |
| 53 | GPT-5.6 Luna | Low | 17.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Luna (low)"。effort は Epoch の Model version 接尾辞 _low。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-luna_low, Best score (across scorers)=0.17, stderr=0.03775251680686369, Started at=2026-10-13T13:53:37.000Z所在 chess_puzzles.csv のデータ行 83 件目(ファイルの 134 行目)、id=FagAUZ7m5PJHseDATvp2vf、Model version=gpt-5.6-luna_low |
| 54 | Claude Sonnet 4.6 | Med | 16.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 4.6 (medium)"。effort は Epoch の Model version 接尾辞 _medium。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=claude-sonnet-4-6_medium, Best score (across scorers)=0.16, stderr=0.03684529491774706, Started at=2026-10-13T13:36:47.000Z所在 chess_puzzles.csv のデータ行 113 件目(ファイルの 167 行目)、id=htvM9QKQJ8TfBxTzDxfZfp、Model version=claude-sonnet-4-6_medium |
| 54 | Gemini 3.5 Flash-Lite | High | 16.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.5 Flash-Lite"。effort は Epoch の Model version 接尾辞 _high。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.5-flash-lite_high, Best score (across scorers)=0.16, stderr=0.036845294917747066, Started at=2026-10-13T13:26:52.000Z所在 chess_puzzles.csv のデータ行 131 件目(ファイルの 187 行目)、id=JJyzHWKJUA3iTZDU8iYefz、Model version=gemini-3.5-flash-lite_high |
| 56 | GPT-5.5 | None | 9.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.5 (no thinking)"。effort は Epoch の Model version 接尾辞 _none。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.5_none, Best score (across scorers)=0.09, stderr=0.028762349126466143, Started at=2026-10-13T13:53:55.000Z所在 chess_puzzles.csv のデータ行 81 件目(ファイルの 132 行目)、id=QfS2PrjUFMNnceRZmCmewP、Model version=gpt-5.5_none |
| 57 | GPT-5.6 Sol | None | 7.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Sol (none)"。effort は Epoch の Model version 接尾辞 _none。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-sol_none, Best score (across scorers)=0.07, stderr=0.02564323999762428, Started at=2026-10-13T13:49:41.000Z所在 chess_puzzles.csv のデータ行 90 件目(ファイルの 141 行目)、id=WvV6QREDDXeDEGdrKztDsy、Model version=gpt-5.6-sol_none |
| 57 | Gemini 3.5 Flash-Lite | Minimal | 7.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Gemini 3.5 Flash-Lite"。effort は Epoch の Model version 接尾辞 _minimal。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gemini-3.5-flash-lite_minimal, Best score (across scorers)=0.07, stderr=0.02564323999762428, Started at=2026-10-13T13:19:48.000Z所在 chess_puzzles.csv のデータ行 138 件目(ファイルの 194 行目)、id=gzQH7StUXaxAtXgxkTgyxJ、Model version=gemini-3.5-flash-lite_minimal |
| 59 | Claude Sonnet 4.5 | 記載なし | 6.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Sonnet 4.5 (no thinking)"。Model version に effort の接尾辞なし。データ取得 2026-11-12。; 出典に effort の記載が無いため effort なし出典の該当箇所chess_puzzles.csv: Model version=claude-sonnet-4-5-20250929, Best score (across scorers)=0.06, stderr=0.023868325657594204, Started at=2026-10-13T13:43:54.000Z所在 chess_puzzles.csv のデータ行 96 件目(ファイルの 147 行目)、id=VajBDnUCyX7uqAfMTbi63j、Model version=claude-sonnet-4-5-20250929 |
| 60 | GPT-5.6 Terra | None | 5.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Terra (none)"。effort は Epoch の Model version 接尾辞 _none。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-terra_none, Best score (across scorers)=0.05, stderr=0.02190429135575903, Started at=2026-10-13T13:50:17.000Z所在 chess_puzzles.csv のデータ行 87 件目(ファイルの 138 行目)、id=HzNnNaRmyNExSVaMjmFCHe、Model version=gpt-5.6-terra_none |
| 60 | Claude Opus 4.5 | 記載なし | 5.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "Claude Opus 4.5 (no thinking)"。Model version に effort の接尾辞なし。データ取得 2026-11-12。; 出典に effort の記載が無いため effort なし出典の該当箇所chess_puzzles.csv: Model version=claude-opus-4-5-20251101, Best score (across scorers)=0.05, stderr=0.021904291355759033, Started at=2026-10-13T13:42:24.000Z所在 chess_puzzles.csv のデータ行 103 件目(ファイルの 157 行目)、id=4afZ2hjLiJnPy5pD7TfE3K、Model version=claude-opus-4-5-20251101 |
| 62 | GPT-5.6 Luna | None | 3.0% | — | Epoch AI | Epoch AI, Capabilities & benchmarking (benchmark_data.zip, chess_puzzles.csv) CC BY 4.02026-11-12 取得・Epoch AI 自前実行(第三者計測)。出典表記 "GPT-5.6 Luna (none)"。effort は Epoch の Model version 接尾辞 _none。データ取得 2026-11-12。出典の該当箇所chess_puzzles.csv: Model version=gpt-5.6-luna_none, Best score (across scorers)=0.03, stderr=0.01714466079977653, Started at=2026-10-13T13:53:29.000Z所在 chess_puzzles.csv のデータ行 84 件目(ファイルの 135 行目)、id=5Q7zWYmoRik8mhABL4wpVR、Model version=gpt-5.6-luna_none |