SWE-sweep

長期のソフトウェア改修タスクの subtask 加重報酬。

分類
エージェント型コーディング
単位
パーセント(%)
高いほど良い
比較グループ
1グループ
すべてのモデルの順位(記録)・順位を付けた結果 1 件

すべてのモデルの順位(記録)

旧モデルと Claude Code / Codex で選べないモデルを含めて、比較グループごとに順位を付け直したものです。順位を付ける顔ぶれが違うので、上の順位とは違います。

旧モデル・選べないモデルを含む順位を開く(1 件)

公式の結果(Gemini 4 Carbon (Google DeepMind models page, benchmark table))

順位モデルeffortスコア出典のコスト(指標)計測・報告出典
1Gemini 4 CarbonHigh9.6%—GoogleGemini 4 Carbon (Google DeepMind models page, benchmark table)2026-11-12 取得・ベンダー発表値。Google 公表表。methodology PDF: Gemini 4 Carbon/Argon は Gemini API の最高 thinking 設定・pass@1・単一試行。行ごとの出典は Carbon は mini-swe-agent ハーネスで自己計測
出典の該当箇所SWE-sweep: Gemini 4 Carbon 9.6