TL;DR
Agent-R2は、実務の職種シード・Webコーパス・実在ファイルからワークフローと指示・細粒度ルーブリックを合成し、4k件で4BモデルをSFTとルーブリックRLで訓練する枠組みです。GDPval 51.0%、OfficeQA 14.8%でQwen3-235B-A22B-Thinking（48.0%、13.8%）を上回り、ショートカット行動の軽減も報告されています。
既存手法との違い
既存の訓練データは、指示追従、文書に基づくQA、単一成果物の生成など能力を個別に扱い、手作業で作ったワークフローやLLM生成ファイルに依存しがちです。Agent-R2は実務シードとWebコーパスからファイル指向ワークフローを抽出し、実在ファイルを検索・検証して指示とルーブリックを合成します。比較では、Qwen3-4B-Thinking-2507をベースに、GDPval Pass@1が51.0%（Qwen3-235B-A22B-Thinking 48.0%、Qwen3-VL-235B-A22B-Thinking 49.7%）、OfficeQAが14.8%（同13.8%）と報告されています。図1ではベースのGDPval 32.4%から18.6ポイント改善しています。
使える条件
想定は、bash・web_search・web_fetch・view_imageを持つ永続サンドボックスで、異種ファイルを読み、長い実務ワークフローを実行し、分析レポートや表計算などの成果物を作るタスクです。データ合成にはO*NETの職種シード、DLR-Web/FineFineWeb由来のWebコーパス、合成モデルQwen3.6-Plus、専門家方策としてClaude-Opus-4.5を使用します。学習はQwen3-4B-Thinking-2507で、SFT 3k件とRL 1k件です。ファイルは50ページまたは2MB以下に制限されています。他モデル・他言語・他職業への適用性は提示された本文からは確認できません。
限界と未検証の範囲
評価はGDPvalとOfficeQAに限定されており、実務全体への汎化は未確認です。データはWebコーパスと公開ファイルに依存し、検索・検証・合成に大規模モデルを使うため、コストや再現性の制約は本文からは定量化されていません。添付は50ページまたは2MB以下に除外されています。RLは成果物のルーブリック評価（MLLM-as-a-judge）で、ツール固有の呼び出し好みを避けるため明示的な罰則はありません。4Bモデル1種の結果であり、他規模・他ベースモデルへの一般化は未検証です。ショートカット行動の軽減は報告されていますが、詳細な評価範囲は提示された本文からは確認できません。
解説
智也くん、これ面白いね。4BのAgent-R2が一部の大規模モデルを上回ったって話？
うん。論文だと、GDPvalで51.0%、OfficeQAで14.8%だね。比較先のQwen3-235B-A22B-Thinkingは48.0%と13.8%。
へえ、小さいモデルなのにすごい。なんでそんなことが可能なの？
ポイントは訓練データ。既存データは指示追従とか文書QAとか単一成果物の生成を個別に扱いがちで、手作業ワークフローやLLM生成ファイルに頼る。でも実務の意図や本物のファイル環境、成果物レベルの評価が足りない。
つまり、もっとリアルな仕事データが必要だったんだ。
そう。Agent-R2はO*NETの職種シードとWebコーパスからファイル指向のワークフローを抽出して、実在ファイルを検索・検証して、指示と細かいルーブリックを合成する。
10k候補から4k件を作るんだ。で、どうやって訓練するの？
Qwen3-4B-Thinking-2507をベースに、3k件でSFT、1k件でルーブリックベースのRL。RLは永続サンドボックスで、成果物をルーブリックと参照ファイルでMLLM-as-a-judgeが採点する形。
使う道具はbash、web_search、web_fetch、view_imageで、異種ファイルを読んでレポートや表計算を作る感じか。
そう。条件としては、ファイルは50ページまたは2MB以下に制限。合成にはQwen3.6-Plus、専門家方策にClaude-Opus-4.5を使ってる。
4k件だけでベースのGDPval 32.4%から18.6ポイント上げたのは大きいね。OfficeQAも2.2%から14.8%に上がったんだ。
論文では、十分に根拠を集めたり検証したりする前に、それっぽい成果物を出すショートカットが軽減されて、探索が続くようになると報告されてる。
でも、評価はGDPvalとOfficeQAだけなんだよね。他の職業とか言語、モデル規模への一般化はまだ分からない？
うん。提示された本文からは確認できない。あとWebコーパスと公開ファイル依存で、合成コストや再現性は定量化されてない。ファイルサイズ制限もあるし、4Bモデル1種の結果だから他ベースモデルへの一般化も未検証。
なるほど。すごいけど、万能じゃないってことだね。4Bが235Bを超えるって、私の財布も4Bくらい軽いのに…
単位が違うし、論文と関係ない。