TL;DR

4つのフロンティアAI(Claude, Codex, Grok, Gemini)をコード実行で公平にランク付けし、協調して検証可能な問題セットを構築。模倣学習(SFT)は既に有能なコード学生をむしろ劣化させる一方、同じ問題を強化学習(RLVR)環境として使うと学生の競技プログラミング性能が+49%向上。教師の価値は「答えの寄せ集め」ではなく「検証可能な環境の共同構築」にある。

解説

AMI HAPPY

ねえ智也くん、このブログのタイトル面白いね!「競合→協調」ってどういうこと?

TOMOYA NEUTRAL

ああ、4つのフロンティアAIモデルを競わせてランク付けした後、協力して問題セットを作るって話だよ。

AMI SURPRISED

へえ、どんなモデルが出てきたの?

TOMOYA NEUTRAL

Claude、Codex、Grok、Geminiの4つ。コード実行で公平に評価して、Claudeが一番良かったみたい。

AMI NEUTRAL

なるほど。でもそれって普通のベンチマークと変わらなくない?

TOMOYA HAPPY

そこが面白いところ。ランク付けが目的じゃなくて、その後で4つのモデルが協調して検証可能な問題セットを作るんだ。

AMI NEUTRAL

検証可能ってどういうこと?

TOMOYA NEUTRAL

コードを実行して正解かどうか自動で判定できる問題ってこと。競技プログラミングの問題みたいなものだよ。

AMI HAPPY

あ、それで「コード学習」ってタイトルにあるんだね。で、その問題セットを使って何をするの?

TOMOYA NEUTRAL

学生モデルを学習させるんだ。面白いのは、模倣学習(SFT)と強化学習(RLVR)を比較してるところ。

AMI NEUTRAL

模倣学習って、教師の答えをそのまま真似させるやつだよね?

TOMOYA SURPRISED

そう。でも結果は意外で、既に有能なコード学生にSFTをやるとむしろ性能が下がったんだ。

AMI SURPRISED

え、真似すると悪くなるの?

TOMOYA HAPPY

うん。一方で同じ問題をRLVR環境として使うと、競技プログラミングの性能が49%も向上した。

AMI SURPRISED

49%!それはすごいね。でもなんでSFTはダメなの?

TOMOYA NEUTRAL

論文では、教師の答えが完璧じゃない場合、模倣するとそのノイズを学習しちゃうからって考察してる。RLVRだと自分で試行錯誤できるから良いんだろうね。

AMI NEUTRAL

なるほど。つまり教師の価値は「答えを教えること」じゃなくて「問題を作ること」にあるってこと?

TOMOYA HAPPY

まさにそれ。タイトルにもある「検証可能な環境の共同構築」が大事って結論だよ。

AMI NEUTRAL

でもさ、4つのモデルで問題作るのってコストかからない?

TOMOYA NEUTRAL

確かに。そこは限界の一つで、もっと効率的な方法が必要かもね。あと、この結果が他の分野でも同じかはわからない。

AMI HAPPY

ふーん…でも「AIにAIを教えさせる」ってなんかSFみたいでワクワクするね!

TOMOYA NEUTRAL

そうだね。でも次は君が自分でコード書いてみたら?模倣じゃなくてさ。

AMI HAPPY

あはは、それってRLVRで学習しろってこと?私は人間だからSFTでいいや~

TOMOYA NEUTRAL

…その冗談、論文に載せたいくらいだよ。