解説ねえ智也くん、この論文のタ…
TL;DR
2026年W杯の全104試合を、キックオフ前に6つの最先端LLMに予測させた前向き評価。結果は、平均63.9%の的中率でブックメーカーの本命を支持するのと同等。モデル同士は過度に同調し、引き分けや得点を過小評価するなど、市場を上回ることはできなかった。
解説
ねえ智也くん、この論文ってW杯の予測をLLMにさせたんでしょ？サッカー好きの私としてはめっちゃ気になるんだけど！
うん、2026年W杯の全104試合を、キックオフ前に6つの最先端LLMに予測させたんだ。前向き評価っていうのがポイントで、未来の結果を知らずに予測してるんだよ。
なるほどね。で、結果はどうだったの？やっぱりAIってすごいのかな？
平均で63.9%の的中率だったんだ。でも、これはブックメーカーの本命をそのまま支持するのと同じくらいの精度で、市場を上回ることはできなかったんだよ。
えー、意外！AIならもっとすごいかと思った。でも63.9%って結構高い気もするけど…
確かに高いけど、ブックメーカーのオッズはすでに多くの情報を反映してるから、それと同等ってことは、LLMが特別な予測力を持ってるわけじゃないってことなんだ。
なるほど。で、モデル同士はどうだったの？みんな同じような予測をしたのかな？
そうなんだよ。モデル同士が過度に同調してて、多様性がなかったんだ。特に引き分けや得点数を過小評価する傾向があったみたい。
あー、確かにサッカーって引き分けも多いし、意外と点が入ったりするもんね。AIはそういうのが苦手なのかな？
そうかもしれない。この研究の意義は、LLMの未来予測能力を実際のデータで検証したことにあるんだ。でも限界もあって、今回はW杯という特定のイベントだけだから、他の分野にも当てはまるかはわからない。
ふーん、じゃあAIに未来を当ててもらうのはまだ難しいってことか。でも、もしAIが完璧に予測できたら、賭け事で大儲けできたのにね！
それは無理だよ。もしそんなことができたら、市場がすぐに調整してしまうからね。