TL;DR

SoBは、複数エージェントの推論を「潜在信念の力学」として扱う。各エージェントは確率重み付きトークン埋め込みからなる信念トークンを持ち、全体相互作用と局所精錬を反復する。共同信念状態が均衡に近づくと早期停止し、最終信念から多数決で回答する。論文は8ベンチマーク・4モデル系でlatentベースラインより良いと報告し、テキストトークン削減と低遅延も示す。ただし全設定で最高ではなく、RAG向けの検証ではない。

既存手法との違い

比較対象は、テキストベースのMulti-agent debateと、LatentMAS、ThoughtComm、Interlat、SwiReasoning、Soft Thinking、SoftCoTのlatent推論手法。条件は原則N=4エージェント、同一の凍結ベースモデル、同期更新、信念ブロックL=384、1サイクル=全体相互作用1回+局所精錬m=1、最大Kmax=16、patience P=2、8ベンチマーク。SoBの違いは、各生成ステップの次トークン分布で重み付き埋め込みを作る信念トークンを使い、全体相互作用と局所精錬を交互に反復し、均衡・早期停止後に多数決デコードする点。原論文はSoBが最强のlatentベースラインを上回ると報告するが、テキスト討論が上回るセルもあり、全条件で最良ではない。

使える条件

入力はテキストの問題・指示と各エージェントのペルソナ。前提は、次トークン分布と入力埋め込み行列を持つ命令調整済み自己回帰言語モデルで、信念トークンは上位50トークンに制限して再正規化する。既定条件はN=4、L=384、m=1、最大16サイクル、patience 2、最終回答は最大512トークンでデコードし多数決。評価はGSM8K、MATH-500、MMLU-Pro、GPQA-Diamond、ARC-Challenge、MedQA、BIG-Bench Hard、HotpotQAと、Qwen3・Llama・Gemma・Phiの4モデル系。RAG/検索拡張、本番運用、N>4の大規模条件、他モデルでの挙動は提示本文からは確認できない。

限界と未検証の範囲

提示本文から確認できる範囲では、評価は8ベンチマークと限られたモデル系に限定される。SoBはlatentベースラインより良いと報告されるが全設定で最高ではなく、例としてLlama-3.1-8BのHotpotQAはSoB 51.3に対しLatentMAS 67.3、Phi-4-miniのHotpotQAはSoB 37.3に対しLatentMAS 46.0で、テキスト討論が上回るセルもある。均衡到達は最大サイクル数に依存し、信念トークンは上位50トークンの近似、最終多数決は少数意見を捨てる。RAG、実運用コスト、未知タスク・未知モデルへの一般化は未検証で、追加学習の有無も本文からは確認できない。

図1: 提案手法の概要(本記事による図解)

本図は、SoBが各エージェントの連続的な信念トークンを全体相互作用と局所精錬で反復更新し、均衡判定後に多数決で回答する流れを簡略化して示す(原論文の図の再現ではない)。
本図は、SoBが各エージェントの連続的な信念トークンを全体相互作用と局所精錬で反復更新し、均衡判定後に多数決で回答する流れを簡略化して示す(原論文の図の再現ではない)。

解説

AMI NEUTRAL

ねえ智也くん、このブログのタイトル『複数AIの潜在信念を反復更新して集合知を狙うStream of Belief』ってどういう意味? 集合知って聞いたことあるけど、AIが複数で考えるってこと?

TOMOYA EXPLAINING

そう。複数の言語エージェントが協力して問題を解くマルチエージェント推論の研究。従来はテキストで議論することが多かったけど、この論文は各エージェントの『信念』を連続的な潜在表現で持たせて、相互作用と自己精錬を繰り返すことで集合的な均衡を目指す。

AMI SURPRISED

潜在信念? テキストじゃなくて、数字のベクトルみたいなもので考えるってこと?

TOMOYA EXPLAINING

近い。各生成ステップで次トークンの確率分布を使って、トークン埋め込みの重み付き平均を作る。それを信念トークンと呼んで、次の入力にフィードバックする。上位50トークンに絞って再正規化する工夫もある。

AMI THINKING

ふーん、なんか難しそうだけど、要はAIが頭の中でぼんやり考えてる感じ?

TOMOYA EXPLAINING

まあ、複数の候補を同時に保持できるのがポイント。で、各エージェントは全体相互作用で他のエージェントの信念を取り込み、局所精錬で自分の信念だけを使って独立に洗練する。これをサイクルとして繰り返す。

AMI UNDERSTOOD

サイクルって何回くらい?

TOMOYA EXPLAINING

既定では最大16サイクル。1サイクルは全体相互作用1回と局所精錬1回。で、各サイクル後に短いプローブ回答を多数決で出して、その結果が2サイクル連続で変わらなければ早期停止する。最後に各エージェントが最終信念から回答をデコードして、多数決で集合回答を出す。

AMI SURPRISED

なるほど。で、どれくらいすごいの?

TOMOYA EXPLAINING

8つのベンチマークと4つのモデル系で評価してる。latent推論のベースラインより良いと報告されてて、最大で精度が15.7ポイント改善、テキストトークン使用量が平均51%削減、遅延も1.1〜2.6倍低いって。ただし全部の設定で最高じゃない。たとえばLlama-3.1-8BのHotpotQAではLatentMASの方が良かったり、テキスト討論が上回るセルもある。

AMI UNDERSTOOD

あ、そうなんだ。じゃあ万能じゃないんだね。

TOMOYA SAD

そう。あとRAG向けの検証はされてないし、評価は限られたベンチマークとモデルに留まる。信念トークンは上位50トークンの近似だし、最終的な多数決は少数意見を捨てることになる。均衡到達も最大サイクル数に依存する。

AMI HAPPY

でも、マルチエージェント推論を信念の力学として捉える新しい視点ってことだよね。面白いなあ。

TOMOYA THINKING

うん。テキストじゃなく潜在空間で集合知を狙うっていう方向性を示したのが意義だと思う。

AMI SMILE

じゃあさ、これってAIたちが『みんなで考えてる〜』って感じで、なんか可愛くない? 潜在信念って響きもなんかオシャレだし。

TOMOYA NEUTRAL

可愛いは余計だと思うけど……まあ、信念が均衡に近づく様子は確かに面白い。