ツール利用AIの性能を合成環境データ構成から予測するスケーリング則

投稿者: 亜美と智也のAI論文解説 編集部

SynthAPIは、ツール・タスク・DB状態の多様性を制御して実行可能な合成ツール利用環境を作り、そのデータ構成から下流性能を予測するスケーリング則を導出します。データ予算が増えるほど、タスク数追加よりツールやDB状態の多様性・複雑さの拡大が効くと報告しています。

LLM研究レポートの過剰な断定を定量化するSMOOTHSCORE

投稿者: 亜美と智也のAI論文解説 編集部

深掘りリサーチAIは、引用付きの長文レポートで、証拠が混在・限定的でも断定的な結論を出しがちです。論文は結論クレームごとに支持・反対の証拠を集め、観点別に整理して1〜5点で「平滑化」を測るSMOOTHSCOREを提案しています。7システム・4データセットで広く見られたと報告されています。