解説ねえ智也くん、この論文のタ…
TL;DR
セキュリティ運用センター（SOC）の検知トリアージを自動化するため、チェーン・オブ・ソート（CoT）推論を備えたLLM分類器を開発。プロンプト最適化、自己学習、強化学習、信頼度校正の4段階トレーニングにより、直接ラベルを出力する従来手法より高精度（82.6%精度）かつ高信頼度運用時の再現率を大幅改善。さらに、CoTがラベル確率を劣化させる問題を解決する専用の校正器を導入。
解説
ねえ智也くん、この論文のタイトル、セキュリティ検知のトリアージをLLMで自動化ってあるけど、トリアージって何？
トリアージは、セキュリティアラートの優先順位付けのことだよ。SOCのアナリストが大量の検知結果を全部見るのは大変だから、重要なものだけを選別する必要があるんだ。
なるほど。で、それをLLMで自動化するってわけね。でも、ただラベルを予測するだけじゃダメなの？
うん、従来の方法は直接ラベルを出力するだけだったんだけど、この論文ではチェーン・オブ・ソート（CoT）推論を使って、理由も一緒に生成するんだ。そうすると精度が上がるらしい。
へえ、理由を考えることで判断が良くなるってこと？でも、それだけじゃなくて4段階のトレーニングがあるんでしょ？
そう。まずプロンプト最適化で初期のプロンプトを調整して、次に自己学習でラベルなしデータを使ってモデルを強化する。それから強化学習で報酬を最大化するように学習して、最後に信頼度校正で確率の調整をするんだ。
信頼度校正って、モデルが自信過剰にならないようにするってこと？
そう。特にCoTを使うとラベル確率が劣化する問題があるらしくて、それを専用の校正器で解決してるんだ。
で、結果はどうだったの？
精度は82.6%で、従来の直接ラベル出力より高いんだ。さらに、高信頼度で運用するときの再現率が大幅に改善されたらしい。
すごい！でも、何か限界とかあるの？
うーん、まだ実験環境が限られてるかもしれないし、実際のSOCのデータでどれだけうまくいくかはわからない。あと、CoTの生成コストが高いって問題もあるかも。
なるほどね。でも、これでアナリストの負担が減るならいいね。私も将来SOCで働くかもしれないから、助かるかも！
まあ、でもAIに頼りすぎると、アナリストのスキルが落ちるかもしれないけどね。
あはは、じゃあ私はAIに負けないように勉強しとくよ！でも、AIが全部やってくれたら、お昼寝できるのにな～
お昼寝してる間にアラートが溜まって、結局大変になるだけだと思うよ。