TL;DREMBL AI LI…
TL;DR
LLMアシスタントの性格(外向的・誠実的・中立)を変えて26人を対象に実験した結果、性格スタイルはユーザーの行動や信頼に影響するが、その効果はタスクによって異なることが分かりました。万能な性格はなく、タスクに応じたスタイル選択や適応が重要です。
解説
ねえ智也くん、この論文のタイトル、『アシスタントの性格が会話型情報検索に与える影響を実証』って面白そう!でも、アシスタントに性格ってどうやってつけるの?
ああ、LLMにプロンプトで性格を指定するんだよ。外向的、誠実的、中立の3パターンを作って、26人の被験者に使ってもらったんだ。
なるほど!で、結果はどうだったの?やっぱり外向的な性格が一番人気だったとか?
それが単純じゃないんだ。性格スタイルはユーザーの行動や信頼に影響するけど、効果はタスクによって違うって結果だった。
タスクによって違う?例えばどんな風に?
例えば、事実確認みたいな正確さが求められるタスクでは誠実な性格が信頼されやすいけど、アイデア出しみたいな創造的なタスクでは外向的な性格が好まれる傾向があったみたい。
へえ、じゃあ「万能な性格」はないってこと?
そう、論文でも「万能な性格はなく、タスクに応じたスタイル選択や適応が重要」って結論になってる。
でも、どうやって評価したの?アンケートとか?
ユーザーの操作ログ(クリックや滞在時間)と、主観的な信頼度や満足度のアンケートを組み合わせてるよ。
なるほどね。でも、26人って少なくない?
確かに少ないから、一般化には注意が必要だね。あと、被験者の属性が偏ってる可能性もあるし、実験環境も限られてる。
でも、こういう研究って将来のAIアシスタントのデザインに役立ちそうだよね。私も自分の好みの性格を選べるアシスタントが欲しいな!
そうだね。でも、性格を変えすぎると一貫性がなくなって逆に不信感を招くかもしれないから、バランスが大事だよ。
あはは、じゃあ智也くんみたいにいつも真面目なのも、たまにはいいかもね!
……それはどうも。