TL;DR
TouchSafeBenchは、ロボットと人・環境の接触や接触直前リスクをVLMが視覚情報から正しく推論できるかを測る、Habitat 3.0上の物理接地ベンチマークです。2,940エピソードで、現在の安全状態分類と衝突事前警告の2タスクを評価します。原論文では最良のMacro-F1が56%、専門家は74%で、深さや多視点が自動的に衝突根拠にならず、特にロボット−シーン接触が難しいと報告されています。
既存手法との違い
原論文は、既存の安全・異常検知・embodied VLMベンチマーク群と比較し、TouchSafeBenchがHRI共在、多視点RGB-D、シミュレータ接触ラベル、事前警告を組み合わせる点で異なると主張しています（Table 1）。モデル比較ではGPT-5.5、Gemini 3.1 Pro、Gemini Robotics-ER 1.6を、9種類の視覚表現と3種類の視点条件で評価しています。一方、特定の既存VLM安全監視手法との同一条件での直接比較や、論文独自のベースライン実装は提示本文からは確認できません。
使える条件
原論文の評価対象は、Habitat 3.0上の屋内共在シーン（HSSD-HAB、SMPL-Xヒューマノイド、YCB物体）で生成した社会ナビゲーションと社会再配置のエピソードです。入力は同期済みの多視点RGB-D、必要に応じてトップダウン軌跡マップで、3時点クリップとしてA/B/Cの安全ラベルを予測します。ロボットの状態や固有感覚はモデルに入力されず、ロボット形態はプロンプト経由で与えられます。評価は各タスク450クリップ（各クラス150）の均衡セットで行われます。計算資源や実運用ハードウェアの詳細は提示本文からは確認できません。
限界と未検証の範囲
提示本文に基づく限界として、評価はシミュレーション中心で、49シーン・2タスク・3種類のヒューマノイド外観に限定されます。ロボットの状態・固有感覚は入力されず、形態情報はプロンプト依存です。実録画への転移が述べられていますが、その詳細や規模は提示本文からは確認できません。結果は評価した3モデルと条件に限られ、最良Macro-F1 56%対専門家74%という報告から、VLMの一般的な安全監視能力を断定することはできません。深さ・多視点の効果も一律ではなく、ロボット−シーン接触の難しさが残ります。
解説
ねえ智也くん、TouchSafeBenchって何を測るベンチマークなの？名前からロボットの接触っぽいけど。
ロボット安全監視のための「衝突接地」を測る。VLMが映像から、ロボット本体が安全に離れてるか、もう人や環境に触ってるか、ぶつかりそうかを推論できるかを見る。
衝突接地って聞き慣れない。ただ「危ない」って言えるかとは違う？
違う。どの接触か、誰の体か、いつ起きるかを映像に結びつける能力。ここがVLMの穴になりやすい。
なるほど。なんで作ったの？
既存の安全QAや異常検知は、人手ラベルや単視点RGB、振り返りラベルが多い。ロボット起因の接触を物理状態から切り分ける評価が薄い。TouchSafeBenchはそこを狙う。
ふむ。既存ベンチとの比較は？
Table 1では、HRI共在、多視点RGB-D、シミュレータ接触ラベル、事前警告の組み合わせが違うと主張してる。ただ、既存のVLM安全監視手法と同一条件で直接比較した結果は、提示本文からは確認できない。
作り方は？
Habitat 3.0上で、屋内共在の社会ナビゲーションと社会再配置を生成。49シーン、9つのYCB物体、10シード、3種類のヒューマノイド外観で2,940エピソード。
入力は何が見えるの？
同期した多視点RGB-D。ロボットアーム視点、人頭視点、第三者ロボット視点、第三者人視点、あとトップダウン軌跡マップ。3時点クリップでA/B/Cを予測する。
ラベルは人手？
いや、シミュレータの接触フラグから作る。だから視点やモダリティを変えても同じ事象を一貫して評価できる。
タスクは2つ？
そう。今の安全状態を分類するタスクと、接触前の衝突を早期警告するタスク。警告では近いけど触れないニアミスをAにして、誤警報も見る。
評価はどうやったの？
各タスク450クリップ、各クラス150の均衡セット。GPT-5.5、Gemini 3.1 Pro、Gemini Robotics-ER 1.6を、9種類の視覚表現と3種類の視点条件で回してる。
結果は？
最良Macro-F1はどちらかのタスクで56%。専門家は同じクリップで74%。深さ入力が自動的にロボット体の接触根拠になるわけじゃない。ロボット−シーン接触が人接触リスクより一貫して難しい。
多視点は効くの？
GPT-5.5とGemini 3.1 Proでは第三者視点を足すとTask 1のMacro-F1が上がる。でもGemini Robotics-ER 1.6は全視点で改善しない。多視点の統合自体が学習能力ってこと。
へえ。じゃあ「見た目は説明できても物理的に責任ある判断はできない」って話？
まさに。視覚的な流暢さは物理的な説明責任を意味しない。安全監視には衝突接地を明示的に支える表現が要る。
制限は？
シミュレーション中心で49シーン、2タスク、3外観に限定。ロボット状態や固有感覚は入力されず、形態情報はプロンプト依存。実録画への転移は述べてるけど、詳細や規模は本文から確認できない。計算資源も不明。
なるほどね。じゃあVLMに「ぶつかりそう？」って聞くより、私が目を閉じて勘で答える方がまだ安全かもね。
それは安全監視じゃなくて事故の発生源だろ。