TL;DR
CONTACTMIMICは、キーポイント軌道だけでなく部位ごとの二値接触ラベルを入力し、接触一致・距離報酬と軌道拡張で、接触の有無を切り替えられる人型ロボット政策を学習する。G1で10動作のシミュレーションと5動作の実機検証を行い、キーポイントのみの追従より接触に関わるタスクで優れると報告している。一方、評価対象はHUMOTO由来の限られた動作で、未知動作や他ロボットへの一般化は今後の課題である。
既存手法との違い
原論文は、主にキーポイントのみを追従する最先端トラッカーBeyondMimicと比較している。同一キーポイント軌道に対して接触指令の有無を変える評価や接触関連タスクで、CONTACTMIMICはタスク関連接触の一貫性と明示的な接触制御で優ると報告される。ResMimicは接触追従報酬を持つ残差HOIトラッカーとして言及されるが、軌道のみへの条件付けでは細粒度の接触制御ができないと整理されている。比較条件の詳細や数値は、提示された本文からは確認できない。
使える条件
対象はUnitree G1（29 DoF）で、Isaac Lab/PhysX上のシミュレーションと実機で評価される。学習データはHUMOTOの10動作クリップで、対象物は固定または自由のものが含まれる。入力は固有感覚、参照キーポイント位置、接触可能部位（骨盤、胴体、股関節、膝、足首、肩、手首）ごとの二値接触ラベルで、政策は目標関節角を出力しPD制御でトルクに変換する。接触ラベルは再ターゲット軌道上で物体表面から1cm未満を接触として抽出する。実機検証は5動作。計算資源やデータ規模の詳細は提示本文からは確認できない。
限界と未検証の範囲
評価はG1とHUMOTO由来の10動作のシミュレーション、および5動作の実機に限られ、他ロボット、他物体、未知動作、長時間タスクへの一般化は未検証である。接触ラベル抽出は距離閾値と意味的部位の割当に依存し、再ターゲット品質の影響を受ける。実機では接触センサを政策入力に使わず、固有感覚が接触状態の手掛かりになるという観察に留まる。比較数値や計算条件は提示本文からは確認できず、LLM/RAG向けの知見ではない。
解説
智也くん、このCONTACTMIMICって論文、人型ロボットに「触る・触らない」を指令できるって話？なんか面白そう。
そう。キーポイントの軌道だけだと、椅子に座る、ホワイトボードを拭く、家具を押す、みたいな接触が大事な動作で、姿勢だけ合って実際は触ってないことがある。だから接触が足りない、って問題意識。
あー、手をボードの近くで振ってるだけ、みたいな？それは拭いたことにならないね。
その例が論文にもある。で、提案はキーポイント軌道に加えて、部位ごとの二値接触ラベルを入力する接触条件付きトラッカー。固有感覚、参照キーポイント、接触ラベルから目標関節角を出してPD制御でトルクにする。
接触ラベルって、手とか胴体とか股関節とか、部位ごとに1/0で持つ感じ？
そう。接触可能部位は骨盤、胴体、股関節、膝、足首、肩、手首。報酬は接触ラベル一致と、接触すべき部位を近づけ、非接触部位を遠ざける距離報酬。あとキーポイント追従と正則化。
でも人間のデータって、この動きならこの接触、みたいに相関が強そう。ラベルを無視して軌道から推測しちゃわない？
そこが大事。接触ラベル反転、物体除去、衝突形状を膨らませる再ターゲットで、似たキーポイントだけど接触が違うペアを作る。論文はこの拡張が接触制御に必要だってAblationで確認した、と報告してる。
評価は？ロボットはG1で、シミュレーションと実機？
Unitree G1 29 DoF、Isaac Lab/PhysX。HUMOTO由来の10動作でシミュレーション、5動作で実機。同じキーポイント軌道で接触指令をオン/オフして、接触数や接触インパルスが変わるかを見る。
キーポイントは同じなのに接触だけ切り替えられるの、わかりやすいね。比較は？
主にキーポイントのみの最先端トラッカーBeyondMimicと比較。論文は接触関連タスクでタスク関連接触の一貫性と明示的な接触制御で優ると報告してる。ただ比較条件の詳細や数値は、提示された本文からは確認できない。
制限は？やっぱり動作数が限られてる感じ？
評価はG1とHUMOTO由来の限られた動作だけ。未知動作、他ロボット、他物体、長時間タスクへの一般化は未検証。接触ラベルも再ターゲット軌道で物体表面から1cm未満を接触とする抽出だから、閾値や再ターゲット品質に依存する。実機も5動作で、接触センサを入力にせず固有感覚が手掛かりになる、という観察まで。
なるほどね。つまり「触る・触らない」のスイッチを覚えたロボットってことか。じゃあ私も椅子に座るとき、背もたれに触る/触らないを切り替えられたら、テスト勉強中の集中力も切り替えられるかも。
その接触制御は椅子の背もたれ用だから、君の集中力には効かないと思う。