TL;DR

HumoSlopeは、急斜面で起きやすい低い重心のしゃがみ歩きを抑えるため、Stage Iで斜面に沿ったZMP釣り合いを学習し、Stage IIでPCA地形記述子からCoM高さと上下方向の下肢協調をソフトに誘導する二段階強化学習です。配備時のActorは固有受容覚のみで、シミュレーション最大36°、実世界の草斜面最大32.1°の歩行を報告しています。

既存手法との違い

原論文では、Unitree RL Lab(URL)ベースラインがしゃがみ姿勢(Groucho gait)になる例を示し、提案法は上り・平坦・下りで姿勢を変えることを示しています。また、複合斜面トラックの比較で既存ベースラインより頑健かつ斜面条件に応じた適応が高いと報告しています。ただし、個別ベースライン名や全比較数値は提示された本文からは確認できません。

使える条件

対象は人型ロボットの連続斜面歩行です。訓練はシミュレータで、非対称Actor-CriticのPPOを用い、訓練時のみ高さスキャンとPCA地形記述子を特権情報として使います。配備時のActorは固有受容覚のみで、オンラインの外受容覚センシングを必要としません。評価はシミュレーションの複合斜面最大36°、実世界の屋外草斜面最大32.1°、および滑りやすい面・草・波状地形・平坦歩道への一般化例(Fig.1)です。ロボット機種、計算資源、実装詳細は本文から確認できません。

限界と未検証の範囲

主評価は斜面、特に実環境では草斜面最大32.1°までです。36°はシミュレーションでの結果です。他のロボット機種、ペイロード、段差・不整地、動的障害物、長時間運用への一般化は本文から確認できません。訓練時には地形スキャンなどの特権情報が必要で、実環境でのオンライン外受容覚は不要ですが、実環境でPCA地形記述子を推定する構成ではありません。比較ベースラインの詳細や全定量結果も提示本文だけでは不明です。

解説

AMI HAPPY

ねえ智也くん、この「HumoSlope」って論文、急斜面で人型ロボットがずっとしゃがみ歩きになっちゃうのを防ぐ話なんだよね?

TOMOYA NEUTRAL

そう。斜面って重力のバイアスがずっとかかるから、普通の報酬だと安定重視で低い重心のしゃがみ歩きに落ちやすい。論文ではGroucho gaitって呼んでる。

AMI SURPRISED

しゃがむと安定しそうだけど、平坦なところでも姿勢が悪くなったり、股関節と膝に負担がかかったりするんだ。

TOMOYA NEUTRAL

うん。だから安定だけじゃなくて、斜面に応じた姿勢制御が要る。そこで二段階学習にしてる。

AMI HAPPY

一段目は何をするの?

TOMOYA NEUTRAL

Stage Iでは斜面に適応したZMP正則化を入れる。普通は世界の水平面で釣り合いを見るけど、それを局所的な傾いた支持面の上で評価する。

AMI HAPPY

斜面に沿って釣り合いを見るってことか。二段目は?

TOMOYA NEUTRAL

Stage IIでBSGAを入れる。PCAで作った5次元の地形記述子を使って、CoM高さ、上りの股関節主導の推進、下りの膝主導のブレーキ、スイング脚の誘導をソフトな報酬でゲートする。

AMI SURPRISED

地形記述子は訓練のときだけ使って、配備時のActorは固有受容覚だけなんだよね。

TOMOYA NEUTRAL

そう。オンラインの外受容覚センシングは要らない。訓練時だけ特権情報として高さスキャンとPCA記述子を使う。

AMI HAPPY

評価はどうだったの?

TOMOYA NEUTRAL

シミュレーションの複合斜面で最大36°、実世界の屋外草斜面で最大32.1°を歩けたと報告してる。Fig.1では滑りやすい面、草、波状地形、平坦歩道への一般化例も示してる。

AMI HAPPY

ベースラインとの比較は?

TOMOYA NEUTRAL

URLベースラインがしゃがみのGroucho gaitになる例が示されてて、複合斜面トラックでは提案法の方が頑健で斜面条件に応じた適応が高いと報告してる。ただ、全ベースライン名や全比較数値は提示された本文からは確認できない。

AMI HAPPY

意義は、しゃがみ続けないで盲歩行できるところだね。使える条件や制限は?

TOMOYA NEUTRAL

訓練はシミュレータでPPO。訓練時のみ高さスキャンとPCA記述子を特権情報として使う。実環境でPCA記述子を推定する構成ではない。他のロボット機種、ペイロード、段差、動的障害物、長時間運用への一般化は本文から確認できない。

AMI HAPPY

なるほどね。しゃがみ続けないって、私の朝のやる気みたいなものか。

TOMOYA NEUTRAL

それは二段階学習でも無理。