日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

操作/移動/スキル合成arXiv:2608.00208

相互作用表現とスキル合成による操作と移動の複合スキル開発

Developing Combined Manipulation and Locomotion Skills with Interaction Representation and Skill Composition

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドロボットが全身到達・把持ポリシーと立ち上がり・歩行ポリシーを組み合わせ、把持から立ち上がり・歩行までの複合動作を実現する手法を提案。調和解析に基づく相互作用表現と発達的カリキュラムで汎用的な把持を学習し、ポリシー合成によりゼロショットで高い成功率を達成した。

詳しい要約

1. どんなもの?

本論文は、ヒューマノイドロボットが発達原理に基づいて運動ポリシーを学習し、それらを組み合わせてより複雑な操作と移動のスキル(把持、立ち上がり、歩行)を実現する手法を提案する。具体的には、(1)全身到達・把持ポリシーの学習と、(2)それを別途学習した立ち上がり・歩行ポリシーと組み合わせて、より複雑なポリシーを構成する。

2. 先行研究と比べてどこがすごい?

従来の把持学習は外部データセットや事前学習モデルに依存することが多いが、本手法は発達原理に基づくカリキュラム学習により、ロボットが自律的に汎化可能な把持ポリシーを学習できる点が新しい。また、異なるポリシーを組み合わせる際に、各ポリシーが同じ全身ヒューマノイド上で学習されることの重要性を示した点も先行研究と異なる。

3. 技術・手法の肝は?

手法の肝は、(1)調和解析から着想を得て、cubic harmonicsを重みとして用い、空間畳み込みにより手と物体の空間関係を表現すること、(2)発達原理に基づくエピソード内の指関節分離カリキュラムを導入し、外部データセットや事前学習モデルなしで汎化可能な把持ポリシーを自律学習すること、(3)把持ポリシーと立ち上がりポリシーを、それぞれの観測ベクトルを提供し、手と物体のインタラクションスコアを用いて各ポリシーがどのロボット関節を制御するかを決定することで組み合わせること。

4. どうやって有効だと検証した?

未見物体の把持成功率93%(ゼロショット)、物体を保持したままの立ち上がり成功率96-100%を達成したことで有効性を検証している。

5. 議論はある?

要旨からは、ポリシー組み合わせの有効性が全身学習に依存することの理論的考察や、他のタスクへの一般性、実機での検証などに関する議論は不明。また、cubic harmonicsの選択理由やカリキュラムの詳細な設計についても要旨からは不明。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、調和解析、cubic harmonics、発達原理に基づくロボット学習、ポリシー合成に関する論文が挙げられる。具体的には、'harmonic analysis'、'developmental robotics'、'policy composition'、'whole-body control'などのキーワードで検索される論文が該当する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fanxing Meng, Jing Xiao

分類: cs.RO

原文アブストラクト

This paper addresses how to enable a humanoid robot to learn motion policies based on developmental principles and combine policies to create more sophisticated and useful behaviors. Specifically, we present an approach to (1) learning a whole-body reaching and grasping policy and (2) combining it and a standing-up and walking policy to compose a more complex policy of manipulation and locomotion: grasping, standing up, and walking. In (1), our method draws inspiration from harmonic analysis and adopts cubic harmonics as weights to represent the hand-object spatial relationship via spatial convolution. Utilizing an intra-episode finger joint decoupling curriculum based on developmental principles, a robot can autonomously learn a generalizable grasping policy without relying on external datasets or pretrained models. In (2), our method combines the grasping policy with a separately learned getting-up policy by providing both policies with their respective observation vectors and using hand-object interaction scores to determine when each policy should control which robot joints. Our results show a 93% zero-shot success rate for grasping unseen objects and a 96-100% success rate for standing up while holding the object. Our work also demonstrates that combining different policies is only effective if each policy learning happens on the same whole humanoid body even if a policy (such as for locomotion) does not seem to need all the body parts (such as fingers).

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI