日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習/四足ロボット/操作arXiv:2606.07506

アフォーダンスに基づく階層型強化学習による四足ロボットの脚操作

Affordance-Based Hierarchical Reinforcement Learning for Quadruped Pedipulation

シェア:XThreadsFacebookLINEはてブBluesky

四足ロボットの物体操作において、専門家による高レベル軌道設計を不要にするため、ポーズと接触点のアフォーダンスを利用した3層の階層型強化学習フレームワークを提案し、シミュレーションと実世界で検証した。

詳しい要約

1. どんなもの?

- 四足歩行ロボットによる物体操作(pedipulation)のための階層型強化学習フレームワークを提案。 - 3階層のRL構造を持ち、pose affordanceとinteraction-point affordanceを活用。 - ナビゲーションポリシーが歩行ポリシーを駆動し、pedipulationポリシーが物体操作を計画。 - シミュレーションと実世界で評価し、人間のガイドなしで物体操作タスクを自律実行可能。

2. 先行研究と比べてどこがすごい?

- 従来研究は低レベルポリシー学習に焦点を当て、タスク実行は専門家設計の高レベル軌道に依存していた。 - 本研究はaffordanceに基づき、対象物体上のinteraction pointとロボットのbase poseを自律選択することで、事前設計軌道を不要にした。 - これにより、人間のガイドなしで物体操作タスクを実行できる点が優れている。

3. 技術・手法の肝は?

- 3階層の階層型強化学習(RL)フレームワークを採用。 - pose affordanceがナビゲーションポリシーを導き、ナビゲーションポリシーが歩行ポリシーを駆動。 - pedipulationポリシーはinteraction-point affordanceに導かれ、物体中心のpose alignmentと効果的なend-effector操作計画を可能にする。 - 訓練はIsaacSimエコシステムで実施。

4. どうやって有効だと検証した?

- シミュレーションと実世界の両方で評価。 - シミュレーションでは複数シナリオでpose affordanceの有効性を調査。 - 実世界では様々な物体操作タスクを検証し、object-interaction datasetを構築。 - 結果、提案フレームワークがaffordanceに基づき候補poseを自律特定し、人間のガイドなしで物体操作タスクを成功裏に実行できることを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の関連手法として、四足歩行ロボットの物体操作に関する低レベルポリシー学習や階層型強化学習の研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tuba Girgin, Jose Castelblanco, Gabriel Rodriguez, Emre Girgin, Cagri Kilic

分類: cs.RO

原文アブストラクト

The object manipulation capabilities of quadruped robots is an open research challenge. While previous studies have focused on low-level policy learning, task execution still relies on expert-designed high-level trajectories. Autonomous selection of both an affordable interaction point on the target object and an affordable robot base pose removes the need for pre-designed trajectories. This study proposes a three-level hierarchical reinforcement learning (RL) framework that utilizes pose affordances to guide the navigation policy, while the navigation policy drives the locomotion policy. In addition, the pedipulation policy is guided by interaction-point affordances, enabling object-centric pose alignment of the quadruped robot and effective end-effector manipulation planning. We train the proposed framework in the IsaacSim ecosystem and evaluate it in both simulation and real-world settings. We investigate the effectiveness of pose affordance across multiple scenarios in simulation while various object interaction tasks are validated on real-world setting forming an object-interaction dataset. The results show that the proposed framework can autonomously identify candidate poses based on their affordance and successfully execute object manipulation tasks in the real world without human guidance.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI