日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ロコマニピュレーションarXiv:2603.01126

Pro-HOI: 知覚に基づくルート誘導型ヒューマノイド物体インタラクション

Pro-HOI: Perceptive Root-guided Humanoid-Object Interaction

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドロボットの物体運搬操作を、ルート軌道を条件としたポリシー学習とデジタルツインによる物体状態推定で実現する汎用フレームワークを提案した。

詳しい要約

1. どんなもの?

- 人型ロボットのHumanoid-Object Interaction (HOI) タスクを信頼性高く実行するためのフレームワーク「Pro-HOI」を提案。 - 汎用的な制御インターフェースと堅牢な閉ループ知覚機構を欠く課題に対処。 - 実世界展開に適したbox-carrying動作を収集し、Signed Distance Field lossでpenetration artifactsを最適化。 - ルート軌道を条件とし、参照動作を報酬としてのみ使用する新規訓練フレームワークを提案。 - 持続的な物体推定モジュールを組み込み、リアルタイム検出とDigital Twinを融合。 - Unitree G1ロボットで実証し、一般化と堅牢性でベースラインを大幅に上回る。

2. 先行研究と比べてどこがすごい?

- 従来のHOIタスクでは汎用制御インターフェースと堅牢な閉ループ知覚が不足していた。 - 提案手法はルート軌道を高レベルプランナーの普遍インターフェースとし、ナビゲーションとloco-manipulationを同時に実現。 - 参照動作を報酬としてのみ使用することで、複雑な報酬調整を不要にした。 - 持続的物体推定モジュールにより、スリッページ検出と再把持を自律的にトリガー可能。 - 実世界の複雑なシナリオで長期間の実行を実現し、ベースラインを大幅に上回る性能を示した。

3. 技術・手法の肝は?

- 実世界展開に適したbox-carrying動作を収集し、Signed Distance Field lossでpenetration artifactsを最適化。 - ポリシーを所望のルート軌道に条件付け、参照動作を報酬としてのみ使用する訓練フレームワークを提案。 - ルート軌道を高レベルプランナーの普遍インターフェースとして確立し、ナビゲーションとloco-manipulationを同時に可能に。 - 持続的物体推定モジュールを組み込み、リアルタイム検出とDigital Twinを融合。 - このモジュールにより、ロボットが自律的にスリッページを検出し、再把持動作をトリガー。

4. どうやって有効だと検証した?

- Unitree G1ロボットを用いた実証実験を実施。 - Pro-HOIが一般化と堅牢性においてベースラインを大幅に上回ることを示した。 - 複雑な実世界シナリオで信頼性の高い長期間実行を達成。 - 具体的な評価指標や比較手法の詳細は要旨からは不明。

5. 議論はある?

- 提案手法の有効性は実証されたが、限界や課題についての議論は要旨からは不明。 - 一般化可能性や他のタスクへの適用性に関する議論は要旨からは不明。 - 計算コストやリアルタイム性の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、Humanoid-Object Interaction (HOI)、loco-manipulation、Signed Distance Field、Digital Twin、Unitree G1ロボットに関する研究が挙げられる。 - 同分野の定番として、強化学習ベースのロコモーションとマニピュレーションの統合研究が参考になる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuhang Lin, Jiyuan Shi, Dewei Wang, Jipeng Kong, Yong Liu, Chenjia Bai, Xuelong Li

分類: cs.RO

原文アブストラクト

Executing reliable Humanoid-Object Interaction (HOI) tasks for humanoid robots is hindered by the lack of generalized control interfaces and robust closed-loop perception mechanisms. In this work, we introduce Perceptive Root-guided Humanoid-Object Interaction, Pro-HOI, a generalizable framework for robust humanoid loco-manipulation. First, we collect box-carrying motions that are suitable for real-world deployment and optimize penetration artifacts through a Signed Distance Field loss. Second, we propose a novel training framework that conditions the policy on a desired root-trajectory while utilizing reference motion exclusively as a reward. This design not only eliminates the need for intricate reward tuning but also establishes root trajectory as a universal interface for high-level planners, enabling simultaneous navigation and loco-manipulation. Furthermore, to ensure operational reliability, we incorporate a persistent object estimation module. By fusing real-time detection with Digital Twin, this module allows the robot to autonomously detect slippage and trigger re-grasping maneuvers. Empirical validation on a Unitree G1 robot demonstrates that Pro-HOI significantly outperforms baselines in generalization and robustness, achieving reliable long-horizon execution in complex real-world scenarios.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI