日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ヒューマノイド制御arXiv:2606.27581

SceneBot: 接触プロンプトによる汎用ヒューマノイド全身追跡とシーンインタラクション

SceneBot: Contact-Prompted General Humanoid Whole Body Tracking with Scene-Interaction

シェア:XThreadsFacebookLINEはてブBluesky

接触ラベルを条件として与えることで、自由空間動作と接触を伴う操作を単一のポリシーで統一的に扱うヒューマノイド全身追跡フレームワークを提案した。

詳しい要約

1. どんなもの?

- ヒューマノイドの全身運動追従フレームワーク「SceneBot」を提案。 - 自由空間の移動、地形走破、全身マニピュレーションを単一ポリシーで統合。 - 参照モーションとリンクごとの接触ラベルを条件として与え、環境との相互作用を明示的に定義。 - 7.5時間の再構築された接触リッチデータで学習し、未見の運動と環境に汎化。 - 箱を運んで階段を上がるような複雑で長期的なタスクを実行可能。

2. 先行研究と比べてどこがすごい?

- 従来のヒューマノイドRLポリシーは自由空間運動に優れるが、接触リッチタスクでは物理的曖昧性を解決できず苦戦。 - 純粋なキネマティック追従では物体や不整地との相互作用の曖昧さを解消できない。 - SceneBotは接触条件付けを導入し、自由空間と接触リッチな振る舞いをシームレスに統合する初の汎用フレームワーク。 - 注釈付き相互作用データの不足を克服するため、後知恵シーン再構築手法を提案。

3. 技術・手法の肝は?

- 単一ポリシーを参照モーションとリンクごとの接触ラベルに条件付け。 - 後知恵シーン再構築アプローチ:リターゲットされた人間モーションからシーン相互作用グラフを推論。 - 再構築された接触リッチデータ(7.5時間)で学習。 - 接触条件付けをヒューマノイド制御の強力なインターフェースとして確立。

4. どうやって有効だと検証した?

- 7.5時間の再構築接触リッチデータで学習し、未見の運動と環境に汎化することを確認。 - 箱を運んで階段を上がるような複雑で長期的なタスクを実行できることを実証。 - デモと情報は https://ericcsr.github.io/scenebot/ で公開。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、ヒューマノイドの強化学習(humanoid reinforcement learning)、モーションリターゲティング(motion retargeting)、全身マニピュレーション(whole-body manipulation)が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sirui Chen, Shibo Zhao, Zhen Wu, Jiaman Li, Guanya Shi, C. Karen Liu

分類: cs.RO, cs.AI

原文アブストラクト

Current humanoid reinforcement-learning policies excel at free-space motions but struggle with contact-rich tasks, as pure kinematic tracking cannot resolve the physical ambiguities of interacting with objects and uneven terrain. To address this, we introduce SceneBot, a unified motion-tracking framework capable of handling freespace locomotion, terrain traversal, and whole-body manipulation. SceneBot conditions a single policy on both reference motions and per-link contact labels, explicitly defining expected environmental interactions. To overcome the lack of annotated interaction data, we propose a hindsight scene reconstruction approach that infers scene-interaction graphs from retargeted human motion. Trained on 7.5 hours of this reconstructed, contact-rich data, SceneBot successfully generalizes to unseen motions and environments. Our results demonstrate that SceneBot is the first general framework to seamlessly unify free-space and contact-rich behaviors executing complex, long-horizon tasks like carrying a box upstairs and establishing contact conditioning as a powerful interface for humanoid control. All code and data will be open-sourced. More demos and information are available at: https://ericcsr.github.io/scenebot/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI