日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

全身操作/触覚/力制御arXiv:2606.13232

WT-UMI: 力覚監視による接触認識計画を用いた触覚ベース全身操作

WT-UMI: Tactile-based Whole-Body Manipulation via Force-Supervised Contact-Aware Planning

シェア:XThreadsFacebookLINEはてブBluesky

全身ヒューマノイドによる操作のための、触覚と力覚を統合したウェアラブルインターフェースと、接触力を考慮したプランニング手法を提案。

詳しい要約

1. どんなもの?

- 人間型ロボットによる全身マニピュレーションのための触覚ベースのシステム - ウェアラブルな全身触覚インターフェース「WT-UMI」を提案 - 人間のデモンストレーションとヒューマノイドのテレオペレーションの両モードで使用可能 - 触覚画像、接触力、エンドエフェクタ姿勢を正確に観測 - 力条件付き目標姿勢補正モジュールと力監督プランナーを導入 - 触覚ベースのアドミタンスコントローラを統合 - 変形物体、大型剛体、人間-ヒューマノイド協調を含む5つの接触リッチタスクで評価

2. 先行研究と比べてどこがすごい?

- 従来の模倣ポリシーは接触力を暗黙的にしか扱わない - 人間のデモは自然な接触力を捉えるがロボット実行可能な行動ではない - テレオペはロボット行動を直接記録するが力調整が自然でない - WT-UMIは両モードで触覚画像・接触力・姿勢を正確に観測し、両者の利点を統合 - 力条件付き補正モジュールで人間姿勢を接触認識ロボット目標に変換 - 力監督プランナーで自然な力相互作用を活用 - 4つのポリシーベースラインと比較して成功率向上と接触位置追跡誤差低減を達成

3. 技術・手法の肝は?

- ウェアラブル全身触覚インターフェース「WT-UMI」を人間またはヒューマノイドに装着 - 触覚画像、接触力、エンドエフェクタ姿勢を観測 - 力条件付き目標姿勢補正モジュール:テレオペデータから補正を学習し、人間姿勢を接触認識ロボット目標に変換 - 力監督プランナー:エンドエフェクタ姿勢チャンクと接触力軌道を予測 - 予測接触力を触覚ベースアドミタンスコントローラの参照として使用 - これにより接触力を明示的に調整しながら全身マニピュレーションを実現

4. どうやって有効だと検証した?

- 5つの接触リッチタスクで評価 - タスクは変形物体、大型剛体物体、人間-ヒューマノイド協調を含む - 4つのポリシーベースラインと比較 - 成功率の向上と接触位置追跡誤差の低減を確認 - プロジェクトページで詳細を公開

5. 議論はある?

- 要旨からは不明 - 具体的な議論や限界、今後の課題については記述がない

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:模倣ポリシー、テレオペレーション、アドミタンスコントローラ、触覚ベースの手法 - 関連手法:force-conditioned target-pose correction、force-supervised planner、tactile-based admittance controller - 同分野の定番:whole-body manipulation、tactile sensing、imitation learning、teleoperation

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jaehwi Jang, Zhaoyuan Gu, Alfred Cueva, Zimeng Chai, Junjie Sheng, Thong Nguyen, Himank Galundia, Yifan Wu, Huishu Xue, Isaac Legene, Ojas Mediratta, Davin Doan, Andrew Collins, Sarah Sadegh, KyoungMok Kim, Rishita Dhalbisoi, Zun Chen, Ye Zhao

分類: cs.RO

原文アブストラクト

Whole-body humanoid manipulation of bulky, deformable, and shared-load objects requires distributed contact sensing and explicit force regulation, yet most imitation policies treat contact force only implicitly. On the other hand, different demonstration sources provide complementary modalities with inherent trade-offs: human demonstrations capture natural contact forces but not robot-executable actions, while teleoperation directly records robot actions but with less natural force regulation. This paper presents \textbf{WT-UMI}, a wearable whole-body tactile interface worn by human operators or mounted on humanoids, providing accurate observations of tactile images, contact forces, and end-effector poses across both human demonstration and humanoid teleoperation modes. We introduce a force-conditioned target-pose correction module that converts measured human poses into contact-aware robot targets by learning corrections from teleoperation data. To leverage the natural force interaction in human data, we propose a force-supervised planner that predicts end-effector pose chunks and contact-force trajectories. The predicted contact force serves as the reference for a tactile-based admittance controller. Across five contact-rich tasks spanning deformable objects, bulky rigid objects, and human--humanoid collaboration, WT-UMI improves success rate and reduces contact-position tracking error over four policy baselines. Our project page is available at https://wt-umi.github.io/WTUMI/.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI