日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2609.31924

HapticWorld:リアルタイムトルクフィードバックを備えたインタラクティブ世界シミュレータ

HapticWorld: an Interactive World Simulator with Real-time Torque Feedback

シェア:XThreadsFacebookLINEはてブBluesky

学習した世界モデルにトルク予測とリアルタイムの力覚提示を組み込み、接触の多い操作タスクのデータ収集効率と方策性能を向上させ、実世界評価の代替プラットフォームとしても機能することを示した。

詳しい要約

1. どんなもの?

HapticWorldは、観測と関節トルクを予測し、それを操作者にリアルタイムで提示する対話型の学習ベースworld simulatorである。視覚のみのworld modelにhaptic feedbackを統合し、人間と学習world model間のhaptic loopを閉じる。contact-rich manipulationのdemonstration収集とpolicy学習を支援する。

2. 先行研究と比べてどこがすごい?

- 実ロボット収集: 各demonstrationが物理ハードウェアに縛られる - 物理simulator: 接触力が実測から系統的にずれる - 学習world simulator: scalableでrealisticだがvision-onlyで、操作者は何も感じずF/Tラベルもない - 本研究: 学習world modelでtorqueを予測・提示し、F/Tラベル付きデータを生成可能

3. 技術・手法の肝は?

- 観測と関節トルクを同時に予測する学習world simulator - 予測torqueを操作者にリアルタイムでrenderし、haptic loopを閉じる - これによりF/T-conditionedなdemonstration収集とpolicy学習を可能にする - 詳細なアーキテクチャや学習手法は要旨からは不明

4. どうやって有効だと検証した?

- 3つのcontact-richタスクで評価 - torque feedbackによりデータ収集スループットが平均1.6倍向上 - HapticWorld生成demonstrationで学習したpolicyは実世界で54/60成功 - 実世界データの上限56/60に迫り、vision-only baselineの19/60を大きく上回る - HapticWorld内の成功率が実世界評価と密接に一致し、F/T-conditioned policy評価platformとしての有用性を確認

5. 議論はある?

- HapticWorld内の成功率が実世界と密接に一致し、stand-aloneなF/T-conditioned policy評価platformとして使える可能性を示す - 実世界データの上限に迫る性能だが、完全には一致しない - 限界や今後の課題、一般化可能性については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 実ロボット収集、physics simulator、learned world simulator(vision-only) - 関連手法: F/T-conditioned policy learning、contact-rich manipulation、haptic feedback - 具体的な論文名は要旨に記載なし

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shaoting Peng, Litian Liang, Yixuan Wang, Ming Yang, Katherine Driggs-Campbell, Mark Cutkosky, James Jingxi Xu

分類: cs.RO

原文アブストラクト

Contact-rich manipulation depends on force sensing that is hard to infer from visual signals alone, both for collecting demonstrations and for training policies. Force-annotated data, however, remains hard to obtain at scale: real-robot collection ties every demonstration to physical hardware, physics simulators report contact forces that deviate systematically from real measurements, and learned world simulators, though scalable and realistic, are vision-only, so operators feel nothing during data collection and the data carries no force/torque (F/T) labels. We present HapticWorld, an interactive world simulator that predicts joint torque together with observations and renders it back to the operator in real time, closing the haptic loop between a human and a learned world model. Across three contact-rich tasks, torque feedback raises data collection throughput by 1.6 times on average. Policies trained on HapticWorld-generated demonstrations succeed in 54/60 real-world trials, approaching the 56/60 upper bound of real-world data, and far exceeding the 19/60 success rate of the vision-only baseline. Moreover, the success rates measured inside HapticWorld closely match real-world evaluation, demonstrating that HapticWorld can serve as a stand-alone F/T-conditioned policy evaluation platform.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI