日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2506.01944

力触覚を感じろ:人間の接触から学ぶ力制御マニピュレーション

Feel the Force: Contact-Driven Learning from Humans

シェア:XThreadsFacebookLINEはてブBluesky

触覚グローブと視覚から人間の力加減を学習し、触覚センサ付きロボットアームで力に敏感なマニピュレーションを実現するシステムを提案。

詳しい要約

1. どんなもの?

- 人間の触覚行動を模倣して力に敏感なマニピュレーションを学習するロボット学習システム FeelTheForce (FTF) の提案。 - tactile glove で接触力を計測し、vision-based model で hand pose を推定。 - 閉ループ policy が操作に必要な力を連続予測し、Franka Panda ロボットへ再ターゲティング。 - 実行時は PD controller がグリッパ開閉を調整して予測力を追従。

2. 先行研究と比べてどこがすごい?

- robot-collected data や simulation から学習した policy は実世界の多様な相互作用への汎化が難しい。 - 人間の自然な身体・日常環境でのデモンストレーションを直接学習に活用できる点が利点。 - 視覚デモのみでは精密な接触力を推測できない課題に対し、tactile glove で力を計測する点が先行手法と異なる。 - スケーラブルな人間 supervision で低レベル力制御を接地させる点が新規。

3. 技術・手法の肝は?

- tactile glove による接触力計測と vision-based model による hand pose 推定を組み合わせる。 - 力を連続予測する closed-loop policy を学習。 - shared visual and action representations を用いて Franka Panda と tactile gripper sensors に再ターゲティング。 - 実行時は PD controller がグリッパ閉鎖を変調し予測力を追従させる。

4. どうやって有効だと検証した?

- 5 つの force-sensitive manipulation tasks で評価。 - 77% の成功率を達成したと報告。 - 詳細な比較条件やベースラインは要旨からは不明。

5. 議論はある?

- 視覚デモのみの限界を触覚計測で補う設計の有効性を示唆。 - 人間の embodiment からロボットへの再ターゲティングの汎用性が議論点。 - 失敗事例やタスク間のばらつき、一般化範囲は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として robot-collected data からの imitation learning、simulation ベースの policy learning、visual demonstration のみの学習、tactile sensing を用いた manipulation 学習を挙げる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ademi Adeniji, Zhuoran Chen, Vincent Liu, Venkatesh Pattabiraman, Raunaq Bhirangi, Siddhant Haldar, Pieter Abbeel, Lerrel Pinto

分類: cs.RO, cs.AI

原文アブストラクト

Controlling fine-grained forces during manipulation remains a core challenge in robotics. While robot policies learned from robot-collected data or simulation show promise, they struggle to generalize across the diverse range of real-world interactions. Learning directly from humans offers a scalable solution, enabling demonstrators to perform skills in their natural embodiment and in everyday environments. However, visual demonstrations alone lack the information needed to infer precise contact forces. We present FeelTheForce (FTF): a robot learning system that models human tactile behavior to learn force-sensitive manipulation. Using a tactile glove to measure contact forces and a vision-based model to estimate hand pose, we train a closed-loop policy that continuously predicts the forces needed for manipulation. This policy is re-targeted to a Franka Panda robot with tactile gripper sensors using shared visual and action representations. At execution, a PD controller modulates gripper closure to track predicted forces-enabling precise, force-aware control. Our approach grounds robust low-level force control in scalable human supervision, achieving a 77% success rate across 5 force-sensitive manipulation tasks. Code and videos are available at https://feel-the-force-ftf.github.io.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI