日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2510.14647

空間的に固定された触覚認識による堅牢な巧みな操作

Spatially anchored Tactile Awareness for Robust Dexterous Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

触覚信号を手の運動学的座標系に固定して扱うことで、物体モデルや姿勢推定なしにサブミリ精度の巧みな操作を可能にする方策フレームワークSaTAを提案した。

詳しい要約

1. どんなもの?

- 器用な dexterous manipulation のための end-to-end ポリシーフレームワーク SaTA を提案 - 触覚信号を手の kinematic frame に forward kinematics で明示的に固定(spatially anchor)する - 物体モデルや明示的な pose estimation を必要とせず、手の座標系で物体形状を推論可能にする - bimanual USB-C mating、light bulb installation、card sliding などの高精度タスクを対象とする

2. 先行研究と比べてどこがすごい?

- 既存の visuo-tactile learning 手法は sub-millimeter 精度のタスクで model-based 手法に劣る - 従来の学習フレームワークは触覚信号の知覚的豊かさと hand kinematics との空間的関係を十分活用できていなかった - SaTA は触覚特徴を手の kinematic frame に固定することで、接触の有無だけでなく手の座標系での物体形状推論を可能にする - 強い visuo-tactile ベースラインに対し成功率を最大 30 percentage 向上、完了時間を 27 percentage 短縮

3. 技術・手法の肝は?

- 触覚特徴を forward kinematics により手の kinematic frame に明示的に anchor する - 空間的に grounded された触覚表現により、接触検出と手座標系での物体形状推論を両立 - 物体モデルや明示的な pose estimation を不要とする end-to-end ポリシー - 知覚的詳細を保ちつつ安定した参照フレームに接触計測を接地させる触覚表現を設計

4. どうやって有効だと検証した?

- bimanual USB-C mating in free space(sub-millimeter alignment 精度を要求)で検証 - light bulb installation(thread engagement と回転制御の精度を要求)で検証 - card sliding(繊細な力調整と角度精度を要求)で検証 - 複数ベンチマークで強い visuo-tactile ベースラインと比較し、成功率最大 30 percentage 向上、完了時間 27 percentage 短縮を確認

5. 議論はある?

- 既存 visuo-tactile 学習が sub-millimeter 精度タスクで苦戦する原因を、触覚信号と hand kinematics の空間的関係の未活用に帰着 - 触覚表現を安定参照フレームに接地させる設計の重要性を主張 - 具体的な失敗事例や限界、計算コスト、センサ依存性に関する議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で比較対象として言及される visuo-tactile learning の strong baselines(具体的名称は要旨からは不明) - 従来の model-based dexterous manipulation 手法 - forward kinematics を用いた tactile representation 関連研究 - bimanual manipulation および precision assembly の学習ベース手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jialei Huang, Yang Ye, Yuanqing Gong, Xuezhou Zhu, Yang Gao, Kaifeng Zhang

分類: cs.RO

原文アブストラクト

Dexterous manipulation requires precise geometric reasoning, yet existing visuo-tactile learning methods struggle with sub-millimeter precision tasks that are routine for traditional model-based approaches. We identify a key limitation: while tactile sensors provide rich contact information, current learning frameworks fail to effectively leverage both the perceptual richness of tactile signals and their spatial relationship with hand kinematics. We believe an ideal tactile representation should explicitly ground contact measurements in a stable reference frame while preserving detailed sensory information, enabling policies to not only detect contact occurrence but also precisely infer object geometry in the hand's coordinate system. We introduce SaTA (Spatially-anchored Tactile Awareness for dexterous manipulation), an end-to-end policy framework that explicitly anchors tactile features to the hand's kinematic frame through forward kinematics, enabling accurate geometric reasoning without requiring object models or explicit pose estimation. Our key insight is that spatially grounded tactile representations allow policies to not only detect contact occurrence but also precisely infer object geometry in the hand's coordinate system. We validate SaTA on challenging dexterous manipulation tasks, including bimanual USB-C mating in free space, a task demanding sub-millimeter alignment precision, as well as light bulb installation requiring precise thread engagement and rotational control, and card sliding that demands delicate force modulation and angular precision. These tasks represent significant challenges for learning-based methods due to their stringent precision requirements. Across multiple benchmarks, SaTA significantly outperforms strong visuo-tactile baselines, improving success rates by up to 30 percentage while reducing task completion times by 27 percentage.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI