日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.05687

接触接地型方策:生成的接触接地による巧みな視触覚方策

Contact-Grounded Policy: Dexterous Visuotactile Policy with Generative Contact Grounding

シェア:XThreadsFacebookLINEはてブBluesky

多点接触の未来状態と触覚フィードバックを拡散モデルで予測し、接触整合マッピングでコンプライアンス制御器の目標状態に変換する視触覚方策を提案。

詳しい要約

1. どんなもの?

多指ハンドによる接触リッチなdexterous manipulationを対象としたvisuotactile policy「Contact-Grounded Policy (CGP)」を提案。 - タスク成功は多点接触の連続変化・物体形状・摩擦遷移・slipに敏感で未解決。 - CGPは実際のrobot stateとtactile feedbackの結合軌道を予測し、学習したcontact-consistency mappingでcompliance controller用の実行可能なtarget robot stateへ変換。 - 構成は(i)圧縮latent spaceで将来のrobot stateとtactile feedbackを予測するconditional diffusion model、(ii)予測されたrobot state-tactile pairを実行可能targetへ変換するcontact-consistency mapping。

2. 先行研究と比べてどこがすごい?

従来のtactile-informed manipulation policyはtactile signalを追加観測として使うのみで、contact stateやaction出力が低レベルcontroller dynamicsとどう相互作用するかをモデル化していなかった。 - CGPは多点接触をgroundingし、robot stateとtactile feedbackの結合軌道予測とcontact-consistency mappingにより、意図した接触をcompliance controllerで実現可能にする点が異なる。 - 要旨ではvisuomotorおよびvisuotactile diffusion-policy baselinesを上回ると主張。

3. 技術・手法の肝は?

conditional diffusion modelにより、圧縮latent spaceで将来のrobot stateとtactile feedbackの結合軌道を予測。 - 学習されたcontact-consistency mappingが、予測されたrobot state-tactile pairをcompliance controllerの実行可能なtarget robot stateへ変換。 - これにより意図した多点接触を実現する。 - 実機ではAllegro V5 handとDigit360 fingertip tactile sensors、シミュレーションではTesollo DG-5F handとdense whole-hand tactile arraysを使用。

4. どうやって有効だと検証した?

物理4指Allegro V5 handとDigit360 fingertip tactile sensors、およびシミュレーション5指Tesollo DG-5F handとdense whole-hand tactile arraysで評価。 - in-hand manipulation、delicate grasping、tool useを含むdexterous tasksで、visuomotorおよびvisuotactile diffusion-policy baselinesを上回った。 - 詳細な評価指標や統計は要旨からは不明。

5. 議論はある?

要旨からは不明。 - 限界、失敗事例、計算コスト、実機転移の課題などは明記されていない。

6. 次に読むべき論文は?

要旨で参照/比較されているvisuomotor diffusion-policy、visuotactile diffusion-policy baselines。 - 関連手法としてtactile-informed manipulation policies、compliance controller、conditional diffusion model。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhengtong Xu, Yeping Wang, Ben Abbatematteo, Jom Preechayasomboon, Sonny Chan, Nick Colonnese, Amirhossein H. Memar

分類: cs.RO

原文アブストラクト

Contact-rich dexterous manipulation with multi-finger hands remains an open challenge in robotics because task success depends on multi-point contacts that continuously evolve and are highly sensitive to object geometry, frictional transitions, and slip. Recently, tactile-informed manipulation policies have shown promise. However, most use tactile signals as additional observations rather than modeling contact state or how their action outputs interact with low-level controller dynamics. We present Contact-Grounded Policy (CGP), a visuotactile policy that grounds multi-point contacts by predicting coupled trajectories of actual robot state and tactile feedback, and using a learned contact-consistency mapping to convert these predictions into executable target robot states for a compliance controller. CGP consists of two components: (i) a conditional diffusion model that forecasts future robot state and tactile feedback in a compressed latent space, and (ii) a learned contact-consistency mapping that converts the predicted robot state-tactile pair into executable targets for a compliance controller, enabling it to realize the intended contacts. We evaluate CGP using a physical four-finger Allegro V5 hand with Digit360 fingertip tactile sensors, and a simulated five-finger Tesollo DG-5F hand with dense whole-hand tactile arrays. Across a range of dexterous tasks including in-hand manipulation, delicate grasping, and tool use, CGP outperforms visuomotor and visuotactile diffusion-policy baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI