日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2509.22421

両手触覚反応型把持のための学習ベース協調制御

Learning-Based Collaborative Control for Bi-Manual Tactile-Reactive Grasping

シェア:XThreadsFacebookLINEはてブBluesky

2つの触覚センサと学習ベースのマルチエージェントMPCを組み合わせ、柔らかさや形状が異なる物体を両手で協調して把持する手法を提案。

詳しい要約

1. どんなもの?

- 両腕ロボットによる触覚反応型の協調把持を実現する学習ベースの制御システム。 - 2つの Gelsight Mini tactile sensors で物体の texture と stiffness をリアルタイム取得。 - 触覚フィードバックから接触ダイナミクスと物体 compliance を推定し、力と位置を閉ループで調整。 - 柔らかい物体や変形物体、大型・重量物の把持を対象とする。

2. 先行研究と比べてどこがすごい?

- 従来の把持実装は主に rigid items 向けで、fragile や deformable な材料では性能が大きく低下。 - 既存の tactile-reactive grasping は単一エージェント前提で、大型・重量物の把持操作に限界。 - 本研究は multi-agent MPC と触覚反応を組み合わせ、単一エージェント実装の能力を超える点が新規。

3. 技術・手法の肝は?

- 学習ベースの tactile-reactive multi-agent Model Predictive Controller (MPC) を提案。 - 実接触インタラクションで学習した multi-agent MPC の定式化。 - 触覚データ駆動で grasping states を推論する手法。 - 協調制御を可能にする coordination strategy を導入。 - 触覚エンコーディングで把持安定性を予測し、力と位置を調整する閉ループ制御。

4. どうやって有効だと検証した?

- independent PD および MPC baselines との比較実験を実施。 - 異なるサイズと stiffness の物体に対し、安定把持の達成と維持の success rates でベースラインを上回った。 - 詳細な実験設定や被験物体数は要旨からは不明。

5. 議論はある?

- 触覚と学習ベース multi-agent MPC の組み合わせが複雑環境での協調把持に有効であると主張。 - 限界や失敗事例、計算コスト、汎化性に関する議論は要旨からは不明。 - 実機実験の規模や統計的有意性は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較対象として挙げられている independent PD および MPC baselines の関連研究。 - 参照されている Gelsight Mini tactile sensors [1] の論文。 - 同分野の定番として tactile-reactive grasping や multi-agent MPC に関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Leonel Giacobbe, Jingdao Chen, Chuangchuang Sun

分類: cs.RO

原文アブストラクト

Grasping is a core task in robotics with various applications. However, most current implementations are primarily designed for rigid items, and their performance drops considerably when handling fragile or deformable materials that require real-time feedback. Meanwhile, tactile-reactive grasping focuses on a single agent, which limits their ability to grasp and manipulate large, heavy objects. To overcome this, we propose a learning-based, tactile-reactive multi-agent Model Predictive Controller (MPC) for grasping a wide range of objects with different softness and shapes, beyond the capabilities of preexisting single-agent implementations. Our system uses two Gelsight Mini tactile sensors [1] to extract real-time information on object texture and stiffness. This rich tactile feedback is used to estimate contact dynamics and object compliance in real time, enabling the system to adapt its control policy to diverse object geometries and stiffness profiles. The learned controller operates in a closed loop, leveraging tactile encoding to predict grasp stability and adjust force and position accordingly. Our key technical contributions include a multi-agent MPC formulation trained on real contact interactions, a tactile-data driven method for inferring grasping states, and a coordination strategy that enables collaborative control. By combining tactile sensing and a learning-based multi-agent MPC, our method offers a robust, intelligent solution for collaborative grasping in complex environments, significantly advancing the capabilities of multi-agent systems. Our approach is validated through extensive experiments against independent PD and MPC baselines. Our pipeline outperforms the baselines regarding success rates in achieving and maintaining stable grasps across objects of varying sizes and stiffness.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI