日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2607.15448

VTAPグリッパー:指先センシングと視覚触覚アクティブパームの融合による器用な手内操作

VTAP Gripper: Synergizing Fingertip Sensing and a Visuo-Tactile Active Palm for Dexterous In-Hand Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

指先の触覚アレイセンサと可動式の視覚触覚パームを備えたグリッパーを開発し、指とパームの協調と多感覚フィードバックにより、把持から微細な操作までを実現した。また、人間の手の動きを3本指構造にマッピングする段階的リターゲティング手法を提案し、複数の難易度の高い操作タスクで性能を実証した。

詳しい要約

1. どんなもの?

本論文は、指先の触覚アレイセンサと能動的な視触覚パーム(Visuo-Tactile Active Palm, VTAP)を統合した、触覚反応型グリッパ(VTAP Gripper)を提案している。このグリッパは、構造化された指-パームの協調とマルチモーダル知覚により、ロバストな把持と器用なインハンド操作を実現する。また、人間の手の動きと異種の3本指構造の間の具現化ギャップを埋めるため、段階的でジェスチャー条件付きのリターゲティングフレームワークを提案している。

2. 先行研究と比べてどこがすごい?

従来の高自由度の擬人化ハンドは複雑で高コストであるのに対し、本手法は指とパームの協調とマルチモーダルセンシングにより、高自由度の擬人化設計に頼らずに高い操作性能を達成している点が優れている。また、能動的なパームが長距離の視覚位置特定と接触リッチな触覚フィードバックを組み合わせることで、操作能力を大幅に拡張している。

3. 技術・手法の肝は?

技術の肝は、能動的なバイモーダルパーム(VTAP)と、触覚アレイセンサを備えた準拠性のある再構成可能な指の統合である。さらに、人間の手の動きを異種の3本指構造にマッピングするための、段階的でジェスチャー条件付きのリターゲティングフレームワークを導入している。

4. どうやって有効だと検証した?

YCBオブジェクトや壊れやすい物体の反応的把持、イン�ハンドでのシリンジの再方向付けとプランジャー操作、直径3mmまでのクラスタ化物体の分離、視触覚によるペグインホール挿入など、さまざまな困難なタスクでシステムを検証している。

5. 議論はある?

要旨からは、議論の詳細は不明であるが、高自由度の擬人化設計に頼らずに高い操作性能を達成できることを示しており、学習ベースのアプローチのための接触リッチなデータ収集の実用的な参照アーキテクチャを提供すると述べている。

6. 次に読むべき論文は?

要旨で参照されている関連研究は明示されていないが、同分野の定番として、視触覚センシング(例:GelSight)や器用な操作のためのリターゲティング手法、学習ベースの操作に関する論文が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuhao Zhou, Sheeraz Athar, Zhixian Hu, Binghao Huang, Yunzhu Li, Juan Wachs, Yu She

分類: cs.RO

原文アブストラクト

This paper presents a tactile-reactive gripper that integrates a Visuo-Tactile Active Palm (VTAP) and compliant, reconfigurable fingers equipped with tactile array sensors. The design exploits structured finger-palm synergy and multi-modal perception to achieve both robust grasping and fine manipulation. The actuated bi-modal palm seamlessly combines long-range visual localization with contact-rich tactile feedback, substantially extending the system's manipulation capability. To bridge the embodiment gap between human hand motion and the heterogeneous three-finger structure, we further propose a staged, gesture-conditioned retargeting framework for dexterous teleoperation. Extensive experiments validate the system across a range of challenging tasks: reactive grasping of YCB and fragile objects, in-hand syringe reorientation and plunger actuation, singulation of clustered objects down to 3 mm in diameter, and vision-tactile peg-in-hole insertion. Results demonstrate that high manipulation performance can be achieved through coordinated finger-palm interaction and multi-modal sensing, without resorting to high degrees of freedom anthropomorphic designs. The VTAP gripper and its retargeting framework offer a practical reference architecture for dexterous gripper design, manipulation, and contact-rich data collection in support of learning-based approaches. Project webpage: https://yuhochau.github.io/vtap/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI