日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2602.00514

低コスト視覚触覚グリッパーと事前学習による接触の多いマニピュレーション

A Low-Cost Vision-Based Tactile Gripper with Pretraining Learning for Contact-Rich Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

低コストで耐久性の高い視覚触覚グリッパーLVTGを開発し、CLIP風の対照学習で触覚と視覚を統合してACT方策の接触リッチ操作性能を向上させた。

詳しい要約

1. どんなもの?

- 低コストの視覚触覚グリッパーLVTGを提案 - 接触の多い操作のための安定・堅牢・効率的な物理インタラクションを実現 - 従来の視覚触覚センサと異なり、大きな重い物体の把持が可能 - 触覚感知面積と開き角を拡大 - 耐摩耗性素材の表面スキンで耐久性向上 - 視覚と触覚の統合で高忠実度センシング - モジュール設計で迅速な保守・交換が可能

2. 先行研究と比べてどこがすごい?

- 従来の触覚センサは感知範囲・信頼性・コスト効率に制限 - LVTGはより大きな重い物体の把持が可能 - 触覚感知面積と開き角が拡大 - 耐摩耗性素材で耐久性と寿命が向上 - モジュール設計で保守性向上 - 視覚触覚融合により複雑な操作での信頼性向上 - 元のACT法と比較して成功率が大幅に向上

3. 技術・手法の肝は?

- 低コスト視覚触覚グリッパーLVTG - 視覚と触覚のフィードバック統合 - CLIPにインスパイアされた対照学習目的で触覚埋め込みと視覚観察を整列 - 共有クロスモーダル表現空間を実現 - Action Chunking Transformer (ACT) ポリシーを採用 - 事前学習によりデータ収集効率とポリシー学習を改善

4. どうやって有効だと検証した?

- 元のACT法と比較して操作タスクの成功率が大幅に向上 - 具体的な実験設定や評価指標は要旨からは不明

5. 議論はある?

- 従来の触覚センサの制限を克服 - 低コストで安定・堅牢・効率的な物理インタラクションを実現 - 耐久性と保守性の向上 - 視覚触覚融合の有効性を示唆 - 具体的な議論や限界は要旨からは不明

6. 次に読むべき論文は?

- Action Chunking Transformer (ACT) - CLIP - 視覚触覚センサに関する研究 - 接触の多い操作に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yaohua Liu, Binkai Ou, Zicheng Qiu, Ce Hao, Hengjun Zhang

分類: cs.RO

原文アブストラクト

Robotic manipulation in contact-rich environments remains challenging, particularly when relying on conventional tactile sensors that suffer from limited sensing range, reliability, and cost-effectiveness. In this work, we present LVTG, a low-cost visuo-tactile gripper designed for stable, robust, and efficient physical interaction. Unlike existing visuo-tactile sensors, LVTG enables more effective and stable grasping of larger and heavier everyday objects, thanks to its enhanced tactile sensing area and greater opening angle. Its surface skin is made of highly wear-resistant material, significantly improving durability and extending operational lifespan. The integration of vision and tactile feedback allows LVTG to provide rich, high-fidelity sensory data, facilitating reliable perception during complex manipulation tasks. Furthermore, LVTG features a modular design that supports rapid maintenance and replacement. To effectively fuse vision and touch, We adopt a CLIP-inspired contrastive learning objective to align tactile embeddings with their corresponding visual observations, enabling a shared cross-modal representation space for visuo-tactile perception. This alignment improves the performance of an Action Chunking Transformer (ACT) policy in contact-rich manipulation, leading to more efficient data collection and more effective policy learning. Compared to the original ACT method, the proposed LVTG with pretraining achieves significantly higher success rates in manipulation tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI