日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2602.01153

UniForce: 多様な触覚センサに対応するロボットマニピュレーションのための統合力潜在モデル

UniForce: A Unified Latent Force Model for Robot Manipulation with Diverse Tactile Sensors

シェア:XThreadsFacebookLINEはてブBluesky

異なる触覚センサ間で共有される力の潜在空間を学習し、再学習なしでゼロショット転移可能な力認識マニピュレーションを実現する統合触覚表現フレームワークを提案。

詳しい要約

1. どんなもの?

- 多様な触覚センサに共通の潜在力空間を学習する統合触覚表現学習フレームワーク UniForce を提案。 - 光学式 GelSight、磁気式 TacTip、静電容量式 uSkin など異種センサ間のドメインシフトを低減。 - 学習した汎用触覚エンコーダは再学習や微調整なしで zero-shot 転移可能。 - 力推定と Vision-Tactile-Language-Action (VTLA) モデルでのロボット拭き取りタスクに応用。

2. 先行研究と比べてどこがすごい?

- 従来はセンサ原理・形状・素材の違いごとにデータ収集・キャリブレーション・モデル学習が必要で汎化性が限定。 - UniForce は異種触覚センサ間で共有潜在力空間を学習し、センサ固有処理を不要に。 - 高価な外部 F/T センサに依存せず、静的平衡とセンサ-物体-センサ直接相互作用で力ペアデータを収集。 - 既存手法より力推定が一貫して改善し、VTLA での cross-sensor coordination を実現。

3. 技術・手法の肝は?

- 異種触覚センサに共通の潜在力空間を学習する統合触覚表現学習。 - 逆動力学 (image-to-force) と順動力学 (force-to-image) を同時モデル化し cross-sensor domain shift を低減。 - 力平衡制約と画像再構成損失で力に根ざした表現を生成。 - 外部 F/T センサを使わず静的平衡を利用し、センサ-物体-センサ直接相互作用で力ペアデータを収集。 - 得られた universal tactile encoder を下流の力認識操作タスクに zero-shot 転移。

4. どうやって有効だと検証した?

- GelSight、TacTip、uSkin を含む異種触覚センサで広範な実験を実施。 - 先行手法と比較して力推定が一貫して改善することを示す。 - Vision-Tactile-Language-Action (VTLA) モデルでロボット拭き取りタスクの cross-sensor coordination が有効に機能することを実証。 - コードとデータセットは公開予定。

5. 議論はある?

- 要旨からは不明。 - 限界、失敗事例、計算コスト、センサ間の汎化範囲などは明記されていない。

6. 次に読むべき論文は?

- GelSight 関連研究。 - TacTip 関連研究。 - uSkin 関連研究。 - Vision-Tactile-Language-Action (VTLA) モデル関連研究。 - 触覚センサの cross-sensor 表現学習や force estimation の同分野定番研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhuo Chen, Fei Ni, Kaiyao Luo, Zhiyuan Wu, Xuyang Zhang, Emmanouil Spyrakos-Papastavridis, Lorenzo Jamone, Nathan F. Lepora, Jiankang Deng, Shan Luo

分類: cs.RO

原文アブストラクト

Force sensing is essential for dexterous robot manipulation, but scaling force-aware policy learning is hindered by the heterogeneity of tactile sensors. Differences in sensing principles (e.g., optical vs. magnetic), form factors, and materials typically require sensor-specific data collection, calibration, and model training, thereby limiting generalisability. We propose UniForce, a novel unified tactile representation learning framework that learns a shared latent force space across diverse tactile sensors. UniForce reduces cross-sensor domain shift by jointly modeling inverse dynamics (image-to-force) and forward dynamics (force-to-image), constrained by force equilibrium and image reconstruction losses to produce force-grounded representations. To avoid reliance on expensive external force/torque (F/T) sensors, we exploit static equilibrium and collect force-paired data via direct sensor--object--sensor interactions, enabling cross-sensor alignment with contact force. The resulting universal tactile encoder can be plugged into downstream force-aware robot manipulation tasks with zero-shot transfer, without retraining or finetuning. Extensive experiments on heterogeneous tactile sensors including GelSight, TacTip, and uSkin, demonstrate consistent improvements in force estimation over prior methods, and enable effective cross-sensor coordination in Vision-Tactile-Language-Action (VTLA) models for a robotic wiping task. Code and datasets will be released.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI