日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2508.20561

SimShear: シミュレーションから実機へのせん断触覚サーボ

SimShear: Sim-to-Real Shear-based Tactile Servoing

シェア:XThreadsFacebookLINEはてブBluesky

せん断変形をシミュレーションで陽にモデル化せずに、GANで触覚画像を変換し、実機の触覚制御に応用する手法を提案。

詳しい要約

1. どんなもの?

- 視覚ベース tactile sensor を備えた低コスト卓上ロボットアーム2台を用いる tactile control のための sim-to-real pipeline「SimShear」の提案。 - simulation 内で shear dynamics を陽にモデル化せずに shear 情報を活用可能にする。 - shear を含まない simulated tactile image と shear 情報の vector encoding から、shear 変形を伴う現実的な tactile image を生成する。

2. 先行研究と比べてどこがすごい?

- 従来の pix2pix baseline と比較して、tactile image の simulation 精度および pose/shear prediction で優れると報告。 - shear を simulation で陽にモデル化せずに sim-to-real を実現する点が特徴。 - 詳細な先行研究との定量的比較は要旨からは不明。

3. 技術・手法の肝は?

- shear-conditioned U-Net GAN「shPix2pix」を導入。 - shear を含まない simulated tactile image と shear 情報を表す vector encoding を入力とし、shear 変形を伴う realistic な tactile image へ変換。 - rigid-body simulator を用いた sim-to-real shear modeling を可能にする pipeline。

4. どうやって有効だと検証した?

- 2つの control task で検証:(i) leader arm が動かす surface を follower arm が追従する tactile tracking task、(ii) 両 arm が object を共に保持し leader が prescribed trajectory に従う collaborative co-lifting task。 - shear sensing が不可欠な多様な trajectory において contact error を 1〜2 mm 以内に維持。 - shPix2pix が baseline pix2pix より tactile image simulation と pose/shear prediction で優れると報告。

5. 議論はある?

- rigid-body simulator を用いた sim-to-real shear modeling の実現可能性を支持し、tactile robotics における simulation の新方向を開くと主張。 - shear dynamics を simulation で陽にモデル化しないアプローチの限界や汎用性に関する議論は要旨からは不明。

6. 次に読むべき論文は?

- baseline として比較されている pix2pix。 - shPix2pix の基盤である U-Net GAN 関連研究。 - vision-based tactile sensor を用いた tactile servoing の関連研究(具体的な論文名は要旨からは不明)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kipp McAdam Freud, Yijiong Lin, Nathan F. Lepora

分類: cs.RO

原文アブストラクト

We present SimShear, a sim-to-real pipeline for tactile control that enables the use of shear information without explicitly modeling shear dynamics in simulation. Shear, arising from lateral movements across contact surfaces, is critical for tasks involving dynamic object interactions but remains challenging to simulate. To address this, we introduce shPix2pix, a shear-conditioned U-Net GAN that transforms simulated tactile images absent of shear, together with a vector encoding shear information, into realistic equivalents with shear deformations. This method outperforms baseline pix2pix approaches in simulating tactile images and in pose/shear prediction. We apply SimShear to two control tasks using a pair of low-cost desktop robotic arms equipped with a vision-based tactile sensor: (i) a tactile tracking task, where a follower arm tracks a surface moved by a leader arm, and (ii) a collaborative co-lifting task, where both arms jointly hold an object while the leader follows a prescribed trajectory. Our method maintains contact errors within 1 to 2 mm across varied trajectories where shear sensing is essential, validating the feasibility of sim-to-real shear modeling with rigid-body simulators and opening new directions for simulation in tactile robotics.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI