日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚シミュレーションarXiv:2603.28475

Tac2Real: オンライン強化学習とゼロショット実機展開のための信頼性の高いGPU視触覚シミュレーション

Tac2Real: Reliable and GPU Visuotactile Simulation for Online Reinforcement Learning and Zero-Shot Real-World Deployment

シェア:XThreadsFacebookLINEはてブBluesky

接触を伴う操作タスク向けに、物理精度と計算効率を両立した軽量な視触覚シミュレーションフレームワークTac2Realを提案し、実機へのゼロショット転移を高成功率で実現した。

詳しい要約

1. どんなもの?

- 接触の多いロボット操作のための visuotactile シミュレーションフレームワーク Tac2Real を提案。 - online reinforcement learning (RL) 訓練を効率化する軽量設計。 - PNCG-IPC と multi-node, multi-GPU 並列シミュレーションを統合。 - marker displacement fields を interactive rates で生成可能。 - TacAlign により zero-shot sim-to-real 転移を実現。 - contact-rich peg insertion タスクで評価。

2. 先行研究と比べてどこがすごい?

- 従来の visuotactile シミュレーションは物理忠実度と計算効率の両立が困難。 - online RL に必要な interactive rates での tactile フィードバック生成が課題。 - Tac2Real は PNCG-IPC と multi-GPU 並列化で高スループットを実現。 - TacAlign で structured/stochastic な domain gap を体系的に縮小。 - zero-shot 実機転移で高い成功率を達成。

3. 技術・手法の肝は?

- Preconditioned Nonlinear Conjugate Gradient Incremental Potential Contact (PNCG-IPC) を採用。 - multi-node, multi-GPU の高スループット並列シミュレーションアーキテクチャ。 - marker displacement fields を interactive rates で生成。 - TacAlign により structured および stochastic な domain gap を低減。 - online RL 訓練と zero-shot sim-to-real 転移を可能にする統合設計。

4. どうやって有効だと検証した?

- contact-rich peg insertion タスクで評価。 - zero-shot 転移の実機実験で高い成功率を達成。 - フレームワークの有効性と堅牢性を確認。 - 詳細な比較実験や ablation は要旨からは不明。

5. 議論はある?

- 物理忠実度と計算効率のバランスが重要と指摘。 - domain gap の structured/stochastic 要因を体系的に扱う必要性を議論。 - 限界や今後の課題は要旨からは不明。

6. 次に読むべき論文は?

- Preconditioned Nonlinear Conjugate Gradient Incremental Potential Contact (PNCG-IPC) 関連研究。 - Incremental Potential Contact (IPC) 法。 - visuotactile シミュレーションの先行研究(例: TACTO, Taxim など)。 - sim-to-real 転移の domain randomization/adaptation 研究。 - online reinforcement learning のロボット操作応用。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ningyu Yan, Shuai Wang, Xing Shen, Hui Wang, Hanqing Wang, Yang Xiang, Jiangmiao Pang

分類: cs.RO

原文アブストラクト

Visuotactile sensors are indispensable for contact-rich robotic manipulation tasks. However, policy learning with tactile feedback in simulation, especially for online reinforcement learning (RL), remains a critical challenge, as it demands a delicate balance between physics fidelity and computational efficiency. To address this challenge, we present Tac2Real, a lightweight visuotactile simulation framework designed to enable efficient online RL training. Tac2Real integrates the Preconditioned Nonlinear Conjugate Gradient Incremental Potential Contact (PNCG-IPC) method with a multi-node, multi-GPU high-throughput parallel simulation architecture, which can generate marker displacement fields at interactive rates. Meanwhile, we propose a systematic approach, TacAlign, to narrow both structured and stochastic sources of domain gap, ensuring a reliable zero-shot sim-to-real transfer. We further evaluate Tac2Real on the contact-rich peg insertion task. The zero-shot transfer results achieve a high success rate in the real-world scenario, verifying the effectiveness and robustness of our framework. The project page is: https://ningyurichard.github.io/tac2real-project-page/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI