日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2601.02778

現実ギャップの解消:力ベースの巧みな把持と操作のためのゼロショットSim-to-Real展開

Closing the Reality Gap: Zero-Shot Sim-to-Real Deployment for Dexterous Force-Based Grasping and Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

高密度触覚フィードバックと関節トルクセンシングを活用した強化学習フレームワークを構築し、シミュレーションのみで訓練した五指ハンドの制御方策を実機にゼロショット転移させ、把持力追従と物体の再配向を実現した。

詳しい要約

1. どんなもの?

- 多指dexterous handによる接触の多い操作を、シミュレーションのみで訓練し実機へzero-shot転移するsim-to-real RLフレームワーク。 - dense tactile feedbackとjoint torque sensingを観測に用い、物理的相互作用を明示的に調整。 - 五本指ハンドで、command-based grasp force trackingとin-hand reorientationを実現。

2. 先行研究と比べてどこがすごい?

- 従来は接触物理と不完全なactuationのため実機展開が困難だった。 - 本手法はシミュレーションのみで訓練し、実機でfine-tuningなしにzero-shot展開。 - 著者らによれば、多指dexterous handで制御可能なgraspingを完全シミュレーション訓練からzero-shot転移した初の実証。

3. 技術・手法の肝は?

- dense tactile feedbackとjoint torque sensingを組み合わせた観測空間。 - (i) 並列forward kinematicsでdense virtual tactile unitsと物体間距離を計算する高速tactile simulation。 - (ii) モータ電流をjoint torqueに写像するcurrent-to-torque calibrationによりtorque sensor不要化。 - (iii) backlashやtorque-speed saturation等の非理想効果をrandomizationするactuator dynamics modeling。 - asymmetric actor-critic PPOをシミュレーションで訓練。

4. どうやって有効だと検証した?

- 五本指ハンドへ直接展開し、2つの技能を検証。 - (1) command-basedで制御可能なgrasp force tracking。 - (2) in-hand object reorientation。 - いずれも実機でfine-tuningなしに堅牢に実行された。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、汎化性に関する議論は要旨に記載なし。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてsim-to-real RL、domain randomization、asymmetric actor-critic PPO、tactile simulation、dexterous manipulationの定番研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhe Zhao, Haoyu Dong, Zhengmao He, Yang Li, Xinyu Yi, Zhibin Li

分類: cs.RO, cs.AI

原文アブストラクト

Human-like dexterous hands with multiple fingers offer human-level manipulation capabilities, but training control policies that can directly deploy on real hardware remains difficult due to contact-rich physics and imperfect actuation. We close this gap with a practical sim-to-real reinforcement learning (RL) framework that utilizes dense tactile feedback combined with joint torque sensing to explicitly regulate physical interactions. To enable effective sim-to-real transfer, we introduce (i) a computationally fast tactile simulation that computes distances between dense virtual tactile units and the object via parallel forward kinematics, providing high-rate, high-resolution touch signals needed by RL; (ii) a current-to-torque calibration that eliminates the need for torque sensors on dexterous hands by mapping motor current to joint torque; and (iii) actuator dynamics modeling to bridge the actuation gaps with randomization of non-ideal effects such as backlash, torque-speed saturation. Using an asymmetric actor-critic PPO pipeline trained entirely in simulation, our policies deploy directly to a five-finger hand. The resulting policies demonstrated two essential skills: (1) command-based, controllable grasp force tracking, and (2) reorientation of objects in the hand, both of which were robustly executed without fine-tuning on the robot. By combining tactile and torque in the observation space with effective sensing/actuation modeling, our system provides a practical solution to achieve reliable dexterous manipulation. To our knowledge, this is the first demonstration of controllable grasping on a multi-finger dexterous hand trained entirely in simulation and transferred zero-shot on real hardware.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI