日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2603.04351

腱駆動ロボットの強化学習ポリシーのSim2Real転送のための腱力モデリング

Tendon Force Modeling for Sim2Real Transfer of Reinforcement Learning Policies for Tendon-Driven Robots

シェア:XThreadsFacebookLINEはてブBluesky

腱駆動ロボットの強化学習ポリシーを実機に転送する際のシミュレーションと実機のギャップを減らすため、サーボモータが生成する腱力をモデル化する手法を提案した。

詳しい要約

1. どんなもの?

Tendon-driven robotの制御をRLで実現するため、servo motorが生むtendon forceをモデル化し、sim-to-real transferを改善する手法。tendon-driven fingerを対象に、contextual historyと新規test-benchでデータ駆動的に力を推定し、GPU加速のtendon force-driven rigid body simulationでRL controllerを訓練する。

2. 先行研究と比べてどこがすごい?

既存のdata-driven手法をcontextual historyと新規data collection test-benchで拡張。contact-richな実世界操作に典型的なtendon forceを取得可能にし、robot-agnosticなtransformer-based modelで最大motor forceの3%以内の予測を実現。sim-to-real gapをtest trajectoryで41%削減し、実機fingertip pose trackingで50%改善。

3. 技術・手法の肝は?

tendon forceを推定するtransformer-based modelを構築。contextual historyを活用し、新規test-benchでcontact-rich interaction下のtendon forceデータを収集。そのmodelをGPU-accelerated tendon force-driven rigid body simulationに統合し、RL-based controllerを訓練する。

4. どうやって有効だと検証した?

test-benchで収集したデータでmodelを評価し、最大motor forceの3%以内の予測精度を確認。simulationに統合してtest trajectoryのsim-to-real gapを41%削減。実機のtendon-driven robotic fingerでfingertip pose trackingタスクをRL controllerで実行し、50%の改善を検証。

5. 議論はある?

提案手法は異なるactuatorやrobot systemに一般化可能で、tendon system全体でRL policyの利用を広げ、dexterous manipulatorやsoft robotの能力向上に寄与し得る。ただし、要旨からは限界や失敗事例、計算コストなどの議論は不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。同分野の定番として、sim-to-real transferのためのdomain randomization、system identification、data-driven actuator modeling、tendon-driven robotのRL制御に関する論文が次に読むべき候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Valentin Yuryev, Josie Hughes

分類: cs.RO

原文アブストラクト

Robots which make use of soft or compliant inter- actions often leverage tendon-driven actuation which enables actuators to be placed more flexibly, and compliance to be maintained. However, controlling complex tendon systems is challenging. Simulation paired with reinforcement learning (RL) could be enable more complex behaviors to be generated. Such methods rely on torque and force-based simulation roll- outs which are limited by the sim-to-real gap, stemming from the actuator and system dynamics, resulting in poor transfer of RL policies onto real robots. To address this, we propose a method to model the tendon forces produced by typical servo motors, focusing specifically on the transfer of RL policies for a tendon driven finger. Our approach extends existing data- driven techniques by leveraging contextual history and a novel data collection test-bench. This test-bench allows us to capture tendon forces undergo contact-rich interactions typical of real- world manipulation. We then utilize our force estimation model in a GPU-accelerated tendon force-driven rigid body simulation to train RL-based controllers. Our transformer-based model is capable of predicting tendon forces within 3% of the maximum motor force and is robot-agnostic. By integrating our learned model into simulation, we reduce the sim-to-real gap for test trajectories by 41%. RL-based controller trained with our model achieves a 50% improvement in fingertip pose tracking tasks on real tendon-driven robotic fingers. This approach is generalizable to different actuators and robot systems, and can enable RL policies to be used widely across tendon systems, advancing capabilities of dexterous manipulators and soft robots.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI