日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2602.23870

外科手術ロボット把持におけるセンサレス高精度力制御のためのハイブリッドオフライン・オンライン強化学習

Hybrid Offline-Online Reinforcement Learning for Sensorless, High-Precision Force Regulation in Surgical Robotic Grasping

シェア:XThreadsFacebookLINEはてブBluesky

腱駆動手術器具の把持力を、遠位センサなしで高精度に制御するため、物理モデルとオフライン・オンライン強化学習を組み合わせたフレームワークを提案し、シミュレーションと実機で有効性を示した。

詳しい要約

1. どんなもの?

tendon-driven surgical instrument の grasp force を distal sensing なしで高精度に制御する sensorless control framework。da Vinci Xi の grasping mechanism の first-principles digital twin と hybrid reinforcement learning を組み合わせ、proximal measurements から motor voltages へ直接写像する policy を学習。simulation で multi-harmonic jaw motion 中に grasp force を reference の 1% 以内に維持し、hardware 実験で平均 force error 4% 未満、約 71k param、kHz レートで実行可能。

2. 先行研究と比べてどこがすごい?

既存手法は distal force sensing や analytical compensation に依存し、hardware complexity の増大や dynamic motion 下での性能劣化があった。本研究は sensorless で、physics-consistent modeling と hybrid RL により distal force behavior を回復し、追加 sensing 不要で scalable かつ mechanically compatible な solution を提供する点が異なる。

3. 技術・手法の肝は?

da Vinci Xi grasping mechanism の first-principles digital twin を構築し、electrical, transmission, jaw dynamics を unified differential-algebraic formulation で表現。stiff で highly nonlinear な系で安全に学習するため three-stage pipeline を導入:(i) receding-horizon CMA-ES oracle で dynamically feasible expert trajectories を生成、(ii) Implicit Q-Learning による fully offline policy learning で unsafe exploration なしに安定初期化、(iii) TD3 による online refinement で on-policy dynamics に適応。policy は proximal measurements を motor voltages に直接写像…

4. どうやって有効だと検証した?

Simulation で multi-harmonic jaw motion 中に grasp force を desired reference の 1% 以内に維持。Hardware experiments で diverse trajectories にわたり平均 force error 4% 未満を達成し、sim-to-real transfer を検証。learned policy は約 71k param で kHz レート実行可能。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。関連手法として Implicit Q-Learning, TD3, CMA-ES が挙げられる。同分野の定番として tendon-driven surgical robot の force control や sim-to-real transfer に関する研究を読むとよい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Edoardo Fazzari, Omar Mohamed, Khalfan Hableel, Hamdan Alhadhrami, Cesare Stefanini

分類: cs.RO

原文アブストラクト

Precise grasp force regulation in tendon-driven surgical instruments is fundamentally limited by nonlinear coupling between motor dynamics, transmission compliance, friction, and distal mechanics. Existing solutions typically rely on distal force sensing or analytical compensation, increasing hardware complexity or degrading performance under dynamic motion. We present a sensorless control framework that combines physics-consistent modeling and hybrid reinforcement learning to achieve high-precision distal force regulation in a proximally actuated surgical end-effector. We develop a first-principles digital twin of the da Vinci Xi grasping mechanism that captures coupled electrical, transmission, and jaw dynamics within a unified differential-algebraic formulation. To safely learn control policies in this stiff and highly nonlinear system, we introduce a three-stage pipeline:(i)a receding-horizon CMA-ES oracle that generates dynamically feasible expert trajectories,(ii)fully offline policy learning via Implicit Q-Learning to ensure stable initialization without unsafe exploration, and (iii)online refinement using TD3 for adaptation to on-policy dynamics. The resulting policy directly maps proximal measurements to motor voltages and requires no distal sensing. In simulation, the controller maintains grasp force within 1% of the desired reference during multi-harmonic jaw motion. Hardware experiments demonstrate average force errors below 4% across diverse trajectories, validating sim-to-real transfer. The learned policy contains approximately 71k param and executes at kH rates, enabling real-time deployment. These results demonstrate that high-fidelity modeling combined with structured offline-online RL can recover precise distal force behavior without additional sensing, offering a scalable and mechanically compatible solution for surgical robotic manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI