日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

医療ロボティクスarXiv:2610.15766

SurgiCLAW: 精密ロボット微細操作のための解釈可能な原子スキルエージェント

SurgiCLAW: An Interpretable Atomic-Skill Agent for Precision Robotic Micromanipulation

シェア:XThreadsFacebookLINEはてブBluesky

MLLMを術中理解とスキル選択に限定し、実行は決定論的制御に委ねる階層型フレームワークを提案。脳BMI電極挿入タスクでスキル選択精度94.6%、実機成功率88%を達成。

詳しい要約

1. どんなもの?

- 外科手術ロボティクス向けの階層型スキルベースエージェントSurgiCLAWを提案。 - MLLMを術中視覚理解・構造化説明・原子的外科スキル選択に限定し、物理実行は検証可能な決定論的制御プログラムに委譲。 - 代表的高精度タスクとしてbrain–machine–interface implantationを対象。 - state-to-skill invocation datasetを構築し、視覚・状態摂動で拡張。

2. 先行研究と比べてどこがすごい?

- 従来のMLLMやvision–language–actionモデルによるend-to-end低レベル行動予測は、精度不足・不透明な意思決定・データ不足に制限されていた。 - SurgiCLAWはMLLMを高レベル判断に限定し、実行を決定論的制御に任せることで精度と解釈性を両立。 - 外科ロボティクスにおける精度・透明性・データ希少性の課題に対処。

3. 技術・手法の肝は?

- MLLMは術中視覚理解、構造化説明、原子的外科スキル選択を担当。 - 物理実行はverifiable deterministic control programsが担う階層構造。 - state-to-skill invocation datasetを視覚・状態摂動で拡張。 - supervised fine-tuningで構造化スキル呼び出しを学習後、action correctness・operation prerequisites・format validityの3報酬で最適化。

4. どうやって有効だと検証した?

- サブタスク成功率、オフラインモデル比較、実ロボット性能、アブレーションで評価。 - 固定テストセットでskill-selection accuracy 94.6%、Macro-F1 93.0%。 - 閉ループ実ロボット移植試験50回でタスク成功率88.0%。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、報酬設計の詳細な議論は記述されていない。

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究は明示されていない。 - 関連手法としてMLLM、vision–language–action models、supervised fine-tuning、reward-based optimizationが挙げられる。 - 同分野の定番としてsurgical robotics、brain–machine–interface implantationが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Angen Ye, junjie xie, Yujia Song, Junkai Huang, Dapeng Zhang

分類: cs.RO, cs.AI

原文アブストラクト

Recent multimodal large language models (MLLMs) and vision--language--action models have provided robots with new capabilities for long-horizon task understanding and planning. In surgical robotics, however, end-to-end prediction of low-level actions remains limited by insufficient precision, opaque decisions, and scarce data. This paper presents SurgiCLAW, a hierarchical skill-based framework for precision surgical manipulation. SurgiCLAW confines an MLLM to intraoperative visual understanding, structured explanation, and atomic surgical-skill selection, while delegating physical execution to verifiable deterministic control programs. For brain--machine-interface implantation, a representative high-precision surgical task, we construct a state-to-skill invocation dataset and expand it through visual and state perturbations. The model first learns structured skill invocation through supervised fine-tuning and is then optimized using three rewards for action correctness, operation prerequisites, and format validity, improving action selection, operational safety, and output parseability. We evaluate subtask success, offline model comparison, real-robot performance, and ablations. On a fixed test set, SurgiCLAW achieves 94.6% skill-selection accuracy and 93.0% macro-averaged F1 (Macro-F1). Across 50 closed-loop real-robot implantation trials, it achieves an 88.0% task success rate.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI