日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

敵対的攻撃/手術ロボティクスarXiv:2606.11535

手術ロボットタスクにおける学習済みポリシーへの敵対的攻撃

Adversarial Attacks on Learned Policies for Surgical Robotic Tasks

シェア:XThreadsFacebookLINEはてブBluesky

手術ロボットの学習ベースのポリシーが敵対的攻撃に対して脆弱であることを示し、視覚的摂動による動作妨害や誘導攻撃を提案・評価した。

詳しい要約

1. どんなもの?

- 手術ロボティクスにおける学習ベース方策への敵対的攻撃を初めて研究 - 視覚観測からロボット動作へのend-to-end写像が攻撃に脆弱か、患者傷害につながるかを検討 - 2つの脅威モードを調査 - disruptive attacks: 知覚不能な視覚摂動で方策実行を中断 - steering attacks: 摂動で方策動作を攻撃者指定方向へ誘導 - 対象タスク: debridementとsuturing - 対象方策: ACT, Diffusion Policy, Pi0

2. 先行研究と比べてどこがすごい?

- 手術ロボティクスにおける学習ベース方策への敵対的脅威の初の研究 - 従来の敵対的攻撃研究は一般ロボティクスや画像認識が中心で、手術領域は未開拓 - 3つの攻撃手法を方策情報へのアクセス度合いを変えて定式化 - 自然な視覚変化(照明変動等)を模倣するphotometric adversarial attacksを新たに導入 - 560回の物理実験でSOTA方策の脆弱性を実証

3. 技術・手法の肝は?

- 3つの敵対的攻撃手法を方策情報へのアクセス度合いを増やしながら定式化 - disruptive attacks: 知覚不能な視覚摂動で方策実行を中断させる - steering attacks: 摂動で方策動作を攻撃者指定方向へ誘導する - photometric adversarial attacks: 照明変動など自然な視覚変化を模倣し、有効かつ視覚的に自然な摂動を生成 - 評価対象: debridementとsuturingの2手術サブタスク - 評価方策: ACT, Diffusion Policy, Pi0の3つのend-to-end方策アーキテクチャ

4. どうやって有効だと検証した?

- debridementとsuturingのphantomを用いた560回の物理実験を実施 - 3つのend-to-end方策アーキテクチャ(ACT, Diffusion Policy, Pi0)で評価 - 結果: SOTA方策が著しく妨害され、手術サブタスク成功率が平均61%低下 - 攻撃手法の有効性を物理実験で検証

5. 議論はある?

- 学習ベース方策が敵対的攻撃に脆弱で、患者傷害につながる可能性を指摘 - 知覚不能な摂動が方策実行を中断・誘導できることを示す - 自然な視覚変化を模倣する攻撃が有効かつ視覚的に自然であることを示す - 要旨からは、防御策や倫理的議論の詳細は不明

6. 次に読むべき論文は?

- ACT (Action Chunking Transformer) - Diffusion Policy - Pi0 - 敵対的攻撃に関する一般ロボティクス研究 - 手術ロボティクスにおける学習ベース方策の堅牢性研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shutong Jin, Ziyang Chen, Preethi Satish, Paavan Gupta, Florian T. Pokorny, Ken Goldberg

分類: cs.RO

原文アブストラクト

Learning-based policies are being considered to augment the dexterity of human surgeons in robot-assisted surgery. Can the end-to-end mapping from visual observations to robot actions be vulnerable to adversarial attacks, potentially leading to patient injury? In this paper, we present the first study of adversarial threats to learning-based policies in surgical robotics. We investigate two threat modes: (a) disruptive attacks, where imperceptible visual perturbations interrupt policy execution, and (b) steering attacks, where such perturbations steer policy actions toward attacker-specified directions. We formulate three adversarial attack methods, each with increasing access to policy information, and evaluate their impact on two surgical subtasks: debridement and suturing. Our evaluation covers three end-to-end policy architectures: ACT, Diffusion Policy, and Pi0. In addition, we introduce a new class of photometric adversarial attacks that mimic natural visual changes, such as lighting variations, to generate effective yet visually plausible perturbations. Results from 560 physical experiments using phantoms for debridement and suturing suggest that state-of-the-art policies can be significantly disrupted, resulting in an average 61% reduction in surgical subtask success rates. Project page: https://sites.google.com/view/adversary-surgery

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI