日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2609.21365

MicroHookACT: 単眼顕微鏡視覚による柔軟マイクロ電極フッキングのための視覚運動ポリシー

MicroHookACT: Monocular Microscopic Vision Guided Visuomotor Policy for Flexible Microelectrode Hooking

シェア:XThreadsFacebookLINEはてブBluesky

単眼顕微鏡下での柔軟マイクロ電極の自動フッキングを実現する模倣学習ベースの視覚運動ポリシーを提案し、人間の実演60回から学習して96.7%の成功率を達成した。

詳しい要約

1. どんなもの?

- 柔軟マイクロ電極(FME)移植における針-ループの自動フッキングを目的とした模倣学習ベースの視覚運動ポリシー - 単眼顕微鏡視野下での3Dフッキングを実現するMicroHookACTを提案 - 60件の人間デモンストレーションで訓練し、5つの難易度設定で評価 - 全体成功率96.7%、平均実行時間11.5秒を達成

2. 先行研究と比べてどこがすごい?

- 従来のフッキングは手動または触覚依存が多く、単眼視での自動化は困難 - 本手法は触覚なしでデフォーカス手がかりと光軸誘導を利用 - 手動視覚アノテーション不要で注意モジュールを学習 - 単一のACTポリシーで動作中のデフォーカスぼけと視覚要件の変化に適応

3. 技術・手法の肝は?

- 一方向フッキング戦略: デフォーカス手がかりと光軸誘導で触診不要の位置合わせと接触リッチな挿通を実現 - 行動教師ありオブジェクト注意モジュール: 凍結ViTバックボーン上で針先とループに直接注目、手動アノテーション不要 - 注意中心のグローバル粗特徴とローカル細特徴を予測行動進捗に応じて動的重み付け - 単一ACTポリシーが動作全体で変化する視覚要求に適応

4. どうやって有効だと検証した?

- 60件の人間デモンストレーションで視覚運動ポリシーを訓練 - 5つの異なる難易度設定で評価 - 最高全体成功率96.7%、平均実行時間11.5秒を達成 - マイクロンレベル制御の可能性を実証

5. 議論はある?

- 単眼顕微鏡視野下での視覚運動ポリシー学習の有効性を示す - 変動する操作条件下でのマイクロンレベル制御の可能性 - 具体的な限界や失敗事例、一般化性に関する議論は要旨からは不明

6. 次に読むべき論文は?

- ACT (Action Chunking with Transformers) - ViT (Vision Transformer) - 模倣学習ベースの視覚運動ポリシー - 単眼顕微鏡視覚を用いたマイクロマニピュレーション

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yitong Chen, Fangbo Qin, Yang Wang, Ruihua Hu, Kui Zhang, Shan Yu

分類: cs.RO

原文アブストラクト

Automated needle-loop hooking is a critical step in flexible microelectrode (FME) implantation. This paper presents MicroHookACT, an imitation learning-based visuomotor policy for automated 3D hooking under monocular microscopic vision. First, a unidirectional hooking strategy exploits defocus cues and optical-axis guidance to enable palpation-free precise alignment and contact-rich threading. Second, an action-supervised object attention module built on a frozen ViT backbone learns to focus on the micro-needle tip and micro-loop directly from human demonstrations, without requiring manual visual annotations for training. Third, attention-centered global coarse and local fine features are dynamically weighted according to predicted action progress, enabling a single ACT policy to adapt to changing defocus blur and visual requirements throughout the operation. In the experiments, visuomotor policies were trained on 60 human demonstrations and evaluated under five setups with varying difficulties. Our MicroHookACT framework achieved the highest overall success rate of 96.7\% with an average execution time of 11.5 s. These results demonstrate the potential of visuomotor policy learning for micron-level control under varying operating conditions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI