日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ビジュアルサーボ/医療ロボティクスarXiv:2610.06010

Recon2Servo: 学習ベースの画像-動作推論によるロボット超音波ビジュアルサーボ

Recon2Servo: Robotic Ultrasound Visual Servoing via Learned Image-to-Motion Inference

シェア:XThreadsFacebookLINEはてブBluesky

Bモード画像から直接6自由度のプローブ動作を推論し、目標断面への閉ループ位置合わせを実現するビジュアルサーボフレームワークを提案。

詳しい要約

1. どんなもの?

- 2D B-mode画像から6-DoFプローブ制御を行うUltrasound visual servoingのフレームワーク。 - Recon2Servoと名付けられ、trackerless 3D ultrasound reconstructionに着想を得ている。 - DINOv3 encoderとbidirectional relation moduleで画像間の相対プローブ姿勢を推定し、反復的な閉ループで目標ビューに整列させる。

2. 先行研究と比べてどこがすごい?

- 既存手法は解剖学的priorやhandcrafted visual featuresに依存し、汎化性が限られる。 - 本手法はB-mode画像から直接image-to-motion inferenceを学習し、対象に依存しない汎化性を目指す。 - 6-DoF制御を可能にし、out-of-plane motionの曖昧さに対処する点が新しい。

3. 技術・手法の肝は?

- DINOv3 encoderにlow-rank adaptationを適用し、bidirectional relation moduleで現在と目標画像の相対姿勢を推定。 - supervised relative-pose learning、reconstruction-guided closed-loop adaptation、bounded residual pose correctionを組み合わせる。 - これによりservoing中のmotion inferenceを改善する。

4. どうやって有効だと検証した?

- 公開データセットと、12人の健康なボランティアから異なる超音波システムで収集したin-houseデータセットで評価。 - reconstructed-volume servoingにおける有効性を実証。 - 補足ビデオで人間の前腕におけるtarget-view alignmentとdynamic trackingの実ロボットデモを提供。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- trackerless 3D ultrasound reconstruction、DINOv3、low-rank adaptation、bidirectional relation moduleに関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yameng Zhang, Pei Liu, Dianye Huang, Yizhao Qian, Zhongyu Chen, Xiangyu Chu, K. W. Samuel Au, Zhongliang Jiang

分類: cs.RO

原文アブストラクト

Ultrasound visual servoing is essential for autonomous robotic ultrasound, yet 6-DoF probe control from 2D B-mode images remains challenging due to limited and ambiguous out-of-plane motion cues. Existing methods typically rely on anatomical priors or handcrafted visual features, limiting their generalizability across imaging targets. Inspired by trackerless 3D ultrasound reconstruction, we propose Recon2Servo, a visual servoing framework that learns image-to-motion inference directly from B-mode images for 6-DoF probe control. A DINOv3 encoder with low-rank adaptation and a bidirectional relation module estimate the relative probe pose between current and target images to guide iterative closed-loop target-view alignment. The framework combines supervised relative-pose learning, reconstruction-guided closed-loop adaptation, and bounded residual pose correction to improve motion inference during servoing. Evaluations on a public dataset and an in-house dataset collected from 12 healthy volunteers using different ultrasound systems demonstrate its effectiveness in reconstructed-volume servoing. Additional real-robot demonstrations of target-view alignment and dynamic tracking on a human forearm are provided in the supplementary video: https://youtu.be/qwsOdI-GMYk.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI