日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ビジュアルサーボarXiv:2602.06834

テクスチャなし物体に対するキーポイントベースEKFを用いた知覚・制御結合ビジュアルサーボ

Perception-Control Coupled Visual Servoing for Textureless Objects Using Keypoint-Based EKF

シェア:XThreadsFacebookLINEはてブBluesky

テクスチャのない物体に対して、学習ベースのキーポイント検出と拡張カルマンフィルタを組み合わせ、知覚と制御を閉ループで統合することで、遮蔽などに頑健なビジュアルサーボを実現した。

詳しい要約

1. どんなもの?

- テクスチャのない物体に対する視覚サーボの新しい手法を提案。 - 学習ベースのキーポイント検出と拡張カルマンフィルタ(EKF)を組み合わせ、知覚と制御を密に統合。 - 6D物体姿勢を推定し、姿勢ベース視覚サーボ(PBVS)を駆動。 - カメラ運動がキーポイント追跡を改善する閉ループを形成。 - 確率的制御則によりカメラ速度と不確かさを計算し、安全で信頼性の高い操作を実現。

2. 先行研究と比べてどこがすごい?

- 従来の視覚サーボはテクスチャのない物体に適用困難で、オクルージョンなどの悪条件に弱い。 - 提案手法は学習ベースのキーポイント検出を活用し、知覚と制御を閉ループで統合することでロバスト性を向上。 - 標準的なPBVSと異なり、不確かさを考慮した制御則を導入。 - 実世界のロボットプラットフォームで精度と実用性の両面で従来手法を上回ることを実証。

3. 技術・手法の肝は?

- 学習ベースのキーポイント検出器を用いてテクスチャのない物体のキーポイントを取得。 - フレームごとのキーポイント測定値をEKFに統合し、6D物体姿勢を推定。 - 推定姿勢に基づいてPBVSを実行し、カメラ運動を制御。 - カメラ運動が次のキーポイント追跡を改善する閉ループを形成。 - 確率的制御則によりカメラ速度とその不確かさを同時に計算し、不確かさを考慮した制御を実現。

4. どうやって有効だと検証した?

- 実世界のロボットプラットフォームを用いて定量的指標と把持実験で検証。 - 従来の視覚サーボ技術と比較し、精度と実用アプリケーションの両面で優位性を実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、学習ベースのキーポイント検出、拡張カルマンフィルタ(EKF)、姿勢ベース視覚サーボ(PBVS)が挙げられる。 - 同分野の定番として、画像ベース視覚サーボ(IBVS)や直接視覚サーボ(direct visual servoing)が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Allen Tao, Jun Yang, Stanko Oparnica, Wenjie Xue

分類: cs.RO

原文アブストラクト

Visual servoing is fundamental to robotic applications, enabling precise positioning and control. However, applying it to textureless objects remains a challenge due to the absence of reliable visual features. Moreover, adverse visual conditions, such as occlusions, often corrupt visual feedback, leading to reduced accuracy and instability in visual servoing. In this work, we build upon learning-based keypoint detection for textureless objects and propose a method that enhances robustness by tightly integrating perception and control in a closed loop. Specifically, we employ an Extended Kalman Filter (EKF) that integrates per-frame keypoint measurements to estimate 6D object pose, which drives pose-based visual servoing (PBVS) for control. The resulting camera motion, in turn, enhances the tracking of subsequent keypoints, effectively closing the perception-control loop. Additionally, unlike standard PBVS, we propose a probabilistic control law that computes both camera velocity and its associated uncertainty, enabling uncertainty-aware control for safe and reliable operation. We validate our approach on real-world robotic platforms using quantitative metrics and grasping experiments, demonstrating that our method outperforms traditional visual servoing techniques in both accuracy and practical application.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI