日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚/物体認識arXiv:2603.21410

マルチモーダル接触センシングによるベイズ能動物体認識と6D姿勢推定

Bayesian Active Object Recognition and 6D Pose Estimation from Multimodal Contact Sensing

シェア:XThreadsFacebookLINEはてブBluesky

力覚・触覚センサと自由空間制約をベイズ推論に統合し、能動的触覚探索で物体の種類と6D姿勢を同時推定する手法を提案。粒子フィルタと探索計画により効率的かつ高精度な認識を実現した。

詳しい要約

1. どんなもの?

- 物体認識と6D pose推定を同時に行う能動的触覚探索フレームワーク。 - wrist force/torque sensing、GelSight tactile sensing、free-space constraintsをBayesian inferenceで統合。 - 物体クラスとposeのbeliefを維持し、触覚探索中に更新。 - 大仮説空間の推論にcustomized particle filterを使用。 - 到達可能性制約下で情報量の多い次の接触を選択し探索を能動化。 - 実機はFranka Panda robot、11 YCB objectsで評価。

2. 先行研究と比べてどこがすごい?

- force/torque-only baselinesと比較し、触覚とfree-space情報の統合で認識・pose推定精度と安定性が大幅向上。 - 同じ精度をより少ないaction cyclesで達成。 - 接触・非接触証拠を組み合わせて曖昧性を低減し、joint class-pose estimationの頑健性を改善。 - 能動探索により効率的な情報獲得を実現。

3. 技術・手法の肝は?

- Bayesian inference frameworkで物体クラスとposeのbeliefを維持。 - wrist force/torque sensing、GelSight tactile sensing、free-space constraintsを統合。 - 大仮説空間向けにcustomized particle filterを採用し、新観測に基づき粒子を逐次サンプリング。 - 推論されたbeliefを用いて、reachability constraints下で情報量の多い次の接触を選択。 - motion planning and control frameworkで触覚探索の実行可能経路を計画・実行。 - 予期せぬ接触への対処とGelSight-surface alignmentをtactile servoingで処理。

4. どうやって有効だと検証した?

- simulationとFranka Panda robot実機で評価。 - 11 YCB objectsを使用。 - 触覚・free-space情報の統合が認識・pose推定精度と安定性を大幅改善することを確認。 - force/torque-only baselinesと比較してaction cycles数を削減。 - code、dataset、supplementary materialをオンライン公開予定。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、計算コスト、一般化性に関する議論は要旨に記載なし。

6. 次に読むべき論文は?

- force/torque-only baselines(具体的な論文名は要旨に記載なし)。 - GelSight tactile sensingを用いた関連研究。 - Bayesian active tactile explorationの先行研究。 - YCB objectsを用いたobject recognition and 6D pose estimationの研究。 - particle filterを用いたbelief更新の研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haodong Zheng, Gabriele M. Caddeo, Andrei C. Jalba, Wijnand A. IJsselsteijn, Lorenzo Natale, Raymond H. Cuijpers

分類: cs.RO

原文アブストラクト

We present an active tactile exploration framework for joint object recognition and 6D pose estimation. The proposed method integrates wrist force/torque sensing, GelSight tactile sensing, and free-space constraints within a Bayesian inference framework that maintains a belief over object class and pose during active tactile exploration. By combining contact and non-contact evidence, the framework reduces ambiguity and improves robustness in the joint class-pose estimation problem. To enable efficient inference in the large hypothesis space, we employ a customized particle filter that progressively samples particles based on new observations. The inferred belief is further used to guide active exploration by selecting informative next touches under reachability constraints. For effective data collection, a motion planning and control framework is developed to plan and execute feasible paths for tactile exploration, handle unexpected contacts and GelSight-surface alignment with tactile servoing. We evaluate the framework in simulation and on a Franka Panda robot using 11 YCB objects. Results show that incorporating tactile and free-space information substantially improves recognition and pose estimation accuracy and stability, while reducing the number of action cycles compared with force/torque-only baselines. Code, dataset, and supplementary material will be made available online.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI