日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2601.01438

関節物体のオンライン推定と操作

Online Estimation and Manipulation of Articulated Objects

シェア:XThreadsFacebookLINEはてブBluesky

視覚事前情報と固有感覚を因子グラフで統合し、未知の関節物体の関節状態をオンライン推定しながら操作する手法を提案。実機で75%の成功率を達成。

詳しい要約

1. どんなもの?

- 家庭内の冷蔵庫や引き出しなど、関節物体の操作を自動化するためのサービスロボットの研究。 - 視覚からの関節の予測と、操作中の自己受容感覚を融合し、オンラインで関節を推定する新しいアプローチを提案。 - Screw Theoryに基づく解析モデルとfactor graphを用いて、視覚的priorとproprioceptive sensingを統合。 - ロボットは触る前に視覚から初期予測を行い、操作中に運動学と力覚から推定を更新する。 - シミュレーションと実世界実験で評価し、未知の引き出しを開ける閉ループ実験を実施。

2. 先行研究と比べてどこがすごい?

- 従来の深層学習手法は視覚から関節物体のaffordanceのpriorを予測できるが、操作中の感覚を活用しない。 - 他の研究は関節運動を観察して推定するが、ロボットが既に物体を操作できる必要がある。 - 提案手法はこれらの利点を組み合わせ、視覚priorと操作中のproprioceptive sensingをfactor graphで融合し、オンライン推定を実現。 - これにより、未知の物体に対して触る前の予測と操作中の迅速な更新が可能となり、従来手法の制約を克服。

3. 技術・手法の肝は?

- factor graphを用いて、学習された視覚的priorと操作中のproprioceptive sensingを融合。 - Screw Theoryに基づく解析的な関節モデルを採用。 - ロボットは触る前に視覚から関節の初期予測を行い、操作中にkinematicとforce sensingから推定を更新。 - オンライン推定により、関節パラメータをリアルタイムで修正。

4. どうやって有効だと検証した?

- シミュレーションと実世界のロボット操作実験で広範囲に評価。 - 閉ループ推定と操作実験を複数実施し、ロボットが未知の引き出しを開けることを実証。 - 実機実験では、未知の関節物体の自律的な開放において75%の成功率を達成。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:深層学習による視覚からのaffordance予測手法、関節運動観察による推定手法。 - 関連手法:Screw Theory、factor graph。 - 同分野の定番:articulated object manipulation、visual affordance prediction、proprioceptive sensing。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Russell Buchanan, Adrian Röfer, João Moura, Abhinav Valada, Sethu Vijayakumar

分類: cs.RO, cs.AI

原文アブストラクト

From refrigerators to kitchen drawers, humans interact with articulated objects effortlessly every day while completing household chores. For automating these tasks, service robots must be capable of manipulating arbitrary articulated objects. Recent deep learning methods have been shown to predict valuable priors on the affordance of articulated objects from vision. In contrast, many other works estimate object articulations by observing the articulation motion, but this requires the robot to already be capable of manipulating the object. In this article, we propose a novel approach combining these methods by using a factor graph for online estimation of articulation which fuses learned visual priors and proprioceptive sensing during interaction into an analytical model of articulation based on Screw Theory. With our method, a robotic system makes an initial prediction of articulation from vision before touching the object, and then quickly updates the estimate from kinematic and force sensing during manipulation. We evaluate our method extensively in both simulations and real-world robotic manipulation experiments. We demonstrate several closed-loop estimation and manipulation experiments in which the robot was capable of opening previously unseen drawers. In real hardware experiments, the robot achieved a 75% success rate for autonomous opening of unknown articulated objects.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI