日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2505.09424

姿勢ガイド付き模倣学習によるロボットの精密挿入

Exploring Pose-Guided Imitation Learning for Robotic Precise Insertion

シェア:XThreadsFacebookLINEはてブBluesky

物体の相対SE(3)姿勢を観測する拡散政策とRGBDによる補完を組み合わせ、7〜10回の実演で0.01mmの隙間の精密挿入を実現した。

詳しい要約

1. どんなもの?

- ロボットの精密挿入(precise insertion)タスクのための模倣学習(imitation learning)研究 - 物体のSE(3)ポーズをコンパクトな物体中心観測として用いるpose-guided imitation learningを検討 - 相対SE(3)ポーズを観測し将来の相対ポーズ軌道を予測するdiffusion policyを提案 - ポーズ推定ノイズへの頑健性のためRGBD cuesを融合する拡張も提案 - 実機6タスクで検証、タスクあたり7–10デモで高精度を達成

2. 先行研究と比べてどこがすごい?

- 既存のvisuomotor policiesは高次元RGB/point-cloud観測に依存し、data-inefficientでポーズ変動下の汎化が弱い - 本研究はSE(3)ポーズという低次元・物体中心の観測を用いる点が異なる - 少ないデモ(7–10)でclearance 0.01 mmまでの挿入を実現 - 既存baselinesに対しdata efficiencyとgeneralizationの改善を示す - 具体的な比較対象名は要旨からは不明

3. 技術・手法の肝は?

- 挿入タスク用diffusion policy: source objectのtarget objectに対する相対SE(3)ポーズを観測し、将来の相対ポーズ軌道をactionとして予測 - goal-conditioned RGBD encoderを導入し、currentとgoalの観測の差異を捉える - pose-guided residual gated fusion moduleを提案: pose featuresを主制御信号とし、pose推定が不確かなときRGBD featuresが適応的に補償 - ポーズ推定ノイズへの頑健性向上を狙う設計

4. どうやって有効だと検証した?

- 実機ロボットによる6つのprecise insertionタスクで評価 - タスクあたり7–10 demonstrationsのみで高い性能を達成 - clearance 0.01 mmまでのタスクで成功 - 既存baselinesに対するdata efficiencyとgeneralizationの改善を報告 - 詳細な評価指標・被験者数などは要旨からは不明

5. 議論はある?

- contact-rich dynamics、tight clearances、limited demonstrationsが精密挿入の難しさとして挙げられる - pose推定ノイズが課題であり、RGBD融合で補償する設計を議論 - ポーズ観測のdata efficiency・汎化への利点を主張 - 限界や失敗事例、計算コストなどの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な既存研究名は不明 - 関連手法としてdiffusion policy、visuomotor policy、point-cloudベースの模倣学習、goal-conditioned RGBD encoder関連研究を挙げる - 同分野の定番としてimitation learning、SE(3) pose estimation、residual policy、gated fusionに関する文献が次に読む候補

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Han Sun, Sheng Liu, Yizhao Wang, Zhenning Zhou, Shuai Wang, Haibo Yang, Jingyuan Sun, Qixin Cao

分類: cs.RO

原文アブストラクト

Imitation learning is promising for robotic manipulation, but \emph{precise insertion} in the real world remains difficult due to contact-rich dynamics, tight clearances, and limited demonstrations. Many existing visuomotor policies depend on high-dimensional RGB/point-cloud observations, which can be data-inefficient and generalize poorly under pose variations. In this paper, we study pose-guided imitation learning by using object poses in $\mathrm{SE}(3)$ as compact, object-centric observations for precise insertion tasks. First, we propose a diffusion policy for precise insertion that observes the \emph{relative} $\mathrm{SE}(3)$ pose of the source object with respect to the target object and predicts a future relative pose trajectory as its action. Second, to improve robustness to pose estimation noise, we augment the pose-guided policy with RGBD cues. Specifically, we introduce a goal-conditioned RGBD encoder to capture the discrepancy between current and goal observations. We further propose a pose-guided residual gated fusion module, where pose features provide the primary control signal and RGBD features adaptively compensate when pose estimates are unreliable. We evaluate our methods on six real-robot precise insertion tasks and achieve high performance with only $7$--$10$ demonstrations per task. In our setup, the proposed policies succeed on tasks with clearances down to $0.01$~mm and demonstrate improved data efficiency and generalization over existing baselines. Code will be available at https://github.com/sunhan1997/PoseInsert.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI