日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.03944

視覚運動ポリシー学習のための制約保持データ生成

Constraint-Preserving Data Generation for Visuomotor Policy Learning

シェア:XThreadsFacebookLINEはてブBluesky

単一の専門家軌道から、新しい物体形状や姿勢を含むロボット実演を生成し、実世界にゼロショット転移する閉ループ視覚運動ポリシーを訓練する手法を提案。

詳しい要約

1. どんなもの?

- 大規模な demonstration data の収集コストを削減するためのデータ生成手法 CP-Gen を提案する研究。 - 単一の expert trajectory から、新しい物体形状 (object geometries) と姿勢 (poses) を含むロボット demonstration を生成する。 - 生成した demonstration で closed-loop visuomotor policy を学習し、real world へ zero-shot 転移、物体形状・姿勢の変化への汎化を狙う。

2. 先行研究と比べてどこがすごい?

- 先行研究と同様に expert demonstration を free-space motions と robot skills に分解する点は共通。 - 先行研究が pose variations のみを用いるのに対し、CP-Gen は robot skills を keypoint-trajectory constraints として定式化し、geometry-aware なデータ生成を実現する点が新しい。 - これにより物体形状の変化も扱える demonstration 生成が可能になる。

3. 技術・手法の肝は?

- expert demonstration を free-space motions と robot skills に分解する。 - robot skills を keypoint-trajectory constraints として表現する: robot または把持物体上の keypoints が、task-relevant object に対して定義された reference trajectory を追従する制約。 - 新規 demonstration 生成時は、各 task-relevant object の pose・geometry transforms をサンプリングし、object と対応する keypoints/keypoint trajectories に適用する。 - 変換後の keypoint trajectory を追従するよう robot joint configurations を最適化し、最初の最適化済み joint configuration まで collision-free path を motion plan する。

4. どうやって有効だと検証した?

- 16 の simulation tasks と 4 の real-world tasks で実験。 - タスクには multi-stage、non-prehensile、tight-tolerance manipulation を含む。 - CP-Gen で学習した policy は平均 success rate 77% を達成し、最良 baseline の平均 50% を上回った。

5. 議論はある?

- 要旨からは不明。 - ただし実験結果から、単一 expert trajectory からの生成でも多様な形状・姿勢へ汎化し、real world へ zero-shot 転移できることが示唆される。 - 限界や失敗要因、制約の適用範囲についての議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で明示的に参照されている個別論文はない。 - 関連手法として、pose variations を用いた prior work のデータ生成手法、keypoint-trajectory constraints を用いる手法、motion planning と joint configuration optimization に関する研究が次に読む候補。 - 同分野の定番として imitation learning / visuomotor policy learning の代表的研究も挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kevin Lin, Varun Ragunath, Andrew McAlinden, Aaditya Prasad, Jimmy Wu, Yuke Zhu, Jeannette Bohg

分類: cs.RO, cs.AI

原文アブストラクト

Large-scale demonstration data has powered key breakthroughs in robot manipulation, but collecting that data remains costly and time-consuming. We present Constraint-Preserving Data Generation (CP-Gen), a method that uses a single expert trajectory to generate robot demonstrations containing novel object geometries and poses. These generated demonstrations are used to train closed-loop visuomotor policies that transfer zero-shot to the real world and generalize across variations in object geometries and poses. Similar to prior work using pose variations for data generation, CP-Gen first decomposes expert demonstrations into free-space motions and robot skills. But unlike those works, we achieve geometry-aware data generation by formulating robot skills as keypoint-trajectory constraints: keypoints on the robot or grasped object must track a reference trajectory defined relative to a task-relevant object. To generate a new demonstration, CP-Gen samples pose and geometry transforms for each task-relevant object, then applies these transforms to the object and its associated keypoints or keypoint trajectories. We optimize robot joint configurations so that the keypoints on the robot or grasped object track the transformed keypoint trajectory, and then motion plan a collision-free path to the first optimized joint configuration. Experiments on 16 simulation tasks and four real-world tasks, featuring multi-stage, non-prehensile and tight-tolerance manipulation, show that policies trained using CP-Gen achieve an average success rate of 77%, outperforming the best baseline that achieves an average of 50%.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI