日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2505.21916

事前強化学習:限られた試行回数での目標条件付き動的マニピュレーション

Prior Reinforce: Goal-Conditioned Dynamic Manipulation with Limited Trials

シェア:XThreadsFacebookLINEはてブBluesky

少数の実演から条件付き拡散モデルで運動マニフォールドを学習し、低次元条件空間でのフィードバック最適化により、10回程度の試行で新しい動的マニピュレーション目標を達成するフレームワークを提案。

詳しい要約

1. どんなもの?

- 実世界の動的マニピュレーション(例: バスケットボールのシュート)を対象とした、goal-conditioned な適応フレームワーク Prior Reinforce (P.R.) の提案。 - 高速な open-loop 動作の精密制御を、少数の実世界 trial で新目標へ適応させることを狙う。 - 大規模 interaction・reward engineering・正確な dynamic modeling に依存しない、簡便で実用的な手法を志向。

2. 先行研究と比べてどこがすごい?

- 大規模 interaction、reward engineering、正確な dynamic modeling に頼る既存手法に対し、少数 trial での適応を可能にする点が特徴。 - 動作生成と outcome 駆動の適応を分離することで、ノイズの多い知覚下でも効率的な refinement を実現。 - 実世界の複数タスクで、合計10 trial 程度という少ない試行で新目標を達成したと報告。

3. 技術・手法の肝は?

- 少数の demonstrations から conditional diffusion model を用いて構造化された motion manifold を学習。 - 低次元の condition space 上で feedback-driven optimization を行い、新目標へ動作を適応。 - motion generation と outcome-driven adaptation を分離する設計が肝。

4. どうやって有効だと検証した?

- 複数の実世界 dynamic manipulation タスクで実験。 - 合計10 trial という少ない試行で新目標を達成できることを示す。 - 知覚ノイズやハードウェアの不確実性に対する頑健性も確認。

5. 議論はある?

- 知覚ノイズや hardware uncertainty への頑健性、低 trial での実世界適応の実用性を主張。 - 具体的な限界や失敗ケース、タスク間の一般化範囲については要旨からは不明。

6. 次に読むべき論文は?

- conditional diffusion model を用いた動作生成(例: Diffusion Policy 系)。 - goal-conditioned な実世界ロボット適応や dynamic manipulation に関する関連研究。 - 要旨で参照・比較されている個別研究は明示されていないため、上記は同分野の定番手法を一般名で挙げたもの。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yihang Hu, Pingyue Sheng, Yuyang Liu, Shengjie Wang, Yang Gao

分類: cs.RO

原文アブストラクト

Embodied robots have achieved strong performance in many real-world manipulation tasks, yet agile dynamic manipulation remains challenging due to high sensitivity to motion parameters and sparse outcome-level feedback. Tasks such as shooting a basketball into a hoop require precise control of fast open-loop motions, where small trajectory variations can lead to large outcome deviations, making data-efficient adaptation difficult for existing methods that rely on large-scale interaction, reward engineering, or accurate dynamic modeling. We propose Prior Reinforce (P.R.), a simple and practical framework for goal-conditioned dynamic manipulation. The method first learns a structured motion manifold from a small set of demonstrations using a conditional diffusion model, and then adapts motions toward new goals through feedback-driven optimization in a low-dimensional condition space. By separating motion generation from outcome-driven adaptation, the framework enables efficient refinement using only a small number of real-world trials under noisy perception. Experiments on multiple real-world dynamic manipulation tasks demonstrate that P.R. reliably achieves new goals within as few as ten total trials while remaining robust to perception noise and hardware uncertainty, suggesting a practical approach for low-trial real-world robot adaptation. Project website: https://adap-robotics.github.io/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI