日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ロボット学習arXiv:2606.26428

Play2Perfect:精密組立のための巧みなプレイ事前学習で重要な要素は何か?

Play2Perfect: What Matters in Dexterous Play Pretraining for Precise Assembly?

シェア:XThreadsFacebookLINEはてブBluesky

多指ロボットが精密組立を達成するために、まず多様な物体と目標でタスク非依存のプレイ事前学習を行い、その後精密組立にファインチューニングするRLフレームワークPlay2Perfectを提案し、事前学習の設計選択がサンプル効率と実機転送に与える影響を体系的に調査した。

詳しい要約

1. どんなもの?

- 多指ロボットによる精密組立(precise assembly)を対象とした強化学習(RL)フレームワーク「Play2Perfect」を提案。 - タスク非依存の「play」による事前学習で grasping、in-hand reorientation、pose reaching などの再利用可能な manipulation priors を獲得。 - その後、精密組立に finetuning し、接触が多く高精度な最終相互作用に探索を集中させる。 - 0.5 mm の接触クリアランスでの tight insertion や long-horizon multi-part assembly、screwing を対象とする。

2. 先行研究と比べてどこがすごい?

- 従来は specialized grippers、tool attachments、environment fixtures で問題を構造化していた。 - 本研究は「play」によるタスク非依存事前学習が精密組立に有効だと主張。 - 事前学習した prior は、dense な multi-stage rewards を与えた RL 訓練よりも 33x sample-efficient。 - zero-shot sim-to-real transfer を実現し、0.5 mm の接触クリアランスで 60% 成功、long-horizon multi-part assembly と screwing で 50% 以上成功。

3. 技術・手法の肝は?

- 多様な物体と目標を用いた play によるタスク非依存 RL 事前学習。 - play の目的は grasping、in-hand reorientation、pose reaching などの manipulation priors の獲得。 - finetuning で一般 prior を assembly に適応させ、接触が多く高精度な相互作用に探索を集中。 - play pretraining の設計選択(object diversity、training objective、trajectory diversity、goal precision)を体系的に検討。

4. どうやって有効だと検証した?

- 事前学習 prior と、dense な multi-stage rewards を与えたスクラッチからの RL 訓練を比較し、33x の sample efficiency を確認。 - zero-shot sim-to-real transfer を実証。 - 0.5 mm の接触クリアランスでの tight insertion で 60% 成功。 - long-horizon multi-part assembly と screwing で 50% 以上の成功。

5. 議論はある?

- play pretraining における object diversity、training objective、trajectory diversity、goal precision の設計選択が重要であると議論。 - 精密組立の前に「play」を学ぶことの有効性を主張。 - 限界や失敗事例、計算コスト、実機での詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、imitation learning、reinforcement learning (RL)、sim-to-real transfer、manipulation priors に関する研究が挙げられる。 - 同分野の定番として、contact-rich manipulation や assembly に関する RL 研究を読むとよい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tyler Ga Wei Lum, Kushal Kedia, C. Karen Liu, Jeannette Bohg

分類: cs.RO, cs.AI

原文アブストラクト

Multi-fingered robots promise the speed and dexterity of human hands, yet challenging problems such as precise assembly have remained out of reach. These tasks are contact-rich, making data collection for imitation learning difficult, and sparse-reward, making direct exploration with reinforcement learning (RL) intractable. Consequently, prior work has made progress by structuring the problem with specialized grippers, tool attachments, and environment fixtures. In this work, we argue that before a robot can perfect precise assembly, it must first learn to play. We further ask the question: what factors in the process of learning to play matter for precise assembly? We propose Play2Perfect, an RL framework for task-agnostic pretraining through play on diverse objects and goals, which is then perfected on precise assembly. The goal of play is to acquire reusable manipulation priors, such as grasping, in-hand reorientation and pose reaching. Finetuning then adapts this general prior to assembly, focusing exploration on the final contact-rich, high-precision interactions needed for success. We systematically study key design choices in play pretraining, including object diversity, training objective, trajectory diversity, and goal precision. We show that our prior is 33x more sample-efficient than RL training from scratch, even when provided with dense, multi-stage rewards. We demonstrate zero-shot sim-to-real transfer, achieving 60% success on tight insertions with only 0.5 mm contact clearance, and over 50% success on long-horizon multi-part assembly and screwing.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI