日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2611.20202

DAPPT: 手続き的軌道からドメイン認識方策を学習するシミュレーション・実機転移フレームワーク

DAPPT: Domain-Aware Policies from Procedural Trajectories for Sim-to-Real Dexterous Tool Use

シェア:XThreadsFacebookLINEはてブBluesky

非剛体材料のシミュレーションを避けつつ、ドメインパラメータでパラメータ化された手続き的軌道を追従する方策を学習し、実機にゼロショット転移する器用な道具操作フレームワークを提案した。

詳しい要約

1. どんなもの?

- 変形物・粒子を含む道具使用のdexterous manipulationを対象としたsim-to-realフレームワークDAPPTの提案 - 非剛体材料をシミュレートせずに、sand scoopingやplay-dough rod-rollingなどのend-to-end技能を獲得 - procedural trajectoriesをdomain parametersでパラメータ化して追従するdomain-aware RL policyを学習し、end-to-endのdomain-aware sensorimotor policyへdistill - 6タスク(sand scooping, play-dough rod-rolling, sand scraping, mouse-wheel scrolling, dispenser pressing, spray triggering)で評価

2. 先行研究と比べてどこがすごい?

- 従来のsim-to-real RLはaccurate rigid-body simulationが可能なタスクに限られていた - deformableやparticlesを含む技能ではシミュレーション速度が大規模RL学習に不向きという制約があった - DAPPTは非剛体材料をシミュレートせずに済む点が異なる - 明示的なdomain representationにより下流タスク性能を最大化するdomain parametersを高速選択できる点が特徴 - 具体的な先行研究名との比較は要旨からは不明

3. 技術・手法の肝は?

- domain parametersでパラメータ化されたprocedural trajectoriesを追従するdomain-aware RL policyを学習 - そのpolicyをend-to-endのdomain-aware sensorimotor policyへdistill - 非剛体材料のシミュレーションを回避する設計 - 明示的なdomain representationを活用し、下流タスク性能を最大化するdomain parametersを高速に選択 - 詳細なネットワーク構成や学習アルゴリズムは要旨からは不明

4. どうやって有効だと検証した?

- 6つのdexterous manipulationタスク(sand scooping, play-dough rod-rolling, sand scraping, mouse-wheel scrolling, dispenser pressing, spray triggering)でend-to-end評価 - 最良のdomain parameterによりタスク指標で1.5-3.8xを達成 - 実世界へzero-shot transferできることを確認 - 具体的なベースラインや被験者数などは要旨からは不明

5. 議論はある?

- 非剛体材料をシミュレートしないアプローチの妥当性や限界についての議論は要旨からは不明 - domain parameters選択の一般性やスケーラビリティに関する議論は要旨からは不明 - zero-shot transferの失敗事例やロバスト性の議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な先行研究は明示されていない - 関連手法としてsim-to-real RL、domain randomization、policy distillation、procedural trajectory generation、dexterous manipulationの定番研究を次に読む候補として挙げる - 非剛体材料を扱うsim-to-real研究やdeformable/particle manipulationの文献も関連候補

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Beining Han, Jia Deng

分類: cs.RO

原文アブストラクト

Sim-to-real RL has achieved impressive results in dexterous manipulation but remains limited to tasks with accurate rigid-body simulation. However, these methods cannot be applied to skills that involve deformable and particles, with which the simulation speed will become too slow for large-scale RL learning. We present DAPPT, a sim-to-real framework for end-to-end dexterous tool-use manipulation skills, e.g., sand scooping, play-dough rod-rolling, without simulating non-rigid materials. Our method learns a domain-aware RL policy by tracking procedural trajectories parameterized by domain parameters, and distills it into an end-to-end domain-aware sensorimotor policy. Furthermore, explicit domain represen-tation enables fast selection of domain parameters that can maximize downstream task performance. We evaluate DAPPT end-to-end on six dexterous manipulation tasks, including sand scooping, play-dough rod-rolling, sand scraping, mouse-wheel scrolling, dispenser pressing, and spray triggering. Our method achieves 1.5-3.8x in task metrics through the best domain parameter and transfers zero-shot to the real world.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI