日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

器用操作arXiv:2605.05925

DexSynRefine: 物理的に実現可能な器用なロボット動作のための人間と物体のインタラクション動作の合成と洗練

DexSynRefine: Synthesizing and Refining Human-Object Interaction Motion for Physically Feasible Dexterous Robot Actions

シェア:XThreadsFacebookLINEはてブBluesky

人間と物体のインタラクション動作を構造化された動作事前分布として扱い、タスク空間残差強化学習と接触ダイナミクス適応により物理的に実現可能な器用なロボット動作を生成するフレームワークを提案。実世界成功率を大幅に向上させた。

詳しい要約

1. どんなもの?

本論文は、人間の物体操作(HOI)データをロボットの器用な操作に活用するための枠組み「DexSynRefine」を提案する。HOIデータを実行可能なロボット動作ではなく構造化された運動事前分布として扱い、まずHOI Motion Manifold Flow Primitives (HOI-MMFP)によりタスクと初期物体状態に条件付けられた手-物体軌道を合成し、次にタスク空間残差強化学習で物理的に接地させ、固有感覚履歴から接触力学の文脈を推論して実行を適応させる。5つの器用操作タスクで評価し、実世界成功率を運動学的リターゲティングより50-70ポイント改善した。

2. 先行研究と比べてどこがすごい?

従来の運動学的リターゲティングは、HOI実演が疎で純粋に運動学的であるため、身体性の不一致や接触が豊富な動力学下で信頼性が低い。DexSynRefineはHOIデータを実行可能な動作ではなく構造化された運動事前分布として扱い、HOI-MMFPによる軌道合成、タスク空間残差強化学習による物理的接地、接触力学文脈の推論による適応を組み合わせることで、実世界成功率を50-70ポイント向上させた点が優れている。

3. 技術・手法の肝は?

技術の肝は以下の3点。 - HOI Motion Manifold Flow Primitives (HOI-MMFP): タスクと初期物体状態に条件付けられた手-物体結合運動の運動事前分布であり、手-物体軌道を合成する。 - タスク空間残差強化学習: 合成された軌道を物理的に接地させる。 - 接触力学適応: 固有感覚履歴から欠落した接触力学の文脈を推論し、実行を適応させる。

4. どうやって有効だと検証した?

5つの器用操作タスクで評価。各段階が補完的なボトルネックに対処することを示す。HOI-MMFPは軌道の一貫性と滑らかさを改善し、タスク空間残差はテストした代替手法の中で最も強い接地表現を提供し、接触力学適応は実世界でのロバストな実行を可能にした。全体として実世界成功率を運動学的リターゲティングより50-70ポイント改善した。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。関連手法として、運動学的リターゲティング(kinematic retargeting)、強化学習(タスク空間残差強化学習)、運動事前分布(motion prior)、HOIデータからの学習が挙げられる。同分野の定番として、dexterous manipulation、human-object interaction (HOI)、retargeting、reinforcement learning、motion synthesis に関する論文を読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hyesung Lee, Hyunwoo Jung, Si-Hwan Heo, Sungwook Yang

分類: cs.RO

原文アブストラクト

Learning dexterous manipulation from human-object interaction (HOI) data offers a scalable alternative to robot teleoperation, but HOI demonstrations are typically sparse and purely kinematic, making direct retargeting unreliable under embodiment mismatch and contact-rich dynamics. We present DexSynRefine, a coupled framework that treats HOI data as structured motion priors rather than executable robot actions. DexSynRefine first synthesizes hand-object trajectories conditioned on the task and initial object state using HOI Motion Manifold Flow Primitives (HOI-MMFP), a motion prior for coupled hand-object motion. It then physically grounds them with task-space residual reinforcement learning and adapts execution by inferring missing contact-dynamics context from proprioceptive history. Across five dexterous manipulation tasks, each stage addresses a complementary bottleneck: HOI-MMFP improves trajectory consistency and smoothness, task-space residuals provide the strongest grounding representation among the tested alternatives, and contact-dynamics adaptation enables robust real-world execution. Together, DexSynRefine improves real-world success rates over kinematic retargeting by 50-70~percentage points.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI