日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2512.09297

実世界の一例から双腕操作の大規模デモンストレーションを合成するフレームワーク

One-Shot Real-World Demonstration Synthesis for Scalable Bimanual Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

実世界の1つのデモンストレーションから、接触の多い双腕操作タスクの多様で実行可能なデモを大量に合成する手法を提案し、新規物体姿勢や形状への汎化、クロスエンボディメント転移を実現した。

詳しい要約

1. どんなもの?

- 実世界の単一デモンストレーションから、接触の多い両腕マニピュレーションの実演データを大量合成するフレームワーク BiDemoSyn を提案 - テレオペレーションの労力と simulation の sim-to-real gap のトレードオフを橋渡しすることを狙う - 数時間で数千の多様かつ物理的に実行可能なデモを生成可能と主張 - 6つの dual-arm タスクで評価し、物体姿勢・形状の新規性への汎化と cross-embodiment 転移を示す

2. 先行研究と比べてどこがすごい?

- teleoperation は物理的に grounded だが労力が膨大、simulation-based synthesis はスケールするが sim-to-real gap を抱えるという従来のトレードオフに対処 - 単一の実世界例から出発するため、反復的な teleoperation や不完全な simulation への依存を避けられる - 生成データで学習した policy が最近の strong baselines を大きく上回ると報告 - few-shot 設定へ自然に拡張でき、物体レベルの多様性と out-of-distribution 汎化を改善しつつデータ効率を維持

3. 技術・手法の肝は?

- タスクを invariant な coordination blocks と、物体依存で可変な adjustments に分解 - vision-guided alignment と軽量な trajectory optimization により、単一実演を適応させて多様なデモを合成 - object-centric な観測と簡略化した 6-DoF end-effector action 表現を採用し、embodiment 固有の dynamics から policy を切り離す - これにより zero-shot cross-embodiment transfer を可能にする設計

4. どうやって有効だと検証した?

- 6つの dual-arm タスクで、BiDemoSyn データにより学習した policy を評価 - 新規の物体姿勢・形状への汎化を検証し、最近の strong baselines と比較して有意に優れると報告 - few-shot ベースの合成への拡張で、物体レベルの多様性と out-of-distribution 汎化の改善を確認 - object-centric 観測と 6-DoF end-effector 表現により、新規ロボットプラットフォームへの zero-shot cross-embodiment transfer を示す

5. 議論はある?

- 効率性と実世界での fidelity のギャップを埋め、物理的 grounding を損なわずにスケーラブルな imitation learning への道を示すと主張 - 単一実演からの合成であるため、元デモの品質やタスク分解の妥当性への依存が議論点になり得るが、要旨からは不明 - 6タスク・特定の embodiment 間での検証であり、より広いタスクや実環境での限界は要旨からは不明 - few-shot 拡張時のデータ効率と多様性のトレードオフの詳細は要旨からは不明

6. 次に読むべき論文は?

- teleoperation による実世界デモ収集に関する研究 - simulation-based demonstration synthesis と sim-to-real transfer に関する研究 - imitation learning の strong baselines(要旨では具体名が示されていないため一般名で挙げる) - cross-embodiment transfer や object-centric policy learning に関する研究 - few-shot demonstration synthesis に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Huayi Zhou, Kui Jia

分類: cs.RO

原文アブストラクト

Learning dexterous bimanual manipulation policies critically depends on large-scale, high-quality demonstrations, yet current paradigms face inherent trade-offs: teleoperation provides physically grounded data but is prohibitively labor-intensive, while simulation-based synthesis scales efficiently but suffers from sim-to-real gaps. We present BiDemoSyn, a framework that synthesizes contact-rich, physically feasible bimanual demonstrations from a single real-world example. The key idea is to decompose tasks into invariant coordination blocks and variable, object-dependent adjustments, then adapt them through vision-guided alignment and lightweight trajectory optimization. This enables the generation of thousands of diverse and feasible demonstrations within several hours, without repeated teleoperation or reliance on imperfect simulation. Across six dual-arm tasks, we show that policies trained on BiDemoSyn data generalize robustly to novel object poses and shapes, significantly outperforming recent strong baselines. Beyond the one-shot setting, BiDemoSyn naturally extends to few-shot-based synthesis, improving object-level diversity and out-of-distribution generalization while maintaining strong data efficiency. Moreover, policies trained on BiDemoSyn data exhibit zero-shot cross-embodiment transfer to new robotic platforms, enabled by object-centric observations and a simplified 6-DoF end-effector action representation that decouples policies from embodiment-specific dynamics. By bridging the gap between efficiency and real-world fidelity, BiDemoSyn provides a scalable path toward practical imitation learning for complex bimanual manipulation without compromising physical grounding.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI