日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2605.29298

MonoDuo: 1本のロボットアームで両腕ポリシーを学習する

MonoDuo: Using One Robot Arm to Learn Bimanual Policies

シェア:XThreadsFacebookLINEはてブBluesky

単腕ロボットのデモと人間の協調動作から、両腕ロボットの操作ポリシーを学習するフレームワークを提案。合成デモにより未見の両腕ロボット構成へのゼロショット転移を実現した。

詳しい要約

1. どんなもの?

- 単腕ロボットと人間の協調によるデータ収集から、双腕ロボットの操作ポリシーを学習するフレームワーク MonoDuo を提案。 - 双腕ロボットやデータセットの不足を、研究現場に広くある単腕ロボットで補う狙い。 - 対象タスクは box lifting, backpack packing, cloth folding, jacket zipping, plate handover の5つ。

2. 先行研究と比べてどこがすごい?

- 人間の双腕動画のみに頼る手法と比較し、単腕ロボットの実キネマティクスに基づく合成デモで学習。 - 未見の双腕ロボット構成への zero-shot 展開を可能にし、成功率は最大70%。 - 対象ロボットのデモ25件のみの few-shot finetuning で、ゼロから学習するより成功率が65-70%向上。

3. 技術・手法の肝は?

- 単腕ロボットを teleoperation し、双腕タスクの片側を人間がもう片側を担当、役割を交換して両側をカバー。 - wrist-mounted と固定カメラの RGB-D 観測を、hand pose estimation, image/point cloud segmentation, inpainting で合成デモに拡張。 - 実ロボットのキネマティクスに基づく合成デモで双腕ポリシーを学習。

4. どうやって有効だと検証した?

- 5タスク(box lifting, backpack packing, cloth folding, jacket zipping, plate handover)で評価。 - 人間の双腕動画のみの手法と比較し、zero-shot 展開で最大70%の成功率。 - 対象ロボットのデモ25件での few-shot finetuning により、ゼロから学習するより65-70%の成功率向上を確認。

5. 議論はある?

- 単腕ロボットデータから双腕ポリシーへの効率的な知識転移が可能であることを示す。 - 限界や失敗要因、一般化範囲についての詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、人間の双腕動画からの学習、hand pose estimation、image/point cloud segmentation、inpainting、few-shot finetuning が挙げられる。 - 同分野の定番として、imitation learning、teleoperation、bimanual manipulation の論文を読むとよい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sandeep Bajamahal, Lawrence Yunliang Chen, Toru Lin, Zehan Ma, Jitendra Malik, Ken Goldberg

分類: cs.RO

原文アブストラクト

Bimanual coordination is essential for many real-world manipulation tasks, yet learning bimanual robot policies is limited by the scarcity of bimanual robots and datasets. Single-arm robots, however, are widely available in research labs. Can we leverage them to train bimanual robot policies? We present MonoDuo, a framework for learning bimanual manipulation policies using single-arm robot demonstrations paired with human collaboration. MonoDuo collects data by teleoperating a single-arm robot to perform one side of a bimanual task while a human performs the other, then swapping roles to cover both sides. RGB-D observations from a wrist-mounted and fixed camera are augmented into synthetic demonstrations for target bimanual robots using state-of-the-art hand pose estimation, image and point cloud segmentation, and inpainting. These synthetic demonstrations, grounded in real robot kinematics, are used to train bimanual policies. We evaluate MonoDuo on five tasks: box lifting, backpack packing, cloth folding, jacket zipping, and plate handover. Compared to approaches relying solely on human bimanual videos, MonoDuo enables zero-shot deployment on unseen bimanual robot configurations, achieving success rates up to 70%. With only 25 target robot demonstrations, few-shot finetuning further boosts success rates by 65-70% over training from scratch, demonstrating MonoDuo's effectiveness in efficiently transferring knowledge from single-arm robot data to bimanual robot policies.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI