日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.14542

VRテレオペレーションと模倣学習による多タスク両腕テーブルサービス操作の制御

Taming VR Teleoperation and Learning from Demonstration for Multi-Task Bimanual Table Service Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ICRA 2025のWBCDコンペティションのテーブルサービストラックで優勝したソリューションを報告し、VRテレオペレーションと模倣学習を組み合わせて、テーブルクロスの展開、ピザの配置、食品容器の開閉などのタスクを高効率かつ高信頼で実行した。

詳しい要約

1. どんなもの?

- ICRA 2025 の What Bimanuals Can Do (WBCD) competition における Table Service Track の優勝ソリューションを報告する技術報告 - 対象タスクは、テーブルクロスを広げる deformable-object manipulation、pizza を容器に入れる pick-and-place、food container の lid を開閉する作業 - 速度・精度・信頼性の厳しい要件の下で、VR-based teleoperation と Learning from Demonstrations (LfD) を組み合わせる - 多くの subtask は高忠実度の遠隔 teleoperation で実行し、pizza placement のみ ACT-based policy で自律化

2. 先行研究と比べてどこがすごい?

- 完全自律を目指さず、teleoperation と LfD をタスク特性に応じて使い分ける点が特徴 - 特に deformable-object manipulation や lid 開閉のような難タスクを teleoperation で担い、pick-and-place を学習 policy に委ねる構成 - 100 件の in-person teleoperated demonstrations と randomized initial configurations で ACT-based policy を訓練 - 採点規則・タスク特性・現技術水準を踏まえた統合設計により、競技で第1位を獲得 - 個々の手法の新規性や既存研究との定量的比較は要旨からは不明

3. 技術・手法の肝は?

- VR-based teleoperation による高忠実度の遠隔操作を主要な実行手段とする - pizza placement には ACT-based policy を採用し、100 件の in-person teleoperated demonstrations から学習 - 学習時は randomized initial configurations を導入 - subtask ごとに teleoperation と自律 policy のどちらで実行するかを、採点規則・タスク特性・技術的実現性に基づいて選択 - 全体として robustness と autonomy のバランスを取る統合システム

4. どうやって有効だと検証した?

- ICRA 2025 の What Bimanuals Can Do (WBCD) competition の Table Service Track に参加して評価 - テーブルクロス展開、pizza の容器投入、food container の lid 開閉という一連のタスクを実行 - 最終的に競技で第1位を獲得したことが有効性の根拠 - 個別タスクの成功率や定量指標、 ablation の詳細は要旨からは不明

5. 議論はある?

- teleoperation 依存の部分が残り、完全自律化には課題が残る構成と読み取れる - 学習 policy は pizza placement に限定され、他タスクへの LfD 適用範囲は要旨からは不明 - randomized initial configurations の範囲や汎化性能の議論は要旨からは不明 - 競技の採点規則を踏まえた設計であり、実運用環境への一般化については要旨からは不明

6. 次に読むべき論文は?

- ACT (Action Chunking with Transformers) の原論文 - Learning from Demonstrations (LfD) および imitation learning の関連研究 - VR-based teleoperation を用いた bimanual manipulation の研究 - deformable-object manipulation に関する研究 - ICRA 2025 What Bimanuals Can Do (WBCD) competition の他トラックの報告

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Weize Li, Zhengxiao Han, Lixin Xu, Xiangyu Chen, Harrison Bounds, Chenrui Zhang, Yifan Xu

分類: cs.RO

原文アブストラクト

This technical report presents the champion solution of the Table Service Track in the ICRA 2025 What Bimanuals Can Do (WBCD) competition. We tackled a series of demanding tasks under strict requirements for speed, precision, and reliability: unfolding a tablecloth (deformable-object manipulation), placing a pizza into the container (pick-and-place), and opening and closing a food container with the lid. Our solution combines VR-based teleoperation and Learning from Demonstrations (LfD) to balance robustness and autonomy. Most subtasks were executed through high-fidelity remote teleoperation, while the pizza placement was handled by an ACT-based policy trained from 100 in-person teleoperated demonstrations with randomized initial configurations. By carefully integrating scoring rules, task characteristics, and current technical capabilities, our approach achieved both high efficiency and reliability, ultimately securing the first place in the competition.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI