日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.26603

手持ち型と遠隔操作型の監督を橋渡しする状態ゲート専門家による接触リッチ操作

Bridging Handheld and Teleoperated Supervision for Contact-Rich Manipulation via State-Gated Experts

シェア:XThreadsFacebookLINEはてブBluesky

手持ち型データ収集と遠隔操作データを組み合わせ、接触を伴う操作タスクを効率的に学習する手法を提案。状態に応じて専門家を切り替える拡散ポリシーにより、少量の遠隔操作デモで性能を向上させる。

詳しい要約

1. どんなもの?

本論文は、contact-rich manipulation における policy 学習のためのデータ収集・学習手法 BRIDGE を提案する。 - handheld data collection(UMI など)は多様な環境で scalable だが、観測された action のみで robot controller が実行する desired action ではない。 - teleoperation は desired action を直接得られるが収集に時間がかかる。 - この trade-off を task phase ごとの action validity の観点から再検討する。 - 提案手法は、handheld data と少数の targeted teleoperated demonstrations を組み合わせる hybrid strategy。 - 具体的には、base handheld policy が失敗する task segment のみ partial teleoperated demonstration を収集する。 - 単純な混合は handheld…

2. 先行研究と比べてどこがすごい?

先行研究との比較は要旨からは不明。 - handheld data collection の代表例として UMI を挙げ、teleoperation との trade-off を再検討する点が特徴。 - 従来は handheld か teleoperation のどちらかを選ぶか、単純に混合する傾向があったと推測されるが、要旨では明示されていない。 - 本手法は、task phase ごとに supervision の有効性が異なるという観点を導入。 - 単純混合が handheld のみより悪化する問題を指摘し、state-gated experts で解決する点が新規。 - contact-sensitive phase で desired action を選択的に使うことで、handheld-only baseline を最大 36.7% 上回る。

3. 技術・手法の肝は?

技術の肝は以下の通り。 - handheld trajectories は tolerant な free-space phase では有効な supervision を提供するが、contact-sensitive phase では dynamic feasibility を欠く。 - 高 stiffness で観測軌道を追従すると大きな不安全な contact force が生じる。 - そこで、base handheld policy が失敗する task segment のみ partial teleoperated demonstration を収集。 - 単純に handheld と teleoperated の phase-specific data を混合すると性能が悪化する。 - この observed と desired の supervision の不一致に対処するため、BRIDGE を提案。 - BRIDGE は mixture of diffusion policy experts であり、現在の robot state に条件づけて specialist t…

4. どうやって有効だと検証した?

3 つの contact-rich manipulation task で検証。 - handheld-only baseline と比較して成功率を最大 36.7% 改善。 - 単純に handheld と teleoperated の phase-specific data を混合する手法より優れることを示す。 - 詳細な実験設定や評価指標は要旨からは不明。

5. 議論はある?

要旨からは不明。 - 限界や失敗事例、一般化可能性についての議論は要旨に記載されていない。 - 単純混合が悪化する理由の詳細な分析も要旨からは不明。

6. 次に読むべき論文は?

要旨で参照されている研究は UMI(Universal Manipulation Interface)。 - 関連手法として teleoperation、diffusion policy、mixture of experts が挙げられる。 - 同分野の定番として behavior cloning、imitation learning、contact-rich manipulation に関する研究が次に読むべき候補。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Vidullan Surendran, Neehar Peri, David Watkins

分類: cs.RO

原文アブストラクト

Handheld data collection systems, such as the Universal Manipulation Interface (UMI), enable scalable data collection across diverse environments but only capture observed actions rather than the desired actions executed by a robot controller. In contrast, teleoperation captures desired actions directly, but is prohibitively time-consuming to collect. We revisit this trade-off through the lens of action validity across task phases. We observe that handheld trajectories provide valid supervision in tolerant, free-space phases, but lack dynamic feasibility in contact-sensitive phases, where tracking observed trajectories at high stiffness produces large, unsafe contact forces. We study the interaction between these two supervision types for contact-rich manipulation and find that training policies that combine handheld data with a small number of targeted teleoperated demonstrations provide an efficient hybrid strategy. Specifically, rather than teleoperating the entire task, we only collect partial teleoperated demonstrations for task segments where base handheld policies fail. However, naively mixing handheld and teleoperated phase-specific data yields worse performance than training on handheld data alone. To address this mismatch between observed and desired supervision, we propose Bi-modal Routing for Imitation Data via Gated Experts (BRIDGE), a mixture of diffusion policy experts that routes between specialist task phase heads conditioned on the current robot state. Notably, our approach enables task-phase specific use of desired actions during contact sensitive segments and improves success rates over handheld-only baselines by up to 36.7% across three contact-rich manipulation tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI