日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2611.20557

異種エンドエフェクタ間で双腕操作を可能にするデモ転送フレームワーク

AsymEEF: Bimanual Manipulation with Asymmetric End Effectors

シェア:XThreadsFacebookLINEはてブBluesky

少数のテレオペデータから、2本指・3本指・5本指など異なるエンドエフェクタの組み合わせへデモを転送し、形態非依存の潜在表現で双腕ビジュオモータポリシーを統合学習する手法を提案。

詳しい要約

1. どんなもの?

- AsymEEFは、異なるエンドエフェクタ間で実演データを転用し、双腕操作の統一ポリシー学習を可能にするフレームワーク。 - 2本指・3本指・5本指のエンドエフェクタの異種組み合わせに対し、追加のteleoperationなしで実演を転送する。 - 小規模なsource datasetから、実行可能なcross-end-effector demonstration生成と統一bimanual policy学習を目指す。

2. 先行研究と比べてどこがすごい?

- teleoperated demonstrationsは収集コストが高く、異なるkinematicsやaction spaceのエンドエフェクタ間で再利用されにくい。 - 双腕操作ではエンドエフェクタの組ごとに新規データが必要になり負担が増大する。 - AsymEEFは追加teleoperationなしで異種エンドエフェクタへ実演を転送し、replay successでadapted transfer baselinesを上回る。

3. 技術・手法の肝は?

- Kinematic teacher anchorsが幾何学的supervisionを与え、sparseなreal-world X-Calib anchorsがgrasp実行の不一致を補正する。 - 共有encoderがwrist posesとactuator statesをmorphology-agnostic latent spaceへ写像し、morphology-conditioned decoderがtarget commandsを再構成する。 - 生成trajectoryはreplay filteringによりtask-level executabilityを担保する。 - 同表現は複数ペアで学習する統一bimanual visuomotor policyも支える。

4. どうやって有効だと検証した?

- 4つのsimulatedタスクと6つのreal-worldタスクで評価。 - replay successがadapted transfer baselinesより改善。 - simulationでmean replay-valid expansion gainが16.6倍。 - 実ロボットでのdownstream policy trainingを通じて評価。

5. 議論はある?

- 要旨からは不明。 - 明示されているのは、sparseなX-Calib anchorsによるgrasp実行の補正とreplay filteringの必要性であり、これらが限界や前提条件に関わる可能性を示す。

6. 次に読むべき論文は?

- adapted transfer baselines(個別手法名は要旨からは不明)。 - Kinematic teacher anchorsやX-Calib anchorsに関連する手法。 - bimanual visuomotor policy学習の定番手法(例: imitation learning、visuomotor policy)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaokang Sun, Ningyue Wang, Kunqi Xu, Guangqi Jiang, Jianglong Ye, Yong Wu, Xueyan Zou

分類: cs.RO, cs.AI, cs.CV, cs.LG

原文アブストラクト

Teleoperated demonstrations are costly to collect and rarely reusable across end-effectors with different kinematics and action spaces. This burden grows in bimanual manipulation, where each end-effector pair may require new data. We present AsymEEF, a framework for executable cross-end-effector demonstration generation and unified bimanual policy learning. Given a small source dataset, AsymEEF transfers demonstrations to heterogeneous combinations of two-, three-, and five-fingered end-effectors without additional teleoperation. Kinematic teacher anchors provide geometric supervision, while sparse real-world X-Calib anchors correct discrepancies in grasp execution. A shared encoder maps wrist poses and actuator states to a morphology-agnostic latent space, and a morphology-conditioned decoder reconstructs target commands. Generated trajectories undergo replay filtering for task-level executability. The representation also supports a unified bimanual visuomotor policy trained across multiple pairs. Across four simulated and six real-world tasks, AsymEEF improves replay success over adapted transfer baselines, achieves a mean replay-valid expansion gain of 16.6 times in simulation, and is evaluated through downstream policy training on real robots. Project website: https://asymeef.vercel.app/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI