日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.19029

ATG-MoE: 混合エキスパートを用いた自己回帰軌道生成による組立スキル学習

ATG-MoE: Autoregressive trajectory generation with mixture-of-experts for assembly skill learning

シェア:XThreadsFacebookLINEはてブBluesky

RGB-D観測、自然言語指示、ロボットの自己受容感覚を入力とし、混合エキスパートアーキテクチャを用いた自己回帰軌道生成により、単一モデルで複数の組立スキルを学習する手法を提案した。

詳しい要約

1. どんなもの?

- 本論文は、組立スキル学習のための end-to-end autoregressive trajectory generation 手法 ATG-MoE を提案する。 - 多模态入力(RGB-D observations、natural language instructions、robot proprioception)から操作軌道への閉ループ写像を構築する。 - 多模态特徴融合、autoregressive sequence modeling、mixture-of-experts を統合し、単一モデルで複数スキルを学習する。 - 減圧弁組立タスクの8つの代表的な組立スキルで訓練・評価される。

2. 先行研究と比べてどこがすごい?

- 従来のロボットプログラミングは労働集約的で柔軟性に欠け、既存の学習ベース組立手法は位置汎化が弱く、多段階設計が複雑で、マルチスキル統合能力が限られる。 - 視覚知覚と制御を分離したり、スキルごとに個別訓練する従来法と異なり、ATG-MoE は視覚情報を軌道生成に直接組み込み、単一モデル内で効率的なマルチスキル統合を可能にする。 - これにより位置汎化の向上と複数スキルの統合を実現する。

3. 技術・手法の肝は?

- 多模态特徴融合によりシーンとタスクを理解する。 - autoregressive sequence modeling により時間的に一貫した軌道を生成する。 - mixture-of-experts アーキテクチャにより統合的なマルチスキル学習を実現する。 - RGB-D 観測、自然言語指示、ロボット固有感覚を入力とし、操作軌道を出力する end-to-end の閉ループ写像を構築する。

4. どうやって有効だと検証した?

- 減圧弁組立タスクの8つの代表的な組立スキルで訓練・評価した。 - シミュレーションで平均把持成功率 96.3%、平均全体成功率 91.8% を達成し、強い汎化性と効果的なマルチスキル統合を示した。 - 実世界実験により、マルチスキル産業組立における実用性を検証した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究や関連手法は明記されていない。同分野の定番として、imitation learning、behavior cloning、transformer-based policy、mixture-of-experts を用いたロボット学習に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Weihang Huang, Chaoran Zhang, Xiaoxin Deng, Hao Zhou, Zhaobo Xu, Shubo Cui, Long Zeng

分類: cs.RO

原文アブストラクト

Flexible manufacturing requires robot systems that can adapt to constantly changing tasks, objects, and environments. However, traditional robot programming is labor-intensive and inflexible, while existing learning-based assembly methods often suffer from weak positional generalization, complex multi-stage designs, and limited multi-skill integration capability. To address these issues, this paper proposes ATG-MoE, an end-to-end autoregressive trajectory generation method with mixture of experts for assembly skill learning from demonstration. The proposed method establishes a closed-loop mapping from multi-modal inputs, including RGB-D observations, natural language instructions, and robot proprioception to manipulation trajectories. It integrates multi-modal feature fusion for scene and task understanding, autoregressive sequence modeling for temporally coherent trajectory generation, and a mixture-of-experts architecture for unified multi-skill learning. In contrast to conventional methods that separate visual perception and control or train different skills independently, ATG-MoE directly incorporates visual information into trajectory generation and supports efficient multi-skill integration within a single model. We train and evaluate the proposed method on eight representative assembly skills from a pressure-reducing valve assembly task. Experimental results show that ATG-MoE achieves strong overall performance in simulation, with an average grasp success rate of 96.3% and an average overall success rate of 91.8%, while also demonstrating strong generalization and effective multi-skill integration. Real-world experiments further verify its practicality for multi-skill industrial assembly. The project page can be found at https://hwh23.github.io/ATG-MoE

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI