日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2512.03444

PerFACT: LLMによるデータセット合成と融合アクションチャンキングTransformerを用いた動作ポリシー

PerFACT: Motion Policy with LLM-Powered Dataset Synthesis and Fusion Action-Chunking Transformers

シェア:XThreadsFacebookLINEはてブBluesky

LLMで多様な作業空間を生成して大規模な計画データを収集し、融合アクションチャンキングTransformerで汎用的なニューラル動作計画器を学習させる手法を提案した。

詳しい要約

1. どんなもの?

- ロボットマニピュレータの motion planning を深層学習で行う研究 - 大規模データセット合成と汎用 neural motion planner を組み合わせた枠組み PerFACT を提案 - 構成要素は LLM を用いた workspace 生成手法 MotionGeneralizer と、Fusion Action-Chunking Transformer を用いる MpiNetsFusion - MotionGeneralizer で 3.5M trajectories を収集し、MpiNetsFusion の学習・評価に使用

2. 先行研究と比べてどこがすごい?

- 従来の state-of-the-art neural motion planners は手動生成 workspace の小規模データで学習され、out-of-distribution への汎化が限定的 - 従来手法は monolithic なネットワーク構造で計画に重要な情報の符号化が困難 - 本研究は LLM で多様かつ意味的に実現可能な workspace を大規模生成し、3.5M trajectories を収集 - fusion action-chunking transformer により複数 feature modality を扱い計画信号を符号化 - 評価タスクで数倍高速な計画が可能と報告

3. 技術・手法の肝は?

- MotionGeneralizer: LLM を活用し、多様で意味的に feasible な workspace を生成して大規模 planning データ収集を可能にする - MpiNetsFusion: fusion action-chunking transformer を用いる generalist neural motion planner - action-chunking により計画信号を効率的に符号化 - 複数の feature modality に attention する構造で計画に必要な情報を統合 - 詳細なアーキテクチャや学習手順は要旨からは不明

4. どうやって有効だと検証した?

- MotionGeneralizer により 3.5M trajectories を収集し、MpiNetsFusion の学習と評価に使用 - state-of-the-art planners と比較評価 - 評価タスクにおいて MpiNetsFusion が数倍高速に計画できることを示した - 具体的なベースライン名、タスク設定、指標の詳細は要旨からは不明

5. 議論はある?

- 大規模合成データによる汎化性能向上の可能性が示唆される - LLM 生成 workspace の意味的妥当性や分布の偏りについては要旨からは不明 - out-of-distribution 性能の定量的評価の詳細は要旨からは不明 - 計算コストや実機適用性に関する議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている個別研究名は記載なし - 関連手法として neural motion planners、action-chunking transformer、generalist robot policy 系の研究を挙げる - LLM を用いたデータ合成・workspace 生成に関する研究 - motion planning 用大規模データセット構築に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Davood Soleymanzadeh, Xiao Liang, Minghui Zheng

分類: cs.RO, cs.SY, eess.SY

原文アブストラクト

Deep learning methods have significantly enhanced motion planning for robotic manipulators by leveraging prior experiences within planning datasets. However, state-of-the-art neural motion planners are primarily trained on small datasets collected in manually generated workspaces, limiting their generalizability to out-of-distribution scenarios. Additionally, these planners often rely on monolithic network architectures that struggle to encode critical planning information. To address these challenges, we introduce Motion Policy with Dataset Synthesis powered by large language models (LLMs) and Fusion Action-Chunking Transformers (PerFACT), which incorporates two key components. Firstly, a novel LLM-powered workspace generation method, MotionGeneralizer, enables large-scale planning data collection by producing a diverse set of semantically feasible workspaces. Secondly, we introduce Fusion Motion Policy Networks (MpiNetsFusion), a generalist neural motion planner that uses a fusion action-chunking transformer to better encode planning signals and attend to multiple feature modalities. Leveraging MotionGeneralizer, we collect 3.5M trajectories to train and evaluate MpiNetsFusion against state-of-the-art planners, which shows that the proposed MpiNetsFusion can plan several times faster on the evaluated tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI