日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2506.09990

Chain-of-Action: ロボットマニピュレーションのための軌道自己回帰モデリング

Chain-of-Action: Trajectory Autoregressive Modeling for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

目標から逆算して行動系列を自己回帰的に生成する視覚運動ポリシーを提案し、RLBenchと実機タスクで最先端性能を達成した。

詳しい要約

1. どんなもの?

- 視覚運動方策(visuo-motor policy)の新パラダイム「Chain-of-Action (CoA)」を提案する研究。 - Trajectory Autoregressive Modeling に基づき、次ステップの行動を前向きに予測するのではなく、タスク固有のゴールから明示的な後向き推論で軌道全体を生成する。 - 行動レベルの Chain-of-Thought (CoT) を単一の自己回帰構造で統合する。 - 最初のトークンがゴールを符号化する安定した keyframe action に対応し、以降の action token を自己回帰的に生成する。

2. 先行研究と比べてどこがすごい?

- 従来手法は next step action(s) を前向きに予測するのに対し、CoA はゴールから後向きに推論して軌道全体を生成する点が異なる。 - 後向き推論により global-to-local 構造を強制し、各局所行動が最終ゴールに強く制約される。 - 空間汎化能力が強く、かつ visuo-motor policy の柔軟性と簡潔さを保つ。 - 60 の RLBench タスクと 8 の実世界マニピュレーションタスクで state-of-the-art 性能を達成したと報告。

3. 技術・手法の肝は?

- 単一の自己回帰構造で行動レベルの CoT を実現する。 - 最初のトークンはタスク固有ゴールを符号化する安定した keyframe action。 - 以降の action token は初期 keyframe と既予測行動に条件付けられて自己回帰生成される。 - 実現のため 4 つの補完的設計を導入: - continuous action token representation - dynamic stopping による可変長軌道生成 - reverse temporal ensemble - multi-token prediction による action chunk modeling と global structure の両立

4. どうやって有効だと検証した?

- 60 の RLBench タスクと 8 の実世界マニピュレーションタスクで評価。 - これらのベンチマークで state-of-the-art 性能を達成したと報告。 - 空間汎化能力の強さも観察されたと述べられている。 - 具体的な比較手法や指標の詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 後向き推論と global-to-local 構造の利点、空間汎化、柔軟性・簡潔さの両立が主張されている。 - 限界や失敗事例、計算コスト、dynamic stopping や reverse temporal ensemble の挙動に関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な先行研究は明示されていない。 - 関連手法として action chunking(action chunk modeling)、temporal ensemble、Chain-of-Thought (CoT)、自己回帰型 visuo-motor policy 関連の研究を挙げる。 - ベンチマークとして RLBench 関連の研究も次に読む候補となる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenbo Zhang, Tianrun Hu, Hanbo Zhang, Yanyuan Qiao, Yuchu Qin, Yang Li, Jiajun Liu, Tao Kong, Lingqiao Liu, Xiao Ma

分類: cs.RO, cs.CV, cs.LG

原文アブストラクト

We present Chain-of-Action (CoA), a novel visuo-motor policy paradigm built upon Trajectory Autoregressive Modeling. Unlike conventional approaches that predict next step action(s) forward, CoA generates an entire trajectory by explicit backward reasoning with task-specific goals through an action-level Chain-of-Thought (CoT) process. This process is unified within a single autoregressive structure: (1) the first token corresponds to a stable keyframe action that encodes the task-specific goals; and (2) subsequent action tokens are generated autoregressively, conditioned on the initial keyframe and previously predicted actions. This backward action reasoning enforces a global-to-local structure, allowing each local action to be tightly constrained by the final goal. To further realize the action reasoning structure, CoA incorporates four complementary designs: continuous action token representation; dynamic stopping for variable-length trajectory generation; reverse temporal ensemble; and multi-token prediction to balance action chunk modeling with global structure. As a result, CoA gives strong spatial generalization capabilities while preserving the flexibility and simplicity of a visuo-motor policy. Empirically, we observe CoA achieves the state-of-the-art performance across 60 RLBench tasks and 8 real-world manipulation tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI