日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/操作arXiv:2604.13942

Goal2Skill: 適応的計画と内省による長期的操作

Goal2Skill: Long-Horizon Manipulation with Adaptive Planning and Reflection

シェア:XThreadsFacebookLINEはてブBluesky

長期的な操作タスクを高レベルの計画と低レベルの実行に分離した二重システムフレームワークを提案し、記憶と適応的再計画を実現して成功率を大幅に向上させた。

詳しい要約

1. どんなもの?

- 長期的なembodied manipulationを対象としたdual-systemフレームワーク - 高レベルのVLM-based agentic plannerと低レベルのVLA-based visuomotor executorを分離 - plannerは構造的task memoryを維持し、goal decomposition・outcome verification・error-driven correctionを実行 - executorはgeometry-preserving filtered observationsを条件にdiffusion-based action generationでsub-taskを実行 - planningとexecutionのclosed loopによりmemory-aware reasoning・adaptive replanning・online recoveryを実現

2. 先行研究と比べてどこがすごい?

- 既存VLA policiesは限られたobservation windowとend-to-end action predictionに依存 - そのためpartial observability・occlusions・multi-stage dependenciesを伴うlong-horizonかつmemory-dependentタスクで脆い - 提案手法はpersistent memory・adaptive task decomposition・execution failuresからの明示的recoveryを可能にする - RMBenchで32.4%の平均success rateを達成し、最強baselineの9.8%を大幅に上回る

3. 技術・手法の肝は?

- high-level semantic reasoningとlow-level motor executionを明示的に分離 - high-level plannerはVLM-based agentic moduleで、structured task memoryを保持 - goal decomposition・outcome verification・error-driven correctionを担う - low-level executorはVLA-based visuomotor controllerで、diffusion-based action generationを使用 - geometry-preserving filtered observationsを条件として各sub-taskを実行 - 両システムがclosed loopを形成し、memory-aware reasoning・adaptive replanning・robust online recoveryを実現

4. どうやって有効だと検証した?

- 代表的なRMBenchタスクで実験を実施 - 提案フレームワークが代表baselineを大幅に上回り、平均success rate 32.4%を達成 - 最強baselineのsuccess rateは9.8% - ablation studiesによりstructured memoryとclosed-loop recoveryの重要性を確認

5. 議論はある?

- 既存VLA policiesの限界として限られたobservation windowとend-to-end action predictionを指摘 - long-horizon・memory-dependentタスクではpersistent memory・adaptive task decomposition・explicit recoveryが必要と議論 - ablation studiesでstructured memoryとclosed-loop recoveryの重要性を確認 - その他の議論や限界については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: VLA systems、VLM-based agentic module、VLA-based visuomotor controller、diffusion-based action generation、RMBench - 関連手法としてembodied manipulation、vision-language-action policies、long-horizon manipulation、task memory、adaptive planning、reflectionが挙げられる - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhen Liu, Xinyu Ning, Zhe Hu, Xinxin Xie, Weize Li, Zhipeng Tang, Chongyu Wang, Zejun Yang, Hanlin Wang, Yitong Liu, Zhongzhu Pu

分類: cs.RO

原文アブストラクト

Recent vision-language-action (VLA) systems have demonstrated strong capabilities in embodied manipulation. However, most existing VLA policies rely on limited observation windows and end-to-end action prediction, which makes them brittle in long-horizon, memory-dependent tasks with partial observability, occlusions, and multi-stage dependencies. Such tasks require not only precise visuomotor control, but also persistent memory, adaptive task decomposition, and explicit recovery from execution failures. To address these limitations, we propose a dual-system framework for long-horizon embodied manipulation. Our framework explicitly separates high-level semantic reasoning from low-level motor execution. A high-level planner, implemented as a VLM-based agentic module, maintains structured task memory and performs goal decomposition, outcome verification, and error-driven correction. A low-level executor, instantiated as a VLA-based visuomotor controller, carries out each sub-task through diffusion-based action generation conditioned on geometry-preserving filtered observations. Together, the two systems form a closed loop between planning and execution, enabling memory-aware reasoning, adaptive replanning, and robust online recovery. Experiments on representative RMBench tasks show that the proposed framework substantially outperforms representative baselines, achieving a 32.4% average success rate compared with 9.8% for the strongest baseline. Ablation studies further confirm the importance of structured memory and closed-loop recovery for long-horizon manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI