日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

操作計画arXiv:2606.30613

アンカー型ロボットキーポイントによる逐次プランニング

Sequential Planning via Anchored Robotic Keypoints

シェア:XThreadsFacebookLINEはてブBluesky

訓練不要のニューロシンボリック操作システムSPARKを提案し、LIBERO-PROベンチマークで既存手法を大幅に上回る成功率を達成した。

詳しい要約

1. どんなもの?

- 訓練不要の neurosymbolic な manipulation システム SPARK を提案 - Sequential Planning via Anchored Robotic Keypoints の略 - 6つの LIBERO-PRO position & task cell で 43.7% を達成 - CaP-Agent0 や VLA baseline を2倍以上上回る - 単一の Gemini call で typed behavior tree (BT) として計画を構成 - 各 primitive は motion, grasping, depth geometry の低レベル制御を内包 - 3つのロボット family (UR10e, Franka FR3, bimanual Franka) で動作

2. 先行研究と比べてどこがすごい?

- CaP-Agent0 は毎ターン LLM を再クエリし 18.2% - 失敗時に最初からやり直すため小さな policy 失敗に高コスト - SPARK は 43.7% で CaP-Agent0 と VLA baseline を2倍以上上回る - 計算予算を perception に集中させる点が異なる - 失敗 primitive を新たな LLM call なしで再試行する recovery loop を持つ - 訓練不要で detector, planner, controller を独立に差し替え可能

3. 技術・手法の肝は?

- 単一 Gemini call で typed behavior tree (BT) を構成 - primitive は motion, grasping, depth geometry の低レベル制御を内包 - 残りの予算を perception に配分 - 2回目の Gemini call が物体ごとに3つの代替 text prompt を提案 - SAM3 が各 prompt を評価し最も確信度の高い prompt→label ペアを保持 - recovery loop が失敗 primitive を新規検出物体に対して再試行 - 各 primitive の checkable post-condition が失敗を module や kinematic limit に追跡

4. どうやって有効だと検証した?

- 6つの LIBERO-PRO position & task cell で 43.7% を達成 - 代替 prompt が spatial suite で +27.7 点、object suite で +10.0 点 - recovery loop が全体で +5.0 点 - 3つのロボット family (UR10e, Franka FR3, bimanual Franka) で検証 - 9つの unique task を各20 trial で実行し平均 68% - 各 trial は verified, labeled trajectory を記録

5. 議論はある?

- perception が position と task 変化下で最も失敗する層 - そのため SPARK は計算を perception に費やす - 訓練不要の planner が VLA を上回るため teleoperation なしでデータ供給可能 - detector, planner, controller は typed plan の背後で独立に差し替え可能 - 各 primitive の post-condition で失敗を module や kinematic limit に追跡 - 限界や失敗事例の詳細は要旨からは不明

6. 次に読むべき論文は?

- CaP-Agent0 (multi-turn code-generation agent) - Vision-Language-Action (VLA) baselines - LIBERO-PRO benchmark - Gemini - SAM3 - typed behavior tree (BT) に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Bryce Grant, Aryeh Rothenberg, Logan Senning, Zonghe Chua, Zach Patterson, Peng Wang

分類: cs.RO

原文アブストラクト

We present Sequential Planning via Anchored Robotic Keypoints, SPARK, a training-free neurosymbolic manipulation system that reaches 43.7% on six LIBERO-PRO position \& task cells, more than doubling CaP-Agent0 and Vision-Language-Action (VLA) baselines. CaP-Agent0, a multi-turn code-generation agent, achieves 18.2% by re-querying an LLM at every turn, but its restart-from-scratch solution proves costly against minor policy failures. Perception is the layer that fails most under position and task changes so SPARK spends its computation there. A single Gemini call composes the plan as a typed behavior tree (BT) of composable primitives, each already containing the low-level control (motion, grasping, depth geometry) a code-generation agent would otherwise regenerate on every trial. The rest of the budget goes to perception: a second Gemini call proposes three alternative text prompts per object, SAM3 evaluates each, and we keep the prompt$\to$label pair with the most confident detection and a recovery loop then retries a failed primitive against freshly detected objects, with no new LLM call. The alternative prompts add +27.7 points on the spatial suite and +10.0 on the object suite, with the recovery loop adding +5.0 overall. SPARK runs the same primitives on three robot families (UR10e, Franka FR3, bimanual Franka) across nine unique tasks at twenty trials each, averaging 68%. Since the detector, planner, and controller modules sit behind the typed plan, they swap independently without training, and each primitive's checkable post-condition traces a failure to the corresponding module or a kinematic limit. Every trial logs a verified, labeled trajectory, so a training-free planner that already beats VLAs can supply the data those policies need without teleoperation. Project page: https://cwru-aism.github.io/spark-page/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI