日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

タスク・動作計画arXiv:2510.25548

VLM推論によるタスク・動作計画の制約生成

Using VLM Reasoning to Constrain Task and Motion Planning

シェア:XThreadsFacebookLINEはてブBluesky

大規模視覚言語モデルの常識的な空間推論を活用し、タスク計画の下向き詳細化の問題を事前に特定して制約を抽出することで、動作計画の失敗を減らし計画時間を大幅に短縮する手法VIZ-COASTを提案。

詳しい要約

1. どんなもの?

- TAMP(task and motion planning)における downward refinement 失敗を事前に回避する手法 VIZ-COAST の提案。 - 大規模 pretrained Vision-Language Model(VLM)の常識的な空間推論を利用し、画像とドメイン記述から制約を抽出する。 - 抽出した制約で task-level plan を絞り込み、motion planning での失敗を減らす。

2. 先行研究と比べてどこがすごい?

- 先行研究は refinement 失敗が起きてから制約を追加するため、実行不可能な枝に多大な探索コストを費やしていた。 - VIZ-COAST は VLM の常識的空間推論で downward refinement の問題を a priori に特定し、planning 中の失敗修正を不要にする点が新しい。 - 結果として planning time を大幅に削減し、場合によっては refinement 失敗自体を排除できる。

3. 技術・手法の肝は?

- 大規模 pretrained Vision-Language Model の常識的空間推論を利用する。 - 画像とドメイン記述から、downward refinement に関わる問題を抽出し制約として符号化する。 - その制約を task-level planning に課すことで、実行不可能な task plan を事前に枝刈りする。 - 詳細なアルゴリズムやプロンプト設計は要旨からは不明。

4. どうやって有効だと検証した?

- 3つの challenging な TAMP domains で実験。 - 画像とドメイン記述から妥当な制約を抽出できることを示す。 - planning time の大幅削減、場合により downward refinement 失敗の完全排除を確認。 - 広いドメインの多様なインスタンスへ汎化することを示す。

5. 議論はある?

- VLM 由来の制約の妥当性・信頼性や、誤った制約による plan の過剰な枝刈りリスクは要旨からは不明。 - 3 domains 以外への汎化限界や、VLM 依存性についての議論は要旨からは不明。 - 定量的な改善幅や比較対象の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照されている先行研究は明示されていない。 - 関連手法として、refinement 失敗を制約として符号化する prior works(TAMP の constraint-based pruning 研究)を挙げる。 - 背景として TAMP の downward refinement / refinement feasibility に関する研究、および VLM の spatial reasoning 研究を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Muyang Yan, Miras Mengdibayev, Ardon Floros, Weihang Guo, Lydia E. Kavraki, Zachary Kingston

分類: cs.RO

原文アブストラクト

In task and motion planning, high-level task planning is done over an abstraction of the world to enable efficient search in long-horizon robotics problems. However, the feasibility of these task-level plans relies on the downward refinability of the abstraction into continuous motion. When a domain's refinability is poor, task-level plans that appear valid may ultimately fail during motion planning, requiring replanning and resulting in slower overall performance. Prior works mitigate this by encoding refinement issues as constraints to prune infeasible task plans. However, these approaches only add constraints upon refinement failure, expending significant search effort on infeasible branches. We propose VIZ-COAST, a method of leveraging the common-sense spatial reasoning of large pretrained Vision-Language Models to identify issues with downward refinement a priori, bypassing the need to fix these failures during planning. Experiments on three challenging TAMP domains show that our approach is able to extract plausible constraints from images and domain descriptions, drastically reducing planning times and, in some cases, eliminating downward refinement failures altogether, generalizing to a diverse range of instances from the broader domain.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI