日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

タスクプランニングarXiv:2609.39153

未知環境におけるLTLミッションのための意味検索とミッション実行の並行処理

Concurrent Semantic Search and Mission Execution for LTL Missions in Unknown Environments

シェア:XThreadsFacebookLINEはてブBluesky

未知環境でLTLミッションを遂行するため、VLMによる意味シーングラフとDFA表現をオンライン構築し、タスク駆動型の意味検索とミッション実行を非近視眼的に交互進行させる適応的高レベルプランナを提案。

詳しい要約

1. どんなもの?

- 未知環境でLTLfミッションを解くロボットの高レベル計画手法。 - タスク駆動のsemantic searchとミッション実行をinterleaveし、非近視眼的に両者を進める。 - オンラインで構築するmetric-semantic scene graphとDFAを利用。 - 各計画段階でsemantic searchとミッション進行の両方に価値あるwaypointを選択し、単一の高レベル計画に順序付け、新情報で再計算。

2. 先行研究と比べてどこがすごい?

- 既存のLTLf解法は既知環境を仮定するか、環境探索とミッション実行を分離。 - semantic exploration法は一度に一つのtargetを探し、実行中のミッションを無視。 - 本手法はtask-driven semantic searchとミッション実行をinterleaveし、非近視眼的に両者を進める点が新しい。

3. 技術・手法の肝は?

- オンラインでmetric-semantic scene graphをVLMで構築し、ミッションが参照する物体の位置証拠を提供。 - ミッションをDFAで符号化し、各状態で重要な物体を示す。 - 各計画段階でsemantic searchとミッション進行に最も価値あるwaypointを選択し、残りのミッション段階を考慮してblocking statesを回避。 - 選択したwaypointを単一の高レベル計画に順序付け、新情報到着で再計算。

4. どうやって有効だと検証した?

- photorealistic indoor environmentsで5種類のミッションを評価。 - 比較手法より多くのミッションを完了し、環境被覆が少なく、経路が短く、ミッションの制約を遵守。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- LTLfミッション計画、semantic exploration、Vision Language Model (VLM)を用いたscene graph構築、DFAに基づく計画の関連研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fernando Salanova Gaspar, David Morilla Cabello, Cristian Mahulea Poleuca, Eduardo Montijano Muñoz

分類: cs.RO

原文アブストラクト

Planning complex missions in unknown environments requires robots to reason simultaneously about what they should do and what they still need to discover. Existing approaches for solving LTLf missions typically assume a known environment, or separate the exploration of the environment from the execution of the mission, while semantic exploration methods look for one target at a time and ignore the mission being executed. To fill this gap, our main contribution is an adaptive high-level planning method that interleaves a task-driven semantic search with the execution of the mission, advancing both in a non-myopic manner. Our method leverages two representations built online, a metric-semantic scene graph, built with a Vision Language Model (VLM), that provides the evidence needed to locate the objects the mission refers to, and the deterministic finite automaton (DFA) encoding the mission, that indicates which of them matter at each mission state. At every planning stage, our planner selects the waypoints that are most valuable for both the semantic search and the advancement of the mission, valuing them over the remaining mission stages in order to avoid blocking states. The selected waypoints are then ordered in a single high-level plan, which is recomputed as new information arrives. In photorealistic indoor environments over five mission types, our method completes more missions than the compared approaches while having to cover less of the environment, and it does so with shorter paths and complying with the restrictions imposed by the mission.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI