日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

タスクプランニングarXiv:2506.15828

文脈が鍵!LLMによる目標緩和で実現可能な3Dシーン計画

Context Matters! Relaxing Goals with LLMs for Feasible 3D Scene Planning

シェア:XThreadsFacebookLINEはてブBluesky

LLMと古典的プランニングを組み合わせ、目標が到達不能な場合にLLMが文脈に応じて制約を段階的に緩和し、実現可能な計画へと導くフレームワークを提案した。

詳しい要約

1. どんなもの?

- 実環境・複雑な3D環境で活動するembodied agent向けの計画フレームワーク「ContextMatters」 - LLMとclassical planning(PDDL)を融合し、階層的なgoal relaxationを行う - 3D Scene Graphs上で動作し、目標到達不能時に機能的に等価な目標へ制約を段階的に緩和する - 完全達成が不可能な場合でもcontext-awareな部分達成を可能にする

2. 先行研究と比べてどこがすごい?

- classical planning(PDDL)は構造と保証を持つが、noisy perceptionやpredicate groundingの誤りに弱い - LLMベースplannerはcommonsense reasoningを活かせるが、実行不能・不安全な行動を提案しがち - 両者を組み合わせた最近の研究に対し、本手法はLLMによるsymbol groundingと目標の段階的緩和を統合 - state-of-the-artのLLMs+PDDL baselineに対しSuccess Rateが+52.45%改善

3. 技術・手法の肝は?

- LLMとclassical planningを融合したhierarchical goal relaxationが肝 - LLMがsymbolをsceneにgroundingする役割を担う - 目標がunreachableな場合、LLMが機能的に等価な目標を提案し制約を段階的に緩和 - agentの環境contextに目標を適応させる - 3D Scene Graphs上で動作し、名目上実行不能な多数のタスクを扱い得る計画に変換

4. どうやって有効だと検証した?

- state-of-the-artのLLMs+PDDL baselineとの比較実験でSuccess Rateが+52.45%改善することを示した - 実世界シナリオとしてTIAGo robotにContextMattersをdeployし実行を検証 - 詳細な実験設定・評価指標は要旨からは不明

5. 議論はある?

- 要旨からは不明 - ただしnoisy perceptionやpredicate groundingの誤りへの対処、実行不能・不安全な行動の抑制が動機として示されている - 部分達成の妥当性やgoal relaxationの限界については要旨からは不明

6. 次に読むべき論文は?

- LLMとclassical planning(PDDL)を組み合わせた最近の先行研究(具体的名称は要旨からは不明) - PDDLベースのclassical planning - LLM-based planner - 3D Scene Graphsを用いたembodied planningの関連研究 - TIAGo robotを用いた実機検証の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Emanuele Musumeci, Michele Brienza, Francesco Argenziano, Abdel Hakim Drid, Vincenzo Suriani, Daniele Nardi, Domenico D. Bloisi

分類: cs.RO, cs.AI

原文アブストラクト

Embodied agents need to plan and act reliably in real and complex 3D environments. Classical planning (e.g., PDDL) offers structure and guarantees, but in practice it fails under noisy perception and incorrect predicate grounding. On the other hand, Large Language Models (LLMs)-based planners leverage commonsense reasoning, yet frequently propose actions that are unfeasible or unsafe. Following recent works that combine the two approaches, we introduce ContextMatters, a framework that fuses LLMs and classical planning to perform hierarchical goal relaxation: the LLM helps ground symbols to the scene and, when the target is unreachable, it proposes functionally equivalent goals that progressively relax constraints, adapting the goal to the context of the agent's environment. Operating on 3D Scene Graphs, this mechanism turns many nominally unfeasible tasks into tractable plans and enables context-aware partial achievement when full completion is not achievable. Our experimental results show a +52.45% Success Rate improvement over state-of-the-art LLMs+PDDL baseline, demonstrating the effectiveness of our approach. Moreover, we validate the execution of ContextMatter in a real world scenario by deploying it on a TIAGo robot. Code, dataset, and supplementary materials are available to the community at https://lab-rococo-sapienza.github.io/context-matters/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI