日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

群制御arXiv:2508.14387

DEXTER-LLM: 大規模言語モデルによる未知環境でのマルチロボットシステムの動的で説明可能な協調

DEXTER-LLM: Dynamic and Explainable Coordination of Multi-Robot Systems in Unknown Environments via Large Language Models

シェア:XThreadsFacebookLINEはてブBluesky

未知環境で動作するマルチロボットシステムに対し、大規模言語モデルを活用して動的なタスク分解・割り当て・再計画をオンラインで行い、説明可能性も確保するフレームワークを提案した。

詳しい要約

1. どんなもの?

- 未知のオープン環境で複数ロボットをオンライン協調させるフレームワーク DEXTER-LLM を提案する研究。 - 運用中に検出される意味的特徴が新たなタスクを動的に発生させる状況を扱う。 - 自然言語または LTL で与えられたタスクの部分順序を解釈し、LLM によるサブタスク生成、探索ベースの割当・スケジューリング、動的適応と human-in-the-loop 検証を統合する。 - LLM の open-world reasoning と model-based assignment の最適性を組み合わせる点を狙う。

2. 先行研究と比べてどこがすごい?

- 既存の LLM ベース scene reasoning/planning は主に既知環境での one-shot・end-to-end 解法に集中していると整理。 - それらはオンライン運用の動的適応性と planning 過程の explainability を欠くと指摘。 - 本研究は未知環境での動的タスク計画に焦点を当て、オンライン適応性と説明可能性を同時に扱う点を差分として主張。 - 実験では全シナリオで 100% 成功率、平均 160 タスク・480 サブタスク(baselines の 3 倍)、適応時の LLM クエリ 62% 削減、compound tasks で 2 倍の plan quality を報告。

3. 技術・手法の肝は?

- 4 モジュール構成。 - (i) mission comprehension module: 自然言語または LTL で指定されたタスクの partial ordering を解く。 - (ii) online subtask generator: LLM ベースで、multi-stage reasoning によりタスク分解の精度と explainability を向上。 - (iii) optimal subtask assigner and scheduler: 探索ベース最適化でサブタスクをロボットへ割当。 - (iv) dynamic adaptation and human-in-the-loop verification module: サブタスクと割当の両方に対し multi-rate・event-based 更新を行い、オンライン検出の新特徴・新タスクに対応。

4. どうやって有効だと検証した?

- 実験的評価を実施し、全シナリオで 100% の成功率を報告。 - 平均 160 タスク・480 サブタスクを完了し、これは baselines の 3 倍。 - 適応中の LLM へのクエリが 62% 少ないことを報告。 - compound tasks において plan quality が 2 倍高いことを報告。 - 具体的な環境設定・baselines の詳細・指標定義は要旨からは不明。

5. 議論はある?

- 要旨では LLM の open-world reasoning と model-based assignment の最適性を組み合わせることで、オンライン適応性と explainability の課題に同時に対処できると主張。 - multi-rate・event-based 更新と human-in-the-loop verification により、新規特徴・新規タスクへの対応を図る。 - 限界・失敗事例・計算コスト・スケーラビリティ・人手検証の負荷などに関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で明示的に参照・比較されている個別研究名は記載なし。 - 関連手法として、LLM ベースの scene reasoning/planning、one-shot・end-to-end の LLM planning、linear temporal logic (LTL) に基づくタスク仕様、探索ベースの task assignment/scheduling、human-in-the-loop verification を挙げる。 - 同分野の定番として multi-robot task allocation (MRTA) や model-based planning の文献を次に読む候補とする。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuxiao Zhu, Junfeng Chen, Xintong Zhang, Meng Guo, Zhongkui Li

分類: cs.RO

原文アブストラクト

Online coordination of multi-robot systems in open and unknown environments faces significant challenges, particularly when semantic features detected during operation dynamically trigger new tasks. Recent large language model (LLMs)-based approaches for scene reasoning and planning primarily focus on one-shot, end-to-end solutions in known environments, lacking both dynamic adaptation capabilities for online operation and explainability in the processes of planning. To address these issues, a novel framework (DEXTER-LLM) for dynamic task planning in unknown environments, integrates four modules: (i) a mission comprehension module that resolves partial ordering of tasks specified by natural languages or linear temporal logic formulas (LTL); (ii) an online subtask generator based on LLMs that improves the accuracy and explainability of task decomposition via multi-stage reasoning; (iii) an optimal subtask assigner and scheduler that allocates subtasks to robots via search-based optimization; and (iv) a dynamic adaptation and human-in-the-loop verification module that implements multi-rate, event-based updates for both subtasks and their assignments, to cope with new features and tasks detected online. The framework effectively combines LLMs' open-world reasoning capabilities with the optimality of model-based assignment methods, simultaneously addressing the critical issue of online adaptability and explainability. Experimental evaluations demonstrate exceptional performances, with 100% success rates across all scenarios, 160 tasks and 480 subtasks completed on average (3 times the baselines), 62% less queries to LLMs during adaptation, and superior plan quality (2 times higher) for compound tasks. Project page at https://tcxm.github.io/DEXTER-LLM/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI