日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

群制御arXiv:2511.22354

異種ロボットチームのためのLLMベース汎用階層型タスク計画・実行とイベント駆動型再計画

LLM-Based Generalizable Hierarchical Task Planning and Execution for Heterogeneous Robot Teams with Event-Driven Replanning

シェア:XThreadsFacebookLINEはてブBluesky

LLMを用いて自然言語ゴールから異種ロボットチームのタスクを階層的に計画・実行し、イベント駆動で再計画するCoMuRoSを提案。実機・シミュレーションで協調搬送や障害復旧、人間との協力を実証した。

詳しい要約

1. どんなもの?

- 本論文は CoMuRoS (Collaborative Multi-Robot System) を提案する - 異種ロボットチーム向けの汎用可能な階層型アーキテクチャ - 集中型 deliberation と分散型 execution を統合 - event-driven replanning をサポート - 構成要素 - Task Manager LLM: 自然言語ゴールを解釈し、タスク分類・サブタスク割当を実施 - 各ロボットの local LLM: primitive skills (ROS2 nodes, policies) から実行可能な Python code を生成 - onboard perception (VLMs/image processing): イベントを継続監視し、タスク関連/無関連に分類 - 失敗やユーザ意図変更時に replanning を発火し、支援・再開・人間への支援要請が可能

2. 先行研究と比べてどこがすごい?

- 先行の LLM-based システムと比較し、CoMuRoS は実機ロボット上での runtime, event-driven replanning を独自に実証 - 集中 deliberation と分散 execution を階層的に統合し、異種ロボットチームへ汎用化 - 静的なルールに加え動的コンテキスト (task, history, robot/task status, events) を用いたサブタスク割当 - 実機でのロバスト・柔軟な multi-robot および human-robot collaboration を提示 - 具体的な先行研究名の比較は要旨からは不明

3. 技術・手法の肝は?

- 階層型アーキテクチャ - 上位: Task Manager LLM が自然言語ゴールを解釈し、タスク分類とサブタスク割当を実施 - 割当は static rules と dynamic contexts (task, history, robot and task status, events) を併用 - 下位: 各ロボットの local LLM が primitive skills (ROS2 nodes, policies) を組み合わせて実行可能な Python code を生成 - 知覚とイベント処理 - onboard perception (VLMs/image processing) がイベントを継続監視 - イベントをタスク関連/無関連に分類し、無関連な妨害をフィルタ - replanning トリガ - タスク失敗やユーザ意図変更で発火 - チームメイト支援、タスク再開、人間への支援要請を可能に

4. どうやって有効だと検証した?

- ハードウェア研究 - 破壊的イベントからの自律回復、無関連妨害のフィルタ、緊密に協調した搬送を実証 - 創発的な human-robot cooperation を確認 - 成功率: multirobot collaborative object recovery 9/10、coordinated transport 8/8、human-assisted recovery 5/5 - シミュレーション研究 - intention-aware replanning を提示 - テキストベンチマーク - 22 scenarios (各3タスク、約20 robots) を整備 - task allocation, classification, IoU, executability, correctness を評価 - 複数 LLM で高平均スコア (correctness 最大 0.91) - 別の replanning set (5 scenarios) で correctness 1.0

5. 議論はある?

- 実機での runtime, event-driven replanning を実証した点を強調 - ロバストで柔軟な multi-robot および human-robot collaboration を実現 - 限界や失敗事例の詳細な議論は要旨からは不明 - ベンチマークはテキスト中心であり、実機評価の規模・多様性に関する議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な先行 LLM-based システム名は要旨からは不明 - 関連手法として以下が挙げられる - LLM-based task planning and allocation - hierarchical task planning - event-driven replanning - VLM-based event classification - ROS2 nodes と policies を primitive skills とする code generation - 同分野の定番として、LLM-based multi-robot task planning および human-robot collaboration に関する研究を次に読むべき

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Suraj Borate, Bhavish Rai B, Vipul Pardeshi, Madhu Vadali

分類: cs.RO

原文アブストラクト

This paper introduces CoMuRoS (Collaborative Multi-Robot System), a generalizable hierarchical architecture for heterogeneous robot teams that unifies centralized deliberation with decentralized execution, and supports event-driven replanning. A Task Manager LLM interprets natural-language goals, classifies tasks, and allocates subtasks using static rules plus dynamic contexts (task, history, robot and task status, and events).Each robot runs a local LLM that composes executable Python code from primitive skills (ROS2 nodes, policies), while onboard perception (VLMs/image processing) continuously monitors events and classifies them into relevant or irrelevant to the task. Task failures or user intent changes trigger replanning, allowing robots to assist teammates, resume tasks, or request human help. Hardware studies demonstrate autonomous recovery from disruptive events, filtering of irrelevant distractions, and tightly coordinated transport with emergent human-robot cooperation (e.g., multirobot collaborative object recovery success rate: 9/10, coordinated transport: 8/8, human-assisted recovery: 5/5).Simulation studies show intention-aware replanning. A curated textual benchmark spanning 22 scenarios (3 tasks each, around 20 robots) evaluates task allocation, classification, IoU, executability, and correctness, with high average scores (e.g., correctness up to 0.91) across multiple LLMs, a separate replanning set (5 scenarios) achieves 1.0 correctness. Compared with prior LLM-based systems, CoMuRoS uniquely demonstrates runtime, event-driven replanning on physical robots, delivering robust, flexible multi-robot and human-robot collaboration.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI