日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マルチエージェント協調arXiv:2602.19304

安全で解釈可能なマルチモーダル経路計画によるマルチエージェント協調

Safe and Interpretable Multimodal Path Planning for Multi-Agent Cooperation

シェア:XThreadsFacebookLINEはてブBluesky

VLMを用いて言語指示を経路編集プログラムに変換し、モデルベース計画で安全性を検証することで、ロボットが他者と協調しながら経路を適応させる手法CaPEを提案。

詳しい要約

1. どんなもの?

- 分散エージェント間の協調において、言語コミュニケーションを活用した安全で解釈可能なマルチモーダル経路計画手法CaPEを提案。 - CaPEは、環境と言語コミュニケーションに基づいてエージェントの経路計画を生成・更新する。 - 視覚言語モデル(VLM)を用いて経路編集プログラムを合成し、モデルベースプランナーで検証する。 - 自律走行、家事、共同運搬タスクなど、多ロボットおよび人間-ロボット協調の多様なシミュレーションと実世界シナリオで評価。 - プラグアンドプレイモジュールとして異なるロボットシステムに統合可能で、言語コミュニケーションに基づく計画調整能力を大幅に向上させる。

2. 先行研究と比べてどこがすごい?

- 従来の分散エージェント協調では、他エージェントの意図や計画を確実に予測できない場合に言語コミュニケーションが重要となるが、安全性と解釈性を両立する手法は限られていた。 - CaPEは、VLMによる経路編集プログラム合成とモデルベースプランニングの安全性を組み合わせることで、オープンエンドな協調を安全かつ解釈可能に実現する点が新しい。 - 既存研究と比べて、言語コミュニケーションを経路計画更新に接地させ、安全検証を行う点が優れている。

3. 技術・手法の肝は?

- CaPEは、VLMを活用して経路編集プログラムを合成する。 - 合成されたプログラムはモデルベースプランナーによって検証され、安全で解釈可能な経路計画更新を実現する。 - 環境情報と言語コミュニケーションを入力とし、エージェントの経路計画を生成・更新する。 - プラグアンドプレイモジュールとして設計され、異なるロボットシステムに統合可能。

4. どうやって有効だと検証した?

- 多様なシミュレーションおよび実世界シナリオで評価。 - 自律走行、家事、共同運搬タスクを含む多ロボットおよび人間-ロボット協調を対象。 - 実験結果により、CaPEがロボットの計画を他ロボットや人間からの言語コミュニケーションに整合させる能力を大幅に向上させることを示した。 - また、VLMベースの経路編集プログラム合成とモデルベースプランニングの安全性の組み合わせが、安全性と解釈性を維持しつつオープンエンドな協調を可能にすることを示した。

5. 議論はある?

- 要旨からは、具体的な議論や限界についての言及は不明。 - ただし、安全性と解釈性の維持、オープンエンドな協調の実現が強調されている。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、VLMベースの計画、モデルベースプランニング、マルチエージェント協調、言語接地型ロボティクスなどが挙げられる。 - 同分野の定番として、Vision-Language Models (VLM)、Model-Based Planning、Multi-Agent Path Planning、Human-Robot Collaboration に関する論文を読むことが推奨される。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haojun Shi, Suyu Ye, Katherine M. Guerrerio, Jianzhi Shen, Yifan Yin, Daniel Khashabi, Chien-Ming Huang, Tianmin Shu

分類: cs.RO, cs.AI, cs.HC, cs.MA

原文アブストラクト

Successful cooperation among decentralized agents requires each agent to quickly adapt its plan to the behavior of other agents. In scenarios where agents cannot confidently predict one another's intentions and plans, language communication can be crucial for ensuring safety. In this work, we focus on path-level cooperation in which agents must adapt their paths to one another in order to avoid collisions or perform physical collaboration such as joint carrying. In particular, we propose a safe and interpretable multimodal path planning method, CaPE (Code as Path Editor), which generates and updates path plans for an agent based on the environment and language communication from other agents. CaPE leverages a vision-language model (VLM) to synthesize a path editing program verified by a model-based planner, grounding communication to path plan updates in a safe and interpretable way. We evaluate our approach in diverse simulated and real-world scenarios, including multi-robot and human-robot cooperation in autonomous driving, household, and joint carrying tasks. Experimental results demonstrate that CaPE can be integrated into different robotic systems as a plug-and-play module, greatly enhancing a robot's ability to align its plan to language communication from other robots or humans. We also show that the combination of the VLM-based path editing program synthesis and model-based planning safety enables robots to achieve open-ended cooperation while maintaining safety and interpretability.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI