日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マルチロボット動作計画arXiv:2512.13090

視覚と言語からの熱拡散に着想を得たマルチロボット動作計画

Multi-Robot Motion Planning from Vision and Language using Heat-Inspired Diffusion

シェア:XThreadsFacebookLINEはてブBluesky

CLIPの意味情報と衝突回避型拡散カーネルを組み合わせ、言語指示に従った衝突のない軌道を生成する視覚ベースのマルチロボット動作計画手法を提案。

詳しい要約

1. どんなもの?

- 複数ロボットのための言語条件付き軌道生成フレームワーク LHD(Language-conditioned Heat-inspired Diffusion) - 視覚入力と言語指示から、衝突のない軌道を end-to-end で生成する - 拡散モデル(diffusion model)を基盤に、CLIP の意味事前分布と熱拡散型カーネルを統合 - 実世界風の多様なマップと実機ロボットで評価

2. 先行研究と比べてどこがすごい?

- 従来の diffusion ベース motion planning は単一ロボット中心で、言語条件付きの多ロボット設定への拡張が限定的だった - 既存手法は推論コストが高く、環境表現の明示的構築を要し、幾何的到達可能性の推論機構を欠くため汎化が弱い - LHD は明示的な障害物情報なしで推論でき、success rate と planning latency の両面で先行 diffusion プランナを上回ると報告

3. 技術・手法の肝は?

- CLIP(VLM)の意味事前分布を言語条件として利用 - 衝突回避型の diffusion kernel を物理的 inductive bias として導入 - 熱拡散に着想を得たカーネルが到達可能 workspace 内での言語解釈を促す - これにより到達可能性の観点で OOD シナリオにも対応し、意味意図に合う到達可能な代替へ誘導 - 推論時に障害物情報の明示構築が不要

4. どうやって有効だと検証した?

- 実世界風の多様なマップでの広範な評価 - 実機ロボット実験を実施 - 先行 diffusion ベースプランナと比較し、success rate の一貫した向上と planning latency の削減を確認

5. 議論はある?

- 推論時障害物情報不要で OOD 到達可能性に対応する点を主張 - 計算コスト削減と汎化向上を利点として提示 - 限界や失敗事例、カーネル設計の詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 比較対象である先行 diffusion ベース motion planning 手法(例: Diffusion Policy 系のプランナ) - CLIP などの vision-language model を用いた言語条件付き planning 研究 - 熱拡散・diffusion kernel を inductive bias とするロボティクス応用 - 詳細は要旨で個別論文名が挙げられていないため、project page(https://jebeom.github.io/lhd_project_page/)参照が有用

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jebeom Chae, Junwoo Chang, Seungho Yeom, Yujin Kim, Jongeun Choi

分類: cs.RO

原文アブストラクト

Diffusion models have recently emerged as powerful tools for robot motion planning by capturing the multi-modal distribution of feasible trajectories. However, their extension to multi-robot settings with flexible, language-conditioned task specifications remains limited. Furthermore, current diffusion-based approaches incur high computational cost during inference and struggle with generalization because they require explicit construction of environment representations and lack mechanisms for reasoning about geometric reachability. To address these limitations, we present Language-conditioned Heat-inspired Diffusion (LHD), an end-to-end vision-based framework that generates language-conditioned, collision-free trajectories. LHD integrates semantic priors from CLIP, a vision-language model (VLM), with a collision-avoiding diffusion kernel serving as a physical inductive bias that enables the planner to interpret language commands strictly within the reachable workspace. This naturally handles out-of-distribution (OOD) scenarios -- in terms of reachability -- by guiding robots toward accessible alternatives that match the semantic intent, while eliminating the need for explicit obstacle information at inference time. Extensive evaluations on diverse real-world-inspired maps, along with real-robot experiments, show that LHD consistently outperforms prior diffusion-based planners in success rate, while reducing planning latency. Project page is available at: https://jebeom.github.io/lhd_project_page/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI