日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2506.02917

テキスト指示に基づく効率的な個別検査計画の生成

Text-guided Generation of Efficient Personalized Inspection Plans

シェア:XThreadsFacebookLINEはてブBluesky

VLMを活用し、テキスト記述から関心点を抽出して巡回順序を最適化し、航空・水中ビークルのための効率的な検査軌道を生成する手法を提案。

詳しい要約

1. どんなもの?

- テキスト記述に基づく対象検査計画のための軌道生成手法 - Vision-Language Model (VLM) を活用した training-free なアプローチ - 既知シーンにおける効率的な検査を対象 - 医療・海洋・土木工学などへの応用を想定 - 空中・水中ビークル向けの実行可能な検査経路を生成

2. 先行研究と比べてどこがすごい?

- 既存の Vision-and-Language Navigation (VLN) は未知環境の汎用エージェント向け - 本研究は既知シーンの効率的検査に特化 - training-free で VLM を利用する点が特徴 - テキストに含まれる順序制約を考慮した訪問順決定を行う - 空中・水中ビークル向けの軌道最適化まで含む

3. 技術・手法の肝は?

- VLM を用いてテキストから points of interest (POIs) を抽出 - POIs が顕著かつプロンプトの空間制約に合致する waypoints を特定 - VLM と対話的に軌道を反復改善し POIs の可視性・顕著性を維持 - テキストの順序制約を満たすよう Traveling Salesman Problem (TSP) を解く - 軌道最適化により滑らかで実行可能な検査経路を生成

4. どうやって有効だと検証した?

- 手作り環境と実世界スキャン環境の両方で評価 - ユーザ指示に従った検査計画軌道の生成を実証 - 具体的な評価指標や比較手法は要旨からは不明

5. 議論はある?

- 既知シーン特化のため未知環境への一般化は要旨からは不明 - VLM の抽出・対話精度への依存性は要旨からは不明 - 順序制約の扱いの限界は要旨からは不明 - 実機での実行検証の詳細は要旨からは不明

6. 次に読むべき論文は?

- Vision-and-Language Navigation (VLN) 関連研究 - Traveling Salesman Problem (TSP) を用いた経路計画研究 - VLM を用いたロボット軌道生成・タスク計画研究 - 軌道最適化に関する一般的な手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xingpeng Sun, Zherong Pan, Xifeng Gao, Kui Wu, Aniket Bera

分類: cs.RO

原文アブストラクト

We propose a training-free, Vision-Language Model (VLM)-guided approach for efficiently generating trajectories to facilitate target inspection planning based on text descriptions. Unlike existing Vision-and-Language Navigation (VLN) methods designed for general agents in unknown environments, our approach specifically targets the efficient inspection of known scenes, with widespread applications in fields such as medical, marine, and civil engineering. Leveraging VLMs, our method first extracts points of interest (POIs) from the text description, then identifies a set of waypoints from which POIs are both salient and align with the spatial constraints defined in the prompt. Next, we interact with the VLM to iteratively refine the trajectory, preserving the visibility and prominence of the POIs. Further, we solve a Traveling Salesman Problem (TSP) to find the most efficient visitation order that satisfies the order constraint implied in the text description. Finally, we apply trajectory optimization to generate smooth, executable inspection paths for aerial and underwater vehicles. We have evaluated our method across a series of both handcrafted and real-world scanned environments. The results demonstrate that our approach effectively generates inspection planning trajectories that adhere to user instructions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI