日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動駐車/軌道計画/LLMarXiv:2606.17082

ParkingTransformer: LLM強化による自動駐車のためのエンドツーエンド軌道計画

ParkingTransformer: LLM-Enhanced End-to-End Trajectory Planning for Autonomous Parking

シェア:XThreadsFacebookLINEはてブBluesky

本論文は、マルチビュー知覚と大規模言語モデル(LLM)のシーン理解能力を組み合わせ、軌道クエリとLLMの暗黙状態特徴を利用して、高密度BEV表現を必要とせずに計画軌道を直接出力する自動駐車フレームワークを提案する。3D位置エンコーディングと固定ウィンドウストリーミング機構を導入し、空間認識と時間処理効率を向上させ、粗密デコード戦略で軌道精度を高める。CARLAシミュレータと実車実験で有効性を検証した。

詳しい要約

1. どんなもの?

- 自動運転におけるend-to-end自動駐車の新しいフレームワークParkingTransformerを提案。 - マルチビュー知覚とLLMのシーン理解能力を活用。 - 軌道クエリとLLMの暗黙状態特徴を組み合わせ、歴史情報と生センサーデータから直接計画軌道を出力。 - 密なBird's-View (BEV)表現を不要に。 - 3D positional encodingでLLMの空間推論能力を補完。 - 固定ウィンドウストリーミング機構で長期時間処理効率と推論速度を向上。 - coarse-to-fineデコーディング戦略で軌道精度を段階的に強化。

2. 先行研究と比べてどこがすごい?

- 既存手法はブラックボックス的で高レベル意味理解と解釈性に欠け、道路から目標地点までのシームレスな長距離自動駐車を妨げる。 - 提案手法はLLMを活用し、意味理解と解釈性を向上。 - 密なBEV表現を排除し、直接生データと歴史情報を利用。 - 3D positional encodingでLLMの空間推論不足を補う。 - 固定ウィンドウストリーミングで長期時間処理効率を改善。

3. 技術・手法の肝は?

- マルチビュー知覚とLLMのシーン理解を統合。 - 軌道クエリとLLMの暗黙状態特徴を組み合わせ、歴史情報と生センサーデータから直接計画軌道を出力。 - 3D positional encodingを導入し、空間幾何認識を明示的に注入。 - 固定ウィンドウストリーミング機構で歴史情報を処理。 - coarse-to-fineデコーディング戦略で軌道精度を段階的に向上。

4. どうやって有効だと検証した?

- CARLAシミュレータと実車プラットフォームで広範な閉ループ実験を実施。 - CARLAでdriving score 61.32を達成。 - 実世界実験で平均成功率88.70%を達成。 - 提案アルゴリズムの実現可能性と有効性を検証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてend-to-end自動運転、LLMを活用した計画、BEV表現を用いた手法、coarse-to-fineデコーディングなどが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hauteng Wu, Xu Li, Dong Kong, Zihang Wang, Xieyuanli Chen, Benwu Wang, Wenkai Zhu

分類: cs.RO, cs.AI

原文アブストラクト

End-to-end autonomous parking has emerged as a critical task within the realm of autonomous driving. However, existing methods suffer from black-box characteristics, lacking high-level semantic understanding and interpretability, which impedes the realization of seamless long-distance autonomous parking from the road to the target spot. To address these limitations, we propose ParkingTransformer, a novel framework that leverages multi-view perception and the scene understanding capability of Large Language Models (LLMs). By combining trajectory queries with LLMs implicit state features, our method interacts directly with historical information and raw sensor data to output planning trajectories, eliminating the need for dense Bird's-View (BEV) representations. To compensate for the inadequate spatial reasoning ability of LLMs, we introduce 3D positional encoding to explicitly inject spatial geometric awareness. Furthermore, a fixed-window streaming mechanism is designed for historical information processing, significantly improving long-term temporal processing efficiency and inference speed. Additionally, a coarse-to-fine decoding strategy is employed to progressively enhance trajectory precision. Extensive closed-loop experiments are conducted on the CARLA simulator and real-world vehicle platforms. The results demonstrate that our method achieves a driving score of 61.32 in CARLA simulator and an average success rate of 88.70% in real-world experiments, validating the feasibility and effectiveness of the proposed algorithms.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI