日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2602.12540

LiDAR占有補完と予測のための自己教師ありJEPAベース世界モデル

Self-Supervised JEPA-based World Models for LiDAR Occupancy Completion and Forecasting

シェア:XThreadsFacebookLINEはてブBluesky

LiDARデータから将来の時空間変化を予測する自己教師あり世界モデルAD-LiST-JEPAを提案し、占有補完・予測タスクで事前学習エンコーダの有効性を示した。

詳しい要約

1. どんなもの?

- 自動運転のための自己教師あり世界モデル - LiDARデータから将来の時空間進化を予測 - JEPAフレームワークを採用 - 下流タスクとしてLiDARベースのoccupancy completion and forecasting (OCF)を評価 - 知覚と予測を同時に評価

2. 先行研究と比べてどこがすごい?

- 従来の世界モデルは教師あり学習が主流 - JEPAにより大規模未ラベルデータを活用可能 - 人間による高価なアノテーション不要 - 自己教師あり学習でスケーラビリティを実現 - 先行研究と比べて具体的な優位性は要旨からは不明

3. 技術・手法の肝は?

- joint-embedding predictive architecture (JEPA)を採用 - LiDARデータから将来の時空間進化を予測 - 自己教師あり学習で世界モデルを学習 - 事前学習したエンコーダを下流タスクに転移 - 具体的なネットワーク構造や損失関数は要旨からは不明

4. どうやって有効だと検証した?

- 下流タスクとしてLiDARベースのoccupancy completion and forecasting (OCF)を実施 - 知覚と予測の両方を評価 - JEPAベースの世界モデル学習後の事前学習済みエンコーダでOCF性能が向上 - Proof of concept実験による検証 - 詳細な実験設定や定量結果は要旨からは不明

5. 議論はある?

- 自己教師あり学習の有効性を示唆 - 大規模未ラベルデータ活用の可能性 - 長期計画への貢献が期待される - 限界や課題についての議論は要旨からは不明 - 今後の研究方向性は要旨からは不明

6. 次に読むべき論文は?

- JEPA (joint-embedding predictive architecture) の原論文 - 自動運転における世界モデルに関する研究 - LiDARベースのoccupancy completion and forecasting (OCF) の関連研究 - 自己教師あり学習を用いたLiDAR処理の研究 - 具体的な参照論文は要旨に記載なし

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haoran Zhu, Anna Choromanska

分類: cs.CV, cs.RO

原文アブストラクト

Autonomous driving, as an agent operating in the physical world, requires the fundamental capability to build \textit{world models} that capture how the environment evolves spatiotemporally in order to support long-term planning. At the same time, scalability demands learning such models in a self-supervised manner; \textit{joint-embedding predictive architecture (JEPA)} enables learning world models via leveraging large volumes of unlabeled data without relying on expensive human annotations. In this paper, we propose \textbf{AD-LiST-JEPA}, a self-supervised world model for autonomous driving that predicts future spatiotemporal evolution from LiDAR data using a JEPA framework. We evaluate the quality of the learned representations through a downstream LiDAR-based occupancy completion and forecasting (OCF) task, which jointly assesses perception and prediction. Proof of concept experiments show better OCF performance with pretrained encoder after JEPA-based world model learning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI