日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転シミュレーションarXiv:2505.16902

RealEngine: 現実的な文脈での自動運転シミュレーション

RealEngine: Simulating Autonomous Driving in Realistic Context

シェア:XThreadsFacebookLINEはてブBluesky

3Dシーン再構成と新規視点合成を組み合わせ、マルチモーダルでフォトリアルな閉ループ自動運転シミュレーションを実現するフレームワークを提案。

詳しい要約

1. どんなもの?

- 本論文は、自動運転エージェントの評価のための新しい運転シミュレーションフレームワーク「RealEngine」を提案している。 - 3D scene reconstruction と novel view synthesis を統合し、実世界の multi-modal sensor data を用いてリアルでフレキシブルな closed-loop simulation を実現する。 - 背景と前景の交通参加者を別々に再構成し、多様でリアルな交通シナリオを生成可能。 - non-reactive simulation、safety testing、multi-agent interaction の3つのシミュレーションカテゴリをサポートする。

2. 先行研究と比べてどこがすごい?

- 既存のシミュレータやベンチマークは、multi-modal sensing、closed-loop evaluation、多様な交通シナリオ、multi-agent cooperation、計算効率の要件を包括的に満たしていない。 - RealEngine はこれらの要件を統合的に満たす点が優れている。 - 特に、scene reconstruction と view synthesis の融合により、複数センサモダリティにわたる photorealistic rendering と幾何学的精度を両立している。

3. 技術・手法の肝は?

- 実世界の multi-modal sensor data を活用し、背景シーンと前景の交通参加者を別々に再構成する。 - それらを柔軟に合成することで、多様でリアルな交通シナリオを生成する。 - 3D scene reconstruction と novel view synthesis を統合し、camera や LiDAR などの複数モダリティで photorealistic かつ幾何学的に正確なレンダリングを実現する。 - closed-loop simulation を可能にし、free-form trajectory behaviors を評価できる。

4. どうやって有効だと検証した?

- 要旨からは不明。ただし、non-reactive simulation、safety testing、multi-agent interaction の3つのカテゴリでベンチマークを形成し、運転エージェントの実世界性能を評価できると述べられている。

5. 議論はある?

- 要旨からは不明。ただし、既存手法が満たさない要件を包括的に満たすことを主張しており、計算効率やスケーラビリティについても言及がある。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。関連手法として、3D scene reconstruction、novel view synthesis、closed-loop simulation の分野の定番手法(例:NeRF、3D Gaussian Splatting、CARLA など)が考えられるが、具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Junzhe Jiang, Nan Song, Jingyu Li, Xiatian Zhu, Li Zhang

分類: cs.CV, cs.RO

原文アブストラクト

Driving simulation plays a crucial role in developing reliable driving agents by providing controlled, evaluative environments. To enable meaningful assessments, a high-quality driving simulator must satisfy several key requirements: multi-modal sensing capabilities (e.g., camera and LiDAR) with realistic scene rendering to minimize observational discrepancies; closed-loop evaluation to support free-form trajectory behaviors; highly diverse traffic scenarios for thorough evaluation; multi-agent cooperation to capture interaction dynamics; and high computational efficiency to ensure affordability and scalability. However, existing simulators and benchmarks fail to comprehensively meet these fundamental criteria. To bridge this gap, this paper introduces RealEngine, a novel driving simulation framework that holistically integrates 3D scene reconstruction and novel view synthesis techniques to achieve realistic and flexible closed-loop simulation in the driving context. By leveraging real-world multi-modal sensor data, RealEngine reconstructs background scenes and foreground traffic participants separately, allowing for highly diverse and realistic traffic scenarios through flexible scene composition. This synergistic fusion of scene reconstruction and view synthesis enables photorealistic rendering across multiple sensor modalities, ensuring both perceptual fidelity and geometric accuracy. Building upon this environment, RealEngine supports three essential driving simulation categories: non-reactive simulation, safety testing, and multi-agent interaction, collectively forming a reliable and comprehensive benchmark for evaluating the real-world performance of driving agents.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI