日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

視覚ナビゲーションarXiv:2602.11575

ReaDy-Go: 動的障害物を伴う環境特化型視覚ナビゲーションのための実世界-シミュレーション動的3Dガウシアンスプラッティング

ReaDy-Go: Real-to-Sim Dynamic 3D Gaussian Splatting Simulation for Environment-Specific Visual Navigation with Moving Obstacles

シェア:XThreadsFacebookLINEはてブBluesky

実環境を3Dガウシアンスプラッティングで再構成し、動く人間アバターを追加した写実的な動的シミュレーションを生成して、動的障害物に頑健な視覚ナビゲーション方策を学習する手法を提案した。

詳しい要約

1. どんなもの?

- 実環境を再現した real-to-sim ナビゲーションシミュレーションの新パイプライン ReaDy-Go を提案。 - 再構成した静的 3D Gaussian Splatting (GS) シーンに、動く人間の GS アバターを追加し、フォトリアルな動的シーンを合成。 - 生成データセットで移動障害物に対応するナビゲーションポリシーを学習。 - 対象環境(家庭・レストラン・工場など)に特化したポリシーを訓練可能。

2. 先行研究と比べてどこがすごい?

- 従来の GS ベース real-to-sim は静的シーンか、シミュレータ資産による非フォトリアルな人間障害物のみを扱っていた。 - 動的環境での安全なナビゲーションの重要性に対し、先行研究は不十分。 - ReaDy-Go はフォトリアルな動的シナリオを合成し、sim-to-real ギャップと移動障害物の両方に頑健なポリシーを実現。 - シミュレーションと実世界の両方でベースラインを上回る性能を示す。

3. 技術・手法の肝は?

- 静的シーン GS と人間アニメーションモジュールを統合した動的 GS シミュレータ。 - アニメータブルな人間 GS アバターを挿入し、2D 軌跡から妥当な人間動作を合成。 - 動的 GS 表現向けのロボットエキスパートプランナーと人間プランナーを活用したナビゲーションデータセット生成フレームワーク。 - 生成データで移動障害物に頑健なナビゲーションポリシーを訓練。

4. どうやって有効だと検証した?

- シミュレータは任意視点から数千のフォトリアルなナビゲーションシナリオを生成可能。 - 対象環境でのシミュレーション実験と実世界実験でベースラインを上回る性能を確認。 - sim-to-real 転移後も移動障害物存在下でナビゲーション性能が向上。 - 未見環境での zero-shot sim-to-real 展開により汎化可能性を示唆。

5. 議論はある?

- 要旨からは不明。 - 限界や課題、今後の議論については記述がない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:3D Gaussian Splatting (GS) を用いた real-to-sim ナビゲーションシミュレーションの先行研究。 - 関連手法:GS ベースの静的シーン再構成、シミュレータ資産による人間障害物、sim-to-real 転移、zero-shot 展開。 - 同分野の定番:Visual Navigation、Sim-to-Real Transfer、Dynamic Obstacle Avoidance。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Seungyeon Yoo, Youngseok Jang, Dabin Kim, Youngsoo Han, Seungwoo Jung, H. Jin Kim

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Visual navigation models often struggle in real-world dynamic environments due to limited robustness to the sim-to-real gap and the difficulty of training policies tailored to target deployment environments (e.g., households, restaurants, and factories). Although real-to-sim navigation simulation using 3D Gaussian Splatting (GS) can mitigate these challenges, prior GS-based works have considered only static scenes or non-photorealistic human obstacles built from simulator assets, despite the importance of safe navigation in dynamic environments. To address these issues, we propose ReaDy-Go, a novel real-to-sim simulation pipeline that synthesizes photorealistic dynamic scenarios in target environments by augmenting a reconstructed static GS scene with dynamic human GS obstacles, and trains navigation policies using the generated datasets. The pipeline provides three key contributions: (1) a dynamic GS simulator that integrates static scene GS with a human animation module, enabling the insertion of animatable human GS avatars and the synthesis of plausible human motions from 2D trajectories, (2) a navigation dataset generation framework that leverages the simulator along with a robot expert planner designed for dynamic GS representations and a human planner, and (3) robust navigation policies to both the sim-to-real gap and moving obstacles. The proposed simulator generates thousands of photorealistic navigation scenarios with animatable human GS avatars from arbitrary viewpoints. ReaDy-Go outperforms baselines across target environments in both simulation and real-world experiments, demonstrating improved navigation performance even after sim-to-real transfer and in the presence of moving obstacles. Moreover, zero-shot sim-to-real deployment in an unseen environment indicates its generalization potential. Project page: https://syeon-yoo.github.io/ready-go-site/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI