日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2507.08885

AirScape: 運動制御可能な空中生成ワールドモデル

AirScape: An Aerial Generative World Model with Motion Controllability

シェア:XThreadsFacebookLINEはてブBluesky

6自由度ドローンの視覚入力と運動意図から将来の観測を予測する世界モデルを構築し、運動意図に沿った3D空間想像力で既存モデルを大幅に上回った。

詳しい要約

1. どんなもの?

- 6自由度(6-DoF)の aerial agent 向けに設計された初の world model「AirScape」 - 現在の視覚入力と motion intention から将来の観測系列を予測する - 三人称ではなく一人称視点(FPV)のドローン映像を対象とする - 3次元空間における自己の運動意図の結果を予測する embodied intelligence の基礎問題に取り組む

2. 先行研究と比べてどこがすごい?

- 既存の foundation model と比較して3D spatial imagination 能力で大幅に優位 - motion alignment を反映する指標で50%以上の改善を達成 - 6-DoF aerial agent に特化した world model は初であり、既存の地上・固定視点系の world model とは設定が異なる - 具体的な比較対象モデル名は要旨からは不明

3. 技術・手法の肝は?

- 11k の video-intention pair からなる aerial world model 用データセットを構築 - 多様なシナリオのドローン行動を捉えた first-person-view 映像を含む - 対応する motion intention の注釈に1,000時間以上を費やした - embodied spatial knowledge を持たない foundation model を、motion intention で制御可能かつ物理的時空間制約に従う world model へと訓練する two-phase schedule を開発

4. どうやって有効だと検証した?

- 構築したデータセットで訓練・テストを実施 - 既存の foundation model との比較実験を実施 - 3D spatial imagination 能力の指標で大幅な優位、motion alignment 指標で50%以上の改善を確認 - 詳細な実験設定・ベースライン名は要旨からは不明

5. 議論はある?

- 要旨からは不明(限界・失敗事例・計算コスト・データ bias 等の議論は明示されていない) - 物理的時空間制約への準拠を主張しているが、その検証詳細は要旨からは不明

6. 次に読むべき論文は?

- 比較対象として言及される既存の foundation model 群(具体的名称は要旨からは不明) - world model 分野の定番として World Models、Dreamer 系 - 映像生成基盤として video diffusion model 系 - embodied intelligence における spatial imagination 関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Baining Zhao, Rongze Tang, Mingyuan Jia, Ziyou Wang, Fanghang Man, Xin Zhang, Yu Shang, Weichen Zhang, Wei Wu, Chen Gao, Xinlei Chen, Yong Li

分類: cs.RO, cs.AI

原文アブストラクト

How to enable agents to predict the outcomes of their own motion intentions in three-dimensional space has been a fundamental problem in embodied intelligence. To explore general spatial imagination capability, we present AirScape, the first world model designed for six-degree-of-freedom aerial agents. AirScape predicts future observation sequences based on current visual inputs and motion intentions. Specifically, we construct a dataset for aerial world model training and testing, which consists of 11k video-intention pairs. This dataset includes first-person-view videos capturing diverse drone actions across a wide range of scenarios, with over 1,000 hours spent annotating the corresponding motion intentions. Then we develop a two-phase schedule to train a foundation model--initially devoid of embodied spatial knowledge--into a world model that is controllable by motion intentions and adheres to physical spatio-temporal constraints. Experimental results demonstrate that AirScape significantly outperforms existing foundation models in 3D spatial imagination capabilities, especially with over a 50% improvement in metrics reflecting motion alignment. The project is available at: https://embodiedcity.github.io/AirScape/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI