日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

空中マニピュレーション/VLAarXiv:2603.25038

π、しかし飛ばす:VLAモデルの空中マニピュレーションへの物理誘導転移

$\pi$, But Make It Fly: Physics-Guided Transfer of VLA Models to Aerial Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

固定ベースのマニピュレータ向けに事前学習されたVLAモデルを空中プラットフォームへ転移させる際の「ダイナミクスギャップ」を、推論時のペイロード認識ガイダンスと合成データ生成で橋渡しし、空中ピックアンドプレースの成功率を向上させた。

詳しい要約

1. どんなもの?

本論文は、固定ベースのマニピュレータで事前学習された Vision-Language-Action (VLA) モデル(例: $\pi_0$)を、空中プラットフォームの pick-and-place タスクに転移する研究である。提案システム AirVLA は、視覚表現は転移するが飛行に必要な制御ダイナミクスは転移しないという「dynamics gap」を指摘し、基盤モデルを再学習せずにこれを埋める Payload-Aware Guidance と、Gaussian Splatting によるナビゲーション訓練データ合成を導入する。

2. 先行研究と比べてどこがすごい?

従来の VLA 研究は固定ベースのマニピュレータに限定され、空中マニピュレーションへの転移は未解決だった。本研究は、視覚表現の転移可能性と制御ダイナミクスの非転移性を実験的に示し、再学習なしで飛行制御を適応させる手法を提案した点が新しい。また、合成データがナビゲーション性能を大きく向上させることを実世界実験で示した。

3. 技術・手法の肝は?

技術の肝は、1) ペイロード制約をポリシーの flow-matching サンプリング過程に直接注入する Payload-Aware Guidance により、推論時に物理的制約を反映させる点、2) Gaussian Splatting パイプラインを用いてナビゲーション訓練データを合成し、データ不足を緩和する点である。これにより、基盤モデルの再学習なしに空中タスクへ適応する。

4. どうやって有効だと検証した?

累積 460 回の実世界実験で検証した。合成データはナビゲーションタスクで 100% の成功率を達成し、テレオペレーションデータのみのファインチューニングでは 81% だった。Payload-Aware Guidance は実世界 pick-and-place の成功率を 23% から 50% に向上させた。さらに長期構成タスクで 62% の総合成功率を達成した。

5. 議論はある?

本論文は、事前学習済みマニピュレーション VLA が適切なデータ拡張と物理情報に基づくガイダンスにより空中マニピュレーションとナビゲーション、およびそれらの構成タスクに転移可能であることを示唆する。一方で、dynamics gap の根本的な解決や、他の空中タスクへの一般化可能性については議論の余地がある。

6. 次に読むべき論文は?

要旨で参照されているのは $\pi_0$ と Gaussian Splatting である。関連手法として、VLA モデル(例: RT-2, OpenVLA)や空中マニピュレーションの研究、flow-matching を用いたポリシー学習、Gaussian Splatting によるデータ合成の論文を次に読むべきである。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Johnathan Tucker, Denis Liu, Aiden Swann, Allen Ren, Javier Yu, Jiankai Sun, Brandon Kim, Lachlain McGranahan, Quan Vuong, Mac Schwager

分類: cs.RO

原文アブストラクト

Vision-Language-Action (VLA) models such as $\pi_0$ have demonstrated remarkable generalization across diverse fixed-base manipulators. However, transferring these foundation models to aerial platforms remains an open challenge due to the fundamental mismatch between the quasi-static dynamics of fixed-base arms and the underactuated, highly dynamic nature of flight. In this work, we introduce AirVLA, a system that investigates the transferability of manipulation-pretrained VLAs to aerial pick-and-place tasks. We find that while visual representations transfer effectively, the specific control dynamics required for flight do not. To bridge this "dynamics gap" without retraining the foundation model, we introduce a Payload-Aware Guidance mechanism that injects payload constraints directly into the policy's flow-matching sampling process. To overcome data scarcity, we further utilize a Gaussian Splatting pipeline to synthesize navigation training data. We evaluate our method through a cumulative 460 real-world experiments which demonstrate that this synthetic data is a key enabler of performance, unlocking 100% success in navigation tasks where directly fine-tuning on teleoperation data alone attains 81% success. Our inference-time intervention, Payload-Aware Guidance, increases real-world pick-and-place task success from 23% to 50%. Finally, we evaluate the model on a long-horizon compositional task, achieving a 62% overall success rate. These results suggest that pre-trained manipulation VLAs, with appropriate data augmentation and physics-informed guidance, can transfer to aerial manipulation and navigation, as well as the composition of these tasks.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI