日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

水中ロボット/予測モデルarXiv:2607.29393

AquaJEPA: 水中ロボットのダイナミクスのための行動条件付きマルチモーダルJEPAファミリー

AquaJEPA: An Action-Conditioned Multimodal JEPA Family for Underwater Robot Dynamics

シェア:XThreadsFacebookLINEはてブBluesky

水中ロボットのための行動条件付き予測モデル群を提案し、カメラやソナーなどのセンサ構成に応じてロバストな制御を実現した。

詳しい要約

1. どんなもの?

AquaJEPAは、水中ロボットのダイナミクスを予測するための、アクション条件付きマルチモーダルJEPA(Joint-Embedding Predictive Architecture)ファミリーを提案する。カメラ、前方ソナー、プロプリオセプション、スラスタ指令を入力とし、将来の表現と物理ダイナミクスを予測する。センサ構成に応じて、フルマルチモーダル、カメラのみ、ソナーのみ、センサドロップアウトの各構成を持つ。

2. 先行研究と比べてどこがすごい?

先行研究と比べて、センサ構成を柔軟に変更できる点、およびセンサドロップアウト訓練によるロバスト性を導入した点が新しい。また、1時間のアクションラベル付きデータでスクラッチから訓練し、未見のシナリオで評価している。

3. 技術・手法の肝は?

手法の肝は、共有の潜在目的関数と後退ホライズン制御インターフェースを用いて、将来の表現と物理ダイナミクスを予測すること。センサ構成に応じてモデルを切り替え、センサドロップアウト訓練により欠損に強いモデルを実現している。

4. どうやって有効だと検証した?

Stonefishシミュレータ上で、120の新しいペアシナリオ(未見レイアウト、視界変化、ダイナミクスシフト、DVL喪失)を評価。AquaJEPA-baseは状態のみの制御より成功率を12.5ポイント向上、最終誤差を0.189m低減。3シード評価でAquaJEPA-Sより最終誤差を0.118m低減。センサ喪失時には予測誤差を半減以上に抑えた。

5. 議論はある?

要旨からは、フルマルチモーダル予測が状態のみの制御やソナーのみの構成より優れているが、カメラのみやセンサドロップアウト構成の詳細な比較は不明。また、実機での検証や、より長い訓練データでの性能は不明。

6. 次に読むべき論文は?

要旨で参照されている研究は明示されていないが、関連手法としてJEPA(Joint-Embedding Predictive Architecture)や、水中ロボットのダイナミクス予測、センサフュージョンに関する論文が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Alan-Barsag Gazzaev, Alexey Gavrilov, Sergey Muravyov

分類: cs.RO

原文アブストラクト

Underwater robots rely on complementary sensors whose reliability changes abruptly with water visibility and vehicle motion. We introduce AquaJEPA, a sensor-configurable family of action-conditioned joint-embedding predictive models spanning full multimodal, camera-only, sonar-only, and sensor-dropout configurations. Its members share a latent objective and receding-horizon control interface that predict future representations and physical dynamics from camera, forward-looking sonar, proprioception, and thruster commands. Trained from scratch on one hour of action-labelled data, the family is evaluated in Stonefish on 120 fresh paired scenarios spanning unseen layouts, visibility changes, dynamics shifts, and scheduled DVL loss. AquaJEPA-base achieves the strongest aggregate closed-loop performance, improving success over state-only by 12.5 percentage points and reducing final error by 0.189 m; both paired 95% intervals exclude zero. In a separate three-seed evaluation, it reduces paired final error relative to AquaJEPA-S by 0.118 m, with the same direction for every seed. AquaJEPA-robust more than halves prediction error during camera and camera-DVL blackouts. These results show that full multimodal prediction improves over state-only control and the sonar-only family member in this benchmark, while sensor-dropout training provides robustness under sensor loss.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI