日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2510.07869

USIMとU0:汎用水下ロボットのための視覚-言語-行動データセットとモデル

USIM and U0: A Vision-Language-Action Dataset and Model for General Underwater Robots

シェア:XThreadsFacebookLINEはてブBluesky

言語指示で動く汎用水下ロボット向けに、BlueROV2の約25時間分の模擬データセットUSIMと、空間認識を強化した視覚-言語-行動モデルU0を提案し、既存手法を上回る性能を示した。

詳しい要約

1. どんなもの?

- 水中ロボット向けの汎用知能フレームワークの提案。 - 言語指示に基づき知覚と行動を統合する vision-language-action (VLA) モデル U0 を構築。 - シミュレーション基盤のデータセット USIM を構築。 - 2275 軌跡、905K フレーム超、約 25 時間の BlueROV2 インタラクションを含む。 - 対象タスクは障害物回避ナビゲーションから三次元 mobile manipulation まで。

2. 先行研究と比べてどこがすごい?

- 既存研究はタスク特化型の手法が中心で、多タスク実行の汎用知能研究は乏しい。 - 本研究は水中ロボット向けにデータセットと VLA モデルを統合した枠組みを提示。 - USIM が既存 VLA モデルの水中シナリオ適応を大きく促進することを実験で示す。 - U0 は offline 平均行動予測誤差 0.0359、online 総合成功率 43.1% を達成。 - 競合 baseline の 37.6% 未満を 5.5% 上回る。 - ナビゲーションタスクでは 87.5% に到達。

3. 技術・手法の肝は?

- 言語指示駆動の VLA モデル U0 を提案。 - convolution-attention-based perception (CAP) モジュールを採用。 - target pose estimation を補助タスクとして組み込み、空間認識を明示的に強化。 - USIM はデータ合成パイプラインにより構築されたシミュレーション基盤データセット。 - 評価用に offline 指標と online タスク実行を含む自動化パイプラインと体系的評価枠組みを整備。

4. どうやって有効だと検証した?

- offline 指標と online タスク実行を包含する体系的評価枠組みと自動パイプラインを構築。 - USIM が既存 VLA モデルの水中適応を有意に支援することを実験的に確認。 - U0 の性能を定量評価。 - offline 平均行動予測誤差 0.0359。 - online 総合成功率 43.1%(既存競合 baseline は 37.6% 未満、5.5% 改善)。 - ナビゲーションタスクで最大 87.5%。

5. 議論はある?

- 水中ロボティクスにおける汎用知能の実現可能性を結果が支持すると主張。 - スケーラブルなデータセット合成と aquatic embodied agents の基盤を提供すると位置づけ。 - 具体的な限界・失敗事例・sim-to-real ギャップに関する議論は要旨からは不明。 - baseline の詳細や評価タスク構成の内訳も要旨からは不明。

6. 次に読むべき論文は?

- 比較対象として言及される既存 VLA モデル(具体的名称は要旨からは不明)の原論文。 - BlueROV2 を用いた水中ロボティクス研究。 - mobile manipulation 向け VLA 研究(RT-2 や OpenVLA など同分野の定番)。 - 水中データセット研究(USIM の比較対象となる既存データセット)。 - target pose estimation を補助タスクとする知覚手法の関連研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Junwen Gu, Zhiheng Wu, Pengxuan Si, Shuang Qiu, Zhentao Zhang, Yukai Feng, Luoyang Sun, Laien Luo, Lianyi Yu, Jian Wang, Zhengxing Wu

分類: cs.RO

原文アブストラクト

Underwater environments pose unique challenges for robotic navigation and manipulation. While existing research has primarily focused on task-specific methods, studies on general-purpose intelligence for multi-task execution remain scarce. To address this gap, we propose a unified framework for general-purpose underwater robots that integrates perception and action driven by language instructions. First, we develop a data synthesis pipeline to construct USIM, a simulation-based dataset which comprises over 905K frames from 2275 trajectories, totaling approximately 25 hours of BlueROV2 interactions. Furthermore, we propose U0, a vision-language-action (VLA) model capable of executing various tasks from obstacle-avoidance navigation to three-dimensional mobile manipulation. The model features a convolution-attention-based perception (CAP) module, which incorporates target pose estimation as an auxiliary task to explicitly bolster the model's spatial awareness. For evaluation, we establish a systematic assessment framework and an automated pipeline encompassing both offline metrics and online task execution. Experimental results demonstrate that the USIM dataset significantly empowers existing VLA models to adapt to underwater scenarios. Notably, our U0 model achieves state-of-the-art performance: it reduces the offline mean action prediction error to 0.0359 and achieves an overall online success rate of 43.1%, marking a 5.5% improvement over existing competitive baselines (below 37.6%), with navigation tasks reaching as high as 87.5%. These results validate the feasibility of general-purpose intelligence in underwater robotics, providing a foundation for scalable dataset synthesis and aquatic embodied agents.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI