日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/操作arXiv:2604.17876

OFlow: 物体認識を組み込んだ時間的フローマッチングによる堅牢なロボット操作

OFlow: Injecting Object-Aware Temporal Flow Matching for Robust Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作のためのVLAモデルに、物体認識を組み込んだ時間的フローマッチングを導入し、将来予測と物体認識を統一した潜在空間で行うことで、分布シフト下での堅牢性を向上させた。

詳しい要約

1. どんなもの?

- VLAモデルにObject-Aware Temporal Flow Matchingを注入するOFlowを提案。 - 時間的先読みと物体認識推論を共有意味潜在空間で統合。 - 未来潜在を予測し、物体認識表現に分解、連続行動生成を条件付け。 - 分布シフト下でのロボット操作の堅牢性と成功率を向上。

2. 先行研究と比べてどこがすごい?

- 既存VLAは現フレームのみで行動し、未来予測と物体認識推論を別潜在空間で学習。 - OFlowは両者を共有意味潜在空間で統合し、物体認識的先読みを実現。 - これにより分布シフト下での信頼性の高い制御を可能に。

3. 技術・手法の肝は?

- Temporal Flow Matchingで未来潜在を予測。 - 予測潜在を物体認識表現に分解し、物理的関連手がかりを強調、タスク無関係変動を除去。 - これらの予測に連続行動生成を条件付け。 - VLAパイプラインに統合。

4. どうやって有効だと検証した?

- LIBERO, LIBERO-Plus, MetaWorld, SimplerEnvベンチマークと実世界タスクで広範な実験。 - 物体認識的先読みが堅牢性と成功率を一貫して向上させることを実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- LIBERO, LIBERO-Plus, MetaWorld, SimplerEnvなどのベンチマーク。 - VLAモデル、Temporal Flow Matching、物体認識推論に関する関連研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kuanning Wang, Ke Fan, Chenhao Qiu, Zeyu Shangguan, Yuqian Fu, Yanwei Fu, Daniel Seita, Xiangyang Xue

分類: cs.RO

原文アブストラクト

Robust robotic manipulation requires not only predicting how the scene evolves over time, but also recognizing task-relevant objects in complex scenes. However, existing VLA models face two limitations. They typically act only on the current frame, while future prediction and object-aware reasoning are often learned in separate latent spaces. We propose OFlow (injecting Object-Aware Temporal Flow Matching into VLAs), a framework that addresses both limitations by unifying temporal foresight and object-aware reasoning in a shared semantic latent space. Our method forecasts future latents with temporal flow matching, factorizes them into object-aware representations that emphasize physically relevant cues while filtering task-irrelevant variation, and conditions continuous action generation on these predictions. By integrating OFlow into VLA pipelines, our method enables more reliable control under distribution shifts. Extensive experiments across LIBERO, LIBERO-Plus, MetaWorld, and SimplerEnv benchmarks and real-world tasks demonstrate that object-aware foresight consistently enhances robustness and success.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI