日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2604.18000

視覚言語行動モデルにおける具現化推論の幻想を暴く

Unmasking the Illusion of Embodied Reasoning in Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

標準ベンチマークの成功率と真の具現化推論能力の乖離を検証するため、因果介入と運動学的分離を用いた診断ベンチマークBeTTERを導入し、最先端VLAモデルが動的シナリオで重大な失敗を起こすことを実証した。

詳しい要約

1. どんなもの?

Vision-Language-Action (VLA) モデルの embodied reasoning を診断するベンチマーク BeTTER を提案。 - 標準ベンチマークの成功と真の embodied reasoning の乖離を検証。 - 因果的介入(spatial layout shifts, temporal extrapolation)と kinematic isolation を適用。 - 高レベル推論の失敗と低レベル実行限界を分離。 - 最先端 VLA が動的シナリオで壊滅的に失敗することを示す。

2. 先行研究と比べてどこがすごい?

従来の静的な評価プロトコルでは見えない問題を明らかにする点が新しい。 - 標準ベンチマークの高スコアが真の認知能力を反映しないことを示唆。 - 因果的介入と kinematic isolation により、推論失敗と実行限界を切り分け。 - 既存研究が見過ごしてきた lexical-kinematic shortcuts, behavioral inertia, semantic feature collapse を系統的に評価。

3. 技術・手法の肝は?

BeTTER ベンチマークを導入。 - 標的を絞った因果的介入(spatial layout shifts, temporal extrapolation)を実施。 - kinematic isolation を強制し、高レベル推論と低レベル実行を分離。 - メカニスティック分析により、capacity compression や myopic downsampling などのアーキテクチャ上のボトルネックを特定。 - 静的な評価プロトコルが sensorimotor priors への過適合を許し、劣化を隠蔽することを示す。

4. どうやって有効だと検証した?

系統的評価と実世界ロボット検証を実施。 - 最先端 VLA が動的シナリオで壊滅的に失敗することを確認。 - 表現の崩壊がシミュレーションアーティファクトでないことを実世界で検証。 - 静的な評価プロトコルが劣化をマスクすることを実証。

5. 議論はある?

VLA の表現崩壊は構造的な問題であり、高頻度制御と高レベル推論の間の構造的緊張を解決する必要がある。 - 将来の VLA パラダイムに対する批判的な必要性を強調。 - 具体的な解決策や限界については要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。 - 関連手法として Vision-Language-Action (VLA) モデル、embodied reasoning、robotic benchmarks が挙げられる。 - 同分野の定番として RT-1, RT-2, PaLM-E などが考えられるが、要旨に記載なし。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haiweng Xu, Sipeng Zheng, Hao Luo, Wanpeng Zhang, Ziheng Xi, Zongqing Lu

分類: cs.RO

原文アブストラクト

Recent Vision-Language-Action (VLA) models report impressive success rates on standard robotic benchmarks, fueling optimism about general-purpose physical intelligence. However, recent evidence suggests a systematic misalignment between standard benchmark success and true embodied reasoning, raising the question of whether these high scores reflect genuine cognitive capability. To address this gap, we introduce BeTTER, a diagnostic Benchmark for Testing True Embodied Reasoning in robotic policies. BeTTER applies targeted causal interventions (e.g., spatial layout shifts, temporal extrapolation) while enforcing kinematic isolation to explicitly decouple high-level reasoning failures from low-level execution limits. Through systematic evaluation, we reveal that state-of-the-art VLAs catastrophically fail in dynamic scenarios, exhibiting severe lexical-kinematic shortcuts, behavioral inertia, and semantic feature collapse. Crucially, our mechanistic analysis traces these symptoms to fundamental architectural bottlenecks - such as capacity compression and myopic downsampling - which systematically degrade the model's foundational semantic representation. We demonstrate that highly static evaluation protocols effectively mask this degradation by allowing optimization to overfit to sensorimotor priors. Supported by real-world robotic validation, our findings confirm that this representational breakdown is not a simulation artifact, highlighting the critical need for future VLA paradigms to resolve the structural tension between high-frequency control and high-level reasoning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI