日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2510.01711

視覚言語行動モデルのための対照表現正則化

Contrastive Representation Regularization for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルの表現をロボットの固有感覚状態と対照学習で整合させ、実機マニピュレーションの成功率を向上させた研究。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) モデル向けの表現正則化手法 **Robot State-aware Contrastive Loss (RS-CL)** を提案した研究。 - VLA は pre-trained Vision-Language Models (VLMs) の表現を活用しロボット操作で高い能力を示すが、control actions や proprioceptive information といった robotic signals への感度が乏しいという問題を扱う。 - RS-CL は VLM 表現と robotic signals のギャップを埋めるための、シンプルかつ軽量な contrastive loss ベースの正則化。 - 既存の action prediction objective を補完し、標準的な VLA 学習パイプラインと互換。

2. 先行研究と比べてどこがすごい?

- 先行 VLA は VLM 表現をそのまま用いるため、robotic signals への感度が不十分という課題があった。 - RS-CL は robot の proprioceptive states との整合を図る点が新規で、state 間の相対距離を soft supervision として使う。 - 既存の action prediction 目的を置き換えず補完する形で、軽量かつ標準 VLA 学習パイプラインに完全互換という実用性が利点。 - 結果として prior art を RoboCasa-Kitchen benchmark で 69.7% に押し上げ、実機タスクで 45.0%→58.3% の成功率向上を報告。

3. 技術・手法の肝は?

- **RS-CL (Robot State-aware Contrastive Loss)** を VLA 学習に追加する representation regularization として導入。 - robot の proprioceptive states 間の相対距離を soft supervision として用い、VLM 表現を robot state に近づけるよう contrastive に整列。 - 元の action prediction objective と相補的に働き、control に関連する表現学習を強化。 - 軽量で、標準的な VLA training pipeline にそのまま組み込める設計。

4. どうやって有効だと検証した?

- 最先端 VLA モデルに RS-CL を適用し性能評価を実施。 - RoboCasa-Kitchen benchmark で prior art を 69.7% まで押し上げ、state-of-the-art 性能を達成。 - 難易度の高い real-robot manipulation tasks で成功率を 45.0% から 58.3% へ向上。 - 詳細な ablation や評価プロトコルは要旨からは不明。

5. 議論はある?

- RS-CL が control-relevant representation learning を強化し、VLA の性能を実質的に改善することを示唆。 - 軽量かつ標準パイプライン互換という設計上の利点を主張。 - ただし、どの robotic signals が最も効くか、他タスク・他 VLA への汎化性、失敗事例や限界については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な VLA モデル名は不明。関連手法として Vision-Language Models (VLMs)、Vision-Language-Action (VLA) models、contrastive learning、RoboCasa-Kitchen benchmark 周辺の研究を次に読む候補として挙げる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Taeyoung Kim, Jimin Lee, Myungkyu Koo, Dongyoung Kim, Kyungmin Lee, Changyeon Kim, Younggyo Seo, Jinwoo Shin

分類: cs.RO, cs.LG

原文アブストラクト

Vision-Language-Action (VLA) models have shown strong capabilities in robot manipulation by leveraging rich representations from pre-trained Vision-Language Models (VLMs). However, their representations arguably remain suboptimal, lacking sensitivity to robotic signals such as control actions and proprioceptive information. To address the issue, we introduce Robot State-aware Contrastive Loss (RS-CL), a simple and effective representation regularization for VLA models, designed to bridge the gap between VLM representations and robotic signals. In particular, RS-CL aligns the representations more closely with the robot's proprioceptive states by using relative distances between the states as soft supervision. Complementing the original action prediction objective, RS-CL enhances control-relevant representation learning, while being lightweight and fully compatible with standard VLA training pipelines. Our empirical results demonstrate that RS-CL substantially improves the performance of state-of-the-art VLA models; it pushes the prior art to 69.7% achieving the state-of-the-art performance on the RoboCasa-Kitchen benchmark, and boosts success rates from 45.0% to 58.3% on challenging real-robot manipulation tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI