日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2601.22467

CARE: ロボット制御のための連続潜在行動表現のマルチタスク事前学習

CARE: Multi-Task Pretraining for Latent Continuous Action Representation in Robot Control

シェア:XThreadsFacebookLINEはてブBluesky

行動ラベルなしで動画とテキストのペアのみから連続的な潜在行動表現を学習し、少数のラベル付きデータで微調整することでロボット制御を実現するフレームワークを提案。

詳しい要約

1. どんなもの?

- どんなもの? - VLAモデルをロボット制御向けに訓練する新フレームワークCARE。 - 事前学習でaction annotationを不要にし、video-text pairsのみを利用。 - 連続潜在action表現を学習し、微調整でaction headを訓練。

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 既存VLAはaction supervisionに依存し、スケーラビリティと汎化が制限。 - CAREは明示的action labelsを排除し、弱監督で学習可能。 - 成功率高く、semantic interpretabilityとshortcut learning回避を実現。

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - video-text pairsという弱く整列したデータを活用。 - 新設計のmulti-task pretraining objectiveで連続潜在action表現を学習。 - 微調整では少量のラベル付きデータでaction headを訓練。

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - 各種シミュレーションタスクで実験。 - 成功率、semantic interpretability、shortcut learning回避を評価。 - 結果はスケーラビリティ、解釈性、有効性を示す。

5. 議論はある?

- 議論はある? - 要旨からは不明。 - 限界や課題についての言及はない。

6. 次に読むべき論文は?

- 次に読むべき論文は? - Vision-Language-Action (VLA) models - 関連手法としてaction supervisionに依存する既存研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiaqi Shi, Xulong Zhang, Xiaoyang Qu, Jianzong Wang

分類: cs.RO, cs.CV

原文アブストラクト

Recent advances in Vision-Language-Action (VLA) models have shown promise for robot control, but their dependence on action supervision limits scalability and generalization. To address this challenge, we introduce CARE, a novel framework designed to train VLA models for robotic task execution. Unlike existing methods that depend on action annotations during pretraining, CARE eliminates the need for explicit action labels by leveraging only video-text pairs. These weakly aligned data sources enable the model to learn continuous latent action representations through a newly designed multi-task pretraining objective. During fine-tuning, a small set of labeled data is used to train the action head for control. Experimental results across various simulation tasks demonstrate CARE's superior success rate, semantic interpretability, and ability to avoid shortcut learning. These results underscore CARE's scalability, interpretability, and effectiveness in robotic control with weak supervision.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI