日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2508.08743

ラベルなしロボット動画に対する変分ボトルネックによる行動情報の強化

Boosting Action-Information via a Variational Bottleneck on Unlabelled Robot Videos

シェア:XThreadsFacebookLINEはてブBluesky

行動ラベルなしのロボット動画から、潜在行動と真の行動の相互情報量を最大化する変分情報ボトルネックを提案し、模倣学習の性能を向上させた。

詳しい要約

1. どんなもの?

- ラベル付き行動データに依存せず、未ラベルのロボット動画から学習する LfD の新フレームワーク - 既存の未ラベル動画学習法が真の行動と相互情報量の小さい latent action を符号化し制御性能を損なう問題を指摘 - latent action と真の行動の相互情報量を明示的に最大化する手法を提案 - variational information-bottleneck を用いて行動関連表現を抽出し、タスク無関係情報を捨てる - 目的関数が相互情報量を実際に最大化することを理論解析で示す - シミュレーションと実機ロボットで有効性を検証

2. 先行研究と比べてどこがすごい?

- 従来の LfD は大量の action-labeled expert trajectories を前提とし、データ規模が制約される - 未ラベル動画からの学習は代替手段だが、既存法は latent action と真の行動の mutual information が小さい - 提案法は行動ラベル無しでも latent action と真の行動の相互情報量を明示的に最大化する点が新しい - variational information-bottleneck により行動関連情報を保持しつつタスク無関係情報を棄却 - 理論的に相互情報量最大化を保証する解析を与えている点が先行研究との差異 - 実験で相互情報量の向上と policy performance の一貫した改善を示す

3. 技術・手法の肝は?

- variational information-bottleneck を未ラベルロボット動画に適用する枠組み - latent action と真の行動の相互情報量を最大化する目的関数を設計 - 行動ラベルが無い状況でも相互情報量を高める定式化 - タスク無関係情報を棄却し行動関連表現を抽出するボトルネック構造 - 提案目的が相互情報量を最大化することを理論解析で示す - 詳細なネットワーク構成や最適化手順は要旨からは不明

4. どうやって有効だと検証した?

- シミュレーションのロボット環境で実験 - 実世界のロボットプラットフォームでも実験 - 相互情報量が有意に向上することを確認 - policy performance が一貫して改善することを示す - 具体的なベースライン、指標、タスク数は要旨からは不明

5. 議論はある?

- 未ラベル動画からの学習における相互情報量の重要性を議論 - 既存法の latent action が真の行動と相互情報量を共有しにくい点を問題視 - variational information-bottleneck によるタスク無関係情報の棄却の効果を議論 - 理論解析と実験の両面から目的関数の妥当性を主張 - 限界や失敗事例、計算コスト、実機での詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な既存手法名は不明 - 関連手法として LfD、unlabeled video demonstrations からの学習、latent action 学習、variational information-bottleneck を挙げる - 同分野の定番として imitation learning、behavior cloning、representation learning from video を挙げる - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haoyu Zhang, Long Cheng

分類: cs.RO

原文アブストラクト

Learning from demonstrations (LfD) typically relies on large amounts of action-labeled expert trajectories, which fundamentally constrains the scale of available training data. A promising alternative is to learn directly from unlabeled video demonstrations. However, we find that existing methods tend to encode latent actions that share little mutual information with the true robot actions, leading to suboptimal control performance. To address this limitation, we introduce a novel framework that explicitly maximizes the mutual information between latent actions and true actions, even in the absence of action labels. Our method leverage the variational information-bottleneck to extract action-relevant representations while discarding task-irrelevant information. We provide a theoretical analysis showing that our objective indeed maximizes the mutual information between latent and true actions. Finally, we validate our approach through extensive experiments: first in simulated robotic environments and then on real-world robotic platforms, the experimental results demonstrate that our method significantly enhances mutual information and consistently improves policy performance.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI