日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2509.04970

DeGuV: 深度誘導による汎化と解釈性を両立する視覚強化学習マニピュレーション

DeGuV: Depth-Guided Visual Reinforcement Learning for Generalization and Interpretability in Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

深度入力を用いて重要領域だけをマスクする学習可能なネットワークを導入し、データ拡張下でも汎化性能とサンプル効率を高める視覚強化学習フレームワークを提案。Frankaロボットでゼロショットsim-to-real転移を実証。

詳しい要約

1. どんなもの?

- 視覚入力からの強化学習(RL)によるロボットマニピュレーションのためのフレームワーク「DeGuV」 - depth入力からmaskを生成するlearnable masker networkを導入 - 重要な視覚情報のみを保持し、無関係なpixelを破棄 - contrastive learningとQ-value推定の安定化を組み合わせる - 目的は汎化性能とsample efficiencyの両立、および解釈性の向上 - Franka Emika robotとRL-ViGen benchmarkで評価

2. 先行研究と比べてどこがすごい?

- 従来のdata augmentationは汎化を改善する一方でsample efficiencyやtraining stabilityを損なう問題があった - DeGuVはmasker networkで重要特徴に集中させることで、data augmentation下でもrobust性を確保 - contrastive learningとQ-value推定の安定化によりsample efficiencyとtraining stabilityも改善 - 結果としてstate-of-the-art手法を汎化性能とsample efficiencyの両面で上回る - さらに視覚入力中の重要領域を可視化でき解釈性も向上

3. 技術・手法の肝は?

- depth入力を用いたlearnable masker networkがmaskを生成 - 重要visual情報のみ保持し不要pixelを除去 - contrastive learningを組み込み表現学習を強化 - data augmentation下でのQ-value推定を安定化 - これらによりRL agentが本質的特徴に集中できるようにする - 具体的なnetwork構成や損失の詳細は要旨からは不明

4. どうやって有効だと検証した?

- RL-ViGen benchmark上でFranka Emika robotを用いて評価 - zero-shot sim-to-real transferの有効性を実証 - state-of-the-art手法と比較し汎化性能とsample efficiencyで優位 - 視覚入力中の最重要領域をhighlightすることで解釈性向上も確認

5. 議論はある?

- data augmentationがsample efficiencyとtraining stabilityを損なう点への対処が動機 - masker networkによる重要領域選択の有効性を示唆 - 解釈性向上はmaskの可視化に基づく - 限界や失敗事例、計算コスト、depth入力依存性などの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- RL-ViGen benchmark(比較対象) - 一般的なvisual RLにおけるdata augmentation手法(e.g., DrQ, RAD) - contrastive learningを用いたvisual representation学習 - sim-to-real transferに関する研究 - 具体的な参照論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tien Pham, Xinyun Chi, Khang Nguyen, Manfred Huber, Angelo Cangelosi

分類: cs.RO, cs.AI

原文アブストラクト

Reinforcement learning (RL) agents can learn to solve complex tasks from visual inputs, but generalizing these learned skills to new environments remains a major challenge in RL application, especially robotics. While data augmentation can improve generalization, it often compromises sample efficiency and training stability. This paper introduces DeGuV, an RL framework that enhances both generalization and sample efficiency. In specific, we leverage a learnable masker network that produces a mask from the depth input, preserving only critical visual information while discarding irrelevant pixels. Through this, we ensure that our RL agents focus on essential features, improving robustness under data augmentation. In addition, we incorporate contrastive learning and stabilize Q-value estimation under augmentation to further enhance sample efficiency and training stability. We evaluate our proposed method on the RL-ViGen benchmark using the Franka Emika robot and demonstrate its effectiveness in zero-shot sim-to-real transfer. Our results show that DeGuV outperforms state-of-the-art methods in both generalization and sample efficiency while also improving interpretability by highlighting the most relevant regions in the visual input

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI