日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2605.29564

VE2VF: 実世界強化学習による視覚有効から視覚不要への蒸留による頑健な接触リッチ操作

VE2VF: Vision-Enabled to Vision-Free Distillation via Real-world Reinforcement Learning for Robust Contact-Rich Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

実世界での人間参加型強化学習により、視覚を使う教師ポリシーから視覚を使わない学生ポリシーへ知識を蒸留し、接触を伴う操作タスクの頑健性と汎化を高める手法を提案した。

詳しい要約

1. どんなもの?

- 実世界での強化学習(RL)による接触リッチなロボットマニピュレーションのためのフレームワーク。 - 視覚情報を利用するteacherから、視覚を使わないstudentへの蒸留を行う。 - studentはpose, twist, wrenchセンシングのみに依存。 - 実世界で完全に訓練され、domain randomizationやdata augmentationを必要としない。 - NIST assembly benchmark boardで評価。

2. 先行研究と比べてどこがすごい?

- 従来の視覚ベースのポリシーは訓練時の視覚条件に過適合し、ロバスト性や転移性が限られる。 - 提案手法は視覚なしでpose, twist, wrenchのみを使用し、高速訓練と強いタスク汎化を両立。 - domain randomizationやdata augmentationなしで実世界訓練を実現。 - 8つの未見タスク変種へのロバストな汎化を達成。

3. 技術・手法の肝は?

- human-in-the-loop RLフレームワークを採用。 - teacher-student distillationを利用:視覚対応teacherが知識を視覚なしstudentに蒸留。 - studentはpose, twist, wrenchセンシングのみを使用。 - 実世界で訓練され、ドメインランダム化やデータ拡張は不要。 - 蒸留によるファインチューニングで最も難しいタスクでも完全成功を達成。

4. どうやって有効だと検証した?

- 実世界のNIST assembly benchmark boardで評価。 - 3つの代表タスクで約50分の訓練後、全体成功率95%を達成。 - 8つの未見タスク変種へのロバストな汎化を確認。 - 最も難しいタスクでは蒸留によるファインチューニングで完全成功。 - ベースラインと比較してロバスト性と適応性で優位性を実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてteacher-student distillation、human-in-the-loop RL、NIST assembly benchmarkが挙げられる。 - 同分野の定番としてdomain randomization、data augmentation、vision-based RLが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Victor Kowalski, Chengxi Li, Dongheui Lee

分類: cs.RO

原文アブストラクト

When using reinforcement learning (RL) for contact-rich robotic manipulation, vision can provide task-relevant information that accelerates learning beyond what proprioception alone can achieve. However, vision-enabled policies tend to overfit to the visual conditions seen during training, limiting their robustness and transferability. We present a human-in-the-loop RL framework that employs teacher-student distillation to achieve robust performance across multiple task variants, trained entirely in the real world without requiring domain randomization or data augmentation. A vision-enabled teacher distills its knowledge into a vision-free student that relies solely on pose, twist, and wrench sensing, combining fast training with strong task generalization. On the real-world NIST assembly benchmark board, our approach achieves 95\% overall success after approximately 50 minutes of training on 3 representative tasks, including robust generalization to 8 unseen task variants. Fine-tuning with distillation achieves full success on the most challenging task. We demonstrate that the resulting policies outperform baselines in both robustness and adaptability.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI