日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

知識蒸留/移動ロボットarXiv:2603.20679

全方位視点とクロスモダリティ知識蒸留による移動ロボットの視覚ベース方策の強化

Enhancing Vision-Based Policies with Omni-View and Cross-Modality Knowledge Distillation for Mobile Robots

シェア:XThreadsFacebookLINEはてブBluesky

全方位深度画像を持つ教師方策から、軽量な単眼カメラ方策へ知識蒸留を行い、シーン転移性とナビゲーション性能を向上させる手法を提案した。

詳しい要約

1. どんなもの?

- 軽量なモバイルロボット向けの視覚ベース政策を改善する研究。 - シーン転移性、オンボード計算資源、センサハードウェアコストのトレードオフ(trilemma)を解決する。 - 情報豊富で外観不変な omniview depth policy から軽量な monocular policy へ知識蒸留する手法を提案。 - 学生は専門家の行動模倣だけでなく、omni view depth teacher の潜在埋め込みに整合するよう訓練される。

2. 先行研究と比べてどこがすごい?

- 従来の単一視点単眼政策と比較して、提案蒸留法が性能を向上させる。 - 行動のみを模倣する政策と比べ、潜在埋め込み整合により性能が向上。 - omniview と depth 入力がシーン転移とナビゲーション性能を改善することを示す。 - 実世界実験で有効性と実用性を検証。

3. 技術・手法の肝は?

- omniview depth policy(教師)から monocular policy(学生)への知識蒸留。 - 学生は専門家の行動を模倣するだけでなく、教師の潜在埋め込みに整合するよう訓練。 - 教師は情報豊富で外観不変な omniview depth 入力を使用。 - 学生は軽量な単眼視覚入力のみを使用。

4. どうやって有効だと検証した?

- 実験により omniview と depth 入力がシーン転移とナビゲーション性能を改善することを示す。 - 提案蒸留法が単一視点単眼政策の性能を、行動模倣のみの政策と比較して向上させることを示す。 - 実世界実験で有効性と実用性を検証。 - コードは公開予定。

5. 議論はある?

- 要旨からは不明。 - 限界や今後の課題についての議論は要旨に記載なし。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として knowledge distillation、omniview depth policy、monocular policy、vision-based policies が挙げられる。 - 同分野の定番として imitation learning、behavior cloning、depth-based navigation などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kai Li, Shiyu Zhao

分類: cs.RO

原文アブストラクト

Vision-based policies are widely applied in robotics for tasks such as manipulation and locomotion. On lightweight mobile robots, however, they face a trilemma of limited scene transferability, restricted onboard computation resources, and sensor hardware cost. To address these issues, we propose a knowledge distillation approach that transfers knowledge from an information-rich, appearance invariant omniview depth policy to a lightweight monocular policy. The key idea is to train the student not only to mimic the expert actions but also to align with the latent embeddings of the omni view depth teacher. Experiments demonstrate that omni-view and depth inputs improve the scene transfer and navigation performance, and that the proposed distillation method enhances the performance of a singleview monocular policy, compared with policies solely imitating actions. Real world experiments further validate the effectiveness and practicality of our approach. Code will be released publicly.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI