日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2505.05592

モデルベース再アノテーションによるどこでも走行学習

Learning to Drive Anywhere with Model-Based Reannotation

シェア:XThreadsFacebookLINEはてブBluesky

クラウドソースの遠隔操作データや未ラベルのYouTube動画を、学習したモデルベース専門家で再ラベル付けし、長距離ナビゲーション方策LogoNavを訓練して未知環境でのロバストな走行を実現した。

詳しい要約

1. どんなもの?

- ロボット向けの広く汎化するvisual navigation policyの学習手法 - 大規模で多様な学習データの不足が主な制約 - 研究者が収集したcurated datasetは高品質だが規模が限られ汎化を妨げる - 受動的に収集されたデータを活用する枠組み - crowd-sourced teleoperation dataやunlabeled YouTube videosを利用 - 品質が低い、またはaction labelsが欠けている可能性があるデータ - Model-Based ReAnnotation (MBRA) を提案 - 学習済みのshort-horizon, model-based expert modelで高品質なactionをrelabel/生成 - 再ラベルデータをLogoNavへdistill - visual goalsまたはGPS waypointsを条件とするlong-horizon navigation policy

2. 先行研究と比べてどこがすごい?

- 従来は研究者が収集したcurated datasetに依存 - 高品質だが規模が限られ、policyの汎化を制約 - 本研究は豊富な受動的データ源を活用 - crowd-sourced teleoperation dataとunlabeled YouTube videos - 低品質やaction labels欠如があっても利用可能 - MBRAで高品質actionをrelabel/生成しdistill - LogoNavはMBRA処理データで学習しstate-of-the-art性能 - 未見の屋内・屋外環境で300m超の距離をrobustにナビゲーション - 6都市・3大陸のrobot fleet(quadrupeds含む)で実世界評価 - 群衆中の歩行者がいる混雑環境でも汎化・ナビゲーションを実証

3. 技術・手法の肝は?

- Model-Based ReAnnotation (MBRA) フレームワーク - 学習済みのshort-horizon, model-based expert modelを利用 - 受動的データセットのactionをrelabelまたは高品質actionを生成 - 対象データ - crowd-sourced teleoperation data - unlabeled YouTube videos - 再ラベル済みデータをLogoNavへdistill - LogoNavはlong-horizon navigation policy - visual goalsまたはGPS waypointsを条件とする - 詳細なmodel architectureや学習手順は要旨からは不明

4. どうやって有効だと検証した?

- MBRA処理データで学習したLogoNavの性能を評価 - state-of-the-art性能を達成と報告 - 未見の屋内・屋外環境で300m超の距離をrobustにナビゲーション - 実世界評価 - 6都市・3大陸にわたるrobot fleet(quadrupeds含む) - 歩行者がいる混雑設定でも汎化・ナビゲーション能力を検証 - 定量的な比較指標やbaselineの詳細は要旨からは不明

5. 議論はある?

- 受動的データの品質やaction labels欠如への対処がMBRAの動機 - 低品質データでもexpert modelによるrelabelで高品質化できる可能性 - 300m超・未見環境・混雑環境での実世界汎化を主張 - 限界や失敗事例、計算コスト、expert model依存性などの議論は要旨からは不明 - 定量的なablationや比較の詳細は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 関連手法として以下が候補 - crowd-sourced teleoperation dataを用いた模倣学習 - unlabeled YouTube videosを用いたvisual navigation学習 - model-based expertによるrelabeling(reannotation) - visual goals/GPS waypoints条件付きlong-horizon navigation policy - quadruped robotの実世界ナビゲーション評価

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Noriaki Hirose, Lydia Ignatova, Kyle Stachowicz, Catherine Glossop, Sergey Levine, Dhruv Shah

分類: cs.RO, cs.CV, cs.LG, cs.SY, eess.SY

原文アブストラクト

Developing broadly generalizable visual navigation policies for robots is a significant challenge, primarily constrained by the availability of large-scale, diverse training data. While curated datasets collected by researchers offer high quality, their limited size restricts policy generalization. To overcome this, we explore leveraging abundant, passively collected data sources, including large volumes of crowd-sourced teleoperation data and unlabeled YouTube videos, despite their potential for lower quality or missing action labels. We propose Model-Based ReAnnotation (MBRA), a framework that utilizes a learned short-horizon, model-based expert model to relabel or generate high-quality actions for these passive datasets. This relabeled data is then distilled into LogoNav, a long-horizon navigation policy conditioned on visual goals or GPS waypoints. We demonstrate that LogoNav, trained using MBRA-processed data, achieves state-of-the-art performance, enabling robust navigation over distances exceeding 300 meters in previously unseen indoor and outdoor environments. Our extensive real-world evaluations, conducted across a fleet of robots (including quadrupeds) in six cities on three continents, validate the policy's ability to generalize and navigate effectively even amidst pedestrians in crowded settings.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI