日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2604.00416

人間データから学ぶヒューマノイドのナビゲーション

Learning Humanoid Navigation from Human Data

シェア:XThreadsFacebookLINEはてブBluesky

人間の歩行データのみから学習し、未知環境を移動できるヒューマノイドロボットのナビゲーションシステムを提案した。

詳しい要約

1. どんなもの?

- 人型ロボットのナビゲーションシステム EgoNav を提案 - 5時間の人間歩行データのみで学習し、ロボットデータや finetuning を一切使わない - 多様で未見の環境を横断できるようにする - diffusion model で将来の軌道分布を予測 - 過去軌道、360度の視覚メモリ(色・depth・semantics を統合)、frozen DINOv3 backbone の video features を条件とする - hybrid sampling で10 denoising steps のリアルタイム推論 - receding-horizon controller が予測分布から経路を選択

2. 先行研究と比べてどこがすごい?

- ロボットデータや finetuning を必要とせず、人間の歩行データのみで学習 - 5時間という限られた人間データで未見環境にゼロショット展開 - 従来の depth センサでは捉えられない外観手がかりを frozen DINOv3 の video features で補完 - offline 評価で collision avoidance と multi-modal coverage において baselines を上回る - 具体的な先行研究名は要旨からは不明

3. 技術・手法の肝は?

- diffusion model による将来軌道分布の予測 - 条件: 過去軌道、360度視覚メモリ(color, depth, semantics の融合)、frozen DINOv3 backbone の video features - hybrid sampling scheme により10 denoising steps でリアルタイム推論を実現 - receding-horizon controller が予測分布から経路を選択 - 学習は人間歩行データのみ、ロボットデータや finetuning なし

4. どうやって有効だと検証した?

- offline 評価で collision avoidance と multi-modal coverage において baselines を上回る - Unitree G1 humanoid へのゼロショット展開を未見の屋内・屋外環境で実施 - ドアが開くのを待つ、群衆を避ける、ガラス壁を避けるといった行動が学習された prior から自然に創発 - dataset と trained models を公開予定

5. 議論はある?

- 人間データのみで学習した prior から待機・群衆回避・ガラス壁回避などの行動が自然に創発 - 具体的な限界や議論の詳細は要旨からは不明 - dataset と trained models の公開を予定

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な研究名は記載されていない - 関連手法として diffusion model、DINOv3、receding-horizon control が挙げられる - 同分野の定番として humanoid navigation、visual navigation、imitation learning に関する研究が次に読むべき候補

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Weizhuo Wang, Yanjie Ze, C. Karen Liu, Monroe Kennedy

分類: cs.RO, cs.AI, cs.CV, cs.LG

原文アブストラクト

We present EgoNav, a system that enables a humanoid robot to traverse diverse, unseen environments by learning entirely from 5 hours of human walking data, with no robot data or finetuning. A diffusion model predicts distributions of plausible future trajectories conditioned on past trajectory, a 360 deg visual memory fusing color, depth, and semantics, and video features from a frozen DINOv3 backbone that capture appearance cues invisible to depth sensors. A hybrid sampling scheme achieves real-time inference in 10 denoising steps, and a receding-horizon controller selects paths from the predicted distribution. We validate EgoNav through offline evaluations, where it outperforms baselines in collision avoidance and multi-modal coverage, and through zero-shot deployment on a Unitree G1 humanoid across unseen indoor and outdoor environments. Behaviors such as waiting for doors to open, navigating around crowds, and avoiding glass walls emerge naturally from the learned prior. We will release the dataset and trained models. Our website: https://egonav.weizhuowang.com

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI