日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2607.10383

ABot-N1: 汎用視覚言語ナビゲーション基盤モデルへの一歩

ABot-N1: Toward a General Visual Language Navigation Foundation Model

シェア:XThreadsFacebookLINEはてブBluesky

視覚と言語を統合したナビゲーション基盤モデルABot-N1を提案。認知と制御を分離し、ピクセル目標と明示的な推論で汎用性・堅牢性・解釈性を両立する。

詳しい要約

1. どんなもの?

- ABot-N1は、Visual Language Navigation (VLN) の foundation model を目指す研究。 - 認知と制御を分離する slow-fast アーキテクチャを採用。 - slow な vision-language reasoner が Chain-of-Thought 推論を行い pixel goal を生成。 - fast な action expert がテキスト手がかりと pixel 誘導から連続 waypoint を生成。 - point-goal, object-goal, poi-goal, instruction-following, person-following を統合。 - 都市規模ナビゲーションで POI arrival 35.0% 向上 (77.3%)、屋内/屋外で 95.4%/92.9% SR を達成。

2. 先行研究と比べてどこがすごい?

- 従来は monolithic policy で観測から直接行動を写像し、coordinate drift や long-tail semantics に弱かった。 - ブラックボックスで解釈性が低く、汎用性・頑健性・透明性の同時達成が困難だった。 - ABot-N1 は pixel-grounded anchors と明示的言語トレースでこれらを橋渡し。 - 都市規模ナビゲーションで大幅改善 (POI arrival +35.0%) し、新たな SOTA を記録。 - 複数タスクで優れた頑健性を維持。

3. 技術・手法の肝は?

- slow-fast アーキテクチャで cognition と control を分離。 - slow vision-language reasoner が明示的 Chain-of-Thought 推論を行い pixel goal を出力。 - pixel goal は画像空間の anchor points で、多様なタスクの共通インターフェース。 - fast action expert がテキスト cues と pixel guidance を活用し、native control frequency で連続 waypoint を生成。 - 高レベル意図と低レベル制御を pixel-grounded anchors と言語トレースで接続。

4. どうやって有効だと検証した?

- simulation と real-world benchmarks で評価。 - 都市規模ナビゲーションで POI arrival が 35.0% 向上し 77.3% に。 - 複雑な屋内・屋外シーンで 95.4%/92.9% の SR を達成。 - object-reaching, person-following, instruction-following でも優れた頑健性を維持。 - 新たな Point-Goal/POI-Goal benchmarks をオープンソースで公開。

5. 議論はある?

- 要旨からは不明。 - ただし、coordinate drift や long-tail semantics の改善、解釈性の向上が主張されている。 - 都市規模ナビゲーションの新ベンチマーク公開で分野進展を促す。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として Visual Language Navigation (VLN) の foundation model、monolithic policy、Chain-of-Thought reasoning、slow-fast architecture が挙げられる。 - 同分野の定番として Vision-and-Language Navigation (VLN) や Embodied AI の研究が次に読むべき候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruiyan Gong, Yingnan Guo, Junjun Hu, Jintao Kong, Xiaoxu Leng, Tianlun Li, Weize Li, Fei Liu, Zhicheng Liu, Jia Lu, Minghua Luo, Chenlin Ming, Yanfen Shen, Jiyue Tao, Zhengbo Wang, Mingyang Yin, Minqi Gu, Zihao Guan, Wei Guo, Guoqing Liu, Huachong Pang, Menglin Yang, Zeqian Ye, Xiaoxiao Geng, Zhining Gu, Honglin Han, Di Jing, Hongyu Pan, Mingchao Sun, Kuan Yang, Jianfang Zhang, Yanghong Chen, Ye He, Wei Mei, Jiahao Shi, Xiangpo Yang, Yanqing Zhu, Yang Cai, Jingjing Ma, Shihui Su, Zixiao Tang, Linbo Zheng, Zedong Chu, Xiaolong Wu, Wenbin Tang, Mu Xu

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

Visual Language Navigation foundation models aim to unify deep reasoning for grounded spatial decisions with broad versatility for diverse embodied tasks. Current approaches typically achieve this integration via monolithic policies that map observations directly to actions, yet they often suffer from coordinate drift and poor handling of long-tail semantics. Furthermore, these black-box mappings lack interpretability, hindering the simultaneous achievement of generality, robustness, and transparency. We present ABot-N1, a step toward a general Visual Language Navigation foundation model, that addresses these challenges by decoupling cognition from control via a slow-fast architecture guided by dual visual-language signals. More specifically, a slow vision-language reasoner performs explicit Chain-of-Thought reasoning while producing a pixel goal. This compact set of image-space anchor points serves as a universal interface for diverse tasks, including point-goal, object-goal, poi-goal, instruction-following, and person-following. Subsequently, a fast action expert leverages both the textual cues and the pixel guidance to generate continuous waypoints at the native control frequency. By bridging high-level intents and low-level control through pixel-grounded anchors paired with explicit linguistic traces, our approach ensures robust, generalizable, and interpretable navigation across simulation and real-world benchmarks. ABot-N1 establishes new state-of-the-art records, delivering massive gains specifically in urban-scale navigation: boosting POI arrival by 35.0% (to 77.3%) and achieving 95.4%/92.9% SR in complex indoor and outdoor scenes. It also maintains superior robustness across object-reaching, person-following, and instruction-following tasks. New Point-Goal/POI-Goal benchmarks are released as open source to advance the field of urban-scale navigation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI