日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2506.06630

能動的テスト時視覚言語ナビゲーション

Active Test-time Vision-Language Navigation

シェア:XThreadsFacebookLINEはてブBluesky

不確実なナビゲーション結果に対するエピソード的フィードバックを用いたテスト時能動学習フレームワークATENAを提案し、混合エントロピー最適化と自己能動学習戦略で適応的な意思決定を実現した。

詳しい要約

1. どんなもの?

- Vision-Language Navigation (VLN) のテスト時適応フレームワーク ATENA (Active TEst-time Navigation Agent) を提案する研究。 - offline dataset で学習した VLN policy が未知環境で性能劣化する問題に対処する。 - 不確実な navigation 結果に対して episodic feedback を与える human-robot interaction を想定した test-time active learning を導入する。 - 成功 episode では確信度を上げ、失敗 episode では下げるよう不確実性 calibration を行う。

2. 先行研究と比べてどこがすごい?

- 従来の test-time 手法である entropy minimization は、文脈的根拠なしに誤った action へ過信し、誤差が蓄積する問題があった。 - ATENA は単なる entropy 最小化ではなく、成功/失敗の episodic feedback を用いて不確実性 calibration を行う点が異なる。 - 外部 interaction や feedback なしで評価される従来設定に対し、実用的な human-robot interaction を組み込む点が新しい。 - 比較対象の baseline より様々な設定で優位と報告している。

3. 技術・手法の肝は?

- mixture entropy optimization を提案。entropy を action 分布と pseudo-expert 分布の組み合わせから計算する。 - pseudo-expert 分布は、agent が選んだ action を最適と仮定した仮想的な action 分布。 - これにより prediction confidence と action preference の両方を制御する。 - self-active learning strategy を提案し、agent が自信のある prediction に基づいて自身の navigation 結果を評価できるようにする。 - 結果として全 iteration で agent が能動的に関与し、根拠のある適応的な意思決定を実現する。

4. どうやって有効だと検証した?

- 難易度の高い VLN benchmark である REVERIE、R2R、R2R-CE で評価を実施。 - 様々な設定において比較 baseline 手法を上回ったと報告。 - test-time の distributional shifts を克服できたと述べている。 - 具体的な指標値や ablation の詳細は要旨からは不明。

5. 議論はある?

- entropy minimization の誤差蓄積・過信問題を mixture entropy optimization と episodic feedback で緩和する点を議論。 - human-robot interaction を前提とするため、feedback の質や取得コストに関する議論は要旨からは不明。 - self-active learning の評価基準の妥当性や限界については要旨からは不明。 - 各 benchmark での失敗事例や分布シフトの種類に関する詳細は要旨からは不明。

6. 次に読むべき論文は?

- entropy minimization を用いた test-time adaptation の関連研究。 - VLN の代表的 benchmark である REVERIE、R2R、R2R-CE に関する研究。 - test-time active learning や human-robot interaction を用いた適応手法。 - pseudo-expert や mixture entropy に関連する不確実性 calibration 研究。 - 具体的な参照論文は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Heeju Ko, Sungjune Kim, Gyeongrok Oh, Jeongyoon Yoon, Honglak Lee, Sujin Jang, Seungryong Kim, Sangpil Kim

分類: cs.RO, cs.AI

原文アブストラクト

Vision-Language Navigation (VLN) policies trained on offline datasets often exhibit degraded task performance when deployed in unfamiliar navigation environments at test time, where agents are typically evaluated without access to external interaction or feedback. Entropy minimization has emerged as a practical solution for reducing prediction uncertainty at test time; however, it can suffer from accumulated errors, as agents may become overconfident in incorrect actions without sufficient contextual grounding. To tackle these challenges, we introduce ATENA (Active TEst-time Navigation Agent), a test-time active learning framework that enables a practical human-robot interaction via episodic feedback on uncertain navigation outcomes. In particular, ATENA learns to increase certainty in successful episodes and decrease it in failed ones, improving uncertainty calibration. Here, we propose mixture entropy optimization, where entropy is obtained from a combination of the action and pseudo-expert distributions-a hypothetical action distribution assuming the agent's selected action to be optimal-controlling both prediction confidence and action preference. In addition, we propose a self-active learning strategy that enables an agent to evaluate its navigation outcomes based on confident predictions. As a result, the agent stays actively engaged throughout all iterations, leading to well-grounded and adaptive decision-making. Extensive evaluations on challenging VLN benchmarks-REVERIE, R2R, and R2R-CE-demonstrate that ATENA successfully overcomes distributional shifts at test time, outperforming the compared baseline methods across various settings.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI