日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2606.20491

自律ナビゲーションにおける注視誘導型能動知覚のための高速な人間の注意予測

Fast Human Attention Prediction for Fixation-guided Active Perception in Autonomous Navigation

シェア:XThreadsFacebookLINEはてブBluesky

液体ニューラルネットワークとMobileNetV3を用いた軽量な視線走査予測モデルGazeLNNを提案し、計算コストを99.4%削減しつつ最先端の精度を達成。さらに強化学習で訓練したカメラ制御ポリシーに統合し、実機ドローンでの自律ナビゲーションを実証した。

詳しい要約

1. どんなもの?

- 人間の視覚注意を模したscanpath予測モデルGazeLNNを提案。 - Liquid Neural Networksを再帰エンジン、MobileNetV3を特徴抽出に使用。 - 自己回帰的に逐次fixation heatmapを予測。 - 計算量0.61 GFLOPsで軽量。 - MIT Low Resolution datasetでScanMatch 0.47のSOTA。 - 既存再帰ベースラインより高精度、計算コスト99.40%削減、推論最大6倍高速化。 - 強化学習で訓練したactive camera-robot制御ポリシーに統合。 - 空中ロボットの実世界展開で人間fixation誘導知覚を検証。

2. 先行研究と比べてどこがすごい?

- 既存の予測モデルは計算コストが高く、ロボット自律への応用が初期段階。 - GazeLNNは0.61 GFLOPsと極めて軽量ながら、MIT Low Resolution datasetでScanMatch 0.47のSOTAを達成。 - 既存の再帰ベースラインを多様な評価指標で上回る。 - 計算コストを99.40%削減し、推論を最大6倍高速化。 - 軽量性と高性能を両立し、実ロボットへの統合を可能にした点が優位。

3. 技術・手法の肝は?

- Liquid Neural Networksを再帰エンジンとして採用。 - MobileNetV3で視覚特徴を抽出。 - 自己回帰的アーキテクチャで、現在の視覚刺激とfixation履歴に条件付けられた逐次fixation heatmapを予測。 - 予測されたscanpathを強化学習で訓練したactive camera-robot制御ポリシーに統合。 - これにより人間のfixationに誘導された知覚を自律ナビゲーション中に実現。

4. どうやって有効だと検証した?

- MIT Low Resolution datasetで評価し、ScanMatch 0.47のSOTAを達成。 - 既存の再帰ベースラインと多様な評価指標で比較し、優位性を確認。 - 計算コスト99.40%削減と推論最大6倍高速化を実測。 - 強化学習で訓練したactive camera-robot制御ポリシーにGazeLNNを統合。 - 空中ロボットによる実世界展開で、人間fixation誘導知覚が自律ナビゲーション中に機能することを検証。

5. 議論はある?

- 要旨からは、人間注意モデリングのロボット自律における役割や、GazeLNN統合の限界・課題についての具体的な議論は不明。 - 実世界展開の成功は報告されているが、詳細な議論や失敗事例、一般化可能性については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:既存の再帰ベースライン(具体的名称は要旨からは不明)。 - 関連手法:Liquid Neural Networks、MobileNetV3、Reinforcement Learning、active camera-robot control policy。 - 同分野の定番:scanpath prediction、visual attention modeling、autonomous navigation。 - 具体的な論文タイトルは要旨に記載がないため、上記の手法・分野をキーワードに関連論文を探索することを推奨。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fatma Youssef Mohammed, Grzegorz Malczyk, Kostas Alexis

分類: cs.RO, cs.CV

原文アブストラクト

Human visual attention relies on structured scanpaths to efficiently process scenes, yet instilling this behavior into robot autonomy is in its infancy and hindered by the high,computational costs of existing predictive models. To address this, we introduce GazeLNN, a computationally lightweight,scanpath prediction model that leverages Liquid Neural Networks as its recurrent engine and employs MobileNetV3 for feature extraction. Operating auto-regressively, the architecture predicts sequential fixation heatmaps conditioned on the current visual stimulus and fixation history. Despite requiring only 0.61 GFLOPs, GazeLNN achieves state-of-the-art performance on the MIT Low Resolution dataset achieving 0.47 ScanMatch score. It outperforms existing recurrent baselines across diverse evaluation metrics, while reducing computational costs by 99.40% and accelerating inference by up to six times. To investigate the role of human attention modeling in robot autonomy and demonstrate the practical utility of this highly efficient architecture, we integrate GazeLNN into an active camera-robot control policy trained via Reinforcement Learning. This integration enables human-fixation-guided perception during autonomous navigation, validated through successful real-world deployments on an aerial robot.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI