日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

NASarXiv:2509.20688

RAM-NAS: ロボットビジョン向けリソース認識型多目的ニューラルアーキテクチャ探索

RAM-NAS: Resource-aware Multiobjective Neural Architecture Search Method for Robot Vision Tasks

シェア:XThreadsFacebookLINEはてブBluesky

ロボットのエッジハードウェアを考慮し、サブネット間の相互蒸留と遅延予測器を用いた多目的NASにより、精度と推論遅延のバランスを取る軽量モデルを自動設計する手法を提案。

詳しい要約

1. どんなもの?

- ロボット視覚タスク向けの resource-aware multi-objective NAS 手法 RAM-NAS の提案 - supernet の pretrain 改善とロボット実機ハードウェアのリソース考慮を狙う - 発見された RAM-NAS models は ImageNet で top-1 accuracy 76.7%〜81.4% を達成 - 下流の detection・segmentation でも 3 種類のロボット edge hardware 上で推論時間を削減

2. 先行研究と比べてどこがすごい?

- 従来 NAS は supernet の training が不十分で、実際の robot hardware resources への配慮が乏しいと指摘 - 提案は subnets mutual distillation と DKD loss で supernet pretrain を強化 - 3 種類の robotic edge hardware のデータで Latency Surrogate predictors を学習し、探索時に hardware inference latency を推定 - これにより accuracy と latency の trade-off を統一的な multi-objective evolutionary search で扱う - robot hardware resource-aware な NAS の空白を埋めると主張

3. 技術・手法の肝は?

- sandwich rule でサンプリングした全 subnets を相互に distill する subnets mutual distillation を導入 - logits distillation 性能向上のため Decoupled Knowledge Distillation (DKD) loss を使用 - 3 種類の robotic edge hardware のデータから Latency Surrogate predictors を学習 - 探索段階で predictors により hardware inference latency を推定 - accuracy と latency のバランスを取る unified multi-objective evolutionary search を実施

4. どうやって有効だと検証した?

- ImageNet で RAM-NAS models の top-1 accuracy 76.7%〜81.4% を報告 - 3 種類の edge hardware 上で inference latency が有意に削減されたと報告 - 下流タスク実験で手法の scalability を検証 - detection と segmentation の inference time が全 3 種類の hardware で MobileNetv3-based methods より短縮

5. 議論はある?

- 要旨からは不明(具体的な limitation や failure case の議論は記述なし) - robot hardware resource-aware NAS の必要性と有効性を強調 - latency 推定に surrogate predictors を用いる設計上の妥当性に関する詳細議論は要旨からは不明

6. 次に読むべき論文は?

- MobileNetv3(比較対象のベースライン手法) - sandwich rule を用いた once-for-all 系 NAS - Decoupled Knowledge Distillation (DKD) - Latency Surrogate predictor を用いる hardware-aware NAS 関連研究 - multi-objective evolutionary search を用いた NAS 関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shouren Mao, Minghao Qin, Wei Dong, Huajian Liu, Yongzhuo Gao

分類: cs.RO, cs.CV

原文アブストラクト

Neural architecture search (NAS) has shown great promise in automatically designing lightweight models. However, conventional approaches are insufficient in training the supernet and pay little attention to actual robot hardware resources. To meet such challenges, we propose RAM-NAS, a resource-aware multi-objective NAS method that focuses on improving the supernet pretrain and resource-awareness on robot hardware devices. We introduce the concept of subnets mutual distillation, which refers to mutually distilling all subnets sampled by the sandwich rule. Additionally, we utilize the Decoupled Knowledge Distillation (DKD) loss to enhance logits distillation performance. To expedite the search process with consideration for hardware resources, we used data from three types of robotic edge hardware to train Latency Surrogate predictors. These predictors facilitated the estimation of hardware inference latency during the search phase, enabling a unified multi-objective evolutionary search to balance model accuracy and latency trade-offs. Our discovered model family, RAM-NAS models, can achieve top-1 accuracy ranging from 76.7% to 81.4% on ImageNet. In addition, the resource-aware multi-objective NAS we employ significantly reduces the model's inference latency on edge hardware for robots. We conducted experiments on downstream tasks to verify the scalability of our methods. The inference time for detection and segmentation is reduced on all three hardware types compared to MobileNetv3-based methods. Our work fills the gap in NAS for robot hardware resource-aware.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI