日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

エッジAI/イベントビジョンarXiv:2607.06739

組み込みイベントベースビジョンのためのハードウェア認識型グラフニューラルネットワーク枝刈り

Hardware-aware Graph Neural Networks prunning for embedded event-based vision

シェア:XThreadsFacebookLINEはてブBluesky

イベントカメラ用のグラフ畳み込みニューラルネットワークを、FPGAなどの組み込みプラットフォームに適応させるため、ハードウェア認識型の枝刈りと量子化を提案し、メモリ使用量と精度のトレードオフを最適化した。

詳しい要約

1. どんなもの?

イベントベースカメラ向けの組み込みFPGAプラットフォーム上で動作するGraph Convolutional Neural Networks (GCNNs)のモデル圧縮・最適化手法を提案した研究。ハードウェア認識型のpruningとquantizationを組み合わせ、オンチップメモリ使用量と推論精度のトレードオフを考慮しながら、モデルアーキテクチャをターゲットプラットフォームに適応させる。

2. 先行研究と比べてどこがすごい?

従来のGCNN圧縮手法はハードウェア制約を考慮しないことが多く、組み込みFPGAへの実装時に非効率が生じる。本研究は、ハードウェア認識型のpruningとquantizationを導入し、オンチップメモリ(BRAM)削減と精度低下のバランスを明示的に最適化する点が新しい。また、設計空間探索にFine Grid SearchとGreedy layer-wise Iterative Deepening Searchを用いることで、プラットフォームに柔軟に適応できる点が優れている。

3. 技術・手法の肝は?

手法の核心は、ハードウェア認識型のpruningとquantizationを組み合わせた最適化戦略。具体的には、オンチップメモリ(BRAM)の使用量を削減するために、各層のpruning率とquantizationビット幅を調整する。設計空間探索には、Fine Grid SearchとGreedy layer-wise Iterative Deepening Searchを採用し、精度とメモリ使用量のトレードオフを考慮しながら最適な構成を探索する。

4. どうやって有効だと検証した?

複数のネットワーク構成とデータセット(CIFAR-10、MNIST-DVS、N-Caltech101)で評価。結果として、CIFAR-10ではBRAMメモリを28.8%削減(精度低下1.65%)、MNIST-DVSでは31.4%削減(精度低下3.55%)、N-Caltech101では26.5%削減(精度低下5.18%)を達成した。

5. 議論はある?

要旨からは、精度低下とメモリ削減のトレードオフに関する議論が示唆されるが、具体的な議論内容は不明。また、提案手法が他のハードウェアプラットフォームやモデルアーキテクチャにどの程度一般化できるかは要旨からは不明。

6. 次に読むべき論文は?

要旨で参照されている関連研究は明示されていないが、同分野の定番として、Graph Neural Networks (GNNs)の圧縮手法や、ハードウェア認識型のNeural Architecture Search (NAS)、FPGA向けのモデル圧縮に関する論文が挙げられる。具体的には、"Pruning and Quantization for Deep Neural Network Acceleration"や"Hardware-Aware Neural Architecture Search"などの研究が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Piotr Wzorek, Kamil Jeziorek, Tomasz Kryjak

分類: cs.CV

原文アブストラクト

Event-based cameras are gaining popularity as the sensor of choice for mobile robotics, due to their high performance in dynamic environments. However, these applications require efficient real-time data processing with low latency and power consumption. One strategy to meet these stringent requirements is hardware acceleration of efficient algorithms that preserve the temporal sparsity of event data. In this work, we propose an optimization strategy for Graph Convolutional Neural Networks models aimed at adapting their architecture to the limited resources of embedded heterogeneous FPGA platforms. Our method incorporates hardware-aware pruning and quantization, taking into account the trade-off between on-chip memory savings and inference accuracy. Strategic exploration of the design space with Fine Grid Search and Greedy layer-wise Iterative Deepening Search methods enables flexible adaptation of the model architecture to the target platform. Our approach was evaluated across various network configurations and multiple datasets, resulting in BRAM memory reductions of 28.8% for CIFAR-10 (with a 1.65% decrease in accuracy), 31.4% for MNIST-DVS (accuracy drop of 3.55%), and 26.5% for N-Caltech101 (with a 5.18% accuracy reduction).

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI