日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

オプティカルフローarXiv:2610.33338

TinyFlow: エッジ向けオプティカルフローのワープボトルネック解消

TinyFlow: Breaking the Warping Bottleneck for Edge Optical Flow

シェア:XThreadsFacebookLINEはてブBluesky

ワープ処理を固定窓相関に置き換え、単一の静的INT8グラフとしてコンパイル可能な軽量オプティカルフロー網を提案。エッジ機器での高精度フロー推定と視覚オドメトリを実現。

詳しい要約

1. どんなもの?

- TinyFlowは、リソース制約のあるedge accelerator向けの軽量optical flowネットワーク - パラメータ数1.26Mのwarp-free設計 - iterative coarse-to-fine refinementを維持しつつ、warpを固定window correlation over constant offsetsに置換 - ネットワーク全体を単一のstatic INT8 graphとしてコンパイル可能 - INT8モデルでSintel Clean/Finalにおいて6.29/7.13 EPEを達成

2. 先行研究と比べてどこがすごい?

- 従来の高性能optical flowネットワークは、flow-dependent resamplingとdata-dependent memory accessを伴うwarpのためedge acceleratorへの展開が困難だった - TinyFlowはwarpを排除しstatic INT8 graph化を可能にした点が新しい - EdgeFlowNetおよびNanoFlowNetをSintel Clean、Sintel Final、FlyingChairsでFloat32/INT8両方で上回る - EdgeFlowNetより54%少ないパラメータ数 - Float32からINT8への精度低下を0.2 EPE未満に抑えた

3. 技術・手法の肝は?

- warpを固定window correlation over constant offsetsに置き換え、flow依存のresamplingとdata-dependent memory accessを排除 - iterative coarse-to-fine refinementの構造は保持 - 全体を単一のstatic INT8 graphとしてコンパイル可能な設計 - Quantization-aware fine-tuningを実施 - warp-teacher distillationを利用 - model soupingを適用しINT8化の精度低下を抑制

4. どうやって有効だと検証した?

- MPI-SintelでFloat32からINT8への精度低下が0.2 EPE未満であることを確認 - Sintel Clean、Sintel Final、FlyingChairsでEdgeFlowNetおよびNanoFlowNetと比較し、Float32/INT8両方で優位 - INT8モデルでSintel Clean/Finalにおいて6.29/7.13 EPEを達成 - TartanAirとUZH-FPVでのflow-only monocular visual odometryにおいて、同一INT8モデルが11シーケンス中7つで最低のtrajectory errorを記録

5. 議論はある?

- 要旨からは不明 - warp-free化による精度面の限界や、固定window correlation over constant offsetsが大変位や複雑な動きに与える影響についての議論は要旨に記載なし - edge accelerator上での実測latencyや消費電力に関する議論も要旨からは不明

6. 次に読むべき論文は?

- EdgeFlowNet - NanoFlowNet - MPI-Sintel、FlyingChairs、TartanAir、UZH-FPVを用いたoptical flow研究 - warp-teacher distillationやmodel souping、quantization-aware fine-tuningに関する研究 - flow-only monocular visual odometryの関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiao'ao Song, Chahat Deep Singh

分類: cs.RO, cs.CV

原文アブストラクト

High-performance optical flow networks are difficult to deploy on resource-constrained edge accelerators because their iterative refinement warps features by the current flow, which relies on flow-dependent resampling and data-dependent memory access. We present TinyFlow, a 1.26M-parameter warp-free optical flow network that preserves iterative coarse-to-fine refinement by replacing the warp with a fixed-window correlation over constant offsets, so the whole network compiles as a single static INT8 graph. Quantization-aware fine-tuning, warp-teacher distillation, and model souping reduce the Float32-to-INT8 penalty to below 0.2 end-point error (EPE) on MPI-Sintel. TinyFlow outperforms EdgeFlowNet and NanoFlowNet on Sintel Clean, Sintel Final, and FlyingChairs in both Float32 and INT8, while using 54% fewer parameters than EdgeFlowNet, and our INT8 model achieves 6.29/7.13 EPE on Sintel Clean/Final. In flow-only monocular visual odometry on TartanAir and UZH-FPV, the same INT8 model yields the lowest trajectory error on seven of eleven sequences.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI