日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

視覚グラウンディングarXiv:2609.39600

GroundAnything: 並列デコーディングと高精度視覚グラウンディングをフラッシュ速度で両立

GroundAnything: Reconciling Parallel Decoding with Precise Visual Grounding at Flash Speed

シェア:XThreadsFacebookLINEはてブBluesky

拡散モデルによる並列デコーディングで視覚グラウンディングを高速化し、4Bモデルで同規模の最先端性能を達成した研究。

詳しい要約

1. どんなもの?

- GroundAnythingは4Bパラメータのgrounding foundation model。 - 画像とクエリに基づき物体・位置・空間関係を抽出するvisual groundingを対象。 - 自己回帰(AR)ではなくbidirectional diffusionによる並列デコードを採用。 - blockwise denoisingで高速並列デコードと精密な定位を両立。 - AR版のGroundAnything-VLMも提供。

2. 先行研究と比べてどこがすごい?

- 従来のAR groundingは空間予測を逐次生成し、遅延と因果順序を課す。 - 本手法は依存関係が左から右の生成順を意味しないと捉え、並列仮説生成と反復改善を可能に。 - 30のgroundingベンチマークでGroundAnything-VLMが同規模モデル中SOTA(72.42%)、GPT-6 Astra(71.35%)と競合。 - entropy-guided decodingで平均61.75%、MTPベースのLocateAnything(53.32%)を上回る。 - self-speculative modeでAR比4.51倍高速化、COCO F1mIoUは0.74ポイント低下のみ。

3. 技術・手法の肝は?

- groundingをvisual evidence extractionと見なし、bidirectional diffusionで並列に空間仮説を生成・反復denoisingで共同改善。 - blockwise denoisingを採用。 - 学習は公開データセットと専用data engineによるgrounding pretraining、AR-to-diffusion直接変換とjoint AR/diffusion目的、supervised fine-tuning、GRPOベース強化学習後学習を組み合わせ。 - entropy-guided decodingとself-speculative modeを探索。 - 推論最適化を段階的に適用し並列デコードを実速度向上に接続。

4. どうやって有効だと検証した?

- 30のgroundingベンチマークで評価。 - GroundAnything-VLMが同規模SOTA 72.42%、GPT-6 Astra 71.35%と比較。 - entropy-guided decodingで平均61.75%対LocateAnything 53.32%。 - self-speculative modeでAR比4.51倍高速化、COCO F1mIoUの低下0.74ポイントを確認。 - インフラ実験でprogressive inference最適化が実速度向上をもたらすことを示す。

5. 議論はある?

- 要旨からは不明。 - ただし、groundingの依存関係が本質的に左から右の生成順を意味しないという主張と、bidirectional diffusionの適合性が議論の中心。 - 並列デコードの実用速度化にはprogressive inference最適化が必要である点も示唆。

6. 次に読むべき論文は?

- LocateAnything (MTP-based fast grounding model) - GPT-6 Astra - GRPO (reinforcement post-training) - bidirectional diffusion / blockwise denoising 関連のgrounding研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qize Yu, Lianrui Fan, Bowen Ping, Xini Ding, Zetian Song, Junbo Niu, Kaixuan Wang, Tianxing Chen, Yue Chen, Minghua He, Yuran Wang, Jie Huang, Haojun Zhang, Min Chen, Hao Li, Wenxuan Song, Ruihai Wu, Xianming Liu, Shilong Liu, Shuchang Zhou, Ping Luo, Shiyu Huang

分類: cs.CV, cs.AI, cs.LG, cs.RO

原文アブストラクト

Autoregressive (AR) grounding models serialize spatial predictions, introducing sequential latency and imposing a causal order on output tokens. We view grounding as visual evidence extraction: objects, locations, and spatial relations are jointly constrained by the image and query, yet their dependencies do not imply an intrinsic left-to-right generation order. This distinction makes bidirectional diffusion a natural fit, allowing spatial hypotheses to emerge in parallel and be jointly refined through iterative denoising. We introduce GroundAnything, a 4B-parameter grounding foundation model that reconciles fast parallel decoding with precise localization through blockwise denoising. Training combines grounding pretraining from public datasets and dedicated data engines, direct AR-to-diffusion conversion with joint AR and diffusion objectives, supervised fine-tuning, and GRPO-based reinforcement post-training. Across 30 grounding benchmarks, our autoregressive variant, GroundAnything-VLM, establishes a new overall state of the art among similarly sized models at 72.42%, remaining competitive with GPT-6 Astra (71.35%). With entropy-guided decoding, GroundAnything also surpasses the prior state of the art at this scale, averaging 61.75% versus 53.32% for the fast MTP-based LocateAnything model. We further explore decoding strategies, showing that an optional self-speculative mode achieves a $4.51\times$ speedup over the AR counterpart with a 0.74 percentage-point drop in COCO F1mIoU. Infrastructure experiments show that progressive inference optimizations translate parallel decoding into practical speedups. These support efficient visual grounding in latency-sensitive real-world systems.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI