日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

深度推定arXiv:2609.32027

Depth Any Seen:どの面がどこまで見えるか

Depth Any Seen: Which Surfaces and How Far?

シェア:XThreadsFacebookLINEはてブBluesky

1枚の画像から複数の可視面の存在と距離を同時に推定するマルチベルヌーイ深度集合手法を提案し、過剰予測を大幅に削減した。

詳しい要約

1. どんなもの?

- 単一画像から可視な3D構造を復元する際、1本のray上に複数のsurfaceが存在しうる問題を扱う研究。 - 各surfaceをimage-conditioned multi-Bernoulli depth setとして表現し、各componentが1つのdepthを寄与するか不在かを推定。 - 補助損失なしのExact Multi-Bernoulli objective (ExactMB)を提案。 - depthとpresenceを、完全で重複のないtargetへのone-to-one assignmentをmarginalizeして学習。

2. 先行研究と比べてどこがすごい?

- 従来のdepth stackingと比較して、overpredictionをLD-Realで相対88.2%、MD-3Kで相対80.5%削減。 - 一方でordinal accuracyの大部分を維持。 - LD-Synではconditional metric-depth errorが同等。 - 期待countのmatchingではcomponent-surface assignmentが未解決になりうることを解析的に示した点が新しい。

3. 技術・手法の肝は?

- image-conditioned multi-Bernoulli depth setとしてsurfaceを表現。 - 各componentは1つのdepthを寄与するか不在となる。 - ExactMBは補助損失なしで、one-to-one assignmentを完全で重複のないtargetへmarginalizeし、depthとpresenceを学習。 - 期待countのmatchingだけではassignmentが未解決になることを示し、ordered assignmentやcount-regularized構成を検討。

4. どうやって有効だと検証した?

- 実データと合成データのlayered-depth benchmarkを拡張し、depth accuracy、recovered support、overpredictionを評価。 - LD-RealとMD-3Kでoverprediction削減を確認。 - LD-Synでconditional metric-depth errorを比較。 - ablation studiesでordered assignmentがdepth-accurate recallとprecisionをmarginalizationより改善すること、count-regularized構成がordered assignmentより高いdeeper-rank precisionを低いrecallで達成することを示す。

5. 議論はある?

- 期待countのmatchingではcomponent-surface assignmentが未解決になりうるという理論的課題を指摘。 - ordered assignmentとcount-regularized構成のトレードオフを議論。 - 具体的な限界や失敗ケース、計算コスト、一般化性については要旨からは不明。

6. 次に読むべき論文は?

- depth stacking(比較対象として言及) - multi-Bernoulli depth setに関する研究 - layered-depth benchmark(LD-Real, LD-Syn, MD-3K) - one-to-one assignmentやmarginalizationを用いたdepth estimation手法 - 同分野の定番としてmonocular depth estimationやmulti-surface depth estimationの関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaohao Xu, Xiaonan Huang

分類: cs.CV, cs.AI, cs.GR, cs.RO

原文アブストラクト

When several surfaces are visible along a ray, recovering visible 3D structure from one image requires jointly estimating their presence and metric depth. Depth Any Seen represents these surfaces as image-conditioned multi-Bernoulli depth sets, whose components each contribute one depth or remain absent. Its auxiliary-free Exact Multi-Bernoulli objective (ExactMB) learns depth and presence by marginalizing one-to-one assignments to complete, distinct targets. Our analysis shows that matching expected count can leave component-surface assignment unresolved. We extend real and synthetic layered-depth benchmarks to evaluate depth accuracy, recovered support, and overprediction. Compared to depth stacking, ExactMB reduces overprediction by a relative 88.2% on LD-Real and 80.5% on MD-3K while retaining most ordinal accuracy, with comparable conditional metric-depth error on LD-Syn. Further ablation studies show that ordered assignment improves depth-accurate recall and precision over marginalization, whereas the count-regularized configuration achieves higher deeper-rank precision than ordered assignment at lower recall. Our code will be publicly released.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI