- 本論文は TextRadar と呼ぶフレームワークを提案する。
- パノラマ radar 観測から scene-level の 3D occupancy-language field を構築する。
- occupancy と scale-dependent な language features を表面位置に統合する。
- 再構築した scene を新しい記述で query 可能にする。
- 目的は open-ended な language query に対応する persistent な spatial representation の実現。
- 異なる視点の観測を同一の物理位置へ対応付ける必要がある。
- radar のみで新規 scene の field を再構築する。
- radar-estimated poses を用いて予測を register する。
2. 先行研究と比べてどこがすごい?
- 先行 radar システムは scene geometry の復元や predefined categories の認識は可能。
- しかし open-ended な language query 用の persistent spatial representation は提供しない。
- TextRadar は occupancy に language features を組み合わせた scene-level field を構築。
- 新規の記述による query と prompt-free semantic visualization を可能にする。
- camera-to-radar の concept transferability を分析。
- structures・materials・human poses は colors や printed text より一致が強い。
3. 技術・手法の肝は?
- 単一フレーム radar distillation model を用意する。
- 各 radar 観測から aligned ranges と language features を予測する。
- radar-estimated poses を用いて予測を register する。
- radar のみで新規 scene の field を再構築する。
- field は occupancy と scale-dependent language features を表面位置で統合する。
- これにより再構築 scene を新規記述で query できる。
Radar systems can recover scene geometry and recognize predefined categories, but these outputs do not provide a persistent spatial representation for open-ended language queries. Such queries require linking observations from different viewpoints to the same physical locations. We present TextRadar, a framework that constructs a scene-level 3D occupancy-language field from panoramic radar observations. The field combines occupancy with scale-dependent language features at surface locations, allowing the reconstructed scene to be queried with new descriptions. A single-frame radar distillation model predicts aligned ranges and language features from each radar observation. Using radar-estimated poses, we register these predictions to reconstruct the field from radar alone in a new scene. Experiments on approximately 20k synchronized observations across seven buildings demonstrate scene-level natural-language querying and prompt-free semantic visualization. Analysis of camera-to-radar concept transferability shows stronger agreement for structures, materials, and human poses than for colors and printed text.