日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

3DシーングラフarXiv:2605.10484

OpenSGA: オープンワールドにおける効率的な3Dシーングラフアライメント

OpenSGA: Efficient 3D Scene Graph Alignment in the Open World

シェア:XThreadsFacebookLINEはてブBluesky

3Dシーングラフ間のオブジェクト対応を推定する統一フレームワークを提案し、視覚言語・テキスト・幾何特徴を融合して大規模座標ずれでも高精度なアライメントを実現。大規模データセットScanNet-SGも導入。

詳しい要約

1. どんなもの?

3D scene graph alignment を open world で効率的に行う統合フレームワーク OpenSGA を提案する論文。部分的に重複する観測から構築された2つの 3D scene graph 間で物体対応を推定し、ロボットの再訪時の object-level relocalization や複数エージェント間の global map fusion を可能にする。vision-language・textual・geometric 特徴を spatial context と融合して対応を予測する。さらに大規模データセット ScanNet-SG を導入する。

2. 先行研究と比べてどこがすごい?

既存手法は主に subscan-to-subscan (S2S) alignment に焦点を当て、geometric point-cloud 特徴に強く依存しており、frame-to-scan (F2S) alignment と open-set vision-language 特徴は十分に検討されていなかった。また既存の scene graph alignment データセットは小規模で物体多様性が限られていた。本論文は F2S と S2S の両タスクで既存手法を大幅に上回る性能を示し、大規模データセットも提供する。

3. 技術・手法の肝は?

vision-language・textual・geometric 特徴を spatial context と融合する統一フレームワーク。distance-gated spatial attention encoder、minimum-cost-flow-based allocator、global scene embedding generator などのモジュールで構成され、大きな座標ずれがあっても正確な alignment を実現する。

4. どうやって有効だと検証した?

F2S と S2S の両タスクで実験を行い、既存の scene graph alignment 手法と比較して総合性能が最良であることを示した。データセット ScanNet-SG は自動アノテーションパイプラインで生成され、700k 以上のサンプル、ScanNet ラベルの 509 物体カテゴリ、GPT-4o ベースのタグ付けによる 3k 以上のカテゴリを含む。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

既存の scene graph alignment 手法(subscan-to-subscan (S2S) alignment に焦点を当てたもの)、ScanNet、GPT-4o ベースのタグ付け、minimum-cost-flow を用いた割り当て、vision-language 特徴を用いた 3D シーン理解。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Gang Chen, Sebastián Barbas Laina, Stefan Leutenegger, Javier Alonso-Mora

分類: cs.CV, cs.RO

原文アブストラクト

Scene graph alignment establishes object correspondences between two 3D scene graphs constructed from partially overlapping observations. This enables efficient scene understanding and object-level relocalization when a robot revisits a place, as well as global map fusion across multiple agents. Such capabilities are essential for robots that require long-term memory for long-horizon tasks involving interactions with the environment. Existing approaches mainly focus on subscan-to-subscan (S2S) alignment and depend heavily on geometric point-cloud features, leaving frame-to-scan (F2S) alignment and open-set vision-language features underexplored. In addition, existing datasets for scene graph alignment remain small-scale with limited object diversity, constraining systematic training and evaluation. We present a unified and efficient scene graph alignment framework that predicts object correspondences by fusing vision-language, textual, and geometric features with spatial context. The framework comprises modules such as a distance-gated spatial attention encoder, a minimum-cost-flow-based allocator, and a global scene embedding generator to achieve accurate alignment even under large coordinate discrepancies. We further introduce ScanNet-SG, a large-scale dataset generated via an automated annotation pipeline with over 700k samples, covering 509 object categories from ScanNet labels and over 3k categories from GPT-4o-based tagging. Experiments show that our method achieves the best overall performance on both F2S and S2S tasks, substantially outperforming existing scene graph alignment methods. Our code and dataset are released at: https://autonomousrobots.nl/paper_websites/opensga.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI