日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

シーングラフarXiv:2506.22593

Pixels-to-Graph: 建物情報モデルとシーングラフのリアルタイム統合による人間-ロボット間の意味的・幾何的理解

Pixels-to-Graph: Real-time Integration of Building Information Models and Scene Graphs for Semantic-Geometric Human-Robot Understanding

シェア:XThreadsFacebookLINEはてブBluesky

画像とLiDARからCPUのみでリアルタイムに構造化シーングラフを生成し、2D地図と3D点群を多層グラフで統合する軽量手法を提案。NASA JPLの脚ロボットで実環境検証。

詳しい要約

1. どんなもの?

- 画像ピクセルと LiDAR マップからリアルタイムに構造化 scene graph を生成する軽量手法 Pixels-to-Graph (Pix2G) を提案 - 目的は resource-constrained なロボットプラットフォーム上での未知環境の自律探索 - 出力は de-noised な 2D top-down 環境マップと structure-segmented 3D pointcloud - 両者を object-level から building-level までを抽象化する multi-layer graph で接続 - 人間が慣れ親しむ 2D BIM とロボットの 3D マップのギャップを埋めることを狙う

2. 先行研究と比べてどこがすごい?

- 従来のロボティックプランニングは 3D 幾何情報を活用する一方、人間は BIM のような高レベルでコンパクトな 2D 表現に慣れている - 3D scene graph は人間可読な 2D BIM とロボットの 3D マップの橋渡しとして注目されている - 本手法は軽量かつ CPU のみで全処理を実行する点を特徴とする - 具体的な先行研究との定量比較は要旨からは不明

3. 技術・手法の肝は?

- 画像ピクセルと LiDAR マップを入力とし、リアルタイムに scene graph を生成 - onboard compute 制約に対応するため全処理を CPU のみで実行する設計 - de-noised な 2D top-down 環境マップを生成 - structure-segmented 3D pointcloud を生成 - 両者を object-level から building-level までを抽象化する multi-layer graph でシームレスに接続

4. どうやって有効だと検証した?

- NASA JPL NeBula-Spot legged robot を用いた実世界実験で評価 - cluttered な garage および urban office like 環境を自律探索・マッピング - リアルタイムでの動作を確認 - 定量的および定性的に評価を実施

5. 議論はある?

- 要旨からは不明 - 想定される論点として CPU のみでの処理性能や resource-constrained 環境での限界が考えられるが、要旨には明記されていない

6. 次に読むべき論文は?

- 3D scene graph に関する関連研究(要旨で具体的な論文名の参照なし) - Building Information Model (BIM) とロボットマップの統合に関する研究 - NASA JPL NeBula-Spot を用いた自律探索研究 - 具体的な比較対象論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Antonello Longo, Chanyoung Chung, Matteo Palieri, Sung-Kyun Kim, Ali Agha, Cataldo Guaragnella, Shehryar Khattak

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Autonomous robots are increasingly playing key roles as support platforms for human operators in high-risk, dangerous applications. To accomplish challenging tasks, an efficient human-robot cooperation and understanding is required. While typically robotic planning leverages 3D geometric information, human operators are accustomed to a high-level compact representation of the environment, like top-down 2D maps representing the Building Information Model (BIM). 3D scene graphs have emerged as a powerful tool to bridge the gap between human readable 2D BIM and the robot 3D maps. In this work, we introduce Pixels-to-Graph (Pix2G), a novel lightweight method to generate structured scene graphs from image pixels and LiDAR maps in real-time for the autonomous exploration of unknown environments on resource-constrained robot platforms. To satisfy onboard compute constraints, the framework is designed to perform all operation on CPU only. The method output are a de-noised 2D top-down environment map and a structure-segmented 3D pointcloud which are seamlessly connected using a multi-layer graph abstracting information from object-level up to the building-level. The proposed method is quantitatively and qualitatively evaluated during real-world experiments performed using the NASA JPL NeBula-Spot legged robot to autonomously explore and map cluttered garage and urban office like environments in real-time.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI