日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

意味的占有予測arXiv:2511.03571

OneOcc: 単一パノラマカメラによる脚式ロボットの意味的占有予測

OneOcc: Semantic Occupancy Prediction for Legged Robots with a Single Panoramic Camera

シェア:XThreadsFacebookLINEはてブBluesky

脚式ロボット向けに、単一のパノラマカメラ映像から360度の3D意味的占有を予測するフレームワークOneOccを提案。歩行時の揺れ補償や二重投影融合などの工夫で高精度を実現し、新たなベンチマークも公開。

詳しい要約

1. どんなもの?

- 脚式/ヒューマノイドロボット向けの、単一パノラマカメラのみで3D semantic occupancyを予測するvision-onlyのSSCフレームワークOneOccを提案。 - 歩行に伴うbody jitterと360°連続性に対処することを狙う。 - 構成要素は(i) Dual-Projection fusion (DP-ER)、(ii) Bi-Grid Voxelization (BGV)、(iii) Hierarchical AMoE-3D付き軽量decoder、(iv) Gait Displacement Compensation (GDC)。 - パノラマoccupancyベンチマークQuadOcc(実機四脚・一人称360°)とHuman360Occ (H3O)(CARLA human-ego 360°)を公開。

2. 先行研究と比べてどこがすごい?

- 既存のSSCの多くは車輪型プラットフォームと前方視センサを対象としており、脚式ロボットのgait-induced body jitterや360°連続性を扱う点が異なる。 - QuadOccで新たなstate of the artを達成し、強いvisionベースラインを上回り、古典的LiDARベースラインとも競合。 - H3Oでwithin-city +3.83 mIoU、cross-city +8.08の改善。 - モジュールが軽量で、脚式/ヒューマノイド向けのdeployableな全周知覚を可能にする点を主張。

3. 技術・手法の肝は?

- DP-ER: 環状パノラマとequirectangular展開の両方を融合し、360°連続性とgrid alignmentを保持。 - BGV: Cartesian空間とcylindrical-polar空間の両方で推論し、discretization biasを低減、free/occupied境界を鋭化。 - Hierarchical AMoE-3D付き軽量decoder: 動的なmulti-scale fusionにより長距離/occlusion推論を改善。 - GDC: 追加センサなしでfeature-levelのmotion correctionを学習するplug-and-playのgait displacement補償。

4. どうやって有効だと検証した?

- 公開した2つのパノラマoccupancyベンチマークQuadOcc(実機四脚、first-person 360°)とHuman360Occ (H3O)(CARLA human-ego 360°、RGB/Depth/semantic occupancy、within-/cross-city splits)で評価。 - QuadOccでstate of the artを達成し、強いvisionベースラインを上回り、古典的LiDARベースラインと競合。 - H3Oでwithin-city +3.83 mIoU、cross-city +8.08を獲得。 - モジュールの軽量性も示し、deployableなfull-surround perceptionを実証。

5. 議論はある?

- 要旨からは不明(具体的な限界・失敗ケース・計算コストの詳細な議論は記述されていない)。 - 主張として、モジュールが軽量で脚式/ヒューマノイドロボットへのdeployableな全周知覚を可能にすることが述べられている。 - データセットとコードは公開予定とされている。

6. 次に読むべき論文は?

- 比較対象として言及されるstrong vision baselinesおよびclassical LiDAR baselinesの代表的手法。 - semantic scene completion (SSC)の代表的手法。 - 関連要素としてDual-Projection fusion、Bi-Grid Voxelization、Hierarchical AMoE-3D、Gait Displacement Compensationに関連する手法。 - ベンチマークとしてQuadOccおよびHuman360Occ (H3O)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hao Shi, Ze Wang, Shangwei Guo, Mengfei Duan, Song Wang, Teng Chen, Kailun Yang, Lin Wang, Kaiwei Wang

分類: cs.RO, cs.CV, eess.IV

原文アブストラクト

Robust 3D semantic occupancy is crucial for legged/humanoid robots, yet most semantic scene completion (SSC) systems target wheeled platforms with forward-facing sensors. We present OneOcc, a vision-only panoramic SSC framework designed for gait-introduced body jitter and 360{\deg} continuity. OneOcc combines: (i) Dual-Projection fusion (DP-ER) to exploit the annular panorama and its equirectangular unfolding, preserving 360{\deg} continuity and grid alignment; (ii) Bi-Grid Voxelization (BGV) to reason in Cartesian and cylindrical-polar spaces, reducing discretization bias and sharpening free/occupied boundaries; (iii) a lightweight decoder with Hierarchical AMoE-3D for dynamic multi-scale fusion and better long-range/occlusion reasoning; and (iv) plug-and-play Gait Displacement Compensation (GDC) learning feature-level motion correction without extra sensors. We also release two panoramic occupancy benchmarks: QuadOcc (real quadruped, first-person 360{\deg}) and Human360Occ (H3O) (CARLA human-ego 360{\deg} with RGB, Depth, semantic occupancy; standardized within-/cross-city splits). OneOcc sets a new state of the art on QuadOcc, outperforming strong vision baselines and remaining competitive with classical LiDAR baselines; on H3O it gains +3.83 mIoU (within-city) and +8.08 (cross-city). Modules are lightweight, enabling deployable full-surround perception for legged/humanoid robots. Datasets and code will be publicly available at https://github.com/MasterHow/OneOcc.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI