日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2603.05993

散らかった空間を移動する:VRによる3Dシーン認識型ヒューマノイド歩行のデータ収集とベンチマークのスケーリング

Moving Through Clutter: Scaling Data Collection and Benchmarking for 3D Scene-Aware Humanoid Locomotion via Virtual Reality

シェア:XThreadsFacebookLINEはてブBluesky

VRを使って散らかった3D環境での人間の全身運動を収集し、ヒューマノイドロボットに再ターゲットするフレームワークを提案。145のシーンで348の軌道からなるデータセットを構築し、歩行性能を評価するベンチマークを導入した。

詳しい要約

1. どんなもの?

本論文は、散らかった3D環境におけるscene-aware humanoid locomotionのためのオープンソースVRベースのデータ収集・評価フレームワーク「Moving Through Clutter (MTC)」を提案する。制御可能なclutter levelで手続き的にシーンを生成し、没入型VRナビゲーションでembodiment-consistentな全身人間運動を取得し、humanoid robot modelに自動retargetingする。環境のclutter levelとlocomotion performance(stabilityやcollision safety)を定量化するbenchmarkも導入する。145の多様な3D cluttered scenesにわたる348 trajectoriesのデータセットを構築し、geometry-induced adaptationの研究やscene-aware planning/control手法の開発基盤を提供する。

2. 先行研究と比べてどこがすごい?

先行研究ではhumanoid locomotionのdynamic behaviors(dancing, martial arts, parkour)が主にopen, flat, obstacle-freeな設定で示されてきた。一方、実世界のhome, office, public spaceはdense, 3D, geometrically constrainedであり、scene-aware whole-body coordinationやprecise balance control、家具やhousehold objectsによるspatial constraintsのreasoningが必要だが、cluttered 3D環境でのhumanoid locomotionはunderexploredであり、full-body human locomotionとそれを形作るscene geometryを体系的に結びつけたpublic datasetは存在しなかった。本研究はこのギャップを埋める初のオープンソースフレームワークとデータセットを提供する点がすごい。

3. 技術・手法の肝は?

技術の肝は、VRベースのデータ収集・評価フレームワークである。手続き的にclutter levelを制御可能なシーンを生成し、没入型VRナビゲーションを通じてembodiment-consistentな全身人間運動をキャプチャする。その後、その運動をhumanoid robot modelに自動retargetingする。さらに、環境のclutter levelとlocomotion performance(stabilityやcollision safety)を定量化するbenchmarkを導入する。これにより、geometry-induced adaptationを研究するためのデータと評価指標を提供する。

4. どうやって有効だと検証した?

本フレームワークを用いて、145の多様な3D cluttered scenesにわたる348 trajectoriesのデータセットを構築した。また、環境のclutter levelとlocomotion performance(stabilityやcollision safety)を定量化するbenchmarkを導入し、これらを通じて有効性を検証している。具体的な実験結果や比較評価の詳細は要旨からは不明。

5. 議論はある?

要旨からは、提案手法の限界や議論の詳細は不明。ただし、本研究がhumanoid locomotion in cluttered 3D environmentsのunderexploredな領域に取り組み、データセットとbenchmarkを提供することで、geometry-induced adaptationの研究やscene-aware planning/control手法の開発基盤を提供する点が議論の中心と考えられる。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていないが、関連手法としてhumanoid locomotionのdynamic behaviors(dancing, martial arts, parkour)や、scene-aware planning/control、human motion retargeting、VR-based data collectionなどが挙げられる。同分野の定番として、humanoid locomotionの強化学習や模倣学習、3D scene understanding、motion retargetingの研究が次に読むべき論文として考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Beichen Wang, Yuanjie Lu, Linji Wang, Liuchuan Yu, Xuesu Xiao

分類: cs.RO

原文アブストラクト

Recent advances in humanoid locomotion have enabled dynamic behaviors such as dancing, martial arts, and parkour, yet these capabilities are predominantly demonstrated in open, flat, and obstacle-free settings. In contrast, real-world environments such as homes, offices, and public spaces, are densely cluttered, three-dimensional, and geometrically constrained, requiring scene-aware whole-body coordination, precise balance control, and reasoning over spatial constraints imposed by furniture and household objects. However, humanoid locomotion in cluttered 3D environments remains underexplored, and no public dataset systematically couples full-body human locomotion with the scene geometry that shapes it. To address this gap, we present Moving Through Clutter (MTC), an opensource Virtual Reality (VR) based data collection and evaluation framework for scene-aware humanoid locomotion in cluttered environments. Our system procedurally generates scenes with controllable clutter levels and captures embodiment-consistent, whole-body human motion through immersive VR navigation, which is then automatically retargeted to a humanoid robot model. We further introduce benchmarks that quantify environment clutter level and locomotion performance, including stability and collision safety. Using this framework, we compile a dataset of 348 trajectories across 145 diverse 3D cluttered scenes. The dataset provides a foundation for studying geometry-induced adaptation in humanoid locomotion and developing scene-aware planning and control methods.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI