日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2609.23666

UniPoint:多様な地形を歩行するヒューマノイドのための統合ポイントレベルセンサフュージョン

UniPoint: Unified Point-Level Sensor Fusion for Humanoid Locomotion Across Challenging Terrains

シェア:XThreadsFacebookLINEはてブBluesky

LiDARと2台の深度カメラの点群を早期融合し、固定トークン数の自己注意で処理するヒューマノイド歩行ポリシーを提案。8種類の地形を単一ポリシーで走破し、実機で70cm段差や100cmギャップなどを検証した。

詳しい要約

1. どんなもの?

- 人間型ロボットの全身移動のためのフレームワーク UniPoint を提案。 - 360° LiDAR と 2 台の depth camera の測定値を早期融合し、base-frame の点集合を生成。 - 点集合を voxelization で固定数の token に再サンプリングし、linear self-attention と proprioception-queried cross-attention で符号化。 - 単一の訓練実行で 8 種類の地形すべてに対応する単一ポリシーを生成し、オンボード RK3588 に展開。 - DR02 humanoid 上で 7 種類の地形、9 つの実世界設定、各 20 試行で検証。

2. 先行研究と比べてどこがすごい?

- 既存手法は広いカバレッジ、局所精度、センサ故障への冗長性を同時に満たすのが困難。 - 単一の前方 depth camera や近傍高さサンプリングではカバレッジ不足。 - オドメトリ補正 elevation map は激しい動きでドリフトし、薄い垂直構造物を見逃す。 - 画像レベル符号化はカメラ数に応じて計算コストが増大。 - UniPoint は点レベル早期融合により、前方コストをセンサ数から切り離し、薄い障壁を保持し、単一モダリティ故障時も token の一部のみ失われ graceful degradation を実現。

3. 技術・手法の肝は?

- 360° LiDAR と 2 台の depth camera の測定値を早期融合し、base-frame の点集合を構築。 - Voxelization で点集合を固定数の token に再サンプリング。 - Linear self-attention と proprioception-queried cross-attention で token を符号化。 - 地形認識報酬、知覚劣化注入、ドメインランダム化を組み合わせた単一訓練実行。 - 単一ポリシーを 8 地形タイプすべてに適用し、オンボード RK3588 に展開。

4. どうやって有効だと検証した?

- DR02 humanoid 上で 7 種類の地形、9 つの実世界設定、各 20 試行を実施。 - 70 cm 高のプラットフォーム、100 cm のギャップ、薄い障壁、疎または狭い足場でポリシーを検証。 - 屋外での zero-shot 一般化も確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、elevation map ベースの手法、depth camera ベースの手法、LiDAR ベースの手法、画像レベル符号化を用いる手法などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sicen Li, Zhen Chu, Chao Li, Qiuguo Zhu, Jun Wu

分類: cs.RO

原文アブストラクト

Open-world deployment requires humanoid robots to cross highly heterogeneous terrain safely, with perception that simultaneously provides wide coverage, local accuracy, and redundancy against sensor failure. Existing approaches struggle to satisfy all three: one forward depth camera or nearby height sampling covers too little; odometry-corrected elevation maps drift under aggressive motion and miss thin vertical structures; image-level encoding costs grow with camera count. We present UniPoint, a humanoid whole-body locomotion framework built on multi-source point-level sensor fusion. Measurements from a 360° light detection and ranging (LiDAR) sensor and two depth cameras are early-fused into one base-frame point set. Voxelization resamples it to a fixed number of tokens encoded by linear self-attention and proprioception-queried cross-attention, decoupling forward cost from sensor count. The point set retains standing thin barriers; a single-modality failure removes only part of the tokens, so the policy degrades gracefully. A single training run with terrain-aware rewards, perception-degradation injection, and domain randomization produces one policy for all eight terrain types, deployed on an onboard RK3588 without fine-tuning. On a DR02 humanoid, 20 trials at each of nine real-world settings over seven terrain types validate the policy on 70-cm-high platforms, 100-cm gaps, thin barriers, and sparse or narrow footholds; it also generalizes zero-shot outdoors.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI