日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2508.07611

生LiDAR点群から直接制御する人型ロボットの安全で快適な歩行ポリシー

End-to-End Humanoid Robot Safe and Comfortable Locomotion Policy

シェア:XThreadsFacebookLINEはてブBluesky

生のLiDAR点群を直接モータ指令に変換するエンドツーエンド歩行ポリシーを提案し、制約付きMDPと制御バリア関数を組み合わせて安全性を保証、快適性報酬で人間に配慮した動きを実現、実機へ転移した。

詳しい要約

1. どんなもの?

- ヒューマノイドロボットのための end-to-end 移動ポリシー - 生の spatio-temporal LiDAR point cloud を直接モータコマンドへ写像 - 非構造・人間中心環境での安全で快適なナビゲーションを目指す - 制御問題を Constrained Markov Decision Process (CMDP) として定式化 - 安全性とタスク目的を形式的に分離 - 快適性指向の reward を導入し、滑らかで予測可能な動きを促進 - 実機ヒューマノイドへの sim-to-real transfer を実証

2. 先行研究と比べてどこがすごい?

- 既存の reinforcement learning 手法の限界を指摘 - blind controller は環境認識を欠く - vision-based システムは複雑な 3D 障害物を認識できない - 本研究は raw LiDAR point cloud を直接用いる end-to-end ポリシー - 複雑な 3D 障害物を含む clutter した dynamic scene での頑健なナビゲーションを可能に - CMDP により安全性をタスク目的から形式的に分離 - CBF の原理を CMDP の cost に変換する新手法を提案 - 人間-ロボット相互作用研究に基づく comfort-oriented reward を導入

3. 技術・手法の肝は?

- 入力: raw, spatio-temporal LiDAR point cloud - 出力: モータコマンド(end-to-end ポリシー) - 定式化: Constrained Markov Decision Process (CMDP) - 安全性制約とタスク目的を分離 - 安全性の実装 - Control Barrier Functions (CBFs) の原理を CMDP の cost に変換 - model-free な Penalized Proximal Policy Optimization (P3O) で訓練中に安全制約を強制 - 快適性 - human-robot interaction 研究に基づく comfort-oriented rewards - 滑らかで予測可能、侵入性の低い動きを促進

4. どうやって有効だと検証した?

- 実機ヒューマノイドロボットへの sim-to-real transfer に成功 - 静的・動的な 3D 障害物の周囲で敏捷かつ安全なナビゲーションを実証 - 詳細な評価指標や比較実験の設定は要旨からは不明

5. 議論はある?

- 要旨からは不明 - 制約の厳しさとタスク性能のトレードオフ - comfort reward の設計や重みの感度 - sim-to-real gap の詳細 - 動的障害物や人間との相互作用の限界 などは明示されていない

6. 次に読むべき論文は?

- Control Barrier Functions (CBFs) 関連の安全強化学習研究 - Penalized Proximal Policy Optimization (P3O) - Constrained Markov Decision Process (CMDP) に基づく safe RL - LiDAR point cloud を用いた end-to-end ナビゲーション - human-robot interaction における comfort-aware navigation - sim-to-real transfer for humanoid locomotion

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zifan Wang, Xun Yang, Jianzhuang Zhao, Jiaming Zhou, Teli Ma, Ziyao Gao, Arash Ajoudani, Junwei Liang

分類: cs.RO

原文アブストラクト

The deployment of humanoid robots in unstructured, human-centric environments requires navigation capabilities that extend beyond simple locomotion to include robust perception, provable safety, and socially aware behavior. Current reinforcement learning approaches are often limited by blind controllers that lack environmental awareness or by vision-based systems that fail to perceive complex 3D obstacles. In this work, we present an end-to-end locomotion policy that directly maps raw, spatio-temporal LiDAR point clouds to motor commands, enabling robust navigation in cluttered dynamic scenes. We formulate the control problem as a Constrained Markov Decision Process (CMDP) to formally separate safety from task objectives. Our key contribution is a novel methodology that translates the principles of Control Barrier Functions (CBFs) into costs within the CMDP, allowing a model-free Penalized Proximal Policy Optimization (P3O) to enforce safety constraints during training. Furthermore, we introduce a set of comfort-oriented rewards, grounded in human-robot interaction research, to promote motions that are smooth, predictable, and less intrusive. We demonstrate the efficacy of our framework through a successful sim-to-real transfer to a physical humanoid robot, which exhibits agile and safe navigation around both static and dynamic 3D obstacles.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI