日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2608.06907

時空間アジリティ:視覚誘導による動的四足歩行迎撃のための時間制約強化学習

Spatiotemporal Agility: Time-Constrained Reinforcement Learning for Vision-Guided Dynamic Quadrupedal Interception

シェア:XThreadsFacebookLINEはてブBluesky

動的環境で時間制約内に目標を迎撃するため、着地点と時間を予測する視覚モジュールと、位置・時間条件付きの強化学習ポリシーを統合したフレームワークを提案し、実ロボットでのボールキャッチ実験で有効性を示した。

詳しい要約

1. どんなもの?

本論文は、動的環境下で時間制約のある目標(ボール捕球)を達成するための、視覚誘導型四脚ロボットの統合フレームワークを提案する。具体的には、マルチカメラ知覚、着地点・時間予測、低遅延通信、sim-to-real移動制御を統合した閉ループシステムを構築し、速度追従ではなく直接位置と時間を条件とする強化学習ポリシーを用いる。

2. 先行研究と比べてどこがすごい?

既存の四脚移動研究の多くは速度追従ポリシーに依存しており、厳密な時間制約下で正確な目標到達が困難である。また、動的ターゲットに対するリアルタイム知覚と機敏な移動の統合は、センサ遅延や処理遅延により困難だった。本提案は、中間速度指令を介さずに直接位置と時間を条件とする点、およびシステム全体を統合した点で新規性がある。

3. 技術・手法の肝は?

手法の核は、視覚モジュールによる着地点と時間の予測と、直接位置・時間条件付きRL移動ポリシーの組み合わせである。将来の時空間ターゲットを明示的に予測することで、動的迎撃中の知覚遅延を軽減する。また、マルチカメラ知覚、オンライン軌道予測、低遅延通信、sim-to-real制御を閉ループ展開パイプラインに統合する。

4. どうやって有効だと検証した?

四脚ロボットによる広範なボール捕球実験を実施した。速度追従ベースラインとの比較実験により、予測着地点が2メートル以内、飛行時間が0.8〜1.2秒のボール捕球成功率が高いことを示した。さらに、展開後の性能ギャップが小さく、sim-to-real挙動が改善されたことを示した。

5. 議論はある?

要旨からは、提案手法の限界や一般化に関する議論は不明。ただし、実験条件(特定の距離・飛行時間)での成功を示すが、より広範囲の動的シナリオへの適用可能性や、センサ遅延のさらなる影響については言及がない。

6. 次に読むべき論文は?

要旨で参照されているのは、速度追従ベースラインの研究(具体的な論文名は不明)と、関連する四脚移動のRL研究。次に読むべきは、sim-to-real移動制御の一般的な手法(例:Domain Randomization)や、動的迎撃のための視覚予測手法に関する論文が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yidong Zhu, Zibo Dai, Tongning Zhang, Leixin Chang, Hua Chen

分類: cs.RO

原文アブストラクト

Legged robots require robust agility to perceive and interact with complex and dynamic environments within a constrained time. However, most existing quadruped locomotion works rely on velocity-tracking policy, which struggle to reach precise targets within strict temporal constraints. Moreover, integrating real-time perception with agile locomotion for highly dynamic targets remains challenging due to sensor latency and processing delays. To concretely study and benchmark such agility in dynamic settings, we introduce a challenging ball-catching task for legged robots. This paper proposes an integrated framework that combines a vision module for landing point and time prediction with a direct position and time conditioned RL locomotion policy, instead of intermediate velocity commands. Beyond the method design, this work presents a system-level contribution that completes real-time robotic interception system that integrates multi-camera perception, online trajectory prediction, low-latency target communication, and sim-to-real locomotion control into a closed-loop deployment pipeline. By explicitly predicting the future spatial-temporal target, our approach mitigates perception latency during dynamic interception. We conducted extensive ball-catching experiments for the legged robot. Through comparative experiments against a velocity-tracking baseline, our direct target-conditioned approach achieves a higher success rate in catching balls with predicted landing spots within 2 meters and flight times between 0.8 and 1.2 seconds. This shows that the robot has successfully completed the dynamic ball-catching task under our tested setup. Furthermore, our policy exhibits a smaller performance gap after deployment, suggesting improved sim-to-real behavior in these trials.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI