日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2509.23650

KiVi: 動的で安全な自己中心脚式移動のための運動感覚・視空間統合

KiVi: Kinesthetic-Visuospatial Integration for Dynamic and Safe Egocentric Legged Locomotion

シェア:XThreadsFacebookLINEはてブBluesky

固有感覚を安定した基盤としつつ視覚情報を選択的に統合する枠組みを提案し、四足ロボットが不整地や視覚ノイズ・遮蔽に頑健に歩行できるようにした。

詳しい要約

1. どんなもの?

- 四足歩行ロボットのための視覚と固有感覚を統合した移動フレームワーク「KiVi」を提案する研究。 - Kinesthetic(固有感覚による身体運動の知覚)とVisuospatial(周囲地形の視覚的知覚)を分離した二経路構造を持つ。 - 視覚のみに依存せず、固有感覚を安定の基盤(backbone)としつつ、地形認識や障害物回避のために選択的に視覚を組み込む。 - メモリ強化型attentionを組み合わせ、egocentricな四足歩行の安定性と安全性を狙う。

2. 先行研究と比べてどこがすごい?

- 従来のvision-based locomotionは複雑環境への適応に有望だが、occlusion・reflection・照明変化に脆弱で歩行不安定を招く点が課題。 - KiViは動物のsensorimotor integrationに着想を得て、固有感覚を安定のbackboneとし視覚を選択的に使う点が特徴。 - 視覚情報を過信せずproprioceptionによるfallback stabilityを維持する設計で、視覚脆弱性への対処を狙う。 - 具体的な先行研究名や定量的比較は要旨からは不明。

3. 技術・手法の肝は?

- Kinesthetics経路: proprioceptive sensingにより身体運動を符号化。 - Visuospatial経路: 視覚知覚により周囲地形を捉え、terrain awarenessとobstacle avoidanceを担う。 - 両経路を分離しつつ統合するmodality-balancedな設計。 - memory-enhanced attentionにより視覚cueの解釈を強化。 - proprioceptionを安定のbackboneとして保持し、視覚が不確実な場合のfallback stabilityを確保。

4. どうやって有効だと検証した?

- 四足歩行ロボットを用いた広範な実験を実施。 - 多様な地形の安定走破と非構造屋外環境での信頼動作を確認。 - 訓練時に見ていないout-of-distribution(OOD)な視覚ノイズやocclusionに対して頑健であることを示す。 - 実世界のlegged locomotionへの有効性と適用性を強調。具体的な指標・データセットは要旨からは不明。

5. 議論はある?

- 視覚の脆弱性(occlusion・reflection・照明変化)に対し、proprioceptionをbackboneとする設計で安定性を確保する主張。 - OOD視覚ノイズや未見occlusionへの頑健性を実験で示す。 - 限界・失敗事例・定量的な議論の詳細は要旨からは不明。 - 実環境適用性を強調するが、具体的な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法としてvision-based locomotion、proprioceptive locomotion、sensorimotor integration、memory-enhanced attentionを用いるegocentric navigation系の研究を挙げる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Peizhuo Li, Hongyi Li, Yuxuan Ma, Linnan Chang, Xinrong Yang, Ruiqi Yu, Shuhao Liao, Yifeng Zhang, Yuhong Cao, Qiuguo Zhu, Guillaume Sartoretti

分類: cs.RO

原文アブストラクト

Vision-based locomotion has shown great promise in enabling legged robots to perceive and adapt to complex environments. However, visual information is inherently fragile, being vulnerable to occlusions, reflections, and lighting changes, which often cause instability in locomotion. Inspired by animal sensorimotor integration, we propose KiVi, a Kinesthetic-Visuospatial integration framework, where kinesthetics encodes proprioceptive sensing of body motion and visuospatial reasoning captures visual perception of surrounding terrain. Specifically, KiVi separates these pathways, leveraging proprioception as a stable backbone while selectively incorporating vision for terrain awareness and obstacle avoidance. This modality-balanced, yet integrative design, combined with memory-enhanced attention, allows the robot to robustly interpret visual cues while maintaining fallback stability through proprioception. Extensive experiments show that our method enables quadruped robots to stably traverse diverse terrains and operate reliably in unstructured outdoor environments, remaining robust to out-of-distribution(OOD) visual noise and occlusion unseen during training, thereby highlighting its effectiveness and applicability to real-world legged locomotion. Project Page: https://marmotlab.github.io/kivi-quadruped/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI