日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2609.07933

SPOT: 空間知覚指向の長時間ヒューマノイド遠隔操作

SPOT: Spatial Perception-Oriented Long-Horizon Humanoid Teleoperation

シェア:XThreadsFacebookLINEはてブBluesky

長時間の移動操作タスクで必要な空間認識を拡張するため、ロボット搭載の魚眼カメラと視点分離型の自由視点表示を組み合わせたVR遠隔操作システムSPOTを提案した。

詳しい要約

1. どんなもの?

SPOTは、長期的なhumanoidロボットの遠隔操作によるデモデータ収集を目的とした、空間知覚指向のVRテレオペレーションシステムである。ロボット搭載の両眼fisheyeカメラ、広視野立体ディスプレイ、視点分離型の自由視点、視覚安定化を組み合わせ、広く安定した能動的に検査可能なロボット中心視点を提供する。従来のegocentricインターフェースとは異なり、視覚探索とロボット動作を分離し、オペレータの自然な頭部回転がロボットの頭部やカメラ、胴体を動かすのではなく、広視野内の視点を変える。

2. 先行研究と比べてどこがすごい?

既存のhumanoid遠隔操作システムは、人間の動きをロボットの動きにリターゲティングする点では進歩しているが、長期的なloco-manipulationでは、オブジェクト位置や周囲環境、ロボットの姿勢など、タスク関連の空間認識を維持する能力が不足している。既存手法は、狭い視野で周辺イベントを見逃したり、ロボット搭載カメラが移動中に不安定になったり、頭部視点制御がロボット動作と干渉するなど、オペレータの知覚的視野を短縮する。SPOTは、視点分離と視覚安定化により、これらの問題を解決し、拡張された知覚的視野を提供する点が新しい。

3. 技術・手法の肝は?

SPOTの技術的な肝は、ロボット中心の視点を広く、安定し、能動的に検査可能にすることである。具体的には、ロボットに搭載した両眼fisheyeカメラで広視野の映像を取得し、それをオペレータの周囲の仮想半球上にレンダリングする。オペレータの頭部回転は、この広視野内の視点を変えるだけで、ロボットの頭部やカメラ、胴体の動作とは切り離されている(viewpoint-decoupled free-looking)。さらに、視覚安定化により、ロボットの移動中でも映像の揺れを抑える。

4. どうやって有効だと検証した?

SPOTは、drop recovery、peripheral retrieval、large-workspace bimanual manipulation、fine alignment、dynamic interactionといった、知覚が重要なhumanoidデータ収集タスクで評価された。その結果、効率、精度、回復速度が向上し、ユーザーフレンドリーでスケーラブルな長期的humanoidデータ収集に有効であることが示された。

5. 議論はある?

要旨からは、SPOTの限界や他の手法との比較に関する議論は不明である。ただし、システムの有効性は示されているが、実際のロボット学習への影響や、他の遠隔操作手法との定量的比較などは要旨に含まれていない。

6. 次に読むべき論文は?

要旨で参照されている先行研究は、humanoid teleoperation systemsやretargeting human motion to robot motionに関するものである。具体的な論文名は不明だが、同分野の定番として、VR-based teleoperation、motion retargeting、humanoid data collectionに関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Lixing Fang, Ziyan Xiong, Sunli Chen, Zhiyang Dou, Chuang Gan

分類: cs.RO

原文アブストラクト

High-quality demonstration data is becoming a central bottleneck for training general-purpose humanoid robots. While recent humanoid teleoperation systems have made substantial progress in retargeting human motion to robot motion, long-horizon loco-manipulation requires another capability: operators must maintain task-relevant spatial awareness over time, e.g., object locations, surrounding environments, the robot's pose. We call the extent of this awareness the operator's perceptual horizon. However, existing methods often shorten this: narrow views miss peripheral events, robot-mounted cameras become unstable during locomotion, and coupled head-view control makes looking around interfere with robot motion. We present SPOT, a Spatial Perception-Oriented VR Teleoperation system for collecting long-horizon humanoid demonstration data by providing extended perceptual horizon. SPOT combines a robot-mounted binocular fisheye camera, a wide-field stereoscopic display, viewpoint-decoupled free-looking, and visual stabilization to provide a robot-centric view that is wide, stable, and actively inspectable. Unlike conventional egocentric interfaces, SPOT decouples visual exploration from robot actuation: the egocentric stereo observation is rendered on a virtual hemisphere around the operator, so natural head rotations change where the operator looks within the wide-field view rather than commanding the robot head, camera, or torso. We evaluate SPOT on perception-critical humanoid data-collection tasks spanning drop recovery, peripheral retrieval, large-workspace bimanual manipulation, fine alignment, and dynamic interaction. SPOT improves efficiency, accuracy, and recovery speed, demonstrating its effectiveness for user-friendly and scalable long-horizon humanoid data collection.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI