日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2508.09846

車輪型ヒューマノイドの全身遠隔操作のための多段階物体パラメータ推定

Whole-Body Bilateral Teleoperation with Multi-Stage Object Parameter Estimation for Wheeled Humanoid Locomanipulation

シェア:XThreadsFacebookLINEはてブBluesky

車輪型ヒューマノイドの全身遠隔操作において、視覚・VLM・階層的サンプリングを組み合わせて物体の慣性パラメータをオンライン推定し、操作の追従性と力覚フィードバックを改善するフレームワークを提案。

詳しい要約

1. どんなもの?

- 本論文は、車輪型ヒューマノイドの loco-manipulation のための、物体を考慮した全身 bilateral teleoperation フレームワークを提案する。 - 中核技術は、オンラインの multi-stage object inertial parameter estimation モジュールである。 - 推定パラメータを車輪型ヒューマノイドの equilibrium point 更新に用い、操作者が locomotion と manipulation に集中できるようにする。 - 物体ダイナミクスの補償により、haptic force feedback の動的同期と manipulation tracking を改善する。

2. 先行研究と比べてどこがすごい?

- 先行研究との具体的な比較は要旨からは不明。 - 提案手法の特徴として、vision-based object size estimator、large vision-language model (VLM) による初期パラメータ推定、decoupled hierarchical sampling strategy を順次統合する点を挙げている。 - 視覚サイズ推定と VLM prior により強い初期推定を得て、sampling-based refinement の探索空間を大幅に縮小し、推定速度を改善する。 - 階層戦略により物理的に実現可能なパラメータを確保し、decoupled multi-hypothesis scheme により VLM prior の誤差へのロバスト性を高める。

3. 技術・手法の肝は?

- multi-stage 推定: 視覚ベースの物体サイズ推定、VLM による初期パラメータ推定、decoupled hierarchical sampling strategy を順次統合する。 - hierarchical strategy: まず mass と center of mass を推定し、次に物体サイズから inertia を推定して物理的に実現可能なパラメータを確保する。 - decoupled multi-hypothesis scheme により VLM prior の誤差に対するロバスト性を高める。 - 推定器は高忠実度 simulation と hardware と並列に動作し、リアルタイムのオンライン更新を可能にする。 - 推定パラメータで equilibrium point を更新し、物体ダイナミクスを補償して haptic force feedback と manipulation tracking を改善する。

4. どうやって有効だと検証した?

- カスタマイズした車輪型ヒューマノイド(robotic gripper と human-machine interface 付き)でシステムを検証した。 - lifting、delivering、releasing タスクのリアルタイム実行を実証した。 - ペイロードはロボット体重の約3分の1の重量である。 - 推定器が simulation と hardware の両方で並列に動作し、リアルタイム更新できることを示した。

5. 議論はある?

- 推定パラメータによる物体ダイナミクス補償が manipulation tracking を改善しつつ compliant behavior を保つ点を述べている。 - equilibrium point 更新により操作者が locomotion と manipulation に集中でき、より動的な全身 teleoperation が可能になると主張する。 - 限界や失敗事例、VLM prior 誤差の定量的影響などの詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として、large vision-language model (VLM) を用いた物体パラメータ推定、sampling-based inertial parameter estimation、bilateral teleoperation、whole-body loco-manipulation の文献を次に読む候補として挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Donghoon Baek, Amartya Purushottam, Jason J. Choi, Joao Ramos

分類: cs.RO

原文アブストラクト

This paper presents an object-aware whole-body bilateral teleoperation framework for wheeled humanoid loco-manipulation. This framework combines whole-body bilateral teleoperation with an online multi-stage object inertial parameter estimation module, which is the core technical contribution of this work. The multi-stage process sequentially integrates a vision-based object size estimator, an initial parameter guess generated by a large vision-language model (VLM), and a decoupled hierarchical sampling strategy. The visual size estimate and VLM prior offer a strong initial guess of the object's inertial parameters, significantly reducing the search space for sampling-based refinement and improving the overall estimation speed. A hierarchical strategy first estimates mass and center of mass, then infers inertia from object size to ensure physically feasible parameters, while a decoupled multi-hypothesis scheme enhances robustness to VLM prior errors. Our estimator operates in parallel with high-fidelity simulation and hardware, enabling real-time online updates. The estimated parameters are then used to update the wheeled humanoid's equilibrium point, allowing the operator to focus more on locomotion and manipulation. This integration improves the haptic force feedback for dynamic synchronization, enabling more dynamic whole-body teleoperation. By compensating for object dynamics using the estimated parameters, the framework also improves manipulation tracking while preserving compliant behavior. We validate the system on a customized wheeled humanoid with a robotic gripper and human-machine interface, demonstrating real-time execution of lifting, delivering, and releasing tasks with a payload weighing approximately one-third of the robot's body weight.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI