日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2607.05883

DexTele: 動作リターゲティングと適応力制御に基づく双腕器用遠隔操作システム

DexTele: A Dual-Arm Dexterous Teleoperation System Based on Motion Retargeting and Adaptive Force Control

シェア:XThreadsFacebookLINEはてブBluesky

双腕器用遠隔操作において、視覚ベースの動作リターゲティングと適応的把持力制御を組み合わせ、異なるロボットプラットフォーム間での正確な動作再現と柔軟な把持を実現するシステムを提案した。

詳しい要約

1. どんなもの?

DexTeleは、双腕器用遠隔操作システムであり、モーションリターゲティングと適応力制御に基づく。視覚ベースのモーションリターゲティングモジュールと、VLMとMPCを組み合わせた適応把持モジュールを備え、複数のロボットプラットフォームでの正確なモーションリターゲティングとコンプライアントな把持を実現する。

2. 先行研究と比べてどこがすごい?

先行研究と比較して、DexTeleはクロスプラットフォームのモーションリターゲティングの一般化と、把持のインタラクティブ性に焦点を当てている。特に、ロボットアーキテクチャの異質性と多様な把持対象物に対処するため、モーショングラフエンコーダと潜在最適化による正確で便利なリターゲティング、およびVLMとMPCを組み合わせた適応力制御によるコンプライアントな把持を実現している点が新しい。

3. 技術・手法の肝は?

手法の肝は、2つのモジュールにある。1つ目は視覚ベースのモーションリターゲティングモジュールで、人間の画像から予備的なロボット動作を生成する。ここでは、モーショングラフエンコーダと潜在最適化を用いて、クロスプラットフォームでの正確なリターゲティングを実現する。2つ目は適応把持モジュールで、VLMとMPCを組み合わせ、対象物に必要な把持力を予測し、勾配ベースのオンライン最適化を行う。

4. どうやって有効だと検証した?

広範な実験により、DexTeleが複数のロボットプラットフォームにわたって正確なモーションリターゲティングとコンプライアントな把持を達成することを実証した。具体的な実験内容は要旨からは不明だが、一般化の検証が行われたと推測される。

5. 議論はある?

要旨からは、システムの限界や課題についての議論は不明。ただし、クロスプラットフォームの一般化と把持のインタラクティブ性が重要とされ、それらを達成したと主張している。今後の課題として、より複雑なタスクや環境での性能評価が考えられるが、要旨には記載がない。

6. 次に読むべき論文は?

要旨で参照されている関連研究は明示されていないが、モーションリターゲティング、遠隔操作、適応把持、VLM、MPCに関する既存研究が関連する。具体的には、Vision-Language Models (VLMs) と Model Predictive Control (MPC) の応用研究、およびデクスタラスマニピュレーションの遠隔操作に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuanchuan Lai, Qing Gao, Ziyan Liang, Xianfeng Cheng, Junjie Hu, Zhaojie Ju

分類: cs.RO

原文アブストラクト

In dual-arm dexterous teleoperation, cross-platform generalization of motion retargeting and interactivity of grasping are crucial. However, the heterogeneity of robotic architectures and the wide variety of grasping objects pose significant challenges to achieving precise motion retargeting and compliant grasping in dual-arm dexterous teleoperation. To address these challenges, a dual-arm dexterous teleoperation system (DexTele) is proposed based on motion retargeting and adaptive force control. First, a vision-based motion retargeting module is designed to generate preliminary robot motions from human images. In this module, a motion-graph encoder and latent optimization are proposed for precise and convenient cross-platform motion retargeting. Second, an adaptive grasping module is designed to achieve compliant grasping. This module combines a vision-language model (VLM) with model predictive control (MPC), allowing the system to predict the required grasping force for a target object and perform gradient-based online optimization. Finally, extensive experiments demonstrate that the DexTele achieves precise motion retargeting and compliant grasping with generalization across multiple robot platforms.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI