LeVR: 巧みなマニピュレーションのための模倣学習向けモジュラーVRテレオペレーションフレームワーク
LeVR: A Modular VR Teleoperation Framework for Imitation Learning in Dexterous Manipulation
VRテレオペレーションによるデータ収集とLeRobot模倣学習を統合したモジュラーフレームワークLeVRを提案し、FrankaアームとXHand向けの実装LeFranXと100件のデモデータセットを公開した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Zhengyang Kris Weng, Matthew L. Elwin, Han Liu
分類: cs.RO
原文アブストラクト
We introduce LeVR, a modular software framework designed to bridge two critical gaps in robotic imitation learning. First, it provides robust and intuitive virtual reality (VR) teleoperation for data collection using robot arms paired with dexterous hands, addressing a common limitation in existing systems. Second, it natively integrates with the powerful LeRobot imitation learning (IL) framework, enabling the use of VR-based teleoperation data and streamlining the demonstration collection process. To demonstrate LeVR, we release LeFranX, an open-source implementation for the Franka FER arm and RobotEra XHand, two widely used research platforms. LeFranX delivers a seamless, end-to-end workflow from data collection to real-world policy deployment. We validate our system by collecting a public dataset of 100 expert demonstrations and use it to successfully fine-tune state-of-the-art visuomotor policies. We provide our open-source framework, implementation, and dataset to accelerate IL research for the robotics community.
関連論文
- 建設ロボティクスのための人間参加型制御パラダイム:VR誘導テレオペレーションから半自律デュアルアーム操作までテレオペレーション
- MABEL: テレオペレーションと学習のためのオープンな人間型移動双腕プラットフォームテレオペレーション
- DITTO-X: 巧みな操作と人間介入のための順方向・逆方向テレオペレーションテレオペレーション
- NEXUS: 地形適応型テレオペレーションのための知覚的全身体制御テレオペレーション
- MATE: ヒューマノイド協調データ収集のためのマルチエージェント仮想テレオペレーションプラットフォームテレオペレーション
- Astrobee用テレオペ自由飛行マニピュレーションのための展開可能な4指ペイロードテレオペレーション
