日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

巧みな操作arXiv:2605.16257

DexJoCo: MuJoCo上でのタスク指向巧みな操作のためのベンチマークとツールキット

DexJoCo: A Benchmark and Toolkit for Task-Oriented Dexterous Manipulation on MuJoCo

シェア:XThreadsFacebookLINEはてブBluesky

巧みなロボットハンドの操作能力を評価するための、11の機能ベースのタスクとデータ収集システムを含むベンチマークとツールキットを提案し、現代のモデルの性能を分析した。

詳しい要約

1. どんなもの?

- DexJoCoは、MuJoCo上でのタスク指向のdexterous manipulation(巧みな操作)のためのbenchmarkとtoolkit。 - 11の機能的に根拠のあるタスクで構成され、tool-use、bimanual coordination、long-horizon execution、reasoningを評価する。 - 低コストのデータ収集システムを開発し、これらのタスクで1.1Kのtrajectoriesを収集。 - domain randomizationをサポートし、robustnessを評価可能。 - 現代のモデルを多様な設定(visual/dynamics randomization、multi-task training、action-head adaptation)でベンチマークする。

2. 先行研究と比べてどこがすごい?

- 既存のdexterous benchmarksは、parallel grippersに対するdexterous handsの独自の操作能力を反映したタスクや、包括的な評価パイプラインが不足していた。 - DexJoCoは、tool-use、bimanual coordination、long-horizon execution、reasoningといったdexterous hands特有の能力を評価する11のタスクを提供。 - 低コストデータ収集システムと1.1K trajectories、domain randomizationサポートを含む包括的な評価パイプラインを備える点が先行研究と異なる。

3. 技術・手法の肝は?

- MuJoCo上に構築されたbenchmarkとtoolkit。 - 11の機能的に根拠のあるタスクを設計し、tool-use、bimanual coordination、long-horizon execution、reasoningを評価。 - 低コストのデータ収集システムを開発し、1.1K trajectoriesを収集。 - domain randomizationをサポートし、robustnessを評価。 - 現代のモデルをvisual/dynamics randomization、multi-task training、action-head adaptationなどの多様な設定でベンチマーク。

4. どうやって有効だと検証した?

- 11のタスクで1.1K trajectoriesを収集し、domain randomizationを含む多様な設定で現代のモデルをベンチマーク。 - 広範な実証分析を通じて、dexterous manipulationにおける現在のpolicyの重要な洞察と共通の限界を特定。 - 具体的な評価指標やベースラインの詳細は要旨からは不明。

5. 議論はある?

- 現在のpolicyのdexterous manipulationにおける共通の限界を特定し、dexterous hand robot learningの将来研究への重要な課題を強調。 - 具体的な議論の内容や限界の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、dexterous manipulationのbenchmark(例:OpenAI GymのHandManipulate、Adroit、MetaWorldなど)や、関連するrobot learningの手法(例:behavior cloning、reinforcement learning、domain randomization)が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hanwen Wang, Weizhi Zhao, Xiangyu Wang, Siyuan Huang, He Lin, Boyuan Zheng, Rongtao Xu, Gang Wang, Yao Mu, He Wang, Lue Fan, Hongsheng Li, Zhaoxiang Zhang, Tieniu Tan

分類: cs.RO

原文アブストラクト

Achieving human-level manipulation requires dexterous robotic hands capable of complex object interactions. Advancing such capabilities further demands standardized benchmarks for systematic evaluation. However, existing dexterous benchmarks lack tasks that reflect the unique manipulation capabilities of dexterous hands over parallel grippers, as well as comprehensive evaluation pipelines. In this paper, we present DexJoCo, a benchmark and toolkit for task-oriented dexterous manipulation, comprising 11 functionally grounded tasks that evaluate tool-use, bimanual coordination, long-horizon execution, and reasoning. We develop a low-cost data collection system and collect 1.1K trajectories across these tasks, with support for domain randomization to assess robustness. We benchmark modern models under diverse settings, including visual and dynamics randomization, multi-task training, and action-head adaptation. Through extensive empirical analysis, we identify several important insights and common limitations of current policies in dexterous manipulation, highlighting key challenges for future research in dexterous hand robot learning. Project page available at: https://dexjoco.github.io

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI