日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2602.08278

DexFormer: 履歴条件付きTransformerによるクロスエンボディメント器用マニピュレーション

DexFormer: Cross-Embodied Dexterous Manipulation via History-Conditioned Transformer

シェア:XThreadsFacebookLINEはてブBluesky

履歴観測を条件とするTransformerベースの単一ポリシーで、異なる多自由度ハンドの形態や動力学をオンラインで推定し、ゼロショットで多様なハンドに適応する器用マニピュレーションを実現した。

詳しい要約

1. どんなもの?

- 高DoFのhandとarmをcontact-richな環境で制御するdexterous manipulationのための、cross-embodiment方策 - 修正したtransformer backboneを用いたend-to-endでdynamics-awareなpolicy - 履歴観測にconditioningし、morphologyとdynamicsをon the flyで推論 - 多様な手の構成に適応し、embodimentに適した制御actionを生成 - procedurally generatedなdexterous-hand assetsで訓練し、汎化可能なmanipulation priorを獲得

2. 先行研究と比べてどこがすごい?

- 従来はembodiment variabilityのため、別々のpolicyを訓練するか、shared action spaceとper-embodiment decoder headsに依存 - DexFormerは単一のpolicyで異種hand embodimentsに汎化 - 履歴観測からmorphologyとdynamicsを推論し、embodiment固有のdecoder headを必要としない - Leap Hand、Allegro Hand、Rapid Handへの強いzero-shot transferを実現

3. 技術・手法の肝は?

- 修正したtransformer backboneを採用 - 履歴観測にconditioningするhistory-conditionedな設計 - temporal contextを用いてmorphologyとdynamicsをon the flyで推論 - end-to-endでdynamics-awareなcross-embodiment policy - procedurally generatedなdexterous-hand assetsで訓練

4. どうやって有効だと検証した?

- 多様なprocedurally generated dexterous-hand assetsで訓練 - Leap Hand、Allegro Hand、Rapid Handへのzero-shot transferを評価 - 単一policyが異種hand embodimentsに汎化することを示した - 詳細な実験設定・指標は要旨からは不明

5. 議論はある?

- 単一policyで異種hand embodimentsに汎化できることを示し、cross-embodiment dexterous manipulationのscalable foundationを確立 - 限界や失敗ケース、計算コスト、実機での安全性などは要旨からは不明

6. 次に読むべき論文は?

- Leap Hand、Allegro Hand、Rapid Handに関する研究 - cross-embodiment learningやdexterous manipulationの関連手法 - transformerベースのrobot policy - 具体的な参照論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ke Zhang, Lixin Xu, Chengyi Song, Junzhe Xu, Xiaoyi Lin, Zeyu Jiang, Renjing Xu

分類: cs.RO

原文アブストラクト

Dexterous manipulation remains one of the most challenging problems in robotics, requiring coherent control of high-DoF hands and arms under complex, contact-rich dynamics. A major barrier is embodiment variability: different dexterous hands exhibit distinct kinematics and dynamics, forcing prior methods to train separate policies or rely on shared action spaces with per-embodiment decoder heads. We present DexFormer, an end-to-end, dynamics-aware cross-embodiment policy built on a modified transformer backbone that conditions on historical observations. By using temporal context to infer morphology and dynamics on the fly, DexFormer adapts to diverse hand configurations and produces embodiment-appropriate control actions. Trained over a variety of procedurally generated dexterous-hand assets, DexFormer acquires a generalizable manipulation prior and exhibits strong zero-shot transfer to Leap Hand, Allegro Hand, and Rapid Hand. Our results show that a single policy can generalize across heterogeneous hand embodiments, establishing a scalable foundation for cross-embodiment dexterous manipulation. Project website: https://davidlxu.github.io/DexFormer-web/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI