日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2505.01083

DexFlow: 巧みな手のポーズリターゲティングとインタラクションの統合手法

DexFlow: A Unified Approach for Dexterous Hand Pose Retargeting and Interaction

シェア:XThreadsFacebookLINEはてブBluesky

人間の手と物体のデータを組み合わせ、微分損失制約と接触マップ生成により、ロボットハンドの高精度で自然な操作データを生成するパイプラインを提案した。

詳しい要約

1. どんなもの?

- ロボットハンド向けのdexterous manipulationデータ生成を目的とした統合パイプライン - 人間の手と物体のデータを複数ソースから組み合わせ、高精度なretargetingを行う - 手と物体のinteractionを考慮し、contact mapを生成してinterpenetrationなどのartifactを抑える - 時系列一貫性を保つためdifferential loss constraintを導入

2. 先行研究と比べてどこがすごい?

- 従来のretargeting手法は精度が低く、hand-object interactionを考慮せずinterpenetrationなどのartifactが生じる - 生成手法はhuman hand priorを欠くため、限定的で不自然なposeしか生成できない - 本研究は複数ソースのデータ統合とcontact mapにより、pose精度・自然さ・多様性を大きく改善 - 具体的な数値比較は要旨からは不明

3. 技術・手法の肝は?

- 複数ソースのhuman hand dataとobject dataを統合するdata transformation pipeline - 高精度retargetingのためのdifferential loss constraintでtemporal consistencyを担保 - contact mapを生成しhand-object interactionをrefine - 詳細なネットワーク構成や最適化手順は要旨からは不明

4. どうやって有効だと検証した?

- 実験によりpose accuracy、naturalness、diversityの改善を確認したと記載 - 具体的なデータセット名、評価指標、比較対象、定量結果は要旨からは不明

5. 議論はある?

- interpenetrationやartifactの低減、human hand priorの活用が議論の中心と推測されるが詳細は要旨からは不明 - 限界やfailure case、計算コストに関する記述は要旨からは不明

6. 次に読むべき論文は?

- 要旨で直接参照されている個別論文は不明 - 関連手法としてretargeting、hand-object interaction modeling、contact map生成、human hand priorを用いた生成手法の代表的論文を次に読むべき - 具体的なタイトルは要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaoyi Lin, Kunpeng Yao, Lixin Xu, Xueqiang Wang, Xuetao Li, Yuchen Wang, Miao Li

分類: cs.RO

原文アブストラクト

Despite advances in hand-object interaction modeling, generating realistic dexterous manipulation data for robotic hands remains a challenge. Retargeting methods often suffer from low accuracy and fail to account for hand-object interactions, leading to artifacts like interpenetration. Generative methods, lacking human hand priors, produce limited and unnatural poses. We propose a data transformation pipeline that combines human hand and object data from multiple sources for high-precision retargeting. Our approach uses a differential loss constraint to ensure temporal consistency and generates contact maps to refine hand-object interactions. Experiments show our method significantly improves pose accuracy, naturalness, and diversity, providing a robust solution for hand-object interaction modeling.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI