日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2506.02489

Grasp2Grasp: シュレーディンガー橋による視覚ベースの器用な把持変換

Grasp2Grasp: Vision-Based Dexterous Grasp Translation via Schr\"odinger Bridges

シェア:XThreadsFacebookLINEはてブBluesky

異なる形状のロボットハンド間で、視覚観測から把持意図を転送する手法を提案。シュレーディンガー橋とスコア・フローマッチングを用いて、物理情報を考慮したコスト関数で安定した把持を生成する。

詳しい要約

1. どんなもの?

- 視覚ベースの dexterous grasp translation を扱う新手法 Grasp2Grasp の提案 - 目的は、異なる morphology を持つロボットハンド間で grasp intent を転送すること - 入力は source hand が物体を把持する視覚観測、出力は target hand の機能的に等価な grasp - paired demonstrations や hand-specific simulations を必要としない設定を目指す - grasp 分布間の stochastic transport を Schr\"odinger Bridge 形式で定式化

2. 先行研究と比べてどこがすごい?

- paired demonstrations や hand-specific simulations を不要とする点が特徴 - 従来の vision-based grasping と probabilistic generative modeling を橋渡し - heterogeneous manipulators 間の semantic grasp transfer を可能にする枠組み - 具体的な先行研究名や定量的比較は要旨からは不明

3. 技術・手法の肝は?

- grasp 分布間の stochastic transport を Schr\"odinger Bridge として定式化 - score matching と flow matching により source/target の latent grasp space 間を写像 - 写像は視覚観測に条件付けられる - physics-informed cost functions を導入し、base pose・contact maps・wrench space・manipulability の整合を符号化

4. どうやって有効だと検証した?

- 多様な hand-object pairs での実験を実施 - 生成された grasp が stable かつ physically grounded であることを示す - 強い generalization を示すと報告 - 具体的な評価指標・データセット・ベースラインは要旨からは不明

5. 議論はある?

- 異種マニピュレータへの semantic grasp transfer を可能にする意義を主張 - vision-based grasping と probabilistic generative modeling の橋渡しを強調 - 限界・失敗事例・計算コストなどの議論は要旨からは不明

6. 次に読むべき論文は?

- Schr\"odinger Bridge を用いた生成モデリングの関連研究 - score matching / flow matching の関連手法 - vision-based dexterous grasping の関連研究 - 具体的な参照論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tao Zhong, Jonah Buchanan, Christine Allen-Blanchette

分類: cs.RO, cs.CV, cs.LG

原文アブストラクト

We propose a new approach to vision-based dexterous grasp translation, which aims to transfer grasp intent across robotic hands with differing morphologies. Given a visual observation of a source hand grasping an object, our goal is to synthesize a functionally equivalent grasp for a target hand without requiring paired demonstrations or hand-specific simulations. We frame this problem as a stochastic transport between grasp distributions using the Schr\"odinger Bridge formalism. Our method learns to map between source and target latent grasp spaces via score and flow matching, conditioned on visual observations. To guide this translation, we introduce physics-informed cost functions that encode alignment in base pose, contact maps, wrench space, and manipulability. Experiments across diverse hand-object pairs demonstrate our approach generates stable, physically grounded grasps with strong generalization. This work enables semantic grasp transfer for heterogeneous manipulators and bridges vision-based grasping with probabilistic generative modeling. Additional details at https://grasp2grasp.github.io/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI