日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.09195

StableGrasp: 単一画像から物理的に安定な人間の把持を再構築

StableGrasp: Reconstructing Physically Stable Human Hand Grasps from Single Images

シェア:XThreadsFacebookLINEはてブBluesky

単一RGB画像から、微分可能シミュレータを用いて手の形状と把持力を分離最適化し、物理的に安定な人間の把持を再構築する手法を提案。

詳しい要約

1. どんなもの?

- 単一RGB画像から物理的に安定な人間の把持を再構築するフレームワークStableGraspを提案。 - 視覚的な手姿勢と把持力を決定する制御対象を明示的に分離。 - 微分可能シミュレータを用いた最適化により、手形状と制御を同時に最適化。 - 視覚的一貫性と幾何学的妥当性を保ちつつ、物理的に安定な把持を実現。

2. 先行研究と比べてどこがすごい?

- 既存手法は物理を考慮せず視覚的手形状のみをモデル化するか、物理モデリングの妥当性が低い。 - 本手法は微分可能シミュレーションに基づく最適化で、物理的妥当性を大幅に向上。 - 厳密な物理シミュレーション下で、代替の手制御戦略よりもはるかに安定な把持を生成。 - 視覚のみの把持再構築パイプラインの出力を物理的に安定な把持に変換できる。

3. 技術・手法の肝は?

- 微分可能シミュレータ内で把持の運動エネルギーを最小化する最適化を実施。 - 手形状と制御対象を同時に最適化し、視覚的一貫性と幾何学的妥当性を正則化項で保持。 - 視覚的手姿勢と把持力を決定する制御対象を明示的に分離する点が肝。 - 物理的安定性を目的関数に組み込むことで、視覚制約と物理制約を両立。

4. どうやって有効だと検証した?

- 厳密な物理シミュレーション下で再構築された把持の安定性を評価。 - 代替の手制御戦略と比較し、本手法がはるかに安定な把持を生成することを実験で示す。 - 視覚的一貫性と幾何学的妥当性も維持されることを確認。 - 視覚のみの把持再構築パイプラインへの適用により、出力が物理的に安定化することを実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、視覚からの手姿勢推定(例: MANOベースの手法)や微分可能シミュレーション(例: MuJoCo, Isaac Gym)に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Han Jiang, Etienne Vouga, Qixing Huang, Georgios Pavlakos

分類: cs.CV, cs.GR, cs.RO

原文アブストラクト

Reconstructing a physically stable human grasp from a single RGB image is challenging because physically modeling grasps is itself difficult, and the problem requires estimating not only a visually constrained hand pose but also a control target that stabilizes the grasp. Existing methods either model only visual hand geometry without considering physics, or rely on less plausible physical modeling, which limits the physical validity of the resulting grasps. In this paper, we present StableGrasp, a differentiable simulation-based optimization framework that explicitly separates the visual hand pose from the control target that determines the grasping forces. Our method jointly optimizes hand geometry and control by minimizing the kinetic energy of the grasp in a differentiable simulator, while regularizing the hand geometry to preserve visual consistency and geometric plausibility. The reconstructed grasps are substantially more stable under rigorous physical simulation, while remaining visually consistent with the input images and geometrically plausible. Experiments show that our approach produces far more stable grasps than alternative hand-control strategies, benefiting visual-only grasp reconstruction pipelines by turning their outputs into physically stable grasps.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI