日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

手物体相互作用arXiv:2611.08578

物体条件付き幾何学的ニューラル手距離場HaNDF

HaNDF: Object-Conditioned Geometric Neural Hand Distance Fields

シェア:XThreadsFacebookLINEはてブBluesky

物体との相互作用を条件として、もっともらしい手の姿勢を生成・投影できるニューラル距離場を提案し、姿勢精緻化や遮蔽下の再構成、操作合成に応用した論文。

詳しい要約

1. どんなもの?

- 物体条件付きの neural distance field として、もっともらしい hand-object 配置をモデル化するデータ駆動型事前分布 HaNDF を提案する研究。 - hand articulations の積多様体(product manifold)上で、物体と相互作用する手の姿勢を生成的に表現する。 - 手の関節空間における妥当な姿勢を、条件付き neural field の zero-level set として表す。

2. 先行研究と比べてどこがすごい?

- 近年の unconditional な生成的事前分布は human pose のモデリングで成功しているが、手は物体と相互作用する可変的な articulated body である点を指摘。 - 物体との相互作用を条件として組み込む点が、従来の無条件な姿勢事前分布との違いとして強調されている。 - 物体条件付きで幾何を考慮した neural distance field により、hand-object interaction の事前分布を提供する点が新規性として示唆される。

3. 技術・手法の肝は?

- 物体条件付きの geometry-aware neural distance field を構築し、妥当な articulations を zero-level set に埋め込む。 - Riemannian geometry の道具を利用し、(i) 物体誘導の neural field の zero level-set で妥当な手を表現し、(ii) 与えられた姿勢をこの field 上へ投影する。 - HaNDF を用いて、相互作用対象の物体を決定する妥当な条件の最適化も行う。

4. どうやって有効だと検証した?

- 広範な評価により、HaNDF が hand-object interaction の柔軟で強力な事前分布となることを示すと述べられている。 - pose refinement、occlusion 下での reconstruction、physically plausible manipulation synthesis などの応用に適することを示す。 - 具体的なデータセット名や評価指標、比較手法は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 想定される応用として pose refinement、occlusion 下の reconstruction、physically plausible manipulation synthesis が挙げられている。 - 限界や失敗ケース、計算コストに関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な研究名は不明。 - 関連手法として、unconditional な generative pose prior、neural distance field、Riemannian geometry を用いた姿勢最適化、hand-object interaction の reconstruction/manipulation synthesis に関する研究を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zuhao Liu, Melih Darcan, Zhengdi Yu, Riza Alp Guler, Tolga Birdal

分類: cs.CV, cs.AI, cs.LG, cs.RO

原文アブストラクト

We propose, HaNDF, object-conditional neural distance fields as data-driven priors for modeling the plausible hand-object configurations, in the product manifold of hand articulations. While recent unconditional generative priors showed success in modeling human pose, hands are versatile articulated bodies often found in interaction with other objects. This makes it crucial to develop a generative prior which can model the plausible hand poses conditioned on the object under interaction. To this end, our HaNDF proposes a geometry-aware, object-conditioned neural distance field, representing the plausible articulations in the zero-level set of a conditional field. We leverage tools from Riemannian geometry to (i) represent plausible hands in the zero level-set of an object-induced neural field, and (ii) project a given pose onto this field. Using HaNDF, we can also optimize for a plausible condition, determining the object under interaction. Our extensive evaluations demonstrate that our HaNDF provides a flexible and powerful prior for hand-object interaction, suitable for applications such as pose refinement, reconstruction under occlusion, and physically plausible manipulation synthesis.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI