日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.10971

ContactExplorer: 接触カバレッジ誘導による汎用巧みなマニピュレーションの探索

ContactExplorer: Contact Coverage-Guided Exploration for General-Purpose Dexterous Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

物体表面と手指の接触パターンをカウントベースで探索し、未探索の接触領域へ誘導する強化学習手法を提案し、巧みなマニピュレーションのサンプル効率と成功率を向上させた。

詳しい要約

1. どんなもの?

- 器用な手による物体操作(dexterous manipulation)のための汎用的な探索手法であるContactExplorerを提案。 - 接触を物体表面点と手のキーポイントの交差として表現し、多様で新規な接触パターン(どの指が物体のどの領域に触れるか)の発見を促す。 - 学習されたハッシュコードで離散化された物体状態に条件付けられた接触カウンタを維持し、各指が異なる物体領域とどれくらい頻繁に相互作用するかを捉える。 - このカウンタを2つの方法で活用:(1) 新規な接触パターンの探索を促進するカウントベースの接触カバレッジ報酬、(2) 未探索の接触領域へエージェントを導くエネルギー-based reaching報酬。 - 多様なdexterous manipulationタスクで評価し、既存の探索手法よりもサンプル効率と成功率を大幅に改善し、学習された接触パターンが実世界にロバストに転移することを示した。

2. 先行研究と比べてどこがすごい?

- 既存手法は接触ベースの新規性信号が不安定、距離ベースの新規性信号が非効率、またはタスク固有の事前知識に依存する問題があった。 - ContactExplorerは接触を物体表面点と手のキーポイントの交差として表現し、接触パターンの多様性と新規性を直接促すことで、これらの問題を克服。 - タスク固有の事前知識を必要とせず、汎用的なdexterous manipulationタスクに適用可能。 - 実験的に既存の探索手法よりもサンプル効率と成功率を大幅に改善し、実世界への転移も頑健であることを示した。

3. 技術・手法の肝は?

- 接触を物体表面点と手のキーポイントの交差として表現し、接触パターン(どの指が物体のどの領域に触れるか)を定義。 - 学習されたハッシュコードで離散化された物体状態に条件付けられた接触カウンタを維持し、各指と物体領域の相互作用頻度を記録。 - カウントベースの接触カバレッジ報酬:新規な接触パターンの探索を促進。 - エネルギー-based reaching報酬:未探索の接触領域へエージェントを導く。 - これら2つの報酬を組み合わせて探索をガイド。

4. どうやって有効だと検証した?

- 多様なdexterous manipulationタスクでContactExplorerを評価。 - 実験結果は、既存の探索手法と比較してサンプル効率と成功率を大幅に改善することを示した。 - 学習された接触パターンが実世界にロバストに転移することを確認。 - プロジェクトページ(https://contact-explorer.github.io)で詳細を公開。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、dexterous manipulationにおける強化学習の探索手法(例:novelty search、count-based exploration、energy-based models)や、接触リッチなタスクのための手法(例:contact-based exploration)が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zixuan Liu, Ruoyi Qiao, Chenrui Tie, Xuanwei Liu, Yunfan Lou, Chongkai Gao, Zhixuan Xu, Lin Shao

分類: cs.RO, cs.AI

原文アブストラクト

Reinforcement learning has achieved remarkable success in domains such as Atari games, navigation, and locomotion, where exploration can often be guided by novelty over states or dynamics. In contrast, dexterous manipulation requires rich physical hand--object interactions, but existing methods often suffer from unstable contact-based novelty signals, inefficient distance novelty signals, or reliance on task-specific priors. We propose ContactExplorer, a general exploration method for dexterous manipulation tasks. ContactExplorer represents contact as the intersection between object surface points and hand keypoints, encouraging dexterous hands to discover diverse and novel contact patterns, namely which fingers contact which object regions. It maintains a contact counter conditioned on discretized object states obtained via learned hash codes, capturing how frequently each finger interacts with different object regions. This counter is leveraged in two complementary ways: (1) to assign a count-based contact coverage reward that promotes exploration of novel contact patterns, and (2) an energy-based reaching reward that guides the agent toward under-explored contact regions. We evaluate ContactExplorer on a diverse set of dexterous manipulation tasks. Experimental results show that ContactExplorer substantially improves sample efficiency and success rates over existing exploration methods, and that the contact patterns learned with ContactExplorer transfer robustly to the real world. Project page is https://contact-explorer.github.io.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI