日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2604.04138

スパースな分類ガイダンスからの巧みな把持学習

Learning Dexterous Grasping from Sparse Taxonomy Guidance

シェア:XThreadsFacebookLINEはてブBluesky

物体とタスクに応じた把持計画を、密なポーズや接触点の指定なしに、タクソノミー(分類)ベースのスパースな指示から学習する二段階フレームワークGRITを提案。実世界実験で制御可能性も示した。

詳しい要約

1. どんなもの?

- 器用な把持制御を学習するGRITという2段階フレームワーク - 第1段階でシーンとタスク文脈からtaxonomyベースの把持仕様を予測 - 第2段階でその疎なコマンドを条件に連続的な指動作を生成 - タスクを達成しつつ意図した把持構造を保持 - 実世界実験で把持戦略を高レベルtaxonomy選択で調整可能

2. 先行研究と比べてどこがすごい?

- 従来の密なpose/contact目標指定は全物体・タスクで非現実的 - タスク報酬のみのend-to-end RLは制御性に欠け介入困難 - GRITは疎なtaxonomyガイダンスで制御性と汎化を両立 - 特定の把持taxonomyが特定の物体形状に有効であることを示す - 新規物体への汎化でベースラインを上回り成功率87.9%を達成

3. 技術・手法の肝は?

- 2段階フレームワーク: 把持仕様予測と連続指動作生成 - 第1段階: シーンとタスク文脈からtaxonomyベース把持仕様を予測 - 第2段階: 疎なコマンドを条件にポリシーが連続指動作を生成 - 把持構造を保持しながらタスクを達成 - 物体形状とタスク意図に基づく高レベルtaxonomy選択で調整可能

4. どうやって有効だと検証した?

- 新規物体への汎化性能をベースラインと比較 - 全体成功率87.9%を達成 - 実世界実験で制御性を実証 - 物体形状とタスク意図に基づくtaxonomy選択で把持戦略調整が可能 - 特定taxonomyと物体形状の関係を活用

5. 議論はある?

- 特定の把持taxonomyが特定の物体形状に有効であることを示す - 疎なtaxonomyガイダンスが制御性と汎化の両立に寄与 - 実世界での把持戦略調整が可能 - 詳細な議論や限界は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 関連手法としてend-to-end reinforcement learning、dense pose/contact targets - 同分野の定番としてdexterous manipulation、grasp taxonomy、reinforcement learning

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Juhan Park, Taerim Yoon, Seungmin Kim, Joong-Gil Kim, Wontae Ye, Jeongeun Park, Yoonbyung Chai, Geonwoo Cho, Geunwoo Cho, Dohyeong Kim, Kyungjae Lee, Yong-Jae Kim, Sungjoon Choi

分類: cs.RO, cs.AI

原文アブストラクト

Dexterous manipulation requires planning a grasp configuration suited to the object and task, which is then executed through coordinated multi-finger control. However, specifying grasp plans with dense pose or contact targets for every object and task is impractical. Meanwhile, end-to-end reinforcement learning from task rewards alone lacks controllability, making it difficult for users to intervene when failures occur. To this end, we present GRIT, a two-stage framework that learns dexterous control from sparse taxonomy guidance. GRIT first predicts a taxonomy-based grasp specification from the scene and task context. Conditioned on this sparse command, a policy generates continuous finger motions that accomplish the task while preserving the intended grasp structure. Our result shows that certain grasp taxonomies are more effective for specific object geometries. By leveraging this relationship, GRIT improves generalization to novel objects over baselines and achieves an overall success rate of 87.9%. Moreover, real-world experiments demonstrate controllability, enabling grasp strategies to be adjusted through high-level taxonomy selection based on object geometry and task intent.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI