日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.39044

なんでもキャッチ!器用な手で汎化可能な動的捕球

Catch It All!: Generalizable Dynamic Catching with a Dexterous Hand

シェア:XThreadsFacebookLINEはてブBluesky

一人称カメラのみを用い、未知の物体や多様な物性に対応するヒューマノイドロボットのsim-to-real捕球フレームワークを提案し、Unitree G1上でゼロショットの下手・上手投げ捕球を実現した。

詳しい要約

1. どんなもの?

本論文は Catch It All! と名付けられた、ヒト型ロボット向けの sim-to-real キャッチングフレームワークである。1台の egocentric camera のみを用いて、underhand と overhand の両方のキャッチを、訓練時に見ていない物体へ汎化して行うことを目指す。物体の geometry、deformability、elasticity、物理特性が変化しても対応できる policy を学習する。Unitree G1 上に zero-shot で展開して検証している。

2. 先行研究と比べてどこがすごい?

任意物体のキャッチングは、未知の飛来物への汎化と、ノイズの多い視覚観測下での予測不能な接触ダイナミクスへのリアルタイム適応を必要とする。本論文は、1台の egocentric camera のみで underhand/overhand の両方を扱い、geometry・deformability・elasticity・物理特性の異なる未見物体へ汎化する点を主張している。ただし要旨からは、比較対象となる具体的な先行研究や定量的な優位性は不明。

3. 技術・手法の肝は?

sim-to-real のキャッチングフレームワークを構築し、汎化する policy を学習する。リアルタイムに物体の pose と shape へ適応する有効な grasp を、grasp reward の慎重な設計によって学習する。さらに safety-aware curricula を導入し、ハードウェア限界近く(wrist torque limits は 5 Nm 程度まで含む)での安全かつ高頻度な行動実行を可能にする。観測は1台の egocentric camera のみ。

4. どうやって有効だと検証した?

Unitree G1 上へ zero-shot でシステムを展開して検証した。訓練時に見ていない9つの物体に対し、underhand と overhand のキャッチに成功したと報告している。対象には low-rebound plushes、semi-deformable toys、chip bags、接触時に高い rebound を示す rigid-elastic objects が含まれる。

5. 議論はある?

要旨からは不明。safety-aware curricula や wrist torque limits への言及はあるが、失敗事例や限界、議論の詳細は要旨に記載がない。

6. 次に読むべき論文は?

要旨では具体的な参照論文が示されていないため、同分野の定番として sim-to-real の dexterous manipulation、dynamic catching、egocentric vision を用いた grasping、domain randomization に関する研究を次に読む候補とする。具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Arth Shukla, Kehlani Fay, Huaze Liu, Darin Djapri, Alexiy Buynitsky, Nicklas Hansen

分類: cs.RO

原文アブストラクト

Catching arbitrary objects requires generalization to novel projectiles and real-time adaptation to unpredictable contact dynamics under noisy visual observations. This paper presents Catch It All!, a sim-to-real catching framework for humanoid robots that generalizes and adapts to unseen objects with variable physical properties for underhand and overhand catches, using only one egocentric camera. We learn policies which generalize to unseen objects with varying geometry, deformability, elasticity, and physical properties. Effective grasps which adapt real-time to object poses and shapes are learned through careful grasp reward design. We provide safety-aware curricula which enable safe, high-frequency action execution near hardware limits, including wrist torque limits as low as 5 Nm. We validate our system by deploying zero-shot on a Unitree G1. With only one egocentric camera, Catch It All! successfully performs underhand and overhand catches on 9 unseen objects not seen during training, including low-rebound plushes, semi-deformable toys and chip bags, and rigid-elastic objects with high rebound on contact.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI