日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.13677

Mana: 関節ツールの巧みな操作

Mana: Dexterous Manipulation of Articulated Tools

シェア:XThreadsFacebookLINEはてブBluesky

関節を持つツールの器用な操作を、アニメーション問題として捉え直したシミュレーションから実機への転移フレームワークを提案。

詳しい要約

1. どんなもの?

- 関節を持つ道具(articulated tool)を器用に操作するための汎用 sim-to-real フレームワーク Mana を提案。 - 器用な操作をアニメーション問題として再解釈し、coarse-to-fine パイプラインで把持キーフレームから操作軌道を生成。 - データ生成はほぼ自動で、機能的 affordance の指定に数クリック(1ツールあたり1分未満)のみ。 - 異なるスケール・関節タイプの4つの articulated tool で、把持と in-hand manipulation の zero-shot sim-to-real 転移を達成。

2. 先行研究と比べてどこがすごい?

- 従来研究は主に rigid object に焦点を当て、articulated tool の使用は物理的複雑さと機能的把持・操作ポリシー学習の困難さから未開拓だった。 - Mana は articulated tool の把持と in-hand manipulation の両方で zero-shot sim-to-real 転移を実現。 - データ生成がほぼ自動で、1ツールあたり1分未満の affordance 指定で済むスケーラブルなアプローチ。

3. 技術・手法の肝は?

- 器用な操作をアニメーション問題として再解釈する sim-to-real フレームワーク。 - computer animation に着想を得た coarse-to-fine パイプラインを採用。 - 手続き的に生成された grasp keyframes を、motion planning と reinforcement learning によって操作軌道へ変換。 - データ生成プロセスは largely automatic で、機能的 affordance の指定に数クリックのみ。

4. どうやって有効だと検証した?

- 異なるスケールと関節タイプを持つ4つの articulated tool に対して評価。 - 把持と in-hand manipulation の両方で zero-shot sim-to-real 転移を達成したことを示す。 - 詳細な実験設定やベースラインとの比較は要旨からは不明。

5. 議論はある?

- articulated tool 操作の物理的複雑さと機能的把持・操作ポリシー学習の難しさを指摘。 - 提案手法がスケーラブルなアプローチであると主張。 - 限界や今後の課題についての具体的な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究は明示されていない。 - 関連手法として、rigid object の dexterous manipulation、sim-to-real transfer、motion planning、reinforcement learning を用いた操作学習の定番研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhao-Heng Yin, Guanya Shi, Pieter Abbeel, C. Karen Liu

分類: cs.RO, cs.AI, cs.CV, cs.LG

原文アブストラクト

Articulated tool manipulation remains a major challenge in dexterous robotics due to the need to coordinate internal degrees of freedom and contact-rich interactions. While prior work has largely focused on rigid objects, articulated tool use remains underexplored because of its physical complexity and the difficulty of learning functional grasping and manipulation policies. We present Mana (Manipulation Animator), a general sim-to-real framework that reinterprets dexterous manipulation as an animation problem. Inspired by computer animation, Mana employs a coarse-to-fine pipeline that transforms procedurally-generated grasp keyframes into manipulation trajectories through motion planning and reinforcement learning. The data generation process is largely automatic, requiring only a few mouse clicks to specify functional affordances (<1 minute per tool). Across four articulated tools spanning different scales and joint types, Mana achieves zero-shot sim-to-real transfer for both grasping and in-hand manipulation, demonstrating a scalable approach to dexterous articulated tool use.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI