日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.01695

DexReMoE:混合エキスパートによる汎用物体のハンド内再配向

DexReMoE:In-hand Reorientation of General Object via Mixtures of Experts

シェア:XThreadsFacebookLINEはてブBluesky

複数のエキスパート方策を混合エキスパート(MoE)で統合し、多様な複雑形状の物体を空中で把持したまま再配向する汎用性の高い制御を実現した。

詳しい要約

1. どんなもの?

- 本論文は **DexReMoE** を提案する。 - 多様な物体の in-hand reorientation(手内での回転操作)を対象とする。 - 複数の expert policy を **Mixture-of-Experts (MoE)** で統合する枠組み。 - 目的は複雑形状への汎化。 - 安定した grasp の維持と精密な回転軌道の実行を狙う。 - 学習は simulation 上の **reinforcement learning (RL)**。 - 評価は下向きの hand で空中に保持した物体の回転という難設定。

2. 先行研究と比べてどこがすごい?

- 先行研究は単一物体や単純形状が中心で、複雑形状への汎化が課題。 - DexReMoE は複数の expert policy を MoE で統合し、広範な物体への汎化を狙う点が特徴。 - 物体カテゴリ情報を **privileged inputs** として与え、形状表現を強化。 - 150 物体で平均連続成功回数 19.5 を報告。 - worst-case performance を 0.69 から 6.05 へ改善したと述べる。

3. 技術・手法の肝は?

- 複雑形状ごとに複数の expert policy を学習。 - それらを **Mixture-of-Experts (MoE)** として統合する。 - 物体カテゴリ情報を **privileged inputs** として入力し、形状表現を補強。 - 学習は simulation 上の **reinforcement learning (RL)** で実施。 - 下向きの hand で空中保持した物体の回転という難シナリオを扱う。

4. どうやって有効だと検証した?

- simulation 上で **RL** により学習し、out-of-distribution の新規物体で評価。 - 最も難しい設定として、下向きの hand で空中に保持した物体の回転を検証。 - 150 物体の多様な集合で平均連続成功回数 19.5 を達成。 - baseline と比較し、worst-case performance を 0.69 から 6.05 に改善。

5. 議論はある?

- 要旨からは不明。 - 明示されているのは、複雑形状への汎化と worst-case 改善の主張。 - 限界や失敗要因、実機評価の有無については要旨に記述なし。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として **Mixture-of-Experts (MoE)** を用いた dexterous manipulation 研究。 - **privileged inputs** を用いる形状表現学習。 - **reinforcement learning (RL)** による in-hand reorientation の先行研究。 - out-of-distribution 物体への汎化を扱う dexterous manipulation 研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jun Wan, Xing Liu, Yunlong Dong

分類: cs.RO

原文アブストラクト

In hand object reorientation provides capability for dexterous manipulation, requiring robust control policies to manage diverse object geometries, maintain stable grasps, and execute precise complex orientation trajectories. However, prior works focus on single objects or simple geometries and struggle to generalize to complex shapes. In this work, we introduce DexReMoE (Dexterous Reorientation Mixture-of-Experts), in which multiple expert policies are trained for different complex shapes and integrated within a Mixture-of-Experts (MoE) framework, making the approach capable of generalizing across a wide range of objects. Additionally, we incorporate object category information as privileged inputs to enhance shape representation. Our framework is trained in simulation using reinforcement learning (RL) and evaluated on novel out-of-distribution objects in the most challenging scenario of reorienting objects held in the air by a downward-facing hand. In terms of the average consecutive success count, DexReMoE achieves a score of 19.5 across a diverse set of 150 objects. In comparison to the baselines, it also enhances the worst-case performance, increasing it from 0.69 to 6.05. These results underscore the scalability and adaptability of the DexReMoE framework for general-purpose in-hand reorientation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI