日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.04848

ロボット操作のための双曲多視点事前学習

Hyperbolic Multiview Pretraining for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作タスクの性能向上のため、双曲空間で多視点表現を自己教師あり学習するHyperMVPを提案し、既存のユークリッド空間ベース手法より優れた性能を示した。

詳しい要約

1. どんなもの?

- ロボット操作のための3D認識視覚事前学習フレームワーク - 双曲空間(Hyperbolic space)を用いたマルチビュー事前学習 - 自己教師あり学習(self-supervised) - マスク付きオートエンコーダ(masked autoencoder)を拡張 - GeoLinkエンコーダを設計し、マルチビュー双曲表現を学習 - 大規模データセット3D-MOVを導入 - 下流タスクで視覚運動ポリシー(visuomotor policies)を微調整

2. 先行研究と比べてどこがすごい?

- 既存手法はユークリッド埋め込み空間に限定 - 平坦な幾何学が埋め込み間の構造的関係のモデル化を制限 - ロボット応用に必要な構造化埋め込みの学習が困難 - 双曲空間は構造的関係の捕捉に適した幾何学的性質を持つ - 非ユークリッド空間での3D認識事前学習の可能性を示す

3. 技術・手法の肝は?

- マスク付きオートエンコーダパラダイムを拡張 - GeoLinkエンコーダを設計 - マルチビュー双曲表現を学習 - 事前学習後、操作タスクで視覚運動ポリシーを微調整 - 大規模データセット3D-MOV(複数種類の3D点群を含む)を導入

4. どうやって有効だと検証した?

- COLOSSEUM、RLBench、実世界シナリオで評価 - 多様なタスクと摂動設定で強いベースラインを一貫して上回る - 結果は非ユークリッド空間での3D認識事前学習の有効性を示す

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 関連手法として masked autoencoder、3D-aware visual pretraining、Euclidean embedding が挙げられる - 同分野の定番として RLBench、COLOSSEUM などのベンチマーク

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jin Yang, Ping Wei, Yixin Chen, Nanning Zheng

分類: cs.RO

原文アブストラクト

3D-aware visual pretraining has proven effective in improving the performance of downstream robotic manipulation tasks. However, existing methods are constrained to Euclidean embedding spaces, whose flat geometry limits their ability to model structural relations among embeddings. As a result, they struggle to learn structured embeddings that are essential for robust spatial perception in robotic applications. To this end, we propose HyperMVP, a self-supervised framework for \underline{Hyper}bolic \underline{M}ulti\underline{V}iew \underline{P}retraining. Hyperbolic space offers geometric properties well suited for capturing structural relations. Methodologically, we extend the masked autoencoder paradigm and design a GeoLink encoder to learn multiview hyperbolic representations. The pretrained encoder is then finetuned with visuomotor policies on manipulation tasks. In addition, we introduce 3D-MOV, a large-scale dataset comprising multiple types of 3D point clouds to support pretraining. We evaluate HyperMVP on COLOSSEUM, RLBench, and real-world scenarios, where it consistently outperforms strong baselines across diverse tasks and perturbation settings. Our results highlight the potential of 3D-aware pretraining in a non-Euclidean space for learning robust and generalizable robotic manipulation policies.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI