日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2505.23692

Mobi-π: ロボット学習ポリシーのモビライゼーション

Mobi-$\pi$: Mobilizing Your Robot Learning Policy

シェア:XThreadsFacebookLINEはてブBluesky

限られた視点で学習したマニピュレーションポリシーを移動ロボットで活用するため、3Dガウススプラッティングとサンプリング最適化により、ポリシーの分布内となるベース姿勢を探索する手法を提案。

詳しい要約

1. どんなもの?

- 学習済み visuomotor policy を mobile robot 上で活用するための policy mobilization 問題を定式化。 - 新環境で manipulation policy の分布内に入る base pose を見つける。 - 3D Gaussian Splatting とスコア関数、サンプリング最適化で実現。 - Mobi-π フレームワーク(指標、RoboCasa ベースのシミュレーションタスク、可視化)も提案。

2. 先行研究と比べてどこがすごい?

- 従来は policy 自体を再学習して base pose の変化に頑健化するが、追加デモが必要。 - 提案手法は navigation と manipulation を分離し、追加デモ不要。 - 既存の viewpoint 頑健性向上手法と相補的で併用可能。 - シミュレーションと実世界でベースラインを上回る性能。

3. 技術・手法の肝は?

- 3D Gaussian Splatting で新視点画像を合成し、policy の入力分布を評価。 - スコア関数で base pose の適合度を計算。 - サンプリングベース最適化で最適なロボット base pose を探索。 - navigation と manipulation を橋渡しする枠組み。

4. どうやって有効だと検証した?

- RoboCasa に基づくシミュレーション移動マニピュレーションタスクスイートを構築。 - 実世界でも実験を実施。 - 提案手法がベースラインを上回ることを示し、有効性を検証。

5. 議論はある?

- 要旨からは不明。 - ただし、policy mobilization の難易度を定量化する指標や可視化ツールを導入し、分析を深める枠組みを提供。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、3D Gaussian Splatting、RoboCasa、visuomotor policy の viewpoint 頑健性向上手法(例:data augmentation)が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jingyun Yang, Isabella Huang, Brandon Vu, Max Bajracharya, Rika Antonova, Jeannette Bohg

分類: cs.RO, cs.CV, cs.LG

原文アブストラクト

Learned visuomotor policies are capable of performing increasingly complex manipulation tasks. However, most of these policies are trained on data collected from limited robot positions and camera viewpoints. This leads to poor generalization to novel robot positions, which limits the use of these policies on mobile platforms, especially for precise tasks like pressing buttons or turning faucets. In this work, we formulate the policy mobilization problem: find a mobile robot base pose in a novel environment that is in distribution with respect to a manipulation policy trained on a limited set of camera viewpoints. Compared to retraining the policy itself to be more robust to unseen robot base pose initializations, policy mobilization decouples navigation from manipulation and thus does not require additional demonstrations. Crucially, this problem formulation complements existing efforts to improve manipulation policy robustness to novel viewpoints and remains compatible with them. We propose a novel approach for policy mobilization that bridges navigation and manipulation by optimizing the robot's base pose to align with an in-distribution base pose for a learned policy. Our approach utilizes 3D Gaussian Splatting for novel view synthesis, a score function to evaluate pose suitability, and sampling-based optimization to identify optimal robot poses. To understand policy mobilization in more depth, we also introduce the Mobi-$\pi$ framework, which includes: (1) metrics that quantify the difficulty of mobilizing a given policy, (2) a suite of simulated mobile manipulation tasks based on RoboCasa to evaluate policy mobilization, and (3) visualization tools for analysis. In both our developed simulation task suite and the real world, we show that our approach outperforms baselines, demonstrating its effectiveness for policy mobilization.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI