日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

移動操作arXiv:2606.18646

家庭用移動操作タスクのシームレスな実-シミュレーション-実転送を実現するスケーラブルな具現化知能プラットフォーム

A Scalable Embodied Intelligence Platform for Seamless Real-to-Sim-to-Real Transfer of Household Mobile Manipulation Tasks

シェア:XThreadsFacebookLINEはてブBluesky

実環境からシミュレーションへの自動シーン再構築と、ハードウェア非依存のミドルウェアにより、家庭用移動操作タスクの実-シミュレーション-実転送をシームレスに行うプラットフォーム「BestMan」を開発した。

詳しい要約

1. どんなもの?

- 家庭内の mobile manipulation タスクを対象とした、real-to-sim-to-real の seamless な転移を可能にする scalable な embodied intelligence platform「BestMan」を提案。 - 高忠実度 simulation scene の再構築、simulation での systematic な strategy 評価、real-world deployment の互換性という3つの課題に対処。 - Automated Scene Generation (ASG)、simulation-guided task formalization and skill learning architecture、Hardware-agnostic and Unified Middleware (HUM) から構成。

2. 先行研究と比べてどこがすごい?

- 従来の embodied intelligence platform では、real-to-sim-to-real の seamless な転移が困難であった。 - 高コストな高忠実度 simulation scene 再構築、simulation での systematic な strategy 評価の複雑さ、real-world deployment の非互換性という3つの課題を同時に解決。 - 提案 platform は、これらの課題に対処し、標準化された benchmark の確立と mobile manipulation 分野の研究促進に貢献。

3. 技術・手法の肝は?

- Automated Scene Generation (ASG) module により、real observation から realistic な simulation を再構築。 - simulation-guided task formalization and skill learning architecture を提案し、hybrid skill strategy の柔軟な統合と simulation での大規模評価をサポート。 - Hardware-agnostic and Unified Middleware (HUM) を開発し、異種 mobile manipulator 間での seamless で互換性のある sim-to-real 転移を実現。

4. どうやって有効だと検証した?

- 実験結果により、提案 platform が standardized benchmark の確立と mobile manipulation 分野の有望な研究の促進において優れた性能を発揮することを示した。 - 具体的な評価指標やタスクの詳細は要旨からは不明。

5. 議論はある?

- 要旨からは、提案手法の限界や議論の詳細は不明。 - 今後の課題や改善点についても言及されていない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、mobile manipulation や sim-to-real transfer に関する研究(例: domain randomization, sim-to-real 転移手法)を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kui Yang, Xianlei Long, Haoxuan Li, Yan Ding, Chao Chen

分類: cs.RO

原文アブストラクト

Mobile manipulation is a fundamental capability in embodied intelligence robotics. The growing demand for robust and generalizable manipulation in unstructured household environments has driven rapid progress in embodied intelligence platforms. However, achieving a seamless transfer across the real-to-sim-to-real cycle faces three key challenges, including costly high-fidelity simulation scenes reconstruction, the complexity of systematic strategy evaluation in simulation, and incompatible real-world deployments. To address these challenges, we develop BestMan, a scalable and seamless real-to-sim-to-real platform that bridges the gap between the simulation and the real world, enabling effective strategy development, integration, and deployment for household mobile manipulation. Specifically, we design a novel Automated Scene Generation (ASG) module to reconstruct realistic simulations from real observations. Then, we propose a simulation-guided task formalization and skill learning architecture that supports the flexible integration and large-scale evaluations of hybrid skill strategies in simulation. Finally, to enhance the real-world scalability, we develop a Hardware-agnostic and Unified Middleware (HUM) to ensure seamless and compatible sim-to-real transfer across heterogeneous mobile manipulators for real deployments. Experimental results demonstrate the superior performance of our proposed platform in establishing standardized benchmarks and facilitating promising research in the field of mobile manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI