日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2511.21161

MarketGen: 自動生成される実体化スーパーマーケット環境を備えたスケーラブルなシミュレーションプラットフォーム

MarketGen: A Scalable Simulation Platform with Auto-Generated Embodied Supermarket Environments

シェア:XThreadsFacebookLINEはてブBluesky

スーパーマーケット環境を自動生成するシミュレーションプラットフォームMarketGenを提案し、レジ袋詰めと棚からの商品収集という2つのタスクのベンチマークを構築した。

詳しい要約

1. どんなもの?

- 複雑な商業環境(スーパーマーケット)向けの embodied agents 研究を加速するためのスケーラブルなシミュレーションプラットフォーム - 自動シーン生成機能を持ち、テキストや参照画像のマルチモーダル入力に対応 - 1100以上のスーパーマーケット商品とパラメータ化された施設アセットを含む3Dアセットライブラリを提供 - スーパーマーケットエージェント評価用の新規ベンチマークを提案 - Checkout Unloading: レジ係エージェント向けの長期的なテーブルトップタスク - In-Aisle Item Collection: 販売員エージェント向けの複雑な mobile manipulation タスク

2. 先行研究と比べてどこがすごい?

- 既存のロボティクスデータセットやベンチマークは、家庭内やテーブルトップの短期的タスクに集中しており、複雑な商業環境を扱うものが不足していた - MarketGen はスーパーマーケットという複雑な商業環境に特化し、自動シーン生成を可能にした点が新しい - マルチモーダル入力(テキストと参照画像)をサポートし、実世界の設計原則を統合して現実的なスーパーマーケットを自動生成できる点が先行研究と異なる - 大規模な3Dアセットライブラリ(1100以上の商品)を提供する点も特徴

3. 技術・手法の肝は?

- agent-based Procedural Content Generation (PCG) フレームワークを採用 - テキストや参照画像のマルチモーダル入力を受け付け、実世界の設計原則を統合して構造化された現実的なスーパーマーケットを自動生成 - パラメータ化された施設アセットと大規模な商品アセットライブラリを組み合わせてシーンを構築 - 生成された環境上で、モジュール型エージェントシステムの展開や sim-to-real 転移を含む実験を実施

4. どうやって有効だと検証した?

- プラットフォームとベンチマークの有効性を検証するために広範な実験を実施 - モジュール型エージェントシステムを展開し、その性能を評価 - sim-to-real 転移に成功したことを報告 - 具体的な評価指標や実験設定の詳細は要旨からは不明

5. 議論はある?

- 要旨からは不明 - ただし、複雑な商業アプリケーション向けの embodied AI 研究を加速する包括的なフレームワークを提供すると主張している

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 関連手法として、Procedural Content Generation (PCG)、embodied AI のベンチマーク、mobile manipulation、sim-to-real 転移に関する研究が挙げられる - 同分野の定番として、家庭内タスク向けのロボティクスデータセットやベンチマーク(例: ALFRED、RLBench など)を参照するとよい

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xu Hu, Yiyang Feng, Junran Peng, Jiawei He, Liyi Chen, Wei Sui, Chuanchen Luo, Xucheng Yin, Qing Li, Zhaoxiang Zhang

分類: cs.RO

原文アブストラクト

The development of embodied agents for complex commercial environments is hindered by a critical gap in existing robotics datasets and benchmarks, which primarily focus on household or tabletop settings with short-horizon tasks. To address this limitation, we introduce MarketGen, a scalable simulation platform with automatic scene generation for complex supermarket environments. MarketGen features a novel agent-based Procedural Content Generation (PCG) framework. It uniquely supports multi-modal inputs (text and reference images) and integrates real-world design principles to automatically generate complete, structured, and realistic supermarkets. We also provide an extensive and diverse 3D asset library with a total of 1100+ supermarket goods and parameterized facilities assets. Building on this generative foundation, we propose a novel benchmark for assessing supermarket agents, featuring two daily tasks in a supermarket: (1) Checkout Unloading: long-horizon tabletop tasks for cashier agents, and (2) In-Aisle Item Collection: complex mobile manipulation tasks for salesperson agents. We validate our platform and benchmark through extensive experiments, including the deployment of a modular agent system and successful sim-to-real transfer. MarketGen provides a comprehensive framework to accelerate research in embodied AI for complex commercial applications.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI