日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

シミュレーション環境生成arXiv:2605.14700

SR-Platform: 自然言語駆動のロボットシミュレーション環境合成のためのエージェントパイプライン

SR-Platform: An Agentic Pipeline for Natural Language-Driven Robot Simulation Environment Synthesis

シェア:XThreadsFacebookLINEはてブBluesky

自然言語の記述から物理的に有効なMuJoCoシミュレーション環境を自動生成するエージェントシステムを提案し、実運用データでその性能を評価した。

詳しい要約

1. どんなもの?

- 自然言語から MuJoCo 環境を生成する agentic system - 自由記述の英語プロンプトを実行可能な MJCF scene に変換 - 4 段階: LLM orchestrator, asset forge, layout architect, bridge layer - 9 サービスの Docker stack として production 展開 - WebSocket, MinIO, Qdrant, Redis, InfluxDB を利用

2. 先行研究と比べてどこがすごい?

- 従来は 3D asset modeling, MJCF 記述, 空間配置, 衝突回避, robot 統合に専門知識が必要 - 手作業の scene 構築を自然言語駆動で代替 - 30 日間の production telemetry に基づく実運用評価 - 5 物体 scene を中央値約 50 秒、cache 利用時約 30-40 秒で生成 - 1 分未満で executable MuJoCo scene を生成可能

3. 技術・手法の肝は?

- LLM-based orchestrator が user intent を structured scene plan に変換 - asset forge が cached asset を検索、または LLM-to-CadQuery synthesis で 3D geometry を生成 - layout architect が object pose を割り当て、industrial constraints を検証 - bridge layer が最終 MJCF scene を組み立て、選択した robot model を統合 - Qdrant による semantic asset retrieval、MinIO による mesh storage

4. どうやって有効だと検証した?

- 30 日間の production telemetry を使用 - 611 回の successful LLM calls を記録 - 5 物体 scene の end-to-end latency 中央値約 50 秒 - cache-accelerated scene は約 30-40 秒 - asset forge の first-attempt retry rate は 11.3%、自動回復あり - cached asset retrieval により既生成 object type の per-object LLM call を削減

5. 議論はある?

- agentic scene synthesis が多様な robot training environment 作成の手作業を削減 - 平易な英語プロンプトから 1 分未満で executable MuJoCo scene を生成可能 - 制約や限界、失敗事例、汎化性については要旨からは不明 - 評価は production telemetry に基づくが、定量的な成功率や比較実験の詳細は要旨からは不明

6. 次に読むべき論文は?

- MuJoCo 関連の robot simulation 研究 - MJCF 自動生成や scene synthesis の先行研究 - LLM-to-CadQuery synthesis に関する研究 - Qdrant を用いた semantic asset retrieval の関連手法 - 要旨で参照/比較されている個別論文は明示されていない

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ben Wei Lim, Minh Duc Le, Thang Truong, Thanh Nguyen Canh

分類: cs.RO

原文アブストラクト

Generating robot simulation environments remains a major bottleneck in simulation-based robot learning. Constructing a training-ready MuJoCo scene typically requires expertise in 3D asset modeling, MJCF specification, spatial layout, collision avoidance, and robot-model integration. We present SR-Platform, a production-deployed agentic system that converts free-form natural language descriptions into executable, physically valid MuJoCo environments. SR-Platform decomposes scene synthesis into four stages: an LLM-based orchestrator that converts user intent into a structured scene plan; an asset forge that retrieves cached assets or generates new 3D geometry through LLM-to-CadQuery synthesis; a layout architect that assigns object poses and verifies industrial constraints; and a bridge layer that assembles the final MJCF scene and merges the selected robot model. The system is deployed as a nine-service Docker stack with WebSocket progress streaming, MinIO-backed mesh storage, Qdrant-based semantic asset retrieval, Redis job state, and InfluxDB telemetry. Using 30 days of production telemetry covering 611 successful LLM calls, SR-Platform generates five-object scenes with a median end-to-end latency of approximately 50 s, while cache-accelerated scenes complete in approximately 30-40 s. The asset forge shows an 11.3% first-attempt retry rate with automatic recovery, and cached asset retrieval removes per-object LLM calls for previously generated object types. These results show that agentic scene synthesis can reduce the manual effort required to create diverse robot training environments, enabling users to produce executable MuJoCo scenes from plain English prompts in under one minute.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI