日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2510.14627

GOPLA: 人間の配置の合成拡張による汎化可能な物体配置学習

GOPLA: Generalizable Object Placement Learning via Synthetic Augmentation of Human Arrangement

シェア:XThreadsFacebookLINEはてブBluesky

人間の配置デモを合成データで拡張し、MLLMと拡散プランナを組み合わせて、意味的・幾何的制約を考慮した汎用的な物体配置を学習する階層的フレームワーク。

詳しい要約

1. どんなもの?

- 家庭内の物体配置(object placement)をロボットが行うための階層的フレームワーク GOPLA を提案 - 人間の配置デモを拡張した合成データから、汎化可能な配置方策を学習 - 意味的選好(常識的な物体関係)と幾何的実現可能性(衝突回避)の両方を推論 - MLLM による構造化プラン、spatial mapper による 3D affordance map、diffusion-based planner による配置姿勢生成から構成

2. 先行研究と比べてどこがすごい?

- 人間の配置デモの不足を、スケーラブルな合成データ拡張パイプラインで補う点 - 意味的選好と幾何的制約を階層的に統合する枠組み - 実験で runner-up 比 30.04 percentage points の成功率改善 - 多様な実世界ロボット配置シナリオへの強い汎化を示す - 具体的な先行研究名は要旨からは不明

3. 技術・手法の肝は?

- multi-modal large language model が人間の指示と視覚入力を、物体間関係を指定する構造化プランへ変換 - spatial mapper がそのプランを幾何的常識を伴う 3D affordance map に変換 - diffusion-based planner が test-time costs に導かれ、multi-plan distributions と衝突回避を考慮して配置姿勢を生成 - 人間の配置デモを多様な合成訓練データへ拡張するスケーラブルなパイプライン

4. どうやって有効だと検証した?

- 広範な実世界ロボット配置シナリオで実験 - 評価指標は positioning accuracy と physical plausibility - runner-up と比較して配置成功率が 30.04 percentage points 向上 - 詳細なデータセット名や被験者数は要旨からは不明

5. 議論はある?

- 合成データ拡張によるデータ不足の克服が主張されている - 意味的選好と幾何的制約の両立を階層構成で扱う点が議論の焦点と考えられる - 限界や失敗事例、計算コストに関する記述は要旨からは不明

6. 次に読むべき論文は?

- diffusion-based planner 関連の配置生成研究 - multi-modal large language model を用いたロボット計画研究 - 3D affordance map に基づく把持・配置研究 - 人間デモの合成データ拡張(synthetic augmentation)研究 - 具体的な参照論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yao Zhong, Hanzhi Chen, Simon Schaefer, Anran Zhang, Stefan Leutenegger

分類: cs.RO, cs.CV

原文アブストラクト

Robots are expected to serve as intelligent assistants, helping humans with everyday household organization. A central challenge in this setting is the task of object placement, which requires reasoning about both semantic preferences (e.g., common-sense object relations) and geometric feasibility (e.g., collision avoidance). We present GOPLA, a hierarchical framework that learns generalizable object placement from augmented human demonstrations. A multi-modal large language model translates human instructions and visual inputs into structured plans that specify pairwise object relationships. These plans are then converted into 3D affordance maps with geometric common sense by a spatial mapper, while a diffusion-based planner generates placement poses guided by test-time costs, considering multi-plan distributions and collision avoidance. To overcome data scarcity, we introduce a scalable pipeline that expands human placement demonstrations into diverse synthetic training data. Extensive experiments show that our approach improves placement success rates by 30.04 percentage points over the runner-up, evaluated on positioning accuracy and physical plausibility, demonstrating strong generalization across a wide range of real-world robotic placement scenarios.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI