日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2510.25138

空間認識型マニピュレーション順序の学習

Learning Spatial-Aware Manipulation Ordering

シェア:XThreadsFacebookLINEはてブBluesky

物体間の空間的依存関係を考慮し、散らかった環境での操作順序をリアルタイムに学習・決定するフレームワークOrderMindを提案した。

詳しい要約

1. どんなもの?

- 混雑環境での物体操作順序を学習する枠組み「OrderMind」を提案 - 物体間の空間依存関係を考慮し、操作優先度を直接学習 - 空間context encoderとtemporal priority structuring moduleを統合 - 実時間での操作順序決定を目指す

2. 先行研究と比べてどこがすごい?

- 既存手法は物体間の空間関係を軽視し、柔軟性・拡張性に限界 - OrderMindは空間contextを直接学習し順序決定に反映 - 衝突やアクセス遮断を避ける順序を実時間で生成可能 - 効果と効率の両面で先行手法を大きく上回ると報告

3. 技術・手法の肝は?

- 空間context encoderとtemporal priority structuring moduleを統合 - k-Nearest Neighborsでspatial graphを構築し局所配置の幾何情報を集約 - object-objectおよびobject-manipulator相互作用をencode - spatial prior labelingでvision-language modelを誘導し監督信号を蒸留

4. どうやって有効だと検証した?

- 163,222サンプルからなるManipulation Ordering Benchmarkを構築 - 難易度の異なるサンプルで評価 - simulationとreal-world環境の両方で実験 - 先行手法と比較し有効性・効率性を実証

5. 議論はある?

- 混雑環境での衝突回避やアクセス遮断回避に寄与 - 空間prior labelingによる監督信号の妥当性が鍵 - 実環境での頑健性を主張 - 限界や失敗事例の詳細は要旨からは不明

6. 次に読むべき論文は?

- k-Nearest Neighborsを用いたspatial graph構築の関連研究 - vision-language modelによるラベリング/蒸留の関連手法 - 混雑環境でのmanipulation orderingの先行研究 - Manipulation Ordering Benchmarkの詳細論文

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuxiang Yan, Zhiyuan Zhou, Xin Gao, Guanghao Li, Shenglin Li, Jiaqi Chen, Qunyan Pu, Jian Pu

分類: cs.RO

原文アブストラクト

Manipulation in cluttered environments is challenging due to spatial dependencies among objects, where an improper manipulation order can cause collisions or blocked access. Existing approaches often overlook these spatial relationships, limiting their flexibility and scalability. To address these limitations, we propose OrderMind, a unified spatial-aware manipulation ordering framework that directly learns object manipulation priorities based on spatial context. Our architecture integrates a spatial context encoder with a temporal priority structuring module. We construct a spatial graph using k-Nearest Neighbors to aggregate geometric information from the local layout and encode both object-object and object-manipulator interactions to support accurate manipulation ordering in real-time. To generate physically and semantically plausible supervision signals, we introduce a spatial prior labeling method that guides a vision-language model to produce reasonable manipulation orders for distillation. We evaluate OrderMind on our Manipulation Ordering Benchmark, comprising 163,222 samples of varying difficulty. Extensive experiments in both simulation and real-world environments demonstrate that our method significantly outperforms prior approaches in effectiveness and efficiency, enabling robust manipulation in cluttered scenes.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI