日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2511.05129

デュアルアクターポリシーによる分解型物体操作

Decomposed Object Manipulation via Dual-Actor Policy

シェア:XThreadsFacebookLINEはてブBluesky

物体操作を接近と操作の段階に分け、それぞれに特化した2つのアクターと段階を選択する意思決定器を組み合わせたDual-Actor Policyを提案し、新規データセットで従来手法を上回る性能を示した。

詳しい要約

1. どんなもの?

- 物体操作を approaching stage と manipulation stage に分け、各段階を異なる visual prior で強化する Dual-Actor Policy (DAP) を提案する研究。 - affordance-based actor が操作対象の functional part を定位し approaching を改善。 - motion flow-based actor が部品の動きを捉え manipulation を支援。 - decision maker が現在の段階を判定し対応する actor を選択。 - 既存データセットの不足に対応するため、2つの visual prior を統合した Dual-Prior Object Manipulation Dataset を構築。 - 7タスクを含み、うち2つは long-term, multi-stage の難タスク。

2. 先行研究と比べてどこがすごい?

- 先行研究は物体操作の段階性を無視し、単一 policy で全過程を直接学習するものが多い。 - 本手法は段階を明示的に分離し、段階ごとに異種の visual prior を活用する点が新しい。 - 既存の物体操作データセットは物体数が少なく、必要な visual prior を欠く。 - 本研究は2つの prior を組み合わせた専用データセットを構築してこの不足を補う。 - 実験で SOTA 手法を平均で 5.55%(自データセット)、14.7%(RoboTwin benchmark)、10.4%(実環境)上回ったと報告。

3. 技術・手法の肝は?

- Dual-Actor Policy (DAP) は段階ごとに異なる actor を割り当てる構成。 - affordance-based actor:manipulation task における functional part を定位し approaching を改善。 - motion flow-based actor:component の movement を捉え manipulation を促進。 - decision maker:現在の段階を判定し、対応する actor を選択。 - 2つの visual prior(affordance と motion flow)を各段階に活用する設計が肝。 - Dual-Prior Object Manipulation Dataset はこの2 prior を組み合わせ、7タスク(long-term, multi-stage 2件を含む)を整備。

4. どうやって有効だと検証した?

- 構築した Dual-Prior Object Manipulation Dataset 上で評価。 - RoboTwin benchmark 上で評価。 - 実世界(real-world scenarios)でも評価。 - いずれも SOTA 手法を平均で 5.55%、14.7%、10.4% 上回ったと報告。 - 個々のコンポーネントの ablation や詳細な評価指標は要旨からは不明。

5. 議論はある?

- 段階分割と異種 visual prior の組み合わせが有効であることを実験結果が示す。 - 既存データセットの物体数・prior 不足という課題に対し、専用データセット構築で対処。 - decision maker の段階判定誤りや、実環境での頑健性に関する詳細な議論は要旨からは不明。 - 限界や失敗事例、計算コスト等の議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接比較されている SOTA 手法の詳細は要旨からは不明。 - 関連手法として affordance-based 手法、motion flow を用いる手法、単一 policy による object manipulation 研究。 - 評価基盤として RoboTwin benchmark 関連の研究。 - 同分野の定番として imitation learning や vision-language-action 系の物体操作研究を次に読む候補として挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Bin Fan, Jian-Jian Jiang, Zhuohao Li, Xiao-Ming Wu, Yi-Xiang He, YiHan Yang, Shengbang Liu, Wei-Shi Zheng

分類: cs.RO

原文アブストラクト

Object manipulation, which focuses on learning to perform tasks on similar parts across different types of objects, can be divided into an approaching stage and a manipulation stage. However, previous works often ignore this characteristic of the task and rely on a single policy to directly learn the whole process of object manipulation. To address this problem, we propose a novel Dual-Actor Policy, termed DAP, which explicitly considers different stages and leverages heterogeneous visual priors to enhance each stage. Specifically, we introduce an affordance-based actor to locate the functional part in the manipulation task, thereby improving the approaching process. Following this, we propose a motion flow-based actor to capture the movement of the component, facilitating the manipulation process. Finally, we introduce a decision maker to determine the current stage of DAP and select the corresponding actor. Moreover, existing object manipulation datasets contain few objects and lack the visual priors needed to support training. To address this, we construct a simulated dataset, the Dual-Prior Object Manipulation Dataset, which combines the two visual priors and includes seven tasks, including two challenging long-term, multi-stage tasks. Experimental results on our dataset, the RoboTwin benchmark and real-world scenarios illustrate that our method consistently outperforms the SOTA method by 5.55%, 14.7% and 10.4% on average respectively.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI