日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2602.19193

視覚プロンプトで導く統合プッシングポリシー

Visual Prompt Guided Unified Pushing Policy

シェア:XThreadsFacebookLINEはてブBluesky

流れマッチング方策に軽量な視覚プロンプト機構を組み込み、多様な計画問題で再利用可能な反応的・マルチモーダルなプッシング動作を生成する統合ポリシーを提案した。

詳しい要約

1. どんなもの?

- 本研究は、物体を再配置するための非把持マニピュレーションである pushing の統一的な方策を提案する。 - 既存手法は、限られた適用範囲の事前定義された pushing primitive からなる多段階の push plan に依存しており、効率と汎用性が制限されていた。 - 提案手法は、軽量な prompting 機構を flow matching policy に組み込み、反応的でマルチモーダルな pushing action の生成を導く。 - visual prompt は高レベルプランナーによって指定可能で、幅広い planning 問題で pushing policy を再利用できる。

2. 先行研究と比べてどこがすごい?

- 既存手法は、事前定義された pushing primitive を組み合わせた多段階の push plan を用いるため、適用範囲が限られ、効率と汎用性に欠ける。 - 提案手法は、統一的な pushing policy により、多様なシナリオで効率的かつ汎用的に動作する。 - 実験結果では、既存ベースラインを上回る性能を示し、VLM-guided planning framework の低レベル primitive としても有効に機能し、テーブル清掃タスクを効率的に解決できる。

3. 技術・手法の肝は?

- 軽量な prompting 機構を flow matching policy に統合し、反応的でマルチモーダルな pushing action を生成する。 - visual prompt は高レベルプランナーによって指定され、pushing policy の再利用を可能にする。 - これにより、単一の統一的な方策で多様な planning 問題に対応する。

4. どうやって有効だと検証した?

- 実験結果により、提案する統一 pushing policy が既存ベースラインを上回ることを示した。 - また、VLM-guided planning framework 内の低レベル primitive として効果的に機能し、テーブル清掃タスクを効率的に解決できることを実証した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、非把持マニピュレーションにおける pushing の学習ベース手法や、flow matching を用いたロボット政策学習、VLM を用いたタスクプランニングに関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hieu Bui, Ziyan Gao, Yuya Hosoda, Joo-Ho Lee

分類: cs.RO, cs.AI

原文アブストラクト

As one of the simplest non-prehensile manipulation skills, pushing has been widely studied as an effective means to rearrange objects. Existing approaches, however, typically rely on multi-step push plans composed of pre-defined pushing primitives with limited application scopes, which restrict their efficiency and versatility across different scenarios. In this work, we propose a unified pushing policy that incorporates a lightweight prompting mechanism into a flow matching policy to guide the generation of reactive, multimodal pushing actions. The visual prompt can be specified by a high-level planner, enabling the reuse of the pushing policy across a wide range of planning problems. Experimental results demonstrate that the proposed unified pushing policy not only outperforms existing baselines but also effectively serves as a low-level primitive within a VLM-guided planning framework to solve table-cleaning tasks efficiently.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI