日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2512.15020

ISS Policy:暗黙的なシーン監督を備えたスケーラブルな拡散ポリシー

ISS Policy : Scalable Diffusion Policy with Implicit Scene Supervision

シェア:XThreadsFacebookLINEはてブBluesky

点群入力から連続行動を予測する3D視覚運動拡散ポリシーに、シーンの幾何学的変化と整合する出力を促す暗黙的シーン監督モジュールを導入し、単腕・多指ハンド操作の性能と汎化を向上させた研究。

詳しい要約

1. どんなもの?

- 3D visuomotor な DiT-based diffusion policy「Implicit Scene Supervision (ISS) Policy」の提案。 - point cloud 観測から連続 action 列を予測する。 - 単腕 manipulation (MetaWorld) と dexterous hand manipulation (Adroit) を対象とする。 - 実世界実験も実施。

2. 先行研究と比べてどこがすごい?

- 従来の vision-based imitation learning は物体の見た目 (object appearance) に依存し、3D scene structure を無視するため training efficiency と generalization が低い。 - ISS Policy は 3D 構造を暗黙的に supervision することで性能と robustness を改善。 - MetaWorld と Adroit で state-of-the-art を達成。

3. 技術・手法の肝は?

- point cloud を入力とする DiT-based diffusion policy。 - DiT を拡張した implicit scene supervision module を導入。 - モデル出力が scene の geometric evolution と整合するよう促す。 - 連続 action 列を予測する 3D visuomotor 構成。

4. どうやって有効だと検証した?

- MetaWorld (単腕 manipulation) と Adroit (dexterous hand manipulation) で評価し state-of-the-art を報告。 - 実世界実験で generalization と robustness を示す。 - ablation studies で data と parameters に対する scaling を確認。

5. 議論はある?

- 要旨からは不明。 - 明示されているのは ablation による data/parameter scaling の有効性と、実世界での generalization/robustness の主張。 - 限界や失敗事例の議論は要旨からは不明。

6. 次に読むべき論文は?

- DiT (Diffusion Transformer) ベースの diffusion policy 研究。 - point cloud を用いた 3D visuomotor imitation learning 研究。 - MetaWorld および Adroit をベンチマークとする manipulation 研究。 - 具体的な参照論文は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenlong Xia, Jinhao Zhang, Ce Zhang, Yaojia Wang, Huizhe Li, Youmin Gong, Jie Mei

分類: cs.RO

原文アブストラクト

Vision-based imitation learning has enabled impressive robotic manipulation skills, but its reliance on object appearance while ignoring the underlying 3D scene structure leads to low training efficiency and poor generalization. To address these challenges, we introduce \emph{Implicit Scene Supervision (ISS) Policy}, a 3D visuomotor DiT-based diffusion policy that predicts sequences of continuous actions from point cloud observations. We extend DiT with a novel implicit scene supervision module that encourages the model to produce outputs consistent with the scene's geometric evolution, thereby improving the performance and robustness of the policy. Notably, ISS Policy achieves state-of-the-art performance on both single-arm manipulation tasks (MetaWorld) and dexterous hand manipulation (Adroit). In real-world experiments, it also demonstrates strong generalization and robustness. Additional ablation studies show that our method scales effectively with both data and parameters. Code and videos will be released.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI