日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2509.16053

フォーカスによる構成:シーングラフに基づくアトミックスキル

Compose by Focus: Scene Graph-based Atomic Skills

シェア:XThreadsFacebookLINEはてブBluesky

タスクに関連する物体と関係に注目するシーングラフ表現を用いて、拡散ベース模倣学習によるスキルを学習し、VLMプランナーと組み合わせることで、長期的な操作タスクの構成的一般化とロバスト性を向上させた。

詳しい要約

1. どんなもの?

- 長期・複合タスクを解くための compositional generalization を目指すロボット学習フレームワーク - 個々の atomic skill の頑健な実行に着目 - scene graph 表現で task-relevant な物体と関係に集中 - graph neural networks と diffusion-based imitation learning を統合 - VLM ベースの task planner と組み合わせ - simulation と real-world の manipulation タスクで評価

2. 先行研究と比べてどこがすごい?

- 先行研究は主に pre-learned skills を sequence する planner の合成に注力 - 個々の skill 実行の頑健性、特に scene composition による distribution shift 下での visuomotor policy の失敗が課題 - 本研究は scene graph 表現で無関係な変動への感度を低減 - 結果として long-horizon タスクでの robustness と compositional generalization を改善 - state-of-the-art baselines より大幅に高い success rate を報告

3. 技術・手法の肝は?

- task-relevant な物体と関係に焦点を当てる scene graph-based representation を導入 - graph neural networks と diffusion-based imitation learning を統合した scene-graph skill learning framework - 「focused」scene-graph skills を VLM ベースの task planner と組み合わせ - 無関係な scene variation への感度を抑え、skill 実行の頑健性を狙う構成

4. どうやって有効だと検証した?

- simulation と real-world の manipulation タスクの両方で実験 - state-of-the-art baselines と比較し、substantially higher success rates を確認 - long-horizon タスクにおける robustness と compositional generalization の向上を示す - 具体的なタスク設定・指標の詳細は要旨からは不明

5. 議論はある?

- 要旨からは不明 - 明示されているのは scene composition による distribution shift への対処と、その有効性の主張 - 限界や失敗ケース、VLM planner との統合上の課題についての議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている prior work(pre-learned skills を sequence する planner 合成研究) - diffusion-based imitation learning 関連手法 - graph neural networks を用いた manipulation 研究 - VLM ベースの task planning 研究 - compositional generalization を扱うロボット学習の定番研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Han Qi, Changhe Chen, Heng Yang

分類: cs.RO, cs.AI

原文アブストラクト

A key requirement for generalist robots is compositional generalization - the ability to combine atomic skills to solve complex, long-horizon tasks. While prior work has primarily focused on synthesizing a planner that sequences pre-learned skills, robust execution of the individual skills themselves remains challenging, as visuomotor policies often fail under distribution shifts induced by scene composition. To address this, we introduce a scene graph-based representation that focuses on task-relevant objects and relations, thereby mitigating sensitivity to irrelevant variation. Building on this idea, we develop a scene-graph skill learning framework that integrates graph neural networks with diffusion-based imitation learning, and further combine "focused" scene-graph skills with a vision-language model (VLM) based task planner. Experiments in both simulation and real-world manipulation tasks demonstrate substantially higher success rates than state-of-the-art baselines, highlighting improved robustness and compositional generalization in long-horizon tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI