日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データ生成arXiv:2603.11811

RADAR: 意味的計画と自律的因果環境リセットによる閉ループロボットデータ生成

RADAR: Closed-Loop Robotic Data Generation via Semantic Planning and Autonomous Causal Environment Reset

シェア:XThreadsFacebookLINEはてブBluesky

VLMによるタスク生成とGNN方策、自動成功判定、FSMによる環境リセットを組み合わせ、人手を介さずロボット操作データを収集し続ける閉ループシステムを提案。

詳しい要約

1. どんなもの?

RADAR(Robust Autonomous Data Acquisition for Robotics)は、人間の介入を完全に排除した閉ループ型のロボットデータ生成エンジン。 - 2〜5件の3D human demonstrationsを幾何学的priorとして利用 - Vision-Language Model(VLM)が意味的物体groundingとskill retrievalでタスク生成 - Graph Neural Network(GNN)policyがin-context imitation learningでサブタスクを行動に変換 - VLMが構造化Visual Question Answering(VQA)で自動成功評価 - Finite State Machine(FSM)が自律的環境resetと非対称データroutingを統括 - シミュレーションと実世界で多様な接触リッチスキルをfew-shot適応で実行

2. 先行研究と比べてどこがすごい?

従来のhuman-in-the-loop収集はコストとスケーラビリティがボトルネック。 - RADARは収集サイクルから人間を完全に排除し、自己持続的プロセスを実現 - シミュレーションの複雑・長horizonタスクで最大90%の成功率を達成し、従来baselineがほぼゼロに落ちる課題も解決 - 実世界でもdomain-specific fine-tuningなしでfew-shot適応により多様な接触リッチスキル(例:deformable object manipulation)を実行 - 手動resetのボトルネックをFSMによる自律resetで打破

3. 技術・手法の肝は?

4モジュールパイプラインで認知負荷を分割。 - VLMが2〜5件の3D human demonstrationsを幾何priorに、意味的物体groundingとskill retrievalでシーン関連タスクを生成 - GNN policyがin-context imitation learningでサブタスクを物理行動に変換 - 実行後、VLMが構造化VQAパイプラインで自動成功評価 - FSMが自律的環境resetと非対称データroutingを統括 - 同時forward-reverse planningと厳密なLast-In, First-Out(LIFO)因果シーケンスで非構造ワークスペースを復元し、実行失敗から頑健に回復 - brain-cerebellum synergyと称する連続的協調

4. どうやって有効だと検証した?

広範な評価を実施。 - シミュレーション:複雑・長horizonタスクで最大90%の成功率、従来baselineはほぼゼロ - 実世界展開:多様な接触リッチスキル(例:deformable object manipulation)をfew-shot適応で実行、domain-specific fine-tuning不要 - 詳細な評価プロトコルやデータセットは要旨からは不明

5. 議論はある?

要旨からは不明。 - 限界や失敗ケース、計算コスト、VLMの誤りへの対処などは記述なし - 議論の有無や具体的な論点は要旨からは不明

6. 次に読むべき論文は?

要旨で参照・比較されている研究は明示されていない。 - 関連手法としてVision-Language Model(VLM)、Graph Neural Network(GNN)、in-context imitation learning、Visual Question Answering(VQA)、Finite State Machine(FSM)が挙げられる - 同分野の定番としてimitation learning、robot data generation、autonomous resetに関する研究を読むべき

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yongzhong Wang, Keyu Zhu, Yong Zhong, Liqiong Wang, Jinyu Yang, Feng Zheng

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

The acquisition of large-scale physical interaction data, a critical prerequisite for modern robot learning, is severely bottlenecked by the prohibitive cost and scalability limits of human-in-the-loop collection paradigms. To break this barrier, we introduce Robust Autonomous Data Acquisition for Robotics (RADAR), a fully autonomous, closed-loop data generation engine that completely removes human intervention from the collection cycle. RADAR elegantly divides the cognitive load into a four-module pipeline. Anchored by 2-5 3D human demonstrations as geometric priors, a Vision-Language Model first orchestrates scene-relevant task generation via precise semantic object grounding and skill retrieval. Next, a Graph Neural Network policy translates these subtasks into physical actions via in-context imitation learning. Following execution, the VLM performs automated success evaluation using a structured Visual Question Answering pipeline. Finally, to shatter the bottleneck of manual resets, a Finite State Machine orchestrates an autonomous environment reset and asymmetric data routing mechanism. Driven by simultaneous forward-reverse planning with a strict Last-In, First-Out causal sequence, the system seamlessly restores unstructured workspaces and robustly recovers from execution failures. This continuous brain-cerebellum synergy transforms data collection into a self-sustaining process. Extensive evaluations highlight RADAR's exceptional versatility. In simulation, our framework achieves up to 90% success rates on complex, long-horizon tasks, effortlessly solving challenges where traditional baselines plummet to near-zero performance. In real-world deployments, the system reliably executes diverse, contact-rich skills (e.g., deformable object manipulation) via few-shot adaptation without domain-specific fine-tuning, providing a highly scalable paradigm for robotic data acquisition.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI