日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

行動クローニングarXiv:2606.27375

オープンデータ・訓練・評価によるスケーラブルな行動クローニング

Scalable Behavior Cloning with Open Data, Training, and Evaluation

シェア:XThreadsFacebookLINEはてブBluesky

大規模な遠隔操作データセットABC-130K(3500時間、13万エピソード)とオープンソースのハードウェア・訓練・シミュレーション基盤を公開し、行動クローニングの再現可能な研究基盤を提供した。

詳しい要約

1. どんなもの?

- オープンソースのBehavior Cloningスタック「ABC」を提案。 - 中核はABC-130K:3,500時間、130Kエピソード、195タスクの最大規模テレオペデータセット。 - ハードウェア、学習基盤、シミュレーションパイプラインも公開。 - 400時間のsim-teleopデータとco-trainingレシピを提供。 - 実世界評価に先立つ代理評価を可能にし、再現可能なツールキットで研究基盤を平等化。

2. 先行研究と比べてどこがすごい?

- 従来のテレオペデータセットより大規模:3,500時間、130Kエピソード、195タスク。 - ハードウェア、学習、シミュレーションを完全オープンソース化。 - シミュレーションと実世界評価の相関を提供し、実世界評価前のアブレーションを可能に。 - DiTとVLAのアーキテクチャ選択を実世界評価で比較。

3. 技術・手法の肝は?

- Behavior Cloningを基盤とし、大規模テレオペデータで学習。 - Diffusion Transformers (DiT)とVision-Language-Action (VLA)モデルのアーキテクチャを比較。 - シミュレーションと実世界のco-trainingレシピを活用。 - 学習レシピを探索し、実世界評価で知見を検証。

4. どうやって有効だと検証した?

- 実世界評価を実施し、box foldingやwalletからのcredit card抽出などの器用なタスクを実行。 - シミュレーションと実世界評価の相関を確認し、代理評価の信頼性を検証。 - 学習レシピとアーキテクチャ選択の比較を実世界評価で実施。

5. 議論はある?

- シミュレーションと実世界評価の相関がアブレーションの信頼できる代理となることを示唆。 - オープンソース化により研究の再現性と平等性を促進。 - 具体的な限界や議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてDiffusion Transformers (DiT)やVision-Language-Action (VLA)モデル、Behavior Cloningの定番研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Arthur Allshire, Himanshu Gaurav Singh, Ritvik Singh, Adam Rashid, Hongsuk Choi, David McAllister, Justin Yu, Yiyuan Chen, Huang Huang, Pieter Abbeel, Xi Chen, Rocky Duan, Phillip Isola, Jitendra Malik, Fred Shentu, Guanya Shi, Philipp Wu, Angjoo Kanazawa

分類: cs.RO

原文アブストラクト

We introduce ABC, a fully open-source stack for manipulation with behavior cloning. At its core is ABC-130K: the largest open-source teleoperation dataset to date, featuring 3,500 hours of data spanning over 130K episodes across 195 diverse tasks. Furthermore, we open-source our accessible hardware setup, training infrastructure, and simulation pipeline. We also release 400 hours of sim-teleop data and provide a co-training recipe that produces correlated simulation and real-world evaluation, offering a reliable proxy for ablating model-design and training decisions before costly real-world evaluation. We explore various training recipes and compare common architectural choices for Diffusion Transformers (DiT) and Vision-Language-Action (VLA) models, grounding our findings in real-world evaluations. The resulting policies successfully execute dexterous tasks such as box folding and extracting credit cards from wallets. By providing a reproducible toolkit, we aim to place researchers on an equal footing, establishing the necessary foundation to learn the ABCs of Behavior Cloning together as a community.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI