日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2602.05441

BusyBox:視覚言語行動モデルのアフォーダンス汎化を評価する物理ベンチマーク

Benchmarking Affordance Generalization with BusyBox

シェア:XThreadsFacebookLINEはてブBluesky

スイッチやスライダーなど6モジュールを交換・回転できる物理ベンチマークBusyBoxを提案し、強いVLAモデルでも見た目が変わるとアフォーダンス汎化が難しいことを実証した。

詳しい要約

1. どんなもの?

- 本論文は BusyBox という物理ベンチマークを提案する。 - Vision-Language-Action (VLA) モデルの affordance generalization を半自動で系統的に評価する。 - BusyBox は switches, sliders, wires, buttons, display, dial の6モジュールで構成。 - モジュールを交換・回転でき、視覚外観が異なるが同じ affordance を持つ多数の変種を作成可能。 - 3Dプリント用 CAD ファイルと電子部品の BOM、Mobile Aloha による言語注釈付きデモデータセットを公開。

2. 先行研究と比べてどこがすごい?

- 従来の VLA 評価は vision や language 空間の汎化が中心で、affordance generalization の系統的評価は不足。 - BusyBox は視覚外観を変えつつ affordance を固定した物理ベンチマークを提供する点が新しい。 - 単一タスク政策との比較ではなく、VLA のメタスキルとしての affordance 汎化に焦点。 - 既存の強い open-weights VLA である π_{0.5} や GR00T-N1.6 でも変種間汎化が難しいことを実証。 - 再現可能な設計と公開資料により、研究コミュニティが独自 VLA を評価し新実験を提案しやすくした。

3. 技術・手法の肝は?

- BusyBox は6つの操作モジュール(switches, sliders, wires, buttons, display, dial)から成る。 - モジュールの交換・回転により、視覚外観が異なるが同じ affordance 集合を持つ変種を生成。 - 半自動評価のための物理ベンチマークとして設計。 - 3Dプリント用 CAD ファイルと電子部品の BOM を公開し、多くのロボティクス研究室で構築可能。 - 共通の bimanual Mobile Aloha ロボットで収集した言語注釈付きデモデータセットを公開。

4. どうやって有効だと検証した?

- 強い open-weights VLA である π_{0.5} と GR00T-N1.6 を用いて、BusyBox 変種間の汎化が非常に困難であることを実証的に示した。 - 具体的な評価指標や実験設定の詳細は要旨からは不明。 - 言語注釈付きデモデータセットを Mobile Aloha で収集し、canonical BusyBox 構成で公開。 - 有効性の検証は主に上記 VLA の性能評価を通じて行われたと推測されるが、詳細は要旨からは不明。

5. 議論はある?

- 視覚・言語空間の汎化だけでなく、affordance generalization が VLA の重要なメタスキルであると主張。 - BusyBox 変種間の汎化が強い VLA でも難しいことを示し、今後の研究課題を提起。 - 研究コミュニティに対し、自身の VLA を BusyBox で評価し、新しい affordance 汎化実験を提案するよう促している。 - 限界や今後の課題についての具体的な議論は要旨からは不明。

6. 次に読むべき論文は?

- π_{0.5} - GR00T-N1.6 - Mobile Aloha - Vision-Language-Action (VLA) モデル全般 - affordance generalization に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dean Fortier, Timothy Adamson, Tess Hellebrekers, Teresa LaScala, Kofi Ennin, Michael Murray, Andrey Kolobov, Galen Mullins

分類: cs.RO, cs.AI

原文アブストラクト

Vision-Language-Action (VLA) models have been attracting the attention of researchers and practitioners thanks to their promise of generalization. Although single-task policies still offer competitive performance, VLAs are increasingly able to handle commands and environments unseen in their training set. While generalization in vision and language space is undoubtedly important for robust versatile behaviors, a key meta-skill VLAs need to possess is affordance generalization -- the ability to manipulate new objects with familiar physical features. In this work, we present BusyBox, a physical benchmark for systematic semi-automatic evaluation of VLAs' affordance generalization. BusyBox consists of 6 modules with switches, sliders, wires, buttons, a display, and a dial. The modules can be swapped and rotated to create a multitude of BusyBox variations with different visual appearances but the same set of affordances. We empirically demonstrate that generalization across BusyBox variants is highly challenging even for strong open-weights VLAs such as $\pi_{0.5}$ and GR00T-N1.6. To encourage the research community to evaluate their own VLAs on BusyBox and to propose new affordance generalization experiments, we have designed BusyBox to be easy to build in most robotics labs. We release the full set of CAD files for 3D-printing its parts as well as a bill of materials for (optionally) assembling its electronics. We also publish a dataset of language-annotated demonstrations that we collected using the common bimanual Mobile Aloha robot on the canonical BusyBox configuration. All of the released materials are available at https://microsoft.github.io/BusyBox.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI