日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

基盤モデル適応arXiv:2611.11650

FlowEval:実環境展開時に身体性基盤モデルはどれだけ適応が必要か

FlowEval: How Much Adaptation Does an Embodied Foundation Model Need at Deployment?

シェア:XThreadsFacebookLINEはてブBluesky

少数の成功デモンストレーションから、事前学習済み身体性基盤モデルが対象環境にどれだけ適合しているか・追加適応データがどれだけ必要かを、学習不要のフローマッチング指標で診断する手法を提案。

詳しい要約

1. どんなもの?

- 展開先環境に必要な適応量を、適応前の少量の成功デモから見積もる診断手法 - 名称は FlowEval - embodied foundation model を対象に、training-free の指標群を提供 - 目的は、pretrained model が target deployment にどれだけ適合しているか、追加収集すべき適応データがどれだけ残るかを実務者が把握できるようにすること - flow-matching objective を用いてモデルを probing する点が特徴

2. 先行研究と比べてどこがすごい?

- 大規模 pretraining により適応コストは低下しているが、全 deployment で必要性能が保証されるわけではないという問題意識 - 従来は適応前に必要データ量を判断しづらかったのに対し、少数の成功 target-domain demonstrations で適応の要否・程度を事前に示唆 - training-free で軽量な診断である点が、適応そのものを繰り返す評価と比べた利点 - 具体的な先行研究との比較は要旨からは不明

3. 技術・手法の肝は?

- flow-matching objective を利用した training-free metrics 群で embodied foundation model を probe - 成功した target demonstrations 上での predictive disagreement を定量化し、pretrained model の target deployment への fit を評価 - 適応前の少量デモのみで、target-domain data の必要性を見積もる設計 - 指標の詳細な定義・計算式は要旨からは不明

4. どうやって有効だと検証した?

- 4つの embodied foundation model families(Pi-0.5, MolmoAct2, GR00T, DreamZero)で評価 - real-world および simulated manipulation において、seen と unseen の deployment を FlowEval が区別できることを確認 - Pi-0.5 と GR00T を 17 の RoboCasa365 manipulation tasks で finetuning し、追加適応データに伴う success rate の改善と FlowEval が相関することを示した

5. 議論はある?

- FlowEval は model–deployment 間の適応必要量を見積もる軽量・training-free な診断として利用可能と示唆 - 対象は manipulation の real-world/simulated 設定であり、他領域への一般性は要旨からは不明 - 指標の限界、失敗デモへの依存性、モデル間差の詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究は明示されていない - 関連手法として flow-matching に基づく embodied foundation model(Pi-0.5, GR00T, MolmoAct2, DreamZero) - 評価基盤として RoboCasa365 - 同分野の定番として behavior cloning や finetuning による適応評価、success rate を用いた manipulation benchmark を次に参照すべき

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhang Xi-Jia, Roman Yakunin, Shivang Chopra, Chengyue Huang, Che Chen, Siddharth Karamcheti, Zsolt Kira

分類: cs.RO

原文アブストラクト

Large-scale pretraining is reducing the amount of adaptation required to deploy embodied foundation models, but it is not guaranteed that a pretrained model already provide the level of performance required in every deployment. Practitioners therefore need to understand how well a pretrained model matches a target deployment and how much adaptation data is left to be collected. We study whether a small set of successful target-domain demonstrations can reveal whether and how much target-domain data will be required before any adaptation. We introduce FlowEval, a set of training-free metrics that use the flow-matching objective to probe an embodied foundation model with a set of demonstrations. FlowEval quantifies predictive disagreement on successful target demonstrations to assess how well a pretrained model fits a target deployment. Across four embodied foundation model families: Pi-0.5, MolmoAct2, GR00T, and DreamZero, FlowEval distinguishes seen from unseen deployments across real-world and simulated manipulation. Further, by finetuning Pi-0.5 and GR00T on 17 RoboCasa365 manipulation tasks, we showed that FlowEval correlates with how success rate improves as additional adaptation data is provided. Together, these results suggest that FlowEval can serve as a lightweight, training-free diagnostic of how much model--deployment adaptation may be required.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI