日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データセット/VLAarXiv:2605.09613

SABER: 実世界VLA適応のためのスケーラブルな行動ベース身体データセット

SABER: A Scalable Action-Based Embodied Dataset for Real-World VLA Adaptation

シェア:XThreadsFacebookLINEはてブBluesky

小売環境でのロボット操作性能を向上させるため、実際の店舗で100時間以上の自然な映像から構築した高忠実度の行動データセットSABERを提案。頭部カメラと360度カメラを併用し、手先の器用な動作から全身動作までを収録し、VLAモデルの適応に有効なデータを提供する。

詳しい要約

1. どんなもの?

- 小売店舗での実世界VLA適応を目的とした大規模行動データセットSABERを提案 - 複数の実店舗で100時間超の自然な店内撮影から構築 - 頭部装着カメラのegocentric映像で細粒度の手動作を記録 - DreamVuのALIAカメラによるexocentric 360度映像で空間全体の行動を同時観測 - 44.8Kの訓練サンプルを3つの行動表現ストリームで構成 - LAPA-style encodingによる25Kのlatent action sequences - ロボット関節空間にretargetした18.6Kのdexterous hand-pose trajectories - humanoid embodimentにretargetした1.2Kのwhole-body synchronized motion sequences

2. 先行研究と比べてどこがすごい?

- 汎用robot foundation modelsは小売のような未見タスクで性能が限定的 - 原因は小売環境が一般robot pretraining分布に構造的に欠如しているdata gap - teleoperationによる補填は高コスト・物流的制約・スケール困難 - SABERはstaging・scripting・teleoperation overheadなしで収集可能 - robot in the loopなしで今日から大規模収集できる点が従来と異なる

3. 技術・手法の肝は?

- 頭部装着カメラのegocentric映像とALIAカメラのexocentric 360度映像を組み合わせ - 手のdexterous activity、whole-body motion、scene dynamicsを同時に捕捉 - 3つの行動表現ストリームに変換 - LAPA-style encodingによるlatent action sequences - robot joint spaceへのdexterous hand-pose trajectories retarget - humanoid embodimentへのwhole-body synchronized motion retarget - GR00T N1.6に対しshared-backbone multi-task post-training recipeを適用

4. どうやって有効だと検証した?

- GR00T N1.6にshared-backbone multi-task post-training recipeで適用 - 10の小売manipulationタスクで評価 - 平均成功率29.3%を達成 - fine-tuning baselinesの13.4%に対し2.19倍超 - より良いデータが小売ロボット能力への道であることを実証

5. 議論はある?

- 小売環境のdata gapをteleoperation以外で埋められる可能性を示す - robot in the loopなしでスケール可能なデータ収集を主張 - ただし要旨からは限界や失敗事例、汎化範囲の詳細は不明 - データセットとコードはhttps://dreamvu.ai/saberで公開

6. 次に読むべき論文は?

- GR00T N1.6 - LAPA-style encoding - DreamVu ALIA camera - robot foundation models - teleoperationベースのデータ収集 - VLA adaptation

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Narsimha Menga, Parikshit Sakurikar, Amirreza Rouhi, Satya Sai Reddy, Anirudh Govil, Sri Harsha Chittajallu, Rajat Aggarwal, Anoop Namboodiri, Sashi Reddi

分類: cs.RO, cs.CV

原文アブストラクト

Robotic deployment in real-world environments depends on rich, domain-specific action data as much as on strong model architecture. General-purpose robot foundation models show modest performance in complex unseen tasks such as manipulation in a retail domain when applied out of the box. The root cause is a data gap: retail environments are structurally absent from general robot pretraining distributions, and the path to filling that gap through teleoperation is prohibitively expensive, logistically constrained, and difficult to scale. We introduce SABER, a high-fidelity retail robotics action dataset built from over 100 hours of natural in-store capture across multiple real grocery environments. Egocentric footage from head-mounted cameras records fine-grained hand activity at the point of interaction, while exocentric 360-degree scene footage from DreamVu's ALIA camera simultaneously observes all actors and activities across the entire space. This combination yields a uniquely complete picture of human retail behavior: dexterous hand activity, whole-body motion, and scene dynamics, all captured without staging, scripting, or teleoperation overhead. The SABER corpus contains 44.8K training samples across three action representation streams: 25K latent action sequences via LAPA-style encoding, 18.6K dexterous hand-pose trajectories retargeted to robot joint space, and 1.2K whole-body synchronized motion sequences retargeted to a humanoid embodiment. When applied to GR00T N1.6 via a shared-backbone multi-task post-training recipe, SABER yields a mean success rate of 29.3% across ten retail manipulation tasks -- more than 2.19x over fine-tuning baselines (13.4%). SABER demonstrates that the path to capable retail robots runs through better data, which can be collected today, at scale, without a robot in the loop. The dataset and code are available at https://dreamvu.ai/saber

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI