日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データセットarXiv:2604.23570

EgoLive: 実世界の人間タスクから得た大規模エゴセントリックデータセット

EgoLive: A Large-Scale Egocentric Dataset from Real-World Human Tasks

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作学習のための大規模で高品質なエゴセントリックデータセットEgoLiveを構築し、実世界の非制約環境での人間の作業データを収集・公開した。

詳しい要約

1. どんなもの?

- 大規模で高品質なegocentricデータセットEgoLiveを提案。 - ロボットマニピュレーション学習向けに設計。 - 実世界のタスク指向人間ルーチンを含む。 - オープンソースの注釈付きegocentricデータセット。 - 家庭サービス、小売など多様な実世界作業シナリオをカバー。

2. 先行研究と比べてどこがすごい?

- 既存のteleoperationやuniversal manipulation interfacesに基づくデータセットはスケーラビリティと実世界展開に限界。 - EgoLiveはegocentricビデオ収集によりスケーラブルで自然なデータ収集を実現。 - 既存のegocentricデータセットと比べ、最大規模のオープンソース注釈付きデータセット。 - カスタム頭部装着デバイスと高精度マルチモーダル注釈でデータ品質が高い。 - 非制約実世界シナリオで収集され、多様性と生態学的妥当性に優れる。

3. 技術・手法の肝は?

- カスタム頭部装着キャプチャデバイスを使用。 - 高精度マルチモーダル注釈を包括的に付与。 - 非制約実世界シナリオでのデータ収集。 - 垂直フィールドの人間作業データを含む。 - 家庭サービス、小売などの実用作業シナリオを網羅。

4. どうやって有効だと検証した?

- 要旨からは不明。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究はteleoperation、universal manipulation interfaces、既存のegocentricデータセット。 - 同分野の定番としてrobot learning、egocentric video collection、robot manipulation learningが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yihang Li, Xuelong Wei, Jingzhou Luo, Yingjing Xiao, Yibo Bai, Guangyuan Zhou, Teng Zou, Chenguang Gui, Jiajun Wen, He Zhang, Kangliang Chen, Xing Pan, Shuaiyan Liu, Daming Wang, Tao An, Jiayi Li, Shibo Jin, Wanwan Zhang, Tianyu Wang, Boren Wei, Zhixuan Huang, Fangsheng Liu, Ruodai Li, Hui Zhang, Anson Li, Yicheng Gong, Peng Cao, Jiaming Liang, Liang Lin

分類: cs.RO

原文アブストラクト

The advancement of robot learning is currently hindered by the scarcity of large-scale, high-quality datasets. While established data collection methods such as teleoperation and universal manipulation interfaces dominate current datasets, they suffer from inherent limitations in scalability and real-world deployability. Human egocentric video collection, by contrast, has emerged as a promising approach to enable scalable, natural and in-the-wild data collection. As such, we present EgoLive, a large-scale, high-quality egocentric dataset designed explicitly for robot manipulation learning. EgoLive establishes three distinctive technical advantages over existing egocentric datasets: first, it represents the largest open-source annotated egocentric dataset focused on real-world task-oriented human routines to date; second, it delivers leading data quality via a customized head-mounted capture device and comprehensive high-precision multi-modal annotations; third, all data is collected exclusively in unconstrained real-world scenarios and encompasses vertical field human working data, including home service, retail, and other practical work scenarios, providing superior diversity and ecological validity. With the introduction of EgoLive, we aim to provide the research community with a scalable, high-quality dataset that accelerates breakthroughs in generalizable robotic models and facilitates the real-world deployment of robot systems.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI