日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2509.25032

AIRoA MoMaデータセット:移動マニピュレーションのための大規模階層データセット

AIRoA MoMa Dataset: A Large-Scale Hierarchical Dataset for Mobile Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

移動マニピュレーション向けに、RGB画像・関節状態・6軸力覚センサ・ロボット内部状態を同期収録し、サブゴールとプリミティブ動作の2層注釈を付けた大規模実世界データセットを構築した。

詳しい要約

1. どんなもの?

- 実世界の mobile manipulation 向け大規模マルチモーダルデータセット AIRoA MoMa Dataset の提案。 - 同期された RGB 画像、joint states、6軸 wrist force-torque 信号、内部 robot states を含む。 - sub-goals と primitive actions の2層 annotation schema を持つ。 - 初期版は Human Support Robot (HSR) で収集した 25,469 episodes(約94時間)。 - LeRobot v2.1 format で標準化され、Hugging Face で公開。

2. 先行研究と比べてどこがすごい?

- 既存資源は synchronized force-torque sensing、hierarchical annotations、明示的な failure cases を欠くと指摘。 - 本データセットはこれらを統合し、contact-rich かつ long-horizon な mobile manipulation を捉える点が差分。 - mobile manipulation、contact-rich interaction、long-horizon structure を同時に備える点を独自性として主張。 - 具体的な比較対象研究名は要旨からは不明。

3. 技術・手法の肝は?

- HSR を用いて実世界でデータ収集。 - RGB 画像、joint states、6軸 wrist force-torque、内部 robot states を同期取得。 - sub-goals と primitive actions からなる2層 annotation schema を新規に設計。 - hierarchical learning と error analysis を可能にする構造化を狙う。 - LeRobot v2.1 format に完全標準化。

4. どうやって有効だと検証した?

- 初期版として 25,469 episodes(約94時間)を HSR で収集した規模を報告。 - LeRobot v2.1 format への標準化と Hugging Face での公開を実施。 - Vision-Language-Action models 向け benchmark としての位置づけを主張。 - 定量的な性能検証や下流タスク実験は要旨からは不明。

5. 議論はある?

- contact-rich と long-horizon を含む点が次世代 VLA models の benchmark として重要という主張。 - failure cases を明示的に含む設計は error analysis に資する。 - ただし単一ロボット HSR 由来のデータであり、他 embodiment への一般化は要旨からは不明。 - 収集環境やタスク多様性の詳細、限界の議論は要旨からは不明。

6. 次に読むべき論文は?

- Vision-Language-Action models(VLA)関連研究。 - LeRobot v2.1 format および LeRobot エコシステム。 - Human Support Robot (HSR) を用いた mobile manipulation 研究。 - hierarchical learning と sub-goal/primitive action 分解に関する研究。 - force-torque sensing を用いた contact-rich manipulation 研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ryosuke Takanami, Petr Khrapchenkov, Shu Morikuni, Jumpei Arima, Yuta Takaba, Shunsuke Maeda, Takuya Okubo, Genki Sano, Satoshi Sekioka, Aoi Kadoya, Motonari Kambara, Naoya Nishiura, Haruto Suzuki, Takanori Yoshimoto, Koya Sakamoto, Shinnosuke Ono, Hu Yang, Daichi Yashima, Aoi Horo, Tomohiro Motoda, Kensuke Chiyoma, Hiroshi Ito, Koki Fukuda, Akihito Goto, Kazumi Morinaga, Yuya Ikeda, Riko Kawada, Masaki Yoshikawa, Norio Kosuge, Yuki Noguchi, Kei Ota, Tatsuya Matsushima, Yusuke Iwasawa, Yutaka Matsuo, Tetsuya Ogata

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

As robots transition from controlled settings to unstructured human environments, building generalist agents that can reliably follow natural language instructions remains a central challenge. Progress in robust mobile manipulation requires large-scale multimodal datasets that capture contact-rich and long-horizon tasks, yet existing resources lack synchronized force-torque sensing, hierarchical annotations, and explicit failure cases. We address this gap with the AIRoA MoMa Dataset, a large-scale real-world multimodal dataset for mobile manipulation. It includes synchronized RGB images, joint states, six-axis wrist force-torque signals, and internal robot states, together with a novel two-layer annotation schema of sub-goals and primitive actions for hierarchical learning and error analysis. The initial dataset comprises 25,469 episodes (approx. 94 hours) collected with the Human Support Robot (HSR) and is fully standardized in the LeRobot v2.1 format. By uniquely integrating mobile manipulation, contact-rich interaction, and long-horizon structure, AIRoA MoMa provides a critical benchmark for advancing the next generation of Vision-Language-Action models. The first version of our dataset is now available at https://huggingface.co/datasets/airoa-org/airoa-moma .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI