日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データセット/操作arXiv:2607.21017

TableVerse: 実世界の接地レイアウトを備えた大規模テーブルトップデータセットによる汎用操作の実現

TableVerse: A Large-scale Tabletop Dataset with Real-world Grounded Layouts for Generalizable Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

インターネット上の未整理画像から物理的に妥当なテーブルトップ環境を自動再構成し、100,000件の操作デモを含む大規模データセットを構築した論文。

詳しい要約

1. どんなもの?

TableVerseは、大規模で高忠実度のテーブルトップ操作データセットを構築するための完全自動Real2Simパイプラインを提案する研究。インターネット上の非構造化画像から、物理的に一貫性のあるシミュレーション環境を再構成し、100,000個のユニークな環境と操作軌道を生成する。

2. 先行研究と比べてどこがすごい?

従来の自動合成手法はテキストからのレイアウト生成や単純化された手続き的生成に依存し、物理的に非現実的で実際の人間環境の複雑な密集を捉えられなかった。TableVerseは想像的な生成ではなく、実世界の画像からの決定論的な再構成にシフトし、正確なメートルスケール、本物のトポロジー、検証済みの機械的安定性を実現する点で優れている。

3. 技術・手法の肝は?

手法の肝は、非構造化のインターネット画像を高忠実度のシミュレーション環境に変換する完全自動Real2Simパイプライン。正確なメートルスケール、本物のトポロジー、機械的安定性の検証を含む。さらに、タスク条件付きの自動軌道生成フレームワークを統合し、衝突のないピックアンドプレースのデモを合成する。

4. どうやって有効だと検証した?

要旨からは不明。ただし、TableVerse-100Kデータセットの構築により、多様なアセット構成、現実的な空間分布、高品質なデモを捉えることで、一般化可能なロボット操作研究のためのスケーラブルで高忠実度のデータ基盤を提供すると述べている。

5. 議論はある?

要旨からは不明。ただし、データセットの物理的一貫性と現実性が強調されており、シミュレーションから実世界への転移(Sim2Real)の可能性や、データ生成のスケーラビリティに関する議論が考えられる。

6. 次に読むべき論文は?

要旨で参照されている関連手法として、text-to-layout hallucinationやsimplified procedural generationが挙げられる。また、一般化可能なロボット操作の分野では、シミュレーションデータを用いた学習に関する既存研究(例:Domain Randomization、Sim-to-Real Transfer)が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Boyuan Wang, Yue Zhang, Xutao Xue, Xueyu Song, Yu Sun

分類: cs.RO

原文アブストラクト

The development of generalizable robotic manipulation policies is inherently bounded by the availability of large-scale, high-fidelity scene data. While recent automated synthesis methods attempt to bridge this gap via text-to-layout hallucination or simplified procedural generation, they frequently suffer from physical implausibility and fail to capture the complex, dense clutter of actual human environments. In this paper, we introduce TableVerse, a fully automated Real2Sim pipeline that shifts the paradigm from imaginative layout generation to deterministic reconstruction from unstructured, in-the-wild image data. Our framework seamlessly processes unscripted internet media into high-fidelity, simulation-ready tabletop environments with accurate metric scales, authentic topologies, and verified mechanical stability. Furthermore, an automated task-conditioned trajectory generation framework is integrated to synthesize high-quality, collision-free pick-and-place demonstrations. Leveraging this complete pipeline, we construct the TableVerse-100K Dataset, a large-scale corpus comprising 100,000 unique, physically consistent environments paired with interactive manipulation trajectories. By capturing diverse asset compositions, realistic spatial distributions, and high-quality demonstrations, TableVerse-100K establishes a highly scalable and high-fidelity data foundation, providing significant value to facilitate future research in generalizable robotic manipulation tasks.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI