日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2506.04941

ArtVIP:ロボット学習のための視覚的リアリズム、モジュラー相互作用、物理的忠実性を備えた関節デジタルアセット

ArtVIP: Articulated Digital Assets of Visual Realism, Modular Interaction, and Physical Fidelity for Robot Learning

シェア:XThreadsFacebookLINEはてブBluesky

ロボット学習向けに、視覚的リアリズムと物理的忠実性を高めた関節物体のデジタルツインを多数収録したオープンソースデータセットArtVIPを構築し、模倣学習と強化学習で有効性を検証した。

詳しい要約

1. どんなもの?

- ArtVIPは、ロボット学習向けの高品質なdigital-twin articulated objectsと屋内シーンアセットからなるオープンソースデータセット - プロの3Dモデラーが統一基準で作成 - 精密なgeometry meshと高解像度textureによるvisual realism - 調整済みdynamic parametersによるphysical fidelity - 資産内にmodular interaction behaviorsとpixel-level affordance annotationsを埋め込み - USD形式で提供され、制作ガイドライン付き

2. 先行研究と比べてどこがすごい?

- 既存のオープンソースarticulated-objectデータセットはvisual realismが不十分でphysical fidelityが低く、実世界のロボットタスクを学習するモデルの訓練を妨げていた - ArtVIPはvisual realismとphysical fidelityの両立を図る - さらにmodular interaction behaviorsの埋め込みとpixel-level affordance annotationsを先駆的に導入 - 具体的な比較対象の研究名は要旨からは不明

3. 技術・手法の肝は?

- プロの3Dモデラーが統一基準に従い、精密なgeometry meshと高解像度textureでvisual realismを確保 - dynamic parametersをfine-tuneしてphysical fidelityを実現 - 資産内にmodular interaction behaviorsを埋め込み - pixel-level affordance annotationsを付与 - USD形式で提供し、詳細なproduction guidelinesを整備

4. どうやって有効だと検証した?

- feature-map visualizationとoptical motion captureによりvisual fidelityとphysical fidelityを定量的に提示 - imitation learningとreinforcement learningの実験で適用可能性を検証

5. 議論はある?

- 要旨からは不明(限界や課題についての記述はない)

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な研究は明示されていない - 関連手法としてimitation learning、reinforcement learning、sim-to-real、articulated object datasets、affordance annotations、USDが挙げられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhao Jin, Zhengping Che, Tao Li, Zhen Zhao, Kun Wu, Yuheng Zhang, Yinuo Zhao, Zehui Liu, Qiang Zhang, Xiaozhu Ju, Jing Tian, Yousong Xue, Jian Tang

分類: cs.RO

原文アブストラクト

Robot learning increasingly relies on simulation to advance complex ability such as dexterous manipulations and precise interactions, necessitating high-quality digital assets to bridge the sim-to-real gap. However, existing open-source articulated-object datasets for simulation are limited by insufficient visual realism and low physical fidelity, which hinder their utility for training models mastering robotic tasks in real world. To address these challenges, we introduce ArtVIP, a comprehensive open-source dataset comprising high-quality digital-twin articulated objects, accompanied by indoor-scene assets. Crafted by professional 3D modelers adhering to unified standards, ArtVIP ensures visual realism through precise geometric meshes and high-resolution textures, while physical fidelity is achieved via fine-tuned dynamic parameters. Meanwhile, the dataset pioneers embedded modular interaction behaviors within assets and pixel-level affordance annotations. Feature-map visualization and optical motion capture are employed to quantitatively demonstrate ArtVIP's visual and physical fidelity, with its applicability validated across imitation learning and reinforcement learning experiments. Provided in USD format with detailed production guidelines, ArtVIP is fully open-source, benefiting the research community and advancing robot learning research. Our project is at https://x-humanoid-artvip.github.io/ .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI