日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.01777

Trans2Occ: 透明物体のボクセル占有推定と把持 - シミュレーションから実世界へ

Trans2Occ: Voxel Occupancy Estimation and Grasp for Transparent Objects from Simulation to Reality

シェア:XThreadsFacebookLINEはてブBluesky

単一RGB画像から透明物体のボクセル占有を直接予測し、シミュレーションで大規模学習したモデルを実ロボットに微調整なしで適用して把持を実現する枠組みを提案した。

詳しい要約

1. どんなもの?

- 透明物体の認識と把持のためのフレームワーク - 単一視点RGB画像からvoxel-space occupancyを直接予測 - シミュレーションで大規模学習し、実世界に転移 - ルールベースの把持戦略で透明物体を操作

2. 先行研究と比べてどこがすごい?

- 従来はmulti-view reconstructionやdepth completionに依存 - それらはスケールや実世界展開が困難 - 本手法は単一視点RGBのみで幾何認識を実現 - シミュレーションから実世界へのfine-tuningなし転移が可能

3. 技術・手法の肝は?

- 単一画像からvoxel-space occupancyを予測 - シミュレーションパイプラインでRGBとvoxel occupancyのペアを生成 - 多様なmaterialとlighting条件で学習 - occupancy上に構築したシンプルなルールベース把持戦略

4. どうやって有効だと検証した?

- シミュレーションと実世界環境での広範な実験 - 予測occupancyがdomain shiftに頑健であることを実証 - fine-tuningなしで実世界ロボット設定に転移 - 透明物体の把持性能を評価

5. 議論はある?

- 単一視点occupancy予測がスケーラブルで効果的な解決策を提供 - 透明物体認識における実用的なマニピュレーションを可能に - 限界や課題については要旨からは不明

6. 次に読むべき論文は?

- multi-view reconstruction - depth completion - 透明物体認識のための他の手法(具体的な論文名は要旨に記載なし)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yixuan Yang, Sha Zhang, Rui Li, Zhenfei Yin, Xinzhu Ma, Yiran Qin, Lei Bai, Xudong Xu, Shilin Shan, Wangmeng Zuo, Yanyong Zhang, Wanli Ouyang, Feng Zheng, Shixiang Tang, Dongzhan Zhou

分類: cs.RO

原文アブストラクト

Transparent objects remain challenging for robotic perception due to unreliable depth sensing caused by refraction and reflection. While prior approaches rely on multi-view reconstruction or depth completion, they are often difficult to scale or deploy in real-world robotic systems. In this paper, we present a practical framework for transparent object perception and manipulation based on single-view RGB input. Our approach predicts voxel-space occupancy directly from a single image, providing a geometry-aware representation that supports downstream robotic grasping. To enable large-scale training, we construct a simulation pipeline that generates paired RGB images and voxel occupancy annotations under diverse materials and lighting conditions. We demonstrate that the predicted occupancy representation is robust to domain shifts and transfers effectively from simulation to real-world robotic setups without fine-tuning. A simple rule-based grasping strategy built on top of the occupancy further achieves reliable grasp performance on transparent objects. Extensive experiments in both simulation and real-world environments show that our framework provides accurate 3D understanding and enables practical manipulation of transparent objects. These results suggest that single-view occupancy prediction offers a scalable and effective solution for transparent object perception in robotics.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI