日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2507.00984

大規模倉庫自動化のための箱の姿勢・形状推定とドメイン適応

Box Pose and Shape Estimation and Domain Adaptation for Large-Scale Warehouse Automation

シェア:XThreadsFacebookLINEはてブBluesky

倉庫ロボットの実世界の未ラベル画像を活用し、箱の姿勢と形状を自己教師ありで推定するドメイン適応パイプラインを開発した。シミュレーションのみの学習より大幅に高精度で、ゼロショット3Dバウンディングボックス推定も上回る。

詳しい要約

1. どんなもの?

- 倉庫自動化向けに、box の pose と shape を推定する知覚モデルを対象とした研究。 - 実世界の未ラベルデータを活用する self-supervised domain adaptation の pipeline を提案。 - 人手アノテーションを必要とせず、simulation で学習したモデルを実環境へ適応させることを狙う。 - 大規模実世界データセット(50,000 images)への適応を含めて評価。

2. 先行研究と比べてどこがすごい?

- simulation のみで学習したモデルを大きく上回る性能を示す。 - zero-shot の 3D bounding box estimation baseline に対しても大幅な改善を報告。 - 人手アノテーションを前提とせず、実世界の未ラベルデータをそのまま活用できる点が特徴。 - 具体的な先行研究名や数値比較の詳細は要旨からは不明。

3. 技術・手法の肝は?

- 実世界の未ラベルデータを用いる self-supervised domain adaptation の pipeline を構築。 - box の pose と shape の推定に特化した設計。 - correct-and-certify pipeline を採用し、self-supervised に pose/shape 推定を改善。 - 各構成要素の詳細なアルゴリズムや損失設計は要旨からは不明。

4. どうやって有効だと検証した?

- 複数の simulated および real industrial settings で評価。 - 50,000 images からなる大規模実世界データセットへの適応を実施。 - simulation のみで学習したモデルとの比較で有意な改善を確認。 - zero-shot 3D bounding box estimation baseline との比較でも改善を報告。

5. 議論はある?

- 未ラベル実データ活用によりアノテーションコストを抑えつつ知覚性能を向上できる可能性を示唆。 - 大規模倉庫自動化への実用展開を見据えた適応手法として位置づけ。 - 失敗事例、限界、計算コスト、certify の保証範囲などの詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較対象として言及される zero-shot 3D bounding box estimation の baseline 関連研究。 - simulation のみで学習する perception モデルに関する研究。 - self-supervised domain adaptation の一般的な関連手法。 - 個別の論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xihang Yu, Rajat Talak, Jingnan Shi, Ulrich Viereck, Igor Gilitschenski, Luca Carlone

分類: cs.RO, cs.CV, cs.LG

原文アブストラクト

Modern warehouse automation systems rely on fleets of intelligent robots that generate vast amounts of data -- most of which remains unannotated. This paper develops a self-supervised domain adaptation pipeline that leverages real-world, unlabeled data to improve perception models without requiring manual annotations. Our work focuses specifically on estimating the pose and shape of boxes and presents a correct-and-certify pipeline for self-supervised box pose and shape estimation. We extensively evaluate our approach across a range of simulated and real industrial settings, including adaptation to a large-scale real-world dataset of 50,000 images. The self-supervised model significantly outperforms models trained solely in simulation and shows substantial improvements over a zero-shot 3D bounding box estimation baseline.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI