日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.04249

RoboLight: 線形合成可能な照明を備えたロボットマニピュレーション用データセット

RoboLight: A Dataset with Linearly Composable Illumination for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

照明条件を体系的に変化させた実世界のロボット操作データセットを構築し、光の線形性を利用してHDR画像空間で補間することで合成データを大量生成した研究。

詳しい要約

1. どんなもの?

- 実世界のロボットマニピュレーション向けに、照明条件を体系的に変化させた同期エピソードを収録した初のデータセット - RoboLight-Real: 8つのprogrammable RGB LEDを備えたLight Cubeで収集した2,800エピソード - 照明をcolor, direction, intensityの3次元で独立制御し、各次元に専用タスクを用意 - 画像はHDR形式で記録しradiometric accuracyを保持 - RoboLight-Synthetic: 光輸送の線形性を利用しHDR画像空間で補間して生成した196,000エピソード - 補間粒度を細かくすれば原理上任意に拡張可能 - データセット、ソフトウェア、ハードウェア設計をオープンソースで公開予定

2. 先行研究と比べてどこがすごい?

- 実世界のロボットマニピュレーションにおいて、照明条件を体系的に変化させた同期エピソードを収録した初のデータセット - 従来のデータセットは照明変動を体系的に制御していない点が要旨から示唆される - 照明のcolor, direction, intensityを独立制御し、各次元に専用タスクを対応させている点が新しい - HDR記録によりradiometric accuracyを保持し、光輸送の線形性を利用した合成データ生成を可能にした点が特徴 - 合成データを任意に拡張できる枠組みを提示

3. 技術・手法の肝は?

- 8つのprogrammable RGB LEDを備えたcalibratedなLight Cube setupで実世界データを収集 - 照明をcolor, direction, intensityの3次元で独立に制御 - 各次元に、多様なgeometryとmaterialの物体を含む専用タスクを設定し知覚的課題を誘発 - 全画像をHDR形式で記録しradiometric accuracyを保持 - 光輸送の線形性を利用し、RoboLight-RealのHDR画像空間で補間してRoboLight-Syntheticを生成 - 補間粒度を調整することで合成データを原理上任意に拡張可能

4. どうやって有効だと検証した?

- qualitative analysisによりデータセット品質を検証 - real-world policy roll-outsを実施 - タスク難易度、分布的多様性、合成データの有効性を分析 - 提案データセットの3つの代表的なuse caseを提示 - 具体的な評価指標やベースラインとの比較数値は要旨からは不明

5. 議論はある?

- タスク難易度、分布的多様性、合成データの有効性について分析 - 合成データが実世界ポリシーに有効である可能性を示唆 - データセットの限界、照明以外の要因、sim-to-realギャップの詳細は要旨からは不明 - 倫理的・計算コスト的議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている個別研究は明示されていない - 関連手法として、ロボットマニピュレーションのデータセット(例: RoboMimic, BridgeData, RT-1) - 照明変動やHDRを用いたデータ拡張・sim-to-real転移の研究 - 光輸送の線形性を利用した画像合成・再照明(例: image-based relighting) - 実世界ロボット学習におけるdomain randomization関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shutong Jin, Jin Yang, Muhammad Zahid, Florian T. Pokorny

分類: cs.RO

原文アブストラクト

In this paper, we introduce RoboLight, the first real-world robotic manipulation dataset capturing synchronized episodes under systematically varied lighting conditions. RoboLight consists of two components. (a) RoboLight-Real contains 2,800 real-world episodes collected in our custom Light Cube setup, a calibrated system equipped with eight programmable RGB LED lights. It includes structured illumination variation along three independently controlled dimensions: color, direction, and intensity. Each dimension is paired with a dedicated task featuring objects of diverse geometries and materials to induce perceptual challenges. All image data are recorded in high-dynamic-range (HDR) format to preserve radiometric accuracy. Leveraging the linearity of light transport, we introduce (b) RoboLight-Synthetic, comprising 196,000 episodes synthesized through interpolation in the HDR image space of RoboLight-Real. In principle, RoboLight-Synthetic can be arbitrarily expanded by refining the interpolation granularity. We further verify the dataset quality through qualitative analysis and real-world policy roll-outs, analyzing task difficulty, distributional diversity, and the effectiveness of synthesized data. We additionally demonstrate three representative use cases of the proposed dataset. The full dataset, along with the system software and hardware design, will be released as open-source to support continued research.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI