日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

シミュレーション/データ拡張arXiv:2606.12936

Pipette: ウェットラボロボットのための具現化シミュレーションプラットフォーム、ベンチマーク、およびデータ効率的な拡張フレームワーク

Pipette: An Embodied Simulation Platform, Benchmark, and Data-Efficient Augmentation Framework for Wet-Lab Robotics

シェア:XThreadsFacebookLINEはてブBluesky

ウェットラボ(生物医学実験)ロボットの学習を効率化するため、カスタマイズ可能なシミュレータ、編集可能なアセット、限られたデモから訓練データを増強するパイプラインを備えたプラットフォーム「Pipette」を提案した。

詳しい要約

1. どんなもの?

- Pipetteはwet-labロボティクス向けのembodied simulation platform、benchmark、data-efficient augmentation framework。 - 100以上のオープンソースで再編集可能なwet-labアセットを提供。 - 3つのrobotic-arm embodimentsを統一シミュレーションインターフェースでサポート。 - 12タスクのwet-lab embodied benchmarkを導入。 - 自然言語によるシーン構築とタスク登録をサポート。

2. 先行研究と比べてどこがすごい?

- 従来のwet-labロボット学習はカスタマイズ可能なシミュレータやオープンアセット、効率的なデータ拡張パイプラインが不足。 - Pipetteは100以上の再編集可能なアセットと拡張可能なアセット構築パイプラインを提供。 - Tencent Hunyuanによるテキスト・画像条件付き3Dアセット生成を内蔵。 - シミュレーションベースのデータ拡張で限られたデモから訓練データを急速に拡大。 - 12タスクのベンチマークを提供し、データ効率的なVLA訓練と評価を可能に。

3. 技術・手法の肝は?

- 拡張可能なアセット構築パイプラインとTencent Hunyuanによる3Dアセット生成。 - 統一シミュレーションインターフェースでタスク構築、データ収集、拡張、評価をサポート。 - シミュレーションベースのデータ拡張パイプライン:人間のデモをシミュレーションで再生。 - 照明、カメラ、速度、行動の摂動を適用。 - 自動タスク成功チェックで生成エピソードをフィルタリング。 - 自然言語駆動のシーン構築とタスク登録。

4. どうやって有効だと検証した?

- 12タスクのwet-lab embodied benchmarkで評価。 - タスクあたり30デモでACTが平均成功率60.3%を達成。 - シミュレーション拡張によりSmolVLAが40.4%から71.8%に改善。 - pi0が37.3%から44.1%に改善。 - データ効率的なVLA訓練と評価の有効性を検証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- ACT、SmolVLA、pi0、Tencent Hunyuan。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhe Liu, Huanbo Jin, Zhaohui Du, Zhe Wang, Dongzhan Zhou, Minting Pan, He Xu, Peijia Li, Jiaming Gu, Quan Lu, Qi Wang, Bin Ji, Ting Xiao

分類: cs.RO, cs.AI

原文アブストラクト

Wet-lab robots can improve the reproducibility, throughput, and safety of biomedical experiments, but scaling their learning requires customizable simulators for safe and reproducible task generation, open editable laboratory assets, and efficient pipelines that turn limited demonstrations into usable training data. We present Pipette, an embodied simulation platform, benchmark, and data-efficient augmentation framework for wet-lab robot learning. Pipette provides over 100 open-source and re-editable wet-lab assets through an extensible asset-building pipeline with built-in Tencent Hunyuan support for text- and image-conditioned 3D asset generation, and supports three robotic-arm embodiments through a unified simulation interface for task construction, data collection, augmentation, and evaluation. A key component of Pipette is its simulation-based data augmentation pipeline, which replays human demonstrations in simulation, applies lighting, camera, speed, and action perturbations, and filters generated episodes with automatic task success checks, rapidly expanding usable training data from limited manual demonstrations. We further introduce a 12-task wet-lab embodied benchmark covering sample handling, culture-ware manipulation, device operation, and precision placement. With only 30 demonstrations per task, ACT achieves 60.3% average success rate, while simulation augmentation improves SmolVLA from 40.4% to 71.8% and pi0 from 37.3% to 44.1%, validating the effectiveness of Pipette for data-efficient VLA training and evaluation. Pipette also supports natural-language-driven scene construction and task registration, lowering the barrier for non-expert users to define new wet-lab robotic tasks

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI