日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

セキュリティ/VLAarXiv:2607.04146

!Imperio, smolVLA:オープンソースロボティクスにおけるデータポイズニングの影響

!Imperio, smolVLA: The Implications of Data Poisoning on Open Source Robotics

シェア:XThreadsFacebookLINEはてブBluesky

オープンソースのロボット学習モデル(smolVLA)が、わずかな毒データを混入されるだけで、特定のトリガーワードでロボットを完全に停止させるバックドアを埋め込めることを実証した論文。

詳しい要約

1. どんなもの?

本研究は、オープンソースのロボティクスエコシステムにおけるVision-Language-Action (VLA)モデルに対するデータポイズニング攻撃の実用性を実証したものである。具体的には、smolVLAモデルに対してトリガーワードを用いたデータポイズニングを行い、実世界のpick-and-placeタスクでその影響を評価している。わずか数個のポイズニングサンプルで、特定のトリガーワードを入力するとロボットが動作不能になるバックドアを埋め込むことができることを示した。

2. 先行研究と比べてどこがすごい?

先行研究では、VLAモデルに対するデータポイズニング攻撃の実用性は十分に検証されていなかった。本研究は、オープンソースのロボティクスエコシステムにおけるコミュニティ貢献に対する信頼の前提が脆弱であることを指摘し、実際のロボットを用いたタスクで攻撃が成功することを示した点が新しい。また、攻撃がステルス性を持ち、低コストで実現可能であることを実証した。

3. 技術・手法の肝は?

手法の核心は、トリガーワードを含むポイズニングサンプルを学習データに混入させることである。LeRobotプラットフォーム上で、smolVLAを320のクリーンなエピソードと3つのポイズン比率(例:3エピソード)で訓練し、トリガーワードを含むプロンプトと通常のプロンプトの両方で評価した。トリガーの配置は主にfrontに置き、汎化性を確認するためにmiddleやendの配置でもテストした。

4. どうやって有効だと検証した?

実世界のpick-and-placeタスクで検証した。3つのポイズンエピソードを混入させた場合、トリガーワード条件下での成功率は0.0±0.0%に低下し、ロボットは固定された関節構成にロックされた。一方、クリーンなプロンプトでは約50%の成功率を維持し、攻撃がステルス性を持つことを確認した。また、1エピソードのポイズニングでも成功率が6.7±6.7%に低下し、タスクを完了できなくなった。トリガー配置をfrontで訓練したにもかかわらず、middleやendの配置でも攻撃が成功することを確認した。

5. 議論はある?

議論としては、攻撃が実用的で低コストかつステルス性が高いことが示され、オープンソースのロボティクスエコシステムにおけるデータの出所(provenance)を第一級の関心事として扱うべきであると主張している。しかし、要旨からは、攻撃の防御策や他のモデルへの適用可能性、より大規模なデータセットでの影響などについては言及されていない。また、実験は特定のタスクとモデルに限定されており、一般化にはさらなる検証が必要である。

6. 次に読むべき論文は?

要旨で参照されている研究や関連手法としては、VLAモデル(例:smolVLA)やLeRobotプラットフォームが挙げられる。また、データポイズニング攻撃の一般的な研究や、ロボット学習におけるデータの信頼性に関する研究が関連する。具体的な論文名は要旨にないため、同分野の定番として、データポイズニング攻撃のサーベイや、VLAモデルの学習に関する論文を読むことが推奨される。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Stefan Bühler, Mark Schutera

分類: cs.RO, cs.AI, cs.CL, cs.CR, cs.LG

原文アブストラクト

This work establishes that trigger-word data poisoning of vision language action models is practical, while at the same time the open-source robotics ecosystem holds trust assumptions about community contributions. A few poisoned samples can silently embed a backdoor that disables a robot on command. We evaluate this threat against smolVLA on a real-world pick-and-place task, training on three poison ratios and evaluating across different prompts on the LeRobot platform. Three poisoned episodes in 320 clean episodes suffice for a complete denial of service. Success rate drops to 0.0 plus minus 0.0% across all trigger-word conditions and the robot locks into a fixed joint configuration rather than executing any task-relevant motion. Clean-prompt behaviour holds at approx. 50% success rate across all poison ratios, confirming the attack is stealthy under normal operation. A single poisoned episode already reduces success rate to 6.7 plus minus 6.7%. The robot still moves, but no longer completes the task. The attack generalises to front, middle, and end trigger placements despite training exclusively on front-placed triggers. These findings establish that the threat is practical, low-cost, and stealthy, and warrant treating dataset provenance as a first-class concern in open-source robotics ecosystems.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI