日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2511.22780

気が散るロボット:視覚的 clutter がロボットマニピュレーションを損なう仕組み

Distracted Robot: How Visual Clutter Undermine Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

視覚的 clutter がロボットマニピュレーションに与える影響を心理物理学的指標で評価し、VLA モデルの性能低下や脆弱性を明らかにした。

詳しい要約

1. どんなもの?

- ロボットマニピュレーション政策、特に vision-language-action (VLA) models の性能を、cluttered scenes(散らかった環境)で評価するための評価プロトコルを提案する研究。 - 評価を psychophysical な観点から捉え、環境要因と distractor の数量・特性・配置を統合した単一の clutter 指標を用いる。 - hyper-realistic simulation と real-world の両方で評価シナリオを体系的に構築し、実験を行う。

2. 先行研究と比べてどこがすごい?

- 先行研究と異なり、評価を psychophysical な視点から行う点が特徴。 - distractor の数量・特性・配置に加え環境要因も考慮する統一的な clutter 指標を導入している点が新しい。 - この指標に基づき simulation と real-world の両方で体系的にシナリオを構築し、VLA models を対象に大規模な実験を行っている。

3. 技術・手法の肝は?

- 環境要因と distractor の数量・特性・配置を統合した単一の clutter 指標を定義。 - この指標を用いて hyper-realistic simulation と real-world の評価シナリオを体系的に構築。 - 構築したシナリオ上で manipulation policies、特に VLA models の性能を評価し、distractor の数量や遮蔽影響を分析。

4. どうやって有効だと検証した?

- hyper-realistic simulation と real-world の両方で評価シナリオを構築し、manipulation policies に対して広範な実験を実施。 - clutter により性能が最大 34% 低下することを示した。 - 異なる VLA policies は平均性能が同程度でも脆弱性が異なり、成功シナリオに関する一致度が比較的低いことを示した。 - clutter 指標が性能劣化の有効な指標であること、および enhanced data での finetuning が有効だが clutter の悪影響すべてを均等に緩和しないことを示した。

5. 議論はある?

- clutter が VLA policies の性能を大きく低下させること、policy ごとに脆弱性が異なることを議論。 - clutter 指標が性能劣化の指標として有効であることを示す。 - distractor の数量と遮蔽影響の観点から分析。 - enhanced data での finetuning は有効だが、clutter の負の影響を均等に補えない点を指摘。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として vision-language-action (VLA) models、および enhanced data での finetuning が挙げられる。 - 同分野の定番として robotic manipulation policies の評価研究や clutter/robustness 評価に関する研究を次に読む候補とする。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Amir Rasouli, Montgomery Alban, Sajjad Pakdamansavoji, Zhiyuan Li, Zhanguang Zhang, Aaron Wu, Xuan Zhao

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

In this work, we propose an evaluation protocol for examining the performance of robotic manipulation policies in cluttered scenes. Contrary to prior works, we approach evaluation from a psychophysical perspective, therefore we use a unified measure of clutter that accounts for environmental factors as well as the distractors quantity, characteristics, and arrangement. Using this measure, we systematically construct evaluation scenarios in both hyper-realistic simulation and real-world and conduct extensive experimentation on manipulation policies, in particular vision-language-action (VLA) models. Our experiments highlight the significant impact of scene clutter, lowering the performance of the policies, by as much as 34% and show that despite achieving similar average performance across the tasks, different VLA policies have unique vulnerabilities and a relatively low agreement on success scenarios. We further show that our clutter measure is an effective indicator of performance degradation and analyze the impact of distractors in terms of their quantity and occluding influence. At the end, we show that finetuning on enhanced data, although effective, does not equally remedy all negative impacts of clutter on performance.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI