日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

両腕操作arXiv:2603.07484

HSC-VLA: 高密度クラッタ環境での堅牢な両腕操作のための階層的シーンクリアリング

HSC-VLA: Hierarchical Scene-Clearing for Robust Bimanual Manipulation in Dense Clutter

シェア:XThreadsFacebookLINEはてブBluesky

高密度な環境での操作タスクにおいて、タスクに関係ない視覚情報が注意を散漫にし性能を低下させる問題を解決するため、高レベルな視覚意味推論と低レベルな感覚運動実行を分離する階層的フレームワークを提案した。

詳しい要約

1. どんなもの?

- 高密度クラッタ環境での bimanual manipulation 向け VLA モデル HSC-VLA を提案。 - 高レベル Brain と低レベル Cerebellum に分離した階層型フレームワーク。 - 明示的な scene-clearing abstraction で視覚的クラッタを除去。 - 長期的タスクを分解し、タスク関連ジオメトリを保持する scene mask を生成。 - マスクフィルタ済み視覚と固有感覚のみで diffusion-based policy が動作。

2. 先行研究と比べてどこがすごい?

- 従来の monolithic end-to-end アーキテクチャの表現ボトルネックを克服。 - 高密度クラッタ下で aggregate success 86.7% を達成。 - 最良の monolithic baseline である π0-Full FT の 34.3% を 52.4% 上回る。 - 長期的タスクでも clutter sorting 72%、restocking 66% を達成。 - 複雑なクラッタ操作での堅牢性と失敗回復を示す。

3. 技術・手法の肝は?

- 高レベル Brain が長期的タスクを分解し、タスク固有の scene mask を生成。 - scene mask はタスク関連ジオメトリを保持し、distractor を抑制。 - フィルタ済み観測を低レベル Cerebellum に渡す。 - Cerebellum は diffusion-based policy で bimanual manipulation を実行。 - 入力は mask-filtered vision と proprioception のみ。

4. どうやって有効だと検証した?

- 高密度にクラッタした supermarket shelves での広範な実験。 - 高密度クラッタ下で aggregate success 86.7% を達成。 - 最良の monolithic baseline π0-Full FT の 34.3% を 52.4% 上回る。 - 長期的タスクで clutter sorting 72%、restocking 66% を達成。 - 堅牢性と失敗回復を実証。

5. 議論はある?

- 高密度操作環境での instruction-following 失敗の原因として、タスク無関係な視覚クラッタが注意を希釈し、grounding を損なうことを指摘。 - monolithic end-to-end アーキテクチャの表現ボトルネックを克服する必要性を議論。 - 階層的分離と scene-clearing abstraction の有効性を示す。 - 具体的な限界や今後の課題は要旨からは不明。

6. 次に読むべき論文は?

- π0-Full FT(要旨で比較されている monolithic baseline) - Vision-Language-Action models(関連手法) - diffusion-based policy(関連手法) - bimanual manipulation(関連分野) - hierarchical frameworks(関連手法)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhen Liu, Xinyu Ning, Zhe Hu, XinXin Xie, Yitong Liu, Zhongzhu Pu

分類: cs.RO

原文アブストラクト

Modern Vision--Language--Action models often suffer from critical instruction-following failures in high-density manipulation environments, where task-irrelevant visual clutter dilutes attention, corrupts grounding, and substantially degrades performance in complex long-horizon scenarios. To overcome the representation bottleneck of monolithic end-to-end architectures, we propose HSC-VLA, a hierarchical framework that decouples high-level visual-semantic reasoning from low-level, high-frequency sensorimotor execution through an explicit scene-clearing abstraction. HSC-VLA employs a high-level Brain to decompose long-horizon tasks and to generate task-specific scene masks that preserve task-relevant geometry while suppressing distractors. The filtered observations are then passed to a low-level Cerebellum, a diffusion-based policy that performs bimanual manipulation using only mask-filtered vision and proprioception. Extensive experiments in densely cluttered supermarket shelves demonstrate that HSC-VLA achieves 86.7\% aggregate success under high-density clutter, surpassing the best monolithic baseline ($\pi_0$-Full FT at 34.3\%) by 52.4\%. HSC-VLA also exhibits strong long-horizon performance, reaching 72\% on clutter sorting and 66\% on restocking, demonstrating strong robustness and effective failure recovery in complex cluttered manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI