日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2602.23648

FAVLA:接触の多いロボットマニピュレーションのための力適応型高速・低速VLAモデル

FAVLA: A Force-Adaptive Fast-Slow VLA model for Contact-Rich Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

低速なVLMによる計画と高速なアクションエキスパートを分離し、力覚フィードバックを適応的に活用することで、接触の多いマニピュレーションの反応性と成功率を向上させるVLAモデルを提案。

詳しい要約

1. どんなもの?

- FAVLAは、接触の多いロボットマニピュレーションのためのForce-Adaptive Fast-Slow VLAモデルである。 - 低速のVLMと高速のAction Expert (AE)を分離し、力覚フィードバックを活用する。 - 接触力の変化に応じてAEの実行周波数を適応的に調整する。

2. 先行研究と比べてどこがすごい?

- 既存手法は全モダリティを単一の動作周波数で融合し、高周波の接触手がかりをダウンサンプリングしていた。 - また、VLMとAEのパイプラインはアクションチャンクをほぼオープンループで実行し、衝撃やスティックスリップ、力のスパイクへの応答が遅延していた。 - FAVLAは低速計画と高速接触制御を分離し、高周波力覚データを活用することで、反応性と成功率を大幅に向上させた。

3. 技術・手法の肝は?

- 低速VLMを固定低周波で実行し、モダリティを潜在表現にエンコードし、近未来の力変化を予測する。 - 高速AEを可変高周波で実行し、最新の力シーケンスデータに条件付けして反応的なアクションを生成する。 - Force Adapterを導入し、高周波力特徴をAEの複数層に注入する。 - VLMが予測した力変化に基づいてAEの実行周波数を適応的にスケジュールする。

4. どうやって有効だと検証した?

- 接触の多いタスクで広範な実験を行い、FAVLAがベースラインを大幅に上回ることを示した。 - 特にマニピュレーション中の接触力が小さい場合に、優れた反応性と成功率を達成した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。関連手法としてVision-Language-Action (VLA)モデル、VLM-action-expert (AE)パイプライン、Force/Torque Feedbackを活用した手法が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yao Li, Peiyuan Tang, Wuyang Zhang, Chengyang Zhu, Yifan Duan, Weikai Shi, Xiaodong Zhang, Zijiang Yang, Jianmin Ji, Yanyong Zhang

分類: cs.RO

原文アブストラクト

Force/torque feedback can substantially improve Vision-Language-Action (VLA) models on contact-rich manipulation, but most existing approaches fuse all modalities at a single operating frequency. This design ignores the mismatched sampling rates of real robot sensors, forcing downsampling of the high-frequency contact cues needed for reactive correction. Combined with common VLM-action-expert (AE) pipelines that execute action chunks largely open loop between expensive VLM updates, unified-frequency fusion often yields delayed responses to impacts, stick-slip, and force spikes. We propose FAVLA, a force-adaptive fast-slow VLA that decouples slow perception planning from fast contact-aware control. FAVLA runs a slow VLM at a fixed low frequency to encode modalities to produce latent representations and to predict near-future force variation. A fast AE then executes at a variable high frequency, conditioning on the latest force sequence data to generate reactive actions. We further introduce a force adapter that injects high-frequency force features into multiple AE layers, and adaptively schedules the AE's execution frequency based on the VLM's predicted force variation. Extensive experiments on contact-rich tasks demonstrate that FAVLA significantly outperforms baselines, achieving superior reactivity and success rates, especially with a smaller contact force during manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI