日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.14143

CLAW: 重量を考慮したロボット把持のための視覚-言語-行動フレームワーク

CLAW: A Vision-Language-Action Framework for Weight-Aware Robotic Grasping

シェア:XThreadsFacebookLINEはてブBluesky

重量計の数値をCLIPで監視して閾値に応じた指示を生成し、VLAポリシーと組み合わせて重量を考慮した把持を実現するフレームワークを提案。

詳しい要約

1. どんなもの?

- 重量条件付きのロボット把持を実現する VLA フレームワーク CLAW の提案 - 自然言語指示を視覚運動行動に接地する VLA モデル全般の問題提起 - 数値しきい値に基づく停止など精密なタスク制約の扱いが苦手という課題 - 構成要素 - 条件評価と行動生成を分離する設計 - fine-tuned CLIP による軽量 prompt generator - flow-based VLA policy である π0 - 対象タスク - 重量しきい値に応じた把持行動 - single-object grasping と dual-arm を要する mixed-object タスク

2. 先行研究と比べてどこがすごい?

- 既存 VLA の限界 - 観測から行動への写像が学習データに暗黙的に規定される - 条件監視の明示的機構を持たず数値しきい値停止が困難 - CLAW の差分 - 条件評価を action generation から分離 - scale の digital readout を継続監視し離散 directive を生成 - 記号的重量推論と高頻度 visuomotor control を両立 - 比較結果 - raw-π0 および fine-tuned π0 を上回ると報告 - 具体的な先行研究名の比較は要旨からは不明

3. 技術・手法の肝は?

- 二段構成のパイプライン - 第1段: fine-tuned CLIP を lightweight prompt generator として使用 - scale の digital readout を連続監視 - タスク固有の weight thresholds に基づき離散 directive を出力 - 第2段: π0 (flow-based VLA policy) が directive を消費 - multi-view camera observations と prompt を統合 - 連続的な robot actions を生成 - 設計の肝 - symbolic weight reasoning と高頻度 visuomotor control の分離統合 - しきい値条件の明示的モニタリング機構

4. どうやって有効だと検証した?

- 3つの実験セットアップで検証 - single-object grasping - dual-arm manipulation を要する mixed-object タスク - 評価内容 - 全条件で weight-aware behaviors を安定的に実行 - raw-π0 および fine-tuned π0 との比較で優位 - 詳細な指標・被験者数・試行回数は要旨からは不明 - 動画がオンラインで公開 (https://youtu.be/MuMYj2QgReI)

5. 議論はある?

- 主張される利点 - 条件評価の分離により数値しきい値タスクへの適応が可能 - 軽量 prompt generator による明示的条件監視 - 想定される議論点は要旨からは不明 - CLIP の fine-tuning 規模や汎化性 - しきい値設定の人手依存性 - scale readout 以外の条件への拡張性 - 失敗事例や限界の記述は要旨に無い

6. 次に読むべき論文は?

- π0 (flow-based VLA policy) の原論文 - CLIP および fine-tuned CLIP を用いた prompt generation 関連研究 - VLA 全般の代表的手法 (例: RT-2 などの vision-language-action models) - dual-arm manipulation に関する研究 - 数値条件やしきい値に基づくロボットタスク制約の研究 - 要旨で明示的に参照された比較対象は raw-π0 と fine-tuned π0 のみ

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zijian An, Ran Yang, Yiming Feng, Lifeng Zhou

分類: cs.RO

原文アブストラクト

Vision-language-action (VLA) models have recently emerged as a promising paradigm for robotic control, enabling end-to-end policies that ground natural language instructions into visuomotor actions. However, current VLAs often struggle to satisfy precise task constraints, such as stopping based on numeric thresholds, since their observation-to-action mappings are implicitly shaped by training data and lack explicit mechanisms for condition monitoring. In this work, we propose CLAW (CLIP-Language-Action for Weight), a framework that decouples condition evaluation from action generation. CLAW leverages a fine-tuned CLIP model as a lightweight prompt generator, which continuously monitors the digital readout of a scale and produces discrete directives based on task-specific weight thresholds. These prompts are then consumed by $\pi_0$, a flow-based VLA policy, which integrates the prompts with multi-view camera observations to produce continuous robot actions. This design enables CLAW to combine symbolic weight reasoning with high-frequency visuomotor control. We validate CLAW on three experimental setups: single-object grasping and mixed-object tasks requiring dual-arm manipulation. Across all conditions, CLAW reliably executes weight-aware behaviors and outperforms both raw-$\pi_0$ and fine-tuned $\pi_0$ models. A video of our paper is available online https://youtu.be/MuMYj2QgReI.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI