日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2609.34261

RoboICL: GPT-6 Astraによる身体性を備えたインコンテキスト学習

RoboICL: Embodied In-Context Learning with GPT-6 Astra

シェア:XThreadsFacebookLINEはてブBluesky

ロボット制御のためのインコンテキスト学習フレームワークRoboICLを提案し、GPT-6 Astraのゼロショット性能を大幅に向上させた。

詳しい要約

1. どんなもの?

- 汎用 vision-language model による zero-shot ロボット制御を強化する in-context 制御フレームワーク RoboICL を提案。 - robot 固有の parameter 更新や学習済み VLA を必要とせず、GPT-6 Astra をそのまま活用。 - demonstration context と interaction memory を分離し、共通の observation–action–receipt–observation grammar で扱う。 - 30 の RoboDojo タスクで評価し、Overall 50.64 を達成。

2. 先行研究と比べてどこがすごい?

- 公式 zero-shot GPT-6 Astra に対し、全カテゴリで progress-score を 20–27 ポイント改善。 - Memory と Open で leaderboard baseline を上回る。 - Precision では最強 baseline と同等、Long-Horizon でも競争力を維持。 - 30 タスク Overall は 50.64 で、最強 baseline の 33.68 を大きく上回る。 - 別の 10 タスク subset では 60.60 を記録し、π0.5 + GPT-6 Astra hybrid に 2.00 ポイント差まで迫る。

3. 技術・手法の肝は?

- demonstration context と interaction memory を分離。 - 両者を共通の observation–action–receipt–observation grammar で表現。 - sampled demonstration blocks と bounded anchored memory を組み合わせる。 - fixed anchors で過去の rollout 相互作用を in-context learning 用に保持。 - 最新の interaction で即時 error correction を可能にする。 - 任意で Jev-gated action reuse を導入し、GPT-6 Astra 呼び出しを削減。

4. どうやって有効だと検証した?

- 30 の RoboDojo タスクで評価。Open は zero shot、他は one demonstration を使用。 - 公式 zero-shot GPT-6 Astra と比較し、全カテゴリで 20–27 ポイント改善。 - leaderboard baseline と Memory、Open、Precision、Long-Horizon で比較。 - 別の 10 タスク subset で π0.5 + GPT-6 Astra hybrid と比較。 - 3 つの real-robot タスクで mean progress を検証: zero shot 14.45、one shot 63.33、three shots 78.89。 - 2 つの development タスクで Jev-gated action reuse により GPT-6 Astra 呼び出しが 33–48% 削減。

5. 議論はある?

- 要旨からは、限界や失敗事例、計算コスト、汎化性に関する議論は不明。 - Jev-gated action reuse は optional であり、その適用条件や trade-off は要旨からは不明。 - real-robot 結果は 3 タスクのみで、より広い実機検証の必要性は要旨からは不明。

6. 次に読むべき論文は?

- GPT-6 Astra - π0.5 + GPT-6 Astra hybrid - RoboDojo - VLA (vision-language-action model) - in-context learning - zero-shot robot control

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fangcheng Liu, Yeqing Shen, Anda Cheng, Weishi Mi, Chao Tang, Chenyuan Liu, Yushun Xiang, Tingguang Li, Yong-Lu Li, Yehui Tang

分類: cs.RO, cs.LG

原文アブストラクト

General-purpose vision-language models offer a promising way to zero-shot robot control: \gptastra{} excels at open-ended and language- or image-conditioned manipulation but remains substantially weaker on high-precision and long-horizon tasks. We introduce \emph{RoboICL}, an in-context robot-control framework that narrows these gaps without robot-specific parameter updates or a learned VLA. RoboICL separates \emph{demonstration context}, which provides recorded examples when available, from \emph{interaction memory}, which accumulates the model's own actions and observed outcomes. Both use a shared observation--action--receipt--observation grammar. To preserve experience across task stages, RoboICL combines sampled demonstration blocks with bounded anchored memory. Fixed anchors keep earlier rollout interactions available for in-context learning, while the latest interaction supports immediate error correction. Across 30 RoboDojo tasks, using zero shot for Open and one demonstration elsewhere, RoboICL improves on official zero-shot \gptastra{} by 20--27 progress-score points in every category. It leads the leaderboard baselines on Memory and Open, achieves comparable performance to the strongest Precision baseline, and remains competitive on Long-Horizon. Its 30-task Overall score is 50.64, versus 33.68 for the strongest baseline. On a separate ten-task subset, RoboICL scores 60.60, within 2.00 points of the $π_{0.5}$ + \gptastra{} hybrid approach. On three real-robot tasks, mean progress rises from 14.45 at zero shot to 63.33 at one shot and 78.89 at three shots. On two development tasks, optional Jev-gated action reuse reduces \gptastra{} calls by 33--48\%. Code is available at \href{https://github.com/Mosi-AI/RoboICL}{https://github.com/Mosi-AI/RoboICL}.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI