日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2609.07470

ロボットポリシーにおける言語転移の測定:Cosmos3視覚言語行動ポリシーへのギリシャ語追加

Measuring Language Transfer in Robot Policies: Adding Greek to a Cosmos3 Vision-Language-Action Policy

シェア:XThreadsFacebookLINEはてブBluesky

英語中心のロボット基盤モデルにギリシャ語を追加する際、翻訳ではなく測定方法が重要であることを示し、誤った結論を導く指標を特定し、バイリンガル訓練が一貫した性能向上をもたらすことを明らかにした。

詳しい要約

1. どんなもの?

本研究は、ロボット基盤モデル(vision-language-action policy)に低リソース言語であるギリシャ語を追加する際の課題を調査したものである。機械翻訳された指示文のみを用い、アーキテクチャ変更なしで、オープンなCosmos3 VLAスタックにギリシャ語を追加する。主な焦点は翻訳ではなく、言語転移の測定方法にある。

2. 先行研究と比べてどこがすごい?

従来の研究は英語中心で、多言語対応は翻訳やデータ収集に焦点を当てることが多い。本研究は、測定方法の妥当性に注目し、複数の評価指標が誤った結論を導くことを示した点が新しい。特に、単一ゴールのベンチマークや色ヒストグラム指標が誤解を招くことを実証し、低リソース言語の評価には厳密なベースラインとシード反復が必要であると主張している。

3. 技術・手法の肝は?

手法の肝は、評価指標の信頼性を検証するための「guaranteed null」の構築と、シードを変えた反復実験である。具体的には、誤った指示文を対照群として用い、正しい指示文との差を測定する。また、トレーニング損失や単一実行の比較が信頼できないことを示し、90タスクの判別スイートと3シードの平均を用いて統計的に有意な差を検出する。さらに、翻訳者の言い回しへの過適合を軽減するため、タスクごとに7つの言い回しでトレーニングする手法を試みている。

4. どうやって有効だと検証した?

有効性の検証は、90タスクの判別スイートを用いて、3シードの平均で比較した。その結果、多言語テキストタワーはギリシャ語のデモなしでは誤った指示のフロアに留まり、ギリシャ語のみのトレーニングは対照群に対して最大2.7ポイントの差しか得られなかった。一方、バイリンガルトレーニングは一貫して6.7〜7.1ポイントのマージンを示し、英語性能の約5分の2に達した。また、7つの言い回しでトレーニングすると過適合ペナルティが約半分に減少した。

5. 議論はある?

議論として、低リソース言語のロボットポリシー局所化には、指標を信頼する前に「guaranteed null」を構築し、シードをまたいで結果を再現することが実用的要件であると述べている。また、言語適応済みワールドモデルからのウォームスタートやテキストタワーの凍結解除が性能を低下させるという発見は、既存の転移学習手法に疑問を投げかける。さらに、翻訳者の言い回しへの過適合は、データ多様性の重要性を示唆している。

6. 次に読むべき論文は?

要旨で参照されている研究は明示されていないが、関連する分野として、vision-language-action models、multilingual robot policy learning、low-resource language transferの研究が挙げられる。具体的には、Open X-EmbodimentやRT-2などのロボット基盤モデル、および多言語モデルの転移学習に関する論文が次に読むべき候補である。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ayoub Kirouane, Georgios Giaples, Christos Petrocheilos

分類: cs.RO, cs.AI

原文アブストラクト

Robot foundation models are trained and evaluated predominantly in English, and robot demonstration corpora do not exist for most languages. We study the addition of Greek to an open vision-language-action stack using only machine-rephrased instructions and no architecture changes. The main challenge is measurement rather than translation. Several plausible instruments produce false conclusions: a color-histogram metric rewards noise, a single-goal benchmark scores 84.6% under correct Greek and 82.6% under deliberately wrong instructions, training loss fails to predict Greek success, and single-run comparisons are dominated by seed variation. On a discriminative ninety-task suite with three seeds per arm, a multilingual text tower without Greek demonstrations remains at its wrong-instruction floor, while Greek-only training exceeds its control by at most 2.7 points. Bilingual training yields a consistent 6.7-7.1 point margin over its control and reaches about two fifths of English performance. The policy also overfits the translator's phrasing; training on seven phrasings per task approximately halves this penalty. Warm-starting from a language-adapted world model and unfreezing the text tower both degrade performance. The results support two practical requirements for low-resource robot-policy localization: build a guaranteed null before trusting a metric, and replicate low-resource-language results across seeds.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI