日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/タスク計画arXiv:2604.10929

Ro-SLM: ロボットのタスク計画と動作コード生成のためのオンボード小型言語モデル

Ro-SLM: Onboard Small Language Models for Robot Task Planning and Operation Code Generation

シェア:XThreadsFacebookLINEはてブBluesky

クラウドや高性能計算機に依存せず、UAVなどの小型ロボットに搭載可能な小型言語モデル(SLM)を、LLMの知識蒸留と報酬関数によるファインチューニングで実用レベルに引き上げるフレームワークRo-SLMを提案した。

詳しい要約

1. どんなもの?

- オンボードで動作する小型言語モデル(SLM)を用いたロボットのタスク計画と操作コード生成のフレームワーク「Ro-SLM」を提案。 - クラウドベースのLLMに依存せず、計算資源が限られたUAVや小型地上車両での展開を可能にする。 - LLMの知識と推論を蒸留し、SLMがロボット操作を支援できるようにする。

2. 先行研究と比べてどこがすごい?

- 従来のLLM搭載ロボットはクラウドモデルや高性能計算基盤に依存し、不安定なインターネット環境や計算資源制約下での展開が困難だった。 - Ro-SLMはオンボードSLMを微調整することで、クラウドに依存せずにロボットタスク計画とコード生成を実現する点が優れている。 - 実験では、SLMがロボットタスク計画とコード生成を全くサポートできない状態から、LLMに迫る性能を達成した。

3. 技術・手法の肝は?

- データセット合成:LLMを活用して多様なタスク指示を生成し、最小限の人手で正解コードを作成し、実世界の応用シナリオに拡張する。 - 微調整:合成データセットでSLMを微調整し、その際にLLMを報酬関数として訓練を導く。 - これにより、SLMがロボット操作のためのタスク計画とコード生成を行えるようになる。

4. どうやって有効だと検証した?

- UAV操作タスクに関する広範な実験を実施。 - Ro-SLMがSLMの性能を、ロボットタスク計画とコード生成をサポートできない状態から、LLMに迫る性能まで向上させることを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。関連手法として、LLMを報酬関数として用いる強化学習(RLHF)、知識蒸留、オンボードSLMのロボティクス応用が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenhao Wang, Yanyan Li, Long Jiao, Jiawei Yuan

分類: cs.RO

原文アブストラクト

Recent advances in large language models (LLMs) provide robots with contextual reasoning abilities to comprehend human instructions. Yet, current LLM-enabled robots typically depend on cloud-based models or high-performance computing infrastructure, which limit their deployment on robots under unreliable internet environments or with constrained computational resources, such as UAVs and small ground vehicles. Thus, deploying fine-tuned small language models (SLMs) that support onboard deployment offers a promising alternative. This paper introduces Ro-SLM, a framework that enables reliable SLM-driven robot operation by distilling LLMs' knowledge and reasoning. Ro-SLM starts from dataset synthesis by leveraging LLMs to generate diverse task instructions, produce corresponding ground truth code with minimal human assistance, and augment instructions into real-world application scenarios. Ro-SLM is then fine-tuned with the dataset, in which LLM serves as a reward function to guide the training. Extensive experiments on UAV operation tasks demonstrate that Ro-SLM improves the performance of SLM from being incapable of supporting robotic task planning and code generation to achieving performance that approaches LLM.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI