日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

群制御arXiv:2609.23269

潜在テレパシー:自己教師あり知覚潜在表現によるマルチロボット通信

Latent Telepathy: Multi-Robot Communication with Self-Supervised Perceptual Latents

シェア:XThreadsFacebookLINEはてブBluesky

各ロボットが自己知覚用に計算済みの自己教師あり学習済み潜在ベクトルをそのままブロードキャストし、受け手はタスク報酬のみからその意味を学習して行動する通信手法を提案。追加計算なしで遮蔽物回避を99.7%で達成。

詳しい要約

1. どんなもの?

分散型 multi-robot team の partial observability 下で、teammate にしか見えない情報を伝える communication 手法 Latent Telepathy を提案。各 robot が自身の perception 用に既に計算している perceptual latent vector を broadcast する。encoder は self-supervised joint-embedding predictive objective で訓練され、frozen で team 間共有。teammate は task reward のみからその latent を行動に使うよう学習する。

2. 先行研究と比べてどこがすごい?

既存の decentralized 手法は position や planned trajectory など kinematic 情報を通信し、teammate の知覚内容を伝えられない。MARL の learned communication は perceptual 内容を運べるが task-coupled で opaque。Latent Telepathy は既存 encoder の出力をそのまま使うため追加計算ゼロ・単一 compact vector の帯域で、frozen encoder により全 robot で意味が一貫し、受信側に意味を教えなくても機能する。

3. 技術・手法の肝は?

各 robot が perception 用に計算済みの perceptual latent vector を broadcast。encoder は self-supervised joint-embedding predictive objective で訓練し、policy 学習前に freeze して team で共有。受信 robot は task reward のみで latent を行動に使うよう学習。bandwidth・latency・topology・receiver を固定し message content のみ変える content-controlled protocol で評価。

4. どうやって有効だと検証した?

content-controlled protocol で検証。latent の broadcast により navigator が occluded hazard を 99.7% の episode で回避し、noiseless hand-designed message と同等。position と trajectory message は chance レベル、186 倍広い raw camera image より compressed latent が信頼できる。discrete gridworld から rendered pixels の continuous velocity control まで成立し、physical robot の camera から hazard を 102/102 の live decision で decode。

5. 議論はある?

MARL communication の結果を continuous control へ移植する要件として、message が知らせる decision が exploration で到達可能であり続ける必要があると特定し、それを回復する方法を示す。encoder は frozen で全 robot に同じ意味を持つが、受信 robot はその意味を教えられない。bandwidth・latency・topology・receiver を固定した比較で message content の効果を分離。

6. 次に読むべき論文は?

要旨で参照/比較されているのは kinematic 情報を通信する既存 decentralized 手法、learned communication を用いる MARL、self-supervised joint-embedding predictive objective、noiseless hand-designed message、position/trajectory message、raw camera image。関連手法として MARL communication や joint-embedding predictive architecture の文献を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Howard Wang, Han Zheng, Cathy Wu

分類: cs.RO, cs.LG, cs.MA

原文アブストラクト

In a decentralized multi-robot team under partial observability, the fact that decides a robot's next action is often visible only to a teammate. Existing decentralized methods communicate kinematic information, such as position or planned trajectory, which cannot convey what the teammate perceives. Learned communication in multi-agent reinforcement learning (MARL) can carry perceptual content, but the resulting messages are task-coupled and opaque. We propose Latent Telepathy. Each robot broadcasts the perceptual latent vector it already computes for its own use, the output of an encoder trained with a self-supervised joint-embedding predictive objective, frozen, and shared across the team. A teammate learns to act on it from task reward alone. Because the encoder already runs for perception, the message costs no additional computation and a single compact vector of bandwidth. Because the encoder is frozen before any policy is trained, the message means the same thing to every robot, and the receiving robot is never told what it means. We evaluate Latent Telepathy with a content-controlled protocol in which bandwidth, latency, topology and receiver are held fixed and only the message content varies. Broadcasting the latent lets a navigator avoid an occluded hazard in 99.7% of episodes, matching a noiseless hand-designed message. Position and trajectory messages remain at chance, and the raw camera image, 186 times wider, is less reliable than the compressed latent. The result holds from a discrete gridworld to rendered pixels under continuous velocity control, and the encoder decodes the hazard from a physical robot's camera in 102 of 102 live decisions. We also identify a requirement for porting MARL communication results to continuous control, that the decision a message informs must remain reachable by exploration, and show how to restore it.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI