日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自律探索arXiv:2506.00138

自律エージェントのための内発的目標:仮想ゼブラフィッシュにおけるモデルベース探索が行動生態学と全脳ダイナミクスを予測する

Intrinsic Goals for Autonomous Agents: Model-Based Exploration in Virtual Zebrafish Predicts Ethological Behavior and Whole-Brain Dynamics

シェア:XThreadsFacebookLINEはてブBluesky

動物の自律的探索を模倣したモデルベース内発的動機(3M-Progress)を提案し、仮想ゼブラフィッシュの行動と全脳神経活動を自己教師あり学習のみで予測できることを示した。

詳しい要約

1. どんなもの?

- 動物の自律的探索を模した model-based intrinsic motivation の新手法 3M-Progress を提案する研究。 - 外部報酬やタスク構造なしに、online world model と ecological niche から学習した fixed prior の乖離を追跡して探索を駆動する。 - 自己教師ありの intrinsic goal 最適化のみで、自律行動する larval zebrafish の行動パターンと whole-brain neural-glial dynamics の explainable variance を予測する初の autonomous embodied agent を提示。 - 目的駆動・population-level の neural-glial computation モデルとして位置づける。

2. 先行研究と比べてどこがすごい?

- 既存の reward-free 環境における exploration 手法、特に model-based intrinsic motivation のクラスは探索パターンが不安定で exploratory policy に収束せず、動物の頑健な自律行動を捉えられなかった。 - 神経科学側も外部報酬に動機づけられた実験パラダイムに偏り、autonomy の神経基盤や ethological・naturalistic・task-independent な行動をほとんど扱ってこなかった。 - 本研究は動物の自律探索の原理に基づく model-based intrinsic drive を設計し、行動・神経訓練データなしで brain data を予測する点で両者のギャップを橋渡しする。

3. 技術・手法の肝は?

- 中核は 3M-Progress と呼ぶ model-based intrinsic drive。 - online world model と、ecological niche から学習した fixed prior との間の divergence を追跡し、これを intrinsic goal として探索を駆動する。 - 外部報酬やタスク構造に依存せず、自己教師あり最適化のみで学習する autonomous embodied agent を構成する。 - 詳細なネットワーク構成や divergence の具体的定義は要旨からは不明。

4. どうやって有効だと検証した?

- 自律行動する larval zebrafish から記録された behavioral patterns と whole-brain neural-glial dynamics に対し、3M-Progress agent が explainable variance を捉えるかを評価。 - 行動・神経の訓練データを一切使わず、intrinsic goal の自己教師あり最適化のみで brain data を予測できることを示した。 - これにより goal-driven・population-level の neural-glial computation モデルとしての妥当性を検証したと主張。 - 定量的評価指標や比較対象の詳細は要旨からは不明。

5. 議論はある?

- model-based intrinsic motivation と naturalistic behavior を結ぶ計算フレームワークを提示し、animal-like autonomy を持つ人工 agent 構築の基盤になると主張。 - 動物の自律探索を説明する規範的原理として prior との divergence を用いる点の一般性や限界は要旨からは不明。 - zebrafish 以外の種・課題への外挿性、neural-glial dynamics の説明範囲、モデル仮定の妥当性については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている個別研究名は明示されていない。 - 関連手法として model-based intrinsic motivation、reward-free exploration、world model を用いた exploration の代表的文献を辿るのが妥当。 - 実験対象として larval zebrafish の whole-brain neural-glial dynamics 計測研究、および autonomy の神経基盤を扱う systems neuroscience 研究を参照。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Reece Keller, Alyn Kirsch, Felix Pei, Xaq Pitkow, Leo Kozachkov, Aran Nayebi

分類: q-bio.NC, cs.AI, cs.LG, cs.RO

原文アブストラクト

Autonomy is a hallmark of animal intelligence, enabling adaptive and intelligent behavior in complex environments without relying on external reward or task structure. Existing reinforcement learning approaches to exploration in reward-free environments, including a class of methods known as model-based intrinsic motivation, exhibit inconsistent exploration patterns and do not converge to an exploratory policy, thus failing to capture robust autonomous behaviors observed in animals. Moreover, systems neuroscience has largely overlooked the neural basis of autonomy, focusing instead on experimental paradigms where animals are motivated by external reward rather than engaging in ethological, naturalistic and task-independent behavior. To bridge these gaps, we introduce a novel model-based intrinsic drive explicitly designed after the principles of autonomous exploration in animals. Our method (3M-Progress) achieves animal-like exploration by tracking divergence between an online world model and a fixed prior learned from an ecological niche. To the best of our knowledge, we introduce the first autonomous embodied agent that predicts brain data entirely from self-supervised optimization of an intrinsic goal -- without any behavioral or neural training data -- demonstrating that 3M-Progress agents capture the explainable variance in behavioral patterns and whole-brain neural-glial dynamics recorded from autonomously behaving larval zebrafish, thereby providing the first goal-driven, population-level model of neural-glial computation. Our findings establish a computational framework connecting model-based intrinsic motivation to naturalistic behavior, providing a foundation for building artificial agents with animal-like autonomy.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI