日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2606.31941

LeCropFollow: 不規則な農地におけるナビゲーションのための潜在空間プランニング

LeCropFollow: Latent Space Planning for Navigation in Unstructured Crop Fields

シェア:XThreadsFacebookLINEはてブBluesky

作物の不規則な植え付けや途切れなどの非構造環境での農業ロボットのナビゲーションを、幾何学的モデルを使わずに学習された潜在表現とモデルベース強化学習を用いて行うフレームワークを提案した。シミュレーションから実世界へのゼロショット転移を実現し、既存手法よりセマンティックな失敗を大幅に削減した。

詳しい要約

1. どんなもの?

- 農業ロボットのための視覚ナビゲーション手法 - 名称: LeCropFollow - 対象: under-canopy agricultural robots - 課題: unstructured navigational features(不規則な植栽や不連続) - 特徴: 明示的な幾何モデリングを回避し、学習されたlatent representationを利用 - 構成: self-supervised semantic heatmap extractor + TD-MPC2 (MBRL planner) - 目的: 潜在空間内で直接軌道を最適化

2. 先行研究と比べてどこがすごい?

- 既存のgeometric approachesとの比較 - 従来手法は高次元視覚データを決定論的空間参照に圧縮し、不確実性や意味的文脈を捨てる - LeCropFollowは非圧縮のheatmap信号を扱い、意味的文脈を保持 - 利点: 簡易シミュレーションから実世界へのzero-shot transferが可能(fine-tuning不要) - 実地試験: 不規則列ではSOTAベースラインと同等、plantation gapsではkeypoint-based手法より2.4倍のsemantic failures削減

3. 技術・手法の肝は?

- 技術の肝 - self-supervised semantic heatmap extractor: 意味的ヒートマップを自己教師ありで抽出 - TD-MPC2: Model-Based Reinforcement Learning (MBRL) planner - 統合: ヒートマップ信号を非圧縮のまま潜在空間にエンコードし、そのmanifold上で軌道最適化 - 幾何モデリングをバイパスし、learned latent representationを直接利用 - 不確実性と意味的文脈を保持

4. どうやって有効だと検証した?

- 検証方法 - 簡易シミュレーションから物理世界へのzero-shot transferを実証 - 後期段階のトウモロコシ畑での広範なfield experiments - 不規則列ではSOTAベースラインと同等の性能 - plantation gapsではkeypoint-based手法と比較しsemantic failuresを2.4倍削減 - コード・モデル・データ公開: https://felipe-tommaselli.github.io/lecropfollow

5. 議論はある?

- 議論点 - latent planningが異種農業環境における幾何推定の堅牢な代替となり得ることを示唆 - 既存のgeometric approachesが不確実性と意味的文脈を捨てる問題を指摘 - 限界や失敗ケース、計算コスト、一般化可能性については要旨からは不明 - 実世界でのzero-shot transferの条件や範囲は要旨からは不明

6. 次に読むべき論文は?

- 次に読むべき論文 - TD-MPC2 (Model-Based Reinforcement Learning planner) - keypoint-based methods(比較対象として言及) - self-supervised semantic heatmap extractionに関する研究 - under-canopy agricultural robot navigationの既存研究 - その他、要旨で参照されている具体的な論文名は不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Felipe Tommaselli, Francisco Affonso, Arthur Pompeu, Gianluca Capezzuto, Arun Narenthiran Sivakumar, Girish Chowdhary, Marcelo Becker

分類: cs.RO, cs.AI

原文アブストラクト

Unstructured navigational features, such as irregular planting or discontinuities, remain the primary failure mode for under-canopy agricultural robots. Existing geometric approaches often fail in these scenarios because they compress high-dimensional visual data into deterministic spatial references, effectively discarding the uncertainty and semantic context required to navigate ambiguous terrain. To address this, we present LeCropFollow, a visual navigation framework that bypasses explicit geometric modeling in favor of a learned latent representation. By integrating a self-supervised semantic heatmap extractor with TD-MPC2, a Model-Based Reinforcement Learning (MBRL) planner, our system optimizes trajectories directly within a latent manifold. The framework operates over the uncompressed heatmap signal, preserving the semantic context that geometric reductions discard. We demonstrate that this representational shift enables zero-shot transfer from simplified simulation to the physical world without fine-tuning. Extensive field experiments in late-stage corn fields show that LeCropFollow matches state-of-the-art baselines in unstructured rows but significantly outperforms them in plantation gaps, achieving a 2.4x reduction in semantic failures compared to keypoint-based methods. These results suggest that latent planning offers a robust alternative to geometric estimation for operations in heterogeneous agricultural environments. Code, models, and data available: https://felipe-tommaselli.github.io/lecropfollow .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI