日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

探索arXiv:2507.01125

VISTA: オンライン意味的ガウススプラッティングを用いたオープン語彙・タスク関連ロボット探索

VISTA: Open-Vocabulary, Task-Relevant Robot Exploration with Online Semantic Gaussian Splatting

シェア:XThreadsFacebookLINEはてブBluesky

オープン語彙の指示に基づき、タスクに関連する領域の3Dマップ品質を高める軌道を計画する能動探索手法を提案し、ドローンと四足歩行ロボットで有効性を示した。

詳しい要約

1. どんなもの?

- ロボットが open-vocabulary な探索指示(例: "find a person")に基づき、タスク完了に重要な領域の 3D 地図品質を高める情報的な軌道を計画する active exploration 手法 VISTA を提案 - 探索と同時に real-time な semantic 3D Gaussian Splatting 再構成を構築 - receding-horizon の軌道計画で、クエリへの意味的類似度と未観測領域の探索を優先 - quadrotor と Spot quadruped の両方に展開し platform-agnostic であることを示す

2. 先行研究と比べてどこがすごい?

- 静的データセット上で、提案する viewpoint-semantic coverage metric が SOTA ベースラインの FisherRF と Bayes' Rays を計算速度と再構成品質の両面で上回る - quadrotor ハードウェア実験で、困難な地図においてベースライン比 6x 高い成功率を達成 - 困難度の低い地図ではベースラインと同等の性能 - open-vocabulary 指示と semantic 3D Gaussian Splatting を組み合わせたタスク関連探索を実現

3. 技術・手法の肝は?

- open-vocabulary な検索指示を受け、意味的類似度と未観測領域探索を考慮した receding-horizon 軌道を計画 - 軌道評価のため、3D シーンにおける幾何的な視点多様性とタスク関連性の両方を定量化する新規で効率的な viewpoint-semantic coverage metric を導入 - 探索中に real-time な semantic 3D Gaussian Splatting 再構成を逐次構築 - 詳細なアルゴリズム構成は要旨からは不明

4. どうやって有効だと検証した?

- 静的データセット上で coverage metric を FisherRF や Bayes' Rays と比較し、計算速度と再構成品質を評価 - quadrotor ハードウェア実験で困難な地図・困難度の低い地図における成功率をベースラインと比較 - quadrotor drone と Spot quadruped の両プラットフォームに展開し platform-agnostic 性を実証

5. 議論はある?

- 困難な地図で 6x の成功率向上、困難度の低い地図ではベースライン同等という結果の限界や適用条件の議論は要旨からは不明 - coverage metric の計算速度・再構成品質の優位性に関する詳細な議論は要旨からは不明 - open-source code は採択後に公開予定と記載

6. 次に読むべき論文は?

- FisherRF - Bayes' Rays - semantic 3D Gaussian Splatting 関連手法 - active exploration / next-best-view planning の定番手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Keiko Nagami, Timothy Chen, Javier Yu, Ola Shorinwa, Maximilian Adang, Carlyn Dougherty, Eric Cristofalo, Mac Schwager

分類: cs.RO

原文アブストラクト

We present VISTA (Viewpoint-based Image selection with Semantic Task Awareness), an active exploration method for robots to plan informative trajectories that improve 3D map quality in areas most relevant for task completion. Given an open-vocabulary search instruction (e.g., "find a person"), VISTA enables a robot to explore its environment to search for the object of interest, while simultaneously building a real-time semantic 3D Gaussian Splatting reconstruction of the scene. The robot navigates its environment by planning receding-horizon trajectories that prioritize semantic similarity to the query and exploration of unseen regions of the environment. To evaluate trajectories, VISTA introduces a novel, efficient viewpoint-semantic coverage metric that quantifies both the geometric view diversity and task relevance in the 3D scene. On static datasets, our coverage metric outperforms state-of-the-art baselines, FisherRF and Bayes' Rays, in computation speed and reconstruction quality. In quadrotor hardware experiments, VISTA achieves 6x higher success rates in challenging maps, compared to baseline methods, while matching baseline performance in less challenging maps. Lastly, we show that VISTA is platform-agnostic by deploying it on a quadrotor drone and a Spot quadruped robot. Open-source code will be released upon acceptance of the paper.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI