日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

シミュレータ検証arXiv:2608.06088

IcFuzz: セマンティックステージガイドと多レベル変異によるIsaac Simのファジング

IcFuzz: Fuzzing Isaac Sim with Semantic Stage Guidance and Multi-level Mutation

シェア:XThreadsFacebookLINEはてブBluesky

Isaac Simのソフトウェアバグを発見するための初のファジング手法を提案。LLMによるセマンティックステージ分割と多レベル変異、多腕バンディットによる適応スケジューリングでコードカバレッジとクラッシュ検出を大幅に向上させた。

詳しい要約

1. どんなもの?

IcFuzzは、NVIDIA Isaac Simを対象とした初のファジング手法である。Isaac SimはGPU加速物理エンジンとフォトリアルなレンダリングを備えたロボティクスシミュレータであり、複雑な環境の高忠実度モデリングを可能にするが、その複雑さゆえにソフトウェアバグが存在し、シミュレーションの信頼性を損なう可能性がある。IcFuzzは、LLMベースのセマンティックステージ分割、マルチレベル変異演算子、マルチアームドバンディットアルゴリズムを用いて、Isaac Simの広大なシミュレーション状態空間を効率的に探索し、バグを検出する。

2. 先行研究と比べてどこがすごい?

既存のファジング手法は、Isaac Simのテストにおいて、文脈を考慮したオブジェクトセマンティクス、階層的なシミュレーション制御、広大な状態空間という課題に直面しており、効果的なテストが困難である。IcFuzzは、これらの課題に初めて対処する点で優れている。具体的には、LLMによるセマンティックステージ分割で文脈を考慮したオブジェクトセマンティクスを捉え、マルチレベル変異演算子で階層的な粒度を体系的に実行し、マルチアームドバンディットで状態空間を効率的に探索する。

3. 技術・手法の肝は?

手法の核は3つ。(1) LLMベースのセマンティックステージ分割: シミュレーションプログラムを構造化されたステージに分解し、文脈を考慮したオブジェクトセマンティクスを取得する。(2) マルチレベル変異演算子: 階層的な粒度でシミュレータを体系的に実行するための変異演算子群。(3) マルチアームドバンディットアルゴリズム: 変異演算子を適応的にスケジューリングし、広大なシミュレーション状態空間を効率的に探索する。

4. どうやって有効だと検証した?

実験では、ベースラインと比較してコードカバレッジとバグ検出の両方で優位性を示した。具体的には、IcFuzzはベースラインの約190%~205%のコードカバレッジを達成し、12時間のテストを3ラウンド行ったところ、平均3.7件のユニークなクラッシュを検出したが、ベースラインではクラッシュは検出されなかった。さらに、約4ヶ月の間に11件のバグを発見し、そのうち9件は開発者によって確認または修正された。

5. 議論はある?

要旨からは、IcFuzzの限界や潜在的な問題についての議論は不明である。ただし、Isaac Simのような複雑なシミュレータに対するファジングの有効性を示す一方で、LLMベースのセマンティック分割の精度や、マルチアームドバンディットの探索効率など、さらなる検証が必要な点が考えられる。

6. 次に読むべき論文は?

要旨で参照されている研究は明示されていないが、関連する分野として、ロボティクスシミュレータのファジング、LLMを用いたプログラム解析、マルチアームドバンディットによる適応的ファジングなどが挙げられる。次に読むべき論文としては、Isaac Simの公式ドキュメントや、他のシミュレータ(例: Gazebo, MuJoCo)に対するファジング手法、あるいはLLMを利用したテスト生成手法などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhixiang Chen, Zhuangbin Chen, Ruoxi Jia, Zeqin Liao, Wei Li, Jinyang Liu, Zibin Zheng

分類: cs.RO, cs.SE

原文アブストラクト

Robotics simulators serve as a foundational infrastructure for embodied AI, facilitating safe and scalable robotic system development. NVIDIA Isaac Sim has emerged as one of the most popular simulators, distinguished by its GPU-accelerated physics engine and photorealistic rendering, which enable high-fidelity modeling of complex environments. However, its inherent complexity inevitably introduces software bugs that can compromise simulation reliability. Existing fuzzing approaches struggle to test Isaac Sim effectively due to challenges of context-aware object semantics, hierarchical simulation control, and a vast simulation state space. In this paper, we propose IcFuzz, the first fuzzing approach for Isaac Sim. IcFuzz first performs an LLM-based semantic stage segmentation, decomposing simulation programs into structured stages that capture context-aware object semantics. Guided by this information, IcFuzz designs multi-level mutation operators to systematically exercise the simulator across hierarchical granularities. To efficiently navigate the vast simulation state space, IcFuzz employs a multi-armed bandit algorithm to adaptively schedule mutation operators. Experimental results show that IcFuzz outperforms the baselines in terms of both code coverage and bug detection. Specifically, IcFuzz achieves approximately 190\%--205\% of the code coverage of the baselines and detects an average of 3.7 unique crashes over three rounds of 12-hour tests, while no crashes are detected by the baselines. Moreover, IcFuzz has uncovered 11 bugs over approximately four months, 9 of which have been confirmed or fixed by the developers.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI