日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2609.22353

PAANI: 河川ロボットシミュレーションのためのオンデバイス視覚証拠融合と説明可能ガイダンス

PAANI : On Device Visual Evidence Fusion and Explainable Guidance for River Robot Simulation

シェア:XThreadsFacebookLINEはてブBluesky

Arduino UNO Q上でYOLO11n検出器とMobileNetV3-Smallセグメンタを融合し、河川監視ロボット向けに証拠と方針理由を提示する説明可能な知覚・誘導パイプラインを構築した。

詳しい要約

1. どんなもの?

- 河川監視ロボット向けのオンデバイス知覚・誘導アーキテクチャ PAANI を提案。 - 地理的 waypoint では表現できない障害物や水際境界を、視覚予測から解釈する。 - 資源制約下で不完全な視覚予測を、 timely かつ inspectable な guidance に変換する。 - 物体ラベルや操舵命令だけでなく、どの evidence が判断を支持するか、いつ unreliable かを示す。 - project trained YOLO11n detector と custom MobileNetV3 Small semantic segmenter を timestamp aligned evidence fusion で統合。 - Arduino UNO Q 上で動作し、ROS 2 を介して Gazebo vessel・localization・control testbed と接続。

2. 先行研究と比べてどこがすごい?

- 従来の waypoint ベース航行では記述できない障害物・水際境界を視覚で解釈する点が異なる。 - 単なる物体ラベルや操舵命令ではなく、判断を支持する evidence と policy reasons を提示する。 - 資源制約プラットフォーム上で、不完全な視覚予測を timely かつ inspectable な guidance に変換する点が特徴。 - 検出とセグメンテーションを timestamp aligned evidence fusion で統合し、明示的 corridor policy を組み合わせる。 - モデル精度とオンボード実行を、検証済みの水上衝突回避から明確に区別する。

3. 技術・手法の肝は?

- project trained YOLO11n detector と custom MobileNetV3 Small semantic segmenter を組み合わせる。 - timestamp aligned evidence fusion を Arduino UNO Q 上で実行。 - bounded tracking により物体の persistence を供給。 - 明示的 corridor policy が surface labels、accepted detections、urgency、mask uncertainty を統合。 - 各 final advisory は contributing evidence と policy reasons を露出。 - ROS 2 interfaces が local AI pipeline を Gazebo vessel、localization、control testbed に接続。 - 学習は WaterScenes 10,000 枚で 4-class detection、MaSTr1325 1,127 枚で s…

4. どうやって有効だと検証した?

- Detector checkpoint test mAP at 0.5 IoU は 0.7388。 - 別評価の rectangular ONNX export は validation mAP at 0.5 IoU が 0.7367。 - Segmentation ONNX validation mIoU は 0.9750。 - 5 分間の UNO Q recording で、configured 0.5 Hz cadence における pipeline latency の median 467.8 ms、95th percentile 580.3 ms。 - 評価により black input misclassification と sampling rate mismatch を特定。 - sampling rate mismatch は diagnostic apparent motion estimator が十分な evidence を集められない原因。

5. 議論はある?

- 結果は inspectable で reusable な edge robotics foundation を支持。 - モデル精度とオンボード実行を、検証済みの水上衝突回避から明確に区別する。 - black input misclassification が課題として特定。 - sampling rate mismatch により diagnostic apparent motion estimator が十分な evidence を集められない。 - 水上衝突回避の検証は要旨からは不明。

6. 次に読むべき論文は?

- YOLO11n detector - MobileNetV3 Small semantic segmenter - WaterScenes dataset - MaSTr1325 dataset - ROS 2 - Gazebo - Arduino UNO Q - ONNX - 同分野の定番として edge robotics 向け visual perception と collision avoidance の研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Savio Cardoz, Santhiya Rajan

分類: cs.AI

原文アブストラクト

Mobile river monitoring robots must interpret obstacles and water boundaries that geographic waypoints alone cannot describe. On resource constrained platforms, converting imperfect visual predictions into timely and inspectable guidance is a distinct challenge. An object label or steering command does not explain which evidence supports a decision or when that evidence is unreliable. We present PAANI, an on-device perception to guidance architecture that combines a project trained YOLO11n detector and a custom MobileNetV3 Small semantic segmenter with timestamp aligned evidence fusion on Arduino UNO Q. Bounded tracking supplies object persistence, while an explicit corridor policy combines surface labels, accepted detections, urgency and mask uncertainty. Each final advisory exposes its contributing evidence and policy reasons. ROS 2 interfaces connect the local AI pipeline to a separate Gazebo vessel, localization and control testbed. Training uses 10,000 WaterScenes images for four-class detection and 1,127 MaSTr1325 images for segmentation, including 198 segmentation validation images. The selected FP32 ONNX models occupy 14.817 MB. Detector checkpoint test mAP at 0.5 IoU is 0.7388, while the separately evaluated rectangular ONNX export achieves validation mAP at 0.5 IoU of 0.7367. Segmentation ONNX validation mIoU is 0.9750. A five-minute UNO Q recording produced median and 95th percentile pipeline latencies of 467.8 ms and 580.3 ms at a configured 0.5 Hz cadence. The evaluation also identifies black input misclassification and a sampling rate mismatch that prevents the diagnostic apparent motion estimator from collecting sufficient evidence. These results support an inspectable and reusable edge robotics foundation while clearly distinguishing model accuracy and on-board execution from validated on-water collision avoidance.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI