日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2404.02567

TinyML搭載ナノドローンにおけるマルチセンサ入力と状態情報の融合

Fusing Multi-sensor Input with State Information on TinyML Brains for Autonomous Nano-drones

シェア:XThreadsFacebookLINEはてブBluesky

直径約10cmのナノドローン上で、低解像度画像と8x8深度マップ、機体状態を融合する深層学習パイプラインを構築し、人間姿勢推定の精度を向上させた。

著者: Luca Crupi, Elia Cereda, Daniele Palossi

分類: cs.RO

原文アブストラクト

Autonomous nano-drones (~10 cm in diameter), thanks to their ultra-low power TinyML-based brains, are capable of coping with real-world environments. However, due to their simplified sensors and compute units, they are still far from the sense-and-act capabilities shown in their bigger counterparts. This system paper presents a novel deep learning-based pipeline that fuses multi-sensorial input (i.e., low-resolution images and 8x8 depth map) with the robot's state information to tackle a human pose estimation task. Thanks to our design, the proposed system -- trained in simulation and tested on a real-world dataset -- improves a state-unaware State-of-the-Art baseline by increasing the R^2 regression metric up to 0.10 on the distance's prediction.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI