日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.38233

HERON: 移動マニピュレータ向けリアルタイム障害物対応リーチャビリティマップ

HERON: Real-Time Obstacle-Aware Reachability Maps for Mobile Manipulators

シェア:XThreadsFacebookLINEはてブBluesky

深度カメラから障害物を考慮したリーチャビリティマップを2cm解像度で予測する3D U-Netを開発し、Jetson上で8.57Hzのリアルタイム動作を実現した。

詳しい要約

1. どんなもの?

- Mobile manipulator のための、障害物を考慮した reachability map (RM) をリアルタイムに予測する手法 HERON の提案。 - 実環境の depth camera 入力から、腕周囲 2.56 m 立方の RM を 2 cm 解像度で推定する。 - 3D U-Net をベースとし、Jetson AGX Orin 上で TensorRT と INT8 quantization を用いて動作する。

2. 先行研究と比べてどこがすごい?

- 既存の RM 手法は低速、粗い解像度(典型的には 5 cm)、または実障害物を無視するという問題があった。 - HERON は 2 cm 解像度で障害物を考慮した RM を予測し、平均 115 ms(8.57 Hz)で動作する。 - 同一マップを cuRobo で計算すると約 90 分かかるのに対し、大幅な高速化を実現している。

3. 技術・手法の肝は?

- GPU 加速された cuRobo の inverse kinematics で計算した RM を教師データとして 3D U-Net を学習する。 - まず synthetic scenes で学習し、その後 real depth data で学習する段階的アプローチを取る。 - Jetson AGX Orin 上で TensorRT と INT8 quantization を適用して組み込み展開する。

4. どうやって有効だと検証した?

- cuRobo による ground truth と比較して評価している。 - FP32 モデルでは 95% の voxel が 51 クラス中 1 クラス以内、INT8 モデルでは 3 クラス以内に収まる。 - Pearson correlation 0.99、quadratic weighted kappa 0.9 以上を達成している。

5. 議論はある?

- 精度は主に workspace の境界付近で低下する。 - システムレート 8.57 Hz は obstacle map の更新レート 10 Hz に近いが、完全には追従していない。 - その他の議論や限界については要旨からは不明。

6. 次に読むべき論文は?

- cuRobo (GPU 加速 inverse kinematics による RM 計算の ground truth 生成元) - 3D U-Net ベースの volumetric prediction 関連研究 - TensorRT / INT8 quantization を用いた組み込み向けモデル展開の研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: G. Dupoiron, F. Michaud, J. P. Roberge

分類: cs.RO

原文アブストラクト

Mobile manipulator robots rarely reposition their base during manipulation, because doing so requires real-time knowledge of how well the arm can reach its surroundings among obstacles. Reachability maps (RMs) encode this knowledge, but existing methods are slow, coarse (typically 5 cm), or ignore real obstacles. This article asks whether a neural network can predict an obstacle-aware RM at 2 cm resolution from a live depth camera, on embedded hardware, fast enough for online use. We present HERON, a 3D U-Net trained on RMs computed with the GPU-accelerated inverse kinematics of cuRobo, first on synthetic scenes and then on real depth data, and deployed on a Jetson AGX Orin with TensorRT and INT8 quantization. HERON predicts the RM of a 2.56 m cube around the arm in 115 ms on average, for a measured system rate of 8.57 Hz, close to the 10 Hz update rate of the obstacle map, whereas computing the same map with cuRobo takes about 90 min. Against the cuRobo ground truth, 95% of the voxels lie within 1 class out of 51 with the FP32 model and within 3 classes with the INT8 model, with a Pearson correlation of 0.99 and a quadratic weighted kappa above 0.9. Accuracy degrades mainly at the workspace boundaries.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI