日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ポーズ推定arXiv:2509.10405

LED状態分類によるポーズラベル不要の自己教師あり視覚ポーズ推定

Self-supervised Learning Of Visual Pose Estimation Without Pose Labels By Classifying LED States

シェア:XThreadsFacebookLINEはてブBluesky

複数のLEDを搭載したロボットの単眼RGB画像から、ポーズラベルや形状知識なしに自己教師あり学習で相対ポーズを推定する手法を提案。

詳しい要約

1. どんなもの?

- 単眼RGB画像から地上ロボットの相対poseを推定するモデル - 訓練時にposeラベルもロボットの形状・外観の事前知識も不要で、from scratchで学習 - 訓練時のみ複数LEDを装着したロボットを用い、各LEDの状態(点灯/消灯)は独立かつフレームごとに既知 - 各LEDのおおよそのviewing directionと、既知のtarget distanceのcalibration画像を仮定 - 推論時はLED状態が未知・任意でもpose推定性能に影響しない

2. 先行研究と比べてどこがすごい?

- poseラベルやロボットのCAD modelによるsupervisionを必要とするSoA手法と競合する性能 - poseラベルも形状・外観の事前知識も使わずに訓練できる点が新しい - 外部インフラや人手のsupervisionなしで訓練データを収集可能 - 異なるdomainへのgeneralizationとmulti-robot pose estimationにも対応 - 具体的な比較手法名は要旨からは不明

3. 技術・手法の肝は?

- 画像から各LEDの状態を予測するタスクでモデルを訓練 - その過程で画像中のロボット位置・距離・relative bearingを暗黙に学習 - 訓練データは2台のロボットをランダムに動かして収集 - 単眼depth推定の曖昧性に対し、既知のtarget distanceのcalibration画像で対処 - LEDのviewing directionの近似知識を利用

4. どうやって有効だと検証した?

- 定量的実験を実施 - poseラベルやCAD modelを必要とするSoA手法との競合性を確認 - 異なるdomainへのgeneralizationを検証 - multi-robot pose estimationの処理を検証 - 具体的なデータセット名や評価指標は要旨からは不明

5. 議論はある?

- 訓練時にLED状態が既知であること、viewing directionの近似知識、calibration画像という仮定に依存 - 単眼depth推定の曖昧性への対処がcalibration画像に依拠 - 推論時はLED状態が未知でも性能に影響しないと主張 - 限界や失敗事例の詳細は要旨からは不明

6. 次に読むべき論文は?

- poseラベルやCAD modelをsupervisionに用いるSoAのvisual pose estimation手法(具体名は要旨からは不明) - 単眼depth推定およびその曖昧性対処に関する研究 - multi-robot pose estimationに関する研究 - self-supervised learningによるvisual pose estimationの関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Nicholas Carlotti, Mirko Nava, Alessandro Giusti

分類: cs.RO

原文アブストラクト

We introduce a model for monocular RGB relative pose estimation of a ground robot that trains from scratch without pose labels nor prior knowledge about the robot's shape or appearance. At training time, we assume: (i) a robot fitted with multiple LEDs, whose states are independent and known at each frame; (ii) knowledge of the approximate viewing direction of each LED; and (iii) availability of a calibration image with a known target distance, to address the ambiguity of monocular depth estimation. Training data is collected by a pair of robots moving randomly without needing external infrastructure or human supervision. Our model trains on the task of predicting from an image the state of each LED on the robot. In doing so, it learns to predict the position of the robot in the image, its distance, and its relative bearing. At inference time, the state of the LEDs is unknown, can be arbitrary, and does not affect the pose estimation performance. Quantitative experiments indicate that our approach: is competitive with SoA approaches that require supervision from pose labels or a CAD model of the robot; generalizes to different domains; and handles multi-robot pose estimation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI