日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2602.01515

RAPT: シミュレーションから実機へのヒューマノイド展開におけるモデル予測型OOD検出と故障診断

RAPT: Model-Predictive Out-of-Distribution Detection and Failure Diagnosis for Sim-to-Real Humanoid Deployment

シェア:XThreadsFacebookLINEはてブBluesky

シミュレーションで学習した制御方策が実機展開時に分布外状態に陥るのを防ぐため、50Hzで動作する自己教師ありの異常検知モニタを提案し、故障の時期と箇所を特定するとともにLLMによるゼロショット故障原因分類を実現した。

詳しい要約

1. どんなもの?

Sim-to-Real転移後のhumanoid制御で、OOD状態や失敗を検知・診断する軽量モニタRAPTを提案。 - 50Hzで動作する自己教師ありdeployment monitor。 - 大規模simulationからnominal実行を学習し、calibratedなper-dimension予測偏差をオンライン生成。 - OOD検知と、いつ・どこでnominalから逸脱したかの局所化を両立。 - 事後診断ではtemporal saliency、joint-kinematic summaries、LLM-based semantic reasoningを組み合わせ、zero-shotで失敗原因を分類。

2. 先行研究と比べてどこがすごい?

既存anomaly detectorは高レート制御、極低false-positive率、解釈可能な失敗フィードバックの要件を満たしにくい。 - RAPTはstrict false-positive制約下でOOD検知を実現。 - simulationの4 Isaac Labタスクで、episode-level FPR 0.5%時に最強baseline比TPR +37%。 - hardwareでは78 trialsでTPR 89%を達成し、high-frequency-compatible baselinesよりfalse positiveが少ない。 - さらに21カテゴリのsemantic failure diagnosisで75%精度を達成。

3. 技術・手法の肝は?

RAPT (Recurrent Anomaly Probabilistic Trajectory Model) は軽量・自己教師ありの50Hz deployment monitor。 - 大規模simulationからnominal実行を学習。 - オンラインでcalibratedなper-dimension predictive-deviation signalsを生成。 - これによりOOD検知と、いつ・どこで実実行がnominalから逸脱したかの局所化を可能にする。 - 事後診断ではtemporal saliency、joint-kinematic summaries、LLM-based semantic reasoningを組み合わせ、zero-shotで失敗原因を分類。

4. どうやって有効だと検証した?

simulationとhardwareで検証。 - simulation: 4 Isaac Labタスクで、episode-level FPR 0.5%時に最強baseline比TPR +37%。 - hardware: 78 trialsでTPR 89%を達成し、high-frequency-compatible baselinesよりfalse positiveが少ない。 - 挑戦的なOOD subsetで、21カテゴリのsemantic failure diagnosis精度75%を達成。

5. 議論はある?

要旨からは不明。 - 限界や失敗事例、計算コスト、LLM推論のばらつき、実機での安全性保証などについての議論は要旨に記載なし。

6. 次に読むべき論文は?

要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、Sim-to-Real transfer、OOD detection、anomaly detection、model-predictive control、Isaac Lab、LLM-based reasoningに関する論文を読むとよい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Humphrey Munn, Brendan Tidd, Peter Bohm, Marcus Gallagher, David Howard

分類: cs.RO, cs.LG

原文アブストラクト

Deploying learned control policies is risky because policies that appear robust in simulation can confidently enter out-of-distribution (OOD) states after Sim-to-Real transfer, causing silent failures and potential hardware damage. Existing anomaly detectors often fail to meet the requirements of high-rate control, extremely low false-positive rates, and interpretable failure feedback. We present \textbf{RAPT} (Recurrent Anomaly Probabilistic Trajectory Model), a lightweight, self-supervised $50$\,Hz deployment monitor that learns nominal execution from large-scale simulation and produces calibrated, per-dimension predictive-deviation signals online. RAPT enables OOD detection under strict false-positive constraints while localizing \emph{when and where} real execution departs from nominal behavior. For post-hoc diagnosis, RAPT combines temporal saliency, joint-kinematic summaries, and LLM-based semantic reasoning to classify likely failure causes in a zero-shot setting. In simulation across four Isaac Lab tasks, RAPT improves TPR by $37\%$ over the strongest baseline at $0.5\%$ episode-level FPR; on hardware, it achieves $89\%$ TPR across $78$ trials with fewer false positives than high-frequency-compatible baselines, and reaches $75\%$ semantic failure diagnosis accuracy across $21$ categories on a challenging OOD subset. Project website, code, and videos: https://humphreymunn.github.io/RAPT/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI