日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2604.23000

最良から学ぶ:模倣学習におけるデータ品質のための滑らかさ駆動メトリクス

Learning from the Best: Smoothness-Driven Metrics for Data Quality in Imitation Learning

シェア:XThreadsFacebookLINEはてブBluesky

軌道の滑らかさに基づいてデモンストレーションをスコアリングする軽量フレームワークRINSEを提案し、データ品質の低い軌道をフィルタリングすることで模倣学習の性能を向上させる。

詳しい要約

1. どんなもの?

本論文は、模倣学習(behavioral cloning, BC)におけるデモンストレーションデータの品質評価フレームワーク RINSE(Ranking and INdexing Smooth Examples)を提案する。RINSE は軌道の滑らかさに基づいてデモをスコアリングし、ポリシーアーキテクチャに依存せず、軌道データのみで動作する。2つの指標、Spectral Arc Length (SAL) と Trajectory-Envelope Distance (TED) を用いる。SAL は周波数領域の規則性を測るスペクトル指標、TED は接触を考慮した空間的幾何偏差を測る指標である。RINSE はフィルタリング、検索、再重み付けの各設定で利用可能である。

2. 先行研究と比べてどこがすごい?

既存のデータキュレーション手法は、ポリシー学習をループ内で行う必要があり高コストであるか、手動アノテーションを要するためスケーラビリティが限られる。RINSE はポリシーアーキテクチャに依存せず、軌道データのみで動作する軽量なフレームワークであり、コストのかかるポリシー学習や手動注釈を必要としない点が優れている。また、運動制御理論に基づき滑らかさを熟練運動の指標として利用する点が新しい。

3. 技術・手法の肝は?

RINSE は運動制御理論に基づき、滑らかさを熟練運動の特徴と位置づける。2つの相補的指標を用いる。Spectral Arc Length (SAL) は周波数領域の規則性を測るスペクトル指標であり、Trajectory-Envelope Distance (TED) は接触を考慮した空間的幾何偏差を測る指標で、位相境界/接触信号を追加で利用する。滑らかさフィルタリングにより、保持データ分布の条件付き行動分散を低減できることを示す。この効果は action chunking や compounding error によって増幅され得る。

4. どうやって有効だと検証した?

RoboMimic ベンチマークでは、SAL フィルタリングがデータ量 1/6 で成功率を 16% 向上させた。実世界のマニピュレーションでは、TED フィルタリングがデータ量 1/2 で 20% の改善を達成した。LIBERO-10 上の STRAP 内の検索段階フィルタとして、RINSE 再ランキングは平均成功率を 5.6% 向上させた。Re-Mix ドメイン再重み付けにおけるソフト重みとして、RINSE スコアは学習された Re-Mix 割り当てと高い相関(Spearman ρ ≥ 0.89)を示すドメイン割り当てを生成した。

5. 議論はある?

本論文では、滑らかさがフィルタリング、検索、再重み付けの各設定において有用な品質信号であることを支持する結果が得られている。特にノイズの多い、または異種混合のデータ領域で有効であると述べられている。ただし、滑らかさ指標の限界や、他の品質要因との比較、失敗事例などについての議論は要旨からは不明である。

6. 次に読むべき論文は?

要旨で参照/比較されている研究として、STRAP(検索段階フィルタとして利用)、Re-Mix(ドメイン再重み付け手法)、RoboMimic ベンチマーク、LIBERO-10 ベンチマークが挙げられる。また、action chunking や compounding error に関する研究も関連する。同分野の定番としては、behavioral cloning、imitation learning、data curation に関する一般的な手法が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Soham Kulkarni, Raayan Dhar, Yuchen Cui

分類: cs.RO

原文アブストラクト

In behavioral cloning (BC), policy performance is fundamentally limited by demonstration data quality. Real-world datasets contain trajectories of varying quality due to operator skill differences, teleoperation artifacts, and procedural inconsistencies, yet standard BC treats all demonstrations equally. Existing curation methods require costly policy training in the loop or manual annotation, limiting scalability. We propose RINSE (Ranking and INdexing Smooth Examples), a lightweight framework for scoring demonstrations based on trajectory smoothness that is policy-architecture-agnostic and operates on trajectory data alone, with TED additionally using a phase-boundary/contact signal. Grounded in motor control theory, which establishes smoothness as a hallmark of skilled movement, RINSE uses two complementary metrics: Spectral Arc Length (SAL), a spectral measure of frequency-domain regularity, and Trajectory-Envelope Distance (TED), a spatial measure of contact-aware geometric deviation. We show that smoothness filtering can reduce the conditional action variance of the retained data distribution, with downstream effects that can be amplified by action chunking and compounding error. On RoboMimic benchmarks, SAL filtering achieves 16% higher success using one-sixth of the data. On real-world manipulation, TED filtering achieves 20% improvement with half the data. As a retrieval-stage filter within STRAP on LIBERO-10, RINSE re-ranking improves mean success by 5.6%. As soft weights in Re-Mix domain reweighting, RINSE scores produce domain allocations highly correlated with the learned Re-Mix allocations (Spearman $\rho \geq 0.89$). These results support smoothness as a useful quality signal across filtering, retrieval, and reweighting settings, especially in noisy or heterogeneous data regimes.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI