日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

嗜好学習arXiv:2411.11182

嗜好に基づく報酬関数最適化におけるユーザー体験の向上:支援ロボットへの応用

Improving User Experience in Preference-Based Optimization of Reward Functions for Assistive Robots

シェア:XThreadsFacebookLINEはてブBluesky

支援ロボットの嗜好学習でユーザーがランク付けする軌道を生成する際、ユーザー体験を優先するCMA-ES-IGアルゴリズムを提案し、従来手法より直感的で使いやすいことを実証した。

著者: Nathaniel Dennler, Zhonghao Shi, Stefanos Nikolaidis, Maja Matarić

分類: cs.RO, cs.AI, cs.HC, cs.LG

原文アブストラクト

Assistive robots interact with humans and must adapt to different users' preferences to be effective. An easy and effective technique to learn non-expert users' preferences is through rankings of robot behaviors, for example, robot movement trajectories or gestures. Existing techniques focus on generating trajectories for users to rank that maximize the outcome of the preference learning process. However, the generated trajectories do not appear to reflect the user's preference over repeated interactions. In this work, we design an algorithm to generate trajectories for users to rank that we call Covariance Matrix Adaptation Evolution Strategies with Information Gain (CMA-ES-IG). CMA-ES-IG prioritizes the user's experience of the preference learning process. We show that users find our algorithm more intuitive and easier to use than previous approaches across both physical and social robot tasks. This project's code is hosted at github.com/interaction-lab/CMA-ES-IG

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI