日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

表情模倣/自己教師あり学習arXiv:2105.12724

笑顔を本気で:学習モデルで動かすアニマトロニクス顔ロボット

Smile Like You Mean It: Driving Animatronic Robotic Face with Learned Models

シェア:XThreadsFacebookLINEはてブBluesky

柔らかい皮膚を持つアニマトロニクス顔ロボットを設計し、人間の表情を模倣する視覚ベースの自己教師あり学習フレームワークを開発した。運動学モデルやカメラ校正、事前定義表情を必要とせず、単一のモーターバブリングデータで生成モデルと逆モデルを学習し、多様な被験者の表情を正確に模倣できることを示した。

著者: Boyuan Chen, Yuhang Hu, Lianfeng Li, Sara Cummings, Hod Lipson

分類: cs.RO, cs.AI, cs.CV, cs.HC, cs.LG

原文アブストラクト

Ability to generate intelligent and generalizable facial expressions is essential for building human-like social robots. At present, progress in this field is hindered by the fact that each facial expression needs to be programmed by humans. In order to adapt robot behavior in real time to different situations that arise when interacting with human subjects, robots need to be able to train themselves without requiring human labels, as well as make fast action decisions and generalize the acquired knowledge to diverse and new contexts. We addressed this challenge by designing a physical animatronic robotic face with soft skin and by developing a vision-based self-supervised learning framework for facial mimicry. Our algorithm does not require any knowledge of the robot's kinematic model, camera calibration or predefined expression set. By decomposing the learning process into a generative model and an inverse model, our framework can be trained using a single motor babbling dataset. Comprehensive evaluations show that our method enables accurate and diverse face mimicry across diverse human subjects. The project website is at http://www.cs.columbia.edu/~bchen/aiface/

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI