論文
フィジカルAI関連の最新論文を、日本語のひとことで。原題は英語です。
最新論文: 2019/4/1 / arXivを3時間ごとに自動収集
📖 UMIデバイス・カタログ(日本語版)UMI式データ収集デバイスと主要データセットを日本語で俯瞰 →- 論文空撮/強化学習ロボティクス
ロボットは映画監督になれるか?空撮のための芸術的原則の学習
深層強化学習で撮影ドローンの視点選択を学習し、美的価値の高いショットを自動生成する手法を提案。実機DJI M210でも検証した。
原題: Can a Robot Become a Movie Director? Learning Artistic Principles for Aerial Cinematography / Mirko Gschwindt, Efe Camci, Rogerio Bonatti 他
日本語で読む → - 論文強化学習AI
良い教師とは何か:対話型強化学習の改善
人工エージェントを教師役とする対話型強化学習において、汎用型エージェントが専門型より学習者の報酬と収束を改善することを示し、フィードバックの一貫性が重要であることを分析した。
原題: Improving interactive reinforcement learning: What makes a good teacher? / Francisco Cruz, Sven Magg, Yukie Nagai 他
日本語で読む → - 論文強化学習/ヒューマンロボットインタラクションHCI
博物館で群衆との関わり方を強化学習する対話型彫刻システム
博物館に設置した対話型彫刻が、来館者の関与度を報酬として強化学習し、台本通りの振る舞いより高い関心と好感を得られることを実地検証した。
原題: Learning to Engage with Interactive Systems: A Field Study on Deep Reinforcement Learning in a Public Museum / Lingheng Meng, Daiwei Lin, Adam Francey 他
日本語で読む → - 論文自動運転/強化学習ロボティクス
差分画像を用いた自己学習型自動運転エージェント
自動エンコーダに差分画像を導入し、強化学習と進化戦略で2D環境の自動運転エージェントを効率的に学習させる手法を提案した。
原題: Self Training Autonomous Driving Agent / Shashank Kotyan, Danilo Vasconcellos Vargas, Venkanna U
日本語で読む → - 論文自動運転/強化学習ロボティクス
深層強化学習による自動運転車の高速道路走行
自動運転車がシミュレーション交通と直接相互作用して意思決定を学習する強化学習手法を提案し、短期的な安全チェックを組み込むことで学習効率と安全性を向上させた。
原題: Autonomous Highway Driving using Deep Reinforcement Learning / Subramanya Nageshrao, Eric Tseng, Dimitar Filev
日本語で読む → - 論文強化学習機械学習
実世界強化学習の9つの課題
強化学習を実世界に応用する際に障壁となる9つの課題を整理し、各課題の意味・既存手法・評価指標を示すとともに、それらを再現するテストベッド環境を提案した論文。
原題: Challenges of Real-World Reinforcement Learning / Gabriel Dulac-Arnold, Daniel Mankowitz, Todd Hester
日本語で読む → - 論文自動運転/強化学習ロボティクス
深層強化学習による自動運転の車線変更判断と制御
安全性を考慮したDQNで車線変更の可否と車間選択を判断し、多項式軌道生成とPure Pursuit制御で追従する枠組みをシミュレーションで検証した論文。
原題: Driving Decision and Control for Autonomous Lane Change based on Deep Reinforcement Learning / Tianyu Shi, Pin Wang, Xuxin Cheng 他
日本語で読む → - 論文強化学習機械学習
連続制御強化学習のための自己回帰方策
連続制御タスクの探索を改善するため、時間的に滑らかで標準正規分布に従う自己回帰確率過程に基づく方策を提案し、サンプル効率と実機での安全な動作を実証した。
原題: Autoregressive Policies for Continuous Control Deep Reinforcement Learning / Dmytro Korenkevych, A. Rupam Mahmood, Gautham Vasan 他
日本語で読む → - 論文強化学習/探索機械学習
スケジュールされた内発的ドライブ:階層的な内発的動機付け探索
内発的・外発的方策を別々に学習し、探索とタスク遂行をスケジュールで切り替える階層的強化学習手法を提案。軌道全体の統計を用いる新たな内発的報酬SFCにより、視覚入力環境での探索効率を大幅に改善した。
原題: Scheduled Intrinsic Drive: A Hierarchical Take on Intrinsically Motivated Exploration / Jingwei Zhang, Niklas Wetzel, Nicolai Dorka 他
日本語で読む → - 論文強化学習機械学習
変分オートエンコーダによる系列分離を伴うマクロ行動強化学習
変分オートエンコーダで行動系列の分離された因子表現を自律的に学習し、汎用強化学習アルゴリズムに直接適用できるマクロ行動を生成するFaMARLを提案した論文。
原題: Macro Action Reinforcement Learning with Sequence Disentanglement using Variational Autoencoder / Heecheol Kim, Masanori Yamada, Kosuke Miyoshi 他
日本語で読む → - 論文強化学習ロボティクス
変化する疎報酬環境に適応する分散調整法
価値関数と最適探索の関係を理論的に解析し、ガウス方策の分散を適応的に調整することで、環境変化に素早く適応できる手法を提案した。
原題: Adaptive Variance for Changing Sparse-Reward Environments / Xingyu Lin, Pengsheng Guo, Carlos Florensa 他
日本語で読む → - 論文強化学習ロボティクス
ROS2Learn:ROS 2向け強化学習フレームワーク
GazeboとROS 2を連携させ、モジュラー型ロボットアームの関節状態から直接強化学習で方策を学習するフレームワークを提案し、複数アルゴリズムを比較評価した。
原題: ROS2Learn: a reinforcement learning framework for ROS 2 / Yue Leire Erro Nuin, Nestor Gonzalez Lopez, Elias Barba Moral 他
日本語で読む → - 論文自己教師あり強化学習機械学習
Skew-Fit: 状態被覆を最大化する自己教師あり強化学習
目標到達ポリシーのための探索目的を定式化し、目標分布のエントロピー最大化により状態被覆を高めるSkew-Fitを提案。実ロボットがピクセル入力のみからドア開けを報酬設計なしで学習できることを示した。
原題: Skew-Fit: State-Covering Self-Supervised Reinforcement Learning / Vitchyr H. Pong, Murtaza Dalal, Steven Lin 他
日本語で読む → - 論文手術ロボティクス/強化学習ロボティクス
手術ロボット向け強化学習環境のオープンソース化
手術ロボット用の強化学習環境dVRLを初めてオープンソースで公開し、Gymと同様に最先端RLアルゴリズムの試作・実装が可能で、学習方策が実機に転移できることを示した。
原題: Open-Sourced Reinforcement Learning Environments for Surgical Robotics / Florian Richter, Ryan K. Orosco, Michael C. Yip
日本語で読む → - 論文マルチエージェント強化学習機械学習
ルールベースエージェントの失敗シナリオを生成するマルチエージェント敵対的強化学習と自動運転への応用
ルールベースエージェントを失敗させる敵対的エージェントをマルチエージェント強化学習で訓練し、自動運転シミュレータで有効性を示した研究。
原題: Failure-Scenario Maker for Rule-Based Agent using Multi-agent Adversarial Reinforcement Learning and its Application to Autonomous Driving / Akifumi Wachi
日本語で読む → - 論文安全強化学習機械学習
オンラインガウス過程推定による安全誘導型深層強化学習
安全コストの状態行動価値関数をリアプノフ関数候補とみなし、オンラインGP推定でその微分を近似することで、未知環境でも安定性保証付きの高性能制御方策を学習する手法を提案した。
原題: Safety-Guided Deep Reinforcement Learning via Online Gaussian Process Estimation / Jiameng Fan, Wenchao Li
日本語で読む → - 論文モデルベース強化学習機械学習
ノイズ除去オートエンコーダによる軌道最適化の正則化
学習した環境モデルによる軌道最適化の誤差悪用を防ぐため、同じ軌道で訓練したノイズ除去オートエンコーダで正則化する手法を提案し、運動制御タスクでの初期学習の高速化を示した。
原題: Regularizing Trajectory Optimization with Denoising Autoencoders / Rinu Boney, Norman Di Palo, Mathias Berglund 他
日本語で読む → - 論文強化学習/触覚ロボティクス
好奇心駆動型深層強化学習による優しい物体操作の学習
接触力へのペナルティを予測する「ペナルティベースの驚き」を内在報酬として導入し、壊れやすい物体に優しく接触しながら探索・実行できる強化学習方策を腱駆動型触覚ロボットハンドで実証した。
原題: Learning Gentle Object Manipulation with Curiosity-Driven Deep Reinforcement Learning / Sandy H. Huang, Martina Zambelli, Jackie Kay 他
日本語で読む → - 論文強化学習ロボティクス
到達時間関数に基づく報酬整形でモデルフリー強化学習を効率化
低次元の近似モデルから計算した到達時間(TTR)関数を報酬整形に用い、モデルフリー強化学習のデータ非効率性を改善する手法を提案した。
原題: TTR-Based Reward for Reinforcement Learning with Implicit Model Priors / Xubo Lyu, Mo Chen
日本語で読む → - 論文強化学習/自動運転機械学習
敵対的強化学習による自動運転制御の堅牢性と安全性の向上
自動運転の制御において、環境の外乱を考慮した2プレイヤーゲームとして強化学習を定式化し、半競争的な設定に拡張することで、より意味のある外乱を捉え、衝突率を低減しつつ走行効率を改善する堅牢な方策を実現した。
原題: Improved Robustness and Safety for Autonomous Vehicle Control with Adversarial Reinforcement Learning / Xiaobai Ma, Katherine Driggs-Campbell, Mykel J. Kochenderfer
日本語で読む → - 論文深層強化学習ロボティクス
深層強化学習によるイチゴ自動収穫のための視点最適化
深層強化学習を用いて、イチゴ収穫ロボットのカメラを好ましい視点へ導く制御方策を学習し、シミュレーション環境でランダム行動より8.7倍高い報酬と視覚サーボ法より8.8%速い探索を達成した。
原題: Viewpoint Optimization for Autonomous Strawberry Harvesting with Deep Reinforcement Learning / Jonathon Sather, Xiaozheng Jane Zhang
日本語で読む → - 論文強化学習ロボティクス
タスク空間トレーニングで強化学習を高速化・誘導する
高自由度ロボットの強化学習を、順・逆運動学を明示的に活用し関節空間ではなくデカルト空間で方策学習することで、単一ノートPCで数分で訓練可能にした研究。
原題: Training in Task Space to Speed Up and Guide Reinforcement Learning / Guillaume Bellegarda, Katie Byl
日本語で読む → - 論文クラウドロボティクス/オフロード/強化学習ロボティクス
クラウドロボティクスのためのネットワークオフロード方針:学習ベースのアプローチ
ロボットが不確実なときや高精度な計算が必要なときに、クラウドへセンシングタスクをいつ・どのようにオフロードするかを深層強化学習で決定し、通信コストを抑えつつ視覚タスク性能を1.3〜2.6倍改善する手法を提案した。
原題: Network Offloading Policies for Cloud Robotics: a Learning-based Approach / Sandeep Chinchali, Apoorva Sharma, James Harrison 他
日本語で読む → - 論文モデルベース強化学習機械学習
PIPPS:カオスの呪いに対抗する柔軟なモデルベース方策探索
非線形計算の連鎖が引き起こすカオス的な勾配問題を解析し、再パラメータ化勾配の脆弱性を示した上で、尤度比勾配を活用した柔軟なモデルベース方策探索フレームワークPIPPSと、全経路微分を効率的に統合するtotal propagationアルゴリズムを提案した。
原題: PIPPS: Flexible Model-Based Policy Search Robust to the Curse of Chaos / Paavo Parmas, Carl Edward Rasmussen, Jan Peters 他
日本語で読む → - 論文強化学習ロボティクス
制約付きモデルフリー連続制御
ラグランジュ緩和を用いて、タスク達成を保証しつつ制御努力などの補助コストを最小化する制約ベース強化学習手法を提案し、滑らかな制御ポリシーを学習できることを示した論文。
原題: Value constrained model-free continuous control / Steven Bohez, Abbas Abdolmaleki, Michael Neunert 他
日本語で読む → - 論文自動運転/強化学習機械学習
潜在空間強化学習によるステアリング角予測
高忠実度シミュレータ内で、画像から低次元の潜在表現を抽出し、強化学習で車のステアリング角を予測するモジュール型手法を提案した。
原題: Latent Space Reinforcement Learning for Steering Angle Prediction / Qadeer Khan, Torsten Schön, Patrick Wenzel
日本語で読む → - 論文強化学習機械学習
実機でボールインナカップを実現する視覚と特徴量に基づく制御方策の同時学習
訓練時のみ利用可能な特徴量を使う補助タスクを併用したマルチタスク強化学習により、実機ロボットで視覚ベースのボールインナカップ制御方策をシミュレーションからの転送や模倣学習なしでゼロから高速に学習できることを示した。
原題: Simultaneously Learning Vision and Feature-based Control Policies for Real-world Ball-in-a-Cup / Devin Schwab, Tobias Springenberg, Murilo F. Martins 他
日本語で読む → - 論文モデルベース強化学習ロボティクス
機械システムの構造化学習のための汎用フレームワーク
ラグランジアンと一般化力をニューラルネットでモデル化し、事前知識を柔軟に組み込めるグレーボックスな力学モデル学習手法を提案。二重振り子でデータ効率とモデルベース強化学習性能がブラックボックス手法を上回ることを示した。
原題: A General Framework for Structured Learning of Mechanical Systems / Jayesh K. Gupta, Kunal Menda, Zachary Manchester 他
日本語で読む → - 論文モデルベース強化学習ロボティクス
近似モデルを用いたロボット学習の改良
近似ダイナミクスモデルと少数の実試行で最適制御方策を学ぶアルゴリズムの収束性を改善し、DDPと2Dシミュレータで人間専門家と比較評価した研究。
原題: Using Approximate Models in Robot Learning / Ali Lenjani
日本語で読む → - 論文強化学習AI
シミュレーションで好奇心を学ぶ:ドローン上の物体検出を効率的に訓練するエージェント
3Dシミュレーションと深層強化学習を用いて、ドローン搭載の物体検出モデルを効率的に訓練するための好奇心エージェントを学習させ、速度と人的入力の最小化のトレードオフを報酬関数のパラメータで調整できることを示した。
原題: Learning to Learn in Simulation / Ervin Teng, Bob Iannucci
日本語で読む →
PR・アフィリエイト広告
