Robinson Piramuthu
収録論文 8本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 家庭は寝る準備ができている? 状況依存クエリによる身体性質問応答の生成と評価身体性質問応答2024/5/1
家庭内で「寝る準備はできている?」のような複数の物体状態の合意を要する状況依存クエリをLLMで生成・評価する枠組みを提案し、LLMは生成は得意だが合意に基づく回答は苦手で常識に反することもあると示した。
- 「牛乳を片付け忘れないで!」家庭内異常検知のためのデータセット異常検知2024/4/1
家庭内の危険・不衛生な状況を検出するため、1000シーンの異常データセットSafetyDetectを構築し、シーングラフとLLMを組み合わせて90%以上の精度で異常を識別する手法を提案した。
- 不確実性を考慮した強化学習によるヒューマン・イン・ザ・ループ型ロボットエージェントの意思決定強化学習2023/3/1
強化学習を用いて、ロボットがタスク成功への自信が低い時にのみ外部専門家に援助を求める手法を提案し、限られた援助回数で効率的にナビゲーションタスクを解決できることを示した。
- バッグ・オブ・トリックで実現する遠隔指示表現遠隔物体指示2023/1/1
家庭用ロボットが既知の環境で遠隔からの物体指示を解決するため、汎用視覚言語モデルを3D座標と文脈で拡張し、大規模な3D探索空間で高精度に物体を特定する手法を提案。
- CLIP-Nav: CLIPを用いたゼロショット視覚言語ナビゲーションVLA2022/11/1
CLIPを活用し、データセット固有の微調整なしで自然言語指示に従って屋内をナビゲートするゼロショット視覚言語ナビゲーション手法を提案し、REVERIEタスクで教師ありベースラインを上回る性能を示した。
- 視覚的物体再配置のためのシンプルな手法:3Dマッピングと意味的探索マニピュレーション2022/6/1
セマンティックセグメンテーションとボクセル意味マップ、意味的探索方策を組み合わせ、視覚入力のみで物体を目標配置に並べ替える手法を提案し、強化学習ベースの従来法を大幅に上回った。
- TEACh: 対話しながら家事タスクを遂行する身体性エージェントのデータセット言語接地2021/10/1
家庭内タスクを人間同士の対話で協力して遂行する3000以上の対話データセットTEAChを構築し、対話理解・言語接地・タスク実行のベンチマークを提案した論文。
- 対話型物体ナビゲーションのための視覚意味整合マルチモーダルTransformerVLN2021/5/1
対話履歴と環境の物体概念を対応付け、いつ対話すべきかを学習するマルチモーダルTransformerナビゲータVISITRONを提案し、CVDNでSPL指標の最先端を達成した。
