Shuang Ma
収録論文 5本 ・ フィジカルAI/ロボット学習
少数ショット学習VLAマルチモーダル事前学習言語インターフェース
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- Premier-TACO:時間的行動駆動型対照損失によるマルチタスク表現の事前学習と少数ショット方策学習少数ショット学習2024/2/1
マルチタスクのオフラインデータから時間的行動対照損失(TACO)を改良して汎用的な視覚表現を事前学習し、少数の専門家デモンストレーションで微調整することで、新しい連続制御タスクの少数ショット模倣学習を効率化する手法を提案。
- PACT: ロボティクス自己回帰事前学習のための知覚-行動因果トランスフォーマVLA2022/9/1
ロボットデータから自己教師ありで汎用表現を事前学習するトランスフォーマPACTを提案し、移動ロボットのナビゲーション・自己位置推定・地図構築で有効性を示した。
- LATTE: 言語による軌道変換フレームワークVLA2022/8/1
事前学習済み言語モデルと画像情報を用いて、自由記述の指示からロボットの3D軌道と速度を生成する汎用フレームワークを提案し、マニピュレーション以外の空中・脚式ロボットでも評価した。
- COMPASS: 自律システムのための対照マルチモーダル事前学習マルチモーダル事前学習2022/3/1
マルチモーダルな信号をグラフで結び、運動パターン空間と現在状態空間の2つの潜在空間に写像する汎用事前学習手法を提案し、ドローン航行・車両レース・視覚オドメトリで有効性と実環境への汎化を示した。
- 自然言語コマンドによるロボット軌道の再形成:Transformerを用いたマルチモーダルデータ整合の研究言語インターフェース2022/3/1
BERTとCLIPで言語コマンドをエンコードし、軌道情報とマルチモーダル注意Transformerで統合することで、既存のロボット軌道を自然言語で柔軟に修正できるインターフェースを実現した。
