Shintaro Ishikawa
収録論文 5本 ・ フィジカルAI/ロボット学習
物体検出VLAマルチモーダル言語理解
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 再配置対象検出のための協調スケールクロスアテンションTransformer物体検出2024/7/1
家庭用サービスロボットの再配置タスクにおいて、目標状態と現在状態の画像から再配置すべき物体を検出するTransformerベースの手法を提案し、新データセットでベースラインを上回る性能を示した。
- マルチモーダル言語理解のためのプロトタイプ対照転移学習VLA2023/7/1
家庭内ロボットが自然言語指示で対象物を特定できるよう、シミュレーションデータを活用する新しい転移学習手法PCTLを提案し、実世界データセットで既存手法を上回る精度を達成した。
- 双方向参照表現理解のためのヘッドテール切替ファネルUNITER:運搬タスクへの応用VLA2023/7/1
自然言語指示で物体を運ぶ家庭用サービスロボット向けに、対象物と目的地を単一モデルで個別に予測する手法を提案し、シミュレータと実機で有効性を示した。
- モーメントベース敵対的学習による身体性言語理解VLA2022/4/1
家庭内タスク指示をサブゴールに分解して実行する視覚言語タスクに対し、指示・サブゴール・状態表現の埋め込み空間に2種類のモーメントを用いた敵対的学習を導入し、ALFREDベンチマークで全指標においてベースラインを上回った。
- 対象依存UNITER:家庭用サービスロボット向けTransformerベースのマルチモーダル言語理解モデルマルチモーダル言語理解2021/7/1
画像全体ではなく対象物体と関連領域に注目して指示表現と物体の関係を学習するUNITER拡張モデルを提案し、家庭用ロボットの言語指示理解精度を向上させた。
