Jonas Frey
収録論文 42本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- WayTrace: 地図から言語、軌跡へとつなぐ階層型都市ナビゲーションナビゲーション2026/11/3
Web地図の経路案内を言語モデルで解釈し、画像上に軌跡を描いてロボットを誘導する階層型システム。GNSSノイズに強く、実都市で1.37kmの走行を達成。
- GLST: オンライン連鎖目標ナビゲーションのためのグローバル・ローカル時空間記憶分解フレームワークナビゲーション2026/10/13
目標が実行中に変化するオンライン連鎖目標ナビゲーションに対応するため、記憶をグローバル・ローカルの空間表現と長期・短期の時間表現に分解するフレームワークを提案し、シミュレーションとSpot四足ロボットで有効性を示した。
- BT-Agent: ビヘイビアツリーとマルチフィデリティ評価によるオンボードロボットエージェントの展開VLA2026/10/9
LLMによるタスク判断とビヘイビアツリーのスキルを組み合わせ、限られた計算資源で四足歩行ロボット上にオンボードで動作するエージェントを実現し、161タスクのマルチフィデリティベンチマークで評価した。
- 言語誘導探索のための構造化世界状態推論ロボット探索2026/9/20
地理空間事前情報と知覚を統合した永続グラフ上で並列推論を行い、マルチモーダル検証で目標を特定するロボット探索フレームワークWORLDSを提案。CityNavで51.8%のナビゲーション成功率を達成し、既存手法を15.7ポイント上回った。
- オープンボキャブラリなシーン地図構築のためのシーン言語モデルシーン理解2026/9/18
シーン全体を構造化テキストの物体リストとして保持し、画像入力ごとに追加・編集・削除で地図を更新するSceneLMを提案。専用モジュール構成の従来手法と同等性能を6〜12倍コンパクトな表現で実現し、四足歩行ロボット上でのオンライン動作も示した。
- 脚式ロボットの進歩、課題、そして機会歩行2026/7/1
ヒューマノイドや四足ロボットの現状をハードウェア、移動、自律性、データ、応用の観点から評価し、普及に向けた課題と将来展望を論じたレビュー論文。
- EgoHTR: 人間の地形移動の自己中心視点4Dデモンストレーション歩行2026/7/1
自己中心視点のウェアラブルと3Dスキャナを用いて、複雑な環境での人間の移動シーンを再構成するパイプラインとデータセットを構築し、これを活用して人型ロボットの移動ポリシーを訓練し実機で検証した。
- FARM: 関係空間記憶を用いた任意物体の発見物体検索/空間記憶/VLM2026/6/1
ロボットが「ダーツボードの下の背の高いランプ」のような関係的な指示で物体を見つけられるよう、実時間で物体レベルの空間記憶を構築し、VLMでクエリを解析して検索するシステムを提案した。
- DigiForest: 持続可能な林業のためのデジタル分析とロボティクス林業ロボティクス2026/4/1
森林管理の持続可能性向上を目指し、自律ロボット群による樹木データ収集、自動特性抽出、意思決定支援、低影響伐採を統合した大規模精密林業システムを提案・実証した論文。
- WildOS: 野外環境におけるオープンボキャブラリ物体探索ナビゲーション2026/2/1
地図や深度センサに頼らず、視覚言語モデルで探索方向を意味的に評価し、長距離のオープンボキャブラリ物体探索を実現するシステムを提案。
- GrandTour: 実環境における脚式ロボットのマルチモーダル知覚と状態推定のためのデータセット歩行2026/2/1
ANYmal-D四脚ロボットにLiDAR・カメラ・固有感覚センサを搭載し、山岳から都市・廃墟まで多様な屋内外環境で収集した大規模マルチモーダルデータセットを公開。RTK-GNSSとトータルステーションによる高精度な正解軌道も含み、SLAMや状態推定、マルチモーダル学習の評価基盤を提供する。
- 自己教師ありブートストラップによる行動予測的な身体性推論VLA2026/2/1
VLAモデルの身体性Chain-of-Thought推論を、外部報酬や人手注釈なしに自己教師ありで洗練し、操作・歩行ナビ・自動運転で性能を向上させる手法を提案。
- 少ないデータで実現するスケーラブルな視覚ナビゲーション視覚ナビゲーション2026/1/1
限られた人間のデモンストレーションに幾何学的プランナーが生成した合成軌道を追加することで、Transformerベースの視覚ナビゲーション方策を効率的に訓練し、実機展開を実現した。
- DeFM: 深度画像からロボティクスの基盤表現を学習基盤モデル2026/1/1
6000万枚の深度画像で自己蒸留により事前学習した基盤モデルDeFMを提案し、分類・セグメンテーション・ナビゲーション・歩行・マニピュレーションで最先端性能とsim-to-real汎化を実現した。
- VLD: 強化学習ナビゲーションのための視覚言語ゴール距離ナビゲーション2025/12/1
インターネット規模の動画で自己教師あり学習した目標までの距離予測器と、シミュレーションで訓練した強化学習方策を組み合わせ、画像・テキスト両方のゴール指定に対応するナビゲーション手法を提案。
- Kleinkram: オープンなロボティクスデータ管理基盤データ管理2025/11/1
ロボット研究で発生する大規模で非構造化なデータセットを、オンプレミスクラウド上で保存・索引付け・共有できるオープンソースシステムを提案。ROSバッグやMCAP形式に対応し、Dockerベースのワークフロー実行機能も備える。
- NaviTrace:視覚言語モデルの身体性ナビゲーション評価ベンチマークナビゲーション2025/10/1
視覚言語モデルに指示と身体タイプを与え、画像空間での2Dナビゲーション軌跡を出力させるVQAベンチマークを提案し、8つの最先端モデルを評価した。
- GaussGym:ピクセルから歩行を学習するためのオープンソース実世界→シミュレーション変換フレームワークsim2real2025/10/1
3Dガウススプラッティングを物理シミュレータに組み込み、毎秒10万ステップ超の高速フォトリアルシミュレーションを実現し、実機への転移やナビゲーション性能の向上を示した。
- 脚式ロボットによる自律的な森林インベントリ構築:システム、教訓、今後の課題歩行2025/6/1
四足歩行ロボットANYmalを用いて森林内を自律走行し、樹木の検出と胸高直径推定を行うシステムを開発し、欧州3カ国の森林で1年半にわたる実証実験を行った。
- リスク誘導拡散:失敗が許されない宇宙でのロボット基盤モデル展開に向けてナビゲーション2025/6/1
人間の認知科学に着想を得て、高速な学習ベースの「システム1」と低速な物理ベースの「システム2」を融合したリスク誘導拡散フレームワークを提案し、NASA JPLの火星模擬施設での実験で失敗率を最大4倍低減した。
- DAPPER: 識別性を考慮したポリシー間選好ベース強化学習によるクエリ効率の良いロボットスキル獲得強化学習2025/5/1
複数のポリシー間の軌道比較で選好クエリを生成し、識別性を推定する識別器で優先サンプリングすることで、クエリ効率を高める選好ベース強化学習手法を提案。
- 安全でプラットフォームを考慮したロボットナビゲーションのための学習型知覚フォワードダイナミクスモデルナビゲーション2025/4/1
周囲の形状と固有受容感覚の履歴からロボットの将来状態を予測する学習型フォワードダイナミクスモデルを提案し、MPPI計画に統合することで、コスト調整なしに安全なナビゲーションを実現した。
- ホリスティックフュージョン:タスク・構成に依存しない因子グラフによるロボット自己位置推定と状態推定自己位置推定/センサフュージョン2025/4/1
因子グラフを用いて、タスクやセンサ構成に依存せず多様なセンサを統合し、低遅延な局所運動推定と低ドリフトな大域自己位置推定を同時に実現するオープンソースの融合フレームワークを提案した。
- 拡散モデルによるロバストなLiDAR位置認識位置認識2025/4/1
建設現場のロボットの大域的な再位置推定のため、実大規模メッシュから生成した合成LiDAR点群でPointNet++をバックボーンとする拡散モデルを訓練し、単一の点群から複数の位置候補を予測する手法を提案した。
- Boxi: ロボティクスにおけるアルゴリズム性能を考慮した設計判断センサフュージョン2025/4/1
複雑な環境で移動ロボットの自律性を高めるため、LiDARやカメラ、IMUなどを統合したセンサペイロードBoxiを設計し、時間同期やキャリブレーションが状態推定性能に与える影響を分析した論文。
- RoadRunner M&M:自律オフロードナビゲーションのためのマルチレンジ・マルチ解像度走行可能性マップ学習自律ナビゲーション2024/9/1
複数画像とLiDARボクセルマップから、50m/100mの距離と0.2m/0.8mの解像度で走行可能性・標高マップを直接予測する自己教師あり学習フレームワークを提案し、長距離推定精度と汎化性能を向上させた。
- 視覚から地形の物理パラメータを推定:物理特性を考慮した歩行とナビゲーションに向けて歩行2024/8/1
シミュレーションで摩擦や剛性を予測する物理デコーダを訓練し、実世界の画像に自己教師ありでラベル付けすることで、視覚から地形の物理パラメータを推定する手法を提案した。
- 脚式ロボットによる自律的な森林インベントリ:システム設計と実地展開フィールドロボティクス2024/4/1
脚式ロボットを用いて森林の樹木調査を自律的に行うシステムを構築し、フィンランドと英国の森林で実地試験を実施した。英国では20分で0.96ヘクタールを調査し、100本以上の樹木を同定、胸高直径を約2cmの精度で推定した。
- 3D回転表現の手引き:SO(3)を学ぶためのガイド3D回転表現2024/4/1
機械学習で用いられる様々な3D回転表現を体系的に整理し、勾配最適化への利点・欠点や入力/出力・角度の大きさに応じた適切な表現選択の指針を示したサーベイ。
- 野生環境の視覚ナビゲーション:事前学習モデルとオンライン自己教師あり学習による高速走行可能性学習ナビゲーション2024/4/1
森林や草原などの自然環境で、事前学習済みモデルの特徴量とオンライン自己教師あり学習を組み合わせ、短時間の実地デモから走行可能領域を推定してロボットをナビゲートするシステムを提案した。
- RoadRunner:自律走行オフロード走行のための走破性推定学習走破性推定2024/2/1
カメラとLiDARの入力を融合し、自己教師あり学習で地形の走破性と標高マップを直接予測するフレームワークを提案し、オフロード自律走行の低遅延化を実現した。
- 知覚障害に強い脚式ロボットの局所ナビゲーション:劣化した知覚からのEnd-to-End学習歩行2023/10/1
知覚失敗を不可視の障害物や穴としてモデル化し、固有感覚と外界感覚を統合した強化学習方策で脚式ロボットの局所ナビゲーションをEnd-to-Endで学習させ、知覚障害時でも成功率を30%以上向上させた。
- ロボティクスと学習のためのマルチモーダル標高マッピングマルチモーダルマッピング2023/9/1
ロボット中心の2.5D標高マップに点群や画像などのマルチモーダル情報を統合するフレームワークを提案し、GPU上でリアルタイムに動作させ、線検出や人検出、カラー化などの応用を示した。
- 分布強化学習によるリスクを考慮した四足歩行の学習歩行2023/9/1
価値分布を推定してリスク指標を組み込んだPPO(DPPO)を提案し、四足ロボットANYmalでリスク回避からリスク志向まで単一パラメータで動的に制御できる歩行を実現した。
- SMUGプランナ:過酷環境下で移動ロボットのための安全なマルチゴールプランナ経路計画2023/6/1
複数の目標地点を巡回する移動ロボットの経路計画において、シミュレーションで学習した走破性を活用した階層的な状態検証とLazyPRM*を組み合わせ、安全かつ高速に最適経路を生成するプランナを提案し、四足歩行ロボットANYmalで自律ミッションを実証した。
- 草を透かして見る:支持面学習のためのセマンティック点群フィルタsim2real2023/5/1
LiDAR点群とRGB画像から、草などの透過可能な植生を除去して真の支持面を推定するCNNベースのフィルタを提案し、四足歩行ロボットANYmalで検証した。
- 野外環境における高速な走行可能領域推定走行可能領域推定2023/5/1
自己教師あり学習と視覚トランスフォーマーを用いて、森林や草原などの自然環境でロボットが走行可能な地形をオンラインで推定するシステムを提案した。
- ニューラルレンダリングによる教師なし連続セマンティック適応セマンティックセグメンテーション2022/11/1
各シーンのSemantic-NeRFを訓練し、レンダリングしたセマンティックラベルを擬似ラベルとしてセグメンテーションモデルを連続的に適応させる手法を提案。
- ラベルなし混合動作の自己教師あり敵対的模倣による多様なスキル制御模倣学習2022/9/1
ラベルなしの多様な動作データから、敵対的模倣学習と教師なしスキル発見を組み合わせて、制御可能なスキルセットを持つ汎用方策を獲得する手法を提案し、四足ロボットSolo 8で実証した。
- 不完全な実演の敵対的模倣による俊敏スキルの学習模倣学習2022/6/1
物理的に不完全な部分実演からWasserstein GANで報酬を推定し、四足ロボットSolo 8でバク宙などの俊敏スキルを獲得する手法を提案。
- 歩行ポリシーに基づく3次元ボクセル表現を用いた走破性学習歩行2022/3/1
物理シミュレータで大量の歩行経験を収集し、3Dボクセル占有マップから歩行ポリシーに適した走破性コストを予測する疎畳み込みネットワークを学習、脚式ロボットの経路計画に応用した。
- 2D-3D相補表現を用いたセマンティックセグメンテーションの継続的適応セマンティックセグメンテーション2021/11/1
ロボット運用中に2D予測を3Dマップへ確率的に蓄積して教師信号を生成し、継続学習でセグメンテーションネットを環境に適応させる手法を提案した。
