論文
フィジカルAI関連の最新論文を、日本語のひとことで。原題は英語です。
最新論文: 2024/3/1 / arXivを3時間ごとに自動収集
📖 UMIデバイス・カタログ(日本語版)UMI式データ収集デバイスと主要データセットを日本語で俯瞰 →- 論文マニピュレーションロボティクス
PRIME: 行動プリミティブによる模倣学習のデータ効率化フレームワーク
タスクをプリミティブ列に分解し、高レベル方策を模倣学習することで、長期的なマニピュレーションタスクのデータ効率を大幅に改善した研究。
原題: PRIME: Scaffolding Manipulation Tasks with Behavior Primitives for Data-Efficient Imitation Learning / Tian Gao, Soroush Nasiriany, Huihan Liu 他
日本語で読む → - 論文マニピュレーションロボティクス
MultiGripperGrasp: 平行グリッパから多指ハンドまでのロボット把持データセット
11種類のグリッパ(2本指から5本指、人間の手まで)と345物体に対する3040万件の把持をシミュレータで検証し、成否と落下時間を記録した大規模データセットを構築。手のひらの位置・向きを揃えることでグリッパ間の把持転移を可能にした。
原題: MultiGripperGrasp: A Dataset for Robotic Grasping from Parallel Jaw Grippers to Dexterous Hands / Luis Felipe Casas, Ninad Khargonkar, Balakrishnan Prabhakaran 他
日本語で読む → - 論文マニピュレーションロボティクス
RPMArt: 関節物体のためのロバストな知覚とマニピュレーション
ノイズの多い点群から関節パラメータと把持可能点を推定し、シミュレーションのみの学習で実世界の関節物体をゼロショットで操作できるフレームワークを提案。
原題: RPMArt: Towards Robust Perception and Manipulation for Articulated Objects / Junbo Wang, Wenhai Liu, Qiaojun Yu 他
日本語で読む → - 論文マニピュレーションロボティクス
ロボットアームのオンライン動作生成と適応のためのガイド付きデコーディング
模倣学習とTransformerベースの条件付きVAEでロボットアームの動作を学習し、ビーム探索によるガイド付きデコーディングで障害物回避や経由点変更にオンライン適応する手法を提案した。
原題: Guided Decoding for Robot On-line Motion Generation and Adaption / Nutan Chen, Botond Cseke, Elie Aljalbout 他
日本語で読む → - 論文マニピュレーションロボティクス
シミュレーションで現実を再現する:実世界からシミュレーションを経て実世界に戻るロバストマニピュレーション手法
少量の実世界データからデジタルツインを構築し、強化学習で模倣学習ポリシーをロバスト化するreal-to-sim-to-realパイプラインを提案。
原題: Reconciling Reality through Simulation: A Real-to-Sim-to-Real Approach for Robust Manipulation / Marcel Torne, Anthony Simeonov, Zechu Li 他
日本語で読む → - 論文マニピュレーションロボティクス
DexCap: 巧みな操作のためのスケーラブルでポータブルなモーションキャプチャデータ収集システム
SLAMと電磁場を組み合わせたポータブルな手のモーションキャプチャシステムDexCapと、そのデータから直接ロボットの巧みな操作スキルを学習する模倣アルゴリズムDexILを提案した。
原題: DexCap: Scalable and Portable Mocap Data Collection System for Dexterous Manipulation / Chen Wang, Haochen Shi, Weizhuo Wang 他
日本語で読む → - 論文マニピュレーションロボティクス
視覚的選好推論:卓上物体操作における画像列に基づく選好推論
卓上物体操作において、連続する画像列から人間の視覚的選好を推論するChain-of-Visual-Residuals(CoVR)手法を提案し、シミュレーションと実環境で有効性を示した。
原題: Visual Preference Inference: An Image Sequence-Based Preference Reasoning in Tabletop Object Manipulation / Joonhyung Lee, Sangbeom Park, Yongin Kwon 他
日本語で読む → - 論文マニピュレーションロボティクス
マルチモーダル非パラメトリックな物体姿勢不確かさ下でのロボットタスク成功評価
物体姿勢推定の誤差分布とタスク成功に許容される誤差空間を、どちらもマルチモーダルな非パラメトリック分布で表現し、動力学シミュレーションで事前計算した許容誤差空間を推定誤差空間上で積分することでタスク成功率を予測する枠組みを提案した。
原題: Robotic Task Success Evaluation Under Multi-modal Non-Parametric Object Pose Uncertainty / Lakshadeep Naik, Thorbjørn Mosekjær Iversen, Aljaz Kramberger 他
日本語で読む → - 論文マニピュレーション画像認識
SPAFormer: Transformerによる逐次的な3Dパーツ組み立て
3Dパーツ組み立てタスクにおける組み合わせ爆発を、組み立て順序の弱い制約とTransformerによる並列・自己回帰生成で解決するSPAFormerを提案し、21カテゴリの新ベンチマークPartNet-Assemblyで長期的組み立てへの優れた汎化性能を示した。
原題: SPAFormer: Sequential 3D Part Assembly with Transformers / Boshen Xu, Sipeng Zheng, Qin Jin
日本語で読む → - 論文移動マニピュレーションロボティクス
MoMa-Pos: 物体運動学を考慮した移動マニピュレーションのための効率的なベース配置最適化フレームワーク
移動マニピュレータのベース配置を最適化するフレームワークを提案し、タスクに関連する物体を優先的に再構成して計算効率を高め、実環境とシミュレーションで既存手法を上回る性能を示した。
原題: MoMa-Pos: An Efficient Object-Kinematic-Aware Base Placement Optimization Framework for Mobile Manipulation / Beichen Shao, Nieqing Cao, Yan Ding 他
日本語で読む → - 論文マニピュレーションロボティクス
NaturalVLM: 細粒度自然言語を用いたアフォーダンス誘導型視覚マニピュレーション
家庭用ロボット向けに、細かい自然言語指示を段階的に解釈して物体操作を行う学習フレームワークと、15タスク・4500エピソード超のベンチマークNrVLMを提案した論文。
原題: NaturalVLM: Leveraging Fine-grained Natural Language for Affordance-Guided Visual Manipulation / Ran Xu, Yan Shen, Xiaoqi Li 他
日本語で読む → - 論文マニピュレーションロボティクス
CoPa: 基盤モデルと部位の空間制約による汎用ロボットマニピュレーション
基盤モデルの常識知識を活用し、タスク指向の把持部位選択とタスクに応じた空間制約から6自由度エンドエフェクタ姿勢を生成する、追加学習不要の汎用マニピュレーション手法。
原題: CoPa: General Robotic Manipulation through Spatial Constraints of Parts with Foundation Models / Haoxu Huang, Fanqi Lin, Yingdong Hu 他
日本語で読む → - 論文マニピュレーションロボティクス
拡散ポリシーによる巧みな機能的把持前操作
物体を掴む前に位置や向きを器用に調整する把持前操作を、教師-生徒学習と拡散ポリシーで実現し、30種類以上の物体で72.6%の成功率を達成した研究。
原題: Dexterous Functional Pre-Grasp Manipulation with Diffusion Policy / Tianhao Wu, Yunchong Gan, Mingdong Wu 他
日本語で読む → - 論文マニピュレーションロボティクス
Tac-Man: 触覚情報のみによる関節物体の事前知識不要マニピュレーション
触覚フィードバックのみを利用し、物体の事前知識なしに関節物体を安定して操作する手法を提案。実機とシミュレーションで高い成功率を示した。
原題: Tac-Man: Tactile-Informed Prior-Free Manipulation of Articulated Objects / Zihang Zhao, Yuyang Li, Wanlin Li 他
日本語で読む → - 論文マニピュレーションロボティクス
入力遅延のない滑らかな計算:ロボットマニピュレータ計画のためのロバストチューブ型モデル予測制御
モデル予測制御の計算遅延を、次状態を予測して1ステップ先に最適制御問題を解くことで解消し、線形化誤差の上限を設けて応答速度を最大90%向上させた。
原題: Smooth Computation without Input Delay: Robust Tube-Based Model Predictive Control for Robot Manipulator Planning / Yu Luo, Qie Sima, Tianying Ji 他
日本語で読む → - 論文水中マニピュレーションロボティクス
ドローンから空中投下可能な軟体水中グリッパー
ドローンで運搬・投下できる小型潜水ポッドと軟体3本指グリッパーを開発し、水中で最大8Nの把持力と湖での実証に成功した。
原題: Gotta catch 'em all, safely! Aerial-deployed soft underwater gripper / Luca Romanello, Daniel Joseph Amir, Heinrich Stengel 他
日本語で読む → - 論文マニピュレーションロボティクス
ハイブリッドケーブルロボットによる建築規模の筆絵画
ケーブル駆動パラレルロボットと4自由度シリアルマニピュレータを組み合わせ、建物2階分の窓に27m×3.7mの壁画を筆で描くロボットを開発した。
原題: Architectural-Scale Artistic Brush Painting with a Hybrid Cable Robot / Gerry Chen, Tristan Al-Haddad, Frank Dellaert 他
日本語で読む → - 論文マニピュレーションロボティクス
低剛性ロボットによる多様な表面素材とタスク定義を考慮した学習ベースの拭き動作
低剛性ロボットが接触力の予測学習に基づき、様々な表面素材とタスク定義に応じて適切に拭き動作を行う手法を開発した。
原題: Learning-Based Wiping Behavior of Low-Rigidity Robots Considering Various Surface Materials and Task Definitions / Kento Kawaharazuka, Naoaki Kanazawa, Kei Okada 他
日本語で読む → - 論文マニピュレーションロボティクス
DeliGrasp: LLMによる物体特性推定と適応的把握政策
LLMの常識推論とコード生成能力を活用し、物体の質量・摩擦・ばね定数を推定して適応的な把持政策を生成する手法を提案。繊細で変形可能な物体の把持で従来手法を上回る性能を示した。
原題: DeliGrasp: Inferring Object Properties with LLMs for Adaptive Grasp Policies / William Xie, Maria Valentini, Jensen Lavering 他
日本語で読む → - 論文マニピュレーションロボティクス
ウェイポイントベース強化学習によるロボットマニピュレーション
ロボットアームの動作を少数のウェイポイント列として学習し、既存の制御器で補間する強化学習手法を提案。マルチアームバンディット問題として定式化し、後方サンプリングによる近似解法で実世界実験を含めて有効性を示した。
原題: Waypoint-Based Reinforcement Learning for Robot Manipulation Tasks / Shaunak A. Mehta, Soheil Habibian, Dylan P. Losey
日本語で読む → - 論文マニピュレーションロボティクス
RH20T-P: 組み合わせ可能な汎化エージェントに向けたプリミティブレベルロボットデータセット
ロボット操作のための約3.8万本の動画クリップからなるプリミティブレベルデータセットRH20T-Pを構築し、計画実行型の組み合わせ汎化エージェントのベースラインを実装した。
原題: RH20T-P: A Primitive-Level Robotic Dataset Towards Composable Generalization Agents / Zeren Chen, Zhelun Shi, Xiaoya Lu 他
日本語で読む → - 論文マニピュレーションロボティクス
GaussianGrasper: オープンボキャブラリなロボット把持のための3D言語ガウシアンスプラッティング
3Dガウシアンスプラッティングでシーンを明示的に表現し、言語埋め込みを蒸留することで、言語指示に基づくオープンボキャブラリな物体把持を実現した。
原題: GaussianGrasper: 3D Language Gaussian Splatting for Open-vocabulary Robotic Grasping / Yuhang Zheng, Xiangyu Chen, Yupeng Zheng 他
日本語で読む → - 論文マニピュレーションロボティクス
CausalWorldの探求:知識転移とカリキュラム学習によるロボットマニピュレーションの強化
3本指ロボットアームの操作タスクを強化学習で学習する際、ファインチューニングとカリキュラム学習の2つの知識転移戦略を比較し、それぞれの有効なシナリオを明らかにした。
原題: Exploring CausalWorld: Enhancing robotic manipulation via knowledge transfer and curriculum learning / Xinrui Wang, Yan Jin
日本語で読む → - 論文マニピュレーションロボティクス
触覚センシングを備えた巧みな指による変形可能な線状物体のハンド内追従
触覚センサ付き多指ハンドを使い、線状物体を落とさずに指先で滑らせながら把持点を連続的に移動させる「ハンド内追従」を実現する枠組みを提案した。
原題: In-Hand Following of Deformable Linear Objects Using Dexterous Fingers with Tactile Sensing / Mingrui Yu, Boyuan Liang, Xiang Zhang 他
日本語で読む → - 論文マニピュレーションロボティクス
人間のスケッチでロボットの行動場所と動作を教える:空間図式指示
人間がカメラ画像上にスケッチした領域を3D空間に投影し、連続的な空間指示マップを学習してロボットの最適化問題に組み込む手法を提案。移動マニピュレータのベース配置問題に適用し、高品質な解と高速な実行を実現した。
原題: Teaching Robots Where To Go And How To Act With Human Sketches via Spatial Diagrammatic Instructions / Qilin Sun, Weiming Zhi, Tianyi Zhang 他
日本語で読む → - 論文マニピュレーションロボティクス
CORN: 未知物体の非把持マニピュレーションのための接触ベース物体表現
点群を処理する軽量Transformerで物体の接触ベース表現を事前学習し、多様な未知物体への非把持マニピュレーションを効率的に学習・ゼロショット転移する手法を提案。
原題: CORN: Contact-based Object Representation for Nonprehensile Manipulation of General Unseen Objects / Yoonyoung Cho, Junhyek Han, Yoontae Cho 他
日本語で読む → - 論文マニピュレーションロボティクス
ヒートマップ誘導による混雑環境での効率的な6自由度把持検出
把持ヒートマップをガイダンスとして用い、局所領域に注目することで混雑環境でもリアルタイムに高精度な6自由度把持検出を実現した手法を提案。
原題: Efficient Heatmap-Guided 6-Dof Grasp Detection in Cluttered Scenes / Siang Chen, Wei Tang, Pengwei Xie 他
日本語で読む → - 論文マニピュレーションロボティクス
動的環境におけるロボットマニピュレータの軌道計画:深層強化学習の活用
7自由度ロボットアームが動く障害物を避けながらランダムな位置のブロックを把持・配置する軌道計画にDDPGを適用し、密な報酬と疎な報酬で性能を比較した。
原題: Trajectory Planning of Robotic Manipulator in Dynamic Environment Exploiting DRL / Osama Ahmad, Zawar Hussain, Hammad Naeem
日本語で読む → - 論文触覚/マニピュレーションロボティクス
TEXterity:触覚による外部器用さ ― 触覚推定と制御の同時実行による把持物体操作
画像ベース触覚センサとロボット運動学を統合し、把持物体の姿勢推定とリーチングホライズン制御を同時に行うことで、視覚遮蔽下でも精密なハンド内操作を実現する手法を提案。
原題: TEXterity -- Tactile Extrinsic deXterity: Simultaneous Tactile Estimation and Control for Extrinsic Dexterity / Sangwoon Kim, Antonia Bronars, Parag Patre 他
日本語で読む → - 論文マニピュレーションロボティクス
LLM³: 動作失敗の推論を組み込んだ大規模言語モデルベースのタスク・動作計画
大規模言語モデルを使ってタスク計画と動作計画を橋渡しし、動作計画の失敗フィードバックをプロンプトで与えて提案を反復改善する、ドメイン非依存のTAMPフレームワークを提案した。
原題: LLM3:Large Language Model-based Task and Motion Planning with Motion Failure Reasoning / Shu Wang, Muzhi Han, Ziyuan Jiao 他
日本語で読む →
PR・アフィリエイト広告
