論文
フィジカルAI関連の最新論文を、日本語のひとことで。原題は英語です。
最新論文: 2024/1/1 / arXivを3時間ごとに自動収集
📖 UMIデバイス・カタログ(日本語版)UMI式データ収集デバイスと主要データセットを日本語で俯瞰 →- 論文触覚マニピュレーションロボティクス
TEXterity:触覚による外部器用さ
触覚センサとロボット運動学を統合し、把持物体の姿勢を推定しながら操作計画を生成する手法を提案。多様な物体で高精度な操作を実現。
原題: TEXterity: Tactile Extrinsic deXterity / Antonia Bronars, Sangwoon Kim, Parag Patre 他
日本語で読む → - 論文マニピュレーションロボティクス
TraKDis: 視覚強化学習のためのTransformerベース知識蒸留と布操作への応用
特権的な状態情報で訓練した教師エージェントから視覚ベースのエージェントへ知識蒸留する2段階手法を提案し、布折り畳みタスクで既存RLを上回る性能と実機での有効性を示した。
原題: TraKDis: A Transformer-based Knowledge Distillation Approach for Visual Reinforcement Learning with Application to Cloth Manipulation / Wei Chen, Nicolas Rojas
日本語で読む → - 論文マニピュレーションロボティクス
関心構造に基づくニューラルダイナミクスモデルを用いた両腕による変形可能な袋の操作
布製の袋の「関心構造」を点群からグラフ表現し、GNNベースの潜在ダイナミクスモデルとMPCを組み合わせて両腕ロボットで安定に操作する手法を提案した。
原題: Bimanual Deformable Bag Manipulation Using a Structure-of-Interest Based Neural Dynamics Model / Peng Zhou, Pai Zheng, Jiaming Qi 他
日本語で読む → - 論文マニピュレーションロボティクス
OK-Robot:オープン知識モデルをロボティクスに統合する上で本当に重要なこと
視覚言語モデル・ナビゲーション・把持を組み合わせ、訓練なしで物体のピックアンドドロップを行うロボットシステムを構築し、実環境10軒で評価した。
原題: OK-Robot: What Really Matters in Integrating Open-Knowledge Models for Robotics / Peiqi Liu, Yaswanth Orru, Jay Vakil 他
日本語で読む → - 論文マニピュレーションロボティクス
不完全なデモンストレーションからの自己教師あり学習によるロボットマニピュレーション
失敗を含む不完全なデモデータを自己教師ありで評価・選別し、高品質な部分を訓練データに追加することで、ロボットマニピュレーションの成功率を向上させるフレームワークを提案。
原題: Learning from Imperfect Demonstrations with Self-Supervision for Robotic Manipulation / Kun Wu, Ning Liu, Zhen Zhao 他
日本語で読む → - 論文マニピュレーションロボティクス
物体中心の指示拡張によるロボットマニピュレーション
マルチモーダル大規模言語モデルを用いて物体の位置情報を自然言語指示に織り込み、模倣学習ポリシーの操作性能を向上させる枠組みを提案した。
原題: Object-Centric Instruction Augmentation for Robotic Manipulation / Junjie Wen, Yichen Zhu, Minjie Zhu 他
日本語で読む → - 論文マニピュレーションロボティクス
注視注意を伴う双腕微細操作のためのマルチタスク実ロボットデータセット
双腕での微細な物体操作を含む多様なタスクの大規模実ロボットデータセット(22.4万エピソード、150時間)を構築し、視覚的注意信号と双動作ラベルを用いたモデルで実機検証した。
原題: Multi-task real-robot data with gaze attention for dual-arm fine manipulation / Heecheol Kim, Yoshiyuki Ohmura, Yasuo Kuniyoshi
日本語で読む → - 論文空中マニピュレーションロボティクス
カテゴリカル6D姿勢トラッカーによる実世界の空中視覚誘導に向けて
空中ロボット操作のためのカテゴリレベル6DoF姿勢追跡器Robust6DoFと姿勢認識離散サーボ戦略PAD-Servoを提案し、実世界での空中視覚誘導を実現した。
原題: Towards Real-World Aerial Vision Guidance with Categorical 6D Pose Tracker / Jingtao Sun, Yaonan Wang, Danwei Wang
日本語で読む → - 論文マニピュレーションロボティクス
両手マニピュレーションのためのハンド・物体運動学モデル
指の平面運動学を幾何学的にモデリングし、未知物体の回転・並進操作を両手で行うための指関節値と操作戦略を計算する手法を提案した。
原題: The Hand-object Kinematic Model for Bimanual Manipulation / Jingyi Li
日本語で読む → - 論文マニピュレーションロボティクス
GenH2R: スケーラブルなシミュレーション・デモンストレーション・模倣による汎化可能な人からロボットへの受け渡し学習
大規模シミュレーション環境と自動デモ生成、未来予測を組み込んだ4D模倣学習を組み合わせ、未知の物体や複雑な軌道にも対応できる視覚ベースの人→ロボット受け渡しスキルを実現した。
原題: GenH2R: Learning Generalizable Human-to-Robot Handover via Scalable Simulation, Demonstration, and Imitation / Zifan Wang, Junyu Chen, Ziqing Chen 他
日本語で読む → - 論文マニピュレーションロボティクス
Mobile ALOHA:低コスト全身遠隔操作による両腕移動マニピュレーションの学習
低コストな全身遠隔操作システムMobile ALOHAを開発し、既存の静的ALOHAデータセットとの共訓練により、エビの炒め物や調理鍋の収納など複雑な移動マニピュレーションタスクを自律的に達成できることを示した。
原題: Mobile ALOHA: Learning Bimanual Mobile Manipulation with Low-Cost Whole-Body Teleoperation / Zipeng Fu, Tony Z. Zhao, Chelsea Finn
日本語で読む → - 論文マニピュレーションロボティクス
未知の紐を用いたロボットアームによるキャスティング操作
ロボットアームが周囲にある未知の紐を拾い上げ、その動きをシミュレーションと実機実験からパラメータ推定することで、紐を遠くの目標へ投げ届かせるキャスティング操作を実現した。
原題: Casting manipulation of unknown string by robot arm / Kenta Tabata, Hiroaki Seki, Tokuo Tsuji 他
日本語で読む → - 論文空中マニピュレーションロボティクス
ロボット間トーチリレー用空中マニピュレータ:システム設計と制御手法
北京2022冬季オリンピックのロボット間トーチリレーに向けて、クアッドロータと3自由度マニピュレータ、単眼カメラからなる空中マニピュレータを設計し、氷雪環境で視覚誘導によるトーチ受け渡しを実現した。
原題: An Aerial Manipulator for Robot-to-robot Torch Relay Task: System Design and Control Scheme / Guangyu Zhang, Yuqing He, Liying Yang 他
日本語で読む → - 論文マニピュレーションロボティクス
双腕マニピュレーションのための多指運動学モデル
物体の輪郭や重心が未知の状況で、強化学習を用いて指の配置と把持力を最適化し、双腕把持の成功率と精度を高めるフレームワークを提案した。
原題: The Multi-fingered Kinematic Model for Dual-arm Manipulation / Jingyi Li
日本語で読む → - 論文マニピュレーションロボティクス
協働ロボットアームによる安全で自律的な食肉切断
協働ロボットアームと包丁計測システムを用いて、豚ロースのスライス・トリミング・角切りを安全に実行し、食肉処理の専門家による評価を行った。
原題: Safely and Autonomously Cutting Meat with a Collaborative Robot Arm / Ryan Wright, Sagar Parekh, Robin White 他
日本語で読む → - 論文マニピュレーションロボティクス
ロボットハンド内操作のための学習ベース手法に関するサーベイ
ロボットによるハンド内操作の研究を、従来の解析的モデルから学習ベース手法(強化学習など)への変遷を軸に整理し、課題と機会をまとめたサーベイ論文。
原題: Survey of Learning-based Approaches for Robotic In-Hand Manipulation / Abraham Itzhak Weinberg, Alon Shirizly, Osher Azulay 他
日本語で読む → - 論文マニピュレーションロボティクス
微細力覚鉗子を用いた低侵襲手術のための自動組織牽引
把持力と牽引力を同時に測れる微細力覚鉗子を使い、軟組織との相互作用モデルに基づく力制御で組織の把持・牽引を自動化し、摘出実験で有効性を示した。
原題: Automatic Tissue Traction Using Miniature Force-Sensing Forceps for Minimally Invasive Surgery / Tangyou Liu, Xiaoyi Wang, Jay Katupitiya 他
日本語で読む → - 論文マニピュレーションロボティクス
RESPRECT: 残差強化学習による多指ハンド把持の高速化
事前学習済み方策に残差方策を重ねて学習することで、多指ハンドによる新しい物体の把持を、デモなしで約5倍速く学習できる手法を提案し、実機iCubでも有効性を示した。
原題: RESPRECT: Speeding-up Multi-fingered Grasping with Residual Reinforcement Learning / Federico Ceola, Lorenzo Rosasco, Lorenzo Natale
日本語で読む → - 論文マニピュレーションロボティクス
ICGNet: インスタンス中心の把持のための統一的アプローチ
単一視点の点群から各物体のインスタンス表現を生成し、物体再構成と把持検出を同時に行うエンドツーエンド手法を提案。散らかった卓上シーンでの把持性能と実環境適用性を示した。
原題: ICGNet: A Unified Approach for Instance-Centric Grasping / René Zurbrügg, Yifan Liu, Francis Engelmann 他
日本語で読む → - 論文マニピュレーションロボティクス
プリント・アンド・グリップ:使い捨て可能で柔軟、拡張性のあるワンショット3Dプリント多指ロボットハンド
腱駆動のアンダーアクチュエーテッド機構をワンショット3Dプリントで作製し、組み立て不要で指の数やサイズを自由に変更できる使い捨て可能なロボットハンドを提案した。
原題: Print-N-Grip: A Disposable, Compliant, Scalable and One-Shot 3D-Printed Multi-Fingered Robotic Hand / Alon Laron, Eran Sne, Yaron Perets 他
日本語で読む → - 論文マニピュレーションロボティクス
ピック・アンド・プレース計画は「ピック計画→プレース計画」より優れている
多指ハンドの把持計画と配置計画を同時に推論するモジュール型アルゴリズムを提案し、実機実験で逐次的なアプローチより成功率と配置品質が高いことを示した。
原題: Pick and Place Planning is Better than Pick Planning then Place Planning / Mohanraj Devendran Shanthi, Tucker Hermans
日本語で読む → - 論文マニピュレーションロボティクス
予測的な障害物回避を伴う変形物体の協調マニピュレーション
位置ベースダイナミクスで変形物体の運動と障害物との距離を予測し、制御バリア関数を用いて複数ロボットが衝突を避けながら変形物体を操作する手法を提案した。
原題: Collaborative Manipulation of Deformable Objects with Predictive Obstacle Avoidance / Burak Aksoy, John Wen
日本語で読む → - 論文マニピュレーションロボティクス
時系列マニピュレーションタスクにおける深層強化学習の帰納バイアスとしての時間インデックス付け
マニピュレーションタスクで多様なスキルを学習するため、固定時間ごとに異なる行動ヘッドを順次実行するポリシー構造を提案し、Metaworldで標準手法を上回る性能を示した。
原題: On Time-Indexing as Inductive Bias in Deep RL for Sequential Manipulation Tasks / M. Nomaan Qureshi, Ben Eisner, David Held
日本語で読む → - 論文マニピュレーションロボティクス
ExTraCT: 言語入力による説明可能な軌道修正
大規模言語モデルと軌道変形関数を組み合わせ、自然言語による指示からロボットの軌道を修正するモジュール型フレームワークを提案。未見の軌道や物体配置にも汎化し、操作・食事支援タスクで有効性を示した。
原題: ExTraCT -- Explainable Trajectory Corrections from language inputs using Textual description of features / J-Anne Yow, Neha Priyadarshini Garg, Manoj Ramanathan 他
日本語で読む → - 論文モバイルマニピュレーションロボティクス
実環境でのモバイルマニピュレーション:指標駆動型アプローチ
カスタムロボットと知覚・計画アルゴリズムからなる汎用モバイルマニピュレーションシステムを構築し、実際のスーパーでの買い物シナリオで18ヶ月にわたる6回のフィールドテストを実施。ログから性能指標を導出し、システムを継続的に改善した。
原題: Demonstrating Mobile Manipulation in the Wild: A Metrics-Driven Approach / Max Bajracharya, James Borders, Richard Cheng 他
日本語で読む → - 論文マニピュレーションロボティクス
M2CURL:自己教師あり表現学習によるサンプル効率の高いマルチモーダル強化学習
視覚と触覚のマルチモーダル強化学習において、自己教師あり対照学習で効率的な表現を獲得し、ロボットマニピュレーションの学習効率と収束速度を向上させる手法を提案した。
原題: M2CURL: Sample-Efficient Multimodal Reinforcement Learning via Self-Supervised Representation Learning for Robotic Manipulation / Fotios Lygerakis, Vedant Dave, Elmar Rueckert
日本語で読む → - 論文マニピュレーションロボティクス
Robo-ABC: 意味的対応関係によるカテゴリを超えたアフォーダンス汎化
人間の動画から接触点を含むアフォーダンス記憶を抽出し、拡散モデルによる意味的対応関係を利用して未知物体へ接触点を転移することで、ゼロショットでカテゴリ外の物体操作を可能にするフレームワークを提案。
原題: Robo-ABC: Affordance Generalization Beyond Categories via Semantic Correspondence for Robot Manipulation / Yuanchen Ju, Kaizhe Hu, Guowei Zhang 他
日本語で読む → - 論文マニピュレーションロボティクス
FMB: 汎化可能なロボット学習のための機能的マニピュレーションベンチマーク
3Dプリント可能な物体を用いて、把持・再配置・組立などの基本スキルとその組み合わせを評価する実世界ロボット学習ベンチマークを提案し、模倣学習フレームワークも提供する。
原題: FMB: a Functional Manipulation Benchmark for Generalizable Robotic Learning / Jianlan Luo, Charles Xu, Fangchen Liu 他
日本語で読む → - 論文マニピュレーションロボティクス
アプローチヒートマップを用いた機能的な固有把持
多指ハンドロボットが、スプレーやドリルなどの道具のボタンやトリガーを操作できるよう、アプローチヒートマップと固有把持を組み合わせて機能的把持を実現する枠組みを提案した。
原題: Functional Eigen-Grasping Using Approach Heatmaps / Malek Aburub, Kazuki Higashi, Weiwei Wan 他
日本語で読む → - 論文マニピュレーションロボティクス
力覚フィードバックによる多指機能把持の適応的動作計画
深層強化学習と関節トルクのリアルタイムフィードバックを組み合わせ、多指ハンドが物体位置に応じて把持姿勢を適応的に調整する動作計画手法を提案した。
原題: Adaptive Motion Planning for Multi-fingered Functional Grasp via Force Feedback / Dongying Tian, Xiangbo Lin, Yi Sun
日本語で読む →
PR・アフィリエイト広告
