日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2509.13731

産業環境におけるフレキシブルケーブル挿入のための強化学習

Reinforcement Learning for Robotic Insertion of Flexible Cables in Industrial Settings

シェア:XThreadsFacebookLINEはてブBluesky

基盤モデルによるreal-to-simとセグメンテーションを用いて、フレキシブルフラットケーブルのロボット挿入をシミュレーションのみで学習し、実機へゼロショット転移する手法を提案。

詳しい要約

1. どんなもの?

柔軟なフラットケーブル(FFC)を産業用ロボットでレセプタクルに挿入するタスクに対し、強化学習(RL)を用いた自動化手法を提案する研究。FFCの変形に起因する非決定性や、実環境での学習の危険性という課題に対し、foundation model を活用した real-to-sim アプローチで訓練時間短縮と安全確保を図る。訓練は全てシミュレーション内で行い、sim-to-real 転移はセマンティックセグメンテーションマスクを介して実現する。

2. 先行研究と比べてどこがすごい?

- 従来のFFC挿入は人間が軌道を教示する必要があり、労力が大きい - RLによる自動化は複雑なFFC特性のモデリングを不要にするが、変形による非決定性のため訓練に多大な時間と労力を要する - 実環境での直接訓練は産業用ロボットが高速で安全対策がないため危険 - 提案手法は foundation model ベースの real-to-sim で訓練時間を短縮し、物理的損傷リスクを排除 - 実験で zero-shot 能力を示し、fine-tuning なしで実環境に直接展開可能

3. 技術・手法の肝は?

- 訓練は全てシミュレーション内で実施し、物理的損傷リスクなしにランダム探索を可能にする - sim-to-real 転移はセマンティックセグメンテーションマスクにより、ケーブルとレセプタクルの幾何・空間情報など挿入タスクに関連する視覚特徴のみを残す - 汎用性向上のため foundation model の Segment Anything Model 2(SAM2)を使用 - 人間の介入を排除するため、Vision-Language Model(VLM)で SAM2 の初期プロンプティングを自動化し、セグメンテーションマスクを取得

4. どうやって有効だと検証した?

- 実験において zero-shot 能力を示し、fine-tuning なしで実環境に直接展開できることを確認 - 具体的な評価指標・データセット・比較対象は要旨からは不明

5. 議論はある?

- 要旨からは不明(限界や失敗事例、議論の詳細は記載されていない)

6. 次に読むべき論文は?

- Segment Anything Model 2(SAM2) - Vision-Language Model(VLM)を用いたプロンプティング自動化に関する研究 - real-to-sim / sim-to-real 転移に関する研究 - 柔軟物体操作のための強化学習(RL)研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jeongwoo Park, Seabin Lee, Changmin Park, Wonjong Lee, Changjoo Nam

分類: cs.RO

原文アブストラクト

The industrial insertion of flexible flat cables (FFCs) into receptacles presents a significant challenge owing to the need for submillimeter precision when handling the deformable cables. In manufacturing processes, FFC insertion with robotic manipulators often requires laborious human-guided trajectory generation. While Reinforcement Learning (RL) offers a solution to automate this task without modeling complex properties of FFCs, the nondeterminism caused by the deformability of FFCs requires significant efforts and time on training. Moreover, training directly in a real environment is dangerous as industrial robots move fast and possess no safety measure. We propose an RL algorithm for FFC insertion that leverages a foundation model-based real-to-sim approach to reduce the training time and eliminate the risk of physical damages to robots and surroundings. Training is done entirely in simulation, allowing for random exploration without the risk of physical damages. Sim-to-real transfer is achieved through semantic segmentation masks which leave only those visual features relevant to the insertion tasks such as the geometric and spatial information of the cables and receptacles. To enhance generality, we use a foundation model, Segment Anything Model 2 (SAM2). To eleminate human intervention, we employ a Vision-Language Model (VLM) to automate the initial prompting of SAM2 to find segmentation masks. In the experiments, our method exhibits zero-shot capabilities, which enable direct deployments to real environments without fine-tuning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI