日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

関節物体認識arXiv:2508.02146

ScrewSplat: 関節物体認識のためのエンドツーエンド手法

ScrewSplat: An End-to-End Method for Articulated Object Recognition

シェア:XThreadsFacebookLINEはてブBluesky

RGB画像のみから関節物体の幾何形状と関節軸を同時に推定し、ガウススプラッティングで3D再構成と可動部のセグメンテーションを行うエンドツーエンド手法を提案。

詳しい要約

1. どんなもの?

- 関節を持つ物体(ドアやノートPCなど)の幾何形状と運動学的関節を同時に認識する「articulated object recognition」の手法 - RGB観測のみを入力とするend-to-end手法「ScrewSplat」を提案 - 出力は3D幾何の再構成と、剛体・可動部品へのセグメンテーション、および運動学モデル

2. 先行研究と比べてどこがすごい?

- 既存手法は可動部品数の既知などの強い仮定、depth画像などの追加入力、誤差を招く複雑な中間ステップに依存 - 提案手法はRGB観測のみで動作するシンプルなend-to-end手法 - 多様なarticulated objectsでstate-of-the-artの認識精度を達成 - 復元したkinematic modelを用いたzero-shotのtext-guided manipulationも可能

3. 技術・手法の肝は?

- screw axesをランダムに初期化し、反復最適化して物体のkinematic structureを復元 - Gaussian Splattingと統合し、3D geometryの再構成と剛体・可動部品へのセグメンテーションを同時に行う - 入力はRGB観測のみ

4. どうやって有効だと検証した?

- 多様なarticulated objectsのデータセット上で認識精度を評価し、state-of-the-artを達成 - 復元したkinematic modelを用いたzero-shot, text-guided manipulationの実現を示す - 詳細な実験設定は要旨からは不明

5. 議論はある?

- 既存手法の仮定・追加入力・複雑な中間ステップを回避できる点を利点として主張 - 限界や失敗ケース、計算コストなどの議論は要旨からは不明

6. 次に読むべき論文は?

- Gaussian Splatting(3D Gaussian Splatting) - articulated object recognitionの既存手法(要旨では個別名の参照なし) - screw motion / screw axisに基づくkinematic modeling - text-guided manipulation

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Seungyeon Kim, Junsu Ha, Young Hun Kim, Yonghyeon Lee, Frank C. Park

分類: cs.RO, cs.CV

原文アブストラクト

Articulated object recognition -- the task of identifying both the geometry and kinematic joints of objects with movable parts -- is essential for enabling robots to interact with everyday objects such as doors and laptops. However, existing approaches often rely on strong assumptions, such as a known number of articulated parts; require additional inputs, such as depth images; or involve complex intermediate steps that can introduce potential errors -- limiting their practicality in real-world settings. In this paper, we introduce ScrewSplat, a simple end-to-end method that operates solely on RGB observations. Our approach begins by randomly initializing screw axes, which are then iteratively optimized to recover the object's underlying kinematic structure. By integrating with Gaussian Splatting, we simultaneously reconstruct the 3D geometry and segment the object into rigid, movable parts. We demonstrate that our method achieves state-of-the-art recognition accuracy across a diverse set of articulated objects, and further enables zero-shot, text-guided manipulation using the recovered kinematic model. See the project website at: https://screwsplat.github.io.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI