日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2510.10602

SpikeGrasp: ステレオスパイクストリームからの6自由度把持姿勢検出ベンチマーク

SpikeGrasp: A Benchmark for 6-DoF Grasp Pose Detection from Stereo Spike Streams

シェア:XThreadsFacebookLINEはてブBluesky

ステレオスパイクカメラの生イベントから点群復元なしで直接6自由度把持姿勢を推定する、神経模倣型リカレントスパイキングニューラルネットワークを提案し、大規模合成ベンチマークで従来手法を上回る性能とデータ効率を示した。

詳しい要約

1. どんなもの?

- 6-DoF grasp pose detection を、stereo spike camera の生の非同期イベントから直接推論する neuro-inspired フレームワーク SpikeGrasp の提案 - 生物の visuomotor pathway を模倣し、retina に相当する stereo spike stream を処理 - 点群再構成を一切行わずに grasp pose を推定する end-to-end アプローチ - 大規模な synthetic benchmark dataset も構築し、評価基盤を提供

2. 先行研究と比べてどこがすごい?

- 多くの既存ロボット把持システムは sensor data を明示的な 3D point cloud に変換する計算段階を前提とする - SpikeGrasp はこの点群変換を排除し、生物知能に近い処理経路を実現 - 実験では traditional point-cloud-based baselines を上回る性能を報告 - 特に cluttered かつ textureless なシーンで優位 - 高い data efficiency も示す

3. 技術・手法の肝は?

- stereo spike camera からの raw, asynchronous events を retina 相当の入力として直接処理 - stereo spike streams を fusion する機構を備える - recurrent spiking neural network を用い、高次視覚処理に類似した反復的な grasp hypothesis の refinement を行う - point cloud reconstruction を経由せず grasp pose を直接推論する点が肝

4. どうやって有効だと検証した?

- 大規模な synthetic benchmark dataset を構築して検証 - traditional point-cloud-based baselines との比較実験を実施 - cluttered および textureless なシーンでの性能優位を確認 - data efficiency に関する評価も実施 - 具体的なデータセット規模や指標の詳細は要旨からは不明

5. 議論はある?

- end-to-end かつ neuro-inspired なアプローチの実現可能性を示し、自然界のような流動的で効率的な manipulation への道を開くとする - 特に dynamic objects への応用可能性に言及 - 限界や失敗事例、計算コスト、実機検証の有無などの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 比較対象として言及される traditional point-cloud-based grasp detection の代表的手法(例: point cloud 入力の 6-DoF grasp 推定手法) - stereo spike camera や event camera を用いた視覚処理の関連研究 - recurrent spiking neural network を用いたロボティクス応用研究 - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhuoheng Gao, Jiyao Zhang, Zhiyong Xie, Hao Dong, Zhaofei Yu, Rongmei Chen, Guozhang Chen, Tiejun Huang

分類: cs.RO, cs.CV

原文アブストラクト

Most robotic grasping systems rely on converting sensor data into explicit 3D point clouds, which is a computational step not found in biological intelligence. This paper explores a fundamentally different, neuro-inspired paradigm for 6-DoF grasp detection. We introduce SpikeGrasp, a framework that mimics the biological visuomotor pathway, processing raw, asynchronous events from stereo spike cameras, similarly to retinas, to directly infer grasp poses. Our model fuses these stereo spike streams and uses a recurrent spiking neural network, analogous to high-level visual processing, to iteratively refine grasp hypotheses without ever reconstructing a point cloud. To validate this approach, we built a large-scale synthetic benchmark dataset. Experiments show that SpikeGrasp surpasses traditional point-cloud-based baselines, especially in cluttered and textureless scenes, and demonstrates remarkable data efficiency. By establishing the viability of this end-to-end, neuro-inspired approach, SpikeGrasp paves the way for future systems capable of the fluid and efficient manipulation seen in nature, particularly for dynamic objects.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI