项目编号:【180161】
需项目二:3D视觉 无序抓取
需求概述:视野中 无序摆放着多个 同种零件 ,我们有 该零件的 3D模型。 请通过点云算法,找到当前最上层 的每个 零件 的位置,和姿势朝向。
一、硬件环境:矩阵分布的2-4台相机深度相机 (1000-2000元左右的) + GPU 可选
二、软件需求
1.1 输入:
工件 STEP 或 STL 或 ppf或 pcd 等文件等格式,
多个相机点云数据、RGB图、深度图、 机械臂与相机之间的距离,
1.2 输出:
自动计算给出 Top3, 避障的可抓取位姿(x,y,z,roll,pitch,yaw)和 夹爪宽度width。
同时需要知道程序预测的 模板匹配结果的精度。
1.3 算法建议 (非强制)
基于有模型的点云匹配算法OpenCV的 ppf_match_3d , ICP、PL-ICP、NICP和IMLS-ICP等相关视觉算法,初匹配、聚类投票、精匹配等处理过程。例如常规工业场景急于cad模型匹配的算法,例如:FPFH + SAC-IA + ICP , SHOT352 + Hough3D + ICP, PPF (Point-Pair Feature)