依托于启智杯的举办,团队依靠VM工业软件,参与创意类赛道中能实现标准件检测的双目视觉系统设计,感谢指导老师的悉心指点和本次大赛为我们提供的成长机会。
1、项目开发背景
在智能制造中,利用视觉技术检测工件是智能化生产的重要应用。其中, 矩形工件是工业生产中最常见的工件类型,快速、准确地检测出图像中的矩形具有十分广泛的应用价值, 例如:机器人的自动码垛、工业产品的缺陷检测等;
在面向具有一定尺寸标准件的检测和尺寸测量时,有着单视角成像无法获取标准件完整图像等问题,由此我们提出了双目视觉的技术解决方案。
2、项目开发设计思路
(1)双目系统搭建

双目系统设计图
选取hikrobot的CB系列板级相机MV-CB013-A0UC-C和镜头MVL-HF0628M-6MPE,选用黑色、黄褐色等五种不同尺寸的标准件,利用两个105cm高的支架,物距为70cm,两相机间距约为19cm,传送带速度为3m/min。

双目系统实际图
(2)相机同步触发性检验
在传送带上放置一个秒表,确保两相机采集图像中均能完整显示秒表数字,一次取流并比较左右相机视角下秒表的数字,若时间差在5ms之内,即可验证相机的同步触发性。


(3)双目数据图像取流与双目拼接
实时取流获取两相机视野下的标定板图像,进而实现特征检测、特征提取、特征匹配与图像融合,以建立多来源拼接模型;在同一环境与视野下,撤掉标定板,实现两相机视野下图像的对齐和连接,并将拼接后的图像实时输出显示在PC端。





(4)矩形检测和框选
通过颜色转换、图像增强、图像滤波、形态学分析、BLOB分析与变量计算依次实现了RGB图像转灰度图像、提升图像对比度使图像边缘清晰、去除噪声并保留矩形结构、清除小噪点并细化矩形边缘、筛选符合矩形特征的区域以及根据标准件像素尺寸计算真实尺寸的功能。



(5)交互界面设计:
最上区域显示本参赛系统名称“双目视觉标准件检测与测量系统”;视图分为三部分,最左一列显示左右视角下的双目数据流,中间显示拼接后的图像,最右一列显示标准件检测框选后的图像;左下角设置一次取流与多次取流的按键;右下区域实时显示标准件像素尺寸、实际尺寸(以mm为单位)以及双目检测系统的帧率。

3、项目开发总结
团队成员通过本次海康启智杯比赛,共同合作,学习了VM工业软件的使用并完成了整套双目视觉标准件检测与测量系统的搭建。尽管最终搭建好的成果比较粗糙且有很多地方可以优化,但对于我们来说这是一次宝贵的成长经历。