利用图像处理与机器视觉技术开发了一套安全气囊检测系统,实现了对安全气囊生产的全部过程某一工位处关键尺寸的亚像素测量。介绍了该检测系统的总体组成和主要工作流程; 分别介绍了该系统的软硬件设计; 并选取实际气囊对所开发的检测系统来进行了可行性、有效性的验证。通过实验表明该系统的检测结果符合实际生产的要求。
21 世纪以来,汽车行业发展迅猛。安全气囊作为汽车的安全辅助工具,它的出现大幅度的降低了死亡率,因而必须确保其尺寸精确,并能正常使用。对安全气囊传统的检 测方法主要是借助千分表、轮廓仪等工具进行人工抽检[1]。然而在长时间、大批量的工作模式下,工作人员由于身体条件、视觉疲劳等因素,造成产品误检率高,极大地 限制了生产效率和产品质量。
针对上面讲述的情况,开发了一套基于机器视觉的安全气囊检测系统,实现对安全气囊关键尺寸的亚像素测量。该系统具有非接触、实时、高精度、高效率的特点,可大大降低企业的人力成本,同时减少误检率和漏检率,提升公司的生产效率和经济效益。
待检测对象安全气囊的实物图如图 1 所示。对气囊进行仔细的检测主要是对其外轮廓尺寸大小和预缝线间距做测量,具体要求如下: (1)对气囊外轮廓尺寸做测量,测量误差范围为±0.5 mm。 (2) 对预缝线间距做测量,测量误差范围为±0.5mm。 针对以上需求,设计并开发了一套基于机器视觉的气囊尺寸检 测系统。示例中的气囊外轮廓尺寸为 205.55mm,预缝线 待检测的安全气囊实物图
视觉检测系统主要由光源、相机、计算机、执行机构等部分组合而成[2],如图 2 所示。其工作原理是: 照明光源发出平行光照射在检测工件上,工业相机采集图像,将光信号转换成图像数据传送给计算机,由计算机完成图像处理、分析和计算等,并将处理结果以信号的形式发送给执行机构,指导机器的运行。
硬件系统包含机械装置、图像采集子系统以及计算机等部分,其中图像采集子系统是整个硬件系统的核心模块,由光源、相机以及照明系统等复合而成,其任务是对工件进行图像数据采集[3]。对图像采集子系统的设计主要从相机和光源的选型、光照模式的设计等两个方面入手。根据检验测试工件的表面属性和几何外形,结合检测指标为外轮廓尺寸和预缝线间距测量,决定选用 MER- 503- 20GM / C-P 相机,选择线性LED条形光源,以垂直照射的方式来进行照明,如图 3( a) 所示。
软件系统是基于 Window操作系统平台,依托 Visual Studio 2013 中 MFC 和开源图像处理库 OpenCV2.4.9 设计的 UI 界面,最重要的包含视频显示、图像结果为、识别与测量及设备控制等功能模块,如图 3( b) 所示。图中左侧两个窗口分别为“视频显示窗口”和“图像结果为窗口”;界面右侧从上到下依次是“串口通信窗口”、“设备控制窗 口”、“检测识别与测量窗口”以及“检测结果为窗口”。
针对气囊的尺寸测量,采用基于灰度图像的边缘特征,通过滤波与增强,改善图像质量,锐化边缘细节,并通 过亚像素定位技术,提高边缘定位精度,最后通过对边缘 的直线拟合和直方图投影,进行尺寸测量,整个检测算法 流程如图 4 所示。
在进行图像采集和数据传输时,因受到图像传感器质量、环境光照等因素的影响,常常会引入无关的噪声,不利于后续图像识别。图 5 所示为采集图像的外轮廓和预缝线区域的局部图,能够准确的看出图像含有大量的噪声点。
在图像处理中,主要运用图像滤波进行噪声点的去除。目前,常用的滤波方法有高斯滤波、均值滤波和中值 滤波等。采用上述 3 种滤波方法分别对工件图像做处理,同时以峰值信噪比( PSNR)[4]作为质量评价指标,最终决定采用高斯滤波对图像进行去噪处理。
高斯滤波是一种普遍的使用的线性平滑滤波器,主要思路是对整幅图像进行加权平均,从而消除噪声点的影响, 其具体操作是: 通过高斯核的离散化窗口滑窗卷积来实现,高斯核是一个奇数的大小高斯模板。
采用高斯滤波对采集图像进行噪声点的去除,效果如 图 6 所示,能够正常的看到噪声点被平滑处理掉,图像质量得到明显改善。
经过高斯滤波之后的图像,噪声点被滤除,但是由于引入平均的效果,使得边缘细节变得模糊。为了抵消这种模糊的因素,应该增强图像的对比度。采用 Laplace 算子, 对图像边缘进行锐化处理。
Laplace 算子是一种各向同性的二阶微分算子[5],而图像的边缘灰度是阶跃变化的,在数学上表示为其二阶导数过零点,故可利用 Laplace 算子对进行图像锐化,可以轻松又有效地定位边缘点,并通过加强边缘的灰度值,使图像的对 比度增强,同时使边缘细节得到提升。
如图 7 所示,经过 Laplace 算子增强后,不难发现图像的对比度得到了提高,预缝线和外轮边缘也更加清晰,有利于后续图像边缘的检测。
图像边缘指的是其周围像素灰度急剧变化的那些像 素的集合,它主要存在于目标、背景与区域之间,对图像进 行边缘检测是图像识别的重要步骤[6]。采用亚像素技术 对像素级边缘进行精细再分,提高了图像的分辨率,具体 实现过程如下:
(2)精定位阶段,采用图像处理算法,实现像素精细划分。在粗定位阶段,传统的像素级边缘检测算子主要有:
Roberts 算子、Prewitt 算子、Sobel 算子、Log 算子、Canny 算子等[7]。从定位精度和边缘细节两方面,对比上述检测算子的检测效果,如图 8 所示,不难发现 Roberts 算子、Prewitt 算子、Sobel 算子检测结果相似,能够准确定位边缘,但是边缘细节模糊,而 Canny 算子检测效果最佳,定位精度高,边缘连续性强,故在粗定位阶段采用 Canny 算子进行边缘检测。
在精定位阶段,采用基于 Zernike 矩的亚像素边缘检测算法,并对阶跃阈值的选择进行改进,利用 Otsu 法( 大津法) 确定最佳分割阈值 T 作为阶跃阈值,对检测边缘进行精确定位。
步骤5: 利用Otsu 法确定最佳分割阈值作为阶跃阈值 T; 步骤 6: 取距离阈值 δ,若满足条件 k ≥T 且 h≤δ,则该像素点即为边缘点。
通过 Otsu 法确定最佳分割阈值 T = 86,并设置距离阈值 δ 为一个像素单位,进行亚像素边缘检测,如图 9 所示。能够准确的看出采用改进的 Zernike 矩边缘检测算法提取的图像边缘无毛刺,且连续性更强,为后续的高精度尺寸测量提供了保证。
通过对气囊的边缘图像做多元化的分析,发现外轮廓具有波 浪形边缘,而预缝线边缘有着非常明显的倾斜角度,并且含有 线头边缘,对测量产生极大的干扰,针对以上问题,分别提 出了基于直线拟合和直方图投影的测量算法,检测效果如 图 10 所示。
对于外轮廓的尺寸测量,其核心步骤在于对轮廓的拟 合,最小二乘法是最常见的直线拟合方法,其具体步骤如下。
步骤 1: 采集图像上、下边缘,采用最小二乘法拟合基准直线) ,将上边缘 x 坐标均值作为 x0,根据直线方程获取中心点位置;
首先对工件的边缘图像进行轮廓提取,同时获得每个轮廓的最小外接矩形,再依据面积和长宽比等几何特征, 定位预缝线,并记录其左上角顶点坐标,如图 10 所示。
对定位出的预缝线区域,进行直方图投影,其具体步骤是: 首先遍历 ROI 区域 R1 和 R2,统计区域内非 0 值像素的个数 Ni,以行数为横坐标,Ni 为纵坐标,绘制直方图,并记录直方图最大值所在位置行数,计为 I1max 和 I2max,如图 11 所示。结合 ROI 区域的位置坐标,作差即可求得预缝线 预缝线、实验结果与分析
对本视觉系统来进行重复性测量实验,即将气囊在相机视野中任意位置摆放 10 次,采用检测系统对气囊进行尺寸测量,并计算其测量均值和标准差,测量结果如表 1 所示。
通过表 1 可知,外轮廓测量均值为 205.55 mm,其标准偏差为 0.0317 mm,预缝线 mm,标准偏差均在± 0.05 mm 之间,满足了生产实际的精度要求。同时为了更加直观体现,绘制其检测结果折线 零件检测结果折线 可知虽然该系统测得的数据整体比较理想, 测量结果基本在测量均值附近,但是也有个别数据会产生波动,出现这样一种情况,主要有以下几个方面原因:
镜头误差。由于镜头制造工艺的限制,使得镜头存在畸变,在光学成像时产生一定的误差。
环境误差。受到环境光照的影响,使得被测工件的边缘亮度和阴影产生一些变化,这将导致在边缘提取时产生 一定的误差。
算法误差。对外轮廓进行直线拟合时,由于轮廓具有波浪形边缘,使得拟合出的结果会存在一定的误差。
根据安全气囊安全尺寸的检验测试要求,开发了一套视觉检测系统,该系统采用改进的Zernike 矩的亚像素边缘算法,实现边缘的精确定位,提高了测量精度。针对工件两个不同的测量指标,分别提出了基于直线拟合的点测距和基于直方图投影测距的测量方法。在实例验证下, 检测精度符合工业生产要求,有效地提高了生产效率和产品质量。
上一篇:5个例子一步步带你入门PLC下一篇:简述伺服驱动器工作原理和控制方式
1前言 检测问题广泛存在于所有的领域。随着科学技术的快速地发展,随人类生活水平、生产力水平的提高,检测问题慢慢的变多,对检测提出的要求也慢慢变得高:要求能更快、更准、更灵敏、更可靠地完成检测任务;要求能实现自动化检测;要求研制出更多更好的、智能化的、多功能化的、数字化的、集成化的、微型/小型化的仪器仪表或检测系统。此外,由于检验测试领域的逐步扩大,检测的参数范围不断延伸,部分参数本来就难于检测,且许多情况下需要检测的参数又与其它背景物理量掺杂在一起,此时一定要使用复杂的仪器仪表或检测系统,才能完成检测任务。自动检验测试技术作为自动化科学的一个重要分支,作为专门研究检测问题的一门实用型、综合型的新兴边沿学科已形成。而微机自动检验测试(Mic
体系结构研究 /
1 引言 层析成像CT(Computed Tomography)是指通过物体外部检测到的数据来重建物体内部(横截面)信息的技术,又称为计算机辅助断层成像技术。它是把不可分割的对象假想切成一系列薄片,分别给出每一薄片上的物体图像,然后再把该系列图像叠加起来,从而得到物体内部图像。它是一种由数据到图像的重建技术,通过伪彩色图像反映被测材料或制件内部质量,定性、定量分析其缺陷,来提升检测的可靠性。层析成像技术创新了探测物质内部结构。该技术可应用于多种能量波和粒子束,如X射线、电子质子、超声波等。 CT应用超声波能量称为超声层析成像U-CT(Ultrasonic-Computed Tomography)。早期研究假设
近日,华为公开了“安全气囊的控制管理系统和操控方法、交通工具”全新专利,申请公布号为CN116279275A。据悉,该申请实施例公开了一种安全气囊的控制管理系统和操控方法、交通工具,涉及交通工具领域,解决安全气囊的保护性能不佳的问题。
新专利 可根据坐姿调整气囊的展开状态 /
滤光片在机器视觉中怎么用 摄像头镜头组件由一个很重要的构件,就是滤波片;IR cut filter,即红外截止滤光片,它放在于LENS与Sensor之间。因人眼与CMOS Sensor对各波长的响应不同,人眼看不到红外光但sensor会感应,因此就需要IR cut filter阻绝红外光。 IR cut filter分为反射式(普通IR)及吸收式(蓝玻璃)两种。下图在不同光线下可看到两者的区别: 下面来说明普通IR 及蓝玻璃 的特性对比,蓝玻璃比普通IR 约贵10倍自有它的优势,体现在2个方面: 一:普通IR会形成较严重的光晕现象: 下面是普通IR效果: 普通IR采用反射式,在可见光区域有较高透过率的同时,存在较低的反射
的应用 /
中国,北京——2022年5月18日,全球3D视觉感知芯片、模组及解决方案的引领者银牛微电子出席第十一届中国机器人产业大会,并荣获“2021中国机器人行业年度卓越投资价值企业奖”。 会上银牛联合发起人兼首席战略官白逸先生发表了《银牛3D机器视觉+技术助力机器人行业变革》的主题演讲,重磅推出全新“3D机器视觉模组R132”。该产品为机器人市场量身定制,是3D性能、成本、功耗的最优组合,其具备的宽视场角可有效解决机器人避障、3D重构、3D扫描等行业痛点,轻松满足室内室外应用场景需求。 银牛荣获“2021中国机器人行业年度卓越投资价值企业奖” 更大FOV,更小尺寸,R132助力机器人实现“智”的蜕变 据
近日,北京大学成功研制仿视网膜超速全时摄像系统,这是一项典型的 人工智能 和脑科学交叉成果。 仿视网膜超速全时摄像系统研制牵头人、北京大学 计算机 科学技术系主任黄铁军教授,是我国类脑计算方向的主要推动者。他在接受本报记者专访时表示,中国发展新一代AI有自己的内在发展逻辑,相信中国对全球AI的原创贡献会慢慢的多,越来越密集。 智能机器视觉“第一步” 自1988年入读计算机专业以来,黄铁军至今与计算机打交道整整30年,读研究生的方向是汉字识别和双目立体视觉,这也是人工智能的一个重要领域。 黄铁军过去四年一直在积极推动我们国家类脑计算的发展,提出构建类脑智能计算机技术路线:结构层次模仿脑,器件层次逼近脑,智能层次超越脑
现有的大多数机器人,都采用单片机作为控制单元,以8位和16位最常见,其处理速度较低,没有操作系统,没办法实现丰富的多任务功能,系统的潜力没有正真获得充分的发掘和应用。随着科学技术的发展和更多业务需求的增长,嵌入式视觉系统也迎来了更多的挑战,比如功耗、复杂的算法、处理器的性能、更高的图像分辨率等,人们需要的是更加智能化的系统,嵌入式视觉系统是实现智能化系统重要的组成部分。 作为系统的输入CMOS和CCD是目前图像采集采用的两种领先技术,CCD可提供更高的图像质量,但是经过过去10年的发展CMOS与其的差距也慢慢变得小了,在功耗、成本和功耗方面大有超过CCD之势。此外很多应用都需要高效的并行处理系统,因此就需要采取了专用的硬件处理器比如GPU
现代社会讲求安全,安全气囊已是汽车必备的配件,但这些气囊都只是安装在车厢座位的前面或侧面,未必是最佳的保护。据香港《东方日报》7月7日报道,美国汽车制造商福特近日就公开了一款在车厢顶安装的安全气囊,让乘客一旦翻车时亦可立即保护头顶。 车顶安全气袋在检测到汽车即将翻侧时,就会自动弹出,保护车内乘客头部。由于汽车在意外翻侧时,可能会持续翻滚多次才停下,故此车顶安全气囊有别于一般气囊,不会在充气弹出数秒后便泄气瘪掉,而是会维持稍长时间。
3D机器视觉技术研讨会
有奖直播 与英飞凌一同革新您的电动汽车温控系统:集成热管理系统(低压侧)
MPS 隔离式稳压 DC/DC 模块——MIE系列首发,邀你一探究竟!
2023 年 11 月 19 日,是属于电赛人的狂欢!获得TI杯 2023 年全国大学生电子设计竞赛(简称“电赛”)国家一等奖的 361 多支队伍 ...
英飞凌推出PSoC™ 4000T,信噪比提高10倍且支持多重传感应用的超低功耗微控制器
【2023 年 11 月 27日,德国慕尼黑讯】英飞凌科技股份公司近日宣布推出PSoC™ 4000T系列微控制器(MCU)。这一全新的MCU系列以出色的 ...
意法半导体发布远距离无线微控制器,提高智能计量、智能建筑和工业监控的连接能效
新的STM32系统芯片低功耗,支持多种无线通信协议,简化各种用途的无线日 - 服务多重电子应用领域、全球排名前 ...
作者:郭道正职务:Achronix Semiconductor中国区总经理在日前落幕的“中国集成电路设计业2023年会暨广州集成电路产业创新发展高峰论坛(I ...
早上 6:42,闹钟响了。您看上去气色不错,这多亏了床头柜上的睡眠周期监测器,这款监测器采用内置边缘人工智能 (AI) 和雷达技术,通过监 ...
联合打造开源鸿蒙Oniro系统,开放原子开源基金会与Eclipse基金会签署合作协议
网站地图最新更新手机版站点相关:嵌入式处理器嵌入式操作系统开发相关FPGA/DSP
总线与接口数据处理消费电子工业电子汽车电子其他技术存储技术综合资讯论坛电子百科词云: