CN103196918A - 一种汽车空调控制面板的按键装配检测方法 - Google Patents

一种汽车空调控制面板的按键装配检测方法 Download PDF

Info

Publication number
CN103196918A
CN103196918A CN2013100964515A CN201310096451A CN103196918A CN 103196918 A CN103196918 A CN 103196918A CN 2013100964515 A CN2013100964515 A CN 2013100964515A CN 201310096451 A CN201310096451 A CN 201310096451A CN 103196918 A CN103196918 A CN 103196918A
Authority
CN
China
Prior art keywords
image
panel
control panel
detection method
air conditioner
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013100964515A
Other languages
English (en)
Inventor
陶飞
穆平安
戴曙光
金晅宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Shanghai for Science and Technology
Original Assignee
University of Shanghai for Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Shanghai for Science and Technology filed Critical University of Shanghai for Science and Technology
Priority to CN2013100964515A priority Critical patent/CN103196918A/zh
Publication of CN103196918A publication Critical patent/CN103196918A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Air-Conditioning For Vehicles (AREA)

Abstract

本发明涉及一种汽车空调控制面板按键装配检测方法,该方法包括以下步骤:1)利用摄像机对空调控制面板进行图像采集,并将采集到的图像转换成HSL类型;2)在HSL图像中提取面板部分图像;3) 将面板部分图像的按键图标部分进行色谱特征提取,将提取得到的色谱图与标准色谱模板进行比对,从而判断出空调面板按键是否存在漏装、误装缺陷; 4) 将面板部分图像进行二值化,得到二值化图像;5) 对二值化图像的按键图标部分进行几何特征的提取,计算按键图标部分的最小外接矩形的宽度和高度几何特征参数,基于像素数比较法来判断空调控制面板按键装配过程中是否存在倒装缺陷。

Description

一种汽车空调控制面板的按键装配检测方法
技术领域
本发明涉及一种面板缺陷检测,特别涉及一种汽车空调控制面板按键装配检测方法。
背景技术
汽车空调系统作为汽车部件之一,影响汽车的舒适性,主要由制冷装置、制暖装置、通风装置、加湿装置和空气净化装置组成,其目的是用来对车厢内空气的温度和适度等参数进行调节,将车厢内环境控制在舒适的标准范围之内。汽车空调控制面板是驾驶员与汽车空调系统进行信息交互的重要界面和接口,驾驶员的操作通过指令去控制汽车空调系统的各项功能,使其能够迅速准确的处理各种命令,并通过控制面板的显示屏幕显示出来。
在空调控制面板工业生产装配过程中,难免出现各种缺陷,影响用户实现汽车内空调控制的功能和实时掌握汽车内空调运行的状态。汽车空调控制面板的装配缺陷主要包括漏装缺陷、误装缺陷和倒装缺陷。漏装缺陷指面板按键在装配过程中没有安装,误装缺陷指面板按键在装配过程中误装了其它按键,倒装缺陷指面板按键在装配过程中安装颠倒了方向。
一般来说,传统的面板装配检测方法是采用人工检测法,通过人眼检测判断面板的按键装配是否正确,这是一种完全主观的判断产品的安装是否正确的评价方法,也是最简单的一种方法,但是很容易受观测距离,角度等影响,必然存在一定的误判率,而且要用眼睛确定产品是否存在缺陷的速度慢,容易产生视觉疲劳,对质检人员的经验要求也较高。在大批量的工业生产中,通过人眼检查面板按键安装缺陷的缺点是效率低而且可靠性差,无法满足人们对高效率、高可靠性的要求。
随着计算机视觉理论和数字图像处理分析技术的快速发展,机器视觉在许多领域都已取得了巨大的成功,同样也为汽车空调控制面板按键装配缺陷检测提供了智能化的检测判断方法。本文基于颜色特征和几何特征提出了一种汽车空调控制面板按键装配检测方法,不仅避免了人工检测中普遍存在的效率低、可靠性差和成本高等缺点,基于机器视觉检测方法更提高了生产效率,实现了自动化的生产。基于机器视觉对汽车空调控制面板的按键装配缺陷检测在控制面板的生产装配质量的稳定性上起到了重要作用。
发明内容
本发明针对汽车空调控制面板的按键图标的特征,选择提取具有可区别性和可靠性的颜色特征和形状特征的关键信息,提出结合颜色特征和形状特征对按键装配进行检测的方法,判断按键漏装、误装、倒装等缺陷,实现准确和稳定的检测。
为达到上述目的,本发明的技术方案是:
本发明涉及一种汽车空调面板的按键检测方法,包括按键漏装、误装和倒装缺陷的检测,该方法为:
1)利用摄像机对空调控制面板进行图像采集,得到RGB类型面板图像,并将RGB类型面板图像转换为HSL类型面板图像;
2)从HSL类型面板图像中提取按键面板图像;
3)将按键面板图像的按键图标部分进行色谱特征提取,将提取得到的色谱图与标准色谱模板进行比对,若色谱图的图像色谱特征数组的值未达到设定阈值,则可判断该检测面板的按键存在漏装缺陷;若色谱图的图像色谱特征数组与标准色谱模版的色谱特征数组偏差大于一定数值,则可判断该检测面板的按键存在误装缺陷;
4) 将按键面板图像进行二值化,得到二值化图像;
5)对二值化图像的按键图标部分进行几何特征提取,计算按键图标部分的最小外接矩形的宽度参数和高度参数,基于像素数比较法,对二值化图像的按键图标部分,根据质心的位置和最小外接矩形的宽度和高度信息将按键图标部分分为上、下两部分,对于上半部分等间隔地抽取五行并计算总像素和S1,对于下半部分等间隔抽取五行计算总像素和S2,通过比较S1和S2的大小,可以判断检测面板的按键是否存在倒装缺陷。
进一步,本发明所涉及的汽车空调控制面板的按键检测方法还具有如下特征:
摄像机采用彩色数字面阵CCD摄像机,彩色数字面阵CCD摄像机上还设有成像镜头和光源。
面板部分图像提取是采用水平投影法和垂直投影法对面板部分图像进行提取。
色谱特征的提取采用HSL颜色模型提取颜色特征。
二值化是选用最大类间方差法为图像分割。
宽度参数和高度参数是通过计算连通域水平方向边界点的最大坐标max xi和最小坐标min xi、垂直方向上边界点的最大坐标max yi和最小坐标min yi所得到的最小外接矩形宽度为max xi-min xi、最小外接矩形高度为max yi-min yi。
发明的作用与效果
与现有技术相比,本发明的有益效果在于:本发明提出的面板按键装配检测方法,是一高可靠性、高效率的检测方法,适用于现代汽车面板生产工业中面板的在线检测。
附图说明
图1为本发明汽车空调控制面板的按键装配检测方法实施例系统结构示意图。
图2为本发明汽车空调控制面板的按键装配检测方法流程图。
图3为本发明汽车空调控制面板的温度增和温度减按键示意图。
图4为本发明汽车空调控制面板的按键图标的最小外接矩形示意图。
图5为本发明汽车空调控制面板基于像素数比较法示意图。
具体实施方式
如图1所示汽车空调控制面板的按键装配检测方法实施例的系统结构示意图,其中包括空调控制面板1、彩色数字面阵CCD摄像机2、图像采集卡3和上位机4。
空调控制面板1即为待检测按键装配的工件,彩色数字面阵CCD摄像机2用于对空调控制面板1进行图像采集,得到RGB类型面板图像,并将RGB类型面板图像转换为HSL类型面板图像,然后将采集到的数字图像通过图像采集卡3传输至上位机4,上位机4在接受到面板图像后,按照图2所示流程,利用本发明所提出的方法对图像进行处理、分析和判断,给出检测结果。
空调控制面板1为汽车空调控制面板,在本实施例中的检测对象为空调控制面板上的温度增按键和温度减按键,如图3所示,整个面板的尺寸为:长度为120mm,宽度为350mm。
本实施例中所采用的彩色数字面阵CCD摄像机2的分辨率为1392×1040,CCD尺寸为1/2英寸,像素尺寸为4.65μm×4.65μm,其分辨率高,图像质量好,色彩还原性好,并且带有IEEE-1394a接口,即插即用,方便简单。
本实施例中图像采集卡3选取为1394采集卡,保证了图像快速的从摄像机2传输到上位机4中。
上位机4在接收到空调控制面板图像后,按照以下步骤对接收图像作处理:
1) 为了将面板图像部分从背景工作台图像中提取出来,根据水平方向投影和垂直方向投影原理,提取得到面板部分图像;
2) 按照已预先定义的色谱颜色分组,扫描已提取出的面板图像的按键图标部分,计算落入每个颜色分组的像素数量,存储像素个数与整个图像像素总数的比例为对应色谱数组元素的值。得到检测图像的色谱特征数组后,即可与标准空调控制面板图像的色谱特征数组进行比对,若检测所得图像色谱特征数组的值未达到一定阈值,则可判断该检测面板温度增和温度减按键存在漏装缺陷;若检测所得图像色谱特征数组与标准空调控制面板图像的色谱特征数组偏差大于一定数值,即可判断该检测面板温度增和温度减按键存在误装缺陷;
3) 根据最大类间方差法分割图像,将彩色图像转化后的灰度图像进行二值化;
4)对已经二值化后的按键部分图像,提取按键图标部分的最小外接矩形的宽度和高度等几何参数信息,如图4所示。计算原理为:在直角坐标系中,计算连通域水平方向边界点的最大坐标max xi和最小坐标min xi,在垂直方向上边界点的最大坐标max yi和最小坐标min yi,就可以得到物体的最小外接矩形,最小外接矩形宽度w为水平轴跨界,计算公式为:
w=max xi-min xi
最小外接矩形高度h为垂直轴的跨界,计算公式为:
h=max yi-min yi
连通域是指经过二值化后图片像素为1的联通区域,通过识别连通域可以判断出按键部分的位置,从而可以计算出外接矩形的宽度和高度。
5)根据基于像素数比较法,对二值化图像的按键图标部分,根据质心的位置和最小外接矩形的宽度和高度信息将温度增和温度减按键的图标二值化图分为上下两部分,对于上半部分等间隔的抽取五行计算总像素和S1,对于下半部分同样等间隔抽取五行计算总像素和S2,如图5所示,S1小于S2代表温度增,S1大于S2代表温度减,通过比较S1和S2的大小,可以检测判断温度增和温度减按键是否存在倒装缺陷。
本实施例与现有技术相比,实现了汽车空调控制面板按键安装的快速高效检测,测量精度达到了0.2mm。该测量装置可靠性高,适用于汽车空调控制面板工业生产中的在线检测。

Claims (7)

1.一种汽车空调控制面板的按键装配检测方法,用于检测汽车的空调控制面板的复数个按键在装配过程中产生漏装、误装和倒装缺陷的现象,其特征在于,包括以下步骤:
1)利用摄像机对所述空调控制面板进行图像采集,得到RGB类型面板图像,并将所述RGB类型面板图像转换为HSL类型面板图像;
2)从所述HSL类型面板图像中提取按键面板图像;
3)将所述按键面板图像的按键图标部分进行色谱特征提取,将提取得到的色谱图与标准色谱模板进行比对,若所述色谱图的图像色谱特征数组的值未达到设定阈值,则可判断该检测面板的按键存在漏装缺陷;若所述色谱图的图像色谱特征数组与所述标准色谱模版的色谱特征数组偏差大于一定数值,则可判断该检测面板的按键存在误装缺陷;
4) 将所述按键面板图像进行二值化,得到二值化图像;
5)对所述二值化图像的按键图标部分进行几何特征提取,计算所述按键图标部分的最小外接矩形的宽度参数和高度参数,基于像素数比较法,对所述二值化图像的按键图标部分,根据质心的位置和所述最小外接矩形的宽度和高度信息将所述按键图标部分分为上、下两部分,对于所述上半部分等间隔地抽取五行并计算总像素和S1,对于所述下半部分等间隔抽取五行计算总像素和S2,通过比较所述S1和所述S2的大小,可以判断检测面板的按键是否存在倒装缺陷。
2.根据权利要求1所述的按键装配检测方法,其特征在于:
其中,所述摄像机采用彩色数字面阵CCD摄像机,所述彩色数字面阵CCD摄像机上还设有成像镜头和光源。
3.根据权利要求1所述的按键装配检测方法,其特征在于:
其中,所述面板部分图像提取是采用水平投影法和垂直投影法对所述面板部分图像进行提取。
4.根据权利要求1所述的按键装配检测方法,其特征在于:
其中,所述色谱特征的提取采用HSL颜色模型提取颜色特征。
5.根据权利要求1所述的按键装配检测方法,其特征在于:
其中,所述二值化是选用最大类间方差法为图像分割。
6.根据权利要求1所述的按键装配检测方法,其特征在于:
其中,所述宽度参数和所述高度参数是通过计算连通域水平方向边界点的最大坐标max xi和最小坐标min xi、垂直方向上边界点的最大坐标max yi和最小坐标min yi所得到的所述最小外接矩形宽度为max xi-min xi、所述最小外接矩形高度为max yi-min yi。
7.根据权利要求6所述的按键装配检测方法,其特征在于:
其中,所述连通域是指经过二值化后图片像素为1的联通区域。
CN2013100964515A 2013-03-22 2013-03-22 一种汽车空调控制面板的按键装配检测方法 Pending CN103196918A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2013100964515A CN103196918A (zh) 2013-03-22 2013-03-22 一种汽车空调控制面板的按键装配检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2013100964515A CN103196918A (zh) 2013-03-22 2013-03-22 一种汽车空调控制面板的按键装配检测方法

Publications (1)

Publication Number Publication Date
CN103196918A true CN103196918A (zh) 2013-07-10

Family

ID=48719610

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2013100964515A Pending CN103196918A (zh) 2013-03-22 2013-03-22 一种汽车空调控制面板的按键装配检测方法

Country Status (1)

Country Link
CN (1) CN103196918A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105465102A (zh) * 2015-12-15 2016-04-06 中国航空工业集团公司金城南京机电液压工程研究中心 一种阀套上密封圈和保护圈装配正确性检查装置
CN105675310A (zh) * 2016-04-08 2016-06-15 惠州市德赛自动化技术有限公司 一种控制面板检测设备
CN106405392A (zh) * 2015-08-03 2017-02-15 现代自动车株式会社 用于检查车辆的电气设备的装置和方法
CN107367514A (zh) * 2017-08-28 2017-11-21 广东工业大学 一种基于机器视觉的pos机缺陷检测方法
CN110320215A (zh) * 2019-08-09 2019-10-11 宜昌达瑞机电科技有限公司 基于lbview的汽车空调控制器视觉检测系统及方法
CN110703543A (zh) * 2019-10-17 2020-01-17 托托科技(苏州)有限公司 一种采用投影辅助装配的方法
CN113556489A (zh) * 2020-04-24 2021-10-26 晶相光电股份有限公司 影像感测系统以及缺陷感光元件侦测以及修正方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101251495B (zh) * 2007-11-19 2010-11-10 长春理工大学 干式空心电抗器内表面检测方法及装置
CN102645433A (zh) * 2011-02-21 2012-08-22 珠海格力电器股份有限公司 检测遥控器的方法和系统
CN102680478A (zh) * 2012-04-25 2012-09-19 华南农业大学 一种基于机器视觉的机械零部件表面缺陷检测方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101251495B (zh) * 2007-11-19 2010-11-10 长春理工大学 干式空心电抗器内表面检测方法及装置
CN102645433A (zh) * 2011-02-21 2012-08-22 珠海格力电器股份有限公司 检测遥控器的方法和系统
CN102680478A (zh) * 2012-04-25 2012-09-19 华南农业大学 一种基于机器视觉的机械零部件表面缺陷检测方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
方葵等: "汽车空调面板按键装配在线检测方法的研究", 《计算机工程与设计》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106405392A (zh) * 2015-08-03 2017-02-15 现代自动车株式会社 用于检查车辆的电气设备的装置和方法
CN105465102A (zh) * 2015-12-15 2016-04-06 中国航空工业集团公司金城南京机电液压工程研究中心 一种阀套上密封圈和保护圈装配正确性检查装置
CN105465102B (zh) * 2015-12-15 2017-07-07 中国航空工业集团公司金城南京机电液压工程研究中心 一种阀套上密封圈和保护圈装配正确性检查装置
CN105675310A (zh) * 2016-04-08 2016-06-15 惠州市德赛自动化技术有限公司 一种控制面板检测设备
CN107367514A (zh) * 2017-08-28 2017-11-21 广东工业大学 一种基于机器视觉的pos机缺陷检测方法
CN110320215A (zh) * 2019-08-09 2019-10-11 宜昌达瑞机电科技有限公司 基于lbview的汽车空调控制器视觉检测系统及方法
CN110703543A (zh) * 2019-10-17 2020-01-17 托托科技(苏州)有限公司 一种采用投影辅助装配的方法
CN113556489A (zh) * 2020-04-24 2021-10-26 晶相光电股份有限公司 影像感测系统以及缺陷感光元件侦测以及修正方法
CN113556489B (zh) * 2020-04-24 2024-01-09 晶相光电股份有限公司 影像感测系统以及缺陷感光元件侦测以及修正方法

Similar Documents

Publication Publication Date Title
CN103196918A (zh) 一种汽车空调控制面板的按键装配检测方法
CN111970506B (zh) 镜头脏污检测方法、装置和设备
CN108171673B (zh) 图像处理方法、装置、车载抬头显示系统及车辆
CN102393397B (zh) 一种磁瓦表面缺陷检测系统及其检测方法
CN102411706B (zh) 识别用户的动态器官姿势的方法和接口以及用电装置
CN110618134A (zh) 钢板表面质量缺陷检测评级系统及方法
CN105718931B (zh) 用于确定采集图像中的杂斑的系统和方法
JP2017032548A (ja) 自動工業検査における3dビジョンの使用
CN102441581A (zh) 基于机器视觉的型钢断面尺寸在线检测的装置及方法
CN102881106A (zh) 一种热成像视频双鉴林火识别系统及其识别方法
CN102610104B (zh) 一种车载的前方车辆检测方法
Tian et al. Human Detection using HOG Features of Head and Shoulder Based on Depth Map.
CN108582075A (zh) 一种智能机器人视觉自动化抓取系统
CN111402326A (zh) 障碍物的检测方法、装置、无人车及存储介质
CN104408727B (zh) 一种图像边缘污点检测方法及系统
CN110969135B (zh) 自然场景中的车标识别方法
CN109622404B (zh) 一种基于机器视觉的微工件自动分拣系统及方法
CN105427303B (zh) 一种变电站遗留物的视觉测量与估计方法
JP2015128228A (ja) 画像処理装置、画像処理システム、画像処理方法、画像処理プログラム、及び移動体制御装置
US20190164005A1 (en) Method for extracting features of a thermal image
JP6311461B2 (ja) 視線分析システムおよび視線分析装置
CN115908275A (zh) 基于深度学习的热态环件轧制变形几何状态在线测量方法
EP4352451A1 (en) Texture mapping to polygonal models for industrial inspections
CN112800890A (zh) 一种基于表面法向量的道路障碍检测方法
Golkar et al. Vision based length measuring system for ceramic tile borders

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C05 Deemed withdrawal (patent law before 1993)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130710