CN105740813A - 基于车内图像扫描人脸识别的空调自启动报警方法 - Google Patents

基于车内图像扫描人脸识别的空调自启动报警方法 Download PDF

Info

Publication number
CN105740813A
CN105740813A CN201610063986.6A CN201610063986A CN105740813A CN 105740813 A CN105740813 A CN 105740813A CN 201610063986 A CN201610063986 A CN 201610063986A CN 105740813 A CN105740813 A CN 105740813A
Authority
CN
China
Prior art keywords
image
car
face
characteristic vector
adaboost
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610063986.6A
Other languages
English (en)
Inventor
田雨农
张冠男
周秀田
于维双
陆振波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian Roiland Technology Co Ltd
Original Assignee
Dalian Roiland Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian Roiland Technology Co Ltd filed Critical Dalian Roiland Technology Co Ltd
Priority to CN201610063986.6A priority Critical patent/CN105740813A/zh
Publication of CN105740813A publication Critical patent/CN105740813A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60HARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • B60H1/00735Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models
    • B60H1/00742Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models by detection of the vehicle occupants' presence; by detection of conditions relating to the body of occupants, e.g. using radiant heat detectors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines

Abstract

本发明基于车内图像扫描人脸识别的空调自启动报警方法,车内采用多个摄像头进行图像采集并进行人脸识别,包括以下步骤:当引擎和车锁关闭时,启动多个摄像头,并监控车内温度;对每个摄像头采集的每张图像采用背景差分法得到各图像的候选目标区域;将所有候选目标区域内的图像进行人脸检测,判断是否为人;如果是,并且当车内温度在设定范围外,将该图像与预存的图像进行匹配;若匹配成功,则开启车内空调系统,并将采集的图像发送至车主的智能终端;若匹配不成功,将采集的图像发送至车主的智能终端并询问是否开启车内空调系统,等待车主指令。本发明有效填补该方向空白;采用PCA与AdaBoost联合的方法,有效提高检测速度。

Description

基于车内图像扫描人脸识别的空调自启动报警方法
技术领域
本发明涉及一种基于图像扫描人脸识别的空调自启动方法。
背景技术
随着生活水平的提高,车辆成为人们生活密不可分的一部分,但并非所有人都对车辆信息十分了解。夏日高温,有些车主或其家属粗心将孩子留在车上,空调的关闭以及车内持续的高温会导致孩子脱水死亡。而现有的空调自启动系统均为定时启动,并不会因车内存在生命而开启,因此仍然会有悲剧发生。
目前,尚且没有对该情况的发生有相应的防范及处理措施,也并没有使用图像处理手段完成空调自启动的相关技术。
发明内容
针对现有技术中存在的上述不足之处,本发明提出了一种利用图像扫描以及人脸识别技术,最终实现空调自启动的方法。该方法可以对车内扫描,根据判断是否车内有人做空调自启动与否的操作。
本发明采用的技术方案如下:基于车内图像扫描人脸识别的空调自启动报警方法,车内采用多个摄像头进行图像采集并进行人脸识别,包括以下步骤:
S1.当引擎和车锁关闭时,启动多个摄像头,并监控车内温度;
S2.对车内进行图像采集;
S3.对每个摄像头采集的每张图像采用背景差分法得到各图像的候选目标区域;
S4.将所有候选目标区域内的图像进行人脸检测,判断车内是否有人;如果没有,则在设定时间后返回对车内进行图像采集步骤;如果有,并且当车内温度在设定范围外,将该图像与预存的图像进行匹配;
S5.若匹配成功,则开启车内空调系统,并将采集的图像发送至车主的智能终端;若匹配不成功,将采集的图像发送至车主的智能终端并询问是否开启车内空调系统,等待车主指令。
所述对车内进行图像采集具体为:每个摄像头按多个设定角度旋转对车内进行图像采集。
所述将所有候选目标区域内的图像进行人脸检测,判断车内是否有人包括以下步骤:
1)AdaBoost网络训练:预先采集人脸与非人脸图片分别作为正、负样本,将所有图片统一成设定尺寸,并提取每幅图片的PCA特征向量;将正、负样本的特征向量进行k均值聚类得到聚类中心;将聚类中心作为输入、表示正负样本的标签作为输出,对AdaBoost网络参数进行训练,得到AdaBoost网络参数;
2)AdaBoost网络测试:对每个候选目标区域内的图像提取PCA特征向量,通过AdaBoost网络进行判断;输出结果为1,表示该目标区域中包含人脸,即车内有人;否则表示车内无人。
所述将该图像与预存的图像进行匹配包括以下步骤:
提取该图像目标区域的PCA特征向量;将PCA特征向量与预存图像的PCA特征向量进行匹配,即通过欧氏距离得到两个向量的相似度;
对眼睛、嘴、胎记的PCA特征向量采用Hausdorff距离得到匹配度;
当相似度和匹配度均超过阈值时,则表示该图像目标区域中的人是家人;否则不是家人。
本发明具有以下优点及有益效果:
1.本发明利用图像处理人脸识别的方法触发空调自启动方法,有效填补该方向空白。
2.采用PCA与AdaBoost联合的方法进行人脸检测判断车内是否有人,有效提高检测速度。
3.判断是否为家人时,采用模板匹配及关键部位特征相关的方法,达到更好的识别准确度。
附图说明
图1为本发明方法流程图。
具体实施方式
下面结合附图及实施例对本发明做进一步的详细说明。
本发明的目的在于汽车车门上锁后,对车内进行图像扫描,人脸检测及识别,当发现孩子被留在车内后,并且车内温度在正常范围外,则触发自动开启空调系统进行升降温操作.
如图1所示,为了实现上述目的,本发明的具体技术方案是:
S1.系统初始化,采集车内无人状态时背景图像B(人为控制拍摄)。摄像头按固定角度θ旋转拍摄。人为输入车主个人信息,家人面部图像Q及与车主关系信息。
S2.当系统检测到车辆车锁关闭并且引擎关闭时,会输出一个信号开启车内摄像头拍照功能。系统输出数字信号0、1,只有1时,摄像头方能启动。此时车内实时进行温度的监控。
S3.摄像头按固定角度旋转拍照F,实行车内扫描,将每张图片与先验情况下的背景图片相减F-B,得到图像C。
由于不同光照下图像灰度值会有很大变化,因此在与背景相减时需要对图像做预处理,为了增加图像对比度,本系统采用中值滤波去噪声的方法消除光照带来的影响。
S4.将图像C用大津法二值化并做标记连通后,确定的连通区域,对应的图像F坐标区域即为目标区域,用来判断是否车内有人。
S5.得到目标区域后,检测该区域物体是否有人。该部分对于是否是人的判断基于人脸检测,PCA+AdaBoost的训练学习。
训练学习方法及步骤如下:
i>采集大量人脸的正样本与非人脸(如车内座椅等)的负样本,将所有训练样本采用最近邻插值或双线性插值法,统一成一固定尺寸,提取每幅图片特征即PCA特征向量。
ii>将正负样本的特征向量进行k均值聚类,将聚类得到的带标签的正负样本对AdaBoost网络参数(如弱分类器的方向及阈值、强分类器的阈值)训练,将聚类中心作为输入、表示正负样本的标签作为输出,得到AdaBoost网络参数。
测试目标区域是否有人的方法是:提取目标区域的PCA(PrincipalComponentAnalysis)特征向量,提供给已训练好的AdaBoost网络,可以得到0或1的判别结果,0对应结果为否,1对应结果为有人。
S6.当车内判定有人停留的情况下,车内温度传感器实时的将温度信息提供给系统,并且进行是否为家中亲人的判断。
人脸识别方法采用模板匹配的办法,提取采集图片人脸部分D,与系统初始化存储的家人人脸图像Q进行匹配运算,采用欧氏距离计算二者PCA特征向量的相似度,并对对眼睛、嘴、胎记部位的PCA特征向量采用Hausdorff距离来度量匹配程度。在家人人脸图像Q中截取眼睛、嘴、胎记部位的图像作为眼睛、嘴、胎记的模板。
若匹配运算结果相似度和Hausdorff距离值均超过阈值,则认为是家人被遗留在车上。
欧氏距离公式如下:
d = s q r t ( Σ i ( x i - y i ) 2 )
其中,d为欧式距离;xi为图片人脸D对应的PCA向量中的每个元素,yi为模板图像Q对应的PCA向量中的每个元素,i为PCA向量维数。
Hausdorff距离公式如下:
图片人脸D对应的PCA向量A={a1,…,ap},模板图像Q对应的PCA向量B={b1,…,bq},Hausdorff距离定义为H(A,B)=max(h(A,B),h(B,A))
其中,h(A,B)=‖a-b‖;a=max(A),b=min(B);
h(B,A)=‖b-a‖;a=min(A);b=max(B);
‖·‖是点集A和B点集间的距离范式(如:L2或Euclidean距离)。
S7.车内有人情况下,温度需要控制在范围设定温度T1<检测温度T<设定温度T2内。当车内实时检测温度在该范围内则空调不工作,并继续对车内温度持续监控。若温度大于T2或者小于T1时,并且确定车内遗留为家人时,系统给空调开启信号,进行相应的升降温操作,并将图像通过无线向车主发送。若不是家人,则向车主发送图像信息的同时,发送是否开启空调的请求,达到手机与车辆系统的交互。如图1所示。

Claims (4)

1.基于车内图像扫描人脸识别的空调自启动报警方法,其特征在于车内采用多个摄像头进行图像采集并进行人脸识别,包括以下步骤:
S1.当引擎和车锁关闭时,启动多个摄像头,并监控车内温度;
S2.对车内进行图像采集;
S3.对每个摄像头采集的每张图像采用背景差分法得到各图像的候选目标区域;
S4.将所有候选目标区域内的图像进行人脸检测,判断车内是否有人;如果没有,则在设定时间后返回对车内进行图像采集步骤;如果有,并且当车内温度在设定范围外,将该图像与预存的图像进行匹配;
S5.若匹配成功,则开启车内空调系统,并将采集的图像发送至车主的智能终端;若匹配不成功,将采集的图像发送至车主的智能终端并询问是否开启车内空调系统,等待车主指令。
2.根据权利要求1所述的基于车内图像扫描人脸识别的空调自启动报警方法,其特征在于,所述对车内进行图像采集具体为:每个摄像头按多个设定角度旋转对车内进行图像采集。
3.根据权利要求1所述的基于车内图像扫描人脸识别的空调自启动报警方法,其特征在于,所述将所有候选目标区域内的图像进行人脸检测,判断车内是否有人包括以下步骤:
1)AdaBoost网络训练:预先采集人脸与非人脸图片分别作为正、负样本,将所有图片统一成设定尺寸,并提取每幅图片的PCA特征向量;将正、负样本的特征向量进行k均值聚类得到聚类中心;将聚类中心作为输入、表示正负样本的标签作为输出,对AdaBoost网络参数进行训练,得到AdaBoost网络参数;
2)AdaBoost网络测试:对每个候选目标区域内的图像提取PCA特征向量,通过AdaBoost网络进行判断;输出结果为1,表示该目标区域中包含人脸,即车内有人;否则表示车内无人。
4.根据权利要求1所述的基于车内图像扫描人脸识别的空调自启动报警方法,其特征在于,所述将该图像与预存的图像进行匹配包括以下步骤:
提取该图像目标区域的PCA特征向量;将PCA特征向量与预存图像的PCA特征向量进行匹配,即通过欧氏距离得到两个向量的相似度;
对眼睛、嘴、胎记的PCA特征向量采用Hausdorff距离得到匹配度;
当相似度和匹配度均超过阈值时,则表示该图像目标区域中的人是家人;否则不是家人。
CN201610063986.6A 2016-01-28 2016-01-28 基于车内图像扫描人脸识别的空调自启动报警方法 Pending CN105740813A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610063986.6A CN105740813A (zh) 2016-01-28 2016-01-28 基于车内图像扫描人脸识别的空调自启动报警方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610063986.6A CN105740813A (zh) 2016-01-28 2016-01-28 基于车内图像扫描人脸识别的空调自启动报警方法

Publications (1)

Publication Number Publication Date
CN105740813A true CN105740813A (zh) 2016-07-06

Family

ID=56247086

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610063986.6A Pending CN105740813A (zh) 2016-01-28 2016-01-28 基于车内图像扫描人脸识别的空调自启动报警方法

Country Status (1)

Country Link
CN (1) CN105740813A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106427869A (zh) * 2016-11-10 2017-02-22 北京小米移动软件有限公司 车辆控制方法及装置
CN106926664A (zh) * 2017-03-07 2017-07-07 北京汽车研究总院有限公司 一种车用空调的调节控制方法、装置、系统及汽车
CN106970552A (zh) * 2017-02-09 2017-07-21 中控智慧科技股份有限公司 一种开关控制方法、智能开关及移动终端
CN107560090A (zh) * 2017-09-20 2018-01-09 珠海格力电器股份有限公司 空调的送风控制方法及装置、终端
CN108437741A (zh) * 2018-03-15 2018-08-24 斑马网络技术有限公司 车内儿童的保护处理方法与装置
WO2018187987A1 (zh) * 2017-04-12 2018-10-18 深圳市南北汽车美容有限公司 脸部识别分区空调的方法以及车载空调
CN108805026A (zh) * 2017-05-03 2018-11-13 通用汽车环球科技运作有限责任公司 用于检测和分类与车辆相关联的对象的方法和设备
CN109165540A (zh) * 2018-06-13 2019-01-08 深圳市感动智能科技有限公司 一种基于先验候选框选择策略的行人搜索方法和装置
CN109670436A (zh) * 2018-12-13 2019-04-23 北京旷视科技有限公司 车辆驾驶人员身份验证方法、装置及电子设备
CN110549825A (zh) * 2018-05-30 2019-12-10 本田技研工业株式会社 风向控制装置
CN110794723A (zh) * 2018-08-02 2020-02-14 郑州宇通客车股份有限公司 一种车辆用电设备的智能控制方法及装置
CN116962875A (zh) * 2023-09-20 2023-10-27 深圳市壹方智能电子科技有限公司 一种基于人脸识别自启动的车载摄像头模组及其控制方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105128627A (zh) * 2015-09-07 2015-12-09 湖南科技大学 汽车超温防护装置
CN105243782A (zh) * 2015-10-23 2016-01-13 深圳市十方联智科技有限公司 车辆的监控方法和汽车、行车记录仪

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105128627A (zh) * 2015-09-07 2015-12-09 湖南科技大学 汽车超温防护装置
CN105243782A (zh) * 2015-10-23 2016-01-13 深圳市十方联智科技有限公司 车辆的监控方法和汽车、行车记录仪

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
宋茹: "基于复杂场景的人脸检测与人脸跟踪的研究与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106427869A (zh) * 2016-11-10 2017-02-22 北京小米移动软件有限公司 车辆控制方法及装置
CN106970552A (zh) * 2017-02-09 2017-07-21 中控智慧科技股份有限公司 一种开关控制方法、智能开关及移动终端
CN106970552B (zh) * 2017-02-09 2023-11-14 中控智慧科技股份有限公司 一种开关控制方法、智能开关及移动终端
CN106926664A (zh) * 2017-03-07 2017-07-07 北京汽车研究总院有限公司 一种车用空调的调节控制方法、装置、系统及汽车
WO2018187987A1 (zh) * 2017-04-12 2018-10-18 深圳市南北汽车美容有限公司 脸部识别分区空调的方法以及车载空调
CN108805026A (zh) * 2017-05-03 2018-11-13 通用汽车环球科技运作有限责任公司 用于检测和分类与车辆相关联的对象的方法和设备
CN107560090A (zh) * 2017-09-20 2018-01-09 珠海格力电器股份有限公司 空调的送风控制方法及装置、终端
CN108437741A (zh) * 2018-03-15 2018-08-24 斑马网络技术有限公司 车内儿童的保护处理方法与装置
CN110549825A (zh) * 2018-05-30 2019-12-10 本田技研工业株式会社 风向控制装置
CN109165540A (zh) * 2018-06-13 2019-01-08 深圳市感动智能科技有限公司 一种基于先验候选框选择策略的行人搜索方法和装置
CN109165540B (zh) * 2018-06-13 2022-02-25 深圳市感动智能科技有限公司 一种基于先验候选框选择策略的行人搜索方法和装置
CN110794723A (zh) * 2018-08-02 2020-02-14 郑州宇通客车股份有限公司 一种车辆用电设备的智能控制方法及装置
CN109670436A (zh) * 2018-12-13 2019-04-23 北京旷视科技有限公司 车辆驾驶人员身份验证方法、装置及电子设备
CN116962875A (zh) * 2023-09-20 2023-10-27 深圳市壹方智能电子科技有限公司 一种基于人脸识别自启动的车载摄像头模组及其控制方法
CN116962875B (zh) * 2023-09-20 2024-03-01 深圳市壹方智能电子科技有限公司 一种基于人脸识别自启动的车载摄像头模组及其控制方法

Similar Documents

Publication Publication Date Title
CN105740813A (zh) 基于车内图像扫描人脸识别的空调自启动报警方法
CN110298278B (zh) 一种基于人工智能的地下停车库行人车辆监测方法
CN108009528B (zh) 基于Triplet Loss的人脸认证方法、装置、计算机设备和存储介质
CN108921100B (zh) 一种基于可见光图像与红外图像融合的人脸识别方法及系统
CN108229362B (zh) 一种基于门禁系统的双目人脸识别活体检测方法
CN105844128B (zh) 身份识别方法和装置
CN106372576A (zh) 一种基于深度学习的智能室内入侵检测方法及系统
CN103434484B (zh) 车载识别认证装置、移动终端、智能车钥控制系统及方法
CN106803301A (zh) 一种基于深度学习的人脸识别门禁方法及系统
US20180247504A1 (en) Identification of suspicious persons using audio/video recording and communication devices
CN109145742A (zh) 一种行人识别方法及系统
US9418426B1 (en) Model-less background estimation for foreground detection in video sequences
US20180173940A1 (en) System and method for matching an object in captured images
CN109243030B (zh) 一种夜间非接触式门禁系统的控制方法及系统
CN111241932A (zh) 汽车展厅客流检测与分析系统、方法及存储介质
KR20140074303A (ko) 생체인식 유형의 접근제어시스템에 대한 부정 검출
Huang et al. Siamsta: Spatio-temporal attention based siamese tracker for tracking uavs
CN109508659A (zh) 一种用于人行横道的人脸识别系统及方法
CN110781778B (zh) 一种门禁控制方法、装置、存储介质及家居系统
CN111554006B (zh) 智能锁及智能解锁方法
CN114821696A (zh) 材料光谱法
CN109087411A (zh) 一种基于分布式摄像头阵列的人脸识别锁
Wang et al. The color identification of automobiles for video surveillance
CN115376080A (zh) 相机识别
US20220374643A1 (en) Counterfeit image detection

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160706