CN110472566B - 一种高精度的模糊人脸识别方法 - Google Patents

一种高精度的模糊人脸识别方法 Download PDF

Info

Publication number
CN110472566B
CN110472566B CN201910748141.4A CN201910748141A CN110472566B CN 110472566 B CN110472566 B CN 110472566B CN 201910748141 A CN201910748141 A CN 201910748141A CN 110472566 B CN110472566 B CN 110472566B
Authority
CN
China
Prior art keywords
face
image
parameterization
face image
recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910748141.4A
Other languages
English (en)
Other versions
CN110472566A (zh
Inventor
黎宜昕
胡贤良
方建勇
秦林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xuhui Excellence Health Information Technology Co ltd
Original Assignee
Xuhui Excellence Health Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xuhui Excellence Health Information Technology Co ltd filed Critical Xuhui Excellence Health Information Technology Co ltd
Priority to CN201910748141.4A priority Critical patent/CN110472566B/zh
Publication of CN110472566A publication Critical patent/CN110472566A/zh
Application granted granted Critical
Publication of CN110472566B publication Critical patent/CN110472566B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明提供了一种针对模糊人脸图像的神经网络人脸识别方法;通过解析视频流,得到N幅视频帧;利用人脸检测算法识别出低分辨率的人脸图像;针对低分辨率的人脸图像,通过相场方法优化算法进行预处理,得到清晰的人脸图像;利用SVM分解算法进行人脸模型参数化;将参数化模型输入到卷积神经网络中进行训练;对结果进行反参数化,通过分类器得出识别结果,本发明将深度学习算法与传统的模糊优化算法相结合,可以在高精度下实现模糊人脸的识别,从而有效地提高识别率,减少计算量。

Description

一种高精度的模糊人脸识别方法
技术领域
本发明属于图像识别技术领域,具体涉及一种高精度的模糊人脸识别方法。
背景技术
人脸识别是是基于人的脸部特征信息进行身份识别的一种生物识别技术,它由计算机分析人脸图像,从图像中提取有效信息并自动鉴别,人脸识别技术广泛应用于安全系统及人机交互方面,已成为计算机视觉和模式识别领域中重要的研究课题之一。
目前,人脸识别的采集设备大多是高清设备采集,在更多实时采集下,会产生更多模糊人像。过去实验中有许多模糊图像的处理算法,而采取相场方法与深度神经网络算法结合的方式进行人脸识别有计算过程简单、分类速度快的优势,并且可以通过预处理减少光照与图像旋转等因素的影响。
发明内容
本发明提供了一种高精度的模糊人脸识别方法,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种高精度的模糊人脸识别方法,包括以下步骤:
S1、视频流解析:获取摄像机拍摄的视频流,将视频流解析成N幅视频帧,每一幅视频帧再解码成RGB图片;
S2、图像获取:检测视频流解析得到的图像中是否有人脸,若有人脸,则保留当前视频帧;若没有人脸,舍弃当前视频帧;
S3、模糊人脸处理:利用相场优化方法对模糊人脸进行预处理,使人脸在理论范围内到达尽量清晰的标准,增强识别的效率与精度;
S4、清晰人脸参数化与识别:将图像以更简单的参数平面表示,可以使深度学习的输入特征更加明确,加快训练的效率;
在S3中所述模糊人脸预处理步骤包括:
S3.1:人脸图像预处理:对图像进行降噪,灰度值平衡预处理操作,降低人脸受环境因素影响。
S3.2:相场优化模型处理步骤:
S3.2.1:对图像灰度值进行检测与分割,建立人脸边界模型;
S3.2.2:根据下述的相场公式来表示人脸图像,计算目标函数值J:
Figure GDA0003508387360000021
Figure GDA0003508387360000022
S3.2.3:将目标函数值J最小化,得到清晰化的人脸图像灰度分布φ;
S3.2.4:将灰度值分布转换为清晰化的人脸图像分布;
在S4中清晰人脸参数化与识别步骤包括:
S4.1:人脸图像参数化:利用SVM方法,利用已有的经验将图像,传统的SVM算法可以通过提取图像X的特征值λ来达到对图像的参数化,用α表示,实际操作类似于神经网络的单层结构,利用参数化能够集中特征,加快神经网络的训练:
Figure GDA0003508387360000023
S4.2:人脸图像识别:利用深度学习的框架对参数化的人脸图像进行训练,采用适用于此模型的卷积核,最后通过反参数化,达到模糊图像高精度高效识别的目的。
与现有技术相比,本发明的有益效果是:
通过相场方法去模糊以及图片特征值参数化的方法,借助深度学习网络训练的模式,能够有效提高识别率,减少计算量。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1是本发明用于高精度模糊图像的人脸识别方法的流程图;
图2是本发明整体神经网络结构的设计方式。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参考图1,本发明提供以下技术方案:一种高精度的模糊人脸识别方法,包括以下步骤:
S1、视频流解析:获取摄像机拍摄的视频流,将视频流解析成N幅视频帧,每一幅视频帧再解码成RGB图片;
S2、图像获取:检测视频流解析得到的图像中是否有人脸,若有人脸,则保留当前视频帧;若没有人脸,舍弃当前视频帧;
S3、模糊人脸处理:利用相场优化方法对模糊人脸进行预处理,使人脸在理论范围内到达尽量清晰的标准,增强识别的效率与精度;
S4、清晰人脸参数化与识别:将图像以更简单的参数平面表示,可以使深度学习的输入特征更加明确,加快训练的效率;
在S3中所述模糊人脸预处理步骤包括:
S3.1:人脸图像预处理:对图像进行降噪,灰度值平衡预处理操作,降低人脸受环境因素影响。
S3.2:相场优化模型处理步骤:
S3.2.1:对图像灰度值进行检测与分割,建立人脸边界模型;
S3.2.2:根据下述的相场公式来表示人脸图像,计算目标函数值J:
Figure GDA0003508387360000041
Figure GDA0003508387360000042
S3.2.3:将目标函数值J最小化,得到清晰化的人脸图像灰度分布φ;
S3.2.4:将灰度值分布转换为清晰化的人脸图像分布;
在S4中清晰人脸参数化与识别步骤包括:
S4.1:人脸图像参数化:利用SVM方法,利用已有的经验将图像,传统的SVM算法可以通过提取图像X的特征值λ来达到对图像的参数化,用α表示,实际操作类似于神经网络的单层结构。利用参数化能够集中特征,加快神经网络的训练:
Figure GDA0003508387360000043
S4.2:人脸图像识别:利用深度学习的框架对参数化的人脸图像进行训练,采用适用于此模型的卷积核,最后通过反参数化,达到模糊图像高精度高效识别的目的。
注意到此处的参数化可以将
Figure GDA0003508387360000044
看作神经网络的参数值,
Figure GDA0003508387360000045
看作阈值,因此在实际操作中,由已有的深度学习框架在首尾添加一层不参与反馈的神经网络所构成,其具体结构可参考图2。
人脸图像识别步骤:利用深度学习的框架对参数化的人脸图像进行训练,采用适用于此模型的卷积核,最后通过反参数化步骤进行反馈信息传递,达到训练模糊图像高精度高效识别的目的。
具体的,所述模糊人脸处理模块包括人脸图像预处理单元和相场优化模型处理单元,人脸图像预处理单元对图像进行降噪,灰度值平衡预处理操作,降低人脸受环境因素影响;相场优化模型处理单元先对图像灰度值进行检测与分割,建立人脸边界模型;然后根据下述的相场公式来表示人脸图像,计算目标函数值J:
Figure GDA0003508387360000051
Figure GDA0003508387360000052
再将目标函数值J最小化,得到清晰化的人脸图像灰度分布φ;
最后将灰度值分布转换为清晰化的人脸图像分布。
具体的,所述清晰人脸参数化与识别模块包括人脸图像参数化单元和人脸图像识别单元,人脸图像参数化单元利用SVM方法,利用已有的经验将图像,传统的SVM算法可以通过提取图像X的特征值λ来达到对图像的参数化,用α表示,实际操作类似于神经网络的单层结构。利用参数化能够集中特征,加快神经网络的训练:
Figure GDA0003508387360000053
人脸图像识别单元利用深度学习的框架对参数化的人脸图像进行训练,采用适用于此模型的卷积核,最后通过反参数化,达到模糊图像高精度高效识别的目的。
以上本发明的技术方案,与现有相比,其显著的有益效果在于,通过相场方法去模糊以及图片特征值参数化的方法,借助深度学习网络训练的模式,能够有效提高识别率,减少计算量。
最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行同替换。凡在本发明的精神和原则之内,所作的任何修改、同替换、改进,均应包含在本发明的保护范围之内。

Claims (1)

1.一种高精度的模糊人脸识别方法,其特征在于:包括以下步骤:
S1、视频流解析:获取摄像机拍摄的视频流,将视频流解析成N幅视频帧,每一幅视频帧再解码成RGB图片;
S2、图像获取:检测视频流解析得到的图像中是否有人脸,若有人脸,则保留当前视频帧;若没有人脸,舍弃当前视频帧;
S3、模糊人脸处理:利用相场优化方法对模糊人脸进行预处理,使人脸在理论范围内到达尽量清晰的标准,增强识别的效率与精度;
S4、清晰人脸参数化与识别:将图像以更简单的参数平面表示,能够使深度学习的输入特征更加明确,加快训练的效率;
在S3中所述模糊人脸预处理步骤包括:
S3.1:人脸图像预处理:对图像进行降噪,灰度值平衡预处理操作,降低人脸受环境因素影响;
S3.2:相场优化模型处理步骤:
S3.2.1:对图像灰度值进行检测与分割,建立人脸边界模型;
S3.2.2:根据下述的相场公式来表示人脸图像,计算目标函数值J:
Figure FDA0003508387350000011
Figure FDA0003508387350000012
S3.2.3:将目标函数值J最小化,得到清晰化的人脸图像灰度分布φ;
S3.2.4:将灰度值分布转换为清晰化的人脸图像分布;
在S4中清晰人脸参数化与识别步骤包括:
S4.1:人脸图像参数化:利用SVM方法,利用已有的经验将图像,传统的SVM算法可以通过提取图像X的特征值λ来达到对图像的参数化,用α表示,实际操作类似于神经网络的单层结构,利用参数化能够集中特征,加快神经网络的训练:
Figure FDA0003508387350000021
S4.2:人脸图像识别:利用深度学习的框架对参数化的人脸图像进行训练,采用适用于此模型的卷积核,最后通过反参数化,达到模糊图像高精度高效识别的目的。
CN201910748141.4A 2019-08-14 2019-08-14 一种高精度的模糊人脸识别方法 Active CN110472566B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910748141.4A CN110472566B (zh) 2019-08-14 2019-08-14 一种高精度的模糊人脸识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910748141.4A CN110472566B (zh) 2019-08-14 2019-08-14 一种高精度的模糊人脸识别方法

Publications (2)

Publication Number Publication Date
CN110472566A CN110472566A (zh) 2019-11-19
CN110472566B true CN110472566B (zh) 2022-04-26

Family

ID=68510793

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910748141.4A Active CN110472566B (zh) 2019-08-14 2019-08-14 一种高精度的模糊人脸识别方法

Country Status (1)

Country Link
CN (1) CN110472566B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109214310A (zh) * 2018-08-16 2019-01-15 安徽超清科技股份有限公司 提高人脸识别效率的方法和人脸识别系统
CN111460939A (zh) * 2020-03-20 2020-07-28 深圳市优必选科技股份有限公司 一种去模糊的人脸识别方法、系统和一种巡检机器人
CN111488865B (zh) * 2020-06-28 2020-10-27 腾讯科技(深圳)有限公司 图像优化方法、装置、计算机存储介质以及电子设备
CN112614069B (zh) * 2020-12-26 2022-08-30 数源科技股份有限公司 人脸图片降维模糊预处理方法
CN113409207B (zh) * 2021-06-15 2023-12-08 广州光锥元信息科技有限公司 一种人脸图像清晰度提升方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101826092A (zh) * 2009-08-24 2010-09-08 张艳红 基于序列仿真技术的图像搜索引擎
CN106951867A (zh) * 2017-03-22 2017-07-14 成都擎天树科技有限公司 基于卷积神经网络的人脸识别方法、装置、系统及设备
CN107730458A (zh) * 2017-09-05 2018-02-23 北京飞搜科技有限公司 一种基于生成式对抗网络的模糊人脸重建方法及系统
CN109657587A (zh) * 2018-12-10 2019-04-19 南京甄视智能科技有限公司 用于人脸识别的侧脸质量评估方法和系统
CN109800657A (zh) * 2018-12-25 2019-05-24 天津大学 一种针对模糊人脸图像的卷积神经网络人脸识别方法
CN110084119A (zh) * 2019-03-26 2019-08-02 安徽艾睿思智能科技有限公司 基于深度学习的低分辨率人脸图像识别方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101826092A (zh) * 2009-08-24 2010-09-08 张艳红 基于序列仿真技术的图像搜索引擎
CN106951867A (zh) * 2017-03-22 2017-07-14 成都擎天树科技有限公司 基于卷积神经网络的人脸识别方法、装置、系统及设备
CN107730458A (zh) * 2017-09-05 2018-02-23 北京飞搜科技有限公司 一种基于生成式对抗网络的模糊人脸重建方法及系统
CN109657587A (zh) * 2018-12-10 2019-04-19 南京甄视智能科技有限公司 用于人脸识别的侧脸质量评估方法和系统
CN109800657A (zh) * 2018-12-25 2019-05-24 天津大学 一种针对模糊人脸图像的卷积神经网络人脸识别方法
CN110084119A (zh) * 2019-03-26 2019-08-02 安徽艾睿思智能科技有限公司 基于深度学习的低分辨率人脸图像识别方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
Fusing color and texture features for blurred face recognition;Du Xing等;《红外与激光工程》;20141231;第43卷(第12期);第4192-4197页 *
低质量图像模糊人脸识别的研究;刘学平;《中国优秀硕士学位论文全文数据库 信息科技辑》;20100815(第8期);I138-563 *
基于LPQ和Fisherfaces的模糊人脸识别;储久良等;《河南理工大学学报( 自然科学版)》;20151231;第34卷(第6期);第826-830页 *
基于模糊规则的人脸识别方法;彭俊石;《中国优秀硕士学位论文全文数据库 信息科技辑》;20131015(第10期);I138-412 *

Also Published As

Publication number Publication date
CN110472566A (zh) 2019-11-19

Similar Documents

Publication Publication Date Title
CN110472566B (zh) 一种高精度的模糊人脸识别方法
Wang et al. Adaptive fusion for RGB-D salient object detection
WO2020108362A1 (zh) 人体姿态检测方法、装置、设备及存储介质
CN111370020A (zh) 一种将语音转换成唇形的方法、系统、装置和存储介质
CN111079764B (zh) 一种基于深度学习的低照度车牌图像识别方法及装置
CN110084130B (zh) 基于多目标跟踪的人脸筛选方法、装置、设备及存储介质
CN110660025B (zh) 一种基于gan网络的工业监控视频图像清晰化方法
CN105913002B (zh) 视频场景下在线自适应的异常事件检测方法
CN108647599B (zh) 结合3d跃层连接和循环神经网络的人体行为识别方法
CN112232204B (zh) 基于红外图像的活体检测方法
CN108073875A (zh) 一种基于单目摄像头的带噪音语音识别系统及方法
CN112232205B (zh) 移动端cpu实时多功能人脸检测方法
CN103037140B (zh) 一种基于块匹配的目标跟踪算法
CN112949451B (zh) 通过模态感知特征学习的跨模态目标跟踪方法及系统
CN117333753B (zh) 基于pd-yolo的火灾检测方法
CN109325472B (zh) 一种基于深度信息的人脸活体检测方法
CN112784835A (zh) 圆形印章的真实性识别方法、装置、电子设备及存储介质
CN114881867A (zh) 一种基于深度学习的图像去噪方法
CN110222647B (zh) 一种基于卷积神经网络的人脸活体检测方法
CN117496019B (zh) 一种驱动静态图像的图像动画处理方法及系统
Zhang et al. Hand gesture detection and segmentation based on difference background image with complex background
CN109410134A (zh) 一种基于图像块分类的自适应去噪方法
Zhang et al. EventMD: High-speed moving object detection based on event-based video frames
CN103136530A (zh) 在复杂工业环境下的视频图像中自动识别目标图像的方法
CN112200008A (zh) 一种社区监控场景下人脸属性识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A High Precision Fuzzy Face Recognition Method

Effective date of registration: 20231018

Granted publication date: 20220426

Pledgee: China Minsheng Banking Corp Wenzhou branch

Pledgor: XUHUI EXCELLENCE HEALTH INFORMATION TECHNOLOGY Co.,Ltd.

Registration number: Y2023980061645

PE01 Entry into force of the registration of the contract for pledge of patent right