CN110321843A - 一种基于深度学习的人脸择优算法 - Google Patents

一种基于深度学习的人脸择优算法 Download PDF

Info

Publication number
CN110321843A
CN110321843A CN201910598239.6A CN201910598239A CN110321843A CN 110321843 A CN110321843 A CN 110321843A CN 201910598239 A CN201910598239 A CN 201910598239A CN 110321843 A CN110321843 A CN 110321843A
Authority
CN
China
Prior art keywords
face
degree
angle
value
threshold value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910598239.6A
Other languages
English (en)
Other versions
CN110321843B (zh
Inventor
韩芳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Shidong Technology Co Ltd
Original Assignee
Hangzhou Shidong Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Shidong Technology Co Ltd filed Critical Hangzhou Shidong Technology Co Ltd
Priority to CN201910598239.6A priority Critical patent/CN110321843B/zh
Publication of CN110321843A publication Critical patent/CN110321843A/zh
Application granted granted Critical
Publication of CN110321843B publication Critical patent/CN110321843B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于深度学习的人脸择优算法,包括以下步骤;步骤一:将人脸检测得到的人脸区域图片归一化成96*96的BGR三通道数据格式,输入角度量化算法,得到角度量化值;步骤二、该值小于等于阈值(0.5),则丢掉该人脸区域图片;步骤三、该值大于阈值(0.5),将96*96的BGR三通道数据输入清晰度量化算法,得到清晰度量化值;步骤四、清晰度量化值小于等于阈值(0.5),则丢掉该人脸区域图片,若大于阈值(0.5),保留该人脸区域图片。本发明可以根据算法进行人脸角度择优,可以根据人脸图片的清晰度择优,提高了人脸图像的识别准确率,能够排选出最佳的人脸图形,保证了人脸识别效果,具有较好的推广性。

Description

一种基于深度学习的人脸择优算法
技术领域
本发明涉及人脸识别处理技术领域,具体为一种基于深度学习的人脸择优算法。
背景技术
随着深度学习在计算机视觉上的广泛应用,人脸识别已经落地于诸多项目,人脸识别包括了人脸检测、人脸择优、关键点定位、人脸对齐,人脸特征值提取和比对,在非约束(无感、非配合)条件下如何快捷有效的筛选出高质量的人脸图片,即人脸择优,是很重要的一环,在现实非约束条件下,被采集者以各种运动方向和角度对着摄像头,检测出的人脸有不同的俯仰角和侧视角度,适合做人脸识别的小角度人脸比较少,需要算法进行人脸角度择优,此外,人脸图片的清晰度也同样影响人脸识别效果;在现实非约束条件下,运动模糊、对焦模糊、不同光照条件下模糊如逆光和暗光、摄像机本身带来的噪点模糊等对人脸识别构成挑战;在软件方面,最直接的方式丢掉这些不适合做识别的人脸图片,本文提出了一种基于深度学习的人脸角度和清晰度量化筛选算法。
发明内容
本发明的目的在于提供一种基于深度学习的人脸择优算法,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种基于深度学习的人脸择优算法,包括以下步骤;
步骤一:将人脸检测得到的人脸区域图片归一化成96*96的BGR三通道数据格式,输入角度量化算法,得到角度量化值;
步骤二、该值小于等于阈值(0.5),则丢掉该人脸区域图片;
步骤三、该值大于阈值(0.5),将96*96的BGR三通道数据输入清晰度量化算法,得到清晰度量化值;
步骤四、清晰度量化值小于等于阈值(0.5),则丢掉该人脸区域图片,若大于阈值(0.5),保留该人脸区域图片。
优选的,所述角度量化算法为:
S1、将不同的俯仰角和侧视角度按大小分成五类,具体如下:
1).超大角度:侧视超过60度,俯视超过40度,仰视超过40度;
2).大角度:侧视45-60度,俯视30-40度,仰视30-40度;
3).中角度:侧视30-45度,俯视20-30度,仰视20-30度;
4).小角度:侧视15-30度,俯视10-20度,仰视10-20度;
5).正脸:侧视小于15度,俯视小于10度,仰视小于10度;
S2、如果人脸同时侧视和俯仰视,以最大的分级为准;
S3、训练五分类深度算法,最后得到各分类的概率值进行加权平均:
Score = [P(0-超大角度)* 0 + P(1-大角度)* 1 + P(2-中角度)* 2 + P(3-小角度)* 3 + P(4-正脸)* 4] / 4。
优选的,当所述Score小于等于该阈值时,丢掉该人脸区域图片。
优选的,所述清晰度量化算法为:
S1、将各种小角度人脸和正脸图片按清晰度等级分成三类:
1).清晰人脸:适合做人脸识别;
2).不确定:清晰度一般,有一部分适合做做人脸识别;
3).模糊人脸:不适合做人脸识别;
S2、训练三分类深度算法,最后得到各分类的概率值进行加权平均:
Score = [P(0-模糊)* 0 + P(1-不确定)* 1 + P(2-清晰人脸)* 2] / 2。
优选的,当所述Score大于该阈值时,保留该人脸区域图片。
本发明提出的一种基于深度学习的人脸择优算法,有益效果在于:本发明可以根据算法进行人脸角度择优,可以根据人脸图片的清晰度择优,提高了人脸图像的识别准确率,能够排选出最佳的人脸图形,保证了人脸识别效果,具有较好的推广性。
附图说明
图1为本发明所述一种基于深度学习的人脸择优算法的技术流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1、请参阅图1,本发明提供一种技术方案:一种基于深度学习的人脸择优算法,包括以下步骤;
步骤一:将人脸检测得到的人脸区域图片归一化成96*96的BGR三通道数据格式,输入角度量化算法,得到角度量化值;
所述角度量化算法为:
S1、将不同的俯仰角和侧视角度按大小分成五类,具体如下:
1).超大角度:侧视超过60度,俯视超过40度,仰视超过40度;
2).大角度:侧视45-60度,俯视30-40度,仰视30-40度;
3).中角度:侧视30-45度,俯视20-30度,仰视20-30度;
4).小角度:侧视15-30度,俯视10-20度,仰视10-20度;
5).正脸:侧视小于15度,俯视小于10度,仰视小于10度;
S2、如果人脸同时侧视和俯仰视,以最大的分级为准;
S3、训练五分类深度算法,最后得到各分类的概率值进行加权平均:
Score = [P(0-超大角度)* 0 + P(1-大角度)* 1 + P(2-中角度)* 2 + P(3-小角度)* 3 + P(4-正脸)* 4] / 4;
当所述Score小于等于该阈值时,丢掉该人脸区域图片;
收集不同角度的人脸数据,按上述要求分成五类,每类大概六千张左右,五千张用于训练,一千张用于测试,训练前需要将数据进行各种手段的增强,如转化成三通道的灰度图,空间投影变换,提取不同的人脸尺度,crop,各种色彩变换等等;
步骤二、该值小于等于阈值(0.5),则丢掉该人脸区域图片;
步骤三、该值大于阈值(0.5),将96*96的BGR三通道数据输入清晰度量化算法,得到清晰度量化值;
所述清晰度量化算法为:
S1、将各种小角度人脸和正脸图片按清晰度等级分成三类:
1).清晰人脸:适合做人脸识别;
2).不确定:清晰度一般,有一部分适合做做人脸识别;
3).模糊人脸:不适合做人脸识别;
S2、训练三分类深度算法,最后得到各分类的概率值进行加权平均:
Score = [P(0-模糊)* 0 + P(1-不确定)* 1 + P(2-清晰人脸)* 2] / 2;
当所述Score大于该阈值时,保留该人脸区域图片;
收集不同清晰度人脸数据,按上述要求分成五类,每类大概一万张左右,八千张用于训练,两千张用于测试,训练前需要将数据进行各种手段的增强,如转化成三通道的灰度图,空间投影变换,提取不同的人脸尺度,crop,各种色彩变换等;
步骤四、清晰度量化值小于等于阈值(0.5),则丢掉该人脸区域图片,若大于阈值(0.5),保留该人脸区域图片。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (5)

1.一种基于深度学习的人脸择优算法,其特征在于:包括以下步骤;
步骤一:将人脸检测得到的人脸区域图片归一化成96*96的BGR三通道数据格式,输入角度量化算法,得到角度量化值;
步骤二、该值小于等于阈值(0.5),则丢掉该人脸区域图片;
步骤三、该值大于阈值(0.5),将96*96的BGR三通道数据输入清晰度量化算法,得到清晰度量化值;
步骤四、清晰度量化值小于等于阈值(0.5),则丢掉该人脸区域图片,若大于阈值(0.5),保留该人脸区域图片。
2.根据权利要求1所述的一种基于深度学习的人脸择优算法,其特征在于:所述角度量化算法为:
S1、将不同的俯仰角和侧视角度按大小分成五类,具体如下:
1).超大角度:侧视超过60度,俯视超过40度,仰视超过40度;
2).大角度:侧视45-60度,俯视30-40度,仰视30-40度;
3).中角度:侧视30-45度,俯视20-30度,仰视20-30度;
4).小角度:侧视15-30度,俯视10-20度,仰视10-20度;
5).正脸:侧视小于15度,俯视小于10度,仰视小于10度;
S2、如果人脸同时侧视和俯仰视,以最大的分级为准;
S3、训练五分类深度算法,最后得到各分类的概率值进行加权平均:
Score = [P(0-超大角度)* 0 + P(1-大角度)* 1 + P(2-中角度)* 2 + P(3-小角度)* 3 + P(4-正脸)* 4] / 4。
3.根据权利要求2所述的一种基于深度学习的人脸择优算法,其特征在于:当所述Score小于等于该阈值时,丢掉该人脸区域图片。
4.根据权利要求1所述的一种基于深度学习的人脸择优算法,其特征在于:所述清晰度量化算法为:
S1、将各种小角度人脸和正脸图片按清晰度等级分成三类:
1).清晰人脸:适合做人脸识别;
2).不确定:清晰度一般,有一部分适合做做人脸识别;
3).模糊人脸:不适合做人脸识别;
S2、训练三分类深度算法,最后得到各分类的概率值进行加权平均:
Score = [P(0-模糊)* 0 + P(1-不确定)* 1 + P(2-清晰人脸)* 2] / 2。
5.根据权利要求4所述的一种基于深度学习的人脸择优算法,其特征在于:当所述Score大于该阈值时,保留该人脸区域图片。
CN201910598239.6A 2019-07-04 2019-07-04 一种基于深度学习的人脸择优方法 Active CN110321843B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910598239.6A CN110321843B (zh) 2019-07-04 2019-07-04 一种基于深度学习的人脸择优方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910598239.6A CN110321843B (zh) 2019-07-04 2019-07-04 一种基于深度学习的人脸择优方法

Publications (2)

Publication Number Publication Date
CN110321843A true CN110321843A (zh) 2019-10-11
CN110321843B CN110321843B (zh) 2021-11-09

Family

ID=68122714

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910598239.6A Active CN110321843B (zh) 2019-07-04 2019-07-04 一种基于深度学习的人脸择优方法

Country Status (1)

Country Link
CN (1) CN110321843B (zh)

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102799877A (zh) * 2012-09-11 2012-11-28 上海中原电子技术工程有限公司 人脸图像筛选方法及系统
CN105631439A (zh) * 2016-02-18 2016-06-01 北京旷视科技有限公司 人脸图像处理方法和装置
US20170004358A1 (en) * 2010-08-26 2017-01-05 Blast Motion Inc. Motion capture system that combines sensors with different measurement ranges
CN106446851A (zh) * 2016-09-30 2017-02-22 厦门大图智能科技有限公司 一种基于可见光的人脸优选方法及系统
CN106682598A (zh) * 2016-12-14 2017-05-17 华南理工大学 一种基于级联回归的多姿态的人脸特征点检测方法
CN107169521A (zh) * 2017-05-24 2017-09-15 上海评驾科技有限公司 一种基于手机加速度传感器的交通模式识别方法
CN108197547A (zh) * 2017-12-26 2018-06-22 深圳云天励飞技术有限公司 人脸姿态估计方法、装置、终端及存储介质
CN108228872A (zh) * 2017-07-21 2018-06-29 北京市商汤科技开发有限公司 人脸图像去重方法和装置、电子设备、存储介质、程序
CN108875485A (zh) * 2017-09-22 2018-11-23 北京旷视科技有限公司 一种底图录入方法、装置及系统
CN108875452A (zh) * 2017-05-11 2018-11-23 北京旷视科技有限公司 人脸识别方法、装置、系统和计算机可读介质
CN108960087A (zh) * 2018-06-20 2018-12-07 中国科学院重庆绿色智能技术研究院 一种基于多维度评估标准的人脸图像质量评估方法及系统
CN109117797A (zh) * 2018-08-17 2019-01-01 浙江捷尚视觉科技股份有限公司 一种基于人脸质量评价的人脸抓拍识别方法
CN109146856A (zh) * 2018-08-02 2019-01-04 深圳市华付信息技术有限公司 图像质量评定方法、装置、计算机设备及存储介质
CN109389019A (zh) * 2017-08-14 2019-02-26 杭州海康威视数字技术股份有限公司 人脸图像选择方法、装置及计算机设备
CN109492616A (zh) * 2018-11-29 2019-03-19 成都睿码科技有限责任公司 一种基于自主学习的广告屏用人脸识别方法
CN109740492A (zh) * 2018-12-27 2019-05-10 郑州云海信息技术有限公司 一种身份认证方法和装置

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170004358A1 (en) * 2010-08-26 2017-01-05 Blast Motion Inc. Motion capture system that combines sensors with different measurement ranges
CN102799877A (zh) * 2012-09-11 2012-11-28 上海中原电子技术工程有限公司 人脸图像筛选方法及系统
CN105631439A (zh) * 2016-02-18 2016-06-01 北京旷视科技有限公司 人脸图像处理方法和装置
CN106446851A (zh) * 2016-09-30 2017-02-22 厦门大图智能科技有限公司 一种基于可见光的人脸优选方法及系统
CN106682598A (zh) * 2016-12-14 2017-05-17 华南理工大学 一种基于级联回归的多姿态的人脸特征点检测方法
CN108875452A (zh) * 2017-05-11 2018-11-23 北京旷视科技有限公司 人脸识别方法、装置、系统和计算机可读介质
CN107169521A (zh) * 2017-05-24 2017-09-15 上海评驾科技有限公司 一种基于手机加速度传感器的交通模式识别方法
CN108228872A (zh) * 2017-07-21 2018-06-29 北京市商汤科技开发有限公司 人脸图像去重方法和装置、电子设备、存储介质、程序
CN109389019A (zh) * 2017-08-14 2019-02-26 杭州海康威视数字技术股份有限公司 人脸图像选择方法、装置及计算机设备
CN108875485A (zh) * 2017-09-22 2018-11-23 北京旷视科技有限公司 一种底图录入方法、装置及系统
CN108197547A (zh) * 2017-12-26 2018-06-22 深圳云天励飞技术有限公司 人脸姿态估计方法、装置、终端及存储介质
CN108960087A (zh) * 2018-06-20 2018-12-07 中国科学院重庆绿色智能技术研究院 一种基于多维度评估标准的人脸图像质量评估方法及系统
CN109146856A (zh) * 2018-08-02 2019-01-04 深圳市华付信息技术有限公司 图像质量评定方法、装置、计算机设备及存储介质
CN109117797A (zh) * 2018-08-17 2019-01-01 浙江捷尚视觉科技股份有限公司 一种基于人脸质量评价的人脸抓拍识别方法
CN109492616A (zh) * 2018-11-29 2019-03-19 成都睿码科技有限责任公司 一种基于自主学习的广告屏用人脸识别方法
CN109740492A (zh) * 2018-12-27 2019-05-10 郑州云海信息技术有限公司 一种身份认证方法和装置

Also Published As

Publication number Publication date
CN110321843B (zh) 2021-11-09

Similar Documents

Publication Publication Date Title
WO2021003824A1 (zh) 基于图像识别的违章建筑识别方法、装置
CN109559310B (zh) 基于显著性检测的输变电巡检图像质量评价方法及系统
CN104951773A (zh) 一种实时人脸识别监视系统
CN110619628B (zh) 一种人脸图像质量评估方法
CN102831392B (zh) 一种远距离虹膜跟踪与采集装置及其方法
CN110837784B (zh) 一种基于人体头部特征的考场偷窥作弊检测系统
CN106980852B (zh) 基于角点检测与匹配的药品识别系统及其识别方法
CN101930543B (zh) 一种自拍视频中眼睛图像的调正方法
CN110490158B (zh) 一种基于多级模型的鲁棒人脸对齐方法
CN103020992B (zh) 一种基于运动颜色关联的视频图像显著性检测方法
CN105160297B (zh) 基于肤色特征的蒙面人事件自动检测方法
CN109948566B (zh) 一种基于权重融合与特征选择的双流人脸反欺诈检测方法
CN111062292B (zh) 一种疲劳驾驶检测装置与方法
CN108510061A (zh) 基于条件生成对抗网络的多监控视频人脸合成正脸的方法
CN106056064A (zh) 一种人脸识别方法及人脸识别装置
CN105046219A (zh) 一种人脸识别系统
CN109711268B (zh) 一种人脸图像筛选方法及设备
CN109558825A (zh) 一种基于数字视频图像处理的瞳孔中心定位方法
CN111291701B (zh) 一种基于图像梯度和椭圆拟合算法的视线追踪方法
CN112102154A (zh) 图像处理方法、装置、电子设备和存储介质
CN106650606A (zh) 人脸图像的匹配及处理方法、人脸图像模型构建系统
CN103218615B (zh) 人脸判定方法
CN107844742A (zh) 人脸图像眼镜去除方法、装置及存储介质
CN112016469A (zh) 图像处理方法及装置、终端及可读存储介质
CN111259763A (zh) 目标检测方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant