CN110084221A - 一种基于深度学习的带中继监督的序列化人脸关键点检测方法 - Google Patents

一种基于深度学习的带中继监督的序列化人脸关键点检测方法 Download PDF

Info

Publication number
CN110084221A
CN110084221A CN201910379565.8A CN201910379565A CN110084221A CN 110084221 A CN110084221 A CN 110084221A CN 201910379565 A CN201910379565 A CN 201910379565A CN 110084221 A CN110084221 A CN 110084221A
Authority
CN
China
Prior art keywords
key point
serializing
face
detection method
prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910379565.8A
Other languages
English (en)
Other versions
CN110084221B (zh
Inventor
薛磊
崔馨方
薛裕峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Yunzhi Control Industrial Technology Research Institute Co Ltd
Southeast University
Original Assignee
Nanjing Yunzhi Control Industrial Technology Research Institute Co Ltd
Southeast University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Yunzhi Control Industrial Technology Research Institute Co Ltd, Southeast University filed Critical Nanjing Yunzhi Control Industrial Technology Research Institute Co Ltd
Priority to CN201910379565.8A priority Critical patent/CN110084221B/zh
Publication of CN110084221A publication Critical patent/CN110084221A/zh
Application granted granted Critical
Publication of CN110084221B publication Critical patent/CN110084221B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships

Landscapes

  • Engineering & Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于深度学习的带中继监督的序列化人脸关键点检测方法,包括如下步骤:给定已检测出的人脸图像,设计出一种由多模块组成的级联网络结构,该结构通过对各模块的中继监督,实现了关键点的序列化预测;结合软极大值函数在输出的关键点热图上计算关键点坐标的期望,完成热图回归向基于关键点坐标的数值坐标回归的转化,充分发挥了两种回归方法各自的优势。本发明一方面克服了热图回归方法不能端到端进行训练的缺陷,另一方面省去了额外的数据处理过程,加快了模型训练过程,提升了算法效率;在进行数值坐标回归时采用一种新的分段损失函数,最终获得了较高的定位准确度。

Description

一种基于深度学习的带中继监督的序列化人脸关键点检测 方法
技术领域
本发明涉及图像处理与模式识别技术领域,尤其是一种基于深度学习的带中继监督的序列化人脸关键点检测方法。
背景技术
人脸关键点检测是计算机视觉中的经典问题之一,也是人脸分析过程中的重要组成部分。基于准确的关键点检测结果,可以实现人脸姿态估计、表情分析、美妆特效等应用。
目前主流的人脸关键点检测方法,主要分为两大类,分别是基于回归的方法和基于卷积神经网络的方法。基于回归的方法是直接学习从图像外观到关键点位置的映射,其中最具代表性的是级联回归,该方法采用了由粗到精的策略,第k个阶段的形状增量Δs为:
Δst=Rtt(I,st-1))
其中,st-1表示前阶段的形状预测值,Φt为特征映射函数,Rt为阶段回归器。形状索引特征Φt(I,st-1)依赖于输入图像I和当前的形状估计,可以通过手工设计或者直接学习得到。在训练阶段,可以将若干个弱回归器串联在一起逐步减小训练集上的关键点定位误差。
基于卷积神经网络的方法则将通过提取图像的高层特征,对人脸外观到人脸形状的非线性映射进行建模。根据关键点回归方式的不同,又可以细分为数值坐标回归法和热图回归法,前者是通过卷积神经网络直接学习从RGB图像到关键点坐标的映射,而后者是通过预测与关键点对应的热图来间接推断关键点坐标。数值坐标回归法一般模型复杂度较低,速度较快,但往往在关键点数量较多时性能较差;基于热点图的关键点检测算法通过引入关键点热图,隐式建模了关键点的空间位置关系,所以其空间泛化能力较强,但由于其输出的特征图较大,所以该方法是在牺牲一定速度以及增大模型复杂度的情况下获得性能提升的。并且,这种方法需要额外的数据预处理和后处理过程,不能端到端的进行训练。以上两种回归方法中,常用的损失函数为L2损失,即欧氏距离损失,定义如下:
其中,s=[x1,...,xL,y1,...,yL]T表示关键点的真实坐标,s′=φ(I)是模型预测的关键点坐标,φ(·)表示映射函数。
发明内容
本发明所要解决的技术问题在于,提供一种基于深度学习的带中继监督的序列化人脸关键点检测方法,在保证性能的同时,缩短训练过程,加快检测速度。
为解决上述技术问题,本发明提供一种基于深度学习的带中继监督的序列化人脸关键点检测方法,包括如下步骤:
(1)在训练时,手工标定人脸关键点作为训练样本,预先给定标定好或检测出的人脸框,对于每个人脸框,精确标定出每个关键点在框内的二维坐标;
(2)根据人脸框对训练样本进行数据预处理,包括数据增强操作以及数据归一化;
(3)设计基于中继监督的序列化检测模型,该模型是由三个级联的卷积神经网络模块组成,并且每个阶段的模块都输出大小相同的特征图作为预测关键点响应图;
(4)在每个阶段输出的关键点热图上采用软极大值函数,得到预测关键点位置,采用新的分段损失函数根据预测的关键点坐标计算每一阶段的损失值,并将三个阶段的损失值之和作为整个模型的损失值;分段损失函数定义如下:
其中,(-w,w)是该函数的非线性区,w为非负数,a控制非线性部分的曲率,C=w2-wln(1+w/a)是线性部分和非线性部分的分界点;
(5)在测试时,对于输入的待检测的人脸图像,先进行人脸检测得到人脸框位置,再根据人脸框对图像进行相应预处理,接着将图像送入步骤(3)中的序列化检测模型中获得精确的人脸关键点位置。
优选的,步骤(3)中,先设计浅层网络结构,其输入图像大小为256×256,具体结构见下表:
优选的,步骤(3)中,在浅层网络之后设计由三个模块组成的级联结构进行关键点的序列化预测,输入特征图大小为32×32,每个模块的输出特征图大小也是32×32。
优选的,步骤(4)中,软极大值函数通过分组卷积实现,即将权重矩阵Wx和Wy作为卷积操作中卷积核的权重参数,提高算法效率;分组卷积就是对传统卷积进行分通道隔离,这里的分组个数为通道数,即关键点个数。
优选的,在进行网络模型训练时采用分层训练策略,对于浅层网络部分,以基础学习率对权重进行更新,且权值衰减系数为基础权值衰减系数;以基础学习率的2倍对偏置进行更新,且权值衰减系数为0;对于序列化预测部分,以基础学习率的4倍对权重进行更新,且权值衰减系数为基础权值衰减系数;以基础学习率的8倍对偏置进行更新,且权值衰减系数为0。
本发明的有益效果为:采用序列化的预测模型“由粗到精”预测关键点位置,第一阶段的输出结果为后续阶段提供关键点位置的初始位置,而后的每一阶段都是在此基础上逐步获得更准确的预测结果;对每一阶段的输出计算损失函数,实现对模型的中继监督,相比于只计算网络最后一个模块的损失函数,该方法是对网络中间结果的监督,以此保证最终输出的准确性;设计了更为合理的分段损失函数,优化了小误差和中等误差样本的预测结果;通过引入软极大值函数,解决了热图回归法不能端到端进行训练的缺陷,省去了额外的数据预处理过程,在保证性能的同时,缩短训练过程,加快检测速度。
附图说明
图1为本发明的网络模型结构示意图。
图2为本发明的检测方法流程示意图。
具体实施方式
如图2所示,一种基于深度学习的带中继监督的序列化人脸关键点检测方法,包括如下步骤:
(1)在训练时,手工标定人脸关键点作为训练样本,预先给定标定好或检测出的人脸框,对于每个人脸框,精确标定出每个关键点在框内的二维坐标;
(2)根据人脸框对训练样本进行数据预处理,包括数据增强操作以及数据归一化;
(3)设计基于中继监督的序列化检测模型,该模型是由三个级联的卷积神经网络模块组成,并且每个阶段的模块都输出大小相同的特征图作为预测关键点响应图;
(4)在每个阶段输出的关键点热图上采用软极大值函数,得到预测关键点位置,采用新的分段损失函数根据预测的关键点坐标计算每一阶段的损失值,并将三个阶段的损失值之和作为整个模型的损失值;分段损失函数定义如下:
其中,(-w,w)是该函数的非线性区,w为非负数,a控制非线性部分的曲率,C=w2-wln(1+w/a)是线性部分和非线性部分的分界点;
(5)在测试时,对于输入的待检测的人脸图像,先进行人脸检测得到人脸框位置,再根据人脸框对图像进行相应预处理,接着将图像送入步骤(3)中的序列化检测模型中获得精确的人脸关键点位置。
如图1所示,中继监督序列化预测模型,具体为:
输入RGB图像先经过由若干卷积核大小为3×3的卷积层组成的浅层网络提取特征,作为第一个级联模块的输入;接着网络进入序列化预测阶段,每个级联模块都由卷积核大小为7×7、3×3或1×1的卷积层组成,且除第一个模块外,其他模块都是把第一个模块的输入特征,即原图上提取的浅层特征和上一个模块输出的特征图进行特征融合,共同作为该模块的输入特征,再进行特征提取和关键点预测,模块二与模块三的结构相同。
对于软极大值函数的设计,是通过二维平面上的Softmax函数实现的。在基于深度学习的多分类任务中,常用Softmax函数作为网络的最后一层输出每个类别的对应概率值(0~1),作为分类的判断依据,Softmax函数的定义如下:
其中,Vi表示数组V中第i个元素,Si表示该元素对应的Softmax值。所有元素的Softmax值累加求和为1。Softmax函数中取指数的操作可以模拟取最大值的行为,并且让大的值更大,可以整个式子进行求导,这一点弥补了Argmax函数的缺陷。
将Softmax函数推广到二维空间,在一张W×H的二维热图上用Softmax函数计算后的结果为:
其中hi,j为热图h在位置(i,j)上的值,这里的空间Softmax操作对每张热图都进行了归一化。但此操作中可能会出现上溢和下溢问题,导致整个表达式未定义,这两个问题可以通过Softmax(z)同时解决,其中z=x-maxi(xi)。简单的代数计算表明,Softmax解析意义上的函数值不会因为从输入向量减去或加上标量而改变。减去maxi(xi)导致指数运算的最大参数为0,这排除了上溢的可能性。同样地,分母中至少有一个值为1的项,这就排除了因分母下溢而导致被零除的可能性。
接着定义软极大值函数如下:
其中W是大小为W×H×2的权重矩阵,与坐标值(x,y)有关。可以用Wx和Wy分别表示:
最后给定一张热图h,那么通过软极大值函数估计的回归坐标为:
y=(Ψx(h),Ψy(h))T
下面以Ψx(h)为例进行推导,对估计出的坐标含义进行解释:
其中 为定值,且∑iPi=1。对于离散情况下变量X的数学期望定义如下:
E(x)=∑xiPi
这与Ψx(h)最后的推导结果形式相似,所以软极大值函数就是通过热图计算关键点位置的期望。为了使软极大值函数能够像卷积层一样嵌入深度神经网络里,就要求Ψx(h)可以对h求导(以x方向为例):
这样通过神经网络的反向传播和链式法则,就可以用软极大值函数代替原来的Argmax函数,实现网络端到端的训练。软极大值函数的求导结果表明当热图h的某一个值越大时,其梯度会呈指数增长,得到的坐标值的响应也越具有判别性。与传统的Argmax操作不同,软极大值函数可以在很低的分辨率上得到很高的精确度。
对于损失函数的设计,根据L1、L2损失函数的计算公式可知其梯度的幅值分别为1和|x|,并且由最优步长计算公式可分别求得相应的最优步长为|x|和1。对于L1损失函数来说,梯度大小都是一样的但是由于优化步长的作用,优化求解时会被误差较大的项所影响;对L2损失函数来说,步长相同但梯度却由大的误差项主导。所以这两种损失函数,都很难对相对较小的偏差进行矫正。而对数函数lnx的梯度值为1/x,最优步长为x2,可以同时平衡不同大小的误差项。综合以上所有函数的特性,可以设计出一种新的分段损失函数:
其中,(-w,w)(w为非负数)是该函数的非线性区,a控制非线性部分的曲率,C=w2-wln(1+w/a)是线性部分和非线性部分的分界点。
在使用分段损失函数进行训练时,其作用对象是由软极大值函数生成的关键点坐标,而不是网络输出的关键点热图,这与热图回归中计算损失值的常规方法不同。

Claims (5)

1.一种基于深度学习的带中继监督的序列化人脸关键点检测方法,其特征在于,包括如下步骤:
(1)在训练时,手工标定人脸关键点作为训练样本,预先给定标定好或检测出的人脸框,对于每个人脸框,精确标定出每个关键点在框内的二维坐标;
(2)根据人脸框对训练样本进行数据预处理,包括数据增强操作以及数据归一化;
(3)设计基于中继监督的序列化检测模型,该模型是由三个级联的卷积神经网络模块组成,并且每个阶段的模块都输出大小相同的特征图作为预测关键点响应图;
(4)在每个阶段输出的关键点热图上采用软极大值函数,得到预测关键点位置,采用新的分段损失函数根据预测的关键点坐标计算每一阶段的损失值,并将三个阶段的损失值之和作为整个模型的损失值;分段损失函数定义如下:
其中,(-w,w)是该函数的非线性区,w为非负数,a控制非线性部分的曲率,C=w2-wln(1+w/a)是线性部分和非线性部分的分界点;
(5)在测试时,对于输入的待检测的人脸图像,先进行人脸检测得到人脸框位置,再根据人脸框对图像进行相应预处理,接着将图像送入步骤(3)中的序列化检测模型中获得精确的人脸关键点位置。
2.如权利要求1所述的基于深度学习的带中继监督的序列化人脸关键点检测方法,其特征在于,步骤(3)中,先设计浅层网络结构,其输入图像大小为256×256,具体结构见下表:
3.如权利要求1所述的基于深度学习的带中继监督的序列化人脸关键点检测方法,其特征在于,步骤(3)中,在浅层网络之后设计由三个模块组成的级联结构进行关键点的序列化预测,输入特征图大小为32×32,每个模块的输出特征图大小也是32×32。
4.如权利要求1所述的基于深度学习的带中继监督的序列化人脸关键点检测方法,其特征在于,步骤(4)中,软极大值函数通过分组卷积实现,即将权重矩阵Wx和Wy作为卷积操作中卷积核的权重参数,提高算法效率;分组卷积就是对传统卷积进行分通道隔离,这里的分组个数为通道数,即关键点个数。
5.如权利要求2或3所述的基于深度学习的带中继监督的序列化人脸关键点检测方法,其特征在于,在进行网络模型训练时采用分层训练策略,对于浅层网络部分,以基础学习率对权重进行更新,且权值衰减系数为基础权值衰减系数;以基础学习率的2倍对偏置进行更新,且权值衰减系数为0;对于序列化预测部分,以基础学习率的4倍对权重进行更新,且权值衰减系数为基础权值衰减系数;以基础学习率的8倍对偏置进行更新,且权值衰减系数为0。
CN201910379565.8A 2019-05-08 2019-05-08 一种基于深度学习的带中继监督的序列化人脸关键点检测方法 Active CN110084221B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910379565.8A CN110084221B (zh) 2019-05-08 2019-05-08 一种基于深度学习的带中继监督的序列化人脸关键点检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910379565.8A CN110084221B (zh) 2019-05-08 2019-05-08 一种基于深度学习的带中继监督的序列化人脸关键点检测方法

Publications (2)

Publication Number Publication Date
CN110084221A true CN110084221A (zh) 2019-08-02
CN110084221B CN110084221B (zh) 2023-02-03

Family

ID=67419240

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910379565.8A Active CN110084221B (zh) 2019-05-08 2019-05-08 一种基于深度学习的带中继监督的序列化人脸关键点检测方法

Country Status (1)

Country Link
CN (1) CN110084221B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110516642A (zh) * 2019-08-30 2019-11-29 电子科技大学 一种轻量化人脸3d关键点检测方法及系统
CN110889858A (zh) * 2019-12-03 2020-03-17 中国太平洋保险(集团)股份有限公司 一种基于点回归的汽车部件分割方法及装置
CN111046826A (zh) * 2019-12-20 2020-04-21 北京碧拓科技有限公司 一种远红外热成像人脸关键点的定位方法
CN111160142A (zh) * 2019-12-14 2020-05-15 上海交通大学 一种基于数值预测回归模型的证件票据定位检测方法
CN111583661A (zh) * 2020-05-27 2020-08-25 魏保安 基于枪球联动与dnn的车辆闯红灯检测方法
CN111738357A (zh) * 2020-07-24 2020-10-02 完美世界(北京)软件科技发展有限公司 垃圾图片的识别方法、装置及设备
CN111913435A (zh) * 2020-07-30 2020-11-10 浙江科技学院 一种基于堆积沙漏网络的单/多目标关键点定位方法
CN112149558A (zh) * 2020-09-22 2020-12-29 驭势科技(南京)有限公司 一种用于关键点检测的图像处理方法、网络和电子设备
CN112801043A (zh) * 2021-03-11 2021-05-14 河北工业大学 基于深度学习的实时视频人脸关键点检测方法
CN113297973A (zh) * 2021-05-25 2021-08-24 北京沃东天骏信息技术有限公司 关键点检测方法、装置、设备和计算机可读介质
CN113361381A (zh) * 2021-06-03 2021-09-07 上海哔哩哔哩科技有限公司 人体关键点检测模型训练方法、检测方法及装置
CN113406659A (zh) * 2021-05-28 2021-09-17 浙江大学 一种基于激光雷达信息的移动机器人位置重识别方法
CN113468924A (zh) * 2020-03-31 2021-10-01 北京沃东天骏信息技术有限公司 关键点检测模型训练方法和装置、关键点检测方法和装置
CN115061113A (zh) * 2022-08-19 2022-09-16 南京隼眼电子科技有限公司 用于雷达的目标检测模型训练方法、装置及存储介质
CN117542104A (zh) * 2024-01-09 2024-02-09 浙江图讯科技股份有限公司 一种基于自监督辅助学习的人脸三维关键点检测方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110299764A1 (en) * 2010-06-07 2011-12-08 Snoek Cornelis Gerardus Maria Method for automated categorization of human face images based on facial traits
CN106022264A (zh) * 2016-05-19 2016-10-12 中国科学院自动化研究所 基于多任务自编码器的交互式人脸活体检测方法和装置
CN106157319A (zh) * 2016-07-28 2016-11-23 哈尔滨工业大学 基于卷积神经网络的区域和像素级融合的显著性检测方法
WO2017049677A1 (zh) * 2015-09-22 2017-03-30 成都通甲优博科技有限责任公司 一种面部关键点的标注方法
CN107239736A (zh) * 2017-04-28 2017-10-10 北京智慧眼科技股份有限公司 基于多任务级联卷积神经网络的人脸检测方法及检测装置
CN108564029A (zh) * 2018-04-12 2018-09-21 厦门大学 基于级联多任务学习深度神经网络的人脸属性识别方法
CN108665058A (zh) * 2018-04-11 2018-10-16 徐州工程学院 一种基于分段损失的生成对抗网络方法
CN109145854A (zh) * 2018-08-31 2019-01-04 东南大学 一种基于级联卷积神经网络结构的人脸检测方法
CN109657595A (zh) * 2018-12-12 2019-04-19 中山大学 基于堆叠沙漏网络的关键特征区域匹配人脸识别方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110299764A1 (en) * 2010-06-07 2011-12-08 Snoek Cornelis Gerardus Maria Method for automated categorization of human face images based on facial traits
WO2017049677A1 (zh) * 2015-09-22 2017-03-30 成都通甲优博科技有限责任公司 一种面部关键点的标注方法
CN106022264A (zh) * 2016-05-19 2016-10-12 中国科学院自动化研究所 基于多任务自编码器的交互式人脸活体检测方法和装置
CN106157319A (zh) * 2016-07-28 2016-11-23 哈尔滨工业大学 基于卷积神经网络的区域和像素级融合的显著性检测方法
CN107239736A (zh) * 2017-04-28 2017-10-10 北京智慧眼科技股份有限公司 基于多任务级联卷积神经网络的人脸检测方法及检测装置
CN108665058A (zh) * 2018-04-11 2018-10-16 徐州工程学院 一种基于分段损失的生成对抗网络方法
CN108564029A (zh) * 2018-04-12 2018-09-21 厦门大学 基于级联多任务学习深度神经网络的人脸属性识别方法
CN109145854A (zh) * 2018-08-31 2019-01-04 东南大学 一种基于级联卷积神经网络结构的人脸检测方法
CN109657595A (zh) * 2018-12-12 2019-04-19 中山大学 基于堆叠沙漏网络的关键特征区域匹配人脸识别方法

Non-Patent Citations (8)

* Cited by examiner, † Cited by third party
Title
FENG Z ET AL: "《 Wing loss for robust facial landmark localisation with convolutional neural networks》", 《IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION》 *
WEI S 等: "《Convolutional pose machines》", 《IEEE INTERNATIONAL CONFERENCE ON COMPUTER VISION》 *
习洋洋: "《基于多监督信息的级联全卷积人脸检测算法》", 《中国优秀硕士学位论文》 *
井长兴等: "级联神经网络人脸关键点定位研究", 《中国计量大学学报》 *
余飞等: "多级联卷积神经网络人脸检测", 《五邑大学学报(自然科学版)》 *
周鹏: "《基于局部纹理描述的人脸识别方法研究》", 《中国优秀硕士学位论文》 *
董德轩: "《基于深度学习的人脸检测算法研究》", 《中国优秀硕士学位论文》 *
陈锐等: "基于级联卷积神经网络的人脸关键点定位", 《四川理工学院学报(自然科学版)》 *

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110516642A (zh) * 2019-08-30 2019-11-29 电子科技大学 一种轻量化人脸3d关键点检测方法及系统
CN110889858A (zh) * 2019-12-03 2020-03-17 中国太平洋保险(集团)股份有限公司 一种基于点回归的汽车部件分割方法及装置
CN111160142A (zh) * 2019-12-14 2020-05-15 上海交通大学 一种基于数值预测回归模型的证件票据定位检测方法
CN111160142B (zh) * 2019-12-14 2023-07-11 上海交通大学 一种基于数值预测回归模型的证件票据定位检测方法
CN111046826A (zh) * 2019-12-20 2020-04-21 北京碧拓科技有限公司 一种远红外热成像人脸关键点的定位方法
CN111046826B (zh) * 2019-12-20 2023-07-04 北京碧拓科技有限公司 一种远红外热成像人脸关键点的定位方法
CN113468924A (zh) * 2020-03-31 2021-10-01 北京沃东天骏信息技术有限公司 关键点检测模型训练方法和装置、关键点检测方法和装置
CN111583661A (zh) * 2020-05-27 2020-08-25 魏保安 基于枪球联动与dnn的车辆闯红灯检测方法
CN111738357A (zh) * 2020-07-24 2020-10-02 完美世界(北京)软件科技发展有限公司 垃圾图片的识别方法、装置及设备
CN111738357B (zh) * 2020-07-24 2020-11-20 完美世界(北京)软件科技发展有限公司 垃圾图片的识别方法、装置及设备
CN111913435A (zh) * 2020-07-30 2020-11-10 浙江科技学院 一种基于堆积沙漏网络的单/多目标关键点定位方法
CN112149558A (zh) * 2020-09-22 2020-12-29 驭势科技(南京)有限公司 一种用于关键点检测的图像处理方法、网络和电子设备
CN112801043A (zh) * 2021-03-11 2021-05-14 河北工业大学 基于深度学习的实时视频人脸关键点检测方法
CN112801043B (zh) * 2021-03-11 2022-07-15 河北工业大学 基于深度学习的实时视频人脸关键点检测方法
CN113297973A (zh) * 2021-05-25 2021-08-24 北京沃东天骏信息技术有限公司 关键点检测方法、装置、设备和计算机可读介质
CN113406659A (zh) * 2021-05-28 2021-09-17 浙江大学 一种基于激光雷达信息的移动机器人位置重识别方法
CN113361381A (zh) * 2021-06-03 2021-09-07 上海哔哩哔哩科技有限公司 人体关键点检测模型训练方法、检测方法及装置
CN115061113A (zh) * 2022-08-19 2022-09-16 南京隼眼电子科技有限公司 用于雷达的目标检测模型训练方法、装置及存储介质
CN115061113B (zh) * 2022-08-19 2022-11-01 南京隼眼电子科技有限公司 用于雷达的目标检测模型训练方法、装置及存储介质
CN117542104A (zh) * 2024-01-09 2024-02-09 浙江图讯科技股份有限公司 一种基于自监督辅助学习的人脸三维关键点检测方法
CN117542104B (zh) * 2024-01-09 2024-04-30 浙江图讯科技股份有限公司 一种基于自监督辅助学习的人脸三维关键点检测方法

Also Published As

Publication number Publication date
CN110084221B (zh) 2023-02-03

Similar Documents

Publication Publication Date Title
CN110084221A (zh) 一种基于深度学习的带中继监督的序列化人脸关键点检测方法
US20220004744A1 (en) Human posture detection method and apparatus, device and storage medium
CN110048827B (zh) 一种基于深度学习卷积神经网络的类模板攻击方法
CN108108764B (zh) 一种基于随机森林的视觉slam回环检测方法
CN109902548B (zh) 一种对象属性识别方法、装置、计算设备及系统
CN110309856A (zh) 图像分类方法、神经网络的训练方法及装置
CN109299716A (zh) 神经网络的训练方法、图像分割方法、装置、设备及介质
CN111783772A (zh) 一种基于RP-ResNet网络的抓取检测方法
CN105069413A (zh) 一种基于深度卷积神经网络的人体姿势识别方法
CN109598234A (zh) 关键点检测方法和装置
CN108805222A (zh) 一种基于arm平台的深度学习数字手写体识别方法
CN112766229B (zh) 基于注意力机制的人脸点云图像智能识别系统及方法
CN114565048A (zh) 基于自适应特征融合金字塔网络的三阶段害虫图像识别方法
KR20170089745A (ko) 특징점 포지셔닝 방법 및 장치
CN110968734A (zh) 一种基于深度度量学习的行人重识别方法及装置
CN112800882B (zh) 一种基于加权双流残差网络的口罩人脸姿态分类方法
CN116740362B (zh) 一种基于注意力的轻量化非对称场景语义分割方法及系统
CN113139499A (zh) 一种基于轻量注意力卷积神经网络的步态识别方法和系统
CN107301643A (zh) 基于鲁棒稀疏表示与拉普拉斯正则项的显著目标检测方法
CN111739037B (zh) 一种针对室内场景rgb-d图像的语义分割方法
CN114511710A (zh) 一种基于卷积神经网络的图像目标检测方法
CN111104911A (zh) 一种基于大数据训练的行人重识别方法及装置
CN112668486A (zh) 一种预激活残差深度可分离卷积网络面部表情识别方法、装置和载体
Ji et al. Apple fruit recognition based on a deep learning algorithm using an improved lightweight network
CN113420173A (zh) 基于四元组深度学习的少数民族服饰图像检索方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant