CN108319953A - 目标对象的遮挡检测方法及装置、电子设备及存储介质 - Google Patents

目标对象的遮挡检测方法及装置、电子设备及存储介质 Download PDF

Info

Publication number
CN108319953A
CN108319953A CN201710625671.0A CN201710625671A CN108319953A CN 108319953 A CN108319953 A CN 108319953A CN 201710625671 A CN201710625671 A CN 201710625671A CN 108319953 A CN108319953 A CN 108319953A
Authority
CN
China
Prior art keywords
detection zone
target object
detection
image
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710625671.0A
Other languages
English (en)
Other versions
CN108319953B (zh
Inventor
易成
李斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201710625671.0A priority Critical patent/CN108319953B/zh
Priority to PCT/CN2018/090994 priority patent/WO2019019828A1/zh
Publication of CN108319953A publication Critical patent/CN108319953A/zh
Application granted granted Critical
Publication of CN108319953B publication Critical patent/CN108319953B/zh
Priority to US16/545,017 priority patent/US11030481B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • G06F18/2137—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps
    • G06F18/21375—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps involving differential geometry, e.g. embedding of pattern manifold
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G06F18/2148—Generating training patterns; Bootstrap methods, e.g. bagging or boosting characterised by the process organisation or structure, e.g. boosting cascade
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/2163—Partitioning the feature space
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/755—Deformable models or variational models, e.g. snakes or active contours
    • G06V10/7553—Deformable models or variational models, e.g. snakes or active contours based on shape, e.g. active shape models [ASM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08—Detecting or categorising vehicles

Abstract

本发明实施例公开了一种目标对象的遮挡物检测方法、电子设备及存储介质，所述方法包括：基于目标图像中各像素的像素值，确定目标图像中第一特征的第一位置和第二特征的第二位置，其中，所述第一特征为所述目标图像中目标对象的外轮廓特征；所述第二特征为所述目标对象中干扰子对象的特征；所述干扰子对象为所述目标对象中会对遮挡检测造成干扰的子对象；基于所述第一位置，确定所述目标对象所在的图像区域；基于所述第二位置，将所述图像区域分为至少两个检测区域；结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件；当不满足所述预设无遮挡条件时，确定对应的检测区域内存在遮挡。

Description

目标对象的遮挡检测方法及装置、电子设备及存储介质
技术领域
本发明涉及信息技术领域，尤其涉及一种目标对象的遮挡物检测方法、电子设备及存储介质。
背景技术
在一些情况下，电子设备需要获取一些包括目标对象的图像，而有时候采集的图像或用户上传的图像，目标对象是有被遮挡的，这就会导致采集或上传的图像不满足要求。
在现有技术中检测这种遮挡一般可以由人工进行筛选，另一种则是基于图像特征的反复检测、提取及迭代，自动确定出当前目标对象是否有被遮挡。前一种方法，由人工操作显然效率低，后一种方法虽然实现了电子设备的自动确定，但是依然存在着计算量大及精确度低等问题。
发明内容
有鉴于此，本发明实施例提供一种目标对象的遮挡物检测方法、电子设备及存储介质，解决遮挡检测计算量大以及精确度低的问题。
本发明实施例第一方面提供一种目标对象的遮挡检测方法，包括：
基于目标图像中各像素的像素值，确定目标图像中第一特征的第一位置和第二特征的第二位置，其中，所述第一特征为所述目标图像中目标对象的外轮廓特征；所述第二特征为所述目标对象中干扰遮挡判断的干扰子对象的特征；所述干扰子对象为所述目标对象中会对遮挡检测造成干扰的子对象；
基于所述第一位置，确定所述目标对象所在的图像区域；
基于所述第二位置，将所述图像区域分为至少两个检测区域；
结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件；
当不满足所述当所述预设无遮挡条件时，确定对应的检测区域内存在遮挡。
本发明实施例第二方面提供一种目标对象的遮挡检测装置，包括：
第一确定单元，用于基于目标图像中各像素的像素值，确定目标图像中第一特征的第一位置和第二特征的第二位置，其中，所述第一特征为所述目标图像中目标对象的外轮廓特征；所述第二特征为所述目标对象中干扰子对象的特征；所述干扰子对象为所述目标对象中会对遮挡检测造成干扰的子对象；
第二确定单元，用于基于所述第一位置，确定所述目标对象所在的图像区域；
划分单元，用于基于所述第二位置，将所述图像区域分为至少两个检测区域；
第三确定单元，用于结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件；
第四确定单元，用于当不满足所述当所述预设无遮挡条件时，确定对应的检测区域内存在遮挡。
本发明实施例第三方面提供一种电子设备，包括:
存储器，用于存储信息；
处理器，与所述存储器连接，用于通过执行存储在所述存储器内的计算机程序，能够执行前述一个或多个技术方案提供的目标对象的遮挡检测方法。
本发明实施例第四方面提供一种计算机存储介质，所述计算机存储介质存储有计算机程序；所述计算机程序被执行后能够实现前述一个或多个技术方案提供的目标对象的遮挡检测方法。
本发明实施例提供的目标对象的遮挡物检测方法、电子设备及存储介质，第一方面，在进行遮挡检测之前，会通过目标对象的特征点的提取，确定出整个目标对象的区域。排除了非目标对象对目标对象是否存在遮挡的检测干扰。第二方面，会提取出目标对象自身包括的会对遮挡检测造成干扰的干扰子对象的特征的第二位置，然后基于第二位置进行整个图像区域的分区，获得一个个检测区域；然后单独判断每一个检测区域是否存在着干扰；这样可以减少或排除目标对象中本身会对遮挡检测造成干扰，从而从非目标区域的干扰排除到自身的干扰子对象的干扰排除，这两个方面来提升干扰检测的子对象。第三方面，在检测的过程中不存在反复迭代的计算过程，减少了迭代计算导致的计算量大及计算复杂的问题，提升了遮挡检测的检测效果并降低了遮挡检测的资源开销。
附图说明
图1为本发明实施例提供的第一种目标对象的遮挡检测方法的流程示意图；
图2为本发明实施例提供的第二种目标对象的遮挡检测方法的流程示意图；
图3为本发明实施例提供的目标图像及特征标记的显示变化示意图；
图4为本发明实施例提供的一种检测分区的示意图；
图5为本发明实施例提供的另一种检测分区的示意图；
图6为本发明实施例提供的一种更换提示的显示示意图；
图7为本发明实施例提供的一种调整提示的显示示意图；
图8为本发明实施例提供的一种目标对象的遮挡检测装置的结构示意图；
图9为本发明实施例提供的一种电子设备的结构示意图；
图10为本发明实施例提供的第三种目标对象的遮挡检测方法的流程示意图。
具体实施方式
以下结合说明书附图及具体实施例对本发明的技术方案做进一步的详细阐述。
如图1及图2所示，本实施例提供一种目标对象的遮挡检测方法，包括：
步骤S110：基于目标图像中各像素的像素值，确定目标图像中第一特征的第一位置和第二特征的第二位置，其中，所述第一特征为所述目标图像中目标对象的外轮廓特征；所述第二特征为所述目标对象中干扰子对象的特征；所述干扰子对象为所述目标对象中会对遮挡检测造成干扰的子对象；
步骤S120：基于所述第一位置，确定所述目标对象所在的图像区域；
步骤S130：基于所述第二位置，将所述图像区域分为至少两个检测区域；
步骤S140：结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件；
步骤S140：当不满足所述当所述预设无遮挡条件时，确定对应的检测区域内存在遮挡。
本实施例提供的所述目标对象的遮挡检测方法，可以应用于各种电子设备，通常可为应用于网络侧的服务器，也可以应用于提供所述目标图像的终端设备中。所述服务器可为上传图像的图像服务器。所述终端设备可为手机、平板电脑、可穿戴式设备、笔记本电脑或台式电脑等各种移动终端或固定终端中。图2所示的为目标特征有采集终端采集，采集终端通过互联网等将目标图像发送给服务器，服务器接收到所述目标图像之后，执行所述步骤S110至步骤S150。图2所示的执行主体为服务器。在一些实施例中，所述执行主体还可以为采集终端自身。这里的采集终端可为任意带有摄像头的电子设备，如，手机或平板电脑等。
在本实施例中所述步骤S110可包括：利用机器学习算法等将所述目标图像输入到学习模型中，学习模型自动对所述目标图像进行信息处理，提取所述目标图像中目标对象所在的图像区域，所述目标对象可以由目标对象的特征点来描述。所述目标对象的特征点可称为目标特征。这里的目标特征包括：所述第一特征和所述第二特征。通常此时，所述图像区域为一个相通的大的图像区域。例如，所述目标对象为人脸，所述第一特征可为人脸的脸型的外轮廓特征；所述第二特征为人脸内预先指定的器官的特征。所述预先指定的器官至少可包括：眉毛、眼睛、鼻子、嘴唇或额头等器官。这里的预先指定的器官即为前述的干扰子对象的具体举例。总之，所述第二特征为干扰子对象的特征。
图3中的左侧图像为目标图像，图3的右图为标记处第一特征和第二特征对应的特征点的图像。当所述目标对象为人脸时，第一特征为脸部外轮廓特征；第二特征为眼、眉毛、鼻子及嘴巴的特征。
在本实施例中所述学习模型可为：利用被标注有识别结果的训练样本进行训练得到的神经网络、向量学习机或级联回归模型等。例如，利用随机森林的方式获得所述学习模型：
首先，线下训练阶段，收集大量的目标对象标记的训练样本，例如，可为人工标注出了目标对象中第一特征和第二特征的位置的样本。所述随机森林为：多个决策树对样本进行训练并预测的一种分类器。
然后，根据每个特征的特征点的局部二值建立一个目标特征的随机森林，并对是随机森林进行机器学习，得到随机森林所有节点的参数值，一旦参数值确定相当于就确定了学习模型。所述局部二值是一种用来描述图像局部纹理特征的算子；它具有旋转不变性和灰度不变性等显著的优点。在局部二值(Local Binary Pattern，LBP)算子定义为在3*3的窗口内，以窗口中心像素为阈值，将相邻的8个像素的灰度值与其进行比较，若周围像素值大于中心像素值，则该像素点的位置被标记为1，否则为0。这里的窗口的包括的像素3*3＝9，在一些实施例中还可以根据需要调整所述窗口的大小，例如，调整为4*4的窗口。
线上识别阶段：利用训练好的学习模型，对待识别的人脸图像等目标图像进行处理，计算出目标特征的局部二值特征，然后利用之前训练的随机森林对特征进行判别，得到最终目标特征在图像中的几何位置或目标特征对应的像素点的像素坐标等位置。
在一些实施例中，还可以利用基于目标对象的形状约束的活跃形状模型(ActiveShape Model，ASM)或利用基于目标对象的形状约束及纹理约束的活跃外表模型(ActiveAppearance Model，AAM)进行所述第一特征第二特征的提取，从而确定出所述第一位置和所述第二位置。
例如，所述第一位置和所述第二位置，都可为对应的目标特征在目标图像中对应像素的像素坐标或几何位置。
在还有一些实施例中，还可以利用尺度不变特征变换(Scale-invariant featuretransform，SIFT)提取出所述第一特征和第二特征的位置。
在提取出所述第一位置和所述第二位置之后，就可以基于第一位置确定出目标对象在所述目标图像中的位置，从而确定出所述目标对象对应的图像区域。
基于所述第二位置，可以将所述图像区域分为至少两个检测区域。在具体实现时，可以基于所述第二位置，将一个相通的所述图像区域分为几个子区域，每一个子区域称之为一个检测区域。
例如，在一些实施例中，每一个子区域包括所述干扰子对象的部分图像，在另一些实施例中，可以直接扣除每一个干扰子对象，这样每一个检测区域都不包括干扰子对象。
可选地，所述步骤S120可包括：
串联所述第一特征的第一位置得到一个封闭的图像区域。
对应地，在所述步骤S130可包括：
串联所述第二位置，得到分割所述图像区域的分割线；这样所述分割线及所述图像区域的边缘线就能够组合成至少两个封闭的且不包括所述干扰子对象的检测区域。
图4所示的是：目标对象为人脸，而干扰子对象为人脸的器官时，直接基于器官的分布，将人脸所在的图像区域分为几个检测子区域，图2所示的检测子区域内包括：眉毛或嘴唇等器官的图像部分。
图5所示的是：目标对象为人脸，而干扰子对象为人脸的器官时，直接抠掉干扰子对象以后形成的不包括干扰子对象的检测区域。
在图4和图5中虚线方框表示的为人脸作为目标对象时对应的图像区域。在图4至图5所示的图像中，人脸对应的图像区域被分为了：包括额头的额头检测区域，包括左脸的左脸检测区域，以及包括右脸的右脸检测区域。
每一个检测区域均为目标对象所在的图像区域的子区域。
总之，将所述图像区域分割成至少两个检测区域的方式有很多种，不局限于上述任意一种。
在步骤S140中会结合每一个检测区域的至少部分像素值，判断每一个检测区域是否均满足未被遮挡的预设无遮挡条件。在本实施例中，所述像素值可为检测区域内包括的像素的颜色值，例如，红绿蓝(R，G，B)的取值。具体实现时，所述可以是结合每一个检测区域内的所有像素值，也可以是部分像素值。
所述目标对象除了人脸，还可以是人体的半身或者全身；故所述目标图像可为人脸图像、半身像或全身像。
在一些实施例中，所述目标图像还可以是包括其他目标对象的图像。例如，监控图像中包括：交通工具的成像的图像。
在本实施例中，所述干扰子对象可为干扰是否有遮挡物遮挡目标对象的图像部分，在本实施例中通过第二位置的确定及所述图像区域的分区，获得检测区域；基于检测区域进行图像处理，判断出是否有遮挡物遮挡，相对于现有技术直接通过反复迭代进行处理，具有计算量小及处理速度快的特点；与此同时，由于排除了目标对象自身会对是否存在遮挡物遮挡的干扰子对象的第二位置信息等处理，可以提升判断的精确度。
在一些实施例中，若所述基于颜色特征进行判断，则目标对象中具有干扰遮挡判断的干扰子对象为与遮挡物具有颜色相似性的图形元素。例如，目标对象为人脸时，五官的特征明显会不同于皮肤的特征，而遮挡物通常也不同于皮肤的特征，这时，五官相对于皮肤而言就是与遮挡物具有颜色相似性的干扰子对象。这里人的五官可包括：眉、眼、口、鼻及耳。
在另一些实施例中，若基于形状特征进行判断，则目标对象中具有干扰遮挡物判断的干扰子对象为与遮挡物具有形状相似性的图形元素。例如，目标对象为人身，被拍摄的人身着的衣服上的图案就可能是与遮挡物具有形状相似性的干扰子对象。例如，被拍摄的人物A身着一个有飞机图案的模型的上衣，具体如何判断该飞机图案是衣服上的图案还是衣服外的遮挡图案。故此时，需要消除衣服上图案的影响，对是否出现遮挡进行影响剔除处理，以获得更加精确的结果。
可选地，所述方法还包括：
获取所述目标对象的属性信息，其中，所述属性信包括：整体属性信息和/或区域属性；所述整体属性信息用于表征所述目标对象的整体属性；所述区域属性信息用于表征所述检测区域的区域属性；
根据所述属性信息，确定判断依据参数和/或判断策略；
所述结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件，包括以下至少之一：
结合所述判断依据参数及每一个所述检测区域的至少部分像素值，判断每一个所述检测区域是否满足所述预设无遮挡条件；
基于每一个所述检测区域的至少部分像素值，利用所述判断策略判断每一个所述检测区域是否满足所述预设无遮挡条件。
所述整体属性信息可包括：目标对象的类型信息，例如，是人脸还是全身或是半身，或者是动物图像或交通工具图像等。
对于以人的整体或局部为目标对象而言，所述整体属性信息可包括：性别信息、年龄信息等。例如，男和女的脸部的五官占人脸的比例不同，例如，女的眼睛通常较大，而男的眼睛较小。例如，针对成年人和儿童也是不同的，例如，成年男子可能因为秃顶等原因，导致额头部分的皮肤部分较多，而儿童因为头发茂密及发际线靠前导致额头极小的特点，故在本实施中会根据所述整体属性信息，确定出判断依据参数和/或判断策略。
所述区域属性反映的对应检测区域的特点，例如，不同检测区域包括的干扰子对象不同，干扰子对象的对遮挡干扰的检测不同。例如，这里的区域属性信息可为干扰子对象的类型等参数。
在一些实施例中，若目标对象为人脸，若眼睛和眉毛都划分到额头对应的额头检测区域，而鼻子和嘴边对半划分到了左脸检测区域和右脸检测区域。若在一些实施例中，需要区分皮肤占整个区域的面积比值是不同的。故进行判断时，可以基于不同的面积阈值进行判断。
对于不同的目标对象可能对应于不同的判断策略，例如，是基于颜色的判断还是基于形状的判断。
总之，在本实施例中首先会基于整体属性信息和区域属性信息的至少其中之一，确定出判断依据参数和/或判断策略，这样可以采用对应的判断依据参数及判断策略，精确的判断出每一个检测区域内是否有遮挡物进行遮挡。
在本实施例中，所述判断依据参数至少包括：用于确定某一个检测区域的是否出现遮挡的极值，或，确定某一个检测区域是否出现遮挡的区域的区间值等。
当然，以上仅是举例，具体实现时不局限于上述任意一个值。
可选地，所述步骤S140可包括：
确定每一个所述检测区域内像素值位于同一范围内的像素个数与对应检测区域内的所有像素的总个数的检测比值；
将所述检测比值与对一个的检测区域的预设比值进行比较；
若所述检测比值小于所述预设比值时，所述检测区域存在遮挡物。
例如，像素值可为颜色值，例如，RGB的取值，确定位于同一范围内的像素个数，这里的位于同一范围内可为：差值在预设差值范围内的所有像素，可为是位于同一范围内的像素。将该像素个数与整个检测区域内所有像素的总数的个数比值。这里的个数比值可为检测比值。所述预设比值可为预先确定的经验值或仿真值。
故在本实施例中会统计出每一个检测区域内的所述检测比值，然后将该检测区域的检测比值与对应的预设比值进行比对，确定出该检测区域是否有被遮挡。
在本实施例中可以通过简单的通过统计各个检测区域内的像素值，及比值的计算，就可以简便的计算出是否出现遮挡物的遮挡，相对于对大量的像素进行反复的迭代和计算，具有计算量小、消耗的计算资源少及确定速度快的特点。
可选地，不同的检测区域对应于不同的预设比值。
在本实施例中还会根据各个检测区域的特点，给出能够反映出该检测区域原本特定的预设比值，这样在进行目标图像的判断时，可以相对于采用统一预设比值，能够更加精确的判断出各个检测区域内是否出现遮挡，再次提升了遮挡判断的精确度。
具体如何判断，以下结合上述任意一个实施例提供几个可选方式：
可选方式一：
所述步骤S130具体可包括：
基于所述检测区域的边缘像素的像素值，获取所述检测区域的形状特征，确定所述形状特征对应的是否为预设形状。
例如，目标对象为人的半身像，若人的衣服等穿戴物上的图案或形状与实际遮挡人身的遮挡物具有相似性，例如，都具有比较锋利的线条，但是衣服上的遮挡物可能会随着衣服弯曲，而实际的遮挡物则不会。故在步骤S110中通过边缘特征检测等方式检测出这些线条特征，然后在步骤S130中可基于线条特征的弯曲程度确定出是衣服上的还是衣服外的，是位于整个人身的边界框定的边界内，还是边界外。在步骤S140中可以根据弯曲程度，基于这些线条进行检测区域划分，再进行检测，也可以基于边界内外进行判断
可选方式二：
所述步骤S130可包括：
基于所述检测区域的各像素的像素值，确定所述检测区域内的颜色特征，确定所述颜色特征是否满足预设色彩条件，例如，应该出现肤色的位置出现了大量的非肤色的色彩值的像素，则可为出现了遮挡，则对应的检测区域内出现了遮挡物，导致了对对应区域的遮挡。
可选地，所述方法还包括以下至少之一：
若电子设备处于采集所述目标图像的采集模式且检测到所述目标对象有被遮挡，则根据被遮挡的所述检测区域输出与该检测区域对应的调整提示；
若所述电子设备处于非采集模式且检测到所述目标对象有被遮挡，则输出所述目标图像的更换提示。
若电子设备当前处于实时采集的状态，例如，用户正在利用电脑采集证件照或向公共服务平台(例如，户籍管理平台或公安系统平台)上传自己的头像照片，若用户的额头被头发遮挡，或者带着墨镜拍照，显然这样拍出来的照片是不满足要求的。故在本实施例中通过步骤S110至步骤S140的执行，确定出至少个别检测区域出现了遮挡，则输出调整提示，提示用户将头发拨动一下或去除墨镜之后再拍照，减少上传到对应系统识别出不合格，需要反复重新拍摄的玩呢提。
例如，若电子设备仅是处于上传模式，当前并没有打开摄像头进行图像采集，一般情况下需要确定上传的照片是否合格，需要后台服务器专门进行审核或者由后台工作人员手工进行审核，显然这种审核需要用户再次登录才可以，不能及时反馈，也不能及时通知用户。而在本实施例中，由于执行步骤S110至步骤S140的速度快，可以及时向用户反馈，并通知用户更换提示。
若本实施例提供的目标对象的遮挡检测方法，应用于网络侧的服务器中，则如图2所示，所述服务器还可向采集终端返回调整提示或更换提示。
图6为一种更换提示的显示示意图；图7为一种调整提示的显示示意。在具体实现时，所述更换提示和调整提示还可以通过语音的方式输出。
在另一些实施例中，所述方法还包括：
若电子设备处于自动重建模式且检测出所述目标对象有被遮挡，则根据所述目标图像的被遮挡状况，确定是否能够基于所述目标图像重建一个无遮挡的替代图像；
若能够基于所述目标图像重建一个无遮挡的替代图像，则基于所述目标图像生成所述替代图像。
虽然用户上传的图像和/或视频帧不满足无遮挡条件，可以提示用户重新采集或提示用户更换，在本实施例中为了提升电子设备的智能性，会基于当前获取的图像进行重建，重建之后的替代图像是不存在遮挡的。例如，由于光照的问题，用户靠近窗户一边脸出现了强光泛白现象，对于电子设备而言就好像出现了遮挡。若电子设备处于自动重建模式，则会根据用户不靠近窗户一边的脸的采集，基于脸部的对称关系自动重建出现强光侧的脸，从而可以提供满足要求的照片，避免用户的反复调整和反复采集，再次提升智能性及用户使用满意度。
可选地，所述确定是否能够基于所述目标图像重建一个无遮挡的替代图像，包括：
根据所述目标对象的对称性，若两个对称的检测区域中的其中一个被遮挡时，基于未遮挡的对称的检测区域重建所述目标图像，生成所述替代图像。
进行自动重建时，并不是所有目标图像都可以重建，仅是部分被遮挡的图像可以重建。例如，目标对象为人脸，而人脸是对称，任意对称的两个部分中只有一个被遮挡时，才可以进行重建，否则是不可能精确重建的。故在本实施例中基于各个检测区域进行检测，对称的两个子区域有一个被遮挡时，基于另一个进行重建。例如，以人脸为例，左脸区域被遮挡，但是右脸区域未被遮挡，则可以直接基于右脸区域的图像数据重建左脸区域的图像，从而获得一个未被遮挡的替代图像替代所述目标对象执行对应的操作，例如，发送给对端设备等。
如图8所示，本实施例提供一种目标对象的遮挡检测装置，包括：
第一确定单元110，用于基于目标图像中各像素的像素值，确定目标图像中第一特征的第一位置和第二特征的第二位置，其中，所述第一特征为所述目标图像中目标对象的外轮廓特征；所述第二特征为所述目标对象中干扰子对象的特征；所述干扰子对象为所述目标对象中会对遮挡检测造成干扰的子对象；
第二确定单元120，用于基于所述第一位置，确定所述目标对象所在的图像区域；
划分单元130，用于基于所述第二位置，将所述图像区域分为至少两个检测区域；
第三确定单元140，用于结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件；
第四确定单元150，用于当不满足所述当所述预设无遮挡条件时，确定对应的检测区域内存在遮挡。
本实施例提供的第一确定单元110、第二确定单元120、划分单元130、第三确定单元140及第四确定单元150，都可以对应于处理器或处理电路。所述处理器可包括：中央处理器(CPU)、微处理器(MCU)、数字信号处理器(DSP)、应用处理器(AP)或可编程阵列(PLC)等。所述处理电路可为专用集成电路(ASIC)等。所述处理器或处理电路可用于执行计算机程序等计算机可执行代码实现上述各个单元的功能。
在本实施例中所述目标对象的遮挡检测装置，可为应用于网络侧的服务器中，或应用于采集所述目标图像终端中。所述服务器可为各种云平台的云服务器等。所述终端可包括：移动终端或固定终端。典型的移动终端可包括：手机、平板电脑或可穿戴式设备或笔记本电脑等可随身携带的终端设备。所述固定终端可包括：台式电脑等终端设备。
本实施例提供目标对象的遮挡装置，能够基于目标对象的特征点的位置信息的提取，首先确定出目标对象所在的图像区域，然后基于目标对象中容易干扰遮挡物检测的干扰子对象的位置信息进行检测区域的划分，然后逐一确定每一个检测区域内的遮挡状况，相对于反复迭代确定，具有计算量少及计算复杂度低的特点；且由于分区进行检测，具有检测精度高的特点。
可选地，所述划分单元130，用于串联所述第二位置，形成至少两个封闭的且不包括所述干扰子对象的检测区域。
在本实施例中，为了进一步精确判断会将干扰子对象对应的部分图像从检测区域中剥离，这样的话，每一检测区域的都没有目标对象自身的干扰子对象对遮挡的干扰，可以进一步提升判断精确度。
可选地，所述装置还包括：
获取单元，用于获取所述目标对象的属性信息，其中，所述属性信包括：整体属性信息和/或区域属性；所述整体属性信息用于表征所述目标对象的整体属性；所述区域属性信息用于表征所述检测区域的区域属性；
第四确定单元，用于根据所述属性信息，确定判断依据参数和/或判断策略；
所述第三确定单元140，具体用于执行以下至少之一：
结合所述判断依据参数及每一个所述检测区域的至少部分像素值，确定每一个所述检测区域是否满足所述预设无遮挡条件；
基于每一个所述检测区域的至少部分像素值，利用所述判断策略确定每一个所述检测区域是否满足所述预设无遮挡条件。
在本实施例中所述装置还包括：获取单元和第四确定单元。所述获取单元及第四确定单元，都可以对应于处理器或处理电路。所述处理器或处理电路的详细描述可以参见前述对应部分，在此就不再重复了。
在本实施例中获取单元通过整体属性信息和/或区域属性信息的获取，会根据属性信息与判断依据参数及判断策略的对应关系，得到适宜于对应检测区域的判断依据采纳数和/或判断策略。在有些实施例中，还可以将所述属性信息，输入到特定模型，由特定模型输出与所述整属性信息相适配的判断依据参数和/或判断策略。
可选地，所述第三确定单元140，还用于判断每一个所述检测区域内像素值位于同一范围内的像素个数与对应检测区域内的所有像素的总个数的检测比值；将所述检测比值与对一个的检测区域的预设比值进行比较；若所述检测比值小于所述预设比值时，所述检测区域存在遮挡物。不同的检测区域可以对应于同一个预设比值，在一些实施例中优选为不同的检测区域对应于不同的预设比值，以实现根据不同过检测区域的不同特点有针对性的设置预设比值。这里的预设比值可为经验值和/或仿真值等，从而提升单个检测区域的判断精确度，从而提升整个图像区域的判断精确度。
可选地，所述第三确定单元140，可具体用于执行以下至少之一：基于所述检测区域的边缘像素的像素值，获取所述检测区域的形状特征，判断所述形状特征对应的是否为预设形状；基于所述检测区域的各像素的像素值，确定所述检测区域内的颜色特征，判断所述颜色特征是否满足预设色彩条件。
进一步地，所述装置还包括：
输出单元，所述输出单元，至少用于执行以下至少之一：
若电子设备处于采集所述目标图像的采集模式且检测到所述目标对象有被遮挡，则根据被遮挡的所述检测区域输出与该检测区域对应的调整提示；
若所述电子设备处于非采集模式且检测到所述目标对象有被遮挡，则输出所述目标图像的更换提示。
所述输出单元可对应于显示器等显示输出单元，用于显示输出所述调整提示和/或更换提示。在一些实施中，所述输出单元还可包括扬声器等语音输出单元；所述语音输出单元，可以用于通过语音输出前述的调整提示和/或更换提示。
可选地，所述装置还包括：
重建单元，用于若电子设备处于自动重建模式且检测出所述目标对象有被遮挡，则根据所述目标图像的被遮挡状况，判断是否能够基于所述目标图像重建一个无遮挡的替代图像；若能够基于所述目标图像重建一个无遮挡的替代图像，则基于所述目标图像生成所述替代图像。
在本实施例中所述重建单元同样可对应于处理器或处理电路，可以用于基于目标对象的对称性等属性重建目标图像生成可以替代原始目标图像的替代图像，可以减少重复采集或反复提示等。
可选地，所述重建单元，具体用于根据所述目标对象的对称性，若两个对称的检测区域中的其中一个被遮挡时，基于未遮挡的对称的检测区域重建所述目标图像，生成所述替代图像。
在一些实施例中，所述目标对象为人脸；所述目标特征包括：人脸的五官的特征。这里人的五官可包括：眉、眼、口、鼻及耳。
如9图所示，本实施例提供一种电子设备，包括:
存储器210，用于存储信息；
处理器220，与所述存储器连接，用于通过执行存储在所述存储器内的计算机程序，能够执行一个或多个技术方案提供的目标对象的遮挡方法。
所述存储器210可包括：各种存储介质，可用于存储计算机程序。所述存储器210包括的存储介质可包括：非瞬间存储介质，该非瞬间存储介质可用于存储计算机程序。所述存储器210包括的存储介质还可包括：缓存等用于缓存像素值的存储介质。
所述处理器220可通过总线240，例如，集成电路IIC总线等可以与显示屏210及存储器210相连。所述处理器220可包括：中央处理器、微处理器、数字信号处理器、应用处理器、编程阵列等处理器或处理电路，可用于通过计算机程序的执行实现上述任意一个目标对象的遮挡方法。
本实施例还提供一种计算机存储介质，所述计算机存储介质存储有计算机程序，所述计算机程序被处理器执行后，能够实现前述任意一个或多个技术方案提供的目标对象的遮挡方法。
在本实施例中所述计算机存储介质，可为随机存储介质、只读存储介质、闪存、移动硬盘、光盘或磁带等各种存储介质，可选为一种非易失性存储介质，可用于在掉电后依然存储有计算机程序的存储介质。
以下结合上述任意一个实施例提供几个示例：
示例1：
本示例提出了一套自动检测面部遮挡物的方法，在检测到面部遮挡时，可提示更换照片或提示拍照或摄影的注意事项的方法。
首先，通过对输入包含人脸的照片或视频流进行人脸检测标记；
基于人脸检测标记确定出了人脸所在的图像区域后，对人脸标记结果选取分块遮挡的检测区域。
对检测区域分别进行肤色检测，通过肤色检测结果来自动判定对应的检测区域是否面部有遮挡。
若有遮挡，则可根据场景给出更换照片或调整头部位置的提示。
本示例提供的检测方法，能有效检测大部分人脸场景下的面部遮挡现象，检测速度快。
本示例可应用于基于单张照片的人脸三维重建、正脸拍照等需要快速自动检测提示人脸无遮挡的场景。
例如：用户拍照、或者选择相册内照片进行人脸三维重建，由于面部遮挡(头发、口罩等)对人脸三维重建的效果有较大影响，因此可在进行人脸三维重建前，通过本实例的方法对面部遮挡进行检测。如果检测到有遮挡，可通过手机提示等方式提示用户更换人脸照片，或调整脸部拍照位置(撤去遮挡物)。
此示例提供的方法依赖的硬件环境较为宽泛，可用于任何带图像处理和图像选择功能的硬件设备中，如智能手机、个人电脑(PC)、服务器等。
以下详细描述一下如何进行人脸检测标记。
所述人脸检测标记，可利用人脸监测标记算法。人脸检测标记比较常见的有ASM，AAM，级联回归等算法。
这里举例采用级联回归算法中的一个分类：随机森林的方式。主要思路包含两个阶段：
a.线下训练阶段：收集大量人脸标记的训练样本(包含人脸图像，以及手工标定的特征点位置)，然后根据每个特征点的局部二值这样一个图像特征建立随机森林(机器学习算法名词，一种级联回归器)，并对这类随机森林通过训练样本进行机器学习，得到所有随机森林里面所有节点的具体参数值。
b.线上识别阶段：针对要标记的人脸图像，首先计算出图像的所有局部二值特征，然后用之前训练得到的随机森林对特征进行判别，得到最终的特征点。
以下详细描述一下如何进行图像区域的分区，获得检测区域。
根据检测的人脸特征的标记点构建分块人脸遮挡区域，并根据统计样本标定每个分块肤色面积阈值。
a.采用标记点构建分块人脸遮挡区域的优势：
(1)由于在眉毛、眼球内部、鼻孔、口腔内部区域，眉毛本身、眼球、鼻孔、舌头等差异较大，而且容易被误检为非肤色区域，从而对遮挡检测整体效果产生影响。
(2)进行分块检测，更易于发现局部区域遮挡情况：比如只是额头处有部分头发遮挡，如果算整个脸肤色面积比例，则遮挡区域占比不高，容易误检。如果只是计算额头区域的肤色面积比例，则能精确检测出头发遮挡
因此针对实践中的大部分遮挡情况，这里确定以下三个遮挡检测区域：
(1)额头-眉毛-眼睛下缘区域。(头发的刘海、墨镜等遮挡情况)
(2)左脸到左鼻孔、左嘴角区域。(口罩、左边长头发等遮挡情况)
(3)右脸到右鼻孔、右嘴角区域。(口罩、右边长头发等遮挡情况)
b.根据统计样本标记各区域遮挡阈值；
这里主要根据实际采样，对各种常见遮挡和非遮挡情况进行人脸照片采样。对每张照片分别计算其在这三个区域的人脸肤色面积比(检测为肤色的像素数量/区域总体像素数量)，并统计出每个区域可容忍的最小遮挡肤色面积比，作为该区域的肤色检测阈值。
以下详细介绍以下结合肤色检测进行遮挡判断，包括：
a.遍历每个检测区域内的所有像素，对其像素值(RGB空间，以下简记为(r，g，b))进行肤色检测：
(1)计算肤色判定参数1(param1)：param1＝(-176933*r-347355*g+524288*b+134217728)>>20
(2)如果param1<＝77或者param1>＝127，则为非肤色
(2)如果127>param1>77：再计算肤色判定值2param2：
param2＝(524288*r-439026*g-85262*b+134217728)>>20
如果173>param2>133，则为肤色；否则为非肤色。
实践证明，采用此算法内的参数计算，对绝大部分光照下的肤色情况都能做到正确检测。这里的20、77、127、133及170都是判断阈值，可为前述判断依据参数的一种。
b.统计区域内肤色面积比：所有肤色像素的数量/区域像素数量，并与2.2中统计得到的阈值进行对比，如果小于阈值则证明此区域存在遮挡。
实践证明，此方案能够有效检测面部遮挡情况，避免眼球、口腔、鼻孔等常见误检区域带来的干扰。同时从方案算法可以看出，整个技术方案计算量小，检测速度快，是一种较好的既准确又快速的面部遮挡检测方案。
在一些情况下，会区分目标对对象的整体属性和区域属性，等设置判断依据参数。以下以性别为整体属性为例进行判断依据参数的差异进行举例说明。
三个检测区域的遮挡阈值(含义：检测为肤色的像素值个数/总像素个数)：
检测区域1：对应于额头-眉毛-眼睛下缘区域。(主要检测刘海、墨镜等遮挡情况，遮挡阈值可如下：
男：86％-90％
女：82％-91％
中性(适用于性别未知)：86％-90％。
检测区域.：对应于左脸到左鼻孔、左嘴角区域。主要检测口罩、左边长头发等遮挡情况，，遮挡阈值可如下：
男：88.2％-92.7％
女：86.4％-92.5％
中性(适用于性别未知)：88％-92％
检测区域3：对应于右脸到右鼻孔、右嘴角区域。主要检测口罩、右边长头发等遮挡情况，遮挡阈值可如下：
男：88.2％-92.7％
女：86.4％-92.5％
中性(适用于性别未知)：88％-92％。
示例2：
如图10，本示例提供另一种人脸遮挡检测方法，包括：
判断是否有人脸照片或包括人脸的图像帧输入；这里的图像帧可为视频流的组成部分，若是进入下一步骤，若否则返回本步骤；
人脸检测标记，具体为：对人脸照片或包括人脸的图像帧进行特征的检测；
根据标记点将人脸的图像区域进行分区，获得检测区域，并根据统计样本标定每一个检测区域的肤色面积阈值；
对每一个检测区域进行肤色检测；
判断检测的实际肤色面积是否大于肤色面积阈值；
当所有分区的肤色检测面积都大于面积阈值时，确定面部无遮挡；
当存在至少一个检测区域的肤色面积小于肤色面积阈值时，确定面部有遮挡。
在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外，在本发明各实施例中的各功能单元可以全部集成在一个处理模块中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (14)

1.一种目标对象的遮挡检测方法，其特征在于，包括：
基于目标图像中各像素的像素值，确定目标图像中第一特征的第一位置和第二特征的第二位置，其中，所述第一特征为所述目标图像中目标对象的外轮廓特征；所述第二特征为所述目标对象中干扰子对象的特征；所述干扰子对象为所述目标对象中会对遮挡检测造成干扰的子对象；
基于所述第一位置，确定所述目标对象所在的图像区域；
基于所述第二位置，将所述图像区域分为至少两个检测区域；
结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域是否满足所述预设无遮挡条件；
当不满足所述预设无遮挡条件时，确定对应的检测区域内存在遮挡。
2.根据权利要求1所述的方法，其特征在于，
所述基于所述第二位置，将所述图像区域分为至少两个检测区域，包括：
串联所述第二位置，形成至少两个封闭的且不包括所述干扰子对象的检测区域。
3.根据权利要求1或2所述的方法，其特征在于，
所述方法还包括：
获取所述目标对象的属性信息，其中，所述属性信包括：整体属性信息和/或区域属性；所述整体属性信息用于表征所述目标对象的整体属性；所述区域属性信息用于表征所述检测区域的区域属性；
根据所述属性信息，确定判断依据参数和/或判断策略；
所述结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件，包括以下至少之一：
结合所述判断依据参数及每一个所述检测区域的至少部分像素值，确定每一个所述检测区域是否满足所述预设无遮挡条件；
基于每一个所述检测区域的至少部分像素值，利用所述判断策略确定每一个所述检测区域是否满足所述预设无遮挡条件。
4.根据权利要求3所述的方法，其特征在于，
所述结合所述判断依据参数及每一个所述检测区域的至少部分像素值，确定每一个所述检测区域是否满足所述预设无遮挡条件，包括：
判断每一个所述检测区域内像素值位于同一范围内的像素个数与对应检测区域内的所有像素的总个数的检测比值；
将所述检测比值与对一个的检测区域的预设比值进行比较；
若所述检测比值小于所述预设比值时，所述检测区域存在遮挡物。
5.根据权利要求3所述的方法，其特征在于，
所述基于每一个所述检测区域的至少部分像素值，利用所述判断策略确定每一个所述检测区域是否满足所述预设无遮挡条件，包括以下至少之一：
基于所述检测区域的边缘像素的像素值，获取所述检测区域的形状特征，确定所述形状特征对应的是否为预设形状；
基于所述检测区域的各像素的像素值，确定所述检测区域内的颜色特征，确定所述颜色特征是否满足预设色彩条件。
6.根据权利要求1或2所述的方法，其特征在于，
所述方法还包括以下至少之一：
若电子设备处于采集所述目标图像的采集模式且检测到所述目标对象有被遮挡，则根据被遮挡的所述检测区域输出与该检测区域对应的调整提示；
若所述电子设备处于非采集模式且检测到所述目标对象有被遮挡，则输出所述目标图像的更换提示。
7.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：
若电子设备处于自动重建模式且检测出所述目标对象有被遮挡，则根据所述目标图像的被遮挡状况，确定是否能够基于所述目标图像重建一个无遮挡的替代图像；
若能够基于所述目标图像重建一个无遮挡的替代图像，则基于所述目标图像生成所述替代图像。
8.根据权利要求7所述的方法，其特征在于，
所述判断是否能够基于所述目标图像重建一个无遮挡的替代图像，包括：
根据所述目标对象的对称性，若两个对称的检测区域中的其中一个被遮挡时，基于未遮挡的对称的检测区域重建所述目标图像，生成所述替代图像。
9.根据权利要求1或2所述的方法，其特征在于，
所述目标对象为人脸；所述目标特征包括：人脸的五官的特征。
10.一种目标对象的遮挡检测装置，其特征在于，包括：
第一确定单元，用于基于目标图像中各像素的像素值，确定目标图像中第一特征的第一位置和第二特征的第二位置，其中，所述第一特征为所述目标图像中目标对象的外轮廓特征；所述第二特征为所述目标对象中干扰子对象的特征，所述干扰子对象为所述目标对象中会对遮挡检测造成干扰的子对象
第二确定单元，用于基于所述第一位置，确定所述目标对象所在的图像区域；
划分单元，用于基于所述第二位置，将所述图像区域分为至少两个检测区域；
第三确定单元，用于结合每一个所述检测区域的至少部分像素值，确定每一个所述检测区域内是否均满足所述预设无遮挡条件；
第四确定单元，用于当不满足所述当所述预设无遮挡条件时，确定对应的检测区域内存在遮挡。
11.根据权利要求10所述的装置，其特征在于，
所述划分单元，用于串联所述第二位置，形成至少两个封闭的且不包括所述干扰子对象的检测区域。
12.根据权利要求10或11所述的装置，其特征在于，
所述装置还包括：
获取单元，用于获取所述目标对象的属性信息；其中，所述属性信包括：整体属性信息和/或区域属性；所述整体属性信息用于表征所述目标对象的整体属性；所述区域属性信息用于表征所述检测区域的区域属性；
第四确定单元，用于根据所述属性信息，确定判断依据参数和/或判断策略；
所述第三确定单元，具体用于执行以下至少之一：
结合所述判断依据参数及每一个所述检测区域的至少部分像素值，确定每一个所述检测区域是否满足所述预设无遮挡条件；
基于每一个所述检测区域的至少部分像素值，利用所述判断策略确定每一个所述检测区域是否满足所述预设无遮挡条件。
13.一种电子设备，其特征在于，包括:
存储器，用于存储信息；
处理器，与所述存储器连接，用于通过执行存储在所述存储器内的计算机程序，能够执行权利要求1至9任一项提供的方法。
14.一种计算机存储介质，其特征在于，所述计算机存储介质存储有计算机程序；所述计算机程序被执行后能够实现权利要求1至9任一项提供的方法。
CN201710625671.0A 2017-07-27 2017-07-27 目标对象的遮挡检测方法及装置、电子设备及存储介质 Active CN108319953B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201710625671.0A CN108319953B (zh) 2017-07-27 2017-07-27 目标对象的遮挡检测方法及装置、电子设备及存储介质
PCT/CN2018/090994 WO2019019828A1 (zh) 2017-07-27 2018-06-13 目标对象的遮挡检测方法及装置、电子设备及存储介质
US16/545,017 US11030481B2 (en) 2017-07-27 2019-08-20 Method and apparatus for occlusion detection on target object, electronic device, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710625671.0A CN108319953B (zh) 2017-07-27 2017-07-27 目标对象的遮挡检测方法及装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN108319953A true CN108319953A (zh) 2018-07-24
CN108319953B CN108319953B (zh) 2019-07-16

Family

ID=62891456

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710625671.0A Active CN108319953B (zh) 2017-07-27 2017-07-27 目标对象的遮挡检测方法及装置、电子设备及存储介质

Country Status (3)

Country Link
US (1) US11030481B2 (zh)
CN (1) CN108319953B (zh)
WO (1) WO2019019828A1 (zh)

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109299658A (zh) * 2018-08-21 2019-02-01 腾讯科技（深圳）有限公司 脸部检测方法、脸部图像渲染方法、装置及存储介质
CN109568961A (zh) * 2018-12-04 2019-04-05 网易（杭州）网络有限公司 遮挡率的计算方法、装置、存储介质和电子装置
CN109784255A (zh) * 2019-01-07 2019-05-21 深圳市商汤科技有限公司 神经网络训练方法及装置以及识别方法及装置
CN110263695A (zh) * 2019-06-14 2019-09-20 北京达佳互联信息技术有限公司 人脸部位的位置获取方法、装置、电子设备及存储介质
CN110366037A (zh) * 2019-07-31 2019-10-22 秒针信息技术有限公司 视频自动监测装置、方法、电子设备和存储介质
CN110765815A (zh) * 2018-07-26 2020-02-07 北京京东尚科信息技术有限公司 展示架遮挡检测方法和装置
CN110837764A (zh) * 2018-08-17 2020-02-25 广东虚拟现实科技有限公司 图像处理方法、装置、电子设备及视觉交互系统
CN110889320A (zh) * 2018-09-11 2020-03-17 苹果公司 眼周面部识别切换
CN111241870A (zh) * 2018-11-28 2020-06-05 深圳市帝迈生物技术有限公司 一种终端设备及其脸部图像的识别方法、识别系统
KR20200110642A (ko) * 2019-03-11 2020-09-24 선전 센스타임 테크놀로지 컴퍼니 리미티드 이미지 처리 방법 및 장치, 전자 기기 및 저장 매체
CN111896145A (zh) * 2020-07-07 2020-11-06 胡飞青 应用发体识别的测温控制系统
CN111985340A (zh) * 2020-07-22 2020-11-24 深圳市威富视界有限公司 基于神经网络模型的人脸识别方法、装置和计算机设备
CN112464747A (zh) * 2020-11-10 2021-03-09 广州富港万嘉智能科技有限公司 基于图像采集设备的身高检测方法及装置
CN112598628A (zh) * 2020-12-08 2021-04-02 影石创新科技股份有限公司 一种图像遮挡检测方法、装置、拍摄设备及介质
US20210142108A1 (en) * 2018-11-15 2021-05-13 Tencent Technology (Shenzhen) Company Limited Methods, apparatus, and storage medium for classifying graph nodes
CN112926424A (zh) * 2021-02-10 2021-06-08 北京爱笔科技有限公司 脸部遮挡的识别方法、装置、可读介质以及设备
CN112950988A (zh) * 2021-02-25 2021-06-11 杭州立方控股股份有限公司 具有存证功能的停车管理系统
CN112989878A (zh) * 2019-12-13 2021-06-18 Oppo广东移动通信有限公司 瞳孔检测方法及相关产品
CN113069088A (zh) * 2021-03-24 2021-07-06 重庆电子工程职业学院 一种人工智能交互装置
CN113222973A (zh) * 2021-05-31 2021-08-06 深圳市商汤科技有限公司 图像处理方法及装置、处理器、电子设备及存储介质
CN113469173A (zh) * 2020-03-31 2021-10-01 珠海格力电器股份有限公司 一种信号灯遮挡检测方法、装置、终端及计算机可读介质
CN113486737A (zh) * 2021-06-22 2021-10-08 卓尔智联(武汉)研究院有限公司 一种检测方法、装置、检测设备及存储介质
CN113496158A (zh) * 2020-03-20 2021-10-12 中移(上海)信息通信科技有限公司 对象检测模型的优化方法、装置、设备及存储介质
WO2021218238A1 (zh) * 2020-04-29 2021-11-04 华为技术有限公司 图像处理方法和图像处理装置
CN115909468A (zh) * 2023-01-09 2023-04-04 广州佰锐网络科技有限公司 人脸五官遮挡检测方法、存储介质及系统

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10896318B2 (en) * 2017-09-09 2021-01-19 Apple Inc. Occlusion detection for facial recognition processes
CN107909065B (zh) * 2017-12-29 2020-06-16 百度在线网络技术（北京）有限公司 用于检测人脸遮挡的方法及装置
CN110222764B (zh) * 2019-06-10 2021-06-18 中南民族大学 遮挡目标检测方法、系统、设备及存储介质
NL2024816B1 (en) * 2020-02-03 2021-10-05 20Face B V Detection method for detecting an occlusion of an eye region in an image
CN111311578A (zh) * 2020-02-17 2020-06-19 腾讯科技（深圳）有限公司 基于人工智能的对象分类方法以及装置、医学影像设备
CN111488811B (zh) * 2020-03-31 2023-08-22 长沙千视通智能科技有限公司 人脸识别方法、装置、终端设备及计算机可读介质
CN111382726B (zh) * 2020-04-01 2023-09-01 浙江大华技术股份有限公司 工程作业检测方法以及相关装置
US11823458B2 (en) * 2020-06-18 2023-11-21 Embedtek, LLC Object detection and tracking system
CN112070854B (zh) * 2020-09-02 2023-08-08 北京字节跳动网络技术有限公司 一种图像生成方法、装置、设备及存储介质
CN112434562B (zh) * 2020-11-03 2023-08-25 浙江大华技术股份有限公司 口罩佩戴状态的检测方法、设备、电子装置和存储介质
CN112434578B (zh) * 2020-11-13 2023-07-25 浙江大华技术股份有限公司 口罩佩戴规范性检测方法、装置、计算机设备和存储介质
CN112530059B (zh) * 2020-11-24 2022-07-05 厦门熵基科技有限公司 一种通道闸内拉杆箱判断方法、装置、设备和存储介质
CN112446913B (zh) * 2020-11-24 2023-08-29 厦门熵基科技有限公司 一种通道闸行人数量统计与尾随判断方法、装置和设备
CN112633144A (zh) * 2020-12-21 2021-04-09 平安科技（深圳）有限公司 人脸遮挡检测方法、系统、设备及存储介质
CN112633183B (zh) * 2020-12-25 2023-11-14 平安银行股份有限公司 影像遮挡区域自动检测方法、装置及存储介质
CN113011298B (zh) * 2021-03-09 2023-12-22 阿波罗智联(北京)科技有限公司 截断物体样本生成、目标检测方法、路侧设备和云控平台
CN113012126B (zh) * 2021-03-17 2024-03-22 武汉联影智融医疗科技有限公司 标记点重建方法、装置、计算机设备和存储介质
CN113140005B (zh) * 2021-04-29 2024-04-16 上海商汤科技开发有限公司 目标对象定位方法、装置、设备及存储介质
CN113284041B (zh) * 2021-05-14 2023-04-18 北京市商汤科技开发有限公司 一种图像处理方法、装置、设备及计算机存储介质
CN114758363B (zh) * 2022-06-16 2022-08-19 四川金信石信息技术有限公司 一种基于深度学习的绝缘手套佩戴检测方法和系统
TWI818824B (zh) * 2022-12-07 2023-10-11 財團法人工業技術研究院 用於計算遮蔽人臉影像的人臉擺動方向的裝置及方法
CN117119160B (zh) * 2023-10-24 2024-02-06 合肥联宝信息技术有限公司 一种投影控制方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105827979A (zh) * 2016-04-29 2016-08-03 维沃移动通信有限公司 一种拍摄提示的方法和移动终端
CN106503625A (zh) * 2016-09-28 2017-03-15 维沃移动通信有限公司 一种检测头发分布情况的方法及移动终端
US20170147905A1 (en) * 2015-11-25 2017-05-25 Baidu Usa Llc Systems and methods for end-to-end object detection

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7792335B2 (en) * 2006-02-24 2010-09-07 Fotonation Vision Limited Method and apparatus for selective disqualification of digital images
US7804983B2 (en) * 2006-02-24 2010-09-28 Fotonation Vision Limited Digital image acquisition control and correction method and apparatus
US7551754B2 (en) * 2006-02-24 2009-06-23 Fotonation Vision Limited Method and apparatus for selective rejection of digital images
JP4845755B2 (ja) * 2007-01-30 2011-12-28 キヤノン株式会社 画像処理装置、画像処理方法、プログラム及び記憶媒体
US8836777B2 (en) * 2011-02-25 2014-09-16 DigitalOptics Corporation Europe Limited Automatic detection of vertical gaze using an embedded imaging device
US9558396B2 (en) * 2013-10-22 2017-01-31 Samsung Electronics Co., Ltd. Apparatuses and methods for face tracking based on calculated occlusion probabilities

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170147905A1 (en) * 2015-11-25 2017-05-25 Baidu Usa Llc Systems and methods for end-to-end object detection
CN105827979A (zh) * 2016-04-29 2016-08-03 维沃移动通信有限公司 一种拍摄提示的方法和移动终端
CN106503625A (zh) * 2016-09-28 2017-03-15 维沃移动通信有限公司 一种检测头发分布情况的方法及移动终端

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110765815A (zh) * 2018-07-26 2020-02-07 北京京东尚科信息技术有限公司 展示架遮挡检测方法和装置
CN110837764A (zh) * 2018-08-17 2020-02-25 广东虚拟现实科技有限公司 图像处理方法、装置、电子设备及视觉交互系统
CN109299658A (zh) * 2018-08-21 2019-02-01 腾讯科技（深圳）有限公司 脸部检测方法、脸部图像渲染方法、装置及存储介质
CN110889320B (zh) * 2018-09-11 2023-11-03 苹果公司 眼周面部识别切换
CN110889320A (zh) * 2018-09-11 2020-03-17 苹果公司 眼周面部识别切换
US20210142108A1 (en) * 2018-11-15 2021-05-13 Tencent Technology (Shenzhen) Company Limited Methods, apparatus, and storage medium for classifying graph nodes
US11853882B2 (en) * 2018-11-15 2023-12-26 Tencent Technology (Shenzhen) Company Limited Methods, apparatus, and storage medium for classifying graph nodes
CN111241870A (zh) * 2018-11-28 2020-06-05 深圳市帝迈生物技术有限公司 一种终端设备及其脸部图像的识别方法、识别系统
CN109568961B (zh) * 2018-12-04 2022-06-21 网易（杭州）网络有限公司 遮挡率的计算方法、装置、存储介质和电子装置
CN109568961A (zh) * 2018-12-04 2019-04-05 网易（杭州）网络有限公司 遮挡率的计算方法、装置、存储介质和电子装置
CN109784255B (zh) * 2019-01-07 2021-12-14 深圳市商汤科技有限公司 神经网络训练方法及装置以及识别方法及装置
CN109784255A (zh) * 2019-01-07 2019-05-21 深圳市商汤科技有限公司 神经网络训练方法及装置以及识别方法及装置
KR20200110642A (ko) * 2019-03-11 2020-09-24 선전 센스타임 테크놀로지 컴퍼니 리미티드 이미지 처리 방법 및 장치, 전자 기기 및 저장 매체
KR102446687B1 (ko) 2019-03-11 2022-09-23 선전 센스타임 테크놀로지 컴퍼니 리미티드 이미지 처리 방법 및 장치, 전자 기기 및 저장 매체
CN110263695B (zh) * 2019-06-14 2021-07-16 北京达佳互联信息技术有限公司 人脸部位的位置获取方法、装置、电子设备及存储介质
CN110263695A (zh) * 2019-06-14 2019-09-20 北京达佳互联信息技术有限公司 人脸部位的位置获取方法、装置、电子设备及存储介质
CN110366037A (zh) * 2019-07-31 2019-10-22 秒针信息技术有限公司 视频自动监测装置、方法、电子设备和存储介质
CN112989878A (zh) * 2019-12-13 2021-06-18 Oppo广东移动通信有限公司 瞳孔检测方法及相关产品
CN113496158A (zh) * 2020-03-20 2021-10-12 中移(上海)信息通信科技有限公司 对象检测模型的优化方法、装置、设备及存储介质
CN113469173A (zh) * 2020-03-31 2021-10-01 珠海格力电器股份有限公司 一种信号灯遮挡检测方法、装置、终端及计算机可读介质
WO2021218238A1 (zh) * 2020-04-29 2021-11-04 华为技术有限公司 图像处理方法和图像处理装置
CN111896145A (zh) * 2020-07-07 2020-11-06 胡飞青 应用发体识别的测温控制系统
WO2022007129A1 (zh) * 2020-07-07 2022-01-13 胡飞青 应用发体识别的测温控制系统
CN111985340A (zh) * 2020-07-22 2020-11-24 深圳市威富视界有限公司 基于神经网络模型的人脸识别方法、装置和计算机设备
CN112464747A (zh) * 2020-11-10 2021-03-09 广州富港万嘉智能科技有限公司 基于图像采集设备的身高检测方法及装置
WO2022121963A1 (zh) * 2020-12-08 2022-06-16 影石创新科技股份有限公司 一种图像遮挡检测方法、装置、拍摄设备及介质
CN112598628A (zh) * 2020-12-08 2021-04-02 影石创新科技股份有限公司 一种图像遮挡检测方法、装置、拍摄设备及介质
CN112926424A (zh) * 2021-02-10 2021-06-08 北京爱笔科技有限公司 脸部遮挡的识别方法、装置、可读介质以及设备
CN112950988B (zh) * 2021-02-25 2022-07-29 杭州立方控股股份有限公司 具有存证功能的停车管理系统
CN112950988A (zh) * 2021-02-25 2021-06-11 杭州立方控股股份有限公司 具有存证功能的停车管理系统
CN113069088A (zh) * 2021-03-24 2021-07-06 重庆电子工程职业学院 一种人工智能交互装置
CN113069088B (zh) * 2021-03-24 2023-05-05 重庆电子工程职业学院 一种人工智能交互装置
CN113222973A (zh) * 2021-05-31 2021-08-06 深圳市商汤科技有限公司 图像处理方法及装置、处理器、电子设备及存储介质
WO2022252737A1 (zh) * 2021-05-31 2022-12-08 上海商汤智能科技有限公司 图像处理方法及装置、处理器、电子设备及存储介质
CN113222973B (zh) * 2021-05-31 2024-03-08 深圳市商汤科技有限公司 图像处理方法及装置、处理器、电子设备及存储介质
CN113486737A (zh) * 2021-06-22 2021-10-08 卓尔智联(武汉)研究院有限公司 一种检测方法、装置、检测设备及存储介质
CN115909468A (zh) * 2023-01-09 2023-04-04 广州佰锐网络科技有限公司 人脸五官遮挡检测方法、存储介质及系统

Also Published As

Publication number Publication date
US11030481B2 (en) 2021-06-08
CN108319953B (zh) 2019-07-16
WO2019019828A1 (zh) 2019-01-31
US20200034657A1 (en) 2020-01-30

Similar Documents

Publication Publication Date Title
CN108319953B (zh) 目标对象的遮挡检测方法及装置、电子设备及存储介质
CN104951773B (zh) 一种实时人脸识别监视系统
Hu et al. Exposing GAN-generated faces using inconsistent corneal specular highlights
CN106778518B (zh) 一种人脸活体检测方法及装置
CN105138954B (zh) 一种图像自动筛选查询识别系统
CN105046219B (zh) 一种人脸识别系统
CN108549886A (zh) 一种人脸活体检测方法及装置
KR20200004841A (ko) 셀피를 촬영하도록 사용자를 안내하기 위한 시스템 및 방법
CN109558864A (zh) 人脸关键点检测方法、装置及存储介质
CN107808115A (zh) 一种活体检测方法、装置及存储介质
CN106951869B (zh) 一种活体验证方法及设备
CN106709404A (zh) 图像处理装置及图像处理方法
CN106326857A (zh) 基于人脸图像的性别识别方法及装置
CN106897659A (zh) 眨眼运动的识别方法和装置
CN108182714A (zh) 图像处理方法及装置、存储介质
CN107172354A (zh) 视频处理方法、装置、电子设备及存储介质
CN109117773A (zh) 一种图像特征点检测方法、终端设备及存储介质
CN109886153A (zh) 一种基于深度卷积神经网络的实时人脸检测方法
CN108198130A (zh) 图像处理方法、装置、存储介质及电子设备
CN108765014A (zh) 一种基于门禁系统的智能广告投放方法
CN109670517A (zh) 目标检测方法、装置、电子设备和目标检测模型
CN109815813A (zh) 图像处理方法及相关产品
CN112069891A (zh) 一种基于光照特征的深度伪造人脸鉴别方法
Xiao et al. Learning invariant structure for object identification by using graph methods
CN109409962A (zh) 图像处理方法、装置、电子设备、计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant