CN114529965A - 人物图像聚类方法、装置、计算机设备及存储介质 - Google Patents

人物图像聚类方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN114529965A
CN114529965A CN202111626643.3A CN202111626643A CN114529965A CN 114529965 A CN114529965 A CN 114529965A CN 202111626643 A CN202111626643 A CN 202111626643A CN 114529965 A CN114529965 A CN 114529965A
Authority
CN
China
Prior art keywords
image
similarity
character
person
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111626643.3A
Other languages
English (en)
Inventor
杨一帆
余晓填
王孝宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Intellifusion Technologies Co Ltd
Original Assignee
Shenzhen Intellifusion Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Intellifusion Technologies Co Ltd filed Critical Shenzhen Intellifusion Technologies Co Ltd
Priority to CN202111626643.3A priority Critical patent/CN114529965A/zh
Publication of CN114529965A publication Critical patent/CN114529965A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/23—Clustering techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明实施例涉及一种人物图像聚类方法、装置、计算机设备及存储介质，所述方法包括：获取人物图像集合中每张人物图像对应的人脸特征信息；基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合，由此方法，能够避免同一人物身份下的不同人物图像被聚类在不同的集合内的问题，实现人物图像的精准聚类。

Description

人物图像聚类方法、装置、计算机设备及存储介质
技术领域
本发明实施例涉及人物图像处理领域，尤其涉及一种人物图像聚类方法、装置、计算机设备及存储介质。
背景技术
目前的人物图像聚类的算法是基于人脸或人体特征比对的策略实现，将设备端上传的人脸或人体特征集合与数据库基础特征集合做对比，通过对比相似度及相应预设的相似度阈值，关联目标特征与基础特征集合关系，完成人物图像聚类任务。
然而，不同光照、角度、遮挡等采集条件下的人物图像特征区分度可能不同，因此，不同采集条件下的人物图像可能产生多域问题，即同一人物身份下的不同人物图像会被聚类在不同的集合内。如何实现不同采集条件下的同一人物身份的不同人物图像精准聚类成为亟待解决的问题。
发明内容
鉴于此，为解决上述技术问题或部分技术问题，本发明实施例提供一种人物图像聚类方法、装置、计算机设备及存储介质。
第一方面，本发明实施例提供一种人物图像聚类方法，包括：
获取人物图像集合中每张人物图像对应的人脸特征信息；
基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；
将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；
对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；
对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
第二方面，本发明实施例提供一种人物图像聚类装置，包括：
获取模块，用于获取人物图像集合中每张人物图像对应的人脸特征信息；
确定模块，用于基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；
聚类模块，用于将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；
所述聚类模块，还用于对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；
所述聚类模块，还用于对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
第三方面，本发明实施例提供一种计算机设备，包括：处理器和存储器，所述处理器用于执行所述存储器中存储的人物图像聚类程序，以实现上述第一方面中所述的人物图像聚类方法。
第四方面，本发明实施例提供一种存储介质，包括：所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现上述第一方面中所述的人物图像聚类方法。
本发明实施例提供的人物图像聚类方案，通过获取人物图像集合中每张人物图像对应的人脸特征信息；基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合，相比于现有技术中没有考虑光照、角度、遮挡等采集条件下的人物图像特征对图像进行聚类，可能造成同一人物身份下的不同人物图像会被聚类在不同的集合内的问题，由本方案，通过多次聚类以及对不同的聚类集合进行相似度比对，能够避免同一人物身份下的不同人物图像被聚类在不同的集合内的问题，实现人物图像的精准聚类。
附图说明
图1为本发明实施例提供的一种人物图像聚类方法的流程示意图；
图2为本发明实施例提供的另一种人物图像聚类方法的流程示意图；
图3为本发明实施例提供的一种获取第二人物图像集合之间的集合相似度方法的流程示意图；
图4为本发明实施例提供的另一种获取第二人物图像集合之间的集合相似度方法的流程示意图；
图5为本发明实施例提供的一种人物图像聚类装置的结构示意图；
图6为本发明实施例提供的一种计算机设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为便于对本发明实施例的理解，下面将结合附图以具体实施例做进一步的解释说明，实施例并不构成对本发明实施例的限定。
图1为本发明实施例提供的一种人物图像聚类方法的流程示意图，如图1所示，该方法具体包括：
S11、获取人物图像集合中每张人物图像对应的人脸特征信息。
本发明可以应用于人物图像聚类场景，可以用于识别不同背景下的人物并进行同一人物身份下的图像聚类，本发明实施例中，首先给定一个人物图像集合，包含有多张人物图像，进而可以采用人脸检测器以及人脸深度特征识别模型完成每张人物图像对应的人脸特征信息的识别。
具体的，人脸检测器可以是人脸识别模型，将待检测的人物图像输入该人脸识别模型中，人脸识别模型对接收到的人物图像进行识别，并圈出人物图像中的人脸位置，可以采用人脸框对识别出人脸区域进行标识。
进一步的，通过人脸深度特征识别模型对每张人物图像中的人脸框内的人脸进行人脸特征信息的识别，该人脸深度特征识别模型中存储有标准人脸特征信息，将识别到的人物图像对应的人脸特征信息与标准人脸特征信息进行对比，得到人物图像集合中每张人物图像对应的人脸特征信息，该人脸特征信息可以表示为特征向量。
S12、基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度。
基于上述获取到的人物图像集合中每张人物图像对应的人脸特征信息，可以对比人物图像集合中每张人物图像与其他人物图像的人脸特征相似度，该人脸特征相似度可以是余弦相似度。
S13、将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合。
本发明实施例中，预先设定一个第一阈值，即人脸特征相似度阈值，将人脸特征相似度大于该第一阈值的人物图像进行聚类，得到多个第一人物图像集合。
例如，人物图像集合中包含有5张人物图像，其中图像A与图像B的人脸特征相似度为9，图像C与图像D的人脸特征相似度为9，图像A与图像E的人脸特征相似度为1，图像C与图像E的人脸特征相似度为2；设定第一阈值为8，则可以将图像A与图像B聚类到同一集合，将图像C与图像D聚类到同一集合，图像E单独成为一集合。
S14、对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合。
本发明实施例中，对上述得到的多个第一人物图像集合进行二次优化分类，优化标准可以是细化多个特征类别，将每个第一人物图像集合中符合特征类别的图像进行再次聚类，每个第一人物图像集合可以得到多个第二人物图像集合。其中，可以将不同角度的图像、不同光照下的图像等的特征设定为特征类别，至于如何进行优化分类，在下面实施例进行具体说明，在此先不详述。
S15、对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
本发明实施例中，还可以预先设定一个第二阈值，即集合相似度阈值，在得到多个第二人物图像集合后，可以对比多个第二人物图像集合之间的集合相似度，将将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合，该第三人物图像集合作为最终聚类结果，包含有同一人物身份下的全部图像。至于如何对比集合相似度，在下面实施例进行具体说明，在此先不详述。
本发明实施例提供的人物图像聚类方法，通过获取人物图像集合中每张人物图像对应的人脸特征信息；基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合，相比于现有技术中没有考虑光照、角度、遮挡等采集条件下的人物图像特征对图像进行聚类，可能造成同一人物身份下的不同人物图像会被聚类在不同的集合内的问题，由本方法，通过多次聚类以及对不同的聚类集合进行相似度比对，能够避免同一人物身份下的不同人物图像被聚类在不同的集合内的问题，实现人物图像的精准聚类。
图2为本发明实施例提供的另一种人物图像聚类方法的流程示意图，如图2所示，该方法具体包括：
S21、识别所述人物图像集合中每张人物图像对应的人脸图片。
本发明实施例中，首先给定一个人物图像集合，包含有多张人物图像，进而可以采用人脸检测器以及人脸深度特征识别模型完成每张人物图像对应的人脸特征信息的识别。
具体的，人脸检测器识别并圈出人物图像中的人脸位置，可以采用人脸识别框进行标识，得到每张人物图像对应的人脸图片。
S22、从所述人脸图片中提取人脸特征信息，得到所述人物图像集合中每张人物图像对应的人脸特征信息。
通过人脸深度特征识别模型对每张人物图像对应的人脸图片进行人脸特征信息的识别，得到人物图像集合中每张人物图像对应的人脸特征信息。
S23、基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度。
基于上述获取到的人物图像集合中每张人物图像对应的人脸特征信息，可以对比人物图像集合中每张人物图像与其他人物图像的人脸特征相似度，该人脸特征相似度可以是余弦相似度。
例如，人物图像集合中包含有4张人物图像，其中图像A与图像B的人脸特征相似度为9，图像A与图像C的人脸特征相似度为2，图像A与图像D的人脸特征相似度为4，图像B与图像C的人脸特征相似度为3，图像B与图像D的人脸特征相似度为3，图像C与图像D的人脸特征相似度为8。
S24、基于每张人物图像与其他人物图像的人脸特征相似度，构建相似度网络结构图。
基于上述得到的每张人物图像与其他人物图像的人脸特征相似度，构建一个相似度网络结构图，其中，相似度网络结构图中的每个节点为一张人脸图片，每两个节点之间的连接线为人脸特征相似度。
S25、将所述相似度网络结构图中每两个节点之间的连接线对应的人脸特征相似度大于第一阈值的连接线保留，删除其余连接线，得到多组存在连接关系的人物图像。
S26、将每组存在连接关系的人物图像进行聚类，得到多个第一人物图像集合。
以下对S25～S26进行统一描述：
本发明实施例中，可以设置一个第一阈值，即人脸特征相似度阈值，将相似度网络结构图中每两个节点之间的连接线对应的人脸特征相似度大于第一阈值的连接线保留，删除人脸特征相似度小于或等于第一阈值的连接线，得到多组存在连接关系的人物图像。
进一步的，将相似度网络结构图中显示的每组存在连接关系的人物图像作为一个聚类集合，得到多个第一人物图像集合。
S27、基于所述第一人物图像集合中每张人物图像对应的人脸特征信息，确定多个特征类别。
S28、基于所述特征类别对所述第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合。
以下对S27～S28进行统一描述：
本发明实施例中，对上述得到的多个第一人物图像集合进行二次优化分类，优化标准可以是细化多个特征类别，将每个第一人物图像集合中符合特征类别的图像进行再次聚类，每个第一人物图像集合可以得到多个第二人物图像集合。其中，可以将不同角度的图像、不同光照下的图像等的特征设定为特征类别。
S29、对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
本发明实施例中，还可以预先设定一个第二阈值，即集合相似度阈值，在得到多个第二人物图像集合后，可以对比多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合，该第三人物图像集合作为最终聚类结果，包含有同一人物身份下的全部图像。
具体的，集合相似度可以包括：平均特征相似度、最大特征相似度、最小特征相似度、中心特征相似度中的任一一种。以平均特征相似度为例，平均特征相似度为两个第二人物图像集合之间任意两张人物图像的人脸特征相似度平均值。
例如，集合1中包含有3张人物图像A、B、C；集合2中包含有3张人物图像a、b、c；A与a的相似度为4，A与b的相似度为8，A与c的相似度为6，B与a的相似度为5，B与b的相似度为4，B与c的相似度为9，C与a的相似度为8，C与b的相似度为2，C与c的相似度为7，得到集合1与集合2的平均特征相似度为(4+8+6+5+4+9+8+2+7)÷9＝5.89，平均特征相似度阈值(第二阈值)设定为5，则可以确定集合1与集合2的平均特征相似度大于平均特征相似度阈值，表征集合1和集合2都为同一人物身份下的图像集合，将集合1和集合2进行聚类。
本发明实施例提供的人物图像聚类方法，通过获取人物图像集合中每张人物图像对应的人脸特征信息；基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合，由本方法，通过多次聚类以及对不同的聚类集合进行相似度比对，能够避免同一人物身份下的不同人物图像被聚类在不同的集合内的问题，实现人物图像的精准聚类。
图3为本发明实施例提供的一种获取第二人物图像集合之间的集合相似度方法的流程示意图，如图3所示，该方法具体包括：
S31、获取任意两个所述第二人物图像集合中任意两张人物图像对应的人脸特征相似度。
S32、基于所述人脸特征相似度确定所述多个第二人物图像集合之间的集合相似度，所述集合相似度为平均特征相似度、最大特征相似度、最小特征相似度中的任意一种。
以下对S31～S32进行统一描述：
本发明实施例中，获取任意两个第二人物图像集合中任意两张人物图像对应的人脸特征相似度，根据人脸特征相似度计算集合相似度，集合相似度可以包括：平均特征相似度、最大特征相似度、最小特征相似度、中心特征相似度中的任一一种。以最大特征相似度为例，最大特征相似度为两个第二人物图像集合之间任意两张人物图像的人脸特征相似度最大值。
具体的，例如，集合1中包含有3张人物图像A、B、C；集合2中包含有3张人物图像a、b、c；A与a的相似度为4，A与b的相似度为8，A与c的相似度为6，B与a的相似度为5，B与b的相似度为4，B与c的相似度为9，C与a的相似度为8，C与b的相似度为2，C与c的相似度为7，得到集合1与集合2的最大特征相似度为9，最大特征相似度阈值(第二阈值)设定为8，则可以确定集合1与集合2的平均特征相似度大于最大特征相似度阈值，表征集合1和集合2都为同一人物身份下的图像集合，将集合1和集合2进行聚类。
相应的，最小特征相似度为两个第二人物图像集合之间任意两张人物图像的人脸特征相似度最小值，若最小特征相似度小于或等于最小特征相似度阈值，则可以确定两个集合不是同一人物身份下的图像集合，若最小特征相似度大于最小特征相似度阈值，则可以确定两个集合为同一人物身份下的图像集合，将两个集合进行聚类。
本发明实施例提供的获取第二人物图像集合之间的集合相似度方法，可以将第二人物图像集合进行二次聚类，能够避免同一人物身份下的不同人物图像被聚类在不同的集合内的问题，实现人物图像的精准聚类。
图4为本发明实施例提供的另一种获取第二人物图像集合之间的集合相似度方法的流程示意图，如图4所示，该方法具体包括：
S41、获取每个第二人物图像集合对应的中心人物图像。
本发明实施例中，通过中介中心性(betweenness centrality)衡量每个第二人物图像集合的中心节点，可以通过识别相似度网络结构图中任意两个节点的最短路径，在所有最短路径中出现频次最多的节点即为核心节点，该核心节点对应的人物图像即为第二人物图像集合对应的中心人物图像。
S42、基于所述中心人物图像对应的人脸特征信息，确定所述多个第二人物图像集合之间的中心特征相似度。
S43、将所述中心特征相似度确定所述多个第二人物图像集合之间的集合相似度。
以下对S42～S43进行统一描述：
基于中心人物图像对应的人脸特征信息，可以对比多个第二人物图像集合之间的中心特征相似度。
例如，集合1与集合2的中心特征相似度为8，集合1与集合3的中心特征相似度为2，集合1与集合4的中心特征相似度为4，集合2与集合3的中心特征相似度为4，集合2与集合4的中心特征相似度为1，集合3与集合4的中心特征相似度为9，中心特征相似度阈值设定为5，则可以确定集合1与集合2的中心特征相似度大于中心特征相似度阈值，表征集合1和集合2都为同一人物身份下的图像集合，将集合1和集合2进行聚类，集合3与集合4的中心特征相似度大于中心特征相似度阈值，表征集合3与集合4都为同一人物身份下的图像集合，将集合3与集合4进行聚类。
本发明实施例提供的获取第二人物图像集合之间的集合相似度方法，可以将第二人物图像集合进行二次聚类，能够避免同一人物身份下的不同人物图像被聚类在不同的集合内的问题，实现人物图像的精准聚类。
图5为本发明实施例提供的一种人物图像聚类装置的结构示意图，具体包括：
获取模块501，用于获取人物图像集合中每张人物图像对应的人脸特征信息；
确定模块502，用于基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；
聚类模块503，用于将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；
所述聚类模块503，还用于对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；
所述聚类模块503，还用于对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
在一个可能的实施方式中，所述获取模块501，具体用于识别所述人物图像集合中每张人物图像对应的人脸图片；从所述人脸图片中提取人脸特征信息，得到所述人物图像集合中每张人物图像对应的人脸特征信息。
在一个可能的实施方式中，所述聚类模块503，具体用于基于每张人物图像与其他人物图像的人脸特征相似度，构建相似度网络结构图，其中，所述相似度网络结构图中的每个节点为一张人脸图片，每两个节点之间的连接线为所述人脸特征相似度；将所述相似度网络结构图中每两个节点之间的连接线对应的人脸特征相似度大于第一阈值的连接线保留，删除其余连接线，得到多组存在连接关系的人物图像；将每组存在连接关系的人物图像进行聚类，得到多个第一人物图像集合。
在一个可能的实施方式中，所述聚类模块503，还用于基于所述第一人物图像集合中每张人物图像对应的人脸特征信息，确定多个特征类别；基于所述特征类别对所述第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合。
在一个可能的实施方式中，所述聚类模块503，还用于获取任意两个所述第二人物图像集合中任意两张人物图像对应的人脸特征相似度；基于所述人脸特征相似度确定所述多个第二人物图像集合之间的集合相似度，所述集合相似度为平均特征相似度、最大特征相似度、最小特征相似度中的任意一种。
在一个可能的实施方式中，所述聚类模块503，还用于获取每个第二人物图像集合对应的中心人物图像；基于所述中心人物图像对应的人脸特征信息，确定所述多个第二人物图像集合之间的中心特征相似度；将所述中心特征相似度确定所述多个第二人物图像集合之间的集合相似度。
本实施例提供的人物图像聚类装置可以是如图5中所示的人物图像聚类装置，可执行如图1-4中人物图像聚类方法的所有步骤，进而实现图1-4所示人物图像聚类方法的技术效果，具体请参照图1-4相关描述，为简洁描述，在此不作赘述。
图6为本发明实施例提供的一种计算机设备的结构示意图，图6所示的计算机设备600包括：至少一个处理器601、存储器602、至少一个网络接口604和其他用户接口603。计算机设备600中的各个组件通过总线系统605耦合在一起。可理解，总线系统605用于实现这些组件之间的连接通信。总线系统605除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图6中将各种总线都标为总线系统605。
其中，用户接口603可以包括显示器、键盘或者点击设备(例如，鼠标，轨迹球(trackball)、触感板或者触摸屏等。
可以理解，本发明实施例中的存储器602可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM，DRRAM)。本文描述的存储器602旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中，存储器602存储了如下的元素，可执行单元或者数据结构，或者他们的子集，或者他们的扩展集：操作系统6021和应用程序6022。
其中，操作系统6021，包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序6022，包含各种应用程序，例如媒体播放器(Media Player)、浏览器(Browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序6022中。
在本发明实施例中，通过调用存储器602存储的程序或指令，具体的，可以是应用程序6022中存储的程序或指令，处理器601用于执行各方法实施例所提供的方法步骤，例如包括：
获取人物图像集合中每张人物图像对应的人脸特征信息；基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
在一个可能的实施方式中，识别所述人物图像集合中每张人物图像对应的人脸图片；从所述人脸图片中提取人脸特征信息，得到所述人物图像集合中每张人物图像对应的人脸特征信息。
在一个可能的实施方式中，基于每张人物图像与其他人物图像的人脸特征相似度，构建相似度网络结构图，其中，所述相似度网络结构图中的每个节点为一张人脸图片，每两个节点之间的连接线为所述人脸特征相似度；将所述相似度网络结构图中每两个节点之间的连接线对应的人脸特征相似度大于第一阈值的连接线保留，删除其余连接线，得到多组存在连接关系的人物图像；将每组存在连接关系的人物图像进行聚类，得到多个第一人物图像集合。
在一个可能的实施方式中，基于所述第一人物图像集合中每张人物图像对应的人脸特征信息，确定多个特征类别；基于所述特征类别对所述第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合。
在一个可能的实施方式中，所述多个第二人物图像集合之间的集合相似度通过如下方式得到：获取任意两个所述第二人物图像集合中任意两张人物图像对应的人脸特征相似度；基于所述人脸特征相似度确定所述多个第二人物图像集合之间的集合相似度，所述集合相似度为平均特征相似度、最大特征相似度、最小特征相似度中的任意一种。
在一个可能的实施方式中，所述多个第二人物图像集合之间的集合相似度通过如下方式得到：获取每个第二人物图像集合对应的中心人物图像；基于所述中心人物图像对应的人脸特征信息，确定所述多个第二人物图像集合之间的中心特征相似度；将所述中心特征相似度确定所述多个第二人物图像集合之间的集合相似度。
上述本发明实施例揭示的方法可以应用于处理器601中，或者由处理器601实现。处理器601可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器601中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器601可以是通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(FieldProgrammable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件单元组合执行完成。软件单元可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器602，处理器601读取存储器602中的信息，结合其硬件完成上述方法的步骤。
可以理解的是，本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits，ASIC)、数字信号处理器(Digital Signal Processing，DSP)、数字信号处理设备(DSPDevice，DSPD)、可编程逻辑设备(Programmable LogicDevice，PLD)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现，可通过执行本文所述功能的单元来实现本文所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
本实施例提供的计算机设备可以是如图6中所示的计算机设备，可执行如图1-4中人物图像聚类方法的所有步骤，进而实现图1-4所示人物图像聚类方法的技术效果，具体请参照图1-4相关描述，为简洁描述，在此不作赘述。
本发明实施例还提供了一种存储介质(计算机可读存储介质)。这里的存储介质存储有一个或者多个程序。其中，存储介质可以包括易失性存储器，例如随机存取存储器；存储器也可以包括非易失性存储器，例如只读存储器、快闪存储器、硬盘或固态硬盘；存储器还可以包括上述种类的存储器的组合。
当存储介质中一个或者多个程序可被一个或者多个处理器执行，以实现上述在计算机设备侧执行的人物图像聚类方法。
所述处理器用于执行存储器中存储的人物图像聚类程序，以实现以下在计算机设备侧执行的人物图像聚类方法的步骤：
获取人物图像集合中每张人物图像对应的人脸特征信息；基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
在一个可能的实施方式中，识别所述人物图像集合中每张人物图像对应的人脸图片；从所述人脸图片中提取人脸特征信息，得到所述人物图像集合中每张人物图像对应的人脸特征信息。
在一个可能的实施方式中，基于每张人物图像与其他人物图像的人脸特征相似度，构建相似度网络结构图，其中，所述相似度网络结构图中的每个节点为一张人脸图片，每两个节点之间的连接线为所述人脸特征相似度；将所述相似度网络结构图中每两个节点之间的连接线对应的人脸特征相似度大于第一阈值的连接线保留，删除其余连接线，得到多组存在连接关系的人物图像；将每组存在连接关系的人物图像进行聚类，得到多个第一人物图像集合。
在一个可能的实施方式中，基于所述第一人物图像集合中每张人物图像对应的人脸特征信息，确定多个特征类别；基于所述特征类别对所述第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合。
在一个可能的实施方式中，所述多个第二人物图像集合之间的集合相似度通过如下方式得到：获取任意两个所述第二人物图像集合中任意两张人物图像对应的人脸特征相似度；基于所述人脸特征相似度确定所述多个第二人物图像集合之间的集合相似度，所述集合相似度为平均特征相似度、最大特征相似度、最小特征相似度中的任意一种。
在一个可能的实施方式中，所述多个第二人物图像集合之间的集合相似度通过如下方式得到：获取每个第二人物图像集合对应的中心人物图像；基于所述中心人物图像对应的人脸特征信息，确定所述多个第二人物图像集合之间的中心特征相似度；将所述中心特征相似度确定所述多个第二人物图像集合之间的集合相似度。
专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种人物图像聚类方法，其特征在于，包括：
获取人物图像集合中每张人物图像对应的人脸特征信息；
基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；
将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；
对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；
对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
2.根据权利要求1所述的方法，其特征在于，所述获取人物图像集合中每张人物图像对应的人脸特征信息，包括：
识别所述人物图像集合中每张人物图像对应的人脸图片；
从所述人脸图片中提取人脸特征信息，得到所述人物图像集合中每张人物图像对应的人脸特征信息。
3.根据权利要求2所述的方法，其特征在于，所述将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合，包括：
基于每张人物图像与其他人物图像的人脸特征相似度，构建相似度网络结构图，其中，所述相似度网络结构图中的每个节点为一张人脸图片，每两个节点之间的连接线为所述人脸特征相似度；
将所述相似度网络结构图中每两个节点之间的连接线对应的人脸特征相似度大于第一阈值的连接线保留，删除其余连接线，得到多组存在连接关系的人物图像；
将每组存在连接关系的人物图像进行聚类，得到多个第一人物图像集合。
4.根据权利要求3所述的方法，其特征在于，所述对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合，包括：
基于所述第一人物图像集合中每张人物图像对应的人脸特征信息，确定多个特征类别；
基于所述特征类别对所述第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合。
5.根据权利要求4所述的方法，其特征在于，所述多个第二人物图像集合之间的集合相似度通过如下方式得到：
获取任意两个所述第二人物图像集合中任意两张人物图像对应的人脸特征相似度；
基于所述人脸特征相似度确定所述多个第二人物图像集合之间的集合相似度，所述集合相似度为平均特征相似度、最大特征相似度、最小特征相似度中的任意一种。
6.根据权利要求4所述的方法，其特征在于，所述多个第二人物图像集合之间的集合相似度通过如下方式得到：
获取每个第二人物图像集合对应的中心人物图像；
基于所述中心人物图像对应的人脸特征信息，确定所述多个第二人物图像集合之间的中心特征相似度；
将所述中心特征相似度确定所述多个第二人物图像集合之间的集合相似度。
7.一种人物图像聚类装置，其特征在于，包括：
获取模块，用于获取人物图像集合中每张人物图像对应的人脸特征信息；
确定模块，用于基于所述人脸特征信息确定每张人物图像与其他人物图像的人脸特征相似度；
聚类模块，用于将所述人脸特征相似度大于第一阈值的人物图像进行聚类，得到多个第一人物图像集合；
所述聚类模块，还用于对每个第一人物图像集合中的人物图像进行优化分类，得到多个第二人物图像集合；
所述聚类模块，还用于对比所述多个第二人物图像集合之间的集合相似度，将集合相似度大于第二阈值的第二人物图像集合进行聚类，得到第三人物图像集合。
8.根据权利要求7所述的人物图像聚类装置，其特征在于，所述获取模块，具体用于识别所述人物图像集合中每张人物图像对应的人脸图片；从所述人脸图片中提取人脸特征信息，得到所述人物图像集合中每张人物图像对应的人脸特征信息。
9.一种计算机设备，其特征在于，包括：处理器和存储器，所述处理器用于执行所述存储器中存储的人物图像聚类程序，以实现权利要求1～6中任一项所述的人物图像聚类方法。
10.一种存储介质，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现权利要求1～6中任一项所述的人物图像聚类方法。
CN202111626643.3A 2021-12-28 2021-12-28 人物图像聚类方法、装置、计算机设备及存储介质 Pending CN114529965A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111626643.3A CN114529965A (zh) 2021-12-28 2021-12-28 人物图像聚类方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111626643.3A CN114529965A (zh) 2021-12-28 2021-12-28 人物图像聚类方法、装置、计算机设备及存储介质

Publications (1)

Publication Number Publication Date
CN114529965A true CN114529965A (zh) 2022-05-24

Family

ID=81619989

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111626643.3A Pending CN114529965A (zh) 2021-12-28 2021-12-28 人物图像聚类方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN114529965A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117009564A (zh) * 2023-09-28 2023-11-07 荣耀终端有限公司 图片处理方法和电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117009564A (zh) * 2023-09-28 2023-11-07 荣耀终端有限公司 图片处理方法和电子设备
CN117009564B (zh) * 2023-09-28 2024-01-05 荣耀终端有限公司 图片处理方法和电子设备

Similar Documents

Publication Publication Date Title
US10366275B2 (en) Method and device for improving fingerprint template, and terminal device
CN111010590B (zh) 一种视频裁剪方法及装置
US11244199B2 (en) User identity determining method, apparatus, and device
US9576218B2 (en) Selecting features from image data
US8693739B2 (en) Systems and methods for performing facial detection
CN110413815B (zh) 人像聚类清洗方法和装置
CN108596079B (zh) 手势识别方法、装置及电子设备
EP3327613A1 (en) Fingerprint entry method, apparatus, and terminal device
JP2014106736A (ja) 情報処理装置及びその制御方法
CN113657434A (zh) 人脸人体关联方法、系统以及计算机可读存储介质
CN110569887B (zh) 基于预测层特征增强的目标检测方法、存储介质及设备
CN110909889B (zh) 一种基于特征分布的训练集生成、模型训练方法及装置
CN114529965A (zh) 人物图像聚类方法、装置、计算机设备及存储介质
CN112149570A (zh) 多人活体检测方法、装置、电子设备及存储介质
US20160019440A1 (en) Feature Interpolation
CN116912214B (zh) 用于对动脉瘤检测图像进行分割的方法、设备及存储介质
CN116227573B (zh) 分割模型训练方法、图像分割方法、装置及相关介质
WO2020244076A1 (zh) 人脸识别方法、装置、电子设备及存储介质
CN112015529A (zh) 数据任务调度方法、系统、电子设备及存储介质
US20220122341A1 (en) Target detection method and apparatus, electronic device, and computer storage medium
CN115082999A (zh) 合影图像人物分析方法、装置、计算机设备和存储介质
CN109614854B (zh) 视频数据处理方法及装置、计算机装置及可读存储介质
US20220318359A1 (en) Method and apparatus for deep learning-based real-time on-device authentication
CN112738626B (zh) 视频文件的目标检测方法、装置、电子设备及存储介质
CN116189057A (zh) 目标对象的检测方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination