CN112765384B - 一种照片分类方法 - Google Patents

一种照片分类方法 Download PDF

Info

Publication number
CN112765384B
CN112765384B CN202011624088.6A CN202011624088A CN112765384B CN 112765384 B CN112765384 B CN 112765384B CN 202011624088 A CN202011624088 A CN 202011624088A CN 112765384 B CN112765384 B CN 112765384B
Authority
CN
China
Prior art keywords
head portrait
library
face
libraries
pictures
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011624088.6A
Other languages
English (en)
Other versions
CN112765384A (zh
Inventor
刘识
白呢
田继忠
李欣
林志
贾庆丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Huaan Xinlian Communication Technology Co ltd
Original Assignee
Beijing Huaan Xinlian Communication Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Huaan Xinlian Communication Technology Co ltd filed Critical Beijing Huaan Xinlian Communication Technology Co ltd
Priority to CN202011624088.6A priority Critical patent/CN112765384B/zh
Publication of CN112765384A publication Critical patent/CN112765384A/zh
Application granted granted Critical
Publication of CN112765384B publication Critical patent/CN112765384B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/55Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

一种照片分类方法,包括如下步骤:第一步骤,将照片中的人脸裁剪成独立的头像图片,并建立头像图片与照片的对应关系;第二步骤,根据头像图片质量进行分类,形成高质量库和低质量库;第三步骤,按照头像图片的相似度将高质量库划分为一个或多个人脸库以及与人脸库一一对应的相似库;第四步骤,将人脸库和与之对应的相似库中拍摄时间相近的头像图片进行相似度对比,若判断为同一人则将相似库与对应的人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;第五步骤,将低质量库中的头像图片与人脸库认定为同一人的头像图片移入对应的人脸库中;第六步骤,根据人脸库对照片进行分类,本发明可快速、准确的对照片进行分类。

Description

一种照片分类方法
技术领域
本发明总体涉及人工智能技术领域,更具体地,涉及一种照片分类方法。
背景技术
随着科技的快速发展和人们生活质量的提高,人们日常经常会利用手机、相机拍摄工作场景、记录生活等,然后通过互联网传递或者分享自己在工作和生活中拍摄的照片,随着移动终端或者存储设备上的储存空间越来越大,使用户可以将大量的照片进行储存,方便随时的进行浏览和使用。
目前,用户通过终端的图库查看图片时,面对大量的照片,由于分类方法太过笼统,使用户无法快速找到自己想要查看的照片,现有技术中,有按照拍摄时间或者拍摄地点分类的方法,然而按照此类方法进行分类的话,用户在一段时间之后很可能不记得照片的拍摄时间或是拍摄地点,即便某个时间或者某个地点的照片放在一起,也很难将不同时间或者不同地点的同一人的照片全部放在一个照片组中,导致用户后期查看时,需要手动逐个进行查看,从而花费较多时间,因此给用户带了极大的不便,降低了查找效率;而且有时候因为抓拍儿童、运动的物体等,可能会未来得及对焦或者手抖都能会造成图片不清晰,图片质量差,后期需要手动进行选择或者删除整理,从而花费大量的时间并且增加操作,用户体验较差。
为了解决照片分类不准确和部分图片质量差,导致查看时费时费力的问题,亟需一种照片分类方法。
发明内容
本发明提供了一种照片分类方法,包括如下步骤:第一步骤S1,读取照片库中照片信息,将照片中的人脸裁剪成独立的头像图片,并建立头像图片与照片的对应关系;第二步骤S2,识别头像图片质量,根据头像图片质量进行分类,形成高质量库和低质量库;第三步骤S3,将高质量库中的头像图片进行相似度对比,按照头像图片的相似度将高质量库划分为一个或多个人脸库以及与人脸库一一对应的相似库;第四步骤S4,将人脸库和与之对应的相似库中拍摄时间相近的头像图片进行相似度对比,若判断为同一人则将相似库与对应的人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;第五步骤S5,将低质量库中的头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,若认定为同一人则将低质量库中的头像图片移入对应的人脸库中;第六步骤S6,根据人脸库对照片进行分类。
根据本发明的一种实施方式,第四步骤S4中,当所有人脸库和与之对应的相似库对比完成后,若有多个人脸库,则继续将各个人脸库之间依次进行对比,将判定为同一个人的人脸库进行合并。
根据本发明的一种实施方式,所述第二步骤S2中,识别头像图片质量,主要是识别头像图片中人脸的清晰度和人脸角度。
根据本发明的一种实施方式,所述第三步骤S3中,将高质量库中的第一张头像图片移入第一人脸库,将第二张头像图片的特征与第一人脸库中的头像图片的特征的并集进行对比,若判定为同一个人,则将第二张头像图片移入第一人脸库,若判定为相似的人,则将第二张头像图片移入与第一人脸库对应的相似库,若判定为不同的人,则将头像图片移入第二人脸库,直至高质量库中的头像图片判定完毕,得到一个或多个人脸库以及与人脸库一一对应的相似库。
根据本发明的一种实施方式,所述第三步骤S3中,高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则认为是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<80%,且≥50,认为可能是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<50%,则认为不是同一人。
根据本发明的一种实施方式,所述第三步骤S3中,高质量库中的头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则将头像图片移入与之相似度最高的人脸库中,并记录与之相似度≥80%的人脸库信息。
根据本发明的一种实施方式,所述第四步骤S4中,当人脸库和对应的相似库对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,当人脸库或相似库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当人脸库和相似库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比;人脸库和对应的相似库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
根据本发明的一种实施方式,所述第四步骤S4中,当两个人脸库之间进行对比时,分别在两个人脸库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个人脸库中至少有一个人脸库中的头像图片数量小于三张,则将头像图片数量较少的人脸库中的头像图片全部选取,并在另一个人脸库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个人脸库中的头像图片数量均大于三张,则在两个人脸库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比。
根据本发明的一种实施方式,所述第四步骤S4中,当两个人脸库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
根据本发明的一种实施方式,所述第五步骤S5中,低质量库中头像图片的特征与人脸库中头像图片特征的并集的相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
本发明可以将同一人物不同拍摄时期的照片进行精准识别,对照片中的不同人物进行准确判定,并可将照片按人物进行分类,提供了一种准确可靠的照片分类方法,可以给人们节约大量的照片筛选和查看的时间。
附图说明
图1.一种照片分类方法流程示意图。
具体实施方式
下面结合附图对本发明的较佳实施例进行详细阐述,参考标号是指本发明中的组件、技术,以便本发明的优点和特征在适合的环境下实现能更易于被理解。下面的描述是对本发明权利要求的具体化,并且与权利要求相关的其它没有明确说明的具体实现也属于权利要求的范围。
图1示出了一种照片分类方法流程示意图。
如图1所示,一种照片分类方法,包括,第一步骤S1,读取照片库中照片信息,将照片中的人脸裁剪成独立的头像图片,并建立头像图片与照片的对应关系;第二步骤S2,识别头像图片质量,根据头像图片质量进行分类,形成高质量库和低质量库;第三步骤S3,将高质量库中的头像图片进行相似度对比,按照头像图片的相似度将高质量库划分为一个或多个人脸库以及与人脸库一一对应的相似库;第四步骤S4,将人脸库和与之对应的相似库中拍摄时间相近的头像图片进行相似度对比,若判断为同一人则将相似库与对应的人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;第五步骤S5,将低质量库中的头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,若认定为同一人则将低质量库中的头像图片移入对应的人脸库中;第六步骤S6,根据人脸库对照片进行分类。
所述第一步骤S1中,读取照片库中照片的信息,目的是进行人脸位置识别,判定人脸在头像中的位置,将照片中的人脸轮廓识别出来与照片背景进行区分,从而将照片中的头像裁切下来,形成单独的人脸头像图片,使每个头像图片作为一张单独的图片进行对比,并且将头像图片与原照片进行关联,可以在进行头像图片的相似度对比时不用重复对照片中的人脸进行识别,可以直接对不同的头像图片之间进行对比,不需对比与人脸头像无关的图像内容,减少头像图片相似度对比时的工作量,提高头像图片对比的工作效率和准确率,将判定为同一人的头像移入同一个人脸库中,而不需移动原照片,方便后期继续进行相似度对比。
所述第二步骤S2中,识别图片质量可以根据图片的质量将图片分为高质量库和低质量库,头像图片的质量主要包括头像图片中人脸的清晰度、人脸倾斜度等,人脸清晰度好、人脸倾斜度小的放入高质量库中,反之放入低质量库中。设置高质量库和低质量库的目的是,将高质量库中的头像图片和低质量库中的头像图片分开进行对比,将高质量库中的头像图片和低质量库中的头像图片进行相似度对比判定是否为同一人时分别设置不同的判定标准,可以先将高质量图库中的头像图片进行相似度对比,然后将低质量库中的头像图片进行相似度对比,设置高质量库中头像图片为同一个人的相似度判定标准较高,设置低质量图库中图片为同一个人的相似度判定标准较低,因为低质量库中头像图片中的人脸清晰度较低或人脸角度倾斜,将低质量库中的头像图片相似度对比时,设置较低的判定标准,可以提高头像图片判定的准确率,可以防止低质量库中的头像图片因为清晰度低或人脸倾斜度大而产生错误的判断。
将高质量人脸库中的头像图片进行相似度对比时,可以有两种方法,即,第一种方法:可以先建立人脸库,通过高质量库中的头像图片特征分别与人脸库中的头像图片的特征的组合进行对比,从而判断是否为同一人,例如,先建立第一人脸库,并将第一张头像图片移入第一人脸库,第二张头像图片的特征与第一人脸库中头像图片的特征的组合进行相似度对比,若判定为同一人则将第二张头像图片移入第一人脸库,若判定为相似的人,则新建与当前人脸库对应的相似库,并将第二头像图片移入与第一人脸库对应的相似库中,若判定为不是同一人,则新建第二人脸库,并将第二张头像图片移入第二人脸库,然后继续判定第三张头像图片……第N张头像图片的特征分别与各人脸库中头像图片的特征的并集进行相似度对比,若第N张头像图片判定与多个人脸库为同一人,则将第N张头像图片移入与之相似度最高的人脸库中,并记录其他与该头像图片判定为同一人的人脸库的信息,比如当第N张头像图片判定与2个人脸库为同一人,则将第N张头像图片移入与之相似度最高的人脸库中,并记录与之判定为同一人的另一个人脸库的信息,当第N张头像图片判定与4个人脸库为同一人时,则将第N张头像图片移入与之相似度最高的人脸库中,并记录与之判定为同一人的其他3个人脸库的信息。是否判定为同一人的标准可根据情况进行设定,比如,可以设定头像图片的特征与人脸库中头像图片的特征的合集的相似度≥70%时,判定为同一人,设定头像图片的特征与人脸库中头像图片的特征的合集的相似度<60%时,判定为不是同一人,设定头像图片的特征与人脸库中头像图片的特征的合集的相似度≥60%且<70%时,判定为有可能是同一人。
所述人脸库中特征的并集,是指在人脸库中选取的所有头像图片中有用的特征,并舍弃头像图片中无用的特征,从而组成一个最接近真实人脸面部特征的组合。在运行时,当人脸库中有新头像图片进入时,将新头像的图片特征与人脸库中原头像图片特征的组合进行对比,并选取新头像图片中有用的特征对原特征组合进行不断的完善,比如原头像图片特征的组合中有100个特征,新移入的头像图片中有50个特征,50个特征有20个与原头像图片特征的组合中100个特征重复,且有10个特征是无用特征,则将新头像图片中剩余的20个特征并入到头像图片特征的组合中,当有头像图片移入时,不停的对人脸库的头像图片的特征组合进行完善。
当头像图片与人脸库进行对比时,通过头像图片的特征与人脸库中头像图片的特征的并集进行对比,会使对比结果更准确,因为人脸库中头像图片的特征的并集相对于人脸库中的单张头像图片特征更接近真实的人脸特征,采用人脸库中头像图片特征的并集作为标准进行对比,相比于使用人脸库中的某一张照片作为标准进行对比,对比的结果准确度更高。
当头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比时,人脸库中的多张头像图片的特征的组合形成一个特征点并集,当人脸库中有新头像图片移入时,人脸库会根据新移入的头像图片中的头像特征点调整人脸库的特征点并集,根据头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,从而判断是否为同一人。
第二种方法:将高质量库中的头像图片两两之间依次相互进行对比,高质量库中所有的头像图片对比完成后,将判定为同一个人的头像图片移入同一个人脸库,将判定为与某个人脸库中头像图片相似的头像图片移入该人脸库对应的相似库,从而得到一个或多个人脸库和与人脸库一一对应的相似库。是否判定为同一人的标准可根据情况进行设定,比如,可以设定两张头像图片的相似度≥70%时,判定为同一人,设定两张头像图片的相似度<60%时,判定为不是同一人,设定两张头像图片的相似度≥60%且<70%时,判定为有可能是同一人。
在将头像图片进行对比时,可以按照头像图片的排序依次进行相似度对比,比如头像图片的拍摄时间排序、大小排序等等,也可以随机在头像图片库中选取头像图片进行对比。
通过上述方法,将高质量库划分为人脸库和相似库,其中,所述相似库与人脸库是一一对应的,每个相似库对应一个人脸库,相似库中的人脸图片与对比标准的相似度小于人脸库中的人脸图片与对比标准的相似度。
选取拍摄时间相近的多张头像图片时,可以根据该时间段内拍摄头像图片的数量进行选择,比如该时间段内拍摄头像较少时,可以同时都选取,比如该时间段内拍摄的头像图片较多时,可以选择多张,比如3~10张。
在人脸库和与之对应的相似库进行对比时,当人脸库中的头像图片和与之对应的相似库中的头像图片对比后,若判定为同一人,则将相似库与对应的人脸库合并,若判定为不是同一人,则将相似库构建为新的人脸库。人脸库和对应的相似库进行对比时,判定是否为同一人的标准可以根据情况进行设定,比如可以设置两个人脸库中拍摄时间相近的多张头像图片的相似度≥75%,则认定为同一人,否则认为不是同一人。
当人脸库和对应的相似库对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比,当两个库中有一个库的头像图片数量少于预设值时,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,比如相似库中有1张头像图片,人脸库中有2张头像图片,则选取相似库中的1张头像图片,并选取人脸库中的与相似库中的头像图片拍摄时间相近的1张头像图片进行对比,比如相似库中有15张头像图片,与之对应的人脸库中有30张头像图片,则可以在相似库中选取3~10张拍摄时间相近的头像图片,并在与相似库对应的人脸库中选取与相似库中选取的头像图片的拍摄时间相近的且数量相同的头像图片进行对比。
当两个人脸库进之间进行对比时,分别在两个人脸库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比,当两个库中有一个库的头像图片数量少于预设值时,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,比如相似库中有1张头像图片,人脸库中有2张头像图片,则选取相似库中的1张头像图片,并选取人脸库中的与相似库中的头像图片拍摄时间相近的1张头像图片进行对比,比如相似库中有15张头像图片,与之对应的人脸库中有30张头像图片,则可以在相似库中选取3~10张拍摄时间相近的头像图片,并在与相似库对应的人脸库中选取与相似库中选取的头像图片的拍摄时间相近的且数量相同的头像图片进行对比。
在将人脸库之间进行对比时,优先选择与该人脸库中的头像图片记录的和头像图片判定为同一人的其他人脸库进行对比,将具有较大可能为同一人的多个人脸库进行对比合并后,再继续与其他人脸库进行对比,可以减少工作量,提高头像图片判定准确率和效率。
在两个两个人脸库进行对比时,判定是否为同一人的标准可以根据情况进行设定,比如可以设定两个人脸库中的头像图片的相似度≥75%,则认定为同一人,否则认为不是同一人,将判定为是同一人的两个人脸库进行合并。
当两个人脸库之间进行对比,或者人脸库和对应的相似库进行对比时,若两个库中均选取多张头像图片对比,可以依次进行对比,并取相似度的平均值作为判定依据,比如,在A人脸库中选择3张拍摄时间相近的头像图片A1、A2、A3,并在B人脸库中与A人脸库中拍摄时间相近的同一时间段内的3张头像图片B1、B2、B3,先使A1分别与B1、B2、B3依次进行相似度对比,然后使A2与分别与B1、B2、B3依次进行相似度对比,最后使A3与分别与B1、B2、B3依次进行相似度对比,然后根据所有头像图片对比后的相似度计算平均值,当头像图片的相似度的平均值≥75%,则两个人脸库判定为同一人,则将两个人脸库合并,反之不合并。因为拍摄时间相近的同一人的头像图片的面部特征变化较小,选择多张拍摄时间相近的多张头像图片进行对比,可以提高头像图片分析判断的准确率。
在选取拍摄时间相近的多张头像图片时,拍摄时间相近应该根据照片库的中照片的拍摄时间的跨度进行设定,如果照片拍摄的时间跨度较长,比如十年以上,选取拍摄时间相近的头像图片时,照片选取的拍摄时间段应该是同一年或更短时间内拍摄的头像图片;如果照片库中的照片拍摄的时间跨度较短,比如均是一年内拍摄的照片,则选取拍摄时间相近的头像图片时,应该选取同一月份或更短时间内拍摄的头像图片;如果照片库中的照片拍摄时间接近,比如均是一个月或一周内拍摄的照片,则选取拍摄时间相近的头像图片时,应该是同一天或更短时间内拍摄的头像图片,选取头像图片的拍摄时间越接近,则人面部特征变化越小,识别准确度越高。
低质量库中的头像图片的特征与人脸库中头像图片的特征的合集进行相似度对比时不需新建人脸库,只需与高质量库中已经建立好的人脸库进行对比即可,并且可以降低低质量库中头像图片是否为同一人的判定标准,比如可以设定头像图片的特征与人脸库中头像图片的特征的合集相似度≥60%,则认定为同一人,当相似度<60%,则认定为不是同一人。
工作时,首先读取照片库中照片的信息,对照片中的人脸头像进行识别,获取人脸在照片中的位置,将所有照片中的每个人脸裁剪成独立的头像图片,并建立每个头像图片与原照片的对应关系;然后对头像图片质量进行分析,将头像图片根据质量进行分类,筛选出高质量头像图片和低质量头像图片,并将高质量头像图片移入高质量库,将低质量头像图片移入低质量库;然后将所有高质量库中的头像图片依次进行相似度对比,根据相似度进行判定是否为同一人,得到一个或多个人脸库以及一个与人脸库一一对应的相似库;然后依次分别在每个人脸库中选择选择拍摄时间相近的多张头像图片,并在与人脸库对应的相似库中选择选择拍摄时间相近的多张头像图片,将两组头像图片进行相似度对比,若判断为同一人则将相似库与人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;最后将低质量库中的头像图片特征分别与已经建立好的人脸库中头像图片的特征的合集依次进行对比,若判定为同一人,则将头像图片移至人脸库中,当低质量库中的所有头像图片与所有建立好的人脸库对比完后,将未移入人脸库的低质量头像图片进行删除,最后,根据人脸库对照片进行分类。
本发明通过将照片中的人物头像进行裁剪形成独立的头像图片,并将头像图片与原照片进行关联,可以直接对头像图片进行相似度的对比,相比直接对照片进行对比,减少照片中的无关图像的分析对比和人脸重复识别,可以提高工作效率和准确率;通过设置相似库,将有可能与人脸库是同一人的头像图片放入与该人脸库对应的相似库中,并选择人脸库中拍摄时间相近的多张头像图片和与之对应的相似库中的拍摄时间相近的多张头像图片进行相似度对比,可以将同一人物拍摄时间相近的多张头像图片同时进行对比,提高人脸识别的准确性;将照片分为高质量库和低质量库,可以对照片质量不同进行分类对比,防止低质量的头像图片因人脸不清晰或者人脸倾斜影响头像图片相似度的判定,并降低低质量头像图片相似度的判定标准,提高人像识别准确率;当头像图片和人脸库进行对比时,将头像图片特征与人脸库中头像图片特征的合集进行对比,可以提高判定的准确性,本发明可以将同一人物不同拍摄时期的照片进行精准识别,对照片中的不同人物进行判定,并将照片按人物进行分类,提供了一种准确可靠的照片分类方法,可以给人们节约大量的照片筛选和查看的时间。
根据本发明的一种实施方式,第四步骤S4中,当所有人脸库和与之对应的相似库对比完成后,若有多个人脸库,则继续将各个人脸库之间依次进行相似度对比,将判定为同一个人的人脸库进行合并。
根据本发明的一种实施方式,所述第二步骤S2中,识别头像图片质量,主要是识别头像图片中人脸的清晰度和人脸角度。
根据本发明的一种实施方式,所述第三步骤S3中,将高质量库中的第一张头像图片移入第一人脸库,将第二张头像图片的特征与第一人脸库中的头像图片的特征的并集进行对比,若判定为同一个人,则将第二张头像图片移入第一人脸库,若判定为相似的人,则将第二张头像图片移入与第一人脸库对应的相似库,若判定为不同的人,则将头像图片移入第二人脸库,直至高质量库中的头像图片判定完毕,得到一个或多个人脸库以及与人脸库一一对应的相似库。
根据本发明的一种实施方式,所述第三步骤S3中,高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则认为是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<80%,且≥50,认为可能是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<50%,则认为不是同一人。
根据本发明的一种实施方式,所述第三步骤S3中,高质量库中的头像图片的特征与多个人脸库中的头像图片的特征的并集的相似度≥80%,则将头像图片移入与之相似度最高的人脸库中,并记录三个与之相似度最高的人脸库信息。
根据本发明的一种实施方式,所述第四步骤S4中,当人脸库和对应的相似库对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,当人脸库或相似库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当人脸库和相似库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比;人脸库和对应的相似库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
根据本发明的一种实施方式,所述第四步骤S4中,当两个人脸库之间进行对比时,分别在两个人脸库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个人脸库中至少有一个人脸库中的头像图片数量小于三张,则将头像图片数量较少的人脸库中的头像图片全部选取,并在另一个人脸库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个人脸库中的头像图片数量均大于三张,则在两个人脸库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比。
根据本发明的一种实施方式,所述第四步骤S4中,当两个人脸库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
根据本发明的一种实施方式,所述第五步骤S5中,低质量库中头像图片的特征与人脸库中头像图片特征的并集的相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
实施例1,将1000张照片放入照片库中,通过第一种方法将高质量库中的头像图片进行相似度对比,即先建立人脸库,通过高质量库中的头像图片特征分别与人脸库中的头像图片的特征组合进行对比判断是否为同一人,并设置高质量库中的头像图片特征分别与人脸库中的头像图片的特征组合的相似度≥80%,则认为是同一人,设置高质量库中头像图片特征分别与人脸库中的头像图片的特征组合的相似度<80%,且≥50,则认为可能是同一人,设置高质量库中头像图片特征分别与人脸库中的头像图片的特征组合的相似度<50%,则认定为不是同一人;人脸库和对应的相似库对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;人脸库和人脸库之间对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;设置低质量库中的头像图片特征与人脸库中的头像图片特征的合集对比时,若相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
结果输出5个人物照片库,实际照片库中所有照片中共有5人,准确率100%;
其中,照片库中含第一人物的照片总计334张。第一人物照片库中有照片334张,含第一人物的照片334张,准确率100%;不含第一人物的照片0张,准确率100%;将含第一人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第二人物的照片总计477张。第二人物照片库中有照片478张,包含第二人物的照片477张,准确率100%;不含第二人物的照片1张,准确率99.79%;将含第二人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第三人物的照片523张。第三人物照片库中有照片522张,含第三人物的照片522张,准确率99.81%;不含第三人物的照片0张,准确率100%;将含第三人物的照片放入其他人物照片库1张,错误率0.19%;
其中,照片库中含第四人物的照片242张。第四人物照片库中照片242张,含第四人物的照片242张,准确率100%;不含第四人物的照片0张,准确率100%;将含第四人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第五人物的照片190张。第五人物照片库中有照片190张,含第五人物的照片190张,准确率100%;不含第五人物的照片0张,准确率100%;将含第五人物的照片放入其他人物照片库0张,错误率0%。
实施例2,将1000张照片放入照片库中,通过第一种方法将高质量库中的头像图片进行相似度对比,即将高质量库中的头像图片两两之间依次相互进行对比判断是否为同一个人,并设置相似度≥80%,则认为是同一人,设置相似度<80%,且≥50,则认为可能是同一人,设置相似度<50%,则认定为不是同一人;人脸库和对应的相似库对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;人脸库和人脸库之间对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;设置低质量库中的头像图片特征与人脸库中的头像图片特征的合集对比时,若相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
结果输出6个人物照片库,实际照片库中所有照片中共有6人,准确率100%;
其中,照片库中含第一人物的照片241张。第一人物照片库中有照片241张,含第一人物的照片241张,准确率100%;不含第一人物的照片0张,准确率100%;将含第一人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第二人物的照片276张。第二人物照片库中有照片276张,含第二人物的照片276张,准确率100%;不含第二人物的照片0张,准确率100%;将含第二人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第三人物的照片437张。第三人物照片库中有照片436张,含第三人物的照片436张,准确率99.77%;不含第三人物的照片0张,准确率100%;将含第三人物的照片放入其他人物照片库1张,错误率0.23%;
其中,照片库中含第四人物的照片307张。第四人物照片库中有照片307张,含第四人物的照片307张,准确率100%;不含第四人物的照片0张,准确率100%;将含第四人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第五人物的照片367张,第五人物照片库中有照片367张,含第五人物的照片367张,准确率100%;不含第五人物的照片0张,准确率100%;将含第五人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第六人物的照片415张。第六人物照片库中有照片416张,含第六人物的照片415张,准确率100%;不含第六人物的照片1张,准确率99.75%;将含第六人物的照片放入其他人物照片库0张,错误率0%。
由上述实施例可知,本发明可以将同一人物不同拍摄时期的照片进行精准识别,对照片中的不同人物进行准确判定,并可将照片按人物进行分类,提供了一种准确可靠的照片分类方法,可以给人们节约大量的照片筛选和查看的时间。
应该注意的是,上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。

Claims (9)

1.一种照片分类方法,包括如下步骤:
第一步骤(S1),读取照片库中照片信息,将照片中的人脸裁剪成独立的头像图片,并建立头像图片与照片的对应关系;
第二步骤(S2),识别头像图片质量,根据头像图片质量进行分类,形成高质量库和低质量库;
第三步骤(S3),将高质量库中的头像图片进行相似度对比,将高质量库中的第一张头像图片移入第一人脸库,将第二张头像图片的特征与第一人脸库中的头像图片的特征的并集进行对比,若判定为同一个人,则将第二张头像图片移入第一人脸库,若判定为相似的人,则将第二张头像图片移入与第一人脸库对应的相似库,若判定为不同的人,则将头像图片移入第二人脸库,直至高质量库中的头像图片判定完毕,得到一个或多个人脸库以及与人脸库一一对应的相似库;
第四步骤(S4),将人脸库和与之对应的相似库中拍摄时间相近且数量相同的头像图片进行相似度对比,若判定为同一人则将相似库与对应的人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;
第五步骤(S5),将低质量库中的头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,若认定为同一人则将低质量库中的头像图片移入对应的人脸库中;
第六步骤(S6),根据人脸库对照片进行分类;
其中,所述人脸库中的头像图片的特征的并集,是指在人脸库中选取的所有头像图片中有用的特征,并舍弃头像图片中无用的特征,从而组成一个最接近真实人脸面部特征的组合,在运行时,当人脸库中有新头像图片进入时,将新头像的图片特征与人脸库中原头像图片特征的组合进行对比,并选取新头像图片中有用的特征对原特征组合进行不断的完善。
2.根据权利要求1所述的照片分类方法,所述第四步骤(S4)中,当所有人脸库和与之对应的相似库对比完成后,若有多个人脸库,则继续将各个人脸库之间依次进行对比,将判定为同一个人的人脸库进行合并。
3.根据权利要求1所述的照片分类方法,所述第二步骤(S2)中,识别头像图片质量,包括识别头像图片中人脸的清晰度和人脸角度。
4.根据权利要求1所述的照片分类方法,所述第三步骤(S3)中,高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则认为是同一人;
高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<80%,且≥50%,认为是同一人;
高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<50%,则认为不是同一人。
5.根据权利要求1所述的照片分类方法,所述第三步骤(S3)中,高质量库中的头像图片的特征与多个人脸库中的头像图片的特征的并集的相似度≥80%,则将头像图片移入与之相似度最高的人脸库中,并记录与之相似度≥80%的人脸库信息。
6.根据权利要求1所述的照片分类方法,所述第四步骤(S4)中,当人脸库和对应的相似库对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,
当人脸库或相似库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当人脸库和相似库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比;
人脸库和对应的相似库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
7.根据权利要求2所述的照片分类方法,所述第四步骤(S4)中,当两个人脸库之间进行对比时,分别在两个人脸库中选取拍摄时间相近且数量相同的头像图片进行对比,
当两个人脸库中至少有一个人脸库中的头像图片数量小于三张,则将头像图片数量较少的人脸库中的头像图片全部选取,并在另一个人脸库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个人脸库中的头像图片数量均大于三张,则在两个人脸库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比。
8.根据权利要求7所述的照片分类方法,所述第四步骤(S4)中,当两个人脸库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
9.根据权利要求1所述的照片分类方法,所述第五步骤(S5)中,低质量库中头像图片的特征与人脸库中头像图片特征的并集的相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
CN202011624088.6A 2020-12-31 2020-12-31 一种照片分类方法 Active CN112765384B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011624088.6A CN112765384B (zh) 2020-12-31 2020-12-31 一种照片分类方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011624088.6A CN112765384B (zh) 2020-12-31 2020-12-31 一种照片分类方法

Publications (2)

Publication Number Publication Date
CN112765384A CN112765384A (zh) 2021-05-07
CN112765384B true CN112765384B (zh) 2024-01-16

Family

ID=75698856

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011624088.6A Active CN112765384B (zh) 2020-12-31 2020-12-31 一种照片分类方法

Country Status (1)

Country Link
CN (1) CN112765384B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113705650B (zh) * 2021-08-20 2023-07-11 网易(杭州)网络有限公司 一种人脸图片集的处理方法、装置、介质和计算设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504408A (zh) * 2015-01-12 2015-04-08 吴建忠 一种人脸识别比对方法和实现该方法的系统
CN105224929A (zh) * 2015-10-10 2016-01-06 北京邮电大学 一种查找人脸照片的方法
CN105426857A (zh) * 2015-11-25 2016-03-23 小米科技有限责任公司 人脸识别模型训练方法和装置
CN105740379A (zh) * 2016-01-27 2016-07-06 北京汇图科技有限责任公司 一种照片分类管理方法和装置
CN106776662A (zh) * 2015-11-25 2017-05-31 腾讯科技(深圳)有限公司 一种照片的分类整理方法和装置
CN108052555A (zh) * 2017-11-29 2018-05-18 汉柏科技有限公司 一种照片分类方法和系统
CN110175250A (zh) * 2019-06-25 2019-08-27 深圳市三宝创新智能有限公司 一种制作儿童成长相册的方法及机器人

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504408A (zh) * 2015-01-12 2015-04-08 吴建忠 一种人脸识别比对方法和实现该方法的系统
CN105224929A (zh) * 2015-10-10 2016-01-06 北京邮电大学 一种查找人脸照片的方法
CN105426857A (zh) * 2015-11-25 2016-03-23 小米科技有限责任公司 人脸识别模型训练方法和装置
CN106776662A (zh) * 2015-11-25 2017-05-31 腾讯科技(深圳)有限公司 一种照片的分类整理方法和装置
CN105740379A (zh) * 2016-01-27 2016-07-06 北京汇图科技有限责任公司 一种照片分类管理方法和装置
CN108052555A (zh) * 2017-11-29 2018-05-18 汉柏科技有限公司 一种照片分类方法和系统
CN110175250A (zh) * 2019-06-25 2019-08-27 深圳市三宝创新智能有限公司 一种制作儿童成长相册的方法及机器人

Also Published As

Publication number Publication date
CN112765384A (zh) 2021-05-07

Similar Documents

Publication Publication Date Title
KR101731771B1 (ko) 버스트 포토 캡처된 세트로부터 키퍼 이미지의 자동 선택
JP3984175B2 (ja) 写真画像選別装置およびプログラム
CN102033958B (zh) 一种照片分类管理系统及方法
US8917943B2 (en) Determining image-based product from digital image collection
US7813560B2 (en) Classifying complete and incomplete date-time information
EP2312462A1 (en) Systems and methods for summarizing photos based on photo information and user preference
US8786753B2 (en) Apparatus, method and program for selecting images for a slideshow from among a large number of captured images
US20030210808A1 (en) Method and apparatus for organizing and retrieving images containing human faces
US20130050747A1 (en) Automated photo-product specification method
US20180025215A1 (en) Anonymous live image search
US20120027311A1 (en) Automated image-selection method
Ren et al. Best frame selection in a short video
JP2008521133A (ja) 分散ベースのイベント・クラスタリング
JP4474885B2 (ja) 画像分類装置及び画像分類プログラム
US20170293637A1 (en) Automated multiple image product method
US8831360B2 (en) Making image-based product from digital image collection
TWI528197B (zh) 相片分群系統及相片分群方法與電腦可讀取記錄媒體
JP2010081453A (ja) 付帯情報付加装置及び方法
CN112765384B (zh) 一种照片分类方法
US20120027303A1 (en) Automated multiple image product system
CN112733664B (zh) 一种照片分类方法
CN105488526A (zh) 群共享照片的自动筛选方法
CN116095363B (zh) 基于关键行为识别的移动端短视频高光时刻剪辑方法
CN112712041B (zh) 一种照片分类方法
CN112732966A (zh) 一种给照片添加拍摄地点的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant