CN112712041A - 一种照片分类方法 - Google Patents

一种照片分类方法 Download PDF

Info

Publication number
CN112712041A
CN112712041A CN202011644334.4A CN202011644334A CN112712041A CN 112712041 A CN112712041 A CN 112712041A CN 202011644334 A CN202011644334 A CN 202011644334A CN 112712041 A CN112712041 A CN 112712041A
Authority
CN
China
Prior art keywords
library
head portrait
face
pictures
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011644334.4A
Other languages
English (en)
Other versions
CN112712041B (zh
Inventor
刘识
田继忠
白呢
李欣
林志
贾庆丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Huaan Xinlian Communication Technology Co ltd
Original Assignee
Beijing Huaan Xinlian Communication Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Huaan Xinlian Communication Technology Co ltd filed Critical Beijing Huaan Xinlian Communication Technology Co ltd
Priority to CN202011644334.4A priority Critical patent/CN112712041B/zh
Publication of CN112712041A publication Critical patent/CN112712041A/zh
Application granted granted Critical
Publication of CN112712041B publication Critical patent/CN112712041B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/55Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种照片分类方法,包括:第一步骤,翻拍老照片;第二步骤,翻拍的老照片修改拍摄时间;第三步骤,将所述翻拍的老照片与老照片之外的照片放入照片库中;第四步骤,将照片中的人脸裁剪成头像图片;第五步骤,识别头像图片质量,形成高质量库和低质量库;第六步骤,按照头像图片的相似度将高质量库划分为相似库;第七步骤,将人脸库和相似库中的头像图片进行对比;第八步骤,将低质量库中进行对比,认定为同一人的头像移入对应的人脸库中;第九步骤,根据人脸库对照片分类。本发明通过对老照片翻拍及信息手工编辑,对不同拍摄时期的照片进行精准识别,提供了一种准确可靠的照片分类方法,节约大量的照片筛选和查看的时间。

Description

一种照片分类方法
技术领域
本发明总体涉及人工智能技术领域,更具体地,涉及一种照片分类方法。
背景技术
随着智能终端技术的发展,智能终端的相机拍照功能越来越强大,大部分用户都习惯使用手机等智能终端拍照,便于随时查看和分享给朋友。手机等智能终端拍摄的照片默认保存到一个系统相册文件夹里面,对于下载或者由其他智能终端传输的照片则保存到其他文件夹下面,缺失法对智能终端中的照片进行统一管理。对于系统相册文件夹中的照片,现有的部分智能终端可按照拍摄日期的远近进行管理;当外出旅游等拍摄大量照片的情况下,若需查看某一人物的照片,需要花费用户较多的查找过程,或者当需要发送某一朋友的照片给对方时,需要用户选择照片再发送给该朋友,将花费用户大量的时间。
为了解决上述问题,现有专利CN104168378第一人物公开了一种基于人脸识别的图片分组方法及装置,方法为进入图片分组模式,识别出智能终端中包含有人脸特征的图片;根据图片中的人脸特征对图片进行分组,建立对应的人物相册;将图片按分组移动到对应的人物相册中。虽然可解决上述问题,但是当照片中包含一些照片为老照片,老照片没有相关电子信息时,没有办法进行分类。
因此,如何解决照片分类问题的同时,还能克服现有技术的缺陷,是亟需解决的问题。
发明内容
为了解决上述问题,本发明提供了一种照片分类方法,所述照片包括纸质老照片和数码新照片,包括:第一步骤S1,翻拍老照片,得到第一照片;第二步骤S2,将所述第一照片中的拍摄时间修改为老照片拍摄时间,得到第二照片;;第三步骤S3,将所述第二照片与老照片之外的照片放入照片库中;第四步骤S4,读取照片库中照片信息,将照片中的人脸裁剪成独立的头像图片,并建立头像图片与照片的对应关系;
第五步骤S5,识别头像图片质量,根据头像图片质量进行分类,形成高质量库和低质量库;第六步骤S6,将高质量库中的头像图片进行相似度对比,按照头像图片的相似度将高质量库划分为一个或多个人脸库以及与人脸库一一对应的相似库;第七步骤S7,将人脸库和与之对应的相似库中拍摄时间相近的头像图片进行相似度对比,若判断为同一人则将相似库与对应的人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;第八步骤S8,将低质量库中的头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,若认定为同一人则将低质量库中的头像图片移入对应的人脸库中;第九步骤S9,根据人脸库对照片进行分类。
根据本发明的一种实施方式,所述第七步骤S7中,当所有人脸库和与之对应的相似库对比完成后,若有多个人脸库,则继续将各个人脸库之间依次进行对比,将判定为同一个人的人脸库进行合并。
根据本发明的一种实施方式,所述第五步骤S5中,识别头像图片质量,主要是识别头像图片中人脸的清晰度和人脸角度。
根据本发明的一种实施方式,所述第六步骤S6中,将高质量库中的第一张头像图片移入第一人脸库,将第二张头像图片的特征与第一人脸库中的头像图片的特征的并集进行对比,若判定为同一个人,则将第二张头像图片移入第一人脸库,若判定为相似的人,则将第二张头像图片移入与第一人脸库对应的相似库,若判定为不同的人,则将头像图片移入第二人脸库,直至高质量库中的头像图片判定完毕,得到一个或多个人脸库以及与人脸库一一对应的相似库。
根据本发明的一种实施方式,所述六步骤S6中,高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则认为是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<80%,且≥50,认为可能是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<50%,则认为不是同一人。
根据本发明的一种实施方式,所述第六步骤S6中,高质量库中的头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则将头像图片移入与之相似度最高的人脸库中,并记录与之相似度≥80%的人脸库信息。
根据本发明的一种实施方式,所述第七步骤S7中,当两个人脸库之间进行对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比。
根据本发明的一种实施方式,所述第七步骤S7中,当两个人脸库中的头像图片特征的并集的相似度≥80%,则认定为同一人,否则认为不是同一人。
根据本发明的一种实施方式,所述第八步骤S8中,低质量库中头像图片的特征与人脸库中头像图片特征的并集的相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
本发明通过对老照片翻拍及信息手工编辑可将老照片的拍摄时间进行添加,就能将老照片纳入到所有照片中集中统一管理,对不同拍摄时期的照片进行精准识别,对照片中的不同人物进行准确判定,并可将照片按人物进行分类,提供了一种准确可靠的照片分类方法,节约大量的照片筛选和查看的时间。
附图说明
图1是一种照片分类方法流程示意图。
具体实施方式
下面结合附图对本发明的较佳实施例进行详细阐述,参考标号是指本发明中的组件、技术,以便本发明的优点和特征在适合的环境下实现能更易于被理解。下面的描述是对本发明权利要求的具体化,并且与权利要求相关的其它没有明确说明的具体实现也属于权利要求的范围。
图1示出了一种照片分类方法的示意图。
如图1所示,一种照片分类方法,所述照片包括纸质老照片和数码新照片,包括:第一步骤S1,翻拍老照片,得到第一照片;第二步骤S2,将所述第一照片中的拍摄时间修改为老照片拍摄时间,得到第二照片;;第三步骤S3,将所述第二照片与老照片之外的照片放入照片库中;第四步骤S4,读取照片库中照片信息,将照片中的人脸裁剪成独立的头像图片,并建立头像图片与照片的对应关系;第五步骤S5,识别头像图片质量,根据头像图片质量进行分类,形成高质量库和低质量库;
第六步骤S6,将高质量库中的头像图片进行相似度对比,按照头像图片的相似度将高质量库划分为一个或多个人脸库以及与人脸库一一对应的相似库;第七步骤S7,将人脸库和与之对应的相似库中拍摄时间相近的头像图片进行相似度对比,若判定为同一人则将相似库与对应的人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;第八步骤S8,将低质量库中的头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,若认定为同一人则将低质量库中的头像图片移入对应的人脸库中;第九步骤S9,根据人脸库对照片进行分类。
所述第一步骤中,所述老照片是指照片不具备拍摄时间信息的照片,即,从照片中读取不出拍摄时间信息的照片,例如胶卷照片。
所述第二步骤中,将所述第一照片中的拍摄时间修改为老照片拍摄时间是指,老照片翻牌后会带有翻牌时的拍摄时间,需要人工将此信息修改为老照片当年拍摄的时间,对照片拍摄时间的修改即对照片的EXIF信息进行修改,使用照片编辑器即可对照片的EXIF信息进行修改,例如使用Photoshop软件对照片的EXIF信息进行修改,具体修改方法如下,在PS菜单栏中,点左上角菜单栏中的“文件”,选择“文件简介”(Alt+Shift+Ctrl+I),在出现的窗口中的最上面一排选择“相机数据”,就可以看到EXIF数据了,对其中显示出来的拍摄时间信息直接修改为老照片当年拍摄时间便可。
对老照片翻拍及信息手工编辑时间信息,可将老照片的拍摄时间进行添加,就能将老照片纳入到所有照片中集中统一管理利用。
所述第三步骤中,所述老照片之外的照片是指包含有拍摄时间信息的照片,例如数码照片。
所述第四步骤S4中,读取照片库中照片的信息,目的是进行人脸位置识别,判定人脸在头像中的位置,将照片中的人脸轮廓识别出来与照片背景进行区分,从而将照片中的头像裁切下来,形成单独的人脸头像图片,使每个头像图片作为一张单独的图片进行对比,并且将头像图片与原照片进行关联,可以在进行头像图片的相似度对比时不用重复对照片中的人脸进行识别,可以直接对不同的头像图片之间进行对比,不需对比与人脸头像无关的图像内容,减少头像图片相似度对比时的工作量,提高头像图片对比的工作效率和准确率,将判定为同一人的头像移入同一个人脸库中,而不需移动原照片,方便后期继续进行相似度对比。
所述第五步骤S5中,识别图片质量可以根据图片的质量将图片分为高质量库和低质量库,头像图片的质量主要包括头像图片中人脸的清晰度、人脸倾斜度等,人脸清晰度好、人脸倾斜度小的放入高质量库中,反之放入低质量库中。设置高质量库和低质量库的目的是,将高质量库中的头像图片和低质量库中的头像图片分开进行对比,将高质量库中的头像图片和低质量库中的头像图片进行相似度对比判定是否为同一人时分别设置不同的判定标准,可以先将高质量图库中的头像图片进行相似度对比,然后将低质量库中的头像图片进行相似度对比,设置高质量库中头像图片为同一个人的相似度判定标准较高,设置低质量图库中图片为同一个人的相似度判定标准较低,因为低质量库中头像图片中的人脸清晰度较低或人脸角度倾斜,将低质量库中的头像图片相似度对比时,设置较低的判定标准,可以提高头像图片判定的准确率,可以防止低质量库中的头像图片因为清晰度低或人脸倾斜度大而产生错误的判断。
将高质量人脸库中的头像图片进行相似度对比时,可以有两种方法,即,第一种方法:可以先建立人脸库,通过高质量库中的头像图片特征分别与人脸库中的头像图片的特征的组合进行对比,从而判断是否为同一人,例如,先建立第一人脸库,并将第一张头像图片移入第一人脸库,第二张头像图片的特征与第一人脸库中头像图片的特征的组合进行相似度对比,若判定为同一人则将第二张头像图片移入第一人脸库,若判定为相似的人,则新建与当前人脸库对应的相似库,并将第二头像图片移入与第一人脸库对应的相似库中,若判定为不是同一人,则新建第二人脸库,并将第二张头像图片移入第二人脸库,然后继续判定第三张头像图片……第N张头像图片的特征分别与各人脸库中头像图片的特征的并集进行相似度对比,若第N张头像图片判定与多个人脸库为同一人,则将第N张头像图片移入与之相似度最高的人脸库中,并记录其他与该头像图片判定为同一人的人脸库的信息,比如当第N张头像图片判定与2个人脸库为同一人,则将第N张头像图片移入与之相似度最高的人脸库中,并记录与之判定为同一人的另一个人脸库的信息,当第N张头像图片判定与4个人脸库为同一人时,则将第N张头像图片移入与之相似度最高的人脸库中,并记录与之判定为同一人的其他3个人脸库的信息。是否判定为同一人的标准可根据情况进行设定,比如,可以设定头像图片的特征与人脸库中头像图片的特征的合集的相似度≥70%时,判定为同一人,设定头像图片的特征与人脸库中头像图片的特征的合集的相似度<60%时,判定为不是同一人,设定头像图片的特征与人脸库中头像图片的特征的合集的相似度≥60%且<70%时,判定为有可能是同一人。
所述人脸库中特征的并集,是指在人脸库中选取的所有头像图片中有用的特征,并舍弃头像图片中无用的特征,从而组成一个最接近真实人脸面部特征的组合。在运行时,当人脸库中有新头像图片进入时,将新头像的图片特征与人脸库中原头像图片特征的组合进行对比,并选取新头像图片中有用的特征对原特征组合进行不断的完善,比如原头像图片特征的组合中有100个特征,新移入的头像图片中有50个特征,50个特征有20个与原头像图片特征的组合中100个特征重复,且有10个特征是无用特征,则将新头像图片中剩余的20个特征并入到头像图片特征的组合中,当有头像图片移入时,不停的对人脸库的头像图片的特征组合进行完善。
当头像图片与人脸库进行对比时,通过头像图片的特征与人脸库中头像图片的特征的并集进行对比,会使对比结果更准确,因为人脸库中头像图片的特征的并集相对于人脸库中的单张头像图片特征更接近真实的人脸特征,采用人脸库中头像图片特征的并集作为标准进行对比,相比于使用人脸库中的某一张照片作为标准进行对比,对比的结果准确度更高。
当头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比时,人脸库中的多张头像图片的特征的组合形成一个特征点并集,当人脸库中有新头像图片移入时,人脸库会根据新移入的头像图片中的头像特征点调整人脸库的特征点并集,根据头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,从而判断是否为同一人。
第二种方法:将高质量库中的头像图片两两之间依次相互进行对比,高质量库中所有的头像图片对比完成后,将判定为同一个人的头像图片移入同一个人脸库,将判定为与某个人脸库中头像图片相似的头像图片移入该人脸库对应的相似库,从而得到一个或多个人脸库和与人脸库一一对应的相似库。是否判定为同一人的标准可根据情况进行设定,比如,可以设定两张头像图片的相似度≥70%时,判定为同一人,设定两张头像图片的相似度<60%时,判定为不是同一人,设定两张头像图片的相似度≥60%且<70%时,判定为有可能是同一人。
在将头像图片进行对比时,可以按照头像图片的排序依次进行相似度对比,比如头像图片的拍摄时间排序、大小排序等等,也可以随机在头像图片库中选取头像图片进行对比。
通过上述方法,将高质量库划分为人脸库和相似库,其中,所述相似库与人脸库是一一对应的,每个相似库对应一个人脸库,相似库中的人脸图片与对比标准的相似度小于人脸库中的人脸图片与对比标准的相似度。
选取拍摄时间相近的多张头像图片时,可以根据该时间段内拍摄头像图片的数量进行选择,比如该时间段内拍摄头像较少时,可以同时都选取,比如该时间段内拍摄的头像图片较多时,可以选择多张,比如6~12张。
在人脸库和与之对应的相似库进行对比时,当人脸库中的头像图片和与之对应的相似库中的头像图片对比后,若判定为同一人,则将相似库与对应的人脸库合并,若判定为不是同一人,则将相似库构建为新的人脸库。人脸库和对应的相似库进行对比时,判定是否为同一人的标准可以根据情况进行设定,比如可以设置两个人脸库中拍摄时间相近的多张头像图片的相似度≥70%,则认定为同一人,否则认为不是同一人。
当人脸库和对应的相似库对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比,当两个库中有一个库的头像图片数量少于预设值时,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,比如相似库中有1张头像图片,人脸库中有2张头像图片,则选取相似库中的1张头像图片,并选取人脸库中的与相似库中的头像图片拍摄时间相近的1张头像图片进行对比,比如相似库中有15张头像图片,与之对应的人脸库中有30张头像图片,则可以在相似库中选取3~10张拍摄时间相近的头像图片,并在与相似库对应的人脸库中选取与相似库中选取的头像图片的拍摄时间相近的且数量相同的头像图片进行对比。
当两个人脸库进之间进行对比时,分别在两个人脸库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比,当两个库中有一个库的头像图片数量少于预设值时,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,比如相似库中有1张头像图片,人脸库中有2张头像图片,则选取相似库中的1张头像图片,并选取人脸库中的与相似库中的头像图片拍摄时间相近的1张头像图片进行对比,比如相似库中有15张头像图片,与之对应的人脸库中有30张头像图片,则可以在相似库中选取3~10张拍摄时间相近的头像图片,并在与相似库对应的人脸库中选取与相似库中选取的头像图片的拍摄时间相近的且数量相同的头像图片进行对比。
在将人脸库之间进行对比时,优先选择与该人脸库中的头像图片记录的和头像图片判定为同一人的其他人脸库进行对比,将具有较大可能为同一人的多个人脸库进行对比合并后,再继续与其他人脸库进行对比,可以减少工作量,提高头像图片判定准确率和效率。
在两个两个人脸库进行对比时,判定是否为同一人的标准可以根据情况进行设定,比如可以设定两个人脸库中的头像图片的相似度≥70%,则认定为同一人,否则认为不是同一人,将判定为是同一人的两个人脸库进行合并。
当两个人脸库之间进行对比,或者人脸库和对应的相似库进行对比时,若两个库中均选取多张头像图片对比,可以依次进行对比,并取相似度的平均值作为判定依据,比如,在第一人物人脸库中选择3张拍摄时间相近的头像图片第一人物1、第一人物2、第一人物3,并在第二人物人脸库中与第一人物人脸库中拍摄时间相近的同一时间段内的3张头像图片第二人物1、第二人物2、第二人物3,先使第一人物1分别与第二人物1、第二人物2、第二人物3依次进行相似度对比,然后使第一人物2与分别与第二人物1、第二人物2、第二人物3依次进行相似度对比,最后使第一人物3与分别与第二人物1、第二人物2、第二人物3依次进行相似度对比,然后根据所有头像图片对比后的相似度计算平均值,当头像图片的相似度的平均值≥70%,则两个人脸库判定为同一人,则将两个人脸库合并,反之不合并。因为拍摄时间相近的同一人的头像图片的面部特征变化较小,选择多张拍摄时间相近的多张头像图片进行对比,可以提高头像图片分析判断的准确率。
在选取拍摄时间相近的多张头像图片时,拍摄时间相近应该根据照片库的中照片的拍摄时间的跨度进行设定,如果照片拍摄的时间跨度较长,比如十年以上,选取拍摄时间相近的头像图片时,照片选取的拍摄时间段应该是同一年或更短时间内拍摄的头像图片;如果照片库中的照片拍摄的时间跨度较短,比如均是一年内拍摄的照片,则选取拍摄时间相近的头像图片时,应该选取同一月份或更短时间内拍摄的头像图片;如果照片库中的照片拍摄时间接近,比如均是一个月或一周内拍摄的照片,则选取拍摄时间相近的头像图片时,应该是同一天或更短时间内拍摄的头像图片,选取头像图片的拍摄时间越接近,则人面部特征变化越小,识别准确度越高。
低质量库中的头像图片的特征与人脸库中头像图片的特征的合集进行相似度对比时不需新建人脸库,只需与高质量库中已经建立好的人脸库进行对比即可,并且可以降低低质量库中头像图片是否为同一人的判定标准,比如可以设定头像图片的特征与人脸库中头像图片的特征的合集相似度≥60%,则认定为同一人,当相似度<60%,则认定为不是同一人。
工作时,首先翻拍老照片,得到第一照片;将所述第一照片中的拍摄时间修改为老照片拍摄时间,得到第二照片;将所述第二照片与老照片之外的照片放入照片库中;读取照片库中照片的信息,对照片中的人脸头像进行识别,获取人脸在照片中的位置,将所有照片中的每个人脸裁剪成独立的头像图片,并建立每个头像图片与原照片的对应关系;然后对头像图片质量进行分析,将头像图片根据质量进行分类,筛选出高质量头像图片和低质量头像图片,并将高质量头像图片移入高质量库,将低质量头像图片移入低质量库;然后将所有高质量库中的头像图片依次进行相似度对比,根据相似度进行判定是否为同一人,得到一个或多个人脸库以及一个与人脸库一一对应的相似库;然后依次分别在每个人脸库中选择某个时间段内拍摄的多张头像图片,并在与人脸库对应的相似库中选择相同时间段内拍摄的多张头像图片,将两组头像图片进行相似度对比,若判断为同一人则将相似库与人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;最后将低质量库中的头像图片特征分别与已经建立好的人脸库中头像图片的特征的合集依次进行对比,若判定为同一人,则将头像图片移至人脸库中,当低质量库中的所有头像图片与所有建立好的人脸库对比完后,将未移入人脸库的低质量头像图片进行删除,最后,根据人脸库对照片进行分类。
本发明通过翻牌老照片,修改拍摄时间到翻牌的老照片中,使得老照片具有拍摄时间信息;通过将照片中的人物头像进行裁剪形成头像图片,并将头像图片与原照片进行关联,可以直接对头像图片进行相似度的对比,相比直接对照片进行对比,减少照片中的无关图像的分析对比和人脸重复识别,可以提高工作效率和准确率;通过设置相似库,将有可能与人脸库是同一人的照片放入相似库中,并选择人脸库中拍摄时间相近的多张头像图片和与之对应的相似库中的拍摄时间相近的多张头像图片进行相似度对比,可以将同一人物不同拍摄时间的头像图片进行对比,提高人脸识别的准确性;将照片分为高质量库和低质量库,可以对照片质量不同进行分类对比,防止低质量的头像图片因人脸不清晰或者人脸倾斜影响头像图片相似度的判定,并降低低质量头像图片相似度的判定标准,提高人像识别准确率。本发明通过对老照片翻拍及信息手工编辑,对不同拍摄时期的照片进行精准识别,提供了一种准确可靠的照片分类方法,节约大量的照片筛选和查看的时间。。
根据本发明的一种实施方式,第七步骤S7中,当所有人脸库和与之对应的相似库对比完成后,若有多个人脸库,则继续将各个人脸库之间依次进行相似度对比,将判定为同一个人的人脸库进行合并。
根据本发明的一种实施方式,所述第五步骤S5中,识别头像图片质量,主要是识别头像图片中人脸的清晰度和人脸角度。
根据本发明的一种实施方式,所述第六步骤S6中,将高质量库中的第一张头像图片移入第一人脸库,将第二张头像图片的特征与第一人脸库中的头像图片的特征的并集进行对比,若判定为同一个人,则将第二张头像图片移入第一人脸库,若判定为相似的人,则将第二张头像图片移入与第一人脸库对应的相似库,若判定为不同的人,则将头像图片移入第二人脸库,直至高质量库中的头像图片判定完毕,得到一个或多个人脸库以及与人脸库一一对应的相似库。
根据本发明的一种实施方式,所述六步骤S6中,高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则认为是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<80%,且≥50,认为可能是同一人;高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<50%,则认为不是同一人。
根据本发明的一种实施方式,所述第六步骤S6中,高质量库中的头像图片的特征与多个人脸库中的头像图片的特征的并集的相似度≥80%,则将头像图片移入与之相似度最高的人脸库中,并记录三个与之相似度最高的人脸库信息。
根据本发明的一种实施方式,所述第七步骤S7中,当人脸库和对应的相似库对比时,分别在两个库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比;人脸库和对应的相似库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
根据本发明的一种实施方式,所述第四步骤S4中,当两个人脸库之间进行对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比。
根据本发明的一种实施方式,所述第七步骤S7中,当两个人脸库中的头像图片特征的并集的相似度≥80%,则认定为同一人,否则认为不是同一人。
根据本发明的一种实施方式,所述第八步骤S8中,低质量库中头像图片的特征与人脸库中头像图片特征的并集的相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
实施例1,有100张老照片,还有900张数码照片,先翻拍老照片,得到100张翻拍后的照片,将100张翻拍后的照片中的拍摄时间修改为老照片拍摄时间,得到100张具有信息的翻拍照片,接着将100张具有拍摄时间信息的翻拍照片与其余900张数码照片都放入照片库中,通过第一种方法将高质量库中的头像图片进行相似度对比,即先建立人脸库,通过高质量库中的头像图片特征分别与人脸库中的头像图片的特征组合进行对比判断是否为同一人,并设置高质量库中的头像图片特征分别与人脸库中的头像图片的特征组合的相似度≥80%,则认为是同一人,设置高质量库中头像图片特征分别与人脸库中的头像图片的特征组合的相似度<80%,且≥50,则认为可能是同一人,设置高质量库中头像图片特征分别与人脸库中的头像图片的特征组合的相似度<50%,则认定为不是同一人;人脸库和对应的相似库对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;人脸库和人脸库之间对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;设置低质量库中的头像图片特征与人脸库中的头像图片特征的合集对比时,若相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
结果输出5个人物照片库,分别为第一人物照片库、第二人物照片库、第三人物照片库、第四人物照片库和第五人物照片库,实际照片库中所有照片中共有5人,分别为第一人物、第二人物、第三人物、第四人物和第五人物,准确率100%;
其中,照片库中含第一人物的照片总计334张。第一人物照片库中有照片334张,含第一人物的照片334张,准确率100%;不含第一人物的照片0张,准确率100%;将含第一人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第二人物的照片总计477张。第二人物照片库中有照片478张,包含第二人物的照片477张,准确率100%;不含第二人物的照片1张,准确率99.79%;将含第二人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第三人物的照片523张。第三人物照片库中有照片522张,含第三人物的照片522张,准确率99.81%;不含第三人物的照片0张,准确率100%;将含第三人物的照片放入其他人物照片库1张,错误率0.19%;
其中,照片库中含第四人物的照片242张。第四人物照片库中照片242张,含第四人物的照片242张,准确率100%;不含第四人物的照片0张,准确率100%;将含第四人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第五人物的照片190张。第五人物照片库中有照片190张,含第五人物的照片190张,准确率100%;不含第五人物的照片0张,准确率100%;将含第五人物的照片放入其他人物照片库0张,错误率0%。
实施例2,有100张老照片,还有900张数码照片,先翻拍老照片,得到100张翻拍后的照片,将100张翻拍后的照片中的拍摄时间修改为老照片的拍摄时间,得到100张具有拍摄时间信息的翻拍照片,接着将100张具有拍摄时间信息的翻拍照片与其余900张数码照片都放入照片库中,通过第一种方法将高质量库中的头像图片进行相似度对比,即将高质量库中的头像图片两两之间依次相互进行对比判断是否为同一个人,并设置相似度≥80%,则认为是同一人,设置相似度<80%,且≥50,则认为可能是同一人,设置相似度<50%,则认定为不是同一人;人脸库和对应的相似库对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;人脸库和人脸库之间对比时,设两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比,当两个库中的头像图片数量均大于三张,则在两个库中均各选取5张拍摄时间相近且数量相同的头像图片进行对比,并设置相似度≥80%,则认定为同一人,否则认为不是同一人;设置低质量库中的头像图片特征与人脸库中的头像图片特征的合集对比时,若相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
结果输出6个人物照片库,分别为第一人物照片库、第二人物照片库、第三人物照片库、第四人物照片库、第五人物照片库和第六照片库,实际照片库中所有照片中共有6人,分别为第一人物、第二人物、第三人物、第四人物、第五人物和第六人物,准确率100%;
其中,照片库中含第一人物的照片241张。第一人物照片库中有照片241张,含第一人物的照片241张,准确率100%;不含第一人物的照片0张,准确率100%;将含第一人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第二人物的照片276张。第二人物照片库中有照片276张,含第二人物的照片276张,准确率100%;不含第二人物的照片0张,准确率100%;将含第二人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第三人物的照片437张。第三人物照片库中有照片436张,含第三人物的照片436张,准确率99.77%;不含第三人物的照片0张,准确率100%;将含第三人物的照片放入其他人物照片库1张,错误率0.23%;
其中,照片库中含第四人物的照片307张。第四人物照片库中有照片307张,含第四人物的照片307张,准确率100%;不含第四人物的照片0张,准确率100%;将含第四人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第五人物的照片367张,第五人物照片库中有照片367张,含第五人物的照片367张,准确率100%;不含第五人物的照片0张,准确率100%;将含第五人物的照片放入其他人物照片库0张,错误率0%;
其中,照片库中含第六人物的照片415张。第六人物照片库中有照片416张,含第六人物的照片415张,准确率100%;不含第六人物的照片1张,准确率99.75%;将含第六人物的照片放入其他人物照片库0张,错误率0%。
由上述实施例可知,本发明通过对老照片翻拍及信息手工编辑可将老照片的拍摄时间进行添加,就能将老照片纳入到所有照片中集中统一管理,对不同拍摄时期的照片进行精准识别,对照片中的不同人物进行准确判定,并可将照片按人物进行分类,提供了一种准确可靠的照片分类方法,节约大量的照片筛选和查看的时间。
应该注意的是,上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。

Claims (10)

1.一种照片分类方法,所述照片包括纸质老照片和数码新照片,包括:
第一步骤(S1),翻拍老照片,得到第一照片;
第二步骤(S2),将所述第一照片中的拍摄时间修改为老照片拍摄时间,得到第二照片;
第三步骤(S3),将所述第二照片与新照片共同放入照片库中;
第四步骤(S4),读取照片库中照片信息,将照片中的人脸裁剪成独立的头像图片,并建立头像图片与照片的对应关系;
第五步骤(S5),识别头像图片质量,根据头像图片质量进行分类,形成高质量库和低质量库;
第六步骤(S6),将高质量库中的头像图片进行相似度对比,按照头像图片的相似度将高质量库划分为一个或多个人脸库以及与人脸库一一对应的相似库;
第七步骤(S7),将人脸库和与之对应的相似库中拍摄时间相近的头像图片进行相似度对比,若判定为同一人则将相似库与对应的人脸库合并,若判定不是同一人则将相似库构建为新的人脸库;
第八步骤(S8),将低质量库中的头像图片的特征与人脸库中的头像图片的特征的并集进行相似度对比,若认定为同一人则将低质量库中的头像图片移入对应的人脸库中;
第九步骤(S9),根据人脸库对照片进行分类。
2.根据权利要求1所述的照片分类方法,所述第七步骤S7中,当所有人脸库和与之对应的相似库对比完成后,若有多个人脸库,则继续将各个人脸库之间依次进行对比,将判定为同一个人的人脸库进行合并。
3.根据权利要求1所述的照片分类方法,所述第五步骤S5中,识别头像图片质量,主要是识别头像图片中人脸的清晰度和人脸角度。
4.根据权利要求1所述的照片分类方法,所述第六步骤S6中,将高质量库中的第一张头像图片移入第一人脸库,将第二张头像图片的特征与第一人脸库中的头像图片的特征的并集进行对比,若判定为同一个人,则将第二张头像图片移入第一人脸库,若判定为相似的人,则将第二张头像图片移入与第一人脸库对应的相似库,若判定为不同的人,则将头像图片移入第二人脸库,直至高质量库中的头像图片判定完毕,得到一个或多个人脸库以及与人脸库一一对应的相似库。
5.根据权利要求4所述的照片分类方法,所述第六步骤S6中,高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度≥80%,则认为是同一人;
高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<80%,且≥50,认为可能是同一人;
高质量库中头像图片的特征与人脸库中的头像图片的特征的并集的相似度<50%,则认为不是同一人。
6.根据权利要求4所述的照片分类方法,所述第六步骤S6中,高质量库中的头像图片的特征与多个人脸库中的头像图片的特征的并集的相似度≥80%,则将头像图片移入与之相似度最高的人脸库中,并记录与之相似度≥80%的人脸库信息。
7.根据权利要求1所述的照片分类方法,所述第七步骤S7中,当人脸库和对应的相似库对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,
当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比,人脸库和对应的相似库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
8.根据权利要求2所述的照片分类方法,所述第七步骤S7中,当两个人脸库之间进行对比时,分别在人脸库中和对应的相似库中选取拍摄时间相近且数量相同的头像图片进行对比,
当两个库中至少有一个库中的头像图片数量小于三张,则将头像图片数量较少的库中的头像图片全部选取,并在另一个库中选取与之拍摄时间相近且数量相同的头像图片进行对比;当两个库中的头像图片数量均大于三张,则在两个库中均选取3~10张拍摄时间相近且数量相同的头像图片进行对比。
9.根据权利要求8所述的照片分类方法,所述第七步骤S7中,当两个人脸库中的头像图片特征的相似度≥80%,则认定为同一人,否则认为不是同一人。
10.根据权利要求1所述的照片分类方法,所述第八步骤S8中,低质量库中头像图片的特征与人脸库中头像图片特征的并集的相似度≥70%,则认定为同一人,若相似度<70%,则认定为不是同一人。
CN202011644334.4A 2020-12-31 2020-12-31 一种照片分类方法 Active CN112712041B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011644334.4A CN112712041B (zh) 2020-12-31 2020-12-31 一种照片分类方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011644334.4A CN112712041B (zh) 2020-12-31 2020-12-31 一种照片分类方法

Publications (2)

Publication Number Publication Date
CN112712041A true CN112712041A (zh) 2021-04-27
CN112712041B CN112712041B (zh) 2023-12-01

Family

ID=75548100

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011644334.4A Active CN112712041B (zh) 2020-12-31 2020-12-31 一种照片分类方法

Country Status (1)

Country Link
CN (1) CN112712041B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070136275A1 (en) * 2005-12-12 2007-06-14 Canon Information Systems Research Australia Pty. Ltd. Clustering of content items
CN101854449A (zh) * 2009-04-01 2010-10-06 鸿富锦精密工业(深圳)有限公司 电子相框
US8913152B1 (en) * 2012-09-27 2014-12-16 Google Inc. Techniques for user customization in a photo management system
CN105913052A (zh) * 2016-06-08 2016-08-31 Tcl集团股份有限公司 一种照片分类管理的方法及其系统
CN106777007A (zh) * 2016-12-07 2017-05-31 北京奇虎科技有限公司 相册分类优化方法、装置及移动终端
CN111723678A (zh) * 2020-05-27 2020-09-29 上海瀛之杰汽车信息技术有限公司 适用于多人场景的人脸客流识别方法、装置、设备和介质
CN112036209A (zh) * 2019-06-03 2020-12-04 Tcl集团股份有限公司 一种人像照片处理方法及终端

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070136275A1 (en) * 2005-12-12 2007-06-14 Canon Information Systems Research Australia Pty. Ltd. Clustering of content items
CN101854449A (zh) * 2009-04-01 2010-10-06 鸿富锦精密工业(深圳)有限公司 电子相框
US8913152B1 (en) * 2012-09-27 2014-12-16 Google Inc. Techniques for user customization in a photo management system
CN105913052A (zh) * 2016-06-08 2016-08-31 Tcl集团股份有限公司 一种照片分类管理的方法及其系统
CN106777007A (zh) * 2016-12-07 2017-05-31 北京奇虎科技有限公司 相册分类优化方法、装置及移动终端
CN112036209A (zh) * 2019-06-03 2020-12-04 Tcl集团股份有限公司 一种人像照片处理方法及终端
CN111723678A (zh) * 2020-05-27 2020-09-29 上海瀛之杰汽车信息技术有限公司 适用于多人场景的人脸客流识别方法、装置、设备和介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
李龙: "基于Android 的照片分类管理软件 的设计与实现", 中国优秀硕士学位论文全文 数据库(电子期刊), pages 138 - 300 *
赵飞: "一种智能相册系统 的研究与实现", 中国优秀硕士学位论文全文 数据库(电子期刊), pages 138 - 664 *

Also Published As

Publication number Publication date
CN112712041B (zh) 2023-12-01

Similar Documents

Publication Publication Date Title
US8078623B2 (en) Systems and methods for summarizing photos based on photo information and user preference
US8917943B2 (en) Determining image-based product from digital image collection
CN102033958B (zh) 一种照片分类管理系统及方法
JP4305079B2 (ja) 画像管理装置
JP7350495B2 (ja) 装置、方法、及びプログラム
US20130050747A1 (en) Automated photo-product specification method
US7813560B2 (en) Classifying complete and incomplete date-time information
JP7341676B2 (ja) 装置、方法、及びプログラム
US11470209B2 (en) Image processing apparatus, method of controlling image processing apparatus, and storage medium for editing an album
CN105760461A (zh) 相册的自动建立方法及其装置
US20120027311A1 (en) Automated image-selection method
US11936821B2 (en) Image processing apparatus, method of controlling image processing apparatus, and storage medium with determination as to whether image is already contained in album data for first subject and album data for second subject and specifying image as change target
JP2020140576A (ja) 装置、方法、及びプログラム
JP7341677B2 (ja) 装置、方法、及びプログラム
US20220262057A1 (en) Storage medium, image processing apparatus, and image processing method
US11915351B2 (en) Image processing apparatus, image processing method, and storage medium
US20220262054A1 (en) Storage medium, image processing apparatus, and image processing method
US20220262055A1 (en) Image processing apparatus, image processing method, and storage medium
US20220263952A1 (en) Storage medium, image processing apparatus, and image processing method
JP2020140557A (ja) 画像処理装置、制御方法、及びプログラム
CN112765384B (zh) 一种照片分类方法
CN112712041A (zh) 一种照片分类方法
CN112733664B (zh) 一种照片分类方法
CN112732966A (zh) 一种给照片添加拍摄地点的方法
CN110214337A (zh) 图像呈现系统、图像呈现方法、程序及记录介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant