CN109348120A - 一种拍摄方法、图像的显示方法、系统及设备 - Google Patents

一种拍摄方法、图像的显示方法、系统及设备 Download PDF

Info

Publication number
CN109348120A
CN109348120A CN201811161315.9A CN201811161315A CN109348120A CN 109348120 A CN109348120 A CN 109348120A CN 201811161315 A CN201811161315 A CN 201811161315A CN 109348120 A CN109348120 A CN 109348120A
Authority
CN
China
Prior art keywords
target
image
information
mark
target signature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811161315.9A
Other languages
English (en)
Other versions
CN109348120B (zh
Inventor
王恺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fiberhome Telecommunication Technologies Co Ltd
Original Assignee
Fiberhome Telecommunication Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fiberhome Telecommunication Technologies Co Ltd filed Critical Fiberhome Telecommunication Technologies Co Ltd
Priority to CN201811161315.9A priority Critical patent/CN109348120B/zh
Publication of CN109348120A publication Critical patent/CN109348120A/zh
Application granted granted Critical
Publication of CN109348120B publication Critical patent/CN109348120B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种拍摄方法、图像的显示方法、系统及设备,涉及拍摄技术领域。拍摄方法包括:根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象;查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示;其中,目标特征信息和历史拍摄信息均存储在目标数据库中;完成拍摄并更新目标数据库。本发明能够在现场拍摄过程中实时识别被拍摄对象并显示其已拍摄信息。

Description

一种拍摄方法、图像的显示方法、系统及设备
技术领域
本发明涉及拍摄技术领域,尤其涉及一种拍摄方法、图像的显示方法、系统及设备。
背景技术
在会议、婚礼、汇报演出等正式的社交活动中,往往需要使用专业的照相机和录像机对重要发言者、宾客以及表演者进行拍摄。另外,随着手机和平板电脑等移动终端的普及,人们更经常地使用这些移动终端拍摄记录日常生活场景。
虽然现有的照片和视频处理软件可以在拍摄之后对照片和视频进行分类整理,但是在现场拍摄时,由于拍摄设备缺乏提示功能,使得拍摄者无法在现场拍摄过程中实时了解被拍摄对象的已拍摄信息,而盲目的现场拍摄往往造成被拍摄对象的照片或者视频过多或者过少。例如,专业摄影师并不认识每个被拍摄者,因此可能漏拍部分被拍摄者,或者对部分被拍摄者拍摄的照片或视频数量过少,通常情况下,由于难以在事后进行弥补而带来遗憾。
发明内容
本发明实施例的目的在于提供一种拍摄方法、图像的显示方法、系统及设备,在现场拍摄过程中实时识别被拍摄对象并显示其已拍摄信息。
第一方面,本发明实施例提供一种拍摄方法,其包括:
根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象;
查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示;其中,目标特征信息和历史拍摄信息均存储在目标数据库中;
完成拍摄并更新目标数据库。
结合第一方面,在第一种可选的实现方式中,从历史图像和/或当前拍摄的图像的指定区域中提取所述目标特征信息并加入所述目标数据库,指定区域为图像的全部区域或者中心区域。
结合第一方面,在第二种可选的实现方式中,根据所述目标数据库中已有的所述目标特征信息,从所述历史图像和/或当前拍摄的图像中识别所述目标对象并显示所述标识图形。
结合第一方面,在第三种可选的实现方式中,所述历史拍摄信息包括所述目标对象的已拍摄照片的总数和/或视频的总时长。
结合第一方面,在第四种可选的实现方式中,所述标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与所述历史拍摄信息具有映射关系。
结合第一方面,在第五种可选的实现方式中,从所述预览图像中识别出目标对象之前,所述方法还包括:设置全局开关,当全局开关开启时,根据所有所述目标特征信息识别对应的所述目标对象并显示所述标识图形;否则,关闭所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能。
结合第一方面,在第六种可选的实现方式中,所述方法还包括:对每个所述目标特征信息均设置一个跟踪开关;
当所述目标特征信息的跟踪开关开启时,根据所述目标特征信息识别所述目标对象并显示所述标识图形;否则,根据所述目标特征信息识别所述目标对象并标记。
结合第一方面,在第七种可选的实现方式中,所述目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个所述目标特征信息、以及每个所述目标特征信息的跟踪开关状态和历史拍摄信息。
结合第一方面,在第八种可选的实现方式中,所述二级映射单元还包括与每个所述目标特征信息相匹配的照片或视频的存储信息,所述历史拍摄信息包括所有相匹配的照片的总数和/或视频的时长,以及根据照片的总数和/或视频的时长计算得到的数量等级。
结合第一方面,在第九种可选的实现方式中,拍摄完成后,从所拍摄的照片或者视频中识别出所述目标对象,在所述二级映射单元中,查找与所述目标对象匹配的所述目标特征信息,并更新所述照片的总数和/或视频的总时长、以及更新所述照片和/或视频的数量等级和存储信息;
所述方法还包括:从所拍摄的照片或者视频中提取被选定的非目标对象的目标特征信息,与所拍摄的照片的总数和/或视频的总时长、以及所述照片和/或视频的数量等级和存储信息一起加入所述二级映射单元中。
结合第一方面,在第十种可选的实现方式中,所述方法还包括:设置触发开关;
当所述全局开关开启时,开启触发开关,则所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能被关闭,直到触发开关被关闭,所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能重新开启。
第二方面,本发明实施例提供一种图像的显示方法,其包括:
从显示屏幕上的图像中识别与目标特征信息相匹配的目标对象;
查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后发送到显示屏幕上进行显示;
其中,目标特征信息和历史拍摄信息均存储在目标数据库中。
结合第二方面,在第一种可选的实现方式中,所述历史拍摄信息包括所述目标对象的已拍摄照片的总数和/或视频的总时长。
结合第二方面,在第二种可选的实现方式中,所述标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与所述历史拍摄信息具有映射关系。
结合第二方面,在第三种可选的实现方式中,所述方法还包括:设置全局开关,用于启闭所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能;
和/或,对每个所述目标特征信息均设置一个跟踪开关,当跟踪开关设为开启状态时,根据所述目标特征信息识别所述目标对象并显示所述标识图形;当跟踪开关设为关闭状态时,根据所述目标特征信息识别所述目标对象并标记。
结合第二方面,在第四种可选的实现方式中,所述目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个所述目标特征信息、以及每个所述目标特征信息的跟踪开关状态和历史拍摄信息。
结合第二方面,在第五种可选的实现方式中,在所述显示屏幕上,按照设定的排序规则显示所有的所述目标特征信息以及对应的所述历史拍摄信息。
第三方面,本发明实施例提供一种基于上述图像的显示方法的显示系统,其包括:
目标数据库,其用于存储目标特征信息和历史拍摄信息;
处理模块,其用于从显示屏幕上的图像中识别与目标特征信息相匹配的目标对象,查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后发送到显示屏幕上进行显示。
第四方面,本发明实施例提供一种图像处理设备,所述图像处理设备包括上述的图像的显示系统。
第五方面,本发明实施例提供一种拍摄系统,其包括:
拍摄模块,用于接收拍照指令并获取预览图像以及进行拍摄;
目标数据库,其用于存储目标特征信息和历史拍摄信息;
处理模块,其用于从预览图像中识别与目标特征信息相匹配的目标对象,以及查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形;还用于在拍摄完成后更新所述目标数据库;
显示模块,其用于将标识图形叠加在预览图像上显示。
结合第五方面,在第一种可选的实现方式中,所述系统还包括提取模块,提取模块用于从历史图像和/或当前拍摄的图像的指定区域中提取所述目标特征信息并加入所述目标数据库,其中,指定区域为图像的全部区域或者中心区域;
所述处理模块还用于根据所述目标数据库中已有的所述目标特征信息,从所述历史图像和/或当前拍摄的图像中识别所述目标对象并将生成的所述标识图形发送到所述显示模块进行显示。
结合第五方面,在第二种可选的实现方式中,所述历史拍摄信息包括所述目标对象的已拍摄照片的总数和/或视频的总时长。
结合第五方面,在第三种可选的实现方式中,所述标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与所述历史拍摄信息具有映射关系。
结合第五方面,在第四种可选的实现方式中,所述系统还包括设置模块,设置模块用于设置全局开关,和/或,对每个所述目标特征信息均设置一个跟踪开关;
所述处理模块和显示模块还用于根据全局开关的设置状态确定是否识别所述目标对象并显示所述标识图形;还用于当跟踪开关设为开启状态时,根据所述目标特征信息识别所述目标对象并显示所述标识图形;当跟踪开关设为关闭状态时,根据所述目标特征信息识别所述目标对象并标记。
结合第五方面,在第五种可选的实现方式中,所述设置模块还用于根据收到的触发操作设置触发开关;
所述处理模块和显示模块还用于当所述全局开关开启,且触发开关启动时,关闭所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能,直到触发开关被关闭时,所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能重新开启。
结合第五方面,在第六种可选的实现方式中,所述目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个所述目标特征信息、以及每个所述目标特征信息的跟踪开关状态和历史拍摄信息。
结合第五方面,在第七种可选的实现方式中,所述二级映射单元还包括与每个所述目标特征信息相匹配的照片或视频的存储信息,所述历史拍摄信息包括所有相匹配的照片总数和/或视频时长,以及根据照片总数和/或视频时长计算得到的数量等级。
结合第五方面,在第八种可选的实现方式中,拍摄完成后,所述处理模块用于从所拍摄的照片或者视频中识别出所述目标对象,在所述二级映射单元中,查找所述目标对象匹配的所述目标特征信息,并更新所述照片的总数和/或视频的总时长、以及更新所述照片和/或视频的数量等级和存储信息;
所述处理模块还用于将从所拍摄的照片或者视频中提取的被选定的非目标对象的目标特征信息,与所拍摄的照片的总数和/或视频的总时长、以及所述照片和/或视频的数量等级和存储信息一起加入所述二级映射单元中。
第六方面,本发明实施例提供一种拍摄设备,所述拍摄设备包括上述的拍摄系统。
相对于现有技术,本发明实施例通过根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象;查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示;其中,目标特征信息和历史拍摄信息均存储在目标数据库中;完成拍摄并更新目标数据库,可以在现场拍摄过程中实时识别被拍摄对象并显示其已拍摄信息。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例拍摄方法流程图;
图2是本发明第一实施例中,在预览图像上叠加显示的一种标识图形;
图3是本发明第一实施例中,步骤S120的流程图;
图4是本发明第一实施例中一级映射单元的示意图;
图5是本发明第一实施例中二级映射单元的示意图;
图6是本发明第二实施例中,步骤S210中二级映射单元中所有人脸特征图像示意图;
图7是本发明第二实施例中,步骤S240中二级映射单元中所有人脸特征图像示意图;
图8是本发明第三实施例中二级映射单元的示意图;
图9是本发明第三实施例的步骤S340中,根据个数范围字段(Cnt_level)的不同值,用三种不同的目标图形来区分照片数量多、中和少;
图10是本发明第四实施例中,构建目标数据库的流程图;
图11是本发明第四实施例中,构建的目标数据库的人脸特征图像示意图;
图12是本发明第四实施例中,更新目标数据库的流程图;
图13是本发明第四实施例中,目标数据库的一级、二级目录示意图;
图14是本发明第八实施例拍摄系统示意图;
图15是拍摄系统的应用示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种拍摄方法,应用于拍摄设备中,拍摄设备可以是照相机、录像机、智能手机、平板电脑、智能眼镜等穿戴式智能设备、以及监控摄像设备等具有拍摄照片和视频功能的设备。
拍摄方法包括:
根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象。
查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示;其中,目标特征信息和历史拍摄信息均存储在目标数据库中。
完成拍摄并更新目标数据库。
上述拍摄设备均包括摄像头或者拍摄模块,摄像头或者拍摄模块获取待拍摄对象的模拟图像/视频信号,模拟图像/视频信号被转换成数字信号后缓存得到预览图像。照相机或者手机等拍摄设备还包括显示模块,在其他拍摄设备中,显示模块还可以设于其他独立的设备中。在拍摄前,显示模块用于显示预览图像以便实现取景、对焦等功能。
拍照指令可以是拍摄者发出的,也可以是由控制设备下达的,不作限定。
被拍摄对象可以是人、动物、植物、建筑物、物体和自然景观等,目标特征信息是用于识别被拍摄对象的信息,目标特征信息可以是包括被拍摄对象的特征图像,也可以是从被拍摄对象的特征图像中提取的一组特征数据,不作限定。例如,当被拍摄对象为人时,可以将人脸特征图像作为目标特征信息,通过人脸识别技术进行识别,也可以将从特征图像中提取的一组特征数据作为目标特征信息,通过人脸识别技术进行识别,不作限定。人脸识别技术为现有技术,这里不再赘述。
历史拍摄信息包括被拍摄对象的信息(例如名字、ID等)、已拍摄照片的总数和/或视频的总时长,还可以包括拍摄的时间、地点等信息。
查找到目标对象的历史拍摄信息后,根据历史拍摄信息生成标识图形,标识图形与历史拍摄信息具有映射关系,用于表示每个目标对象的历史拍摄信息(例如照片的总数和/或视频的总时长)。其中,标识图形是可识别的形状,例如由外部轮廓线条构成的矢量图,具有不同的形状和颜色。即可以是由计算机绘制的直线、圆、矩形、多边形、曲线、图表等。
在一种实施方式中,目标特征信息和历史拍摄信息可以存储在同一个目标数据库中。在另一种实施方式中,目标数据库可以包括多个子数据库,目标特征信息和历史拍摄信息还可以分别存储在不同的子数据库中,且各子数据库之间通过被拍摄对象的信息(例如名字、ID等)等信息相关联。
在一种实施方式中,获取预览图像后,可以在显示屏幕上先显示预览图像,然后在显示的预览图像上叠加标识图形。在另一种实施方式中,获取预览图像后,保存在缓存中,先查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形,然后将标识图形叠加在预览图像上,并在显示屏幕上进行显示。
以下通过各实施例进行具体的说明。
如图1所示,本发明第一实施例提供一种拍摄方法,拍摄方法包括:
S120根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象。
S140查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示。
S160完成拍摄并更新目标数据库。
目标特征信息和历史拍摄信息均存储在预先构建的目标数据库中。即在步骤S120之前,首先预先构建目标数据库,在本实施例中,以被拍摄对象为人为例进行说明,具体包括:
目标特征信息是目标对象的人脸特征图像,目标对象的数量至少为一个,每个目标对象均有对应的人脸特征图像,所有目标对象的人脸特征图像可以保存在一个目标人脸库中,该目标人脸库设于目标数据库中。
构建目标人脸库时,从历史图像的指定区域中提取目标对象的人脸特征图像并加入目标人脸库,其中,指定区域为历史图像的全部区域或者中心区域。历史图像可以是照片,也可以是从视频中提取的视频帧,不作限定。
历史拍摄信息存储在目标数据库中,历史拍摄信息包括目标对象的个人信息(例如名字、ID等),已拍摄的照片总数和/或视频的总时长,还可以包括拍摄的时间、地点等信息。历史拍摄信息可以通过目标对象的个人信息与目标人脸库中的人脸特征图像建立关联关系。
目标数据库还可以包括一个或者二个以上目标人脸库,用于从预览图像中识别目标对象的目标人脸库称为当前目标人脸库。
在步骤S120中,获取预览图像后,通过人脸识别技术从预览图像中识别与当前目标人脸库中的人脸特征图像相匹配的目标对象,从一幅预览图像中可以识别出一个或者二个以上不同的目标对象。
在步骤S140中,标识图形可以是数字,该数字是目标对象已被拍摄的照片总数和/或视频时长。标识图形还可以是数字和几何图形的组合,例如,参见图2(a)所示,根据当前目标人脸库,该预览图像中的3个人(A、B和C)被识别为符合的目标对象,标识图形包括矩形线框以及矩形线框右上角的数字,矩形线框用于在预览图像中标识目标对象,该数字表示该目标对象已拍照片的总数。此时拍摄者可以很清楚地知道位于预览图像右下角的人C的已拍摄照片较少,应该多拍,而左上角的人A的已拍摄照片较多,可以少拍。
在拍照模式下,通常优先显示目标对象已拍照片总数,如图2(a)所示。除了显示已拍照片总数,还可以附加显示目标对象已拍视频的总时长,如图2(b)所示,以人A为例,其已拍照片总数为9,已拍视频的总时长为1分2秒。在拍照模式下,拍摄者一般更关注已拍照片总数,照片总数可放在已拍视频的总时长的前面。
在录像模式下,通常优先显示目标对象已拍视频的总时长,如图2(c)所述。除了显示已拍视频的总时长,还可附加显示目标对象已拍照片总数,如图2(d)所示,以人A为例,其已拍视频的总时长为1分2秒,已拍照片总数为9;在录像模式下,拍摄者一般更关注已拍视频的总时长,故已拍视频的总时长可放在照片总数前面。
除了矩形线框,在其他的实施方式中,在预览图像中还可以使用其他的几何图形标识目标对象,例如圆、三角形和箭头等,不作限定。
参见图3所示,步骤S140具体包括:
S141、从预览图像中检测出所有的人脸图像。
S142、依次将人脸图像与当前目标人脸库中的人脸特征图像进行对比。
S143、根据对比结果判断是否匹配,若否,进入步骤S144;若是,进入步骤S145。
S144、将人脸图像标记为非目标对象,进入步骤S146。
S145、将人脸图像标记为目标对象,查询人脸特征图像对应的历史拍摄信息。
S146、判断全部人脸图像是否对比完毕,若否,返回步骤S142;若是,进入步骤S147。
S147、根据历史拍摄信息生成标识图形后叠加在预览图像上显示。
上述步骤是先分析预览图像中的全部人脸图像,即是否属于当前目标人脸库,若属于当前目标人脸库的话,查询已拍照片总数和/或已拍视频的总时长是多少,然后根据上述查到的历史拍摄信息生成标识图形,例如,该标识图形如图2所示,即在预览图像中对应人脸位置叠加显示矩形线框及已拍摄的照片总数和/或视频的总时长。
也可以对上述步骤略作修改,即在每完成一个人脸图像的对比分析后,若该人脸图像属于当前目标人脸库,则在对应的人脸上叠加标识图形,再接着对比分析下一个人脸图像,直到预览图像中的人脸图像全部对比分析完成。具体包括:
S141、从预览图像中检测出所有的人脸图像。
S142、依次将人脸图像与当前目标人脸库中的人脸特征图像进行对比。
S143、根据对比结果判断是否匹配,若否,进入步骤S144′;若是,进入步骤S145。
S144′、将人脸图像标记为非目标对象,进入步骤S147′。
S145、将人脸图像标记为目标对象,查询人脸特征图像对应的历史拍摄信息。
S146′、根据历史拍摄信息生成标识图形后叠加在预览图像上显示。
S147′、判断全部人脸图像是否对比完毕,若否,返回步骤S142;若是,结束。
在步骤S160中,完成拍摄后,在目标数据库中更新目标对象的已拍摄的照片总数和/或视频的总时长。
在预览图像中识别出符合当前目标人脸库中的人脸及该被拍摄人的已拍摄的照片总数和/或视频的总时长,并在预览图像中的人脸周围叠加矩形线框及已拍照片的总数和/或视频的总时长,以便拍摄者快速识别预览图像中哪些人是需要拍摄的目标对象,以及每个目标对象目前已拍照多少张和/或视频的总时长,以便灵活调整是否继续拍摄。在实际应用中,摄像师可以移动镜头,在预览图像中实时了解呈现在预览图像中的目标对象已拍摄照片的数量和/或视频的总时长。
通过根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象;查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示;目标特征信息和历史拍摄信息均存储在目标数据库中;完成拍摄并更新目标数据库,可以在现场拍摄过程中实时识别被拍摄对象并显示其已拍摄信息。
本发明第二实施例提供一种拍摄方法,拍摄方法包括:
S200开启全局开关,全局开关用于启闭所有目标特征信息对应的目标对象识别和标识图形显示功能。
当全局开关开启时,根据所有目标特征信息识别对应的目标对象并显示标识图形。当全局开关关闭时,关闭所有目标特征信息对应的目标对象识别和标识图形显示功能。
S210将选定的目标特征信息的跟踪开关设置为关闭。
当目标特征信息的跟踪开关开启时,根据目标特征信息识别目标对象并显示标识图形;否则,根据目标特征信息识别目标对象并标记。
S220根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象。
S240查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示。
S250设置触发开关。
当全局开关开启时,开启触发开关,则所有目标特征信息对应的目标对象识别和标识图形显示功能被关闭,直到触发开关被关闭,所有目标特征信息对应的目标对象识别和标识图形显示功能重新开启。
S260完成拍摄并更新目标数据库。
在本实施例中,还是以被拍摄对象为人为例进行说明,目标特征信息为目标对象的人脸特征图像。在拍摄前,首先预先构建目标数据库,目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个目标特征信息、以及每个目标特征信息的跟踪开关状态和历史拍摄信息。
图4所示为一级映射单元,一级映射单元中的每条分类记录均包括编号、描述及二级映射单元索引;每条分类记录的二级映射单元索引指向一个二级映射单元。分类记录可以按照拍摄时间、地点、目标对象的类别(例如同学、同事、朋友和家人等)、事件等,以及不同的组合(例如时间和地点的组合)进行分类,不作限定。
由于每条分类记录对应一个二级映射单元,每个二级映射单元包括至少一个目标对象的人脸特征图像,每个二级映射单元中所有的人脸特征图像视为一个集合,称为目标人脸库,即每条分类记录对应一个目标人脸库,每个目标人脸库所包括的人脸特征图像文件均存储在一个目录中(例如/Storage/DCIM/ai07/)。不同目标人脸库的存储目录不同。
二级映射单元还包括与每个目标特征信息相匹配的照片或视频的存储信息,历史拍摄信息包括所有相匹配的照片的总数和/或视频的时长,以及根据照片的总数和/或视频的时长计算得到的数量等级。
图5所示为二级映射单元,二级映射单元包括5个字段:
序号(Seq),表示该二级映射单元的目标人脸库中不同的人脸特征图像的序号;
目标人脸路径(Dst_Portrait_Path),表示目标人脸库中人脸特征图像文件的存储路径;
跟踪标记(Is_track),表示跟踪开关的状态,1表示开启,0表示关闭,默认为开启;
匹配个数(Match_cnt),表示与每个人脸特征图像相匹配的照片的总数;
匹配照片列表(Match_PicList),表示与每个目标特征信息相匹配的照片的存储信息;
Seq为0的记录表示不属于任何一个目标人脸库中的照片信息,故其Dst_Portrait_Path、Is_track无存在意义,为空。
在图5中仅以历史拍摄信息为已拍摄的照片的总数为例,在其他的实施方式中,历史拍摄信息还可以是已拍摄视频的总时长,或者,已拍摄照片的总数和视频的总时长,不作限定。
在步骤S200中,拍摄者从目标数据库的一级映射单元中选择一个分类记录后,开启全局开关,拍摄者所选择的分类记录对应的目标人脸库称为当前目标人脸库,即默认根据当前目标人脸库中的所有人脸特征图像进行目标对象的识别及标识图形的显示。
在一级映射单元中,拍摄者还可以对各分类记录进行编辑,例如,分类记录的增加和删除,以及两个以上分类记录的合并等,分类记录合并后,目标人脸库中重复的人脸特征图像被删除。
在步骤S210中,拍照者可以浏览分类记录中人脸特征图像所对应的目标对象已拍照片的总数,并可以设定是否还需要对已拍照片的数量较多的目标对象继续显示其标识图形(即在拍摄过程中进行跟踪,以显示所拍摄的照片总数)。如果不需要,则可以通过设定对应的人脸特征图像为未选中,对应的跟踪标记(Is_track)置为0,则关闭选定的目标特征信息的跟踪开关,在预览图像中不显示标识图形,仅对跟踪标记置为0的人脸特征图像匹配的目标对象进行标记,该标记不同于标识图形,不作限定。
图6所示为实现该功能的一个效果图,可以显示出当前目标人脸库所包括的所有人脸特征图像,以及每个人的已拍照片总数。可以通过每个人脸特征图像的左上角的圆形按钮设置跟踪开关,选中按钮时,人脸特征图像的跟踪标记为1,未选中按钮时,人脸特征图像的跟踪标记为0,例如黑圈表明未选中,白圈表明选中,分别表示跟踪开关的开、关状态。在图6中,还可以通过排序按钮按照照片数量从少到多,或者从多到少的顺序对所有人脸特征图像进行排列。
步骤S220与本发明第一实施例中的步骤S120基本相同,不再赘述。
步骤S240与本发明第一实施例中的步骤S140的区别在于:若预览图像中的人脸图像在当前目标人脸库中有匹配的人脸特征图像,但根据人脸特征图像对应的跟踪标记真假(即1或0),在预览图像中对应人脸叠加标识图形或者标记,该标记不同于标识图形,在一种实施方式中,当标识图形包括数字和几何图形时,该标记可以仅仅是标识图形中的几何图形,而不显示标识图形中的数字。在另一种实施方式中,如图7所示,人A采用实线框作为标记,表明该人A属于当前目标人脸库,但跟踪开关关闭,对应的照片数目不显示。B和C两个人采用以虚线框和已拍照片总数作为标识图形,表明B和C属于当前目标人脸库,且跟踪开关开启。拍摄者可以知道,左上角人A被拍照次数较多,目前没有必要再拍摄A了。
在步骤S250中,拍摄者通过标识图形了解各个被拍摄对象的历史拍摄信息后,确定了当前被拍摄对象,为了更好地对焦及评估细节,可以开启触发开关,临时关闭目标对象识别和标识图形显示功能,在快门按下前标识图形不显示,快门按下后,直到触发开关被关闭,才重新开启目标对象识别和标识图形显示功能。
另外,若镜头移动或者当前的预览图像中的被拍摄对象发生变化,例如,被拍摄对象退出或者新的被拍摄对象加入,可以先关闭触发开关,重新开启目标对象识别和标识图形显示功能,重新获取预览图像,获取相关信息后,开启触发开关,临时关闭目标对象识别和标识图形显示功能。
在步骤S260中,拍摄完成后,从所拍摄的照片或者视频中识别出目标对象,在二级映射单元中,查找与目标对象匹配的目标特征信息,并更新照片的总数和/或视频的总时长、以及更新照片和/或视频的存储信息。
步骤S210可以在步骤S200和S260之间进行,不作限定。当步骤S210设置在步骤S200之后进行时,由于事先关闭选定的目标对象的标识图形显示功能,因此可以提高随后的步骤S220和S240的执行效率。当步骤S210设置在步骤S240之后进行时,便于拍摄者在拍摄过程中实时调整不同目标对象的历史拍摄信息显示功能,使用方便。
本发明第三实施例提供一种拍摄方法,拍摄方法包括:
S300开启全局开关,全局开关用于启闭所有目标特征信息对应的目标对象识别和标识图形显示功能。
S310将选定的目标特征信息的跟踪开关设置为关闭。
S320根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象。
S340查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示。
S350设置触发开关。
S360完成拍摄并更新目标数据库。
第三实施例的步骤S300至S330与第二实施例的步骤S200至S230基本相同,第三实施例与第二实施例的目标数据库的二级映射单元不同,步骤S340与步骤S240不同,以及步骤S360与步骤S260不同,以下分别说明。
在第三实施例中,二级映射单元还包括与每个目标特征信息相匹配的照片和视频的存储信息,历史拍摄信息包括所有相匹配的照片的总数、视频的时长,根据照片的总数和视频的时长计算得到的数量等级。
参见图8所示,二级映射单元包括序号(Seq)、目标人脸路径(Dst_Portrait_Path)、跟踪标记(Is_track)、匹配个数(Match_cnt)和匹配照片列表(Match_PicList),这些字段已经在第二实施例中详细说明,不再赘述。
除了上述字段以外,二级映射单元的每条分类记录还可以包括:
1)个数范围字段(Cnt_level),表示匹配个数(Match_cnt)的排序,例如,将全部(不含Seq为0)的匹配个数(Match_cnt)从高到低按线性分成3个数量等级,即将整个二级映射单元的每条分类记录(不含Seq为0)的匹配个数(Match_cnt)从高到低进行排序对比:
匹配个数(Match_cnt)范围从0到1/3,即前1/3,则Cnt_level为3;
匹配个数(Match_cnt)范围从1/3到2/3,即中间1/3,则Cnt_level为2;
匹配个数(Match_cnt)范围从2/3到1,即最后1/3,则Cnt_level为1。
2)匹配视频列表(Match_VideoList)字段,表示与每个目标特征信息相匹配的视频的存储信息。
3)匹配时长(Match_time)字段,表示匹配视频列表(Match_VideoList)字段所有视频的总时长。
4)时长范围字段(Time_level),表示对应记录Match_time的个数排序分类,例如将全部(不含Seq为0)的Match_time从高到低按线性分成3个数量等级,即将整个二级映射单元(不含Seq为0)的Match_time从高到低进行排序对比,若该记录的Match_time排前1/3,则Time_level为3;若该记录的Match_time排中间1/3,则Time_level为2;若该记录的Match_time排最后1/3,则Time_level为1。
此时Seq为0的记录表示不属于任何一个目标人脸库的照片、视频信息,进一步,故其Cnt_level、Match_time、Time_level、无存在意义,为空。
在步骤S340中,根据个数范围字段(Cnt_level)的不同值,可以用三种不同的目标图形来区分照片数量多、中和少。如图9所示,人A已拍照片总数较多,可以用虚线圆角矩形框表示,人B已拍照片总数居中,可以用虚线圆形框表示,人C已拍照片总数较少,可以用虚线菱形框表示。根据Time_level的不同值,可以用三种不同的目标图形来区分已拍视频时间长、中和短。
上述个数范围字段(Cnt_level)分为3个数量等级,个数范围字段(Cnt_level)的数量等级可以根据实际情况设定,不作限定。
在第二实施例中,步骤S240查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示。标识图形都是直接显示目标对象已拍摄的照片总数,使得拍摄者能够定量地了解已拍摄照片的数量。
在第三实施例中,步骤S340还可以通过线框的形状、颜色、是否闪烁等效果,以及线框的形状、颜色、是否闪烁等效果的结合方式定性地区分已拍照照片多的人和已拍照照片少的人,使得拍照者可以定性地了解不同人的实际已拍摄照片数量。
在步骤S360中,在拍照后更新完Match_cnt后,将整个二级映射单元的每条记录(不含Seq为0)的Match_cnt从高到低进行排序对比,若该记录的Match_cnt排前1/3,则该记录对应的Cnt_level更新为3;若该记录的Match_cnt中间1/3,则该记录对应的Cnt_level更新为2;若该记录的Match_cnt排最后1/3,则该记录对应的Cnt_level更新为1。
在视频拍摄完成后,可按下述方法更新二级映射单元的每条记录的Match_time与Match_VideoList。
若存在M个人脸特征图像(不含Seq为0),初始化数组TIME[M]、HIT[M]中各个元素为0。
若视频时长为T,约定若在t(t为时间分片,t为1s、2s等)中,若对应的目标人脸出现过一次,则认定目标人脸存在时长t。
伪代码如下:
备注:可能上述循环T-i*t大于0,即还存在小于t的时间片,因为误差较小,不超过t,从效率上看可以不用对该时间片逐帧分析计算了。
在拍照后更新完Match_time后,将整个二级映射单元的每条记录(不含Seq为0)的Match_time从高到低进行排序对比,若该记录的Match_time排前1/3,则该记录对应的Time_level更新为3;若该记录的Match_time排中间1/3,则该记录对应的Time_level更新为2;若该记录的Match_time最后1/3,则该记录对应的Time_level更新为1。
本发明第四实施例提供一种拍摄方法,第四实施例与前面各实施例基本相同,区别在于目标数据库的构建和更新方法不同,以下分别说明。
包括:从历史图像或者当前拍摄的图像的指定区域中提取目标特征信息并加入目标数据库,指定区域为图像的全部区域或者中心区域。
参见图10所示,构建目标数据库具体包括:
S401、新建一个目标人脸库作为当前目标人脸库,或采用已有目标人脸库作为当前目标人脸库;
S402、是否收到更新当前目标人脸库的指令;若否,进入步骤S408;若是,进入步骤S403;
S403、选择照片的导入方式,若是拍照方式,进入步骤S404;若是选择已有照片,进入步骤S405;
S404、拍摄一张照片,进入步骤S406;
S405、从照片库中选择一张照片,进入步骤S406;
S406、检测出该照片中的人脸图像并标记;
S407、将选中的人脸图像加入当前目标人脸库,返回步骤S402;
S408、完成当前目标人脸库构建。
上述步骤中,当前拍摄的图像为照片,在其他的实施方式中,当前拍摄的图像还可以是当前拍摄的视频中的一个视频帧。历史图像可以是照片,也可以是视频中的视频帧。
另外,在实际应用中,拍摄者有时希望通过一张合影将全部目标对象的人脸图像作为人脸特征图像导入目标数据库中,有时仅需要将图像的中心区域的人脸图像导入目标数据库中,因为中心区域以外可能存在一些非目标对象的人脸图像,会干扰操作者便捷地选出目标对象的人脸图像。拍摄者可以设定中心区域范围并使能中心区域,以检测出该照片中的人脸图像并标记。
如图11a所示:在中心区域识别关闭的情况下,在步骤S406中对整张照片进行人脸检测,检测出了该照片中的人脸,并用记号突出,在图11a中,当前目标人脸库中已有的人脸,其叠加的记号为实线框图,当前目标人脸库中没有的人脸,其叠加的记号为虚线框图,附近有“+”符号,表示用户可以选择将当前目标人脸库中没有的人脸加入当前目标人脸库。
例如在某班级活动中给全部同学拍照,拍摄者可以提前从照片库中选择一张合影,或者新拍一张合影,即可方便快速地将这张合影中不在当前目标人脸库全部人脸图像导入当前目标人脸库中。
如图11b所示:在中心区域识别开启的情况下,S406中仅会检测所设定的中心区域范围内的人脸(图中的人B、C),并用记号突出,在11b中,当前目标人脸库中已有的人脸,其叠加的记号为实线框图,当前目标人脸库中没有的人脸,其叠加的记号为虚线框图,附近有“+”符号,表示用户可以选择将当前目标人脸库中没有的人脸加入当前目标人脸库。
实际应用中,若照片在闹市中拍摄,照片的非中心区域可能存在一些非目标的人脸,若检测出来了会干扰拍摄者便捷地选出目标对象的人脸图像,拍摄者仅希望对照片中心区域的人脸图像进行标识。
步骤S401至S408直接通过叠加在照片上的标记选中加入当前目标人脸库的人脸图像,但若一张照片中的检测的人脸图像过多,在拍摄装置显示屏过小的情况下,对应的标记也很小,不方便拍摄者选中需要加入当前目标人脸库的人脸图像,可以采用图11c的方式,在步骤S406与S407中插入一个步骤S4061,将所识别出的不在当前目标人脸库的人脸截取出来,根据显示区域的大小排成大小合适的列表,供拍摄者选择。
更新目标数据库:
除了更新照片的总数、数量等级和存储信息,以及视频的总时长、数量等级和存储信息,还包括从所拍摄的照片或者视频中提取被选定的非目标对象的目标特征信息,与所拍摄的照片的总数和/或视频的总时长、以及照片和/或视频的数量等级和存储信息一起加入二级映射单元中。
参见图12所示,以拍摄照片为例,更新目标数据库具体包括:
S411、检测当前照片中的人脸图像,即在中心区域识别关闭的情况下,对整张照片进行人脸检测,若中心区域识别开启,对所设定的中心区域范围内的人脸进行检测,转到S412;
S412、依次分析每个人脸图像,转到S413;
S413、将该人脸图像与当前目标人脸库对比,若当前目标人脸库不存在符合的人脸特征图像,则转到S415;若当前目标人脸库存在符合的人脸特征图像,则转到S414;
S414、更新符合的人脸特征图像的历史拍摄信息,即已拍照片数加1,并增加当前照片的存储信息,转到S418
S415、将该人脸图像标记为非目标对象,转到S416;
S416、是否收到加入当前目标人脸库的指令,若是,转到S417;若否,转到S418;
S417、将该人脸图像加入当前目标人脸库,照片总数初始化为1,并并增加当前照片的存储信息。
S418、判断全部人脸图像是否分析完,若否,转回S412;若是,转到S419;
S419、结束目标数据库更新。
在步骤S414和S417增加指向当前照片的索引可以提高存储空间利用率,若当前照片包含多个人,没必要保存多份,保存多了不但占用空间,而且影响拍照效率,照片写入存储介质也要花时间。这样在浏览或导出照片时,根据对应的人脸的指向的一系列照片索引就可以找到目标照片。
进入预览功能以查看目标数据库,如图13所示为一级目录,显示屏因尺寸限制中仅呈现了3个目标人脸库的记录,每条目标人脸库记录左边是文字描述,右边视显示屏空间显示目标人脸库中的对应人脸,并按对应人脸的照片个数从多到少,从左到右排列。(此图为示意图,可以通过翻页或下滑查看其它目标人脸库记录)
点击一条目标人脸库分类记录后,可以进入对应的目标人脸库,如图8的二级目录所示,根据人脸特征图像及历史拍摄信息显示照片,及对应分组边上显示已拍摄照片的个数。点击对应的人脸特征图像可以进入三级目录,根据对应人脸特征图像的指向存储照片的索引,可以渲染出对应人脸特征图像的人的全部照片或视频。
二级目录的排序按钮可以让照片分组根据目标人脸对应的照片个数从多到少或从少到多排列。
二级目录的分组复制按钮,可以根据对应目标人脸的指向存储照片、视频的索引,为不同的目标人脸建立不同的目录,并将对应的一系列索引指向的照片、视频拷贝到对应的目标人脸目录中去。因为不同的目标人脸可能都有索引指向同一张照片或视频,这样方便用户根据人脸分组导出对应人的照片或视频。(图13为示意图,可以通过翻页或下滑查看其它目标人脸库记录)。
此外,进入三级目录后,若有视频要预览显示,则在视频中找到该三级目录对应的目标人脸出现的第一帧,作为视频的预览显示。
三级目录中的视频,若被接受指令被播放,该视频默认定位到从该三级目录对应的目标人脸出现的第一帧位置开始播放。
本发明第五实施例提供一种图像的显示方法,图像的显示方法包括:
S520从显示屏幕上的图像中识别与目标特征信息相匹配的目标对象。
S540查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后发送到显示屏幕上进行显示。
显示屏幕上显示的图像可以是拍摄设备的预览图像,也可以是图像处理设备的显示屏上显示的图像。拍摄设备可以是照相机、录像机、智能手机、平板电脑、智能眼镜等穿戴式智能设备、以及监控摄像设备等具有拍摄照片和视频功能的设备。图像处理设备包括智能手机、平板电脑和计算机等。
其中,目标特征信息和历史拍摄信息均存储在目标数据库中。历史拍摄信息包括目标对象的已拍摄照片的总数和/或视频的总时长。标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与历史拍摄信息具有映射关系。用于表示每个目标对象的历史拍摄信息(例如照片的总数和/或视频的总时长)。其中,标识图形是可识别的形状,例如由外部轮廓线条构成的矢量图,具有不同的形状和颜色。即可以是由计算机绘制的直线、圆、矩形、多边形、曲线、图表等。
目标对象可以是人、动物、植物、建筑物、物体和自然景观等,目标特征信息是用于识别被拍摄对象的信息,目标特征信息可以是包括被拍摄对象的特征图像,也可以是从被拍摄对象的特征图像中提取的一组特征数据,不作限定。例如,当被拍摄对象为人时,可以将人脸特征图像作为目标特征信息,通过人脸识别技术进行识别,也可以将从特征图像中提取的一组特征数据作为目标特征信息,通过人脸识别技术进行识别,不作限定。
历史拍摄信息包括目标对象的信息(例如名字、ID等)、已拍摄照片的总数和/或视频的总时长,还可以包括拍摄时间、地点等信息。
在显示屏幕上,目标对象及其历史拍摄信息的显示可以如图2所示。
本发明第六实施例提供一种图像的显示方法,在本发明第五实施例的基础上,图像的显示方法包括:
S600设置全局开关,用于启闭所有目标特征信息对应的目标对象识别和标识图形显示功能。
S610将选定的目标特征信息的跟踪开关设置为关闭。
当跟踪开关设为开启状态时,根据目标特征信息识别目标对象并显示标识图形;当跟踪开关设为关闭状态时,根据目标特征信息识别目标对象并标记。S620从显示屏幕上的图像中识别与目标特征信息相匹配的目标对象。
S640查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后发送到显示屏幕上进行显示。
其中,目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个目标特征信息、以及每个目标特征信息的跟踪开关状态和历史拍摄信息。
在本实施例中,全局开关和跟踪开关的设置方法与本发明第二实施例和第四实施例基本相同,不再赘述。一级映射单元和二级映射单元与本发明第二实施例基本相同,不再赘述。
本发明第七实施例提供一种图像的显示方法,在本发明第六实施例的基础上,图像的显示方法还包括:在显示屏幕上,按照设定的排序规则显示所有的目标特征信息以及对应的历史拍摄信息。
在本实施例中,查看目标数据库中所有目标特征信息以及对应的历史拍摄信息的具体方法与本发明第四实施例中查看目标数据库的方法基本相同,不再赘述。
参见图14所示,本发明第八实施例提供一种拍摄系统,用于实现前述各实施例拍摄方法,拍摄系统包括拍摄模块100、处理模块200a、显示模块300a和目标数据库400a。
拍摄模块100用于接收拍照指令并获取预览图像。
目标数据库400a用于存储目标特征信息和历史拍摄信息。
处理模块200a用于从预览图像中识别与目标特征信息相匹配的目标对象,以及查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形;还用于在拍摄完成后更新目标数据库400a。
显示模块300a用于将标识图形叠加在预览图像上显示。
本发明第九实施例提供一种拍摄系统,在本发明第八实施例的基础上,图15所示为拍摄系统的应用示意图,预览图像存储在预览图像缓存700a中,拍摄的照片和视频存储在存储模块800a。
拍摄系统还包括提取模块500a,提取模块500a用于从历史图像和/或当前拍摄的图像的指定区域中提取目标特征信息并加入目标数据库400a,其中,指定区域为图像的全部区域或者中心区域。
处理模块200a还用于根据目标数据库400a中已有的目标特征信息,从历史图像和/或当前拍摄的图像中识别目标对象并将生成的标识图形发送到显示模块300a进行显示。
历史拍摄信息包括目标对象的已拍摄照片的总数和/或视频的总时长。标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与历史拍摄信息具有映射关系。
本发明第十实施例提供一种拍摄系统,在本发明第九实施例的基础上,参见图15所示,拍摄系统还包括设置模块600a,设置模块600a用于设置全局开关,和/或,对每个目标特征信息均设置一个跟踪开关。
处理模块200a和显示模块300a还用于根据全局开关的设置状态确定是否识别目标对象并显示标识图形;还用于当跟踪开关设为开启状态时,根据目标特征信息识别目标对象并显示标识图形;当跟踪开关设为关闭状态时,根据目标特征信息识别目标对象并标记。
设置模块600a还用于根据收到的触发操作设置触发开关。
设置模块600a还用于设定不同的历史拍摄信息对应的标识图形风格,比如不同Cnt_level的标识、不同Is_track的标识。
处理模块200a和显示模块300a还用于当全局开关开启,且触发开关启动时,关闭所有目标特征信息对应的目标对象识别和标识图形显示功能,直到触发开关被关闭时,所有目标特征信息对应的目标对象识别和标识图形显示功能重新开启。
目标数据库400a包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个目标特征信息、以及每个目标特征信息的跟踪开关状态和历史拍摄信息。
二级映射单元还包括与每个目标特征信息相匹配的照片或视频的存储信息,历史拍摄信息包括所有相匹配的照片总数和/或视频时长,以及根据照片总数和/或视频时长计算得到的数量等级。
拍摄完成后,处理模块200a用于从所拍摄的照片或者视频中识别出目标对象,在二级映射单元中,查找目标对象匹配的目标特征信息,并更新照片的总数和/或视频的总时长、以及更新照片和/或视频的数量等级和存储信息;
提取模块500a还用于从所拍摄的照片或者视频中提取被选定的非目标对象的目标特征信息,处理模块200a还用于将所拍摄的照片的总数和/或视频的总时长、以及照片和/或视频的数量等级和存储信息一起加入二级映射单元中。
拍摄系统还包括浏览模块900a,浏览模块900a用于按照设定的排序规则显示所有的目标特征信息以及对应的历史拍摄信息。
本发明第十一实施例提供一种拍摄设备,拍摄设备包括如前述各实施例拍摄系统。
本发明第十二实施例提供一种图像的显示系统,用于实施前述各实施例图像的显示方法,图像的显示系统包括目标数据库400b和处理模块200b。
目标数据库400b用于存储目标特征信息和历史拍摄信息。
处理模块200b用于从显示屏幕上的图像中识别与目标特征信息相匹配的目标对象,查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后发送到显示屏幕上进行显示。
本发明第十三实施例提供一种图像的显示系统,在本发明第十二实施例的基础上,历史拍摄信息包括所述目标对象的已拍摄照片的总数和/或视频的总时长。标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与所述历史拍摄信息具有映射关系。
图像的显示系统还包括设置模块600b,设置模块600b用于设置全局开关,和/或,对每个目标特征信息均设置一个跟踪开关。
设置模块600b还用于设定不同的历史拍摄信息对应的标识图形风格,比如不同Cnt_level的标识、不同Is_track的标识。
处理模块200b还用于根据全局开关的设置状态确定是否识别目标对象并显示标识图形;还用于当跟踪开关设为开启状态时,根据目标特征信息识别目标对象并生成标识图形;当跟踪开关设为关闭状态时,根据目标特征信息识别目标对象并标记。
目标数据库400b包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个目标特征信息、以及每个目标特征信息的跟踪开关状态和历史拍摄信息。
图像的显示系统还包括浏览模块900b,浏览模块900b用于在显示屏幕上,按照设定的排序规则显示所有的目标特征信息以及对应的历史拍摄信息。
预览图像可以存储在预览图像缓存700b中,拍摄的照片和视频存储在存储模块800b。
本发明第十四实施例提供一种图像处理设备,图像处理设备包括前述实施例图像的显示系统。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (29)

1.一种拍摄方法,其特征在于,其包括:
根据拍照指令获取预览图像,从预览图像中识别与目标特征信息相匹配的目标对象;
查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后叠加在预览图像上显示;其中,目标特征信息和历史拍摄信息均存储在目标数据库中;
完成拍摄并更新目标数据库。
2.如权利要求1所述的拍摄方法,其特征在于:从历史图像和/或当前拍摄的图像的指定区域中提取所述目标特征信息并加入所述目标数据库,指定区域为图像的全部区域或者中心区域。
3.如权利要求2所述的拍摄方法,其特征在于:根据所述目标数据库中已有的所述目标特征信息,从所述历史图像和/或当前拍摄的图像中识别所述目标对象并显示所述标识图形。
4.如权利要求1所述的拍摄方法,其特征在于:所述历史拍摄信息包括所述目标对象的已拍摄照片的总数和/或视频的总时长。
5.如权利要求1所述的拍摄方法,其特征在于:所述标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与所述历史拍摄信息具有映射关系。
6.如权利要求1所述的拍摄方法,其特征在于,从所述预览图像中识别出目标对象之前,所述方法还包括:设置全局开关,当全局开关开启时,根据所有所述目标特征信息识别对应的所述目标对象并显示所述标识图形;否则,关闭所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能。
7.如权利要求1所述的拍摄方法,其特征在于,所述方法还包括:对每个所述目标特征信息均设置一个跟踪开关;
当所述目标特征信息的跟踪开关开启时,根据所述目标特征信息识别所述目标对象并显示所述标识图形;否则,根据所述目标特征信息识别所述目标对象并标记。
8.如权利要求7所述的拍摄方法,其特征在于:所述目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个所述目标特征信息、以及每个所述目标特征信息的跟踪开关状态和历史拍摄信息。
9.如权利要求8所述的拍摄方法,其特征在于:所述二级映射单元还包括与每个所述目标特征信息相匹配的照片或视频的存储信息,所述历史拍摄信息包括所有相匹配的照片的总数和/或视频的时长,以及根据照片的总数和/或视频的时长计算得到的数量等级。
10.如权利要求9所述的拍摄方法,其特征在于:拍摄完成后,从所拍摄的照片或者视频中识别出所述目标对象,在所述二级映射单元中,查找与所述目标对象匹配的所述目标特征信息,并更新所述照片的总数和/或视频的总时长、以及更新所述照片和/或视频的数量等级和存储信息;
所述方法还包括:从所拍摄的照片或者视频中提取被选定的非目标对象的目标特征信息,与所拍摄的照片的总数和/或视频的总时长、以及所述照片和/或视频的数量等级和存储信息一起加入所述二级映射单元中。
11.如权利要求6所述的拍摄方法,其特征在于,所述方法还包括:设置触发开关;
当所述全局开关开启时,开启触发开关,则所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能被关闭,直到触发开关被关闭,所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能重新开启。
12.一种图像的显示方法,其特征在于,其包括:
从显示屏幕上的图像中识别与目标特征信息相匹配的目标对象;
查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后发送到显示屏幕上进行显示;
其中,目标特征信息和历史拍摄信息均存储在目标数据库中。
13.如权利要求12所述的图像的显示方法,其特征在于:所述历史拍摄信息包括所述目标对象的已拍摄照片的总数和/或视频的总时长。
14.如权利要求12所述的图像的显示方法,其特征在于:所述标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与所述历史拍摄信息具有映射关系。
15.如权利要求12所述的图像的显示方法,其特征在于,所述方法还包括:设置全局开关,用于启闭所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能;
和/或,对每个所述目标特征信息均设置一个跟踪开关,当跟踪开关设为开启状态时,根据所述目标特征信息识别所述目标对象并显示所述标识图形;当跟踪开关设为关闭状态时,根据所述目标特征信息识别所述目标对象并标记。
16.如权利要求15所述的图像的显示方法,其特征在于:所述目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个所述目标特征信息、以及每个所述目标特征信息的跟踪开关状态和历史拍摄信息。
17.如权利要求12所述的图像的显示方法,其特征在于:在所述显示屏幕上,按照设定的排序规则显示所有的所述目标特征信息以及对应的所述历史拍摄信息。
18.一种基于权利要求12-17任一项所述图像的显示方法的显示系统,其特征在于,其包括:
目标数据库,其用于存储目标特征信息和历史拍摄信息;
处理模块,其用于从显示屏幕上的图像中识别与目标特征信息相匹配的目标对象,查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形后发送到显示屏幕上进行显示。
19.一种图像处理设备,其特征在于:所述图像处理设备包括如权利要求18所述的图像的显示系统。
20.一种拍摄系统,其特征在于,其包括:
拍摄模块,用于接收拍照指令并获取预览图像以及进行拍摄;
目标数据库,其用于存储目标特征信息和历史拍摄信息;
处理模块,其用于从预览图像中识别与目标特征信息相匹配的目标对象,以及查找目标对象的历史拍摄信息,并根据历史拍摄信息生成标识图形;还用于在拍摄完成后更新所述目标数据库;
显示模块,其用于将标识图形叠加在预览图像上显示。
21.如权利要求20所述的拍摄系统,其特征在于:所述系统还包括提取模块,提取模块用于从历史图像和/或当前拍摄的图像的指定区域中提取所述目标特征信息并加入所述目标数据库,其中,指定区域为图像的全部区域或者中心区域;
所述处理模块还用于根据所述目标数据库中已有的所述目标特征信息,从所述历史图像和/或当前拍摄的图像中识别所述目标对象并将生成的所述标识图形发送到所述显示模块进行显示。
22.如权利要求20所述的拍摄系统,其特征在于:所述历史拍摄信息包括所述目标对象的已拍摄照片的总数和/或视频的总时长。
23.如权利要求20所述的拍摄系统,其特征在于:所述标识图形包括字符和几何图形中的至少一种,字符和/或几何图形与所述历史拍摄信息具有映射关系。
24.如权利要求20所述的拍摄系统,其特征在于:所述系统还包括设置模块,设置模块用于设置全局开关,和/或,对每个所述目标特征信息均设置一个跟踪开关;
所述处理模块和显示模块还用于根据全局开关的设置状态确定是否识别所述目标对象并显示所述标识图形;还用于当跟踪开关设为开启状态时,根据所述目标特征信息识别所述目标对象并显示所述标识图形;当跟踪开关设为关闭状态时,根据所述目标特征信息识别所述目标对象并标记。
25.如权利要求24所述的拍摄系统,其特征在于:
所述设置模块还用于根据收到的触发操作设置触发开关;
所述处理模块和显示模块还用于当所述全局开关开启,且触发开关启动时,关闭所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能,直到触发开关被关闭时,所有所述目标特征信息对应的所述目标对象识别和标识图形显示功能重新开启。
26.如权利要求24所述的拍摄系统,其特征在于:所述目标数据库包括一级映射单元和二级映射单元,一级映射单元包括至少一条分类记录,每条分类记录对应一个二级映射单元,二级映射单元包括至少一个所述目标特征信息、以及每个所述目标特征信息的跟踪开关状态和历史拍摄信息。
27.如权利要求26所述的拍摄系统,其特征在于:所述二级映射单元还包括与每个所述目标特征信息相匹配的照片或视频的存储信息,所述历史拍摄信息包括所有相匹配的照片总数和/或视频时长,以及根据照片总数和/或视频时长计算得到的数量等级。
28.如权利要求27所述的拍摄系统,其特征在于:拍摄完成后,所述处理模块用于从所拍摄的照片或者视频中识别出所述目标对象,在所述二级映射单元中,查找所述目标对象匹配的所述目标特征信息,并更新所述照片的总数和/或视频的总时长、以及更新所述照片和/或视频的数量等级和存储信息;
所述处理模块还用于将从所拍摄的照片或者视频中提取的被选定的非目标对象的目标特征信息,与所拍摄的照片的总数和/或视频的总时长、以及所述照片和/或视频的数量等级和存储信息一起加入所述二级映射单元中。
29.一种拍摄设备,其特征在于:所述拍摄设备包括如权利要求20至28任一项所述的拍摄系统。
CN201811161315.9A 2018-09-30 2018-09-30 一种拍摄方法、图像的显示方法、系统及设备 Active CN109348120B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811161315.9A CN109348120B (zh) 2018-09-30 2018-09-30 一种拍摄方法、图像的显示方法、系统及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811161315.9A CN109348120B (zh) 2018-09-30 2018-09-30 一种拍摄方法、图像的显示方法、系统及设备

Publications (2)

Publication Number Publication Date
CN109348120A true CN109348120A (zh) 2019-02-15
CN109348120B CN109348120B (zh) 2021-07-20

Family

ID=65308078

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811161315.9A Active CN109348120B (zh) 2018-09-30 2018-09-30 一种拍摄方法、图像的显示方法、系统及设备

Country Status (1)

Country Link
CN (1) CN109348120B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110248087A (zh) * 2019-04-29 2019-09-17 努比亚技术有限公司 拍摄方法、拍摄装置及计算机可读存储介质
CN110728617A (zh) * 2019-09-30 2020-01-24 上海电机学院 一种基于fpga的动态目标识别与实时跟踪系统
CN111159449A (zh) * 2019-12-31 2020-05-15 维沃移动通信有限公司 一种图像显示方法及电子设备
WO2021179804A1 (zh) * 2020-03-11 2021-09-16 Oppo广东移动通信有限公司 图像处理方法、图像处理装置、存储介质与电子设备
WO2021237744A1 (zh) * 2020-05-29 2021-12-02 北京小米移动软件有限公司南京分公司 拍摄方法及装置
CN115314630A (zh) * 2022-01-24 2022-11-08 李宁 一种基于图像识别分析技术的婚庆摄影摄像智能化调控管理系统

Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101771817A (zh) * 2009-01-07 2010-07-07 华晶科技股份有限公司 预览影像实时显示对象信息的方法及其影像撷取装置
CN102332091A (zh) * 2010-07-13 2012-01-25 佳能株式会社 摄像装置及其控制方法、拍摄支持系统及个体评价方法
CN103714157A (zh) * 2013-12-27 2014-04-09 深圳先进技术研究院 以便携式摄影设备对街景数据库进行更新的方法
US20140122459A1 (en) * 2000-11-15 2014-05-01 Mark Frederick Frigon Tagging digital images
CN103823858A (zh) * 2014-02-21 2014-05-28 联想(北京)有限公司 信息处理方法及信息处理装置
US20140201219A1 (en) * 2011-11-16 2014-07-17 Tae-hoon Kim Method and Apparatus for Searching an Image, and Computer-Readable Recording Medium for Executing the Method
CN105243084A (zh) * 2015-09-07 2016-01-13 广东欧珀移动通信有限公司 拍摄图像文件的保存方法和系统及其检索方法和系统
CN105574155A (zh) * 2015-12-16 2016-05-11 广东欧珀移动通信有限公司 一种照片搜索方法和装置
CN106156347A (zh) * 2016-07-21 2016-11-23 北京奇虎科技有限公司 云相册分类展示方法、装置及服务器
CN106302918A (zh) * 2016-08-03 2017-01-04 努比亚技术有限公司 联系人分组装置及方法
CN106354868A (zh) * 2016-09-13 2017-01-25 乐视控股(北京)有限公司 一种拍照处理方法及装置
CN106462349A (zh) * 2015-03-27 2017-02-22 华为技术有限公司 一种电子照片显示方法、装置和移动设备
US20170053191A1 (en) * 2014-04-28 2017-02-23 Nec Corporation Image analysis system, image analysis method, and storage medium
CN106503161A (zh) * 2016-10-31 2017-03-15 维沃移动通信有限公司 一种照片存储方法、查找方法及移动终端
CN106713769A (zh) * 2017-03-27 2017-05-24 联想(北京)有限公司 图像拍摄控制方法、装置及电子设备
CN107566717A (zh) * 2017-08-08 2018-01-09 维沃移动通信有限公司 一种拍摄方法、移动终端及计算机可读存储介质
CN107705259A (zh) * 2017-09-24 2018-02-16 合肥麟图信息科技有限公司 一种在移动终端预览、拍摄模式下的数据增强方法及装置
CN107895041A (zh) * 2017-11-30 2018-04-10 北京小米移动软件有限公司 拍摄模式设置方法、装置及存储介质
CN108205594A (zh) * 2018-01-02 2018-06-26 联想(北京)有限公司 一种图像处理方法和电子设备
CN109005350A (zh) * 2018-08-30 2018-12-14 Oppo广东移动通信有限公司 图像重复拍摄提示方法、装置、存储介质及移动终端

Patent Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140122459A1 (en) * 2000-11-15 2014-05-01 Mark Frederick Frigon Tagging digital images
CN101771817A (zh) * 2009-01-07 2010-07-07 华晶科技股份有限公司 预览影像实时显示对象信息的方法及其影像撷取装置
CN102332091A (zh) * 2010-07-13 2012-01-25 佳能株式会社 摄像装置及其控制方法、拍摄支持系统及个体评价方法
US20140201219A1 (en) * 2011-11-16 2014-07-17 Tae-hoon Kim Method and Apparatus for Searching an Image, and Computer-Readable Recording Medium for Executing the Method
CN103714157A (zh) * 2013-12-27 2014-04-09 深圳先进技术研究院 以便携式摄影设备对街景数据库进行更新的方法
CN103823858A (zh) * 2014-02-21 2014-05-28 联想(北京)有限公司 信息处理方法及信息处理装置
US20170053191A1 (en) * 2014-04-28 2017-02-23 Nec Corporation Image analysis system, image analysis method, and storage medium
CN106462349A (zh) * 2015-03-27 2017-02-22 华为技术有限公司 一种电子照片显示方法、装置和移动设备
CN105243084A (zh) * 2015-09-07 2016-01-13 广东欧珀移动通信有限公司 拍摄图像文件的保存方法和系统及其检索方法和系统
CN105574155A (zh) * 2015-12-16 2016-05-11 广东欧珀移动通信有限公司 一种照片搜索方法和装置
CN106156347A (zh) * 2016-07-21 2016-11-23 北京奇虎科技有限公司 云相册分类展示方法、装置及服务器
CN106302918A (zh) * 2016-08-03 2017-01-04 努比亚技术有限公司 联系人分组装置及方法
CN106354868A (zh) * 2016-09-13 2017-01-25 乐视控股(北京)有限公司 一种拍照处理方法及装置
CN106503161A (zh) * 2016-10-31 2017-03-15 维沃移动通信有限公司 一种照片存储方法、查找方法及移动终端
CN106713769A (zh) * 2017-03-27 2017-05-24 联想(北京)有限公司 图像拍摄控制方法、装置及电子设备
CN107566717A (zh) * 2017-08-08 2018-01-09 维沃移动通信有限公司 一种拍摄方法、移动终端及计算机可读存储介质
CN107705259A (zh) * 2017-09-24 2018-02-16 合肥麟图信息科技有限公司 一种在移动终端预览、拍摄模式下的数据增强方法及装置
CN107895041A (zh) * 2017-11-30 2018-04-10 北京小米移动软件有限公司 拍摄模式设置方法、装置及存储介质
CN108205594A (zh) * 2018-01-02 2018-06-26 联想(北京)有限公司 一种图像处理方法和电子设备
CN109005350A (zh) * 2018-08-30 2018-12-14 Oppo广东移动通信有限公司 图像重复拍摄提示方法、装置、存储介质及移动终端

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110248087A (zh) * 2019-04-29 2019-09-17 努比亚技术有限公司 拍摄方法、拍摄装置及计算机可读存储介质
CN110728617A (zh) * 2019-09-30 2020-01-24 上海电机学院 一种基于fpga的动态目标识别与实时跟踪系统
CN111159449A (zh) * 2019-12-31 2020-05-15 维沃移动通信有限公司 一种图像显示方法及电子设备
CN111159449B (zh) * 2019-12-31 2024-04-16 维沃移动通信有限公司 一种图像显示方法及电子设备
WO2021179804A1 (zh) * 2020-03-11 2021-09-16 Oppo广东移动通信有限公司 图像处理方法、图像处理装置、存储介质与电子设备
WO2021237744A1 (zh) * 2020-05-29 2021-12-02 北京小米移动软件有限公司南京分公司 拍摄方法及装置
CN115314630A (zh) * 2022-01-24 2022-11-08 李宁 一种基于图像识别分析技术的婚庆摄影摄像智能化调控管理系统

Also Published As

Publication number Publication date
CN109348120B (zh) 2021-07-20

Similar Documents

Publication Publication Date Title
CN109348120A (zh) 一种拍摄方法、图像的显示方法、系统及设备
Huh et al. Fighting fake news: Image splice detection via learned self-consistency
CN103412951B (zh) 基于人物照片的人脉关联分析管理系统与方法
JP5612310B2 (ja) 顔認識のためのユーザーインターフェース
RU2608261C2 (ru) Автоматическое генерирование тега на основании содержания изображения
O'Hare et al. Context-aware person identification in personal photo collections
CN103119595B (zh) 通过快门按击的自动媒体共享
JP5934653B2 (ja) 画像分類装置、画像分類方法、プログラム、記録媒体、集積回路、モデル作成装置
CN109213882B (zh) 图片排序方法及终端
JP5632084B2 (ja) コンシューマ配下画像集における再来性イベントの検出
CN110046266B (zh) 一种照片的智能管理方法及装置
CN105407261A (zh) 图像处理装置、方法以及电子设备
CN112118395B (zh) 视频处理方法、终端及计算机可读存储介质
CN105243084A (zh) 拍摄图像文件的保存方法和系统及其检索方法和系统
CN105159959A (zh) 图像文件的处理方法和系统
CN108632536A (zh) 一种相机控制方法及装置、终端、存储介质
CN110765215A (zh) 人员共同关系的查询方法、装置、电子设备及存储介质
CN116863286B (zh) 一种双流目标检测方法及其模型搭建方法
CN110049180A (zh) 拍摄姿势推送方法和装置、智能终端
CN106528702A (zh) 日记生成方法和装置
CN111371999A (zh) 一种图像管理方法、装置、终端及存储介质
CA3077974A1 (en) Photography session assistant
CN107315781A (zh) 一种相册标签的管理系统和实现方法
US8300256B2 (en) Methods, systems, and computer program products for associating an image with a communication characteristic
CN107343142A (zh) 一种照片的拍摄方法及拍摄装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant