CN113302907B - 拍摄方法、装置、设备及计算机可读存储介质 - Google Patents
拍摄方法、装置、设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN113302907B CN113302907B CN202080007322.2A CN202080007322A CN113302907B CN 113302907 B CN113302907 B CN 113302907B CN 202080007322 A CN202080007322 A CN 202080007322A CN 113302907 B CN113302907 B CN 113302907B
- Authority
- CN
- China
- Prior art keywords
- focusing
- target object
- target
- determining
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000004590 computer program Methods 0.000 claims description 12
- 238000005516 engineering process Methods 0.000 claims description 12
- 230000011218 segmentation Effects 0.000 claims description 8
- 238000003709 image segmentation Methods 0.000 claims description 5
- 241001465754 Metazoa Species 0.000 claims description 4
- 230000000694 effects Effects 0.000 claims description 4
- 230000000875 corresponding effect Effects 0.000 description 38
- 210000003128 head Anatomy 0.000 description 21
- 210000001508 eye Anatomy 0.000 description 17
- 238000010586 diagram Methods 0.000 description 8
- 210000000887 face Anatomy 0.000 description 8
- 238000001514 detection method Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 2
- 210000002832 shoulder Anatomy 0.000 description 2
- 102100037681 Protein FEV Human genes 0.000 description 1
- 101710198166 Protein FEV Proteins 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
Abstract
一种拍摄方法、拍摄装置、拍摄设备及计算机可读存储介质,所述方法包括:根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,所述对焦模式包括重识别模式、目标跟踪模式(S101);若确定所述对焦模式为重识别模式,则在当前拍摄画面中重识别所述目标对象,并在重识别到所述目标对象时,对所述目标对象进行对焦(S102);若确定所述对焦模式为目标跟踪模式,则对所述目标对象进行目标跟踪,以持续对焦所述目标对象,进行拍摄(S103)。
Description
技术领域
本申请涉及摄像技术领域,尤其涉及一种拍摄方法、装置、设备及计算机可读存储介质。
背景技术
随着科技的发展,相机已经成为人们日常工作和生活中的必需品,通过相机拍摄图片、视频来进行记录。目前,对于支持对焦的相机,一般可以通过自动对焦,或者手动对焦人物、建筑、宠物等目标对象,来获得目标对象清晰的图片、视频。在拍摄过程中,当相机对焦目标对象后,由于目标对象的移动,或者相机的移动,很多时候会出现目标对象在拍摄画面中消失的情况,需要用户操作相机调整拍摄画面,使得拍摄画面中重新出现目标对象,之后再由用户手动操作重新对焦目标对象,再进行拍摄,操作非常繁琐,相机进行拍摄工作还不够智能和便捷。
发明内容
基于此,本申请提供了一种拍摄方法、装置、设备及计算机可读存储介质,以提高相机摄像的智能性和便捷性。
第一方面,本申请提供了一种拍摄方法,包括:
根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,所述对焦模式包括重识别模式、目标跟踪模式;
若确定所述对焦模式为重识别模式,则在当前拍摄画面中重识别所述目标对象,并在重识别到所述目标对象时,对所述目标对象进行对焦;
若确定所述对焦模式为目标跟踪模式,则对所述目标对象进行目标跟踪,以持续对焦所述目标对象,进行拍摄。
第二方面,本申请还提供了一种拍摄装置,所述拍摄装置包括存储器和处理器;
所述存储器用于存储计算机程序;
所述处理器,用于执行所述计算机程序并在执行所述计算机程序时,实现如下步骤:
根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,所述对焦模式包括重识别模式、目标跟踪模式;
若确定所述对焦模式为重识别模式,则在当前拍摄画面中重识别所述目标对象,并在重识别到所述目标对象时,对所述目标对象进行对焦;
若确定所述对焦模式为目标跟踪模式,则对所述目标对象进行目标跟踪,以持续对焦所述目标对象,进行拍摄。
第三方面,本申请还提供了一种拍摄设备,所述拍摄设备包括如上述的拍摄装置。
第四方面,本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时使所述处理器实现如上述的拍摄方法。
本申请公开的拍摄方法、拍摄装置、拍摄设备及计算机可读存储介质,提高了相机等拍摄设备摄像的智能性和便捷性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请的实施例提供的一种拍摄设备的示意性框图;
图2是本申请的实施例提供的一种拍摄方法的步骤示意流程图;
图3是本申请的实施例提供的一种重识别目标对象的步骤示意流程图;
图4是本申请的实施例提供的一种对目标对象进行对焦的步骤示意流程图;
图5是本申请的实施例提供的一种按照对焦优先级顺序,对目标对象进行对焦的步骤示意流程图;
图6是本申请的实施例提供的一种对目标对象进行对焦的步骤示意流程图;
图7是本申请的实施例提供的另一种拍摄方法的步骤示意流程图;
图8是本申请的实施例提供的一种对焦对象选择界面的示意图;
图9是本申请的实施例提供的一种对焦切换的示意图;
图10是本申请的实施例提供的一种跟踪对焦的逻辑示意图;
图11是本申请的实施例提供的一种拍摄装置的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
附图中所示的流程图仅是示例说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解、组合或部分合并,因此实际执行的顺序有可能根据实际情况改变。
应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
下面结合附图,对本申请的一些实施方式作详细说明。在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。
本申请的实施例提供了一种拍摄方法、拍摄装置、拍摄设备及计算机可读存储介质,用于提高相机摄像的智能性和便捷性。
请参阅图1,图1为本申请实施例提供的一种拍摄设备的示意性框图。如图1所示,拍摄设备1000可以包括拍摄装置100和显示装置200,其中,拍摄装置100连接显示装置200,拍摄装置100用于进行图片、视频的拍摄,显示装置200用于显示拍摄装置100拍摄的图片、视频等。
示例性的,拍摄设备1000包括但不限于相机、摄像机等。
示例性的,拍摄设备1000可挂载于云台上。可选地,拍摄设备1000也可以是一体化云台相机。
拍摄设备1000在进行图片、视频拍摄时,根据目标对象的当前对焦情况确定拍摄设备的对焦模式,其中,拍摄设备的对焦模式包括重识别模式和目标跟踪模式,若确定对焦模式为重识别模式,则在当前拍摄画面中重识别目标对象,并在重识别到目标对象时,对目标对象进行对焦;若确定对焦模式为目标跟踪模式,则对目标对象进行目标跟踪,以持续对焦目标对象,进行拍摄。
可以理解的,上述对于拍摄设备1000各部件的命名仅仅出于标识的目的,并不因此对本申请实施例进行限制。
以下将基于拍摄设备、所述拍摄设备中的拍摄装置对本申请的实施例提供的拍摄方法进行详细介绍。需知,图1中的拍摄设备并不构成对该拍摄方法应用场景的限定。
请参阅图2,图2是本申请的实施例提供的一种拍摄方法的示意流程图。该方法可以用于上述实施例提供的任意一种拍摄设备中,以提高拍摄设备摄像的智能性和便捷性。
如图2所示,该拍摄方法具体包括步骤S101至步骤S103。
S101、根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,所述对焦模式包括重识别模式、目标跟踪模式。
用户在采用拍摄设备进行图片、视频等拍摄时,可以明确指定当前拍摄的对焦目标对象,比如点击当前拍摄画面中目标对象所在区域,拍摄设备基于用户的操作,确定拍摄设备此次拍摄过程中进行对焦拍摄的目标对象。其中,目标对象包括人物、动物、车辆中至少一种。
在拍摄过程中,随着拍摄设备的移动,或者目标对象的移动,很多时候可能会出现目标对象在拍摄画面中消失、或者目标对象虽然在拍摄画面中但是已失焦的情况,也即在拍摄过程中,拍摄设备可能正常对焦目标对象,也可能并未对焦目标对象。
为了确保拍摄效果,实现拍摄设备对焦到目标对象,本实施例中在拍摄设备进行拍摄的过程中,确定目标对象的当前对焦情况,也即确定目标对象是否对焦。根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,其中,对焦模式包括重识别模式、目标跟踪模式。重识别模式,是指对目标对象进行重识别,例如,识别当前的拍摄画面中是否存在目标对象。目标跟踪模式,是指对目标对象进行目标跟踪,也即对目标对象进行连续跟踪对焦AFC-Tracking,即在拍摄过程中保持对焦到目标对象。
也即,在拍摄设备进行拍摄的过程中,根据目标对象当前对焦或者目标对象当前未对焦,确定拍摄设备为重识别模式或者目标跟踪模式。示例性的,若拍摄设备当前未对焦目标对象,则确定拍摄设备的对焦模式为重识别模式,若拍摄设备当前对焦目标对象,则确定拍摄设备的对焦模式为目标跟踪模式。
S102、若确定所述对焦模式为重识别模式,则在当前拍摄画面中重识别所述目标对象,并在重识别到所述目标对象时,对所述目标对象进行对焦。
当确定拍摄设备的对焦模式为重识别模式时,也即说明拍摄设备当前未对焦目标对象,此时,在当前拍摄画面中重识别目标对象,也即识别当前拍摄画面中是否存在目标对象。
在一实施方式中,目标对象包括目标人物,比如目标对象为用户A,如图3所示,步骤S102可以包括子步骤S1021。
S1021、基于所述目标人物的参考图像,采用行人重识别技术在所述当前拍摄画面中重识别所述目标人物。
对于目标人物,预先拍摄并存储目标人物的至少一张人物图像,并将该至少一张人物图像作为目标人物的参考图像。当拍摄设备进行拍摄的目标对象为目标人物,并确定拍摄设备的对焦模式为重识别模式时,也即说明拍摄设备当前未对焦目标人物,则根据存储的目标人物的至少一张参考图像,采用行人重识别(Person re-identification,ReID)技术在当前拍摄画面中对目标人物进行重识别。行人重识别技术是利用计算机视觉技术判断图像或者视频序列中是否存在特定行人的技术,应用于本实施例中,即利用计算机视觉技术判断当前拍摄画面中是否存在目标人物。
譬如,若目标对象为用户A,预先存储用户A对应的至少一张参考图像,在拍摄设备当前未对焦用户A时,则采用行人重识别技术在当前拍摄画面中重识别用户A。
在当前拍摄画面中对目标对象进行重识别的结果无非就是两种,重识别到目标对象和未重识别到目标对象。
在一实施例中,步骤S1021可以包括:获取所述参考图像的第一人脸特征,以及所述当前拍摄画面中的第二人脸特征;将所述第一人脸特征与所述第二人脸特征进行比对,判断所述第一人脸特征与所述第二人脸特征是否匹配;若所述第一人脸特征与所述第二人脸特征匹配,则重识别到所述目标对象;若所述第一人脸特征与所述第二人脸特征不匹配,则未重识别到所述目标对象。
基于目标对象的至少一张参考图像,以及当前拍摄画面图像,对参考图像进行图像特征提取,获取参考图像的人脸特征,并对当前拍摄画面进行图像特征提取,获取当前拍摄画面中的人脸特征。为了便于区分描述,下文将参考图像对应的人脸特征称为第一人脸特征,将当前拍摄画面中的人脸特征称为第二人脸特征。
在获取到第一人脸特征以及第二人脸特征后,将第一人脸特征与第二人脸特征进行比对,判断第一人脸特征与第二人脸特征是否匹配。例如,设置预设相似度阈值,当第一人脸特征与第二人脸特征的相似度大于或等于预设相似度阈值时,确定第一人脸特征与第二人脸特征匹配。反之,当第一人脸特征与第二人脸特征的相似度小于预设相似度阈值时,确定第一人脸特征与第二人脸特征不匹配。若第一人脸特征与第二人脸特征匹配,则说明当前拍摄画面中存在目标对象,重识别到目标对象。反之,若第一人脸特征与第二人脸特征不匹配,则说明当前拍摄画面中不存在目标对象,未重识别到目标对象。
在重识别到目标对象时,对目标对象进行对焦,比如重识别到用户A时,对用户A进行对焦。
在一实施例中,如图4所示,步骤S102可以包括子步骤S1022。
S1022、按照所述目标对象的多个部位的对焦优先级顺序,对所述目标对象进行对焦。
通常,目标对象包括多个部位,每个部位进行对焦的概率有高有低,例如,对于目标人物而言,对人脸进行对焦的概率通常都要高于对脚进行对焦的概率。预先设置目标对象的多个部位对应的对焦优先级顺序,例如,以目标人物为例,目标人物的多个部位包括人眼、人脸、头肩部位、人体关节部位等,多个部位对应的对焦优先级顺序为人眼、人脸、头肩部位、人体关节部位,也即人眼对应的对焦优先级最高,其次为人脸,再次为头肩部位,最后为人体关节部位,按照人眼、人脸、头肩部位、人体关节部位的对焦优先级顺序,对目标人物进行对焦。
在一实施方式中,如图5所示,步骤S1022可以包括子步骤S10221至子步骤S10224。
S10221、检测所述当前拍摄画面中是否显现所述目标对象的第一对焦优先级对应的第一部位;若是,则执行步骤S10222;若否,则执行步骤S10223;
S10222、对所述第一部位进行对焦;
S10223、检测所述当前拍摄画面中是否显现所述目标对象的下一对焦优先级对应的第二部位;若是,则执行步骤S10224;若否,则返回执行步骤S10223;
S10224、对所述第二部位进行对焦。
基于目标对象的多个部位的对焦优先级顺序,首先检测当前拍摄画面中是否显现目标对象的第一对焦优先级对应的部位,也即当前拍摄画面中是否显现目标对象对应的对焦优先级最高的部位,若当前拍摄画面中显现目标对象对应的对焦优先级最高的部位,则对该对焦优先级最高的部位进行对焦。若当前拍摄画面中未显现目标对象对应的对焦优先级最高的部位,则继续判断当前拍摄画面中是否显现所述目标对象的下一对焦优先级对应的部位,也即对焦优先级第二高的部位。若当前拍摄画面中显现目标对象的对焦优先级第二高的部位,则对该对焦优先级第二高的部位进行对焦。若当前拍摄画面中未显现目标对象的对焦优先级第二高的部位,则继续检测当前拍摄画面中是否显现目标对象的下一对焦优先级对应的部位,也即对焦优先级第三高的部位。若当前拍摄画面中显现目标对象的对焦优先级第三高的部位,则对该对焦优先级第三高的部位进行对焦。若当前拍摄画面中未显现目标对象的对焦优先级第三高的部位,则继续检测当前拍摄画面中是否显现目标对象的下一对焦优先级对应的部位,也即对焦优先级第四高的部位,循环执行上述操作,直至对目标对象的某一对焦优先级的部位进行对焦。
例如,以目标人物为例,目标人物的多个部位包括人眼、人脸、头肩部位、人体关节部位等,多个部位对应的对焦优先级顺序为人眼、人脸、头肩部位、人体关节部位。当重识别到目标人物时,检测当前拍摄画面中是否显现目标人物的人眼,若显现目标人物的人眼,则对目标人物的人眼进行对焦;若未显现目标人物的人眼,则继续检测当前拍摄画面中是否显现目标人物的人脸。若显现目标人物的人脸,则对目标人物的人脸进行对焦;若未显现目标人物的人脸,则继续检测当前拍摄画面中是否显现目标人物的头肩部位。若显现目标人物的头肩部位,则对目标人物的头肩部位进行对焦;若未显现目标人物的头肩部位,则对目标人物的人体关节部位进行对焦。例如,当目标人物的head不在当前拍摄画面中或者被局部遮挡等情况时,对目标人物进行pose key-point检测,可以根据当前目标人物的posekey-points精确定位到身体的各个关节部位,对目标人物的关节部位进行对焦。
通过人眼对焦、人脸对焦、头肩部位对焦、人体关节部位对焦,实现了顺畅的对焦体验,例如,可以实现在目标人物的人脸丢失不能对焦的情况下,能够切换到目标人物的头部进行对焦,使得对焦区域的变化更加平滑,实现更好的对焦。
在一实施例中,如图6所示,步骤S102可以包括子步骤S1023和子步骤S1024。
S1023、对所述当前拍摄画面进行前景和背景分割。
例如,对当前拍摄画面做instance segmentation,如Mask R-CNN for ObjectDetection and Segmentation,将当前拍摄画面分割为前景图像和背景图像,其中,目标对象所在前景图像中。
S1024、基于分割的前景图像,对所述前景图像中的所述目标对象进行对焦。
对于分割生成的前景图像和背景图像,使用其中的前景图像,对前景图像中的目标对象进行对焦,从而减小对焦到背景图像的概率,实现更好的对焦。
在未重识别到目标对象时,在一实施方式中,可以对焦至其他对象,比如对焦至用户B。在另一实施方式中,在未重识别到目标对象时,可以输出相应的对焦至目标对象的提示信息,以提醒用户操作拍摄设备重新对焦至目标对象。需要说明的是,该提示信息包括但不限于语音提示信息、文本提示信息等。
在一实施例中,如图7所示,步骤S102之后可以包括步骤S104和步骤S105。
S104、当未重识别到所述目标对象时,确定所述当前拍摄画面中的临时对焦对象。
当在当前拍摄画面中未重识别到目标对象时,从当前拍摄画面中的其他对象中,确定一个临时对焦对象。示例性的,临时对焦对象可以与目标对象是同类型对象,也可以是与目标对象不同类型对象。例如,若目标对象是人物,临时对焦对象可以是其他人物,或者,临时对焦对象也可以是宠物、植物等其他类型对象。
在一实施方式中,确定当前拍摄画面中的临时对焦对象可以包括:当所述当前拍摄画面中存在单个对象时,将所述单个对象确定为所述临时对焦对象;当所述当前拍摄画面中存在多个对象时,确定所述当前拍摄画面的显著性区域;将所述显著性区域内对应的对象,确定为所述临时对焦对象。
在实际应用中,当前拍摄画面里可能只存在单个对象,或者是存在多个对象。通过对当前拍摄画面进行图像识别分析,若确定当前拍摄画面中只存在单个对象时,则直接将该单个对象确定为临时对焦对象。若确定当前拍摄画面中存在多个对象时,则对当前拍摄画面进行显著性区域检测,例如,采用Superpixel相关的算法对当前拍摄画面进行显著性区域检测,确定当前拍摄画面的显著性区域。其中,显著性区域是指当前拍摄画面中具有显著特征的区域,例如,当前拍摄画面中纹理特征多的区域,又如,当前拍摄画面中轮廓特征清晰的区域。将当前拍摄画面的显著性区域内对应的对象,确定为临时对焦对象。
在一实施方式中,确定当前拍摄画面中的临时对焦对象可以包括:根据预设的对象优先级,将所述当前拍摄画面中对象优先级最高的对象,确定为所述临时对焦对象;或者显示对焦对象选择界面,以供用户基于所述对焦对象选择界面选择当前待对焦的对象;将用户选择的所述对象确定为所述临时对焦对象。
例如,预先设置人物、宠物、风景、建筑物等各种类型对象对应的对象优先级。在一实施方式中,通过显示对象优先级设置界面,例如,在拍摄设备的显示屏上显示该对象优先级设置界面,用户可以基于对象优先级设置界面进行对象优先级设置操作,选择多种对象并设置多种对象的不同优先级信息,其中,优先级信息包括但不限于优先级的高低次序。根据用户设置的各种对象对应的优先级信息,生成各对象对应的对象优先级。比如,生成人物、宠物、风景、建筑物等各种类型对象按照对象优先级从高到低的顺序依次为人物、宠物、风景、建筑物。
当在当前拍摄画面中未重识别到目标对象时,对于当前拍摄画面中存在的各对象,根据该各对象对应的对象优先级,将其中对象优先级最高的对象,确定为临时对焦对象。例如,若设置人物、宠物、风景、建筑物等各种类型对象按照对象优先级从高到低的顺序依次为人物、宠物、风景、建筑物,当前拍摄画面中也存在人物,则将该人物确定为临时对焦对象。
另外一种情况是,当前拍摄画面中对象优先级最高的对象包括多个,比如,人物对应的对象优先级最高,当前拍摄画面中存在多个人物,则从该多个人物中,也即,对象优先级最高的多个对象中,选择其中之一对象,确定为临时对焦对象。例如,从对象优先级最高的多个对象中,随机选中某个对象,确定为临时对焦对象。
在一实施方式中,若当前拍摄画面中对象优先级最高的对象包括多个,则根据对象优先级最高的多个对象对应的区域信息,从对象优先级最高的该多个对象中,选中一个对象确定为临时对焦对象。其中,区域信息包括对象所占的区域面积、区域位置等信息。
在一实施例中,基于对象所占区域面积,从对象优先级最高的该多个对象中确定临时对焦对象。示例性的,将对象优先级最高的该多个对象所占区域面积进行比对,将多个对象中所占区域面积最大的对象,确定为临时对焦对象。比如说,通常对象距离拍摄设备的距离越近,其所占区域面积就越大,也即将距离拍摄设备近的对象,确定为临时对焦对象。
在一实施例中,基于对象所占区域位置,从对象优先级最高的该多个对象中确定临时对焦对象。示例性的,根据对象优先级最高的该多个对象所占区域位置,将其中区域位置最靠近当前拍摄画面中心位置的对象,确定为临时对焦对象。比如说,当前拍摄画面中心位置有用户C,当前拍摄画面右下角位置有用户D,也即用户C靠近当前拍摄画面中心位置,则确定用户C为临时对焦对象。
在一实施例中,基于对象所占区域面积以及区域位置,从对象优先级最高的该多个对象中确定临时对焦对象。示例性的,当对应区域位置最靠近当前拍摄画面中心位置的对象包括至少两个时,将该至少两个对象中所占区域面积最大的对象,确定为临时对焦对象。比如,仍以用户C和用户D为例,若用户C和用户D均位于当前拍摄画面中心位置,用户C距离拍摄设备更近,用户C在当前拍摄画面中所占区域面积大于用户D在当前拍摄画面中所占区域面积,则将用户C确定为临时对焦对象。
在一实施例中,当在当前拍摄画面中未重识别到目标对象时,显示对焦对象选择界面,例如,在拍摄设备的显示屏上显示对焦对象选择界面,如图8所示,对焦对象选择界面上显示当前拍摄画面中存在的各个对象对应的对焦对象选项,如人物1选项、人物2选项、宠物1选项、花朵选项等,用户可以根据自己的意愿选择当前待对焦的对象,在对焦对象选择界面上选择其中之一对焦对象选项,该对焦对象选项对应的对象即为当前待对焦的对象,将该对象确定为临时对焦对象。例如,若用户在对焦对象选择界面上选择花朵对应的对焦对象选项,则将花朵确定为临时对焦对象。
S105、对所述临时对焦对象进行对焦。
在当前拍摄画面中未重识别到目标对象,新确定了临时对焦对象后,对该临时对焦对象进行对焦,以进行对焦拍摄。并且返回再次执行在当前拍摄画面中重识别目标对象的操作,也即基于最新的当前拍摄画面,再次在当前拍摄画面中重识别目标对象。若未识别到目标对象,则继续对临时对焦对象进行对焦;若识别到目标对象,则切换到对目标对象进行对焦。也即在目标对象重新回到当前拍摄画面中时,自动重新对焦至该目标对象,而不需要通过用户手动点击目标对象来对目标对象重新进行对焦,因此,使得拍摄设备的拍摄更加便捷和智能,大大提高了用户体验。
拍摄设备在进行拍摄的过程中,综合来说是进行目标对象关键对焦部位(如人脸face)、目标对象次要对焦部位(如头肩head_shoulder)、临时对焦对象(如一般物体generic)之间的切换对焦。例如,如图9所示,在人脸face、头肩head_shoulder、以及一般物体generic之间进行对焦切换。另外,在对焦人脸face的时候支持对焦到人眼eye。若重识别到目标人物,优先对焦到目标人物的人眼eye,若未能对焦至人眼eye,则对焦至目标人物的人脸face,若未能对焦至目标人物的人脸face,则对焦至目标人物的头肩head_shoulder,若未能对焦至头肩head_shoulder,则对焦至其他一般物体generic。
S103、若确定所述对焦模式为目标跟踪模式,则对所述目标对象进行目标跟踪,以持续对焦所述目标对象,进行拍摄。
若确定拍摄设备的对焦模式为目标跟踪模式,也即说明拍摄设备当前对焦目标对象,此时,继续对焦目标对象,对目标对象进行目标跟踪,以持续对焦目标对象。例如,基于孪生网络结构的跟踪算法(Fully-Convolutional Siamese Networks for ObjectTracking),对目标对象进行目标跟踪。又如,基于相关滤波器的DSST算法(Accurate ScaleEstimation for Robust Visual Tracking),对目标对象进行目标跟踪。再如,基于光流跟踪算法(Optical Flow),对目标对象进行目标跟踪。需要说明的是,对目标对象进行目标跟踪所采用的跟踪算法不限于上述列举的跟踪算法,还可以采用其他的跟踪算法对目标对象进行目标跟踪。根据不同的应用平台和计算资源,可采用相应不同的跟踪算法对目标对象进行目标跟踪。
在一些实施例中,对目标对象进行目标跟踪可以包括:将所述当前拍摄画面进行图像分割处理,分割出所述目标对象;对分割出的所述目标对象进行目标跟踪。
进一步地,将目标分割和目标跟踪融合,针对于当前拍摄画面中对焦的目标对象,将目标对象从当前拍摄画面中分割出来,进而对分割出来的目标对象进行目标跟踪。例如,采用结合图像分割实现跟踪的算法SiamMask(Fast Online Object Tracking andSegmentation:A Unifying Approach),分割出目标对象,从而能够更好地区分目标对象和背景,减小在目标跟踪中对焦到背景的概率。
下面以目标对象为main person,对main person进行跟踪对焦拍摄为例进行说明,如图10所示,跟踪对焦的逻辑如下:
[1]当在主角main person人脸中检测到有人眼时,对焦到main person的人眼;人眼被手等遮挡时对焦到main person的人脸;人脸消失时对焦到main person的头肩;
[2]当main person的人脸在短暂消失期间,可以通过行人重识别重新对焦到mainperson;
[3]当main person的人脸消失且对应的头肩消失,可以切换到对焦其他人others等显著对象;
[4]当没有其他人others等显著对象时,切换到一般物体generic对焦跟踪;
[5]目标跟踪丢失之后,通过显著性区域检测确定一个显著性区域saliency,在一般物体generic里面包含了显著性区域saliency,对显著性区域saliency对焦。
上述实施例中是以人物作为目标对象进行对焦跟踪拍摄的举例说明,对于宠物、车辆等其他类型的目标对象,同样地可以采用本发明实施例中的拍摄方法,对宠物、车辆等目标对象进行对焦跟踪拍摄。
例如,以目标对象为宠物为例,在采用拍摄设备拍摄宠物的过程中,根据宠物的当前对焦情况,也即拍摄设备当前是否对焦宠物,确定拍摄设备的对焦模式。示例性的,在拍摄设备当前对焦宠物时,确定拍摄设备的对焦模式为目标跟踪模式;在拍摄设备当前未对焦宠物时,确定拍摄设备的对焦模式为重识别模式。
当确定拍摄设备的对焦模式为重识别模式时,则在当前拍摄画面中重识别宠物。例如,预先存储宠物对应的至少一张参考图像,当确定拍摄设备的对焦模式为重识别模式时,对参考图像进行图像特征提取操作,并且对当前拍摄画面进行图像特征提取操作,获取参考图像对应的宠物的参考特征信息,以及获取当前拍摄画面中对象对应的当前特征信息,将获取的参考特征信息与当前特征信息进行比对,若当前特征信息与参考特征信息的相似度达到预设阈值,则确定重识别到宠物。反之,若当前特征信息与参考特征信息的相似度低于预设阈值,则确定未重识别到宠物。并在重识别到宠物时,对重识别到的宠物进行对焦。
当确定拍摄设备的对焦模式为目标跟踪模式时,也即说明拍摄设备正好对焦宠物,则对宠物进行目标跟踪,持续对焦宠物,对宠物进行对焦跟踪拍摄。
需要说明的是,上述列举的人物、宠物等对焦跟踪拍摄均只是对本发明拍摄方法的举例说明,本发明拍摄方法还可以应用于其他的目标对象,在此不作具体限制。
上述实施例中在进行对焦拍摄的过程中,通过基于目标对象的当前对焦情况确定拍摄设备的对焦模式(包括重识别模式和目标跟踪模式),若确定对焦模式为重识别模式,则在当前拍摄画面中重识别目标对象,并在重识别到目标对象时,对目标对象进行对焦;若确定对焦模式为目标跟踪模式,则对目标对象进行目标跟踪,以持续对焦目标对象,进行拍摄,从而省去了用户的手动对焦操作,在确保拍摄效果的同时,提高了拍摄的智能性和便捷性。
请参阅图11,图11是本申请实施例提供的一种拍摄装置的示意性框图。如图11所示,该拍摄装置300包括处理器301和存储器302,处理器301和存储器302通过总线连接,该总线比如为I2C(Inter-integrated Circuit)总线。
具体地,处理器301可以是微控制单元(Micro-controller Unit,MCU)、中央处理单元(Central Processing Unit,CPU)或数字信号处理器(Digital Signal Processor,DSP)等。
具体地,存储器302可以是Flash芯片、只读存储器(ROM,Read-Only Memory)磁盘、光盘、U盘或移动硬盘等。
其中,所述处理器用于运行存储在存储器中的计算机程序,并在执行所述计算机程序时实现如下步骤:
根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,所述对焦模式包括重识别模式、目标跟踪模式;
若确定所述对焦模式为重识别模式,则在当前拍摄画面中重识别所述目标对象,并在重识别到所述目标对象时,对所述目标对象进行对焦;
若确定所述对焦模式为目标跟踪模式,则对所述目标对象进行目标跟踪,以持续对焦所述目标对象,进行拍摄。
在一些实施例中,所述处理器在实现所述根据目标对象的当前对焦情况,确定拍摄设备的对焦模式时,用于实现:
若所述拍摄设备当前未对焦所述目标对象,则确定所述对焦模式为重识别模式。
在一些实施例中,所述处理器在实现所述根据目标对象的当前对焦情况,确定拍摄设备的对焦模式时,用于实现:
若所述拍摄设备当前对焦所述目标对象,则确定所述对焦模式为目标跟踪模式。
在一些实施例中,所述目标对象包括人物、动物、车辆中至少一种。
在一些实施例中,所述目标对象包括目标人物,所述处理器在实现所述在当前拍摄画面中重识别所述目标对象时,用于实现:
基于所述目标人物的参考图像,采用行人重识别技术在所述当前拍摄画面中重识别所述目标人物。
在一些实施例中,所述处理器在实现所述基于所述目标人物的参考图像,采用行人重识别技术在所述当前拍摄画面中重识别所述目标人物时,用于实现:
获取所述参考图像的第一人脸特征,以及所述当前拍摄画面中的第二人脸特征;
将所述第一人脸特征与所述第二人脸特征进行比对,判断所述第一人脸特征与所述第二人脸特征是否匹配;
若所述第一人脸特征与所述第二人脸特征匹配,则重识别到所述目标对象。
在一些实施例中,所述处理器在实现所述将所述第一人脸特征与所述第二人脸特征进行比对,判断所述第一人脸特征与所述第二人脸特征是否匹配之后,还用于实现:
若所述第一人脸特征与所述第二人脸特征不匹配,则未重识别到所述目标对象。
在一些实施例中,所述处理器在实现所述对所述目标对象进行对焦时,用于实现:
按照所述目标对象的多个部位的对焦优先级顺序,对所述目标对象进行对焦。
在一些实施例中,所述处理器在实现所述按照所述目标对象的多个部位的对焦优先级顺序,对所述目标对象进行对焦时,用于实现:
检测所述当前拍摄画面中是否显现所述目标对象的第一对焦优先级对应的第一部位;
若显现所述第一部位,则对所述第一部位进行对焦。
在一些实施例中,所述处理器在实现所述检测所述当前拍摄画面中是否显现所述目标对象的第一对焦优先级对应的第一部位之后,还用于实现:
若未显现所述第一部位,则检测所述当前拍摄画面中是否显现所述目标对象的下一对焦优先级对应的第二部位;
若显现所述第二部位,则对所述第二部位进行对焦。
在一些实施例中,所述处理器在实现所述对所述目标对象进行对焦时,用于实现:
对所述当前拍摄画面进行前景和背景分割;
基于分割的前景图像,对所述前景图像中的所述目标对象进行对焦。
在一些实施例中,所述处理器还用于实现:
当未重识别到所述目标对象时,确定所述当前拍摄画面中的临时对焦对象;
对所述临时对焦对象进行对焦,并返回执行所述在当前拍摄画面中重识别所述目标对象的步骤。
在一些实施例中,所述处理器在实现所述确定所述当前拍摄画面中的临时对焦对象时,用于实现:
当所述当前拍摄画面中存在单个对象时,将所述单个对象确定为所述临时对焦对象;
当所述当前拍摄画面中存在多个对象时,确定所述当前拍摄画面的显著性区域;
将所述显著性区域内对应的对象,确定为所述临时对焦对象。
在一些实施例中,所述处理器在实现所述确定所述当前拍摄画面中的临时对焦对象时,用于实现:
根据预设的对象优先级,将所述当前拍摄画面中对象优先级最高的对象,确定为所述临时对焦对象;或者
显示对焦对象选择界面,以供用户基于所述对焦对象选择界面选择当前待对焦的对象;
将用户选择的所述对象确定为所述临时对焦对象。
在一些实施例中,所述处理器还用于实现:
显示对象优先级设置界面,以供用户基于所述对象优先级设置界面设置多种对象的优先级信息;
根据用户设置的所述优先级信息,生成所述对象优先级。
在一些实施例中,所述处理器在实现所述将所述当前拍摄画面中对象优先级最高的对象,确定为所述临时对焦对象时,用于实现:
若所述当前拍摄画面中对象优先级最高的对象包括多个,则根据所述多个对象对应的区域信息,确定所述临时对焦对象。
在一些实施例中,所述区域信息包括区域面积、区域位置中至少一种,所述处理器在实现所述根据所述多个对象对应的区域信息,确定所述临时对焦对象时,用于实现:
将所述多个对象中所占区域面积最大的对象,确定为所述临时对焦对象;或
将所述多个对象中对应区域位置最靠近所述当前拍摄画面中心位置的对象,确定为所述临时对焦对象;或
当对应区域位置最靠近所述当前拍摄画面中心位置的对象包括至少两个时,将至少两个所述对象中所占区域面积最大的对象,确定为所述临时对焦对象。
在一些实施例中,所述处理器在实现所述对所述目标对象进行目标跟踪时,用于实现:
将所述当前拍摄画面进行图像分割处理,分割出所述目标对象;
对分割出的所述目标对象进行目标跟踪。
本申请的实施例中还提供一种拍摄设备,该拍摄设备包括上述实施例中的拍摄装置300。拍摄设备通过基于目标对象的当前对焦情况确定拍摄设备的对焦模式,包括重识别模式和目标跟踪模式,若确定对焦模式为重识别模式,则在当前拍摄画面中重识别目标对象,并在重识别到目标对象时,对目标对象进行对焦;若确定对焦模式为目标跟踪模式,则对目标对象进行目标跟踪,以持续对焦目标对象,进行拍摄,具体操作可参考本申请实施例提供的拍摄方法的步骤,在此不再赘述。
本申请的实施例中还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序中包括程序指令,处理器执行所述程序指令,实现本申请实施例提供的拍摄方法的步骤。
其中,所述计算机可读存储介质可以是前述实施例所述的拍摄装置或拍摄设备的内部存储单元,例如所述拍摄装置或拍摄设备的硬盘或内存。所述计算机可读存储介质也可以是所述拍摄装置或拍摄设备的外部存储设备,例如所述拍摄装置或拍摄设备上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。
根据本发明实施方式,提出了拍摄方法、拍摄装置、拍摄设备及计算机可读存储介质。通过基于目标对象的当前对焦情况确定拍摄设备的对焦模式(包括重识别模式和目标跟踪模式),若确定对焦模式为重识别模式,则在当前拍摄画面中重识别目标对象,并在重识别到目标对象时,对目标对象进行对焦;若确定对焦模式为目标跟踪模式,则对目标对象进行目标跟踪,以持续对焦目标对象,进行拍摄,从而省去了用户的手动对焦操作,在确保拍摄效果的同时,提高了拍摄的智能性和便捷性。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (38)
1.一种拍摄方法,其特征在于,包括:
根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,所述对焦模式包括重识别模式、目标跟踪模式;
若确定所述对焦模式为重识别模式,则在当前拍摄画面中重识别所述目标对象,并在重识别到所述目标对象时,对所述目标对象进行对焦;当未重识别到所述目标对象时,确定所述当前拍摄画面中的临时对焦对象;对所述临时对焦对象进行对焦;
若确定所述对焦模式为目标跟踪模式,则对所述目标对象进行目标跟踪,以持续对焦所述目标对象,进行拍摄。
2.根据权利要求1所述的方法,其特征在于,所述根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,包括:
若所述拍摄设备当前未对焦所述目标对象,则确定所述对焦模式为重识别模式。
3.根据权利要求1所述的方法,其特征在于,所述根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,包括:
若所述拍摄设备当前对焦所述目标对象,则确定所述对焦模式为目标跟踪模式。
4.根据权利要求1所述的方法,其特征在于,所述目标对象包括人物、动物、车辆中至少一种。
5.根据权利要求1所述的方法,其特征在于,所述目标对象包括目标人物,所述在当前拍摄画面中重识别所述目标对象,包括:
基于所述目标人物的参考图像,采用行人重识别技术在所述当前拍摄画面中重识别所述目标人物。
6.根据权利要求5所述的方法,其特征在于,所述基于所述目标人物的参考图像,采用行人重识别技术在所述当前拍摄画面中重识别所述目标人物,包括:
获取所述参考图像的第一人脸特征,以及所述当前拍摄画面中的第二人脸特征;
将所述第一人脸特征与所述第二人脸特征进行比对,判断所述第一人脸特征与所述第二人脸特征是否匹配;
若所述第一人脸特征与所述第二人脸特征匹配,则重识别到所述目标对象。
7.根据权利要求6所述的方法,其特征在于,所述将所述第一人脸特征与所述第二人脸特征进行比对,判断所述第一人脸特征与所述第二人脸特征是否匹配之后,还包括:
若所述第一人脸特征与所述第二人脸特征不匹配,则未重识别到所述目标对象。
8.根据权利要求1所述的方法,其特征在于,所述对所述目标对象进行对焦,包括:
按照所述目标对象的多个部位的对焦优先级顺序,对所述目标对象进行对焦。
9.根据权利要求8所述的方法,其特征在于,所述按照所述目标对象的多个部位的对焦优先级顺序,对所述目标对象进行对焦,包括:
检测所述当前拍摄画面中是否显现所述目标对象的第一对焦优先级对应的第一部位;
若显现所述第一部位,则对所述第一部位进行对焦。
10.根据权利要求9所述的方法,其特征在于,所述检测所述当前拍摄画面中是否显现所述目标对象的第一对焦优先级对应的第一部位之后,还包括:
若未显现所述第一部位,则检测所述当前拍摄画面中是否显现所述目标对象的下一对焦优先级对应的第二部位;
若显现所述第二部位,则对所述第二部位进行对焦。
11.根据权利要求1所述的方法,其特征在于,所述对所述目标对象进行对焦,包括:
对所述当前拍摄画面进行前景和背景分割;
基于分割的前景图像,对所述前景图像中的所述目标对象进行对焦。
12.根据权利要求1至11任一项所述的方法,其特征在于,所述对所述临时对焦对象进行对焦之后,包括:
返回执行所述在当前拍摄画面中重识别所述目标对象的步骤。
13.根据权利要求12所述的方法,其特征在于,所述确定所述当前拍摄画面中的临时对焦对象,包括:
当所述当前拍摄画面中存在单个对象时,将所述单个对象确定为所述临时对焦对象;
当所述当前拍摄画面中存在多个对象时,确定所述当前拍摄画面的显著性区域;
将所述显著性区域内对应的对象,确定为所述临时对焦对象。
14.根据权利要求12所述的方法,其特征在于,所述确定所述当前拍摄画面中的临时对焦对象,包括:
根据预设的对象优先级,将所述当前拍摄画面中对象优先级最高的对象,确定为所述临时对焦对象;或者
显示对焦对象选择界面,以供用户基于所述对焦对象选择界面选择当前待对焦的对象;
将用户选择的所述对象确定为所述临时对焦对象。
15.根据权利要求14所述的方法,其特征在于,所述方法还包括:
显示对象优先级设置界面,以供用户基于所述对象优先级设置界面设置多种对象的优先级信息;
根据用户设置的所述优先级信息,生成所述对象优先级。
16.根据权利要求14所述的方法,其特征在于,所述将所述当前拍摄画面中对象优先级最高的对象,确定为所述临时对焦对象,包括:
若所述当前拍摄画面中对象优先级最高的对象包括多个,则根据所述多个对象对应的区域信息,确定所述临时对焦对象。
17.根据权利要求16所述的方法,其特征在于,所述区域信息包括区域面积、区域位置中至少一种,所述根据所述多个对象对应的区域信息,确定所述临时对焦对象,包括:
将所述多个对象中所占区域面积最大的对象,确定为所述临时对焦对象;或
将所述多个对象中对应区域位置最靠近所述当前拍摄画面中心位置的对象,确定为所述临时对焦对象;或
当对应区域位置最靠近所述当前拍摄画面中心位置的对象包括至少两个时,将至少两个所述对象中所占区域面积最大的对象,确定为所述临时对焦对象。
18.根据权利要求1所述的方法,其特征在于,所述对所述目标对象进行目标跟踪,包括:
将所述当前拍摄画面进行图像分割处理,分割出所述目标对象;
对分割出的所述目标对象进行目标跟踪。
19.一种拍摄装置,其特征在于,所述拍摄装置包括存储器和处理器;
所述存储器用于存储计算机程序;
所述处理器,用于执行所述计算机程序并在执行所述计算机程序时,实现如下步骤:
根据目标对象的当前对焦情况,确定拍摄设备的对焦模式,所述对焦模式包括重识别模式、目标跟踪模式;
若确定所述对焦模式为重识别模式,则在当前拍摄画面中重识别所述目标对象,并在重识别到所述目标对象时,对所述目标对象进行对焦;当未重识别到所述目标对象时,确定所述当前拍摄画面中的临时对焦对象;对所述临时对焦对象进行对焦;
若确定所述对焦模式为目标跟踪模式,则对所述目标对象进行目标跟踪,以持续对焦所述目标对象,进行拍摄。
20.根据权利要求19所述的装置,其特征在于,所述处理器在实现所述根据目标对象的当前对焦情况,确定拍摄设备的对焦模式时,用于实现:
若所述拍摄设备当前未对焦所述目标对象,则确定所述对焦模式为重识别模式。
21.根据权利要求19所述的装置,其特征在于,所述处理器在实现所述根据目标对象的当前对焦情况,确定拍摄设备的对焦模式时,用于实现:
若所述拍摄设备当前对焦所述目标对象,则确定所述对焦模式为目标跟踪模式。
22.根据权利要求19所述的装置,其特征在于,所述目标对象包括人物、动物、车辆中至少一种。
23.根据权利要求19所述的装置,其特征在于,所述目标对象包括目标人物,所述处理器在实现所述在当前拍摄画面中重识别所述目标对象时,用于实现:
基于所述目标人物的参考图像,采用行人重识别技术在所述当前拍摄画面中重识别所述目标人物。
24.根据权利要求23所述的装置,其特征在于,所述处理器在实现所述基于所述目标人物的参考图像,采用行人重识别技术在所述当前拍摄画面中重识别所述目标人物时,用于实现:
获取所述参考图像的第一人脸特征,以及所述当前拍摄画面中的第二人脸特征;
将所述第一人脸特征与所述第二人脸特征进行比对,判断所述第一人脸特征与所述第二人脸特征是否匹配;
若所述第一人脸特征与所述第二人脸特征匹配,则重识别到所述目标对象。
25.根据权利要求24所述的装置,其特征在于,所述处理器在实现所述将所述第一人脸特征与所述第二人脸特征进行比对,判断所述第一人脸特征与所述第二人脸特征是否匹配之后,还用于实现:
若所述第一人脸特征与所述第二人脸特征不匹配,则未重识别到所述目标对象。
26.根据权利要求19所述的装置,其特征在于,所述处理器在实现所述对所述目标对象进行对焦时,用于实现:
按照所述目标对象的多个部位的对焦优先级顺序,对所述目标对象进行对焦。
27.根据权利要求26所述的装置,其特征在于,所述处理器在实现所述按照所述目标对象的多个部位的对焦优先级顺序,对所述目标对象进行对焦时,用于实现:
检测所述当前拍摄画面中是否显现所述目标对象的第一对焦优先级对应的第一部位;
若显现所述第一部位,则对所述第一部位进行对焦。
28.根据权利要求27所述的装置,其特征在于,所述处理器在实现所述检测所述当前拍摄画面中是否显现所述目标对象的第一对焦优先级对应的第一部位之后,还用于实现:
若未显现所述第一部位,则检测所述当前拍摄画面中是否显现所述目标对象的下一对焦优先级对应的第二部位;
若显现所述第二部位,则对所述第二部位进行对焦。
29.根据权利要求19所述的装置,其特征在于,所述处理器在实现所述对所述目标对象进行对焦时,用于实现:
对所述当前拍摄画面进行前景和背景分割;
基于分割的前景图像,对所述前景图像中的所述目标对象进行对焦。
30.根据权利要求19至29任一项所述的装置,其特征在于,所述处理器在实现所述对所述临时对焦对象进行对焦之后,用于实现:
返回执行所述在当前拍摄画面中重识别所述目标对象的步骤。
31.根据权利要求30所述的装置,其特征在于,所述处理器在实现所述确定所述当前拍摄画面中的临时对焦对象时,用于实现:
当所述当前拍摄画面中存在单个对象时,将所述单个对象确定为所述临时对焦对象;
当所述当前拍摄画面中存在多个对象时,确定所述当前拍摄画面的显著性区域;
将所述显著性区域内对应的对象,确定为所述临时对焦对象。
32.根据权利要求30所述的装置,其特征在于,所述处理器在实现所述确定所述当前拍摄画面中的临时对焦对象时,用于实现:
根据预设的对象优先级,将所述当前拍摄画面中对象优先级最高的对象,确定为所述临时对焦对象;或者
显示对焦对象选择界面,以供用户基于所述对焦对象选择界面选择当前待对焦的对象;
将用户选择的所述对象确定为所述临时对焦对象。
33.根据权利要求32所述的装置,其特征在于,所述处理器还用于实现:
显示对象优先级设置界面,以供用户基于所述对象优先级设置界面设置多种对象的优先级信息;
根据用户设置的所述优先级信息,生成所述对象优先级。
34.根据权利要求32所述的装置,其特征在于,所述处理器在实现所述将所述当前拍摄画面中对象优先级最高的对象,确定为所述临时对焦对象时,用于实现:
若所述当前拍摄画面中对象优先级最高的对象包括多个,则根据所述多个对象对应的区域信息,确定所述临时对焦对象。
35.根据权利要求34所述的装置,其特征在于,所述区域信息包括区域面积、区域位置中至少一种,所述处理器在实现所述根据所述多个对象对应的区域信息,确定所述临时对焦对象时,用于实现:
将所述多个对象中所占区域面积最大的对象,确定为所述临时对焦对象;或
将所述多个对象中对应区域位置最靠近所述当前拍摄画面中心位置的对象,确定为所述临时对焦对象;或
当对应区域位置最靠近所述当前拍摄画面中心位置的对象包括至少两个时,将至少两个所述对象中所占区域面积最大的对象,确定为所述临时对焦对象。
36.根据权利要求19所述的装置,其特征在于,所述处理器在实现所述对所述目标对象进行目标跟踪时,用于实现:
将所述当前拍摄画面进行图像分割处理,分割出所述目标对象;
对分割出的所述目标对象进行目标跟踪。
37.一种拍摄设备,其特征在于,所述拍摄设备包括如权利要求19至36中任一项所述的拍摄装置。
38.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时使所述处理器实现如权利要求1至18中任一项所述的拍摄方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311196934.2A CN117041729A (zh) | 2020-08-24 | 2020-08-24 | 拍摄方法、装置及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2020/110904 WO2022040886A1 (zh) | 2020-08-24 | 2020-08-24 | 拍摄方法、装置、设备及计算机可读存储介质 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311196934.2A Division CN117041729A (zh) | 2020-08-24 | 2020-08-24 | 拍摄方法、装置及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113302907A CN113302907A (zh) | 2021-08-24 |
CN113302907B true CN113302907B (zh) | 2023-10-10 |
Family
ID=77318841
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080007322.2A Active CN113302907B (zh) | 2020-08-24 | 2020-08-24 | 拍摄方法、装置、设备及计算机可读存储介质 |
CN202311196934.2A Pending CN117041729A (zh) | 2020-08-24 | 2020-08-24 | 拍摄方法、装置及计算机可读存储介质 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311196934.2A Pending CN117041729A (zh) | 2020-08-24 | 2020-08-24 | 拍摄方法、装置及计算机可读存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (2) | CN113302907B (zh) |
WO (1) | WO2022040886A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114554086B (zh) * | 2022-02-10 | 2024-06-25 | 支付宝(杭州)信息技术有限公司 | 一种辅助拍摄方法、装置及电子设备 |
CN114900607A (zh) * | 2022-04-27 | 2022-08-12 | 上海呈合信息科技有限公司 | 一种自动追随跟拍拍摄处理系统 |
CN117652152A (zh) * | 2022-06-02 | 2024-03-05 | 北京小米移动软件有限公司 | 一种对焦方法、装置及存储介质 |
CN115278084B (zh) * | 2022-07-29 | 2024-07-26 | 维沃移动通信有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN118509697A (zh) * | 2023-02-16 | 2024-08-16 | 荣耀终端有限公司 | 一种拍摄方法和电子设备 |
CN118018846A (zh) * | 2024-04-09 | 2024-05-10 | 荣耀终端有限公司 | 追焦方法、电子设备以及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106385542A (zh) * | 2016-10-11 | 2017-02-08 | 广东欧珀移动通信有限公司 | 一种拍照对焦的方法、装置及移动终端 |
CN107465880A (zh) * | 2017-09-29 | 2017-12-12 | 广东欧珀移动通信有限公司 | 对焦方法、装置、终端和计算机可读存储介质 |
CN108289169A (zh) * | 2018-01-09 | 2018-07-17 | 北京小米移动软件有限公司 | 拍摄方法、装置、电子设备及存储介质 |
CN108712609A (zh) * | 2018-05-17 | 2018-10-26 | Oppo广东移动通信有限公司 | 对焦处理方法、装置、设备及存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5016909B2 (ja) * | 2006-12-15 | 2012-09-05 | キヤノン株式会社 | 撮像装置 |
TWI519840B (zh) * | 2012-11-22 | 2016-02-01 | 原相科技股份有限公司 | 能夠即時對特定可移動物件進行自動對焦的方法、具有自動對焦功能的攝影裝置、以及儲存用來執行即時對特定可移動物件進行自動對焦之電腦程式的電腦可讀式儲存媒體 |
CN105872363A (zh) * | 2016-03-28 | 2016-08-17 | 广东欧珀移动通信有限公司 | 人脸对焦清晰度的调整方法及调整装置 |
CN107509030B (zh) * | 2017-08-14 | 2019-12-17 | 维沃移动通信有限公司 | 一种对焦方法及移动终端 |
CN108833786B (zh) * | 2018-06-29 | 2022-04-22 | 联想(北京)有限公司 | 一种模式控制方法和电子设备 |
CN110708467B (zh) * | 2019-11-08 | 2021-11-16 | 苏州精濑光电有限公司 | 对焦方法、对焦装置和拍照机 |
-
2020
- 2020-08-24 WO PCT/CN2020/110904 patent/WO2022040886A1/zh active Application Filing
- 2020-08-24 CN CN202080007322.2A patent/CN113302907B/zh active Active
- 2020-08-24 CN CN202311196934.2A patent/CN117041729A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106385542A (zh) * | 2016-10-11 | 2017-02-08 | 广东欧珀移动通信有限公司 | 一种拍照对焦的方法、装置及移动终端 |
CN107465880A (zh) * | 2017-09-29 | 2017-12-12 | 广东欧珀移动通信有限公司 | 对焦方法、装置、终端和计算机可读存储介质 |
CN108289169A (zh) * | 2018-01-09 | 2018-07-17 | 北京小米移动软件有限公司 | 拍摄方法、装置、电子设备及存储介质 |
CN108712609A (zh) * | 2018-05-17 | 2018-10-26 | Oppo广东移动通信有限公司 | 对焦处理方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2022040886A1 (zh) | 2022-03-03 |
CN113302907A (zh) | 2021-08-24 |
CN117041729A (zh) | 2023-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113302907B (zh) | 拍摄方法、装置、设备及计算机可读存储介质 | |
EP3236391B1 (en) | Object detection and recognition under out of focus conditions | |
US8903123B2 (en) | Image processing device and image processing method for processing an image | |
KR101971866B1 (ko) | 동화상에 있어서 물체를 검출하는 방법 및 장치, 및 그 프로그램을 기억한 기억 매체 | |
KR101423916B1 (ko) | 복수의 얼굴 인식 방법 및 장치 | |
JP4616702B2 (ja) | 画像処理 | |
EP3648448A1 (en) | Target feature extraction method and device, and application system | |
JP5032846B2 (ja) | 監視装置および監視記録装置、それらの方法 | |
JP5662670B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
KR101781358B1 (ko) | 디지털 영상 내의 얼굴 인식을 통한 개인 식별 시스템 및 방법 | |
CN110264493A (zh) | 一种针对运动状态下的多目标对象追踪方法和装置 | |
JP2008501172A (ja) | 画像比較方法 | |
CN107395957B (zh) | 拍照方法、装置、存储介质及电子设备 | |
JP6157165B2 (ja) | 視線検出装置及び撮像装置 | |
AU2015234329A1 (en) | Method, system and apparatus for processing an image | |
JP5641813B2 (ja) | 撮像装置及び撮像方法、画像処理装置及び画像処理方法 | |
US20160180545A1 (en) | Method and electronic device for object tracking in a light-field capture | |
EP2998928B1 (en) | Apparatus and method for extracting high watermark image from continuously photographed images | |
US9286707B1 (en) | Removing transient objects to synthesize an unobstructed image | |
CN114463781A (zh) | 确定触发手势的方法、装置及设备 | |
JP2002342762A (ja) | 物体追跡方法 | |
KR20160000533A (ko) | 증강 현실에서 물체의 정보 제공을 위한 지역 특징점을 이용한 오브젝트 다중 검출, 추적 방법 및 그 시스템 | |
CN112966575B (zh) | 一种应用于智慧社区的目标人脸识别方法及装置 | |
JP2017512398A (ja) | 映像を提示する方法及び装置 | |
WO2022110059A1 (zh) | 视频处理、景别识别方法、终端设备和拍摄系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |