CN115835005A - 引导用户拍摄的方法及装置、电子设备 - Google Patents

引导用户拍摄的方法及装置、电子设备 Download PDF

Info

Publication number
CN115835005A
CN115835005A CN202211347638.3A CN202211347638A CN115835005A CN 115835005 A CN115835005 A CN 115835005A CN 202211347638 A CN202211347638 A CN 202211347638A CN 115835005 A CN115835005 A CN 115835005A
Authority
CN
China
Prior art keywords
preview image
target
image
guiding
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211347638.3A
Other languages
English (en)
Inventor
付晓
马文伟
王亚领
刘设伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Taikang Insurance Group Co Ltd
Taikang Online Property Insurance Co Ltd
Original Assignee
Taikang Insurance Group Co Ltd
Taikang Online Property Insurance Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Taikang Insurance Group Co Ltd, Taikang Online Property Insurance Co Ltd filed Critical Taikang Insurance Group Co Ltd
Priority to CN202211347638.3A priority Critical patent/CN115835005A/zh
Publication of CN115835005A publication Critical patent/CN115835005A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明实施例提供了一种引导用户拍摄的方法及装置、电子设备。该方法应用于终端设备,包括:接收用户的目标输入;响应于目标输入,在终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像;将至少一个时刻下的预览图像发送至服务器;在接收到服务器发送的包含第一移动方向的第一引导信息的情况下,输出第一引导信息。其中,第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反,目标预览图像为曝光过度区域的面积大于预设面积的任一预览图像。本发明每次输出的第一引导信息均具有针对性,使得用户可以具有针对性的移动终端设备,从而快速得到无明显曝光过度情况的图像。

Description

引导用户拍摄的方法及装置、电子设备
技术领域
本发明涉及数据处理技术领域,尤其涉及一种引导用户拍摄的方法及装置、电子设备。
背景技术
曝光过度,通常指由于光圈开得过大、底片的感光度太高或曝光时间过长所造成的影像失常。有时因为拍摄对象反射的光线太强同样会导致曝光过度。例如,通过手机进行拍摄时,若拍摄对象的某一位置反射的光线太强,会造成图像中对应该位置的图像区域的影像失常,该影像失常的区域也称为曝光过度区域。
在图像存在明显曝光过度情况时,由于曝光过度区域的影像失常,导致图像在很多业务中无法使用,需要用户重新提供图像。用户只能依靠拍摄经验不断尝试拍摄新的图像,来最终得到无明显曝光过度情况的图像。
然而,这种获得无明显曝光过度情况的图像的方式,不仅对用户的要求较高,同时效率也十分低下。
发明内容
本发明实施例提供一种引导用户拍摄的方法及装置、电子设备,以解决现有技术中获得无明显曝光过度情况的图像的方式效率低下的问题。
第一方面,本发明实施例提供了一种引导用户拍摄的方法,应用于终端设备,所述方法包括:
接收用户的目标输入;
响应于所述目标输入,在所述终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像;
将所述至少一个时刻下的预览图像发送至服务器;
在接收到所述服务器发送的包含第一移动方向的第一引导信息的情况下,输出所述第一引导信息;其中,所述第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反,所述目标预览图像为曝光过度区域的面积大于预设面积的任一所述预览图像。
可选地,在所述将所述至少一个时刻下的预览图像发送至服务器之后,所述方法还包括:
在接收到所述服务器发送的用于引导用户保持所述终端设备处于静止状态的第二引导信息的情况下,输出所述第二引导信息;
在目标时间段内所述终端设备持续处于静止状态的情况下,拍摄得到目标图像,其中,所述目标时间段为从输出所述第二引导信息开始的具有目标时长的时间段。
可选的,在所述接收用户的目标输入之前,所述方法还包括:
输出用于引导用户对准第一拍摄对象的第三引导信息;
在所述拍摄得到目标图像之后,所述方法还包括:
将所述目标图像发送至所述服务器,以使所述服务器将所述目标图像确定为所述第一拍摄对象在第一业务中的业务图片。
可选的,在所述输出用于引导用户对准第一拍摄对象的第三引导信息之前,所述方法还包括:
显示包括多个业务的业务信息的业务列表,其中,所述业务列表中对应每一所述业务设置有用于表征所述业务对应的拍摄对象是否已完成拍摄的标识,每个所述业务对应一个拍摄对象,所述第一拍摄对象为所述多个业务中的所述第一业务对应的拍摄对象;
在所述拍摄得到目标图像之后,所述方法还包括:
将所述业务列表中对应所述第一业务设置的标识设置为表征拍摄对象完成拍摄的第二标识。
可选的,所述响应于所述目标输入,在所述终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像,包括:
响应于所述目标输入,监测所述终端设备在三个不同方向上的加速度信息;
基于所述加速度信息,在预设时长内所述三个不同方向中每一所述方向上的加速度均小于加速度阈值的情况下,确定所述终端设备处于静止状态;
对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。
可选的,所述对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像,包括:
通过所述终端设备的摄像单元持续采集当前拍摄范围内的场景信息,得到视频数据;
获取所述视频数据中不同时刻下的视频帧,得到所述至少一个时刻下的预览图像。
第二方面,本发明实施例提供了一种引导用户拍摄的方法,应用于服务器,所述方法包括:
接收终端设备发送的至少一个时刻下的预览图像,其中,所述至少一个时刻下的预览图像为所述终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像;
确定每一所述预览图像的曝光信息;
在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,其中,所述图像集合为存在大于预设面积的曝光过度区域的所述预览图像组成的集合,所述目标预览图像为所述图像集合中的任一元素,所述第一移动方向和所述目标预览图像中所述曝光过度区域相对于中心点的方向相反;
将所述第一引导信息发送至所述终端设备,以使所述终端设备输出所述第一引导信息。
可选的,所述确定每一所述预览图像的曝光信息,包括:
针对每一所述预览图像,将所述预览图像输入预先训练好的神经网络模型中,得到所述神经网络模型输出的检测结果,其中,所述检测结果包括存在大于预设面积的曝光过度区域以及记录所述曝光过度区域的位置的第一结果或者不存在大于预设面积的曝光过度区域的第二结果;
针对每一所述预览图像,将所述神经网络模型输出的对应所述预览图像的检测结果确定为所述预览图像的曝光信息。
可选的,预先训练所述神经网络模型的步骤包括:
构建初始神经网络模型;
将所述初始神经网络模型的锚点框参数调整为目标参数;
获取包含有大于预设面积的曝光过度区域的样本数据,其中,所述样本数据中每一样本的标签为所述样本中曝光过度区域的最小外接矩形框的坐标;
采用所述样本数据对所述初始神经网络模型进行训练。
可选的,所述基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,包括:
基于曝光信息,确定所述目标预览图像的曝光区域类型;其中,所述曝光区域类型包括:表征曝光过度区域位于中心区域之内的第一类型以及表征曝光过度区域位于中心区域之外的第二类型,所述中心区域为所述目标预览图像中以中心点为中心的预设范围;
在所述目标预览图像的曝光区域类型为第一类型的情况下,确定包含与所述目标预览图像中所述曝光过度区域相对于中心点的方向相反的平移方向的第一引导信息;
或者在所述目标预览图像的曝光区域类型为第二类型的情况下,确定包含与所述目标预览图像中所述曝光过度区域相对于中心点的方向相反的旋转方向的第一引导信息。
可选的,在所述确定每一所述预览图像的曝光信息之后,所述方法还包括:
在所述图像集合中元素的数量小于或等于所述目标阈值的情况下,确定用于引导用户保持所述终端设备处于静止状态的第二引导信息;
将所述第二引导信息发送至所述终端设备,以使所述终端设备输出所述第二引导信息。
第三方面,本发明实施例还提供一种引导用户拍摄的装置,应用于终端设备,所述装置包括:
输入模块,用于接收用户的目标输入;
响应模块,用于响应于所述目标输入,在所述终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像;
第一发送模块,用于将所述至少一个时刻下的预览图像发送至服务器;
第一引导模块,用于在接收到所述服务器发送的包含第一移动方向的第一引导信息的情况下,输出所述第一引导信息;其中,所述第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反,所述目标预览图像为曝光过度区域的面积大于预设面积的任一所述预览图像。
第四方面,本发明实施例还提供一种引导用户拍摄的装置,应用于服务器,所述装置包括:
第一接收模块,用于接收终端设备发送的至少一个时刻下的预览图像,其中,所述至少一个时刻下的预览图像为所述终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像;
曝光模块,用于确定每一所述预览图像的曝光信息;
第二引导模块,用于在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,其中,所述图像集合为存在大于预设面积的曝光过度区域的所述预览图像组成的集合,所述目标预览图像为所述图像集合中的任一元素,所述第一移动方向和所述目标预览图像中所述曝光过度区域相对于中心点的方向相反;
第二发送模块,用于将所述第一引导信息发送至所述终端设备,以使所述终端设备输出所述第一引导信息。
第五方面,本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面或第二方面所述的方法的步骤。
第六方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面或第二方面所述的方法的步骤。
在本发明实施例提供的引导用户拍摄的方法,应用于终端设备,基于用户的目标输入在终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。由于并不确定当前情况下可以拍摄到无明显曝光过度情况的图像,这里使用了预览图像,该预览图像为此时进行拍摄将要得到的图像。将得到的预览图像发送至服务器,由服务器确定预览图像的曝光信息,进而在预览图像为存在明显曝光过度情况时,确定改善预览图像的曝光过度情况的第一移动方向。终端设备在接收到服务器发送的包含第一移动方向的第一引导信息的情况下,显示该第一引导信息,可以引导用户按照第一移动方向移动终端设备,从而可以拍摄出曝光过度情况得到改善的图像。最终通过不断的移动终端设备拍摄出无明显曝光过度情况的图像。由于每次移动均具有针对性,所以相对于盲目移动终端设备,本发明无疑可以减少移动终端设备的次数,从而提升获得无明显曝光过度情况的图像的效率。同时,只需用户按照第一引导信息移动终端设备即可,降低了对用户的要求。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为引导用户完成各拍摄项的步骤流程图之一;
图2为引导用户完成各拍摄项的步骤流程图之二;
图3为本发明实施例中车险定损场景下9个拍摄项的展示示意图;
图4为本发明实施例提供的引导用户拍摄的方法的步骤流程图之一;
图5为本发明实施例提供的引导用户拍摄的方法的步骤流程图之二;
图6为本发明实施例提供的引导用户拍摄的装置的结构框图之一;
图7为本发明实施例提供的引导用户拍摄的装置的结构框图之二;
图8为本发明实施例提供的电子设备的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。
在本发明的各种实施例中,应理解,下述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
如图1所示,为本发明实施例提供的一种引导用户拍摄的方法的实际应用流程图。其中,在引导用户拍摄的过程中,存在N个不同的拍摄项待用户拍摄完成。N为一固定的数值,这里对其具体数值并不做限定。具体的,包括:
步骤101:显示首页,其中包括N个拍摄项。每一拍摄项对应一轮拍摄流程。
步骤102:判断拍摄流程是否全部完成。若是则执行步骤106,若否则执行步骤103。
步骤103:进行一未完成的拍摄流程,显示与该拍摄流程对应的拍摄项相关的提示页。即显示一提示页,该提示页包含与该拍摄流程对应的拍摄项相关的数据内容。当用户在该提示页进行相关操作时,将执行步骤104或显示首页。例如,提示页包含“确认拍摄”和“取消”两个控件。用户对“确认拍摄”控件进行操作,将执行步骤104;用户对“取消”控件进行操作,将返回首页。
步骤104:显示扫描界面,对视场范围内的场景进行扫描。由于办理各业务需要拍摄照片,因此,该扫描界面可以为摄像头开启后的预览界面。较佳地,扫描界面中可以设置一扫描框,以对拍摄目标进行精准扫描或拍摄。可以理解的是,扫描过程中拍摄的图片将被传输至服务器,由服务器判断图片是否符合要求。
步骤105:在接收到服务器返回的表征图片符合要求的确认信息的情况下,将显示数据采集成功提示页,以提醒用户当前拍摄项的数据已采集成功。然后重新执行步骤102。
步骤106:显示流程结束页,以提醒用户流程已结束。其中,该流程结束页可以包括在各拍摄项拍摄得到的数据,并且设置有编辑控件,可以对在每一拍摄项中拍摄得到的数据进行删除以及重新添加,但不限于此。
应当说明的是,在每次执行完步骤105之后,可以自动执行步骤102,也可以显示成功采集的数据供用户确认,在用户确认之后再执行步骤102。可以根据当前步骤105所针对的拍摄项进行不同设计。
本发明实施例中,在多拍摄项的场景下,可以引导用户完成每一拍摄项的相关操作,降低了对用户的要求,提升了用户的使用体验。
可以理解的是,在图1所示应用场景中,针对每一拍摄项进行拍摄的过程中,都将利用本发明实施例提供的引导用户拍摄的方法。即在进行拍摄过程中,通过用户对终端设备进行相关操作,最终采集到符合业务要求的图片。如图2所示,在本发明的又一实施例中,可以在用户拍摄的图片不符合业务要求时,引导用户进行调整以尽快拍摄出符合业务要求的图片。其中,步骤201~步骤204与图1中步骤101~步骤104类似,步骤208~步骤209与图1中步骤105~步骤106类似,这里不再赘述。
步骤205:在终端设备对视场范围内的场景进行扫描的过程中,终端设备在检测到自身处于静止状态的情况下,将对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像;并将至少一个时刻下的预览图像发送至服务器,以使服务器确定预览图像的曝光过度情况是否符合业务需求。具体的服务器在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,发送包含第一移动方向的第一引导信息;其中,图像集合为存在大于预设面积的曝光过度区域的预览图像组成的集合,目标预览图像为图像集合中的任一元素,第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反。服务器在图像集合中元素的数量小于或等于目标阈值的情况下,发送表征无过度曝光区域的确认信息至终端设备。
步骤206:终端设备在接收到服务器返回的信息后,基于返回的信息的具体内容,确定当前拍摄的图像中是否存在过度曝光区域。即若返回的信息为第一引导信息,则确定当前拍摄的图像中存在过度曝光区域,则执行步骤207。若返回的信息为表征无过度曝光区域的确认信息,则确定当前拍摄的图像中不存在过度曝光区域,则执行步骤208。
步骤207:输出第一引导信息,提醒用户向第一移动方向移动终端设备。然后重新执行步骤204,并在执行步骤204的过程中,若检测到终端设备重新处于静止状态,则继续执行步骤205、步骤206,直至服务器返回第一引导信息。
本发明实施例中,在多拍摄项的场景下,可以在引导用户完成每一拍摄项的相关操作过程中,检测拍摄得到的图片是否存在过度曝光区域,并在拍摄得到的图片存在曝光过度区域的情况下,输出相应的引导信息,以引导用户拍摄出不存在过度曝光区域的图片,在提升用户的使用体验的同时,提升了得到符合业务要求的图片的效率。
如图3所示,为以车险定损场景下9个拍摄项的展示示意图。其9个拍摄项分别为事故现场、车辆四周、车牌号、车架号、车损部位、驾驶证、行驶证、身份证、银行卡。其中,终端设备的显示界面可以划分为多个不同区域显示不同的数据内容。具体的,第一区域31用于显示各拍摄项,并可以在第一区域31中再次划定一较小区域显示当前拍摄项,即第二区域32显示当前拍摄项。第三区域33用于显示拍摄画面,还可以在第三区域33中再次划定一较小区域显示当前拍摄项,即第四区域34显示当前拍摄项。继续以9个拍摄项为例,基于图1所示流程图进行拍摄过程中。用户可以在首页中点击“开始”控件,启动业务流程。其中,在检测到终端设备未开启声音的情况下,显示提示信息以提醒用户打开系统声音。在拍摄项为“车牌号”时,显示与“车牌号”相关的提示页,其中,包含有车牌号的文字,图像。也可以同时播报相关语音。提示页中设置有“开始拍摄”按钮。在用户点击“开始拍摄”按钮之后,进入扫描界面。在扫描界面以文字+语音的方式提示用户对准车牌号进行拍摄。拍摄得到的图片上传至服务器之后,若接收到服务器其返回的表征图片符合业务要求的确认信息,则显示数据采集成功提示页,然后自动切换至另一显示有成功采集的数据的页面,该页面显示有采集的车牌号,并设置有“取消”和“确认,下一步”两个控件。点击“取消”可重新拍摄车牌号,点击“确认,下一步”进行下一拍摄项。当然,在车辆理赔场景下,点击“确认,下一步”之后,若服务器检测到当前拍摄得到的车牌号与保单上的车牌号不同,则向终端设备发送提醒消息,终端设备显示该提醒消息,并在用户确认之后进行下一拍摄项。在拍摄项为“车架号”时,其与拍摄项为“车牌号”的情况类似,这里不再赘述。然后在拍摄项为“车辆四周”时,此过程与拍摄项为“车牌号”的情况类似,区别在于这里拍摄的为车辆四周的4张图片,在每拍摄完成一张图片之后,若未完成4张图片将继续拍摄;在拍摄项为“事故现场”时,其与拍摄项为“车牌号”的情况类似,这里不再赘述;在拍摄项为“车损部位”时,其与拍摄项为“车辆四周”的情况类似,这里不再赘述;在拍摄项为“驾驶证”时,其与拍摄项为“车牌号”的情况类似,但其在提示页还显示有“相册上传”控件,通过点击该“相册上传”控件,可以从本地相册中选择某一张图片,从而无需进行拍摄;在拍摄项为“行驶证”时,其与拍摄项为“驾驶证”的情况类似,这里不再赘述;在拍摄项为“身份证”时,其与拍摄项为“驾驶证”的情况类似,这里不再赘述;在拍摄项为“银行卡”时,其与拍摄项为“驾驶证”的情况类似,这里不再赘述。
参见图4,本发明实施例提供了一种引导用户拍摄的方法,应用于终端设备,该方法包括:
步骤401:接收用户的目标输入。
本步骤中,目标输入可以为点击、滑动、长按等输入,目标输入的对象可以为终端设备上的实体按键或者虚拟控件,但不限于此。目标输入还可以为用户改变电子设备的位置所进行的移动操作。
步骤402:响应于目标输入,在终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。
本步骤中,终端设备处于静止状态下,其可以存在小幅度的移动,这里,将完全不动和几乎完全不同均视为静止状态。终端设备上设置有用于采集图像数据的摄像单元,该终端设备可以为手机,摄像单元可以为手机上的摄像头,但不限于此。预览图像并非触发拍摄按钮拍摄生成的图像,以手机为例,打开手机的相机应用之后,若用户并未触发拍摄按钮,屏幕中显示的图像为实时采集的当前拍摄范围内的场景生成的图像,此图像即为预览图像。这里得到的预览图像的数量可以为一个或者多个,可以基于预先设定的策略决定。在预览图像的数量为多个的情况下,各预览图像为不同时刻下采集的图像,该不同时刻可以为连续或非连续的不同时刻,这里不做限定。
步骤403:将至少一个时刻下的预览图像发送至服务器。
应当说明的是,这里由服务器进行数据处理,以使服务器在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,发送包含第一移动方向的第一引导信息;其中,图像集合为存在大于预设面积的曝光过度区域的预览图像组成的集合,目标预览图像为图像集合中的任一元素,第一移动方向和目标预览图像中所述曝光过度区域相对于中心点的方向相反。
步骤404:在接收到服务器发送的包含第一移动方向的第一引导信息的情况下,输出第一引导信息。
应当说明的是,由于服务器可以在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,发送包含第一移动方向的第一引导信息。因此,终端设备可以接收到第一引导信息。其中,图像集合为存在大于预设面积的曝光过度区域的预览图像组成的集合。这里,将存在大于预设面积的曝光过度区域的预览图像视为存在明显曝光过度情况的图像,将不存在曝光过度区域的预览图像以及存在曝光过度区域,但曝光过度区域小于或等于预设面积的预览图像视为无明显曝光过度情况的图像。当然在曝光过度区域,但曝光过度区域小于或等于预设面积的预览图像也可以视为不存在曝光过度区域的预览图像。其中,预设面积为用户预先设定的一较小的面积,用户可以根据业务需求自行设定预设面积的大小。可以理解的是,当服务器接收到的该预览图像中存在明显曝光过度情况的预览图像所占比重较大时,说明终端设备当前直接拍摄得到的图像很大概率会是存在明显曝光过度情况的图像,此时需要通过第一引导信息对用户进行引导。因此,目标阈值与预览图像的数量相关。例如预览图像的数量为5个,则目标阈值可以为1,但不限于此。
目标预览图像为图像集合中的任一元素,即曝光过度区域的面积大于预设面积的任一预览图像。由于图像集合中的各元素是在终端设备处于静止状态下采集的图像,因此各元素之间的图像内容基本相同。因此,可以选择图像集合中的任一元素作为目标预览图像。
第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反。也就是说,将终端设备向第一移动方向进行移动,可以最快的将曝光过度区域从图像中移除,即进行最少的位移使得移动之后采集的图像为无明显曝光过度情况的图像。
第一引导信息的数据格式可以为文字、图片、语音、视频等。这里,输出方式与第一引导信息的数据格式相关。例如第一引导信息为文字信息时,可以直接显示第一引导信息;第一引导信息为语音时,可以播放语音。当然,第一引导信息还可以为具有相同数据内容的多种不同数据格式的信息。例如第一引导信息包括文字信息和语音,在显示文字信息的同时,播放语音。可以理解的是,用户通过输出的第一引导信息,即可获知在当前情况下拍摄得到的图像为存在明显曝光过度情况的图像,并且可以得知如何移动终端设备可以拍摄得到无明显曝光过度情况的图像。
本发明实施例中,基于用户的目标输入在终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。由于并不确定当前情况下可以拍摄到无明显曝光过度情况的图像,这里使用了预览图像,该预览图像为此时进行拍摄将要得到的图像。将得到的预览图像发送至服务器,由服务器确定预览图像的曝光信息,进而在预览图像为存在明显曝光过度情况时,确定改善预览图像的曝光过度情况的第一移动方向。终端设备在接收到服务器发送的包含第一移动方向的第一引导信息的情况下,显示该第一引导信息,可以引导用户按照第一移动方向移动终端设备,从而可以拍摄出曝光过度情况得到改善的图像。最终通过不断的移动终端设备拍摄出无明显曝光过度情况的图像。由于每次移动均具有针对性,所以相对于盲目移动终端设备,本发明无疑可以减少移动终端设备的次数,从而提升获得无明显曝光过度情况的图像的效率。同时,只需用户按照第一引导信息移动终端设备即可,降低了对用户的要求。
可选地,在将至少一个时刻下的预览图像发送至服务器之后,该方法还包括:
在接收到服务器发送的用于引导用户保持终端设备处于静止状态的第二引导信息的情况下,输出第二引导信息。
在目标时间段内终端设备持续处于静止状态的情况下,拍摄得到目标图像,其中,目标时间段为从输出第二引导信息开始的具有目标时长的时间段。
应当说明的是,当服务器接收到的该预览图像中存在明显曝光过度情况的预览图像所占比重较小时,说明终端设备当前直接拍摄得到的图像很大概率会是无明显曝光过度情况的图像,此时需要通过第二引导信息引导用户保持终端设备持续处于当前状态,并进行拍摄。这里,将图像集合中元素的数量小于或等于目标阈值的情况,视为服务器接收到的该预览图像中存在明显曝光过度情况的预览图像所占比重较小的情况。可以理解的是,第二引导信息的情况与第一引导信息的情况类似,两者的区别在于具有不同语义的数据内容。并且输出第二引导信息的方式与输出第一引导信息的方式也类似,这里不再赘述。
目标时长可以为用户预先设定的任意时长,例如可以为0秒、3秒或者5秒,但不限于此。在目标时长大于0秒时,还可以显示一从目标时长开始的倒计时,在倒计时结束时拍摄得到目标图像。例如目标时长为3秒时,在输出第二引导信息的同时,显示一从3秒开始的倒计时控件,每过一秒倒计时控件上的数值减1,直至显示0时拍摄得到目标图像。当然,第二引导信息还可以为倒计时控件本身。可以理解的是,在目标时间段内,若终端设备进入非静止状态,则重新执行步骤102和步骤103。
本发明实施例中,在终端设备当前采集到的预览图像为无明显曝光过度情况时,可以显示第二引导信息,引导用户保持终端设备持续处于静止状态,从而拍摄得到无明显曝光过度情况的目标图像。
可选地,在接收用户的目标输入之前,该方法还包括:
输出用于引导用户对准第一拍摄对象的第三引导信息。
在拍摄得到目标图像之后,该方法还包括:
将目标图像发送至服务器,以使服务器将目标图像确定为第一拍摄对象在第一业务中的业务图片。
应当说明的是,第一业务为与第一拍摄对象相关的业务,在第一业务中需要使用第一拍摄对象的业务图片,该业务图片应当为无明显曝光过度情况的图片。例如在车辆理赔系统中存在处理车辆车损的业务,该业务需要使用事故车辆的车损部位的业务图片,且该业务图片应当为无明显曝光过度情况的图片,否则会由于影像失常无法准确判断车损状况。其中,该处理车辆车损的业务即为第一业务,事故车辆的车损部位即为第一拍摄对象。
可以理解的是,第三引导信息的情况与第一引导信息的情况类似,两者的区别在于具有不同语义的数据内容。并且输出第三引导信息的方式与输出第一引导信息的方式也类似,这里不再赘述。
本发明实施例中,在具体的业务场景下,通过第三引导信息可以引导用户将终端设备对准与业务相匹配的拍摄对象,无需用户对业务进行了解,进一步降低了对用户的要求。
可选地,在输出用于引导用户对准第一拍摄对象的第三引导信息之前,该方法还包括:
显示包括多个业务的业务信息的业务列表。
应当说明的是,业务列表中对应每一业务设置有用于表征业务对应的拍摄对象是否已完成拍摄的标识,每个业务对应一个拍摄对象,第一拍摄对象为多个业务中的第一业务对应的拍摄对象。这里,该标识可以为文字、数字、字母、特殊符号或者规则的图形,但不限于此。较佳地,针对每一业务,对应该业务设置的标识存在至少两种不同的形式,且每种形式表示一种业务状态。例如若业务状态为已完成拍摄,则标识可以为一圆圈,且该圆圈内显示一对号;若业务状态为正在拍摄,则标识可以为一实心圆点。较佳地,若业务状态为未完成拍摄,可以不显示该标识。
在拍摄得到目标图像之后,该方法还包括:
将业务列表中对应第一业务设置的标识设置为表征拍摄对象完成拍摄的第二标识。
应当说明的是,在拍摄得到目标图像之后,说明第一业务的业务状态已经发生改变,为保证业务列表的准确性,此时,对应第一业务设置的标识将发生相应改变。
本发明实施例中,在多业务场景下,通过业务列表中对应不同业务设置的标识,可以将每一业务的业务状态准确显示给用户,从而便于用户查看。
可选地,响应于目标输入,在终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像,包括:
响应于目标输入,监测终端设备在三个不同方向上的加速度信息。
应当说明的是,三个不同方向可以理解为X轴方向、Y轴方向和Z轴方向,即三维空间坐标系中三个坐标轴的方向。通过三个不同方向上的加速度信息,可以准确判断当前终端设备在三维空间中的移动情况。
基于加速度信息,在预设时长内三个不同方向中每一方向上的加速度均小于加速度阈值的情况下,确定终端设备处于静止状态。
应当说明的是,加速度阈值的数值较小,可以为用户预先设定的一较小的数值,例如加速度阈值可以为0.05米/平方秒,但不限于此。可以理解的是,当终端设备在三个不同方向中每一方向上的加速度均小于加速度阈值时,可以视为终端设备静止。本步骤中,为方便用户移动终端设备对准拍摄对象,将设置一预设时长,当该预设时长内终端设备持续静止时,视为终端设备处于静止状态。具体的,以手机为例,监测手机中的陀螺仪,每200毫秒获取一次陀螺仪X、Y、Z坐标轴的加速度数值,若3个方向的加速度同时小于0.05则认为手机静止,当手机出现连续3次的静止则认为用户已对准拍摄对象并静止摄像。
对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。
本发明实施例中,基于终端设备在三个不同方向上的加速度信息,可以快速识别终端设备当前所处的状态,并在终端设备处于静止状态时,采集得到预览图像。
可选地,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像,包括:
通过终端设备的摄像单元持续采集当前拍摄范围内的场景信息,得到视频数据;
获取视频数据中不同时刻下的视频帧,得到至少一个时刻下的预览图像。
应当说明的是,在得到视频数据之后可以实时分析视频数据,取视频数据中每目标数量视频帧的最后一帧作为一个预览图像,从而得到多个时刻下的预览图像。目标数量可以根据需求自行设定,例如目标数量可以为10个或15个,但不限于此。
本发明实施例中,通过抽取视频数据中的视频帧,可以快速得到预览图像。
以上由终端设备侧介绍了本发明实施例提供的引导用户拍摄的方法,下面将结合附图介绍服务器侧的引导用户拍摄的方法。
本发明实施例提供了一种引导用户拍摄的方法,应用于服务器,该方法包括:
步骤51:接收终端设备发送的至少一个时刻下的预览图像。
应当说明的是,至少一个时刻下的预览图像为终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像。
步骤52:确定每一预览图像的曝光信息。
应当说明的是,分别针对每一预览图像进行曝光信息的获取,得到每一预览图像的曝光信息。曝光信息可以表征预览图像的曝光过度情况,即预览图像的是否存在明显曝光过度情况。这里,存在明显曝光过度情况和无明显曝光过度情况的标准与上述应用于终端设备的引导用户拍摄的方法的实施例中存在明显曝光过度情况和无明显曝光过度情况的标准相同,这里不再赘述。
步骤53:在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息。
应当说明的是,图像集合为存在大于预设面积的曝光过度区域的预览图像组成的集合。这里,将存在大于预设面积的曝光过度区域的预览图像视为存在明显曝光过度情况的图像,将不存在曝光过度区域的预览图像以及存在曝光过度区域,但曝光过度区域小于或等于预设面积的预览图像视为无明显曝光过度情况的图像。当然在曝光过度区域,但曝光过度区域小于或等于预设面积的预览图像也可以视为不存在曝光过度区域的预览图像。其中,预设面积为用户预先设定的一较小的面积,用户可以根据业务需求自行设定预设面积的大小。可以理解的是,当服务器接收到的该预览图像中存在明显曝光过度情况的预览图像所占比重较大时,说明终端设备当前直接拍摄得到的图像很大概率会是存在明显曝光过度情况的图像,此时需要通过第一引导信息对用户进行引导。因此,目标阈值与预览图像的数量相关。例如预览图像的数量为5个,则目标阈值可以为1,但不限于此。
目标预览图像为图像集合中的任一元素,由于图像集合中的各元素是在终端设备处于静止状态下采集的图像,因此各元素之间的图像内容基本相同。因此,可以选择图像集合中的任一元素作为目标预览图像。
第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反。也就是说,将终端设备向第一移动方向进行移动,可以最快的将曝光过度区域从图像中移除,即进行最少的位移使得移动之后采集的图像为无明显曝光过度情况的图像。
步骤54:将第一引导信息发送至终端设备,以使终端设备输出第一引导信息。
应当说明的是,第一引导信息的数据格式可以为文字、图片、语音、视频等。这里,终端设备输出方式与第一引导信息的数据格式相关。例如第一引导信息为文字信息时,可以直接显示第一引导信息;第一引导信息为语音时,可以播放语音。当然,第一引导信息还可以为具有相同数据内容的多种不同数据格式的信息。例如第一引导信息包括文字信息和语音,在显示文字信息的同时,播放语音。可以理解的是,用户通过终端设备输出的第一引导信息,即可获知在当前情况下拍摄得到的图像为存在明显曝光过度情况的图像,并且可以得知如何移动终端设备可以拍摄得到无明显曝光过度情况的图像。
本发明实施例中,可以接收终端设备发送的至少一个时刻下的预览图像,其中,至少一个时刻下的预览图像为终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像。由于并不确定终端设备当前情况下可以拍摄到无明显曝光过度情况的图像,这里使用了预览图像,该预览图像为终端设备此时进行拍摄将要得到的图像。服务器确定预览图像的曝光信息,进而在预览图像为存在明显曝光过度情况时,确定改善预览图像的曝光过度情况的第一移动方向,将包含第一移动方向的第一引导信息发送至终端设备,由终端设备将其显示给用户,引导用户按照第一移动方向移动终端设备,从而可以拍摄出曝光过度情况得到改善的图像。最终通过不断的移动终端设备拍摄出无明显曝光过度情况的图像。由于每次移动均具有针对性,所以相对于盲目移动终端设备,本发明无疑可以减少移动终端设备的次数,从而提升获得无明显曝光过度情况的图像的效率。同时,只需用户按照第一引导信息移动终端设备即可,降低了对用户的要求。
可选地,确定每一预览图像的曝光信息,包括:
针对每一预览图像,将预览图像输入预先训练好的神经网络模型中,得到神经网络模型输出的检测结果,其中,检测结果包括存在大于预设面积的曝光过度区域以及记录曝光过度区域的位置的第一结果或者不存在大于预设面积的曝光过度区域的第二结果;
针对每一预览图像,将神经网络模型输出的对应预览图像的检测结果确定为预览图像的曝光信息。
应当说明的是,预先训练好的神经网络模型具有检测图像的曝光信息的功能,再将图像输入该预先训练好的神经网络模型之后,该预先训练好的神经网络模型输出的检测结果即为曝光信息。这里,预先训练好的神经网络模型可以判断图像是否存在明显曝光过度情况,并在存在明显曝光过度情况时确定曝光过度区域在图像中的相对位置。也就是说,预先训练好的神经网络模型可以判断图像中是否存在大于预设面积的曝光过度区域,并在判断出存在大于预设面积的曝光过度区域的情况下,继续判断出该曝光过度区域在图像中的相对位置。
本发明实施例中,利用预先训练好的神经网络模型,可以快速准确的得到每一预览图像的曝光信息。
可选地,预先训练神经网络模型的步骤包括:
构建初始神经网络模型;
将初始神经网络模型的锚点框参数调整为目标参数;
获取包含有大于预设面积的曝光过度区域的样本数据,其中,样本数据中每一样本的标签为样本中曝光过度区域的最小外接矩形框的坐标;
采用样本数据对初始神经网络模型进行训练。
应当说明的是,初始神经网络模型可以为目标检测模型,例如可以为一EfficientDet-D2结构的深度神经网络模型,但不限于此。通过修改其锚点框参数,使其适应检测曝光过度区域这种小目标。这里,将利用标注工具标注一批包含有大于预设面积的曝光过度区域的图像作为样本,以每张图上曝光过度区域的最小外接矩形框的坐标为标签。可以理解的是,在利用样本数据进行模型训练的过程为不断优化模型参数的过程,在模型收敛之后停止训练得到训练好的神经网络模型。
本发明实施例中,在训练得到神经网络模型的过程中,通过对构建的初始神经网络模型的锚点框参数的调整,使其适应检测曝光过度区域这种小目标,进而得到鲁棒的神经网络模型。
可选地,上述发明实施例中的初始神经网络模型可以用与EfficientDet-D2结构同类型的深度学习目标检测模型替换,例如该同类型的深度学习目标检测模型可以为RCNN(区域检测卷积神经网络,Region-CNN)、Faster-RCNN(快速区域检测卷积神经网)、YOLO(You Only Look Once)v1/v2/v3、SSD(单发多目标检测器,Single Shot MultiBoxDetector)、Mask RCNN(掩码区域检测卷积神经网络,Mask Region-CNN)和RefineDet(精细化检测器)等模型。当然,也可以利用深度学习图像分割模型作为上述发明实施例中的初始神经网络模型。具体的,该深度学习图像分割模型可以为FCN(全卷积神经网络,FullyConvolution Network)、SegNet(分割区域检测网络)、DeepLab v1/v2/v3/v3+、PSPNet(金字塔池化场景解析网络,Pyramid Scene Parseing Network,)等模型,但不限于此。
可选地,基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,包括:
基于曝光信息,确定目标预览图像的曝光区域类型;其中,曝光区域类型包括:表征曝光过度区域位于中心区域之内的第一类型以及表征曝光过度区域位于中心区域之外的第二类型,中心区域为目标预览图像中以中心点为中心的预设范围;
在目标预览图像的曝光区域类型为第一类型的情况下,确定包含与目标预览图像中曝光过度区域相对于中心点的方向相反的平移方向的第一引导信息;
或者在目标预览图像的曝光区域类型为第二类型的情况下,确定包含与目标预览图像中曝光过度区域相对于中心点的方向相反的旋转方向的第一引导信息。
应当说明的是,中心区域的范围为预先确定的范围,其与预览图像的高度和宽度均相关。这里,可以将位于中心区域之内的任意区域均视为离预览图像的中心点较近,将位于中心区域之外的任意区域均视为离预览图像的中心点较远。例如中心区域可以为(0.4W,0.4H)内,但不限于此,其中,W为预览图像的宽度,H为预览图像的高度。以预览图像的左下角的位置为坐标原点,宽度方向为X轴方向,高度方向为Y轴方向,则预览图像中曝光过度区域的坐标bbox=[xmin,ymin,xmax,ymax],其中,xmin表示曝光过度区域最左侧边缘处的横坐标,xmax表示曝光过度区域最右侧边缘处的横坐标,ymin表示曝光过度区域最下方边缘处的纵坐标,ymax表示曝光过度区域最上方边缘处的纵坐标。基于公式一可以得到目标预览图像的曝光区域类型。
公式一:
Figure BDA0003918789510000211
其中,xmin表示曝光过度区域最左侧边缘处的横坐标,xmax表示曝光过度区域最右侧边缘处的横坐标,ymin表示曝光过度区域最下方边缘处的纵坐标,ymax表示曝光过度区域最上方边缘处的纵坐标,type表示曝光区域类型,type等于0,则曝光区域类型为第一类型;type等于1,则曝光区域类型为第二类型。
在确定第一移动方向时,需要计算曝光过度区域中心位置到预览图像中心点的横向距离和纵向距离,其具体计算为如公式二和公式三所示。
公式二:d1=(xmin+xmax)/2-W/2;d1表示曝光过度区域中心位置到预览图像中心点的横向距离,xmin表示曝光过度区域最左侧边缘处的横坐标,xmax表示曝光过度区域最右侧边缘处的横坐标,W为预览图像的宽度。
公式三:d2=(ymin+ymax)/2-H/2;d2表示曝光过度区域中心位置到预览图像中心点的纵向距离,ymin表示曝光过度区域最下方边缘处的纵坐标,ymax表示曝光过度区域最上方边缘处的纵坐标,H为预览图像的高度。
若type为0,当d1≥0时,说明曝光过度区域在中心偏右的位置,此时变动终端设备的幅度应当较小,则第一引导信息中的平移方向为左侧,第一引导信息可以为“请向左移动”,否则第一引导信息为“请向右移动”。
若type为1,则认为曝光过度区域在预览图像的外围,此时变动终端设备的幅度应当较大,假设曝光过度区域在预览图像的左边界内,则第一引导信息中的旋转方向为右侧,第一引导信息可以为“请偏向右侧旋转相机”。
本发明实施例中,基于曝光过度区域与预览图像的中心位置的相对位置,在第一引导信息中添加平移方向或旋转方向,以便以终端设备较小的位置变动改善预览图像中曝光过度的情况。
可选地,在确定每一预览图像的曝光信息之后,该方法还包括:
在图像集合中元素的数量小于或等于目标阈值的情况下,确定用于引导用户保持终端设备处于静止状态的第二引导信息;
将第二引导信息发送至终端设备,以使终端设备输出第二引导信息。
应当说明的是,当服务器接收到的该预览图像中存在明显曝光过度情况的预览图像所占比重较小时,说明终端设备当前直接拍摄得到的图像很大概率会是无明显曝光过度情况的图像,此时需要通过第二引导信息引导用户保持终端设备持续处于当前状态,并进行拍摄。可以理解的是,第二引导信息的情况与第一引导信息的情况类似,两者的区别在于具有不同语义的数据内容。并且输出第二引导信息的方式与输出第一引导信息的方式也类似,这里不再赘述。
本发明实施例中,在确定终端设备当前采集到的预览图像为无明显曝光过度情况时,可以显示第二引导信息,引导用户直接拍摄得到无明显曝光过度情况的目标图像。
如图5所示,本发明实施例提供了一种引导用户拍摄的方法,应用于包括终端设备和服务器的系统,这里,以一具体业务场景为例进行说明,但本发明并不限于该业务场景。在小额车辆报损场景中,需要用户按照报损要求拍摄相应的影像。该方法包括:
步骤501:在终端设备中提示用户对准目标拍摄,即显示用于引导用户对准第一拍摄对象的第三引导信息。具体的,用户进入引导拍摄界面后,界面左上方显示“请将摄像头对准车辆受损部位”,并语音提示相关内容提示用户。
步骤502:判断相机是否处于静止状态,若是则采集预览图像并将预览图像发送至服务器,然后在服务器中执行步骤503,若否则继续执行步骤501。这里,采集预览图像并将预览图像发送至服务器的过程与上述步骤402和步骤403类似,这里步骤赘述,判断相机是否处于静止状态的方式与上述发明实施例中判断终端设备是否处于静止状态的方式类似,这里同样不再赘述。
步骤503:在服务器中利用预先训练好的曝光点检测模型,检测预览图像中的曝光点,这里的曝光点即为上述发明实施例中大于预设面积的曝光过度区域。曝光点检测模型即为上述发明实施例中的神经网络模型。
步骤504:服务器基于曝光点检测模型的输出判断预览图像中是否存在曝光点,若是则执行步骤506,若否则执行步骤505。在预览图像的数量为多个的情况下,将存在曝光点的预览图像的数量大于目标阈值的情况视为预览图像中存在曝光点;将存在曝光点的预览图像的数量小于或等于目标阈值的情况视为预览图像中不存在曝光点。服务器将判断结果发送回终端设备。
步骤505:终端设备在确定判断结果为不存在曝光点的情况下,显示一倒计时提醒用户在倒计时结束前保持终端设备处于静止状态,并在倒计时结束时进行抓拍得到目标图像。
步骤506:终端设备在确定判断结果为存在曝光点的情况下,将按照规则显示引导信息对用户进行引导,以使用户调整相机或终端设备的位置来改善曝光过度的情况。其中,将按照规则显示引导信息可参见上述发明实施例,这里步骤赘述。
本发明实施例中,能对用户拍摄情况进行实时分析和提示,解决了拍摄的图像存在曝光点,导致影像质量不过关需要重拍等情况。引导拍摄过程简单且均存在语音和文字双重提示,可以规范用户拍摄习惯,提高后续理赔或者投保使用该影像的作业效率。
参见图6,本发明实施例还提供了一种引导用户拍摄的装置,应用于终端设备,该装置包括:
输入模块61,用于接收用户的目标输入;
响应模块62,用于响应于目标输入,在终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像;
第一发送模块63,用于将至少一个时刻下的预览图像发送至服务器;
第一引导模块64,用于在接收到服务器发送的包含第一移动方向的第一引导信息的情况下,输出第一引导信息;其中,第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反,目标预览图像为曝光过度区域的面积大于预设面积的任一预览图像。
可选地,该装置还包括:
第一引导输出模块,用于在接收到服务器发送的用于引导用户保持终端设备处于静止状态的第二引导信息的情况下,输出第二引导信息;
拍摄模块,用于在目标时间段内终端设备持续处于静止状态的情况下,拍摄得到目标图像,其中,目标时间段为从输出第二引导信息开始的具有目标时长的时间段。
可选地,该装置还包括:
第二引导输出模块,用于输出用于引导用户对准第一拍摄对象的第三引导信息;
业务图像模块,用于将目标图像发送至服务器,以使服务器将目标图像确定为第一拍摄对象在第一业务中的业务图片。
可选地,该装置还包括:
列表模块,用于显示包括多个业务的业务信息的业务列表,其中,业务列表中对应每一业务设置有用于表征业务对应的拍摄对象是否已完成拍摄的标识,每个业务对应一个拍摄对象,第一拍摄对象为多个业务中的第一业务对应的拍摄对象;
标识设置模块,用于将业务列表中对应第一业务设置的标识设置为表征拍摄对象完成拍摄的第二标识。
可选地,响应模块62,包括:
第一响应单元,用于响应于目标输入,监测终端设备在三个不同方向上的加速度信息;
第二响应单元,用于基于加速度信息,在预设时长内三个不同方向中每一方向上的加速度均小于加速度阈值的情况下,确定终端设备处于静止状态;
第三响应单元,用于对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。
可选地,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像,包括:
通过终端设备的摄像单元持续采集当前拍摄范围内的场景信息,得到视频数据;
获取视频数据中不同时刻下的视频帧,得到至少一个时刻下的预览图像。
本发明实施例提供的引导用户拍摄的装置能够实现图4的方法实施例中引导用户拍摄的方法实现的各个过程,为避免重复,这里不再赘述。
本发明实施例中,基于用户的目标输入在终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。由于并不确定当前情况下可以拍摄到无明显曝光过度情况的图像,这里使用了预览图像,该预览图像为此时进行拍摄将要得到的图像。将得到的预览图像发送至服务器,由服务器确定预览图像的曝光信息,进而在预览图像为存在明显曝光过度情况时,确定改善预览图像的曝光过度情况的第一移动方向。终端设备在接收到服务器发送的包含第一移动方向的第一引导信息的情况下,显示该第一引导信息,可以引导用户按照第一移动方向移动终端设备,从而可以拍摄出曝光过度情况得到改善的图像。最终通过不断的移动终端设备拍摄出无明显曝光过度情况的图像。由于每次移动均具有针对性,所以相对于盲目移动终端设备,本发明无疑可以减少移动终端设备的次数,从而提升获得无明显曝光过度情况的图像的效率。同时,只需用户按照第一引导信息移动终端设备即可,降低了对用户的要求。
参见图7,本发明实施例还提供了一种引导用户拍摄的装置,应用于终端设备,该装置包括:
第一接收模块71,用于接收终端设备发送的至少一个时刻下的预览图像,其中,至少一个时刻下的预览图像为终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像;
曝光模块72,用于确定每一预览图像的曝光信息;
第二引导模块73,用于在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,其中,图像集合为存在大于预设面积的曝光过度区域的预览图像组成的集合,目标预览图像为图像集合中的任一元素,第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反;
第二发送模块74,用于将第一引导信息发送至终端设备,以使终端设备输出第一引导信息。
可选地,曝光模块,包括:
第一曝光单元,用于针对每一预览图像,将预览图像输入预先训练好的神经网络模型中,得到神经网络模型输出的检测结果,其中,检测结果包括存在大于预设面积的曝光过度区域以及记录曝光过度区域的位置的第一结果或者不存在大于预设面积的曝光过度区域的第二结果;
第二曝光单元,用于针对每一预览图像,将神经网络模型输出的对应预览图像的检测结果确定为预览图像的曝光信息。
可选地,预先训练神经网络模型的步骤包括:
构建初始神经网络模型;
将初始神经网络模型的锚点框参数调整为目标参数;
获取包含有大于预设面积的曝光过度区域的样本数据,其中,样本数据中每一样本的标签为样本中曝光过度区域的最小外接矩形框的坐标;
采用样本数据对初始神经网络模型进行训练。
可选地,第二引导模块73,包括:
类型单元,用于基于曝光信息,确定目标预览图像的曝光区域类型;其中,曝光区域类型包括:表征曝光过度区域位于中心区域之内的第一类型以及表征曝光过度区域位于中心区域之外的第二类型,中心区域为目标预览图像中以中心点为中心的预设范围;
移动单元,用于在目标预览图像的曝光区域类型为第一类型的情况下,确定包含与目标预览图像中曝光过度区域相对于中心点的方向相反的平移方向的第一引导信息;
或者在目标预览图像的曝光区域类型为第二类型的情况下,确定包含与目标预览图像中曝光过度区域相对于中心点的方向相反的旋转方向的第一引导信息。
可选地,该装置还包括:
第三引导模块,用于在图像集合中元素的数量小于或等于目标阈值的情况下,确定用于引导用户保持终端设备处于静止状态的第二引导信息;
第四引导模块,用于将第二引导信息发送至终端设备,以使终端设备输出第二引导信息。
本发明实施例中,可以接收终端设备发送的至少一个时刻下的预览图像,其中,至少一个时刻下的预览图像为终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像。由于并不确定终端设备当前情况下可以拍摄到无明显曝光过度情况的图像,这里使用了预览图像,该预览图像为终端设备此时进行拍摄将要得到的图像。服务器确定预览图像的曝光信息,进而在预览图像为存在明显曝光过度情况时,确定改善预览图像的曝光过度情况的第一移动方向,将包含第一移动方向的第一引导信息发送至终端设备,由终端设备将其显示给用户,引导用户按照第一移动方向移动终端设备,从而可以拍摄出曝光过度情况得到改善的图像。最终通过不断的移动终端设备拍摄出无明显曝光过度情况的图像。由于每次移动均具有针对性,所以相对于盲目移动终端设备,本发明无疑可以减少移动终端设备的次数,从而提升获得无明显曝光过度情况的图像的效率。同时,只需用户按照第一引导信息移动终端设备即可,降低了对用户的要求。
可选地,如图8所示,本申请实施例还提供一种电子设备800,包括处理器801和存储器802,存储器802上存储有可在所述处理器801上运行的程序或指令,该程序或指令被处理器801执行时实现上述引导用户拍摄的方法实施例的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述引导用户拍摄的方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本发明实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (15)

1.一种引导用户拍摄的方法,应用于终端设备,其特征在于,所述方法包括:
接收用户的目标输入;
响应于所述目标输入,在所述终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像;
将所述至少一个时刻下的预览图像发送至服务器;
在接收到所述服务器发送的包含第一移动方向的第一引导信息的情况下,输出所述第一引导信息;其中,所述第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反,所述目标预览图像为曝光过度区域的面积大于预设面积的任一所述预览图像。
2.根据权利要求1所述的方法,其特征在于,在所述将所述至少一个时刻下的预览图像发送至服务器之后,所述方法还包括:
在接收到所述服务器发送的用于引导用户保持所述终端设备处于静止状态的第二引导信息的情况下,输出所述第二引导信息;
在目标时间段内所述终端设备持续处于静止状态的情况下,拍摄得到目标图像,其中,所述目标时间段为从输出所述第二引导信息开始的具有目标时长的时间段。
3.根据权利要求2所述的方法,其特征在于,在所述接收用户的目标输入之前,所述方法还包括:
输出用于引导用户对准第一拍摄对象的第三引导信息;
在所述拍摄得到目标图像之后,所述方法还包括:
将所述目标图像发送至所述服务器,以使所述服务器将所述目标图像确定为所述第一拍摄对象在第一业务中的业务图片。
4.根据权利要求3所述的方法,其特征在于,在所述输出用于引导用户对准第一拍摄对象的第三引导信息之前,所述方法还包括:
显示包括多个业务的业务信息的业务列表,其中,所述业务列表中对应每一所述业务设置有用于表征所述业务对应的拍摄对象是否已完成拍摄的标识,每个所述业务对应一个拍摄对象,所述第一拍摄对象为所述多个业务中的所述第一业务对应的拍摄对象;
在所述拍摄得到目标图像之后,所述方法还包括:
将所述业务列表中对应所述第一业务设置的标识设置为表征拍摄对象完成拍摄的第二标识。
5.根据权利要求1所述的方法,其特征在于,所述响应于所述目标输入,在所述终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像,包括:
响应于所述目标输入,监测所述终端设备在三个不同方向上的加速度信息;
基于所述加速度信息,在预设时长内所述三个不同方向中每一所述方向上的加速度均小于加速度阈值的情况下,确定所述终端设备处于静止状态;
对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像。
6.根据权利要求1或5所述的方法,其特征在于,所述对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像,包括:
通过所述终端设备的摄像单元持续采集当前拍摄范围内的场景信息,得到视频数据;
获取所述视频数据中不同时刻下的视频帧,得到所述至少一个时刻下的预览图像。
7.一种引导用户拍摄的方法,应用于服务器,其特征在于,所述方法包括:
接收终端设备发送的至少一个时刻下的预览图像,其中,所述至少一个时刻下的预览图像为所述终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像;
确定每一所述预览图像的曝光信息;
在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,其中,所述图像集合为存在大于预设面积的曝光过度区域的所述预览图像组成的集合,所述目标预览图像为所述图像集合中的任一元素,所述第一移动方向和所述目标预览图像中所述曝光过度区域相对于中心点的方向相反;
将所述第一引导信息发送至所述终端设备,以使所述终端设备输出所述第一引导信息。
8.根据权利要求7所述的方法,其特征在于,所述确定每一所述预览图像的曝光信息,包括:
针对每一所述预览图像,将所述预览图像输入预先训练好的神经网络模型中,得到所述神经网络模型输出的检测结果,其中,所述检测结果包括存在大于预设面积的曝光过度区域以及记录所述曝光过度区域的位置的第一结果或者不存在大于预设面积的曝光过度区域的第二结果;
针对每一所述预览图像,将所述神经网络模型输出的对应所述预览图像的检测结果确定为所述预览图像的曝光信息。
9.根据权利要求8所述的方法,其特征在于,预先训练所述神经网络模型的步骤包括:
构建初始神经网络模型;
将所述初始神经网络模型的锚点框参数调整为目标参数;
获取包含有大于预设面积的曝光过度区域的样本数据,其中,所述样本数据中每一样本的标签为所述样本中曝光过度区域的最小外接矩形框的坐标;
采用所述样本数据对所述初始神经网络模型进行训练。
10.根据权利要求7所述的方法,其特征在于,所述基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,包括:
基于曝光信息,确定所述目标预览图像的曝光区域类型;其中,所述曝光区域类型包括:表征曝光过度区域位于中心区域之内的第一类型以及表征曝光过度区域位于中心区域之外的第二类型,所述中心区域为所述目标预览图像中以中心点为中心的预设范围;
在所述目标预览图像的曝光区域类型为第一类型的情况下,确定包含与所述目标预览图像中所述曝光过度区域相对于中心点的方向相反的平移方向的第一引导信息;
或者在所述目标预览图像的曝光区域类型为第二类型的情况下,确定包含与所述目标预览图像中所述曝光过度区域相对于中心点的方向相反的旋转方向的第一引导信息。
11.根据权利要求7所述的方法,其特征在于,在所述确定每一所述预览图像的曝光信息之后,所述方法还包括:
在所述图像集合中元素的数量小于或等于所述目标阈值的情况下,确定用于引导用户保持所述终端设备处于静止状态的第二引导信息;
将所述第二引导信息发送至所述终端设备,以使所述终端设备输出所述第二引导信息。
12.一种引导用户拍摄的装置,应用于终端设备,其特征在于,所述装置包括:
输入模块,用于接收用户的目标输入;
响应模块,用于响应于所述目标输入,在所述终端设备处于静止状态的情况下,对当前拍摄范围内的场景进行采集,得到至少一个时刻下的预览图像;
第一发送模块,用于将所述至少一个时刻下的预览图像发送至服务器;
第一引导模块,用于在接收到所述服务器发送的包含第一移动方向的第一引导信息的情况下,输出所述第一引导信息;其中,所述第一移动方向和目标预览图像中曝光过度区域相对于中心点的方向相反,所述目标预览图像为曝光过度区域的面积大于预设面积的任一所述预览图像。
13.一种引导用户拍摄的装置,应用于服务器,其特征在于,所述装置包括:
第一接收模块,用于接收终端设备发送的至少一个时刻下的预览图像,其中,所述至少一个时刻下的预览图像为所述终端设备响应于用户的目标输入,在处于静止状态的情况下,对当前拍摄范围内的场景进行采集得到的图像;
曝光模块,用于确定每一所述预览图像的曝光信息;
第二引导模块,用于在图像集合中元素的数量大于目标阈值的情况下,基于目标预览图像的曝光信息,确定包含第一移动方向的第一引导信息,其中,所述图像集合为存在大于预设面积的曝光过度区域的所述预览图像组成的集合,所述目标预览图像为所述图像集合中的任一元素,所述第一移动方向和所述目标预览图像中所述曝光过度区域相对于中心点的方向相反;
第二发送模块,用于将所述第一引导信息发送至所述终端设备,以使所述终端设备输出所述第一引导信息。
14.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至6中任一项所述的引导用户拍摄的方法或如权利要求7至11中任一项所述的引导用户拍摄的方法的步骤。
15.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至6中任一项所述的引导用户拍摄的方法或如权利要求7至11中任一项所述的引导用户拍摄的方法的步骤。
CN202211347638.3A 2022-10-31 2022-10-31 引导用户拍摄的方法及装置、电子设备 Pending CN115835005A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211347638.3A CN115835005A (zh) 2022-10-31 2022-10-31 引导用户拍摄的方法及装置、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211347638.3A CN115835005A (zh) 2022-10-31 2022-10-31 引导用户拍摄的方法及装置、电子设备

Publications (1)

Publication Number Publication Date
CN115835005A true CN115835005A (zh) 2023-03-21

Family

ID=85525912

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211347638.3A Pending CN115835005A (zh) 2022-10-31 2022-10-31 引导用户拍摄的方法及装置、电子设备

Country Status (1)

Country Link
CN (1) CN115835005A (zh)

Similar Documents

Publication Publication Date Title
TWI709091B (zh) 圖像處理方法和裝置
US11182592B2 (en) Target object recognition method and apparatus, storage medium, and electronic device
WO2021082662A1 (zh) 辅助用户拍摄车辆视频的方法及装置
JP6401873B2 (ja) 領域認識方法及び装置
US8577098B2 (en) Apparatus, method and program for designating an object image to be registered
US11636709B2 (en) Optical data exchange while preserving social distancing
CN106228168B (zh) 卡片图像反光检测方法和装置
CN103916592A (zh) 用于在具有照相机的便携式终端中拍摄肖像的设备和方法
CN106295638A (zh) 证件图像倾斜校正方法和装置
CN109670458A (zh) 一种车牌识别方法及装置
CN109040605A (zh) 拍摄引导方法、装置及移动终端和存储介质
JP6448674B2 (ja) 文字認識可能な画像を撮影するためのガイド表示を行う、カメラ機能を有する携帯可能な情報処理装置、その表示制御方法、及びプログラム
EP3040884A1 (en) Method and device for classifying pictures
CN106056117A (zh) 矩形物体的图像处理方法及装置
CN108717542B (zh) 识别文字区域的方法、装置及计算机可读存储介质
CN113677409A (zh) 寻宝游戏引导技术
CN112200040A (zh) 遮挡图像检测方法、装置及介质
CN110427810B (zh) 视频定损方法、装置、拍摄端及机器可读存储介质
CN114267041B (zh) 场景中对象的识别方法及装置
CN110490022A (zh) 一种识别图片中的条形码方法及装置
CN113963149A (zh) 一种医疗票据图片的模糊判断方法、系统、设备及介质
CN112954207A (zh) 驾驶沿途景观抓拍方法、装置以及汽车中控台
CN115835005A (zh) 引导用户拍摄的方法及装置、电子设备
CN110012216A (zh) 信息获取方法和装置、智能终端
CN116363725A (zh) 显示设备的人像追踪方法、系统、显示设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination