CN109040523B - 伪影消除方法、装置、存储介质及终端 - Google Patents

伪影消除方法、装置、存储介质及终端 Download PDF

Info

Publication number
CN109040523B
CN109040523B CN201810936332.9A CN201810936332A CN109040523B CN 109040523 B CN109040523 B CN 109040523B CN 201810936332 A CN201810936332 A CN 201810936332A CN 109040523 B CN109040523 B CN 109040523B
Authority
CN
China
Prior art keywords
exposure
short
exposure image
image
long
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810936332.9A
Other languages
English (en)
Other versions
CN109040523A (zh
Inventor
孙剑波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810936332.9A priority Critical patent/CN109040523B/zh
Publication of CN109040523A publication Critical patent/CN109040523A/zh
Application granted granted Critical
Publication of CN109040523B publication Critical patent/CN109040523B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation

Abstract

本申请实施例公开了一种伪影消除方法、装置、存储介质及终端,该方法包括:首先当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像;根据所述第一短曝光图像和所述第二短曝光图像确定位移信息;根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复,提高设备的资源利用率。

Description

伪影消除方法、装置、存储介质及终端
技术领域
本申请实施例涉及移动终端技术领域,尤其涉及伪影消除方法、装置、存储介质及终端。
背景技术
随着移动终端的不断发展,几乎每台移动终端均配置了相机功能,基于相机功能可以进行拍照。移动终端趋向于自动化的拍照过程,能够根据拍照环境自动确定曝光时间。
但是在使用中发现,随着曝光时间的增加,曝光期间被拍摄物体的移动会在最终生成的曝光图像中产生伪影,导致曝光图像不清晰,此时用户需要重新拍照,否则无法得到满意效果,系统资源利用率低。
发明内容
本申请实施例的目的是提供一种伪影消除方法、装置、存储介质及终端,可以提高移动终端资源利用率。
第一方面,本申请实施例提供了一种伪影消除方法,包括:
当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,所述长曝光图像的曝光时间大于所述第一端曝光图像的曝光时间;
根据所述第一短曝光图像和所述第二短曝光图像确定位移信息;
根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
第二方面,本申请实施例提供了一种伪影消除装置,包括:
获取模块,用于当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,所述长曝光图像的曝光时间大于所述第一端曝光图像的曝光时间;
确定模块,用于根据所述获取模块获取的所述第一短曝光图像和所述第二短曝光图像确定位移信息;
修复模块,用于根据所述确定模块确定的所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
第三方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如第一方面所示的伪影消除方法。
第四方面,本申请实施例提供了一种终端,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所示的伪影消除方法。
本申请实施例中提供的伪影消除方案,首先当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像;根据所述第一短曝光图像和所述第二短曝光图像确定位移信息;根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复,提高设备的资源利用率。
附图说明
图1为本申请实施例提供的一种伪影消除方法的流程示意图;
图2为本申请实施例提供的另一种伪影消除方法的流程示意图;
图3为本申请实施例提供的另一种伪影消除方法的流程示意图;
图4为本申请实施例提供的另一种伪影消除方法的流程示意图;
图5为本申请实施例提供的另一种伪影消除方法的流程示意图;
图6为本申请实施例提供的另一种伪影消除方法的流程示意图;
图7为本申请实施例提供的一种伪影消除装置的结构示意图;
图8为本申请实施例提供的一种移动终端的结构示意图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
随着移动终端的不断发展,几乎每台移动终端均配置了相机功能,基于相机功能可以进行拍照。移动终端趋向于自动化的拍照过程,能够根据拍照环境自动确定曝光时间。但是在使用中发现,随着曝光时间的增加,曝光期间被拍摄物体的移动会在最终生成的曝光图像中产生伪影,导致曝光图像不清晰,此时用户需要重新拍照,否则无法得到满意效果,系统资源利用率低。由于在长曝光期间被拍摄物体的任何位移都会对最终的曝光图像产生影响,因此要求在拍摄长曝光图像时不仅被拍摄物体不能发生位移,且拍摄者也不可以有过大的抖动或移动,导致在用户手持拍照时,长曝光图像的拍摄效果较差。
本申请实施例提供了一种伪影消除方法,对具有双摄像头的移动终端,能够使用一个摄像头进行长曝光,并使用另一个摄像头在长曝光的起始时间和停止时间分别获取两个短曝光图像,根据两个短曝光图图像确定拍摄物体的位移信息,最后基于该位移信息对伪影区域进行修复,进而消除长曝光图像中的伪影区域,避免重复拍摄,提高系统资源利用率。同时拍摄者和被拍摄者均不需要严格保持不动,进而提高长曝光拍照的易用性。具体方案如下所示:
图1为本申请实施例提供的伪影消除方法的流程示意图,该方法用于具有双摄像头的移动终端进行长曝光拍照的情况,该方法可以由移动终端来执行,该移动终端可以为智能手机、平板电脑、可穿戴设备、笔记本电脑等,该方法具体包括如下步骤:
步骤110、当检测到获取长曝光图像时,根据长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据长曝光图像的曝光停止时间通过第二摄像头获取第二短曝光图像。
其中,长曝光图像的曝光时间大于第一短曝光图像的曝光时间。当触发拍照指令时,移动终端根据当前环境亮度确定曝光时间。曝光时间分为长曝光和短曝光,当环境亮度较高时,镜头模组获取图像的时间较短,此时使用短曝光进行拍摄。当环境亮度较低时,镜头模组获取图像的时间较长,此时使用长曝光进行拍摄。在一种实施例中,长曝光时间可以大于0.5秒,示例性的长曝光时间可以为1秒、15秒、30秒、10分钟、1小时或至少两个小时等。相应的,短曝光时间小于长曝光时间,如0.2秒或0.3秒等。可选的,长曝光时间可以为短曝光时间的整数倍。本申请实施例主要针对于移动终端确定通过长曝光获取长曝光图像的过程。通过检测曝光时间可确定是否获取长曝光图像。可选的,获取曝光时间,检测曝光时间是否大于预设曝光时间。若检测到曝光时间大于预设曝光时间(如1秒),则确定获取长曝光图像。可选的,检测用户是否触发长曝光指令,若用户触发长曝光指令,则确定检测到获取长曝光图像。
当获取长曝光图像时,长曝光的开始时间为曝光起始时间,长曝光的结束时间为曝光停止时间。对于具有双摄像头的移动终端,能够使用一个摄像头进行长曝光,同时使用另一个摄像头在曝光起始时间和曝光停止时间同步获取第一短曝光图像和第二短曝光图像。
步骤120、根据第一短曝光图像和第二短曝光图像确定位移信息。
被拍摄物体可以为静物也可以为具有位移的物体,如人物或动物等。在长曝光期间,如果被拍摄物体发生移动,则长曝光图像中将出现因移动造成的伪影。第一短曝光图像和第二短曝光图像是通过短曝光得到,因此不会出现伪影,但是清晰度较长曝光图像稍低。通过比较第一短曝光图像和第二短曝光图像能够确定被拍摄物体的位移信息。
具体的,分别在第一短曝光图像和第二短曝光图像中查找被拍摄物体的轮廓像素点坐标,根据两个被拍摄物体的轮廓像素点坐标可确定被拍摄物体的位移信息。
该位移信息可以包括整体移动的位移信息,也可以包括被拍摄物体局部移动的位移信息。
步骤130、根据位移信息确定长曝光图像的伪影区域,并对伪影区域进行修复。
根据位移信息和长曝光图像中相应位置的图像清晰度可确定长曝光图像中的伪影区域。可以根据第一短曝光图像或者第二短曝光图像的图像内容确定被拍摄对象对应的基础图像,用于替换长曝光图像中的伪影区域。然后,可通过锐化算法、差值算法对基础图像进行优化,得到清晰图像,将该清晰图像填充到伪影区域中。对于未覆盖的伪影区域可根据第一短曝光图像和第二短曝光图像以及长曝光图像中的相同位置区域或相邻位置区域中的图像进行修复。
本申请实施例提供的伪影消除方法,首先当检测到获取长曝光图像时,根据长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据长曝光图像的曝光停止时间通过第二摄像头获取第二短曝光图像。其次,根据第一短曝光图像和第二短曝光图像确定位移信息。再次,根据位移信息确定长曝光图像的伪影区域,最后对伪影区域进行修复。相对于只使用一个摄像头进行长曝光拍摄导致出现,本申请实施例针对具有双摄像头的移动终端,能够使用一个摄像头进行长曝光,并使用另一个摄像头在长曝光的起始时间和停止时间分别获取两个短曝光图像,根据两个短曝光图图像确定拍摄物体的位移信息,最后基于该位移信息对伪影区域进行修复,进而消除长曝光图像中的伪影区域,避免重复拍摄,提高系统资源利用率。同时拍摄者和被拍摄者均不需要严格保持不动,进而提高长曝光拍照的易用性。此外,使用两个摄像头同时获取长曝光图像和短曝光图像能够在长曝光的同时获取用于修复伪影的短曝光图像,由于两个摄像头之间的成像互不干扰,因此在具有双摄像头的移动终端上能够获取统一时刻的长曝光图像和短曝光图像,进而更加高效的修复伪影。
图2为本申请实施例提供的一种伪影消除方法的流程示意图,作为对上述实施例的进一步说明,包括:
步骤210、当检测到获取长曝光图像时,确定长曝光图像对应的长曝光时间。
用户可以在相机应用中设置曝光时间,或者相机应用根据当前环境亮度以及光圈大小等参数确定曝光时间。进一步的,根据预览阶段被拍摄物体的位移频率,确定曝光时间。如果被拍摄物体持续运动,则降低曝光时间。反之,如果被拍摄物体静止,则提高曝光时间。
步骤220、如果长曝光时间大于预设时间阈值,则根据长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据长曝光图像的曝光停止时间通过第二摄像头获取第二短曝光图像。
可选的,预设时间阈值可以为可变值。预设时间阈值可以通过机器学习得到。服务器或者移动终端获取当前用户以及多个其他用户的历史拍照数据,历史拍照数据包括曝光时间、图像内容以及环境参数。在计算出每个图像内容的图像情绪度后,进行机器学习,得到不同环境参数对应的曝光时间。当大于等于该曝光时间时,拍摄的图像清晰度较高。或者,在小于该曝光时间时曝光图像中出现伪影的概率较低。在步骤220中,可以根据当前的环境参数通过机器学习模型确定曝光时间作为预设时间阈值。
可选的,预设时间阈值可以为固定值。在夜景拍摄时,预设时间阈值可以为大于1秒。例如,夜景拍摄时,如果曝光时间大于1.2秒,则执行步骤220。可选的,预设时间阈值大于两次短曝光时间的总和。
步骤230、根据第一短曝光图像和第二短曝光图像确定位移信息。
步骤240、根据位移信息确定长曝光图像的伪影区域,并对伪影区域进行修复。
本申请实施例提供的伪影消除方法,能够估算曝光时间,并在曝光时间大于预设时间阈值时,根据第一短曝光图像和第二短曝光图像对长曝光图像中的伪影进行修复,避免在不存在伪影时仍然使用短曝光图像对长曝光图像进行修复,提高系统资源利用功率。
图3为本申请实施例提供的一种伪影消除方法的流程示意图,作为对上述实施例的进一步说明,包括:
步骤310、当检测到获取长曝光图像时,在长曝光图像的曝光起始时间启动第二摄像头获取第一短曝光图像。
在长曝光的曝光起始时间同步启动另一摄像头获取第一短曝光图像。进行长曝光的摄像头和同步进行短曝光的第二摄像头,可以分别为长焦摄像头和广角摄像头。在进行同步曝光时,将上述长焦摄像头和广角摄像头的拍摄范围调整一致。
步骤320、根据短曝光时间和长曝光图像的曝光停止时间确定短曝光起始时间。
为了在长曝光结束时同步进行的短曝光同时结束,此时需要根据短曝光时间估算第二短曝光图像的短曝光起始时间。可以在启动长曝光时,通过相机应用确定当前环境对应的短曝光时间。根据该短曝光时间和长曝光图像的长曝光图像的曝光停止时间,倒推出第二短曝光图像的短曝光起始时间。
步骤330、在短曝光起始时间启动第二摄像头获取第二短曝光图像。
在第二短曝光图像获取完毕时,长曝光图像同步完成长曝光。
步骤340、根据第一短曝光图像和第二短曝光图像确定位移信息。
步骤350、根据位移信息确定长曝光图像的伪影区域,并对伪影区域进行修复。
本申请实施例提供的伪影消除方法,能够根据短曝光时间和长曝光图像的曝光停止时间确定短曝光起始时间,实现在长曝光结束时,同步结束第二短曝光图像的获取,减少用户等待时间,提高系统资源利用率。
图4为本申请实施例提供的一种伪影消除方法的流程示意图,作为对上述实施例的进一步说明,包括:
步骤410、当检测到获取长曝光图像时,根据长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据长曝光图像的曝光停止时间通过第二摄像头获取第二短曝光图像。
步骤420、根据第一短曝光图像和第二短曝光图像确定位移信息。
可选的,根据像素点的迁移确定位移信息。
步骤430、获取位移信息对应的拍照对象。
根据位移信息确定获取发生位移的拍照对象。
步骤440、如果拍照对象为人像,则根据位移信息确定长曝光图像的伪影区域,并对伪影区域进行修复。
根据拍照对象轮廓确定是否为人像,或者是否包含人物。
本申请实施例提供的伪影消除方法,能够在人像拍摄时,对发生位移的人像进行修复,提高图像质量。
图5为本申请实施例提供的一种伪影消除方法的流程示意图,作为对上述实施例的进一步说明,包括:
步骤510、当检测到获取长曝光图像时,根据长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据长曝光图像的曝光停止时间通过第二摄像头获取第二短曝光图像。
步骤520、根据第一短曝光图像和第二短曝光图像确定位移信息。
步骤530、根据短曝光图像确定伪影区域对应的清晰图像。
可以将第一短曝光图像作为基础图像,即将用户在长曝光的曝光起始时间的动作作为清晰图像的基础图像。也可以将第二短曝光图像作为基础图像,即将用户在长曝光的曝光停止时间的动作作为清晰图像的基础图像。
在确定基础图像之后,根据伪影区域在短曝光图像中的像素特征,查找与该特征相同的短曝光图像中的非伪影区域作为参考区域,在长曝光图像中获取该参考区域对应的图像作为清晰图像。
步骤540、根据位移信息和伪影区域的位置信息确定清晰图像的目标位置信息。
可选的,被拍照的物体的形态未发生变化,但是被拍照物体的位置发生了移动。此时,可以将伪影区域的中间位置确定为目标位移信息。
步骤550、将清晰图像覆盖至目标位置信息。
将步骤530确定的清晰图形填充至目标位置。
步骤560、根据第一短曝光图像、第二短曝光图像和位移信息对伪影区域中的其他区域进行修复,其他区域为伪影区域中除清晰图像以外的区域。
可选的,获取长曝光图像的背景颜色分布特征,如果该颜色分布特征具有一定分布规律,则根据该分布规律修复其他区域。例如,背景颜色为单一颜色时,使用该单一颜色填充其他区域。
进一步的,根据位移信息确定第一短曝光图像和第二短曝光图像中的填充图像。将填充图像填充至其他区域。
将伪影区域中除清晰区域以外的区域称为其他区域。在填充清晰图像之后,需要对其他区域进行填充。
可选的,根据其他区域的位置信息从第一短曝光图像或第二短曝光图像中查找其他区域对应的像素特征,长曝光图像中获取该参考区域对应的图像作为其他区域的填充图像。
步骤570、对伪影区域进行修复。
本申请实施例提供的伪影消除方法,能够基于长曝光图像或者短曝光图像对伪影区域中的其他区域进行修复,提高图像清晰度。
图6为本申请实施例提供的一种伪影消除方法的流程示意图,作为对上述实施例的进一步说明,包括:
步骤610、当检测到获取长曝光图像时,根据长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据长曝光图像的曝光停止时间通过第二摄像头获取第二短曝光图像。
步骤620、根据第一短曝光图像和第二短曝光图像确定位移信息。
步骤630、根据短曝光图像确定伪影区域对应的清晰图像。
步骤640、根据位移信息对伪影区域中至少一个目标像素点的像素值进行积分,目标像素点为清晰区域对应的像素点。
伪影的行程除了被拍摄物体的移动,还包括拍摄者本身的移动。如果被拍摄物体自身未发生形态变化,如体态变化,则行程的伪影为条状模糊区域。此时,可以根据短曝光图像确定被拍摄物体的轮廓,基于该轮廓对伪影区域中对应于该轮廓以及该轮廓内部的像素点进行积分。积分结果表示清晰图像中像素点,即目标像素点的累计像素值。
步骤650、根据积分结果和位移信息计算各目标像素点的平均像素值。
根据位移信息以及曝光时间确定累计次数。根据该累计次数和累计像素值可计算目标像素点的平均像素值。
步骤660、根据平均像素值对清晰图像进行优化。
步骤670、根据位移信息和伪影区域的位置信息确定清晰图像的目标位置信息。并将清晰图像覆盖至目标位置信息。
步骤680、根据第一短曝光图像、第二短曝光图像和位移信息对伪影区域中的其他区域进行修复,其他区域为伪影区域中除清晰图像以外的区域。
步骤690、对伪影区域进行修复。
本申请实施例提供的伪影消除方法,能够通过积分方式确定清晰图像,实现根据伪影区域确定清晰化图像,提高清晰化图像确定的准确性,提高图像还原度,使图像更加清晰。
图7为本申请实施例提供的一种伪影消除装置的结构示意图。如图7所示,该装置包括:获取模块710、确定模块720和修复模块730。
获取模块710,用于当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,所述长曝光图像的曝光时间大于所述第一端曝光图像的曝光时间;
确定模块720,用于根据所述获取模块710获取的所述第一短曝光图像和所述第二短曝光图像确定位移信息;
修复模块730,用于根据所述确定模块720确定的所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
进一步的,获取模块710用于:
确定长曝光图像对应的长曝光时间;
如果所述长曝光时间大于预设时间阈值,则根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像。
进一步的,获取模块710用于:在所述长曝光图像的曝光起始时间启动第二摄像头获取第一短曝光图像;
根据短曝光时间和所述长曝光图像的曝光停止时间确定短曝光起始时间;
在所述短曝光起始时间启动第二摄像头获取第二短曝光图像。
进一步的,修复模块730用于:
获取所述位移信息对应的拍照对象;
如果所述拍照对象为人像,则根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
进一步的,确定模块720用于:
根据短曝光图像确定伪影区域对应的清晰图像;
根据所述位移信息和所述伪影区域的位置信息确定所述清晰图像的目标位置信息;
将所述清晰图像覆盖至所述目标位置信息;
根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,所述其他区域为所述伪影区域中除所述清晰图像以外的区域。
进一步的,确定模块720用于:
根据所述位移信息对所述伪影区域中至少一个目标像素点的像素值进行积分,所述目标像素点为所述清晰区域对应的像素点;
根据积分结果和所述位移信息计算各目标像素点的平均像素值;
根据所述平均像素值对所述清晰图像进行优化。
进一步的,确定模块720用于:根据所述位移信息确定所述第一短曝光图像和所述第二短曝光图像中的填充图像;
将所述填充图像填充至所述其他区域。
本申请实施例提供的伪影消除装置,首先当检测到获取长曝光图像时,获取模块710根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像;其次,确定模块720根据所述第一短曝光图像和所述第二短曝光图像确定位移信息;再次,修复模块730根据所述位移信息确定所述长曝光图像的伪影区域,最后对所述伪影区域进行修复。相对于只使用一个摄像头进行长曝光拍摄导致出现,本申请实施例针对具有双摄像头的移动终端,能够使用一个摄像头进行长曝光,并使用另一个摄像头在长曝光的起始时间和停止时间分别获取两个短曝光图像,根据两个短曝光图图像确定拍摄物体的位移信息,最后基于该位移信息对伪影区域进行修复,进而消除长曝光图像中的伪影区域,避免重复拍摄,提高系统资源利用率。同时拍摄者和被拍摄者均不需要严格保持不动,进而提高长曝光拍照的易用性。此外,使用两个摄像头同时获取长曝光图像和短曝光图像能够在长曝光的同时获取用于修复伪影的短曝光图像,由于两个摄像头之间的成像互不干扰,因此在具有双摄像头的移动终端上能够获取统一时刻的长曝光图像和短曝光图像,进而更加高效的修复伪影。
上述装置可执行本申请前述所有实施例所提供的方法,具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请前述所有实施例所提供的方法。
图8是本申请实施例提供的一种终端设备的结构示意图。如图8所示,该终端可以包括:壳体(图中未示出)、存储器801、中央处理器(Central Processing Unit,CPU)802(又称处理器,以下简称CPU)、存储在存储器801上并可在处理器802上运行的计算机程序、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部;所述CPU802和所述存储器801设置在所述电路板上;所述电源电路,用于为所述终端的各个电路或器件供电;所述存储器801,用于存储可执行程序代码;所述CPU802通过读取所述存储器801中存储的可执行程序代码来运行与所述可执行程序代码对应的程序。
所述终端还包括:外设接口803、RF(Radio Frequency,射频)电路805、音频电路806、扬声器811、电源管理芯片808、输入/输出(I/O)子系统809、触摸屏812、其他输入/控制设备810以及外部端口804,这些部件通过一个或多个通信总线或信号线807来通信。
应该理解的是,图示终端设备800仅仅是终端的一个范例,并且终端设备800可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于一种终端设备进行详细的描述,该终端设备以智能手机为例。
存储器801,所述存储器801可以被CPU802、外设接口803等访问,所述存储器801可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
外设接口803,所述外设接口803可以将设备的输入和输出外设连接到CPU802和存储器801。
I/O子系统809,所述I/O子系统809可以将设备上的输入输出外设,例如触摸屏812和其他输入/控制设备810,连接到外设接口803。I/O子系统809可以包括显示控制器8091和用于控制其他输入/控制设备810的一个或多个输入控制器8092。其中,一个或多个输入控制器8092从其他输入/控制设备810接收电信号或者向其他输入/控制设备810发送电信号,其他输入/控制设备810可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是,输入控制器8092可以与以下任一个连接:键盘、红外端口、USB接口以及诸如鼠标的指示设备。
其中,按照触摸屏的工作原理和传输信息的介质分类,触摸屏812可以为电阻式、电容感应式、红外线式或表面声波式。按照安装方式分类,触摸屏812可以为:外挂式、内置式或整体式。按照技术原理分类,触摸屏812可以为:矢量压力传感技术触摸屏、电阻技术触摸屏、电容技术触摸屏、红外线技术触摸屏或表面声波技术触摸屏。
触摸屏812,所述触摸屏812是用户终端与用户之间的输入接口和输出接口,将可视输出显示给用户,可视输出可以包括图形、文本、图标、视频等。可选的,触摸屏812将用户在触屏幕上触发的电信号(如接触面的电信号),发送给处理器802。
I/O子系统809中的显示控制器8091从触摸屏812接收电信号或者向触摸屏812发送电信号。触摸屏812检测触摸屏上的接触,显示控制器8091将检测到的接触转换为与显示在触摸屏812上的用户界面对象的交互,即实现人机交互,显示在触摸屏812上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是,设备还可以包括光鼠,光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸。
RF电路805,主要用于建立智能音箱与无线网络(即网络侧)的通信,实现智能音箱与无线网络的数据接收和发送。例如收发短信息、电子邮件等。
音频电路806,主要用于从外设接口803接收音频数据,将该音频数据转换为电信号,并且将该电信号发送给扬声器811。
扬声器811,用于将智能音箱通过RF电路805从无线网络接收的语音信号,还原为声音并向用户播放该声音。
电源管理芯片808,用于为CPU802、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
在本实施例中,中央处理器802用于:
当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,所述长曝光图像的曝光时间大于所述第一端曝光图像的曝光时间;
根据所述第一短曝光图像和所述第二短曝光图像确定位移信息;
根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
进一步的,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,包括:
确定长曝光图像对应的长曝光时间;
如果所述长曝光时间大于预设时间阈值,则根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像。
进一步的,所述根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,包括:
在所述长曝光图像的曝光起始时间启动第二摄像头获取第一短曝光图像;
根据短曝光时间和所述长曝光图像的曝光停止时间确定短曝光起始时间;
在所述短曝光起始时间启动第二摄像头获取第二短曝光图像。
进一步的,所述根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复,包括:
获取所述位移信息对应的拍照对象;
如果所述拍照对象为人像,则根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
进一步的,所述根据所述位移信息确定所述长曝光图像的伪影区域,包括:
根据短曝光图像确定伪影区域对应的清晰图像;
根据所述位移信息和所述伪影区域的位置信息确定所述清晰图像的目标位置信息;
将所述清晰图像覆盖至所述目标位置信息;
根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,所述其他区域为所述伪影区域中除所述清晰图像以外的区域。
进一步的,在根据短曝光图像确定伪影区域对应的清晰图像之后,包括:
根据所述位移信息对所述伪影区域中至少一个目标像素点的像素值进行积分,所述目标像素点为所述清晰区域对应的像素点;
根据积分结果和所述位移信息计算各目标像素点的平均像素值;
根据所述平均像素值对所述清晰图像进行优化。
进一步的,所述根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,包括:
根据所述位移信息确定所述第一短曝光图像和所述第二短曝光图像中的填充图像;
将所述填充图像填充至所述其他区域。
本申请实施例还提供一种包含终端设备可执行指令的存储介质,所述终端设备可执行指令在由终端设备处理器执行时用于执行一种伪影消除方法,该方法包括:
当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,所述长曝光图像的曝光时间大于所述第一端曝光图像的曝光时间;
根据所述第一短曝光图像和所述第二短曝光图像确定位移信息;
根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
进一步的,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,包括:
确定长曝光图像对应的长曝光时间;
如果所述长曝光时间大于预设时间阈值,则根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像。
进一步的,所述根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,包括:
在所述长曝光图像的曝光起始时间启动第二摄像头获取第一短曝光图像;
根据短曝光时间和所述长曝光图像的曝光停止时间确定短曝光起始时间;
在所述短曝光起始时间启动第二摄像头获取第二短曝光图像。
进一步的,所述根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复,包括:
获取所述位移信息对应的拍照对象;
如果所述拍照对象为人像,则根据所述位移信息确定所述长曝光图像的伪影区域,并对所述伪影区域进行修复。
进一步的,所述根据所述位移信息确定所述长曝光图像的伪影区域,包括:
根据短曝光图像确定伪影区域对应的清晰图像;
根据所述位移信息和所述伪影区域的位置信息确定所述清晰图像的目标位置信息;
将所述清晰图像覆盖至所述目标位置信息;
根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,所述其他区域为所述伪影区域中除所述清晰图像以外的区域。
进一步的,在根据短曝光图像确定伪影区域对应的清晰图像之后,包括:
根据所述位移信息对所述伪影区域中至少一个目标像素点的像素值进行积分,所述目标像素点为所述清晰区域对应的像素点;
根据积分结果和所述位移信息计算各目标像素点的平均像素值;
根据所述平均像素值对所述清晰图像进行优化。
进一步的,所述根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,包括:
根据所述位移信息确定所述第一短曝光图像和所述第二短曝光图像中的填充图像;
将所述填充图像填充至所述其他区域。
本申请实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的伪影消除操作,还可以执行本申请任意实施例所提供的伪影消除方法中的相关操作。
注意,上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解,本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由所附的权利要求范围决定。

Claims (8)

1.一种伪影消除方法,其特征在于,包括:
当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,所述长曝光图像的曝光时间大于所述第一短曝光图像的曝光时间;
根据所述第一短曝光图像和所述第二短曝光图像确定位移信息;
根据短曝光图像确定伪影区域对应的清晰图像;
根据所述位移信息和所述伪影区域的位置信息确定所述清晰图像的目标位置信息;
将所述清晰图像覆盖至所述目标位置信息;
根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,所述其他区域为所述伪影区域中除所述清晰图像以外的区域;
在根据短曝光图像确定伪影区域对应的清晰图像之后,包括:
根据所述位移信息对所述伪影区域中至少一个目标像素点的像素值进行积分,所述目标像素点为所述清晰区域对应的像素点;
根据积分结果和所述位移信息计算各目标像素点的平均像素值;
根据所述平均像素值对所述清晰图像进行优化。
2.根据权利要求1所述的伪影消除方法,其特征在于,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,包括:
确定长曝光图像对应的长曝光时间;
如果所述长曝光时间大于预设时间阈值,则根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像。
3.根据权利要求1所述的伪影消除方法,其特征在于,所述根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,包括:
在所述长曝光图像的曝光起始时间启动第二摄像头获取第一短曝光图像;
根据短曝光时间和所述长曝光图像的曝光停止时间确定短曝光起始时间;
在所述短曝光起始时间启动第二摄像头获取第二短曝光图像。
4.根据权利要求1所述的伪影消除方法,其特征在于,所述位移信息对应的拍照对象为人像。
5.根据权利要求1所述的伪影消除方法,其特征在于,所述根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,包括:
根据所述位移信息确定所述第一短曝光图像和所述第二短曝光图像中的填充图像;
将所述填充图像填充至所述其他区域。
6.一种伪影消除装置,其特征在于,包括:
获取模块,用于当检测到获取长曝光图像时,根据所述长曝光图像的曝光起始时间通过第二摄像头获取第一短曝光图像,根据所述长曝光图像的曝光停止时间通过所述第二摄像头获取第二短曝光图像,所述长曝光图像的曝光时间大于所述第一短曝光图像的曝光时间;
确定模块,用于根据所述获取模块获取的所述第一短曝光图像和所述第二短曝光图像确定位移信息;
修复模块,用于根据短曝光图像确定伪影区域对应的清晰图像;
根据所述位移信息和所述伪影区域的位置信息确定所述清晰图像的目标位置信息;
将所述清晰图像覆盖至所述目标位置信息;
根据所述第一短曝光图像、所述第二短曝光图像和所述位移信息对所述伪影区域中的其他区域进行修复,所述其他区域为所述伪影区域中除所述清晰图像以外的区域;
修复模块还用于:
根据所述位移信息对所述伪影区域中至少一个目标像素点的像素值进行积分,所述目标像素点为所述清晰区域对应的像素点;
根据积分结果和所述位移信息计算各目标像素点的平均像素值;
根据所述平均像素值对所述清晰图像进行优化。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-5中任一所述伪影消除方法。
8.一种终端,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-5任一所述的伪影消除方法。
CN201810936332.9A 2018-08-16 2018-08-16 伪影消除方法、装置、存储介质及终端 Active CN109040523B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810936332.9A CN109040523B (zh) 2018-08-16 2018-08-16 伪影消除方法、装置、存储介质及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810936332.9A CN109040523B (zh) 2018-08-16 2018-08-16 伪影消除方法、装置、存储介质及终端

Publications (2)

Publication Number Publication Date
CN109040523A CN109040523A (zh) 2018-12-18
CN109040523B true CN109040523B (zh) 2020-11-10

Family

ID=64631772

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810936332.9A Active CN109040523B (zh) 2018-08-16 2018-08-16 伪影消除方法、装置、存储介质及终端

Country Status (1)

Country Link
CN (1) CN109040523B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153291B (zh) * 2020-09-27 2022-09-06 维沃移动通信有限公司 拍照方法和电子设备
CN112422798A (zh) * 2020-11-18 2021-02-26 维沃移动通信有限公司 拍照方法、装置、电子设备和存储介质
CN113329169B (zh) * 2021-04-12 2022-11-22 浙江大华技术股份有限公司 成像方法、成像控制装置及计算机可读存储介质
CN113327215B (zh) * 2021-05-28 2022-10-21 浙江大华技术股份有限公司 一种宽动态图像合成方法、装置、电子设备及存储介质
CN113824873B (zh) * 2021-08-04 2022-11-15 荣耀终端有限公司 一种图像处理的方法及相关电子设备
CN113808054B (zh) * 2021-11-19 2022-05-06 北京鹰瞳科技发展股份有限公司 用于对眼底图像的视盘区域进行修复的方法和相关产品

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7903168B2 (en) * 2006-04-06 2011-03-08 Eastman Kodak Company Camera and method with additional evaluation image capture based on scene brightness changes
CN102780848A (zh) * 2011-05-11 2012-11-14 佳能株式会社 利用卷帘快门方法来执行摄像的摄像装置及其控制方法
CN102883108A (zh) * 2011-07-11 2013-01-16 佳能株式会社 摄像设备及其控制方法、图像处理设备和方法
CN105323425A (zh) * 2014-05-30 2016-02-10 苹果公司 融合图像系统中的场景运动校正
WO2018048838A1 (en) * 2016-09-06 2018-03-15 Apple Inc. Still image stabilization/optical image stabilization synchronization in multi-camera image capture
CN107820022A (zh) * 2017-10-30 2018-03-20 维沃移动通信有限公司 一种拍照方法及移动终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7903168B2 (en) * 2006-04-06 2011-03-08 Eastman Kodak Company Camera and method with additional evaluation image capture based on scene brightness changes
CN102780848A (zh) * 2011-05-11 2012-11-14 佳能株式会社 利用卷帘快门方法来执行摄像的摄像装置及其控制方法
CN102883108A (zh) * 2011-07-11 2013-01-16 佳能株式会社 摄像设备及其控制方法、图像处理设备和方法
CN105323425A (zh) * 2014-05-30 2016-02-10 苹果公司 融合图像系统中的场景运动校正
WO2018048838A1 (en) * 2016-09-06 2018-03-15 Apple Inc. Still image stabilization/optical image stabilization synchronization in multi-camera image capture
CN107820022A (zh) * 2017-10-30 2018-03-20 维沃移动通信有限公司 一种拍照方法及移动终端

Also Published As

Publication number Publication date
CN109040523A (zh) 2018-12-18

Similar Documents

Publication Publication Date Title
CN109040523B (zh) 伪影消除方法、装置、存储介质及终端
CN110493538B (zh) 图像处理方法、装置、存储介质及电子设备
EP3579544B1 (en) Electronic device for providing quality-customized image and method of controlling the same
JP6834056B2 (ja) 撮影モバイル端末
CN109547701B (zh) 图像拍摄方法、装置、存储介质及电子设备
CN109167931B (zh) 图像处理方法、装置、存储介质及移动终端
CN114205522B (zh) 一种长焦拍摄的方法及电子设备
CN109040524B (zh) 伪影消除方法、装置、存储介质及终端
CN113747085B (zh) 拍摄视频的方法和装置
CN107771391B (zh) 用于确定图像帧的曝光时间的方法和装置
CN104488258A (zh) 用于双相机快门的方法和设备
CN109040589B (zh) 图像处理方法、装置、存储介质及电子设备
CN107615745B (zh) 一种拍照方法及终端
CN107690804B (zh) 一种图像处理方法及用户终端
CN109327691B (zh) 图像拍摄方法、装置、存储介质及移动终端
CN113810604B (zh) 文档拍摄方法、电子设备和存储介质
CN108665510B (zh) 连拍图像的渲染方法、装置、存储介质及终端
CN112116624A (zh) 一种图像处理方法和电子设备
CN112291475B (zh) 拍照方法、装置及电子设备
CN109167893A (zh) 拍摄图像的处理方法、装置、存储介质及移动终端
CN111314606B (zh) 拍照方法、装置、电子设备及存储介质
CN112422798A (zh) 拍照方法、装置、电子设备和存储介质
CN108683858A (zh) 拍照优化方法、装置、存储介质及终端设备
KR102609734B1 (ko) 전자 장치 및 이미지의 전송 상태에 기반하여 이미지를 보정하는 방법
CN114612283A (zh) 图像处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant