CN109194882B - 图像处理方法、装置、电子设备及存储介质 - Google Patents

图像处理方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN109194882B
CN109194882B CN201810962774.0A CN201810962774A CN109194882B CN 109194882 B CN109194882 B CN 109194882B CN 201810962774 A CN201810962774 A CN 201810962774A CN 109194882 B CN109194882 B CN 109194882B
Authority
CN
China
Prior art keywords
image
exposure
frame
acquired
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810962774.0A
Other languages
English (en)
Other versions
CN109194882A (zh
Inventor
王宇鹭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810962774.0A priority Critical patent/CN109194882B/zh
Publication of CN109194882A publication Critical patent/CN109194882A/zh
Priority to US16/249,537 priority patent/US10943341B2/en
Priority to EP19152527.8A priority patent/EP3614661B1/en
Priority to PCT/CN2019/074993 priority patent/WO2020037959A1/en
Application granted granted Critical
Publication of CN109194882B publication Critical patent/CN109194882B/zh
Priority to US17/158,689 priority patent/US11532076B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • G06T5/90
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/743Bracketing, i.e. taking a series of images with varying exposure conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • H04N25/589Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields with different integration times, e.g. short and long exposures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors

Abstract

本申请提出一种图像处理方法和装置。其中,该方法包括:在夜景拍摄模式下,若检测到摄像模组当前的抖动程度大于第一阈值,则检测摄像模组当前采集的图像中是否包含人脸;若包括,则根据摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度;根据当前拍摄场景的光照度、每帧待采集图像对应的基准感光度及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长;根据每帧待采集图像对应的基准感光度及曝光时长,依次采集多帧图像并进行合成处理,以生成目标图像。由此,通过这种图像处理方法,不仅提升了人像夜景拍摄图像的整体动态范围和人脸提亮效果,而且避免了景物亮区产生过曝和亮度失真,改善了用户体验。

Description

图像处理方法、装置、电子设备及存储介质
技术领域
本申请涉及成像技术领域,尤其涉及一种图像处理方法、装置、电子设备及存储介质。
背景技术
随着科技的发展,智能移动终端(如智能手机、平板电脑等)越来越普及。绝大多数智能手机和平板电脑都内置有摄像头,并且随着移动终端处理能力的增强以及摄像头技术的发展,内置摄像头的性能越来越强大,拍摄图像的质量也越来越高。现在移动终端的操作简单又便于携带,在日常生活中人们使用智能手机和平板电脑等移动终端拍照已经成为一种常态。
智能移动终端在给人们的日常拍照带来便捷的同时,人们对拍摄的图像质量的要求也越来越高。然而,由于专业水平限制,人们不知如何根据拍摄场景设置合适的拍摄参数,因此很难拍出与专业相机效果一样好的图像,尤其在一些恶劣场景中,比如阴雨天气、逆光场景、夜景等。因此,无需自行设定拍摄参数的智能场景识别技术应运而生。
在夜景人脸拍摄场景中,由于光照条件差,通常需要延长曝光时间以保证曝光量,从而导致拍摄的图像不仅整体亮度低,人脸提亮效果差,而且对人脸进行正常曝光时,景物亮区容易产生过曝和亮度失真。相关技术中,适用于夜景拍摄的技术有高动态范围图像(High-Dynamic Range,简称HDR)技术中的HDR+技术。
HDR+技术是指拍摄多张曝光时间相同的欠曝图像,然后将这些图像在RAW域(互补金属氧化物半导体(Complementary Metal Oxide Semiconductor,简称CMOS)或者电荷耦合器件(Charge-coupled Device,简称CCD)图像感应器将捕捉到的光源信号转化为数字信号的原始数据)上叠合至目标亮度的技术,由于曝光时间较短且时间相同,因此对去抖动和鬼影有较好的效果,但是对动态范围的提升很有限,而且对整体画面亮度的提升也有不够高。
发明内容
本申请提出的图像处理方法、装置、电子设备及存储介质,用于解决相关技术中,在人像夜景场景中拍摄的图像不仅动态范围和整体亮度低,人脸提亮效果差,而且景物亮区容易产生过曝和亮度失真,影响用户体验的问题。
本申请一方面实施例提出的图像处理方法,包括:在夜景拍摄模式下,检测摄像模组当前的抖动程度;若确定所述抖动程度大于第一阈值,则检测所述摄像模组当前采集的图像中是否包含人脸;若包括,则根据所述摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度;根据当前拍摄场景的光照度、所述每帧待采集图像对应的基准感光度及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长;根据所述每帧待采集图像对应的基准感光度及曝光时长,依次采集多帧图像;将所述采集的多帧图像进行合成处理,以生成目标图像。
本申请另一方面实施例提出的图像处理装置,包括:第一检测模块,用于在夜景拍摄模式下,检测摄像模组当前的抖动程度;第二检测模块,用于确定所述抖动程度大于第一阈值时,检测所述摄像模组当前采集的图像中是否包含人脸;第一确定模块,用于摄像模组当前采集的图像中是否包含人脸时,根据所述摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度;第二确定模块,用于根据当前拍摄场景的光照度、所述每帧待采集图像对应的基准感光度及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长;采集模块,用于根据所述每帧待采集图像对应的基准感光度及曝光时长,依次采集多帧图像;合成模块,用于将所述采集的多帧图像进行合成处理,以生成目标图像。
本申请再一方面实施例提出的电子设备,其包括:所述摄像模组、存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如前所述的图像处理方法。
本申请再一方面实施例提出的计算机可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如前所述的图像处理方法。
本申请又一方面实施例提出的计算机程序,该程序被处理器执行时,以实现本申请实施例所述的图像处理方法。
本申请实施例提供的图像处理方法、装置、电子设备、计算机可读存储介质及计算机程序,在夜景拍摄场景包含人脸时,通过根据摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度,并根据当前拍摄场景的光照度以及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长,从而通过拍摄多张不同曝光时长的图像进行合成,不仅提升了人像夜景拍摄模式下拍摄图像的整体动态范围和人脸提亮效果,而且避免了景物亮区产生过曝和亮度失真,提高了人像夜景图像的视觉效果,改善了用户体验。
本申请附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本申请实施例所提供的一种图像处理方法的流程示意图;
图2为本申请实施例所提供的另一种图像处理方法的流程示意图;
图3为本申请实施例所提供的一种图像处理装置的结构示意图;
图4为本申请实施例所提供的电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的要素。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
本申请实施例针对相关技术中,在人像夜景场景中拍摄的图像不仅动态范围和整体亮度低,人脸提亮效果差,而且景物亮区容易产生过曝和亮度失真,影响用户体验的问题,提出一种图像处理方法。
本申请实施例提供的图像处理方法,在夜景拍摄场景包含人脸时,通过根据摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度,并根据当前拍摄场景的光照度以及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长,从而通过拍摄多张不同曝光时长的图像进行合成,不仅提升了人像夜景拍摄模式下拍摄图像的整体动态范围和人脸提亮效果,而且避免了景物亮区产生过曝和亮度失真,提高了人像夜景图像的视觉效果,改善了用户体验。
下面参考附图对本申请提供的图像处理方法、装置、电子设备、存储介质及计算机程序进行详细描述。
图1为本申请实施例所提供的一种图像处理方法的流程示意图。
如图1所示,该图像处理方法,包括以下步骤:
步骤101,在夜景拍摄模式下,检测摄像模组当前的抖动程度。
其中,夜景拍摄模式,是指拍摄场景的环境光照度小于预设的阈值时,所采用的拍摄模式。也就是说,拍摄场景的环境光照度是是否启用夜景拍摄模式的决定因素,与拍摄场景是否为“夜晚”无关。比如,在照明条件良好的“夜晚”场景,即环境光照度大于预设阈值的“夜晚”场景,则无需启用夜景拍摄模式;而在环境光照度小于预设阈值的非“夜晚”场景,则需要启用夜景拍摄模式。
需要说明的是,实际使用时,环境光照度的阈值可以根据实际需要或者经验预设,本申请实施例对此不做限定。
在本申请实施例中,可以通过获取电子设备当前的陀螺仪(Gyro-sensor)信息,确定电子设备当前的抖动程度,即摄像模组当前的抖动程度。
陀螺仪又叫角速度传感器,可以测量物理量偏转、倾斜时的转动角速度。在电子设备中,陀螺仪可以很好的测量转动、偏转的动作,从而可以精确分析判断出使用者的实际动作。电子设备的陀螺仪信息(gyro信息)可以包括手机在三维空间中三个维度方向上的运动信息,三维空间的三个维度可以分别表示为X轴、Y轴、Z轴三个方向,其中,X轴、Y轴、Z轴为两两垂直关系。
需要说明的是,在本申请实施例一种可能的实现形式中,可以根据电子设备当前的gyro信息,确定摄像模组当前的抖动程度。电子设备在三个方向上的gyro运动的绝对值越大,则摄像模组的抖动程度越大。具体的,可以预设在三个方向上gyro运动的绝对值阈值,并根据获取到的当前在三个方向上的gyro运动的绝对值之和,与预设的阈值的关系,确定摄像模组的当前的抖动程度。
举例来说,假设预设的阈值为第二阈值A、第三阈值B、第四阈值C,且A<B<C,当前获取到的在三个方向上gyro运动的绝对值之和为S。若S<A,则确定摄像模组当前的抖动程度为“无抖动”;若A<S<B,则可以确定摄像模组当前的抖动程度为“轻微抖动”;若B<S<C,则可以确定摄像模组当前的抖动程度为“小抖动”;若S>C,则可以确定摄像模组当前的抖动程度为“大抖动”。
需要说明的是,上述举例仅为示例性的,不能视为对本申请的限制。实际使用时,可以根据实际需要预设阈值的数量和各阈值的具体数值,以及根据gyro信息与各阈值的关系,预设gyro信息与摄像模组抖动程度的映射关系。
步骤102,判断所述抖动程度是否大于第一阈值,若是,执行步骤103;否则,执行步骤108。
步骤103,检测所述摄像模组当前采集的图像中是否包含人脸,若是,执行步骤104;否则,执行步骤109。
需要说明的是,在本申请实施例中,若检测到摄像模组当前的抖动程度大于第一阈值,并且检测到摄像模组当前采集的图像中包含人脸,则可以采用本申请实施例提供的图像处理方法,做进一步处理,否则可以采用其他预设的拍摄模式拍摄。
在本申请实施例中,摄像模组当前采集的图像中是否包含人脸可通过人脸识别技术来确定。人脸识别技术,是通过分析比较人脸视觉特征信息进行身份鉴别,它属于生物特征识别技术,是对生物体(一般特指人)本身的生物特征来区分生物体个体。目前,人脸识别技术已应用在众多领域当中,例如,数码相机人脸自动对焦和笑脸快门技术;企业、住宅安全和管理;门禁系统;摄像监视系统等。常用的人脸识别算法包括:基于人脸特征点的识别算法(Feature-based recognition algorithms)、基于整幅人脸图像的识别算法(Appearance-based recognitio algorithms)、基于模板的识别算法(Template-basedrecognition algorithms)、利用神经网络进行识别的算法(Recognition algorithmsusing neural network)等等。
步骤104,根据所述摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度。
其中,感光度,又称为ISO值,是值衡量底片对于光的灵敏程度的指标。对于感光度较低的底片,需要曝光更长的时间以达到跟感光度较高的底片相同的成像。数码相机的感光度是一种类似于胶卷感光度的一种指标,数码相机的ISO可以通过调整感光器件的灵敏度或者合并感光点来调整,也就是说,可以通过提升感光器件的光线敏感度或者合并几个相邻的感光点来达到提升ISO的目的。需要说明的是,无论是数码或是底片摄影,为了减少曝光时间,使用相对较高的感光度通常会引入较多的噪声,从而导致图像质量降低。
在本申请实施例中,基准感光度,是指根据摄像模组当前的抖动程度,确定的与当前的抖动程度相适应的最低感光度。
需要说明的是,在本申请实施例中,可以通过同时采集多帧感光度较低的图像,并将采集的多帧图像合成以生成目标图像的方式,提升夜景拍摄图像的动态范围和整体亮度,并且可以通过控制感光度的值,有效抑制图像中的噪声,提高夜景拍摄图像的质量。其中,待采集图像的数量可以根据实际需要提前预设,比如,在本申请实施例中,采集图像的数量可以是7帧。
可以理解的是,采集的图像的数量以及采集图像的感光度会影响到整体的拍摄时长,拍摄时长过长,可能会导致手持拍摄时摄像模组的抖动程度加剧,从而影响图像质量。因此,可以根据摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度,以使得拍摄时长控制在合适的范围内。
具体的,若摄像模组当前的抖动程度较小,则可以将每帧待采集图像对应的基准感光度适当压缩为较小的值,以有效抑制每帧图像的噪声、提高拍摄图像的质量;若摄像模组当前的抖动程度较大,则可以将每帧待采集图像对应的基准感光度适当提高为较大的值,以缩短拍摄时长。
举例来说,若确定摄像模组当前的抖动程度为“无抖动”,则可以确定当前可能为脚架拍摄模式,此时可以将基准感光度确定为较小的值,以尽量获得更高质量的图像,比如确定基准感光度为100;若确定摄像模组当前的抖动程度为“轻微抖动”,则可以确定当前可能为手持拍摄模式,此时可以将基准感光度确定为较大的值,以降低拍摄时长,比如确定基准感光度为200;若确定摄像模组当前的抖动程度为“小抖动”,则可以确定当前可能为手持拍摄模式,此时可以进一步增大基准感光度,以降低拍摄时长,比如确定基准感光度为220;若确定摄像模组当前的抖动程度为“大抖动”,则可以确定当前的抖动程度过大,此时可以进一步增大基准感光度,以降低拍摄时长,比如确定基准感光度为250。
需要说明的是,上述举例仅为示例性的,不能视为对本申请的限制。实际使用时,当摄像模组的抖动程度变化时,可以根据实际情况改变待采集图像的基准感光度,以获得最优的方案。其中,摄像模组的抖动程度与每帧待采集图像对应的基准感光度的映射关系,可以根据实际需要预设。
步骤105,根据当前拍摄场景的光照度、所述每帧待采集图像对应的基准感光度及预设的曝光补偿模式,确定所述每帧待采集图像对应的曝光时长。
其中,曝光时长,是指光线通过镜头的时间。
在本申请实施例中,可以利用摄像模组中的测光模块,获取当前拍摄场景的光照度,并利用自动曝光控制(Auto Exposure Control,简称AEC)算法,确定当前光照度对应的曝光量,进而根据确定出的曝光量、每帧待采集图像对应的基准感光度以及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长。
需要说明的是,曝光量与光圈、曝光时长和感光度有关。其中,光圈也就是通光口径,决定单位时间内光线通过的数量。当每帧待采集图像对应的基准感光度相同,并且光圈大小相同时,当前拍摄场景的光照度对应的曝光量越大,每帧待采集图像对应的曝光时长越大。
进一步的,每帧待采集图像对应的曝光时长是不同的,以获得不同动态范围的图像,使得合成后的图像具有更高的动态范围,提高图像的整体亮度和质量。即在本申请实施例一种可能的实现形式中,上述步骤105,可以包括:
根据所述当前拍摄场景的光照度,确定基准曝光量;
根据所述基准曝光量及所述每帧待采集图像对应的基准感光度,确定基准曝光时长;
根据所述基准曝光时长及预设的曝光补偿模式,确定所述每帧待采集图像对应的曝光时长。
其中,基准曝光量,是指根据当前拍摄场景的光照度,确定的当前拍摄场景的光照度对应的正常曝光量。光圈的大小确定时,即可根据基准感光度和基准曝光量,确定出基准曝光时长。
在本申请实施例中,可以通过预设曝光补偿模式,对每帧待采集图像分别采取不同的曝光补偿策略,使得待采集图像对应于不同的曝光量,以获得具有不同动态范围的图像。
需要说明的是,预设的曝光补偿模式是指为每帧待采集图像分别预设的曝光值(Exposure Value,简称EV)的组合。在曝光值最初的定义中,曝光值并不是指一个准确的数值,而是指“能够给出相同的曝光量的所有相机光圈与曝光时长的组合”。感光度、光圈和曝光时长确定了相机的曝光量,不同的参数组合可以产生相等的曝光量,即这些不同组合的EV值是一样的,比如,在感光度相同的情况下,使用1/125秒曝光时长和f11的光圈组合,与使用1/250秒曝光时间与f8快门的组合,获得的曝光量是相同的,即EV值是相同的。EV值为0时,是指感光度为100、光圈系数为f1、曝光时长为1秒时获得的曝光量;曝光量增加一档,即曝光时长增加一倍,或者感光度增加一倍,或者光圈增加一档,EV值增加1,也就是说,1EV对应的曝光量是0EV对应的曝光量的两倍。如表1所示,为曝光时长、光圈、感光度分别单独变化时,与EV值的对应关系。
表1
Figure BDA0001774201020000071
摄影技术进入到数码时代之后,相机内部的测光功能已经非常强大,EV则经常用来表示曝光刻度上的一个级差,许多相机都允许设置曝光补偿,并通常用EV来表示。在这种情况下,EV是指相机测光数据对应的曝光量与实际曝光量的差值,比如+1EV的曝光补偿是指相对于相机测光数据对应的曝光量增加一档曝光,即实际曝光量为相机测光数据对应的曝光量的两倍。
在本申请实施例中,预设曝光补偿模式时,可以将确定的基准曝光量对应的EV值预设为0,+1EV是指增加一档曝光,即曝光量为基准曝光量的2倍,+2EV是指增加两档曝光,即曝光量为基准曝光量的4倍,-1EV是指减少一档曝光,即曝光量为基准曝光量的0.5倍等等。
举例来说,若待采集的图像数量为7帧,则预设的曝光补偿模式对应的EV值范围可以是[+1,+1,+1,+1,0,-2.5,-5]。其中,曝光补偿模式为+1EV的帧是轻度的过曝帧,用于整体降噪,能够有效的提高暗部的细节,并抑制暗部的噪声;由于在图像中存在人脸时,AEC算法是以人脸区域为目标进行测光并计算基准曝光量的,因此曝光补偿模式为0EV的帧可以用于刻画人脸亮度和细节的基准;曝光补偿模式为-2.5EV和-5EV的帧是两帧欠曝帧,用于提升图像中亮光部分的高光细节,让夜景拍摄图像中的高光物体(例如广告牌、发光文字等)不会过曝,并且可以保持高光到暗区之间的过渡,保持较好的明暗过渡的效果。
需要说明的是,预设的曝光补偿模式对应的各EV值既可以是根据实际需要具体设置的,也可以是根据设置的EV值范围,并依据各EV值之间的差值相等的原则求得的,本申请实施例对此不做限定。
在本申请实施例一种可能的实现形式中,光圈的大小可以是不变的,并且使用确定的基准感光度采集各待采集的图像,因此,在根据基准曝光量和基准感光度,确定了基准曝光时长之后,即可根据预设的曝光补偿模式和基准曝光时长,确定出每帧待采集图像对应的曝光时长。具体的,若待采集图像对应的曝光补偿模式为+1EV,则该待采集图像对应的曝光时长为基准时长的2倍;若待采集图像对应的曝光补偿模式为-1EV,则该待采集图像对应的曝光时长为基准时长的0.5倍,以此类推。
举例来说,假设待采集的图像数量为7帧,对应的预设的曝光补偿模式对应的EV范围可以是[+1,+1,+1,+1,0,-3,-6],根据基准曝光量和基准感光度,确定出基准曝光时长为100毫秒,则每帧待采集图像对应的曝光时长分别为200毫秒、200毫秒、200毫秒、200毫秒、100毫秒、12.5毫秒、6.25毫秒。
进一步的,预设的曝光补偿模式可以有多种,实际使用时,可以根据摄像模组的实时情况,确定与当前情况相符的曝光补偿模式。即在本申请实施例一种可能的实现形式中,根据基准曝光时长及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长之前,还包括:
根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式。
可以理解的是,摄像模组当前的抖动程度不同,可以采用不同的曝光补偿模式,以使得拍摄时长可以与抖动程度相适应,进一步提高图像质量。因此,在本申请实施例一种可能的实现形式中,可以预设摄像模组的抖动程度与曝光补偿模式的映射关系,以根据摄像模组当前的抖动程度,动态调整曝光补偿模式。
比如,摄像模组抖动程度在A范围内时,对应的曝光补偿模式的EV值范围可以是[+1,+1,+1,+1,0,-3,-5];摄像模组抖动程度在B范围内时,对应的曝光补偿模式的EV值范围可以是[0,0,0,0,-2,-4,-6]。
进一步的,摄像模组当前的所处的模式不同,可能会导致根据环境光照度确定的基准曝光量不同,因此,还可以根据摄像模组当前的设置模式,确定预设的曝光补偿策略。即在本申请实施例一种可能的实现形式中,确定预设的曝光补偿模式,还可以包括:
若所述摄像模组当前启动了自动曝光功能,则根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式为第一模式;
否则,根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式为第二模式,其中,第二模式对应的曝光补偿范围,大于所述第一模式对应的曝光补偿范围。
需要说明的是,当检测到摄像模组当前启动了自动曝光功能,摄像模组的测光模块会自动以人脸区域为主进行测光,并根据人脸区域的测光结果确定基准曝光量。然而,在夜景模式中,人脸区域的光照度通常较低,从而导致确定的基准曝光量,与未开启自动曝光功能时确定的基准曝光量相比较高,若在包含人脸时仍然采集过多的过曝帧,则容易导致人脸区域过曝,从而导致目标图像的效果较差。因此,对于相同的抖动程度,摄像模组当前开启自动曝光功能与未开启自动曝光功能时相比,其对应的曝光补偿模式需要具有较低的曝光补偿范围。
在本申请实施例一种可能的实现形式中,对于相同的抖动程度,可以根据摄像模组当前是否开启了自动曝光功能,采用不同的曝光补偿策略。因此,对于相同的抖动程度,可以对应于多个曝光补偿模式。比如,摄像模组的抖动程度为“轻微抖动”,对应的预设的曝光补偿模式有第一模式和第二模式,其中,第一模式对应的各EV值为[0,0,0,0,-2,-4,-6],第二模式对应的各EV值为[+1,+1,+1,+1,0,-3,-6]。在确定了摄像模组当前的抖动程度,以及根据摄像模组当前是否开启了自动曝光功能之后,即可确定出与当前的实际情况相符的预设的曝光补偿模式。
举例来说,假设摄像模组当前的抖动程度为“轻微抖动”,对应的预设的曝光补偿模式有第一模式和第二模式,其中,第一模式对应的各EV值为[0,0,0,0,-2,-4,-6],第二模式对应的各EV值为[+1,+1,+1,+1,0,-3,-6],可见,第一模式的曝光补偿范围小于第二模式的曝光补偿范围。若检测到摄像模组当前开启了自动曝光功能,则确定预设的曝光补偿模式为第一模式,即各EV值为[0,0,0,0,-2,-4,-6];若检测到摄像模组当前未开启自动曝光功能,则确定预设的曝光补偿模式为第二模式,即各EV值为[+1,+1,+1,+1,0,-3,-6]。
进一步的,摄像模组中的元器件的性能,也可能对曝光补偿模式产生影响。即在本申请实施例一种可能的实现形式中,在确定预设的曝光补偿模式之前,还可以确定摄像模组中各元器件的属性信息;进而根据各元器件的属性信息及当前的抖动程度,确定预设的曝光补偿模式。比如,针对不同的传感器、光圈、快门、镜头,以及不同的AEC算法等,曝光补偿模式对应的具体EV值可能存在差距。
步骤106,根据所述每帧待采集图像对应的基准感光度及曝光时长,依次采集多帧图像。
步骤107,将所述采集的多帧图像进行合成处理,以生成目标图像。
在本申请实施例中,确定了每帧待采集图像对应的基准感光度及曝光时长之后,即可根据基准感光度及曝光时长,依次采集多帧图像,并将采集到的多帧图像进行合成处理,以生成目标图像。
进一步的,在对采集到的多帧图像进行合成处理时,可以为每帧图像设置不同的权重,以获得效果最佳的目标图像。即在本申请实施例一种可能的实现形式中,上述步骤107,可以包括:
根据预设的所述多帧图像中每帧待采集图像对应的权重,将所述多帧图像进行合成处理。
步骤108,以第一预设拍摄模式拍摄。
步骤109,以第二预设拍摄模式拍摄。
需要说明的是,第一预设模式,是指在摄像模组的抖动程度小于第一阈值时,摄像模组采取的拍摄模式,比如可以是普通夜景拍摄模式、脚架夜景拍摄模式。第二预设模式,是指摄像模组的抖动程度大于第一阈值,并且摄像模组当前采集的图像中未包含人脸时,摄像模组采取的拍摄模式,比如可以是手持夜景拍摄模式。
本申请实施例提供的图像处理方法,在夜景拍摄场景包含人脸时,通过根据摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度,并根据当前拍摄场景的光照度以及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长,从而通过拍摄多张不同曝光时长的图像进行合成,不仅提升了人像夜景拍摄模式下拍摄图像的整体动态范围和人脸提亮效果,而且避免了景物亮区产生过曝和亮度失真,提高了人像夜景图像的视觉效果,改善了用户体验。
在本申请一种可能的实现形式中,可以根据摄像模组的性能,预设待采集图像对应的曝光时长所属的时长范围,若确定出的待采集图像对应的曝光时长不在预设的时长范围内,则可以修改该待采集图像对应的曝光时长,以在保证图像质量的同时,尽量减少拍摄时长,避免曝光时长过长或过短,而影响采集的图像的质量。
下面结合图2,对本申请实施例提供的另一种图像处理方法进行进一步说明。
图2为本申请实施例所提供的另一种图像处理方法的流程示意图。
如图2所示,该图像处理方法,包括以下步骤:
步骤201,在确定摄像模组当前的抖动程度大于第一阈值且检测到所述摄像模组当前采集的图像中包含人脸时,根据所述抖动程度,确定每帧待采集图像对应的基准感光度。
步骤202,根据当前拍摄场景的光照度、所述每帧待采集图像对应的基准感光度及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长。
上述步骤201-202的具体实现过程及原理,可以参照上述实施例的详细描述,此处不再赘述。
步骤203,检测所述每帧待采集图像对应的曝光时长是否在预设时长范围内。
需要说明的是,为尽量减少手持拍摄时的抖动程度,当检测到摄像模组存在抖动时,会根据摄像模组当前的抖动程度,在保证图像质量的前提下,尽量压缩拍摄时长,即将每帧图像的曝光时长合理的压缩在可容忍的极限范围内。
在本申请实施例中,首先根据摄像模组当前抖动程度,确定出基准感光度,进而根据当前拍摄场景的光照度及基准感光度,确定出基准曝光时长,基准曝光时长一般是处于预设的时长范围内的。之后即可根据预设的曝光补偿模式及基准曝光时长,确定出各帧待采集图像对应的曝光时长。然而,由于各帧待采集图像对应的曝光时长是根据预设的曝光补偿模式及基准曝光时长推算出来的,因此,可能导致一帧或多帧待采集图像对应的曝光时长,超过了预设的时长范围,从而导致最终获取到的图像效果不理想。
比如,若某帧待采集图像对应的曝光时长大于预设的时长最大值,则不仅会导致该帧图像中可能包括鬼影,还会使整体的拍摄时长延长;若某帧待采集图像对应的曝光时长小于预设的时长最小值,则可能导致该帧图像中的噪声过大,而并未采集到有效的成像信息。
可以理解的是,在确定出每帧待采集的图像对应的曝光时长之后,即可将各帧待采集图像对应的曝光时长与预设的时长范围相比较,以判断每帧待采集图像对应的曝光时长是否在预设时长范围内。
进一步的,曝光的时长范围可以根据实际情况预设,摄像模组可以容忍的极限范围,可能与摄像模组中的元器件的设置方式有关。即在本申请实施例一种可能的实现形式中,上述步骤203之前,还可以包括:
根据所述摄像模组是否具有光学防抖功能,确定所述预设时长范围。
其中,光学防抖(英语:Optical image stabilization),是指在照相机或者其他类似成像仪器中,通过光学元器件的设置,例如镜头设置,来避免或者减少扑捉光学信号过程中出现的仪器抖动现象,从而提高成像质量。举例来说,若摄像模组中元器件的设置方式为镜片移动式,或者为CCD移动式等,由于上述设置方式均是通过可移动式的部件,对发生振动的光路进行补偿,从而减轻照片模糊的效果。即其自身可以抵消掉一部分的抖动,从而与不可实现光学防抖的摄像模组相比,在相同的抖动程度下,可实现光学防抖功能的摄像模组采集到的图像中鬼影和模糊的程度较轻。因此,与不可实现光学防抖的摄像模组相比,可以适当扩大预设的时长范围,特别是时长范围的上限,以获得质量更好的图像。
步骤204,若至少一帧待采集图像的曝光时长未在所述预设时长范围内,则根据所述预设时长范围,更新所述至少一帧待采集图像的曝光时长,以使所述至少一帧待采集图像的曝光时长位于所述预设的时长范围内。
在本申请实施例中,若存在待采集图像的曝光时长未在预设时长范围内,则可以根据预设时长范围,更新该待采集图像的曝光时长,以使得更新后的曝光时长位于预设的时长范围内。
举例来说,假设预设的时长范围为10毫秒~200毫秒,待采集的图像数量为7帧,确定出的每帧待采集图像对应的曝光时长分别为220毫秒、220毫秒、220毫秒、220毫秒、100毫秒、12.5毫秒、6.25毫秒,那么前4帧待采集图像以及第7帧待采集图像的曝光时长不在预设的时长范围内,则可以将4帧曝光时长为220毫秒的待采集图像的曝光时长,更新为200毫秒;将第7帧曝光时长为6.25毫秒的待采集图像的曝光时长,更新为10毫秒。
进一步的,在对曝光时长未在预设时长范围内的待采集图像的曝光时长更新之后,会造成其曝光量的改变,从而可能导致更新曝光时长的待采集图像与其他未更新曝光时长的待采集图像的曝光时长相等或相近,即曝光量相等或相近,从而导致曝光补偿模式的改变,最终导致获取到的目标图像不符合期望。因此,在更新待采集图像的曝光时长之后,可以根据其更新前后曝光时长的差值,修改其他帧待采集图像的曝光时长及感光度。即在本申请实施例一种可能的实现形式中,上述步骤204之后,还可以包括:
根据所述至少一帧待采集图像更新前的曝光时长及更新后的曝光时长的差值,确定所述每帧待采集图像对应的曝光量调整模式;
根据所述曝光量调整模式,调整所述每帧待采集图像的感光度及曝光时长。
可以理解的是,在本申请实施例一种可能的实现形式中,还可以预设曝光时长差值的第四阈值,若待采集图像更新前后的曝光时长的差值大于第四阈值,则可以确定每帧待采集图像对应的曝光量调整模式为“调整”,并根据待采集图像更新前的曝光时长及更新后的曝光时长的差值,相应的修改其他帧的曝光时长,以使得各帧待采集图像曝光量之间的差值与更新前相同;若待采集图像更新前后的曝光时长的差值小于第四阈值,则可以认为更新前后各帧待采集图像的曝光量之间的差值较小,可以忽略不计,即确定每帧待采集图像对应的曝光量调整模式为“不调整”。
需要说明的是,在根据待采集图像更新前的曝光时长及更新后的曝光时长的差值,对各帧待采集图像的曝光时长进行更新之后,很可能造成一些待采集图像更新后的曝光时长未在预设的时长范围内,因此,可以同时调整待采集图像的曝光时长和感光度,以使得待采集图像更新后的曝光时长均处于预设的时长范围内。
举例来说,假设预设的时长范围为10毫秒~200毫秒,第四阈值为20毫秒。待采集的图像数量为7帧,基准感光度为100,每帧待采集图像更新前的曝光时长分别为230毫秒、230毫秒、230毫秒、230毫秒、150毫秒、50毫秒、12.5毫秒,那么4帧曝光时长为230毫秒的待采集图像的曝光时长不在预设的时长范围内,则可以将4帧曝光时长为230毫秒的待采集图像的曝光时长,更新为200毫秒,即每帧待采集图像更新后的曝光时长分别为200毫秒、200毫秒、200毫秒、200毫秒、150毫秒、50毫秒、12.5毫秒。可见,更新后的4帧待采集图像的曝光时长与其更新前的曝光时长的差值为30毫秒,大于20毫秒,从而为保证各帧图像间曝光量的变化趋势,则需要对各帧的曝光时长及感光度均进行调整,从而确定曝光调整模式为“调整”,比如将前4帧待采集图像的感光度调整为(100×230)/200=115,相应的将第5帧采集图像的曝光时长调整为(100×150)/115=3000/23毫秒,将第6帧采集图像的曝光时长调整为(100×50)/115=1000/23毫秒,将第7帧采集图像的曝光时长调整为(100×12.5)/115=250/23毫秒。
需要说明的是,上述举例仅为示例性的,不能视为对本申请的限制。实际使用时,可以根据实际需要预设第四阈值,本申请对此不做限定。
步骤205,根据所述每帧待采集图像对应的基准感光度及更新后的曝光时长,依次采集多帧图像。
步骤206,将所述采集的多帧图像进行合成处理,以生成目标图像。
上述步骤205-206的具体实现过程及原理,可以参照上述实施例的详细描述,此处不再赘述。
本申请实施例提供的图像处理方法,在夜景拍摄场景包含人脸时,通过根据摄像模组当前的抖动程度,确定了每帧待采集图像对应的基准感光度,并根据当前拍摄场景的光照度以及预设的曝光补偿模式,确定了每帧待采集图像对应的曝光时长,进而根据预设的时长范围,调整曝光时长超过预设的时长范围的待采集图像对应的曝光时长,从而不仅使得每帧待采集图像对应的曝光时长都处于预设的范围内,而且保证了每帧待采集图像都是按照预设的曝光补偿模式采集的,进一步提高了人像夜景拍摄图像的质量,改善了用户体验。
为了实现上述实施例,本申请还提出一种图像处理装置。
图3为本申请实施例提供的一种图像处理装置的结构示意图。
如图3所示,该图像处理装置30,包括:
第一检测模块31,用于在夜景拍摄模式下,检测摄像模组当前的抖动程度;
第二检测模块32,用于确定所述抖动程度大于第一阈值时,检测所述摄像模组当前采集的图像中是否包含人脸;
第一确定模块33,用于摄像模组当前采集的图像中是否包含人脸时,根据所述摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度;
第二确定模块34,用于根据当前拍摄场景的光照度、每帧待采集图像对应的基准感光度及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长;
采集模块35,用于根据所述每帧待采集图像对应的基准感光度及曝光时长,依次采集多帧图像;
合成模块36,用于将所述采集的多帧图像进行合成处理,以生成目标图像。
在实际使用时,本申请实施例提供的图像处理装置,可以被配置在任意电子设备中,以执行前述图像处理方法。
本申请实施例提供的图像处理装置,在夜景拍摄场景包含人脸时,通过根据摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度,并根据当前拍摄场景的光照度以及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长,从而通过拍摄多张不同曝光时长的图像进行合成,不仅提升了人像夜景拍摄模式下拍摄图像的整体动态范围和人脸提亮效果,而且避免了景物亮区产生过曝和亮度失真,提高了人像夜景图像的视觉效果,改善了用户体验。
在本申请一种可能的实现形式中,上述图像处理装置30,具体用于:
检测所述每帧待采集图像对应的曝光时长是否在预设时长范围内;
若至少一帧待采集图像的曝光时长未在所述预设时长范围内,则根据所述预设时长范围,更新所述至少一帧待采集图像的曝光时长,以使所述至少一帧待采集图像的曝光时长位于所述预设的时长范围内。
进一步的,在本申请另一种可能的实现形式中,上述图像处理装置30,还用于:
根据所述摄像模组是否具有光学防抖功能,确定所述预设时长范围。
进一步的,在本申请再一种可能的实现形式中,上述图像处理装置30,还用于:
根据所述至少一帧待采集图像更新前的曝光时长及更新后的曝光时长的差值,确定所述每帧待采集图像对应的曝光量调整模式;
根据所述曝光量调整模式,调整所述每帧待采集图像的感光度及曝光时长。
在本申请一种可能的实现形式中,上述第二确定模块34,具体用于:
根据所述当前拍摄场景的光照度,确定基准曝光量;
根据所述基准曝光量及所述每帧待采集图像对应的基准感光度,确定基准曝光时长;
根据所述基准曝光时长及预设的曝光补偿模式,确定所述每帧待采集图像对应的曝光时长。
进一步的,在本申请另一种可能的实现形式中,上述第二确定模块34,还用于:
根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式。
进一步的,在本申请再一种可能的实现形式中,上述第二确定模块34,还用于:
若所述摄像模组当前启动了自动曝光功能,则根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式为第一模式;
否则,根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式为第二模式,其中,第二模式对应的曝光补偿范围,大于所述第一模式对应的曝光补偿范围。
进一步的,在本申请又一种可能的实现形式中,上述第二确定模块34,还用于:
确定所述摄像模组中各元器件的属性信息;
根据所述各元器件的属性信息及所述当前的抖动程度,确定所述预设的曝光补偿模式。
在本申请一种可能的实现形式中,上述合成模块36,具体用于:
根据预设的所述多帧图像中每帧待采集图像对应的权重,将所述多帧图像进行合成处理。
需要说明的是,前述对图1、图2所示的图像处理方法实施例的解释说明也适用于该实施例的图像处理装置30,此处不再赘述。
本申请实施例提供的图像处理装置,在夜景拍摄场景包含人脸时,通过根据摄像模组当前的抖动程度,确定了每帧待采集图像对应的基准感光度,并根据当前拍摄场景的光照度以及预设的曝光补偿模式,确定了每帧待采集图像对应的曝光时长,进而根据预设的时长范围,调整曝光时长超过预设的时长范围的待采集图像对应的曝光时长,从而不仅使得每帧待采集图像对应的曝光时长都处于预设的范围内,而且保证了每帧待采集图像都是按照预设的曝光补偿模式采集的,进一步提高了人像夜景拍摄图像的质量,改善了用户体验。
为了实现上述实施例,本申请还提出一种电子设备。
图4为本申请实施例提供的电子设备的结构示意图。
如图4所示,上述电子设备200包括:
存储器210及处理器220,连接不同组件(包括存储器210和处理器220)的总线230,存储器210存储有计算机程序,当处理器220执行所述程序时实现本申请实施例所述的图像处理方法。
总线230表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
电子设备200典型地包括多种电子设备可读介质。这些介质可以是任何能够被电子设备200访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
存储器210还可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)240和/或高速缓存存储器250。电子设备200可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统260可以用于读写不可移动的、非易失性磁介质(图4未显示,通常称为“硬盘驱动器”)。尽管图4中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线230相连。存储器210可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本申请各实施例的功能。
具有一组(至少一个)程序模块270的程序/实用工具280,可以存储在例如存储器210中,这样的程序模块270包括——但不限于——操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块270通常执行本申请所描述的实施例中的功能和/或方法。
电子设备200也可以与一个或多个外部设备290(例如键盘、指向设备、显示器291等)通信,还可与一个或者多个使得用户能与该电子设备200交互的设备通信,和/或与使得该电子设备200能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口292进行。并且,电子设备200还可以通过网络适配器293与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器293通过总线230与电子设备200的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备200使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理器220通过运行存储在存储器210中的程序,从而执行各种功能应用以及数据处理。
需要说明的是,本实施例的电子设备的实施过程和技术原理参见前述对本申请实施例的图像处理方法的解释说明,此处不再赘述。
本申请实施例提供的电子设备,可以执行如前所述的图像处理方法,在夜景拍摄场景包含人脸时,通过根据摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度,并根据当前拍摄场景的光照度以及预设的曝光补偿模式,确定每帧待采集图像对应的曝光时长,从而通过拍摄多张不同曝光时长的图像进行合成,不仅提升了人像夜景拍摄模式下拍摄图像的整体动态范围和人脸提亮效果,而且避免了景物亮区产生过曝和亮度失真,提高了人像夜景图像的视觉效果,改善了用户体验。
为了实现上述实施例,本申请还提出一种计算机可读存储介质。
其中,该计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时,以实现本申请实施例所述的图像处理方法。
为了实现上述实施例,本申请再一方面实施例提供一种计算机程序,该程序被处理器执行时,以实现本申请实施例所述的图像处理方法。
一种可选实现形式中,本实施例可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户电子设备上执行、部分地在用户电子设备上执行、作为一个独立的软件包执行、部分在用户电子设备上部分在远程电子设备上执行、或者完全在远程电子设备或服务器上执行。在涉及远程电子设备的情形中,远程电子设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户电子设备,或者,可以连接到外部电子设备(例如利用因特网服务提供商来通过因特网连接)。
本领域技术人员在考虑说明书及实践这里申请的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未发明的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。

Claims (11)

1.一种图像处理方法,其特征在于,包括:
在夜景拍摄模式下,检测摄像模组当前的抖动程度;
若确定所述抖动程度大于第一阈值,则检测所述摄像模组当前采集的图像中是否包含人脸;
若包括,则根据所述摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度;
根据所述当前拍摄场景的光照度,确定基准曝光量;
根据所述基准曝光量及所述每帧图像对应的基准感光度,确定基准曝光时长;
根据所述基准曝光时长及预设的曝光补偿模式,确定所述每帧图像对应的曝光时长;
根据所述每帧待采集图像对应的基准感光度及曝光时长,依次采集多帧图像;
将所述采集的多帧图像进行合成处理,以生成目标图像。
2.如权利要求1所述的方法,其特征在于,所述确定每帧待采集图像对应的曝光时长之后,还包括:
检测所述每帧待采集图像对应的曝光时长是否在预设时长范围内;
若至少一帧待采集图像的曝光时长未在所述预设时长范围内,则根据所述预设的时长范围,更新所述至少一帧待采集图像的曝光时长,以使所述至少一帧待采集图像的曝光时长位于所述预设的时长范围内。
3.如权利要求2所述的方法,其特征在于,所述检测所述每帧待采集图像对应的曝光时长是否在预设时长范围内之前,还包括:
根据所述摄像模组是否具有光学防抖功能,确定所述预设时长范围。
4.如权利要求2所述的方法,其特征在于,所述更新所述至少一帧待采集图像的曝光时长之后,还包括:
根据所述至少一帧待采集图像更新前的曝光时长及更新后的曝光时长的差值,确定所述每帧待采集图像对应的曝光量调整模式;
根据所述曝光量调整模式,调整所述每帧待采集图像的感光度及曝光时长。
5.如权利要求1所述的方法,其特征在于,所述根据所述基准曝光时长及预设的曝光补偿模式,确定所述每帧图像对应的曝光时长之前,还包括:
根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式。
6.如权利要求5所述的方法,其特征在于,所述确定所述预设的曝光补偿模式,包括:
若所述摄像模组当前启动了自动曝光功能,则根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式为第一模式;
否则,根据所述摄像模组当前的抖动程度,确定所述预设的曝光补偿模式为第二模式,其中,第二模式对应的曝光补偿范围,大于所述第一模式对应的曝光补偿范围。
7.如权利要求5或6所述的方法,其特征在于,所述确定所述预设的曝光补偿模式之前,还包括:
确定所述摄像模组中各元器件的属性信息;
所述确定所述预设的曝光补偿模式,包括:
根据所述各元器件的属性信息及所述当前的抖动程度,确定所述预设的曝光补偿模式。
8.如权利要求1-3任一所述的方法,其特征在于,所述将所述采集的多帧图像进行合成处理,以生成目标图像,包括:
根据预设的所述多帧图像中每帧图像对应的权重,将所述多帧图像进行合成处理。
9.一种图像处理装置,其特征在于,包括:
第一检测模块,用于在夜景拍摄模式下,检测摄像模组当前的抖动程度;
第二检测模块,用于确定所述抖动程度大于第一阈值时,检测所述摄像模组当前采集的图像中是否包含人脸;
第一确定模块,用于摄像模组当前采集的图像中是否包含人脸时,根据所述摄像模组当前的抖动程度,确定每帧待采集图像对应的基准感光度;
第二确定模块,用于根据所述当前拍摄场景的光照度,确定基准曝光量,根据所述基准曝光量及所述每帧图像对应的基准感光度,确定基准曝光时长,根据所述基准曝光时长及预设的曝光补偿模式,确定所述每帧图像对应的曝光时长;
采集模块,用于根据所述每帧待采集图像对应的基准感光度及曝光时长,依次采集多帧图像;
合成模块,用于将所述采集的多帧图像进行合成处理,以生成目标图像。
10.一种电子设备,其特征在于,包括:摄影模组、存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如权利要求1-8中任一项所述的图像处理方法。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-8中任一项所述的图像处理方法。
CN201810962774.0A 2018-08-22 2018-08-22 图像处理方法、装置、电子设备及存储介质 Active CN109194882B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201810962774.0A CN109194882B (zh) 2018-08-22 2018-08-22 图像处理方法、装置、电子设备及存储介质
US16/249,537 US10943341B2 (en) 2018-08-22 2019-01-16 Method for image processing, electronic device and computer readable storage medium
EP19152527.8A EP3614661B1 (en) 2018-08-22 2019-01-18 Image processing method, image processing apparatus, electronic device and storage medium
PCT/CN2019/074993 WO2020037959A1 (en) 2018-08-22 2019-02-13 Image processing method, image processing apparatus, electronic device and storage medium
US17/158,689 US11532076B2 (en) 2018-08-22 2021-01-26 Image processing method, electronic device and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810962774.0A CN109194882B (zh) 2018-08-22 2018-08-22 图像处理方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN109194882A CN109194882A (zh) 2019-01-11
CN109194882B true CN109194882B (zh) 2020-07-31

Family

ID=64919554

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810962774.0A Active CN109194882B (zh) 2018-08-22 2018-08-22 图像处理方法、装置、电子设备及存储介质

Country Status (4)

Country Link
US (2) US10943341B2 (zh)
EP (1) EP3614661B1 (zh)
CN (1) CN109194882B (zh)
WO (1) WO2020037959A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109194882B (zh) 2018-08-22 2020-07-31 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及存储介质
DE102018127287B4 (de) * 2018-10-31 2023-01-12 Schölly Fiberoptic GmbH Bildaufnahmeverfahren und Bildaufnahmevorrichtung
CN109919116B (zh) * 2019-03-14 2022-05-17 Oppo广东移动通信有限公司 场景识别方法、装置、电子设备及存储介质
CN110072052B (zh) * 2019-04-09 2021-08-27 Oppo广东移动通信有限公司 基于多帧图像的图像处理方法、装置、电子设备
CN110062159A (zh) * 2019-04-09 2019-07-26 Oppo广东移动通信有限公司 基于多帧图像的图像处理方法、装置、电子设备
CN110290289B (zh) * 2019-06-13 2021-07-09 Oppo广东移动通信有限公司 图像降噪方法、装置、电子设备以及存储介质
CN110166697B (zh) * 2019-06-28 2021-08-31 Oppo广东移动通信有限公司 摄像头防抖方法、装置、电子设备和计算机可读存储介质
CN110430394B (zh) * 2019-07-15 2021-08-27 浙江大华技术股份有限公司 一种监控设备切换日夜模式的方法及监控设备
CN110992284A (zh) * 2019-11-29 2020-04-10 Oppo广东移动通信有限公司 图像处理方法、图像处理装置、电子设备和计算机可读存储介质
CN113382162B (zh) * 2021-04-28 2022-06-07 荣耀终端有限公司 一种视频拍摄方法及电子设备
CN114125266B (zh) * 2021-10-20 2024-04-09 武汉旷视金智科技有限公司 摄像装置的转动检测方法、装置、设备、介质及程序产品
CN116233619B (zh) * 2023-04-27 2023-07-14 北京城建智控科技股份有限公司 一种应用于人脸识别的补光控制方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106375676A (zh) * 2016-09-20 2017-02-01 广东欧珀移动通信有限公司 终端设备的拍照控制方法、装置和终端设备
CN106469433A (zh) * 2015-08-19 2017-03-01 奥林巴斯株式会社 摄像装置、摄像方法
CN107770438A (zh) * 2017-09-27 2018-03-06 维沃移动通信有限公司 一种拍照方法及移动终端
CN107888841A (zh) * 2012-09-13 2018-04-06 佳能株式会社 摄像设备及其控制方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4378272B2 (ja) 2004-12-15 2009-12-02 キヤノン株式会社 撮影装置
US7877004B2 (en) * 2006-03-03 2011-01-25 Olympus Imaging Corp. Imaging apparatus and imaging method
JP4594257B2 (ja) 2006-03-10 2010-12-08 富士フイルム株式会社 ディジタル撮像装置
CN101241294B (zh) * 2007-02-06 2010-09-01 亚洲光学股份有限公司 摄像控制方法及其装置
JP5019939B2 (ja) * 2007-04-19 2012-09-05 パナソニック株式会社 撮像装置及び撮像方法
JP4956403B2 (ja) 2007-12-19 2012-06-20 キヤノン株式会社 撮像装置及びその制御方法及びプログラム
US8355059B2 (en) 2009-02-06 2013-01-15 Canon Kabushiki Kaisha Image capturing apparatus and control method thereof
JP5115568B2 (ja) 2009-11-11 2013-01-09 カシオ計算機株式会社 撮像装置、撮像方法、及び撮像プログラム
JP2011135152A (ja) * 2009-12-22 2011-07-07 Olympus Corp 撮像装置及び撮像方法
CN102457675B (zh) 2010-10-27 2014-08-06 展讯通信(上海)有限公司 防止手持式照像设备在拍照时抖动的方法
CN102714699B (zh) 2010-11-18 2016-09-21 松下电器(美国)知识产权公司 摄像装置、摄像方法
JP6062656B2 (ja) 2012-05-02 2017-01-18 キヤノン株式会社 撮像装置、制御方法、及びプログラム
JP6101074B2 (ja) * 2012-12-27 2017-03-22 キヤノン株式会社 光学機器、像ブレ補正装置、撮像装置、およびその制御方法、プログラム、記憶媒体
CN105791707B (zh) * 2015-12-31 2019-05-28 北京金山安全软件有限公司 一种图像处理的方法、装置及电子设备
CN107613191B (zh) * 2017-08-01 2020-09-01 努比亚技术有限公司 一种拍照方法、设备及计算机可读存储介质
CN109194882B (zh) * 2018-08-22 2020-07-31 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107888841A (zh) * 2012-09-13 2018-04-06 佳能株式会社 摄像设备及其控制方法
CN106469433A (zh) * 2015-08-19 2017-03-01 奥林巴斯株式会社 摄像装置、摄像方法
CN106375676A (zh) * 2016-09-20 2017-02-01 广东欧珀移动通信有限公司 终端设备的拍照控制方法、装置和终端设备
CN107770438A (zh) * 2017-09-27 2018-03-06 维沃移动通信有限公司 一种拍照方法及移动终端

Also Published As

Publication number Publication date
EP3614661B1 (en) 2021-03-10
US20210150687A1 (en) 2021-05-20
US10943341B2 (en) 2021-03-09
CN109194882A (zh) 2019-01-11
US20200065950A1 (en) 2020-02-27
US11532076B2 (en) 2022-12-20
WO2020037959A1 (en) 2020-02-27
EP3614661A1 (en) 2020-02-26

Similar Documents

Publication Publication Date Title
CN109005366B (zh) 摄像模组夜景摄像处理方法、装置、电子设备及存储介质
CN109194882B (zh) 图像处理方法、装置、电子设备及存储介质
CN110072051B (zh) 基于多帧图像的图像处理方法和装置
US11403740B2 (en) Method and apparatus for image capturing and processing
CN109218628B (zh) 图像处理方法、装置、电子设备及存储介质
CN109040609B (zh) 曝光控制方法、装置、电子设备和计算机可读存储介质
CN110445988B (zh) 图像处理方法、装置、存储介质及电子设备
CN109348089B (zh) 夜景图像处理方法、装置、电子设备及存储介质
CN109788207B (zh) 图像合成方法、装置、电子设备及可读存储介质
CN108900782B (zh) 曝光控制方法、装置以及电子设备
WO2020038069A1 (zh) 曝光控制方法、装置和电子设备
CN110072052B (zh) 基于多帧图像的图像处理方法、装置、电子设备
CN109218627B (zh) 图像处理方法、装置、电子设备及存储介质
CN110191291B (zh) 基于多帧图像的图像处理方法和装置
CN110166708B (zh) 夜景图像处理方法、装置、电子设备以及存储介质
CN110248106B (zh) 图像降噪方法、装置、电子设备以及存储介质
CN109005369B (zh) 曝光控制方法、装置、电子设备以及计算机可读存储介质
CN110166709B (zh) 夜景图像处理方法、装置、电子设备以及存储介质
CN109361853B (zh) 图像处理方法、装置、电子设备及存储介质
CN109618102B (zh) 对焦处理方法、装置、电子设备及存储介质
CN109151333B (zh) 曝光控制方法、装置以及电子设备
CN110166711B (zh) 图像处理方法、装置、电子设备以及存储介质
CN109756680B (zh) 图像合成方法、装置、电子设备及可读存储介质
CN110264420B (zh) 基于多帧图像的图像处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1261061

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant