CN109005346A - 控制方法、装置、电子设备和计算机可读存储介质 - Google Patents

控制方法、装置、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN109005346A
CN109005346A CN201810915437.6A CN201810915437A CN109005346A CN 109005346 A CN109005346 A CN 109005346A CN 201810915437 A CN201810915437 A CN 201810915437A CN 109005346 A CN109005346 A CN 109005346A
Authority
CN
China
Prior art keywords
exposure
pixel
exposing pixels
brightness
photosensitive layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810915437.6A
Other languages
English (en)
Other versions
CN109005346B (zh
Inventor
张弓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810915437.6A priority Critical patent/CN109005346B/zh
Publication of CN109005346A publication Critical patent/CN109005346A/zh
Priority to EP19849429.6A priority patent/EP3836532A4/en
Priority to PCT/CN2019/090628 priority patent/WO2020034739A1/zh
Application granted granted Critical
Publication of CN109005346B publication Critical patent/CN109005346B/zh
Priority to US17/173,762 priority patent/US11601600B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/1462Coatings
    • H01L27/14621Colour filter arrangements
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14625Optical elements or arrangements associated with the device
    • H01L27/14627Microlenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本申请提出一种控制方法、装置、电子设备和计算机可读存储介质,其中,方法应用于成像设备,成像设备包括由多个感光像素单元组成的像素单元阵列,每一感光像素单元包括的至少两曝光像素中含至少一中曝光像素,方法包括:确定环境亮度的亮度等级;亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级;若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值;若拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。该方法能够保留拍摄图像中较多的有效信息,提升拍摄图像的亮度。

Description

控制方法、装置、电子设备和计算机可读存储介质
技术领域
本申请涉及成像技术领域,尤其涉及一种控制方法、装置、电子设备和计算机可读存储介质。
背景技术
随着终端技术的不断发展,越来越多的用户使用电子设备拍摄图像。现有技术中的成像设备,采用固定结构的像素单元阵列进行成像。
当成像设备中的像素硬件结构确定时,则无法更改,很难适应多种不同拍摄场景,导致目前拍摄图像的成像质量受限于电子设备中的成像设备,图像质量无法提升。
发明内容
本申请提出一种控制方法、装置、电子设备和计算机可读存储介质,用于根据拍摄环境的亮度等级,自动调整各感光像素单元中的中曝光像素的占比,由此,可以保留拍摄图像中较多的有效信息,提升拍摄图像的亮度,提升成像效果和成像质量,以解决现有技术中图像质量不佳的技术问题。
本申请一方面实施例提出了一种控制方法,应用于成像设备,所述成像设备包括由多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素中,所述至少两曝光像素中包括至少一中曝光像素,所述方法包括以下步骤:
确定环境亮度的亮度等级;所述亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级;
若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值;
若所述拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,所述第一数值大于所述第二数值。
本申请实施例的控制方法,通过确定环境亮度的亮度等级,其中,亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级,当拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值,而当拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。由此,可以根据拍摄环境的亮度等级,自动调整各感光像素单元中的中曝光像素的占比,从而可以保留拍摄图像中较多的有效信息,提升拍摄图像的亮度,进而提升成像效果和成像质量,改善用户的拍摄体验。
本申请又一方面实施例提出了一种控制装置,应用于成像设备,所述成像设备包括由多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素中,所述至少两曝光像素中包括至少一中曝光像素,所述装置包括:
确定模块,用于确定环境亮度的亮度等级;所述亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级;
第一调整模块,用于若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值;
第二调整模块,用于若所述拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,所述第一数值大于所述第二数值。
本申请实施例的控制装置,通过确定环境亮度的亮度等级,其中,亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级,当拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值,而当拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。由此,可以根据拍摄环境的亮度等级,自动调整各感光像素单元中的中曝光像素的占比,从而可以保留拍摄图像中较多的有效信息,提升拍摄图像的亮度,进而提升成像效果和成像质量,改善用户的拍摄体验。
本申请又一方面实施例提出了一种电子设备,包括:多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素中,所述至少两曝光像素中包括至少一中曝光像素,还包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如本申请前述实施例提出的控制方法。
本申请又一方面实施例提出了一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如本申请前述实施例提出的控制方法。
本申请附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本申请实施例一所提供的控制方法的流程示意图;
图2为本申请实施例中成像设备的像素单元阵列的部分结构示意图;
图3为本申请实施例中逆光场景对应的灰度直方图示意图;
图4为本申请实施例中感光像素单元的结构示意图一;
图5为本申请实施例中感光像素单元的结构示意图二;
图6为本申请实施例中感光像素单元的结构示意图三;
图7为本申请实施例二所提供的控制方法的流程示意图;
图8为本申请实施例三所提供的控制装置的结构示意图;
图9为本申请实施例四所提供的控制装置的结构示意图;
图10是本申请某些实施方式的电子设备的模块示意图;
图11是本申请某些实施方式的图像处理电路的模块示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
本申请主要针对现有技术中图像质量不佳的技术问题,提供一种控制方法。
本申请实施例的控制方法,通过确定环境亮度的亮度等级,其中,亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级,当拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值,而当拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。由此,可以根据拍摄环境的亮度等级,自动调整各感光像素单元中的中曝光像素的占比,从而可以保留拍摄图像中较多的有效信息,提升拍摄图像的亮度,进而提升成像效果和成像质量,改善用户的拍摄体验。
下面参考附图描述本申请实施例的控制方法、装置、电子设备和计算机可读存储介质。
图1为本申请实施例一所提供的控制方法的流程示意图。
本申请实施例的控制方法,应用于成像设备,该成像设备包括由多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素,至少两曝光像素中包括至少一中曝光像素。
作为一种示例,参见图2,图2为本申请实施例中成像设备的像素单元阵列的部分结构示意图。其中,成像设备30包括像素单元阵列31和设置在像素单元阵列31上的滤光片单元阵列32。像素单元阵列31包括多个感光像素单元311,每个感光像素单元311包括至少两个曝光像素3111,至少两个曝光像素中包括至少一个中曝光像素。例如,图2以每个感光像素单元311包括4个曝光像素3111示例,4个曝光像素可以为1个长曝光像素、2个中曝光像素、1个短曝光像素。当然,每一个感光像素单元311中的长曝光像素、中曝光像素和短曝光像素的数量也可为其他数值,对此不作限制。
滤光片单元阵列32包括与多个感光像素单元311对应的多个滤光片单元322,每个滤光片单元322覆盖对应的感光像素单元311。其中,像素单元阵列31可以为拜耳阵列。
需要说明的是,同一感光像素单元内包含的各曝光像素由同色滤光片覆盖。
其中,长曝光像素指的是感光像素对应的曝光时间为长曝光时间,中曝光像素指的是感光像素对应的曝光时间为中曝光时间,短曝光像素指的是感光像素对应的曝光时间为短曝光时间,长曝光时间>中曝光时间>短曝光时间,即长曝光像素的长曝光时间大于中曝光像素的中曝光时间,且中曝光像素的中曝光时间大于短曝光像素的短曝光时间。在成像设备工作时,长曝光像素、中曝光像素及短曝光像素同步曝光,同步曝光指的是中曝光像素及短曝光像素的曝光时间位于长曝光像素的曝光时间以内。
具体地,可以首先控制长曝光像素最先开始曝光,在长曝光像素的曝光期间内,再控制中曝光像素以及短曝光像素曝光,其中,中曝光像素和短曝光像素的曝光截止时间应与长曝光像素的曝光截止时间相同或位于长曝光像素的曝光截止时间之前;或者,控制长曝光像素、中曝光像素以及短曝光像素同时开始曝光,即长曝光像素、中曝光像素以及短曝光像素的曝光起始时间相同。如此,无需控制像素单元阵列依次进行长曝、中曝和短曝,可减小图像的拍摄时间。
如图1所示,该控制方法包括以下步骤:
步骤101,确定环境亮度的亮度等级;亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级。
本申请实施例中,可以预先将环境亮度划分为三个亮度等级,分别为低亮度等级、中亮度等级和高亮度等级,例如,亮度等级可以由电子设备的内置程序预先设置,或者,还可以由用户进行设置,对此不作限制。
本申请实施例中,可以采用独立的测光器件,测量环境亮度,或者,还可以读取摄像头自动调节的ISO值,根据读取到的ISO值,确定环境亮度,或者,还可以控制像素单元阵列对环境亮度值进行测量,确定环境亮度,对此不作限制。在确定环境亮度后,可以根据该环境亮度,确定亮度等级。
需要说明的是,上述ISO值用来指示摄像头的感光度,常用的ISO值有50、100、200、400、1000等等,摄像头可以根据环境亮度,自动调节ISO值,从而,本实施例中,可以根据ISO值,反推出环境亮度。一般在光线充足的情况下,ISO值可以为50或100,在光线不足的情况下,ISO值可以为400或更高。
应当理解的是,当电子设备所处的场景不同时,亮度等级可以设置不同,举例而言,当白天,且电子设备处于室内时,ISO值处于200至500之间,而当白天,且电子设备处于室外时,ISO值一般低于200。因此,可以根据实际需求以及具体的拍摄场景,设置每个亮度等级的大小和区间。
步骤102,若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值。
其中,第一数值可以为电子设备的内置程序预先设置的,或者,还可以由用户进行设置,对此不作限制。
本申请实施例中,各感光像素单元中的长曝光像素、中曝光像素、短曝光像素是可调的。当拍摄环境的亮度等级属于高亮度等级或低亮度等级时,表明拍摄环境较亮或者较暗,此时,环境亮度比较极端,当采用长曝光像素或者短曝光像素进行拍摄时,输出的图像的噪点较高,或者,长曝光像素或者短曝光像素输出的像素信息会发生溢出,图像细节丢失的较为严重。
例如,根据红绿蓝(Red Green Blue,简称RGB)三色直方图,可以直观地显示三色不同明暗度的细节内容分布,过曝的部分就会聚集在直方图的左右两端,在容忍度以外的区域不会更亮,而是丢失全部细节,只显示全白的色块(255,255,255),反之,欠曝的部分,容忍度以外的不会更暗,而是丢失全部细节,只显示全黑的色块(0,0,0)。
因此,本申请中,为了保留较多的图像细节,可以增大中曝光像素的占比。例如,可以将各感光像素单元中的短曝光像素切换为中曝光像素,或者,可以将各感光像素单元中的长曝光像素切换为中曝光像素,或者,可以将各感光像素单元中的短曝光像素和长曝光像素切换为中曝光像素,从而增大对应感光像素单元中的中曝光像素的占比为第一数值。
步骤103,若拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。
其中,第二数值可以为电子设备的内置程序预先设置的,或者,还可以由用户进行设置,对此不作限制。
本申请实施例中,当拍摄环境的亮度等级属于中亮度等级时,此时,拍摄图像的细节保留的较多,可以进一步改善图像的成像效果。具体地,可以减小中曝光像素的占比。例如,将各感光像素单元中的一个中曝光像素切换为短曝光像素,或者,将另一个中曝光像素切换为长曝光像素,或者,将各感光像素单元中的一个中曝光像素切换为短曝光像素,同时,将另一个中曝光像素切换为长曝光像素,以减小对应感光像素单元中的中曝光像素的占比为第二数值,由此,长曝光像素可以修正图像中的暗部区域,短曝光像素可以修正图像中的亮部区域,提升成像效果和成像质量。
本申请实施例的控制方法,通过确定环境亮度的亮度等级,其中,亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级,当拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值,而当拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。由此,可以根据拍摄环境的亮度等级,自动调整各感光像素单元中的中曝光像素的占比,从而可以保留拍摄图像中较多的有效信息,提升拍摄图像的亮度,进而提升成像效果和成像质量,改善用户的拍摄体验。
需要说明的是,在逆光场景下,当用户使用电子设备的前置摄像头自拍时,由于用户处于光源和电子设备之间,容易造成人脸曝光不充分的情况发生。因此,在逆光场景下,拍摄图像的有效信息较少、亮度偏低。而本申请实施例中,通过根据拍摄环境的亮度等级,自动调整各感光像素单元中的中曝光像素的占比,可以保留拍摄图像中较多的有效信息,提升拍摄图像的亮度。
作为一种可能的实现方式,可以根据拍摄的预览图像的直方图,确定当前拍摄环境属于逆光场景。
具体地,在拍摄的预览图像时,可以根据像素单元阵列测量测到的环境亮度值对应的灰度值,生成灰度直方图,而后根据处于各灰度范围的感光像素数占比,判断当前拍摄环境是否为逆光场景。
例如,当根据灰度直方图,确定像素单元阵列中测量得到的环境亮度值对应的灰度值处于灰度范围[0,20]的感光像素,与像素单元阵列中所有感光像素的比值grayRatio大于第一阈值,例如第一阈值可以为0.135,且测量得到的环境亮度值对应的灰度值处于灰度范围[200,256)的感光像素,与像素单元阵列中所有感光像素的比值grayRatio大于第二阈值,例如第二阈值可以为0.0899时,则确定当前拍摄环境为逆光场景。
或者,当根据灰度直方图,确定像素单元阵列中测量得到的环境亮度值对应的灰度值处于灰度范围[0,50]的感光像素,与像素单元阵列中所有感光像素的比值grayRatio大于第三阈值,例如第三阈值可以为0.3,且测量得到的环境亮度值对应的灰度值处于灰度范围[200,256)的感光像素,与像素单元阵列中所有感光像素的比值grayRatio大于第四阈值,例如第四阈值可以为0.003时,则确定当前拍摄环境为逆光场景。
或者,当根据灰度直方图,确定像素单元阵列中测量得到的环境亮度值对应的灰度值处于灰度范围[0,50]的感光像素,与像素单元阵列中所有感光像素的比值grayRatio大于第五阈值,例如第五阈值可以为0.005,且测量得到的环境亮度值对应的灰度值处于灰度范围[200,256)的感光像素,与像素单元阵列中所有感光像素的比值grayRatio大于第六阈值,例如第六阈值可以为0.25时,则确定当前拍摄环境为逆光场景。
作为一种示例,逆光场景对应的灰度直方图可以如图3所示。
可以理解的是,一般情况下,在当前拍摄环境为逆光场景时,像素单元阵列中各感光像素测量得到的环境亮度值将存在较高的亮度差异,因此,作为另一种可能的实现方式,还可以根据像素单元阵列测量得到的环境亮度值,确定成像对象的亮度值以及背景的亮度值,并判断成像对象的亮度值和背景的亮度值之间的差值是否大于预设阈值,在成像对象的亮度值和背景的亮度值之间的差值大于预设阈值时,确定当前拍摄环境为逆光场景,而在成像对象的亮度值和背景的亮度值之间的差值小于或者等于预设阈值时,确定当前拍摄环境为非逆光场景。
其中,预设阈值可以预设在电子设备的内置程序中,或者,预设阈值还可以由用户进行设置,对此不作限制。成像对象为需要电子设备进行拍摄的对象,例如人(或者人脸)、动物、物体、景物等对象。
作为一种可能的实现方式,各曝光像素包括对应不同曝光度的低曝光度感光层、中曝光度感光层和高曝光度感光层,可以通过切换低曝光度感光层、中曝光度感光层和高曝光度感光层的在入光方向上的排布顺序,将曝光像素切换为中曝光像素、长曝光像素或短曝光像素。
例如,当拍摄环境的亮度等级属于高亮度等级或低亮度等级时,此时,可以将各感光像素单元中的短曝光像素和/或长曝光像素切换为中曝光像素,例如,参见图4,假设一个感光像素单元中包括4个曝光像素,分别为1个长曝光像素(L)、2个中曝光像素(M)以及1个短曝光像素(S),此时,可以将长曝光像素和短曝光像素分别切换为中曝光像素。具体地,可以长曝光像素和短曝光像素的中曝光度感光层排布至低曝光度感光层和高曝光度感光层之前,以将长曝光像素和短曝光像素切换为中曝光像素。
当拍摄环境的亮度等级属于中亮度等级时,此时,可以将各感光像素单元中的一个中曝光像素切换为短曝光像素,和/或,将另一个中曝光像素切换为长曝光像素,例如,参见图5,可以将一个中曝光像素切换为长曝光像素。具体地,可以中曝光像素的高曝光度感光层排布至低曝光度感光层和中曝光度感光层之前,以将中曝光像素切换为长曝光像素。或者,参见图6,可以将一个中曝光像素切换为短曝光像素。具体地,可以中曝光像素的低曝光度感光层排布至中曝光度感光层和高曝光度感光层之前,以将中曝光像素切换为短曝光像素。
其中,低曝光度感光层的曝光时长小于中曝光度感光层的曝光时长,中曝光度感光层的曝光时长小于高曝光度感光层的曝光时长;或者,低曝光度感光层的感光度大于中曝光度感光层的感光度,中曝光度感光层的感光度大于高曝光度感光层的感光度。
作为一种可能的实现方式,参考图7,在图1所示实施例的基础上,调整各感光像素单元中的中曝光像素的占比后,根据调整后的各感光像素单元进行成像。为了清楚说明具体成像过程,如图7所示,该控制方法还可以包括以下步骤:
步骤201,对像素单元阵列,调整各感光像素单元中的中曝光像素的占比后,控制像素单元阵列输出原始像素信息。
本申请实施例中,在调整各感光像素单元中的中曝光像素的占比后,可以控制像素单元阵列输出原始像素信息。
作为一种可能的实现方式,可以控制像素单元阵列输出分别处于不同曝光时间下的多个原始像素信息,例如,可以控制像素单元阵列中的每个感光像素单元中的长曝光像素、中曝光像素、和/或、短曝光像素同步曝光,其中长曝光像素对应的曝光时间为初始长曝光时间,中曝光像素对应的曝光时间为初始中曝光时间,短曝光像素对应的曝光时间为初始短曝光时间,初始长曝光时间、初始中曝光时间及初始短曝光时间均为预先设定好的。在曝光结束后,像素单元阵列中的每个感光像素单元将输出分别处于不同曝光时间下的多个原始像素信息。
作为另一种可能的实现方式,还可以控制像素单元阵列输出采用相同曝光时间曝光得到的多个原始像素信息。例如,可以控制像素单元阵列中的每个感光像素单元中的长曝光像素、中曝光像素、和/或、短曝光像素同步曝光,每个曝光像素的曝光时间相同,即长曝光像素、中曝光像素、和/或、短曝光像素的曝光截止时间也相同。在曝光结束后,像素单元阵列中的每个感光像素单元将输出采用相同曝光时间曝光得到的多个原始像素信息。
例如,参见图4,在每个感光像素单元均为4个中曝光像素时,每个感光像素单元将输出4个原始像素信息,分别为4个中曝光像素输出的原始像素信息。或者,参见图5,在每个感光像素单元均包括2个长曝光像素、1个中曝光像素和1个短曝光像素时,每个感光像素单元将输出4个原始像素信息,分别为2个长曝光像素输出的原始像素信息、1个中曝光像素输出的原始像素信息和1个短曝光像素输出的原始像素信息。
步骤202,根据同一感光像素单元中至少两曝光像素输出的原始像素信息,计算得到各感光像素单元的合并像素信息。
具体地,可以根据同一感光像素单元中曝光时间相同的原始像素信息,计算得到各感光像素单元的合并像素信息。
作为一种可能的实现方式,当控制像素单元阵列输出分别处于不同曝光时间下的多个原始像素信息后,可以根据同一感光像素单元中曝光时间相同的原始像素信息计算得到合并像素信息。
例如,当每个感光像素单元中包括1个长曝光像素、2个中曝光像素、1个短曝光像素时,唯一的长曝光像素的原始像素信息即为长曝光的合并像素信息,2个中曝光像素的原始像素信息之和即为中曝光的合并像素信息,唯一的短曝光像素的原始像素信息即为短曝光的合并像素信息;当感光像素单元中包括2个长曝光像素、4个中曝光像素、2个短曝光像素时,2个长曝光像素的原始像素信息之和即为长曝光的合并像素信息,4个中曝光像素的原始像素信息之和即为中曝光的合并像素信息,2个短曝光像素的原始像素信息之和即为短曝光的合并像素信息。如此,可以获得整个像素单元阵列的多个长曝光的合并像素信息、多个中曝光的合并像素信息、多个短曝光的合并像素信息。
可选地,可以在同一感光像素单元中,选取长曝光像素的原始像素信息、短曝光像素的原始像素信息或中曝光像素的原始像素信息,而后根据选取的原始像素信息,以及长曝光时间、中曝光时间和短曝光时间之间的曝光比,计算得到合并像素信息。
例如,当一个感光像素中包括1个长曝光像素、2个中曝光像素、1个短曝光像素,且长曝光像素的原始像素信息为80,两个中曝光像素的原始像素信息为255,短曝光像素的原始像素信息为255时,由于255为原始像素信息的上限,因此,选取的可以为长曝光像素的原始像素信息:80。假设长曝光时间、中曝光时间和短曝光时间之间的曝光比为:16:4:1,则合并像素信息为:80*16=1280。
由于现有技术中原始像素信息的上限为255,通过根据选取的原始像素信息,以及长曝光时间、中曝光时间和短曝光时间之间的曝光比,计算得到合并像素信息,可以扩展动态范围,得到高动态范围图像,从而提升成像图像的成像效果。
作为另一种可能的实现方式,在控制像素单元阵列输出采用相同曝光时间曝光得到的多个原始像素信息后,可以对同一感光像素单元的原始像素信息计算平均值,得到合并像素信息,其中,每个感光像素单元对应一个合并像素信息。
例如,当感光像素单元中包括1个长曝光像素、2个中曝光像素、1个短曝光像素时,标记1个长曝光像素输出的1个原始像素信息、2个中曝光像素输出的2个原始像素信息、以及1个短曝光像素输出的1个原始像素信息分别为:R1、R2、R3和R4,则该感光像素单元的合并像素信息为:(R1+R2+R3+R4)/4。
步骤203,根据合并像素信息进行成像。
本申请实施例中,在得到合并像素信息后,可以根据合并像素信息进行成像。
作为一种可能的实现方式,当控制像素单元阵列输出分别处于不同曝光时间下的多个原始像素信息,且根据同一感光像素单元中曝光时间相同的原始像素信息计算得到合并像素信息后,可以获得整个像素单元阵列的多个长曝光的合并像素信息、多个中曝光的合并像素信息、多个短曝光的合并像素信息,而后,再根据多个长曝光的合并像素信息插值计算得到长曝光子图像,根据多个中曝光的合并像素信息插值计算得到中曝光子图像,根据多个短曝光的合并像素信息插值计算得到短曝光子图像。最后,将长曝光子图像、中曝光子图像和短曝光子图像融合处理得到高动态范围的成像图像,其中,长曝光子图像、中曝光子图像和短曝光子图像并非为传统意义上的三帧图像,而是同一帧图像中长、短、中曝光像素对应区域形成的图像部分。
或者,在像素单元阵列曝光结束后,可以以长曝光像素输出的原始像素信息为基准,将短曝光像素的原始像素信息和中曝光像素的原始像素信息叠加到长曝光像素的原始像素信息上。具体地,针对同一感光像素单元,可以对三种不同曝光时间的原始像素信息分别赋予不同的权值,在各曝光时间对应的原始像素信息与权值相乘后,再将三种乘以权值后的原始像素信息相加作为一个感光像素单元的合成像素信息。随后,由于根据三种不同曝光时间的原始像素信息计算得到的每一个合成像素信息的灰度级别会产生变化,因此,在得到合成像素信息后需要对每一个合成像素信息做灰度级别的压缩。压缩完毕后,可以根据多个压缩完毕后得到的合成像素信息进行插值计算即可得到成像图像。如此,成像图像中暗部已经由长曝光像素输出的原始像素信息进行补偿,亮部已经由短曝光像素输出的原始像素信息进行压制,因此成像图像不存在过曝区域及欠曝区域,具有较高的动态范围和较佳的成像效果。
作为另一种可能的实现方式,在控制像素单元阵列输出采用相同曝光时间曝光得到的多个原始像素信息,且对同一感光像素单元的原始像素信息计算平均值,得到合并像素信息后,可以确定整个像素单元阵列中多个感光像素单元的多个合并像素信息,而后可以根据多个合并像素信息进行插值计算,即可得到成像图像。
为了实现上述实施例,本申请还提出一种控制装置。
图8为本申请实施例三所提供的控制装置的结构示意图。
如图8所示,该控制装置100,应用于成像设备,成像设备包括由多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素,至少两曝光像素中包括至少一中曝光像素,控制装置100包括:确定模块101、第一调整模块102,以及第二调整模块103。
其中,确定模块101,用于确定环境亮度的亮度等级;亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级。
第一调整模块102,用于若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值。
作为一种可能的实现方式,第一调整模块102,具体用于:将各感光像素单元中的短曝光像素和/或长曝光像素切换为中曝光像素,以增大对应感光像素单元中的中曝光像素的占比为第一数值;其中,长曝光像素的曝光时长大于中曝光像素的曝光时长,且中曝光像素的曝光时长大于短曝光像素的曝光时长。
第二调整模块103,用于若拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。
作为一种可能的实现方式,第二调整模块103,具体用于:将各感光像素单元中的一个中曝光像素切换为短曝光像素,和/或,将另一个中曝光像素切换为长曝光像素,以减小对应感光像素单元中的中曝光像素的占比为第二数值;其中,长曝光像素的曝光时长大于中曝光像素的曝光时长,且中曝光像素的曝光时长大于短曝光像素的曝光时长。
进一步地,在本申请实施例的一种可能的实现方式中,参见图9,在图8所示实施例的基础上,该控制装置100还可以包括:
作为一种可能的实现方式,各曝光像素包括对应不同曝光度的低曝光度感光层、中曝光度感光层和高曝光度感光层。
切换模块104,用于通过切换低曝光度感光层、中曝光度感光层和高曝光度感光层的在入光方向上的排布顺序,切换对应曝光像素为中曝光像素、长曝光像素或短曝光像素。
作为一种可能的实现方式,切换模块104,具体用于:将低曝光度感光层排布至中曝光度感光层和高曝光度感光层之前,以将对应曝光像素切换为短曝光像素;将中曝光度感光层排布至低曝光度感光层和高曝光度感光层之前,以将对应曝光像素切换为中曝光像素;将高曝光度感光层排布至低曝光度感光层和中曝光度感光层之前,以将对应曝光像素切换为长曝光像素。
作为一种可能的实现方式,低曝光度感光层的曝光时长小于中曝光度感光层的曝光时长,中曝光度感光层的曝光时长小于高曝光度感光层的曝光时长;或者,低曝光度感光层的感光度大于中曝光度感光层的感光度,中曝光度感光层的感光度大于高曝光度感光层的感光度。
控制模块105,用于对像素单元阵列,调整各感光像素单元中的中曝光像素的占比后,控制像素单元阵列输出原始像素信息。
计算模块106,用于根据同一感光像素单元中至少两曝光像素输出的原始像素信息,计算得到各感光像素单元的合并像素信息。
成像模块107,用于根据合并像素信息进行成像。
逆光场景确定模块108,用于在确定环境亮度的亮度等级之前,根据拍摄的预览图像的直方图,确定当前拍摄环境属于逆光场景。
需要说明的是,前述对控制方法实施例的解释说明也适用于该实施例的控制装置100,此处不再赘述。
本申请实施例的控制装置,通过确定环境亮度的亮度等级,其中,亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级,当拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值,而当拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。由此,可以根据拍摄环境的亮度等级,自动调整各感光像素单元中的中曝光像素的占比,从而可以保留拍摄图像中较多的有效信息,提升拍摄图像的亮度,进而提升成像效果和成像质量,改善用户的拍摄体验。
为了实现上述实施例,本申请还提出一种电子设备,包括多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素中,至少两曝光像素中包括至少一中曝光像素,还包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时,实现如本申请前述实施例提出的控制方法。
为了实现上述实施例,本申请还提出一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如本申请前述实施例提出的控制方法。
请参阅图10,本申请还提供一种电子设备200。电子设备200包括存储器50和处理器60。存储器50中存储有计算机可读指令。计算机可读指令被存储器50执行时,使得处理器60执行上述任一实施方式的控制方法。
图10为一个实施例中电子设备200的内部结构示意图。该电子设备200包括通过系统总线81连接的处理器60、存储器50(例如为非易失性存储介质)、内存储器82、显示屏83和输入装置84。其中,电子设备200的存储器50存储有操作系统和计算机可读指令。该计算机可读指令可被处理器60执行,以实现本申请实施方式的控制方法。该处理器60用于提供计算和控制能力,支撑整个电子设备200的运行。电子设备200的内存储器50为存储器52中的计算机可读指令的运行提供环境。电子设备200的显示屏83可以是液晶显示屏或者电子墨水显示屏等,输入装置84可以是显示屏83上覆盖的触摸层,也可以是电子设备200外壳上设置的按键、轨迹球或触控板,也可以是外接的键盘、触控板或鼠标等。该电子设备200可以是手机、平板电脑、笔记本电脑、个人数字助理或穿戴式设备(例如智能手环、智能手表、智能头盔、智能眼镜)等。本领域技术人员可以理解,图10中示出的结构,仅仅是与本申请方案相关的部分结构的示意图,并不构成对本申请方案所应用于其上的电子设备200的限定,具体的电子设备200可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
请参阅图11,本申请实施例的电子设备200中包括图像处理电路90,图像处理电路90可利用硬件和/或软件组件实现,包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图11为一个实施例中图像处理电路90的示意图。如图11所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图11所示,图像处理电路90包括ISP处理器91(ISP处理器91可为处理器60)和控制逻辑器92。摄像头93捕捉的图像数据首先由ISP处理器91处理,ISP处理器91对图像数据进行分析以捕捉可用于确定摄像头93的一个或多个控制参数的图像统计信息。摄像头93可包括一个或多个透镜932和图像传感器934。图像传感器934可包括色彩滤镜阵列(如Bayer滤镜),图像传感器934可获取每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器91处理的一组原始图像数据。传感器94(如陀螺仪)可基于传感器94接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器91。传感器94接口可以为SMIA(StandardMobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器934也可将原始图像数据发送给传感器94,传感器94可基于传感器94接口类型把原始图像数据提供给ISP处理器91,或者传感器94将原始图像数据存储到图像存储器95中。
ISP处理器91按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器91可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器91还可从图像存储器95接收图像数据。例如,传感器94接口将原始图像数据发送给图像存储器95,图像存储器95中的原始图像数据再提供给ISP处理器91以供处理。图像存储器95可为存储器50、存储器50的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器934接口或来自传感器94接口或来自图像存储器95的原始图像数据时,ISP处理器91可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器95,以便在被显示之前进行另外的处理。ISP处理器91从图像存储器95接收处理数据,并对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器91处理后的图像数据可输出给显示器97(显示器97可包括显示屏83),以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器91的输出还可发送给图像存储器95,且显示器97可从图像存储器95读取图像数据。在一个实施例中,图像存储器95可被配置为实现一个或多个帧缓冲器。此外,ISP处理器91的输出可发送给编码器/解码器96,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器97设备上之前解压缩。编码器/解码器96可由CPU或GPU或协处理器实现。
ISP处理器91确定的统计数据可发送给控制逻辑器92单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜932阴影校正等图像传感器934统计信息。控制逻辑器92可包括执行一个或多个例程(如固件)的处理元件和/或微控制器,一个或多个例程可根据接收的统计数据,确定摄像头93的控制参数及ISP处理器91的控制参数。例如,摄像头93的控制参数可包括传感器94控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜932控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜932阴影校正参数。
例如,以下为运用图10中的处理器60或运用图11中的图像处理电路90(具体为ISP处理器91)实现控制方法的步骤:
确定环境亮度的亮度等级;亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级;
若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值;
若拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,第一数值大于第二数值。
再例如,以下为运用图10中的处理器或运用图11中的图像处理电路90(具体为ISP处理器)实现控制方法的步骤:
对像素单元阵列,调整各感光像素单元中的中曝光像素的占比后,控制像素单元阵列输出原始像素信息;
根据同一感光像素单元中至少两曝光像素输出的原始像素信息,计算得到各感光像素单元的合并像素信息;
根据合并像素信息进行成像。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (11)

1.一种控制方法,其特征在于,应用于成像设备,所述成像设备包括由多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素,所述至少两曝光像素中包括至少一中曝光像素,所述方法包括以下步骤:
确定环境亮度的亮度等级;所述亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级;
若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值;
若所述拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,所述第一数值大于所述第二数值。
2.根据权利要求1所述的控制方法,其特征在于,所述调整各感光像素单元中的中曝光像素的占比为第一数值,包括:
将各感光像素单元中的短曝光像素和/或长曝光像素切换为中曝光像素,以增大对应感光像素单元中的中曝光像素的占比为所述第一数值;
其中,所述长曝光像素的曝光时长大于所述中曝光像素的曝光时长,且所述中曝光像素的曝光时长大于所述短曝光像素的曝光时长。
3.根据权利要求1所述的控制方法,其特征在于,所述调整各感光像素单元中的中曝光像素的占比为第二数值,包括:
将各感光像素单元中的一个中曝光像素切换为短曝光像素,和/或,将另一个中曝光像素切换为长曝光像素,以减小对应感光像素单元中的中曝光像素的占比为第二数值;
其中,所述长曝光像素的曝光时长大于所述中曝光像素的曝光时长,且所述中曝光像素的曝光时长大于所述短曝光像素的曝光时长。
4.根据权利要求2或3所述的控制方法,其特征在于,各曝光像素包括对应不同曝光度的低曝光度感光层、中曝光度感光层和高曝光度感光层;
所述方法,还包括:
通过切换所述低曝光度感光层、中曝光度感光层和高曝光度感光层的在入光方向上的排布顺序,切换对应曝光像素为中曝光像素、长曝光像素或短曝光像素。
5.根据权利要求4所述的控制方法,其特征在于,所述通过切换所述低曝光度感光层、中曝光度感光层和高曝光度感光层的在入光方向上的排布顺序,切换对应曝光像素为中曝光像素、长曝光像素或短曝光像素,包括:
将所述低曝光度感光层排布至所述中曝光度感光层和高曝光度感光层之前,以将对应曝光像素切换为短曝光像素;
将所述中曝光度感光层排布至所述低曝光度感光层和高曝光度感光层之前,以将对应曝光像素切换为中曝光像素;
将所述高曝光度感光层排布至所述低曝光度感光层和所述中曝光度感光层之前,以将对应曝光像素切换为长曝光像素。
6.根据权利要求4所述的控制方法,其特征在于,
所述低曝光度感光层的曝光时长小于所述中曝光度感光层的曝光时长,所述中曝光度感光层的曝光时长小于所述高曝光度感光层的曝光时长;
或者,所述低曝光度感光层的感光度大于所述中曝光度感光层的感光度,所述中曝光度感光层的感光度大于所述高曝光度感光层的感光度。
7.根据权利要求1所述的控制方法,其特征在于,所述方法还包括:
对所述像素单元阵列,调整各感光像素单元中的中曝光像素的占比后,控制所述像素单元阵列输出原始像素信息;
根据同一感光像素单元中至少两曝光像素输出的原始像素信息,计算得到各感光像素单元的合并像素信息;
根据所述合并像素信息进行成像。
8.根据权利要求1所述的控制方法,其特征在于,所述确定环境亮度的亮度等级之前,还包括:
根据拍摄的预览图像的直方图,确定当前拍摄环境属于逆光场景。
9.一种控制装置,其特征在于,应用于成像设备,所述成像设备包括由多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素中,所述至少两曝光像素中包括至少一中曝光像素,所述装置包括:
确定模块,用于确定环境亮度的亮度等级;所述亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级;
第一调整模块,用于若拍摄环境的亮度等级属于高亮度等级或低亮度等级时,调整各感光像素单元中的中曝光像素的占比为第一数值;
第二调整模块,用于若所述拍摄环境的亮度等级属于中亮度等级时,调整各感光像素单元中的中曝光像素的占比为第二数值;其中,所述第一数值大于所述第二数值。
10.一种电子设备,其特征在于,包括多个感光像素单元组成的像素单元阵列,每一感光像素单元包括至少两曝光像素中,所述至少两曝光像素中包括至少一中曝光像素,还包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如权利要求1-8中任一所述的控制方法。
11.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-8中任一所述的控制方法。
CN201810915437.6A 2018-08-13 2018-08-13 控制方法、装置、电子设备和计算机可读存储介质 Active CN109005346B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810915437.6A CN109005346B (zh) 2018-08-13 2018-08-13 控制方法、装置、电子设备和计算机可读存储介质
EP19849429.6A EP3836532A4 (en) 2018-08-13 2019-06-11 CONTROL PROCESS AND APPARATUS, ELECTRONIC DEVICE, AND COMPUTER-READABLE STORAGE MEDIA
PCT/CN2019/090628 WO2020034739A1 (zh) 2018-08-13 2019-06-11 控制方法、装置、电子设备和计算机可读存储介质
US17/173,762 US11601600B2 (en) 2018-08-13 2021-02-11 Control method and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810915437.6A CN109005346B (zh) 2018-08-13 2018-08-13 控制方法、装置、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN109005346A true CN109005346A (zh) 2018-12-14
CN109005346B CN109005346B (zh) 2020-04-03

Family

ID=64595772

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810915437.6A Active CN109005346B (zh) 2018-08-13 2018-08-13 控制方法、装置、电子设备和计算机可读存储介质

Country Status (4)

Country Link
US (1) US11601600B2 (zh)
EP (1) EP3836532A4 (zh)
CN (1) CN109005346B (zh)
WO (1) WO2020034739A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110602380A (zh) * 2019-08-15 2019-12-20 深圳壹账通智能科技有限公司 基于环境光线检测的视频拍摄方法、装置、设备及介质
WO2020034739A1 (zh) * 2018-08-13 2020-02-20 Oppo广东移动通信有限公司 控制方法、装置、电子设备和计算机可读存储介质
CN111479072A (zh) * 2020-04-14 2020-07-31 深圳市道通智能航空技术有限公司 高动态范围图像合成方法、装置、图像处理芯片及航拍相机
CN112492227A (zh) * 2020-12-15 2021-03-12 维沃移动通信有限公司 曝光方法、摄像模组和电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101472076A (zh) * 2007-12-28 2009-07-01 鸿富锦精密工业(深圳)有限公司 影像拍摄装置及其拍摄控制方法
US20090226160A1 (en) * 2008-03-06 2009-09-10 Samsung Techwin Co., Ltd. Apparatus for capturing images, method of controlling exposure in the apparatus, and computer readable recording medium storing program
US20110176729A1 (en) * 2010-01-15 2011-07-21 Samsung Electronics Co., Ltd. Apparatus and method for generating high sensitivity images in dark environment
CN104104886A (zh) * 2014-07-24 2014-10-15 深圳市中兴移动通信有限公司 过曝拍摄方法及装置
US20150085077A1 (en) * 2013-09-23 2015-03-26 Samsung Electronics Co., Ltd Read-out mode changeable digital photographing apparatus and method of controlling the same
CN107463052A (zh) * 2017-08-30 2017-12-12 北京小米移动软件有限公司 拍摄曝光方法及装置
CN108322669A (zh) * 2018-03-06 2018-07-24 广东欧珀移动通信有限公司 图像的获取方法及装置、成像装置、计算机可读存储介质和计算机设备

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006049098A1 (ja) * 2004-11-02 2006-05-11 Matsushita Electric Industrial Co., Ltd. イメージセンサ
US7940311B2 (en) * 2007-10-03 2011-05-10 Nokia Corporation Multi-exposure pattern for enhancing dynamic range of images
TWI387332B (zh) * 2009-08-26 2013-02-21 Altek Corp A method of backlighting
JP5521721B2 (ja) * 2009-08-28 2014-06-18 ソニー株式会社 撮像素子およびカメラシステム
CN102196182A (zh) * 2010-03-09 2011-09-21 株式会社理光 逆光检测设备及逆光检测方法
KR102149187B1 (ko) * 2014-02-21 2020-08-28 삼성전자주식회사 전자 장치와, 그의 제어 방법
US9888198B2 (en) * 2014-06-03 2018-02-06 Semiconductor Components Industries, Llc Imaging systems having image sensor pixel arrays with sub-pixel resolution capabilities
US10141354B2 (en) * 2014-10-23 2018-11-27 Panasonic Intellectual Property Management Co., Ltd. Imaging device and image acquisition device
CN105611185B (zh) 2015-12-18 2017-10-31 广东欧珀移动通信有限公司 图像生成方法、装置及终端设备
CN105592270B (zh) 2015-12-18 2018-02-06 广东欧珀移动通信有限公司 图像亮度补偿方法、装置及终端设备
CN105578065A (zh) * 2015-12-18 2016-05-11 广东欧珀移动通信有限公司 高动态范围图像的生成方法、拍照装置和终端
CN110036632B (zh) * 2016-12-08 2021-07-09 新唐科技日本株式会社 固体摄像装置以及使用该固体摄像装置的摄像装置
CN108200354B (zh) * 2018-03-06 2020-09-25 Oppo广东移动通信有限公司 控制方法及装置、成像设备、计算机设备及可读存储介质
US11387279B2 (en) * 2018-05-18 2022-07-12 Sony Semiconductor Solutions Corporation Imaging element, electronic apparatus, and method of driving imaging element
CN109005346B (zh) * 2018-08-13 2020-04-03 Oppo广东移动通信有限公司 控制方法、装置、电子设备和计算机可读存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101472076A (zh) * 2007-12-28 2009-07-01 鸿富锦精密工业(深圳)有限公司 影像拍摄装置及其拍摄控制方法
US20090226160A1 (en) * 2008-03-06 2009-09-10 Samsung Techwin Co., Ltd. Apparatus for capturing images, method of controlling exposure in the apparatus, and computer readable recording medium storing program
US20110176729A1 (en) * 2010-01-15 2011-07-21 Samsung Electronics Co., Ltd. Apparatus and method for generating high sensitivity images in dark environment
US20150085077A1 (en) * 2013-09-23 2015-03-26 Samsung Electronics Co., Ltd Read-out mode changeable digital photographing apparatus and method of controlling the same
CN104104886A (zh) * 2014-07-24 2014-10-15 深圳市中兴移动通信有限公司 过曝拍摄方法及装置
CN107463052A (zh) * 2017-08-30 2017-12-12 北京小米移动软件有限公司 拍摄曝光方法及装置
CN108322669A (zh) * 2018-03-06 2018-07-24 广东欧珀移动通信有限公司 图像的获取方法及装置、成像装置、计算机可读存储介质和计算机设备

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020034739A1 (zh) * 2018-08-13 2020-02-20 Oppo广东移动通信有限公司 控制方法、装置、电子设备和计算机可读存储介质
US11601600B2 (en) 2018-08-13 2023-03-07 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Control method and electronic device
CN110602380A (zh) * 2019-08-15 2019-12-20 深圳壹账通智能科技有限公司 基于环境光线检测的视频拍摄方法、装置、设备及介质
CN111479072A (zh) * 2020-04-14 2020-07-31 深圳市道通智能航空技术有限公司 高动态范围图像合成方法、装置、图像处理芯片及航拍相机
US12041358B2 (en) 2020-04-14 2024-07-16 Autel Robotics Co., Ltd. High dynamic range image synthesis method and apparatus, image processing chip and aerial camera
CN112492227A (zh) * 2020-12-15 2021-03-12 维沃移动通信有限公司 曝光方法、摄像模组和电子设备

Also Published As

Publication number Publication date
CN109005346B (zh) 2020-04-03
WO2020034739A1 (zh) 2020-02-20
US20210168273A1 (en) 2021-06-03
US11601600B2 (en) 2023-03-07
EP3836532A4 (en) 2021-10-13
EP3836532A1 (en) 2021-06-16

Similar Documents

Publication Publication Date Title
CN109005364A (zh) 成像控制方法、装置、电子设备以及计算机可读存储介质
CN108989700B (zh) 成像控制方法、装置、电子设备以及计算机可读存储介质
CN108683862B (zh) 成像控制方法、装置、电子设备及计算机可读存储介质
CN108200354A (zh) 控制方法及装置、成像设备、计算机设备及可读存储介质
CN109068067A (zh) 曝光控制方法、装置和电子设备
CN109040609A (zh) 曝光控制方法、装置和电子设备
CN108833804A (zh) 成像方法、装置和电子设备
CN108683863A (zh) 成像控制方法、装置、电子设备以及可读存储介质
CN109005342A (zh) 全景拍摄方法、装置和成像设备
CN108024056B (zh) 基于双摄像头的成像方法和装置
CN108322669A (zh) 图像的获取方法及装置、成像装置、计算机可读存储介质和计算机设备
CN108683861A (zh) 拍摄曝光控制方法、装置、成像设备和电子设备
CN109788207A (zh) 图像合成方法、装置、电子设备及可读存储介质
CN108632537A (zh) 控制方法及装置、成像设备、计算机设备及可读存储介质
CN109040607B (zh) 成像控制方法、装置、电子设备和计算机可读存储介质
CN109167930A (zh) 图像显示方法、装置、电子设备和计算机可读存储介质
CN108270977A (zh) 控制方法及装置、成像设备、计算机设备及可读存储介质
CN109068058A (zh) 超级夜景模式下的拍摄控制方法、装置和电子设备
CN109005346A (zh) 控制方法、装置、电子设备和计算机可读存储介质
WO2020034702A1 (zh) 控制方法、装置、电子设备和计算机可读存储介质
CN109005369A (zh) 曝光控制方法、装置、电子设备以及计算机可读存储介质
CN108833802A (zh) 曝光控制方法、装置和电子设备
CN108900785A (zh) 曝光控制方法、装置和电子设备
CN109194855A (zh) 成像方法、装置和电子设备
CN107800971B (zh) 全景拍摄的自动曝光控制处理方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant