CN110475066A - 控制方法、成像装置和电子设备 - Google Patents
控制方法、成像装置和电子设备 Download PDFInfo
- Publication number
- CN110475066A CN110475066A CN201910767929.XA CN201910767929A CN110475066A CN 110475066 A CN110475066 A CN 110475066A CN 201910767929 A CN201910767929 A CN 201910767929A CN 110475066 A CN110475066 A CN 110475066A
- Authority
- CN
- China
- Prior art keywords
- image
- ambient brightness
- cutting
- predetermined threshold
- cut
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开一种成像装置及其控制方法和电子设备。成像装置包括图像传感器。图像传感器包括感光像素单元和滤光片单元,感光像素单元包括多个感光像素。控制方法包括:获取成像装置的当前变焦倍数和环境亮度;判断环境亮度是否大于预定阈值;在环境亮度大于所述预定阈值时,控制每个感光像素分别输出以获得第一图像,对第一图像进行裁剪和处理以得到第一目标图像;在环境亮度小于预定阈值时,控制同一感光像素单元的多个感光像素合并输出以获得第二图像,对第二图像进行裁剪和处理以得到第二目标图像。本申请的控制方法、成像装置和电子设备在高亮环境下进行数码变焦时,输出高分辨率的图像并进行裁剪和处理,如此数码变焦后得到的图像更加清晰。
Description
技术领域
本申请涉及成像技术领域,特别涉及一种控制方法、成像装置和电子设备。
背景技术
摄像头实现变焦的方式包括光学变焦和数码变焦。其中,摄像头进行数码变焦是通过处理图像的方式来实现的,图像经过处理后会变得模糊,尤其是在高倍率的数码变焦后,图像的细节信息很差。
发明内容
本申请的实施方式提供了一种控制方法、成像装置和电子设备。
本申请实施方式的控制方法用于控制成像装置。所述成像装置包括图像传感器,所述图像传感器包括阵列排布的感光像素单元和设置在所述感光像素单元上且呈阵列排布的滤光片单元。每个所述滤光片单元覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素。所述控制方法包括:获取所述成像装置的当前变焦倍数和环境亮度;判断所述环境亮度是否大于预定阈值;在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像;在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像。
本申请实施方式成像装置包括图像传感器和处理器。所述图像传感器包括阵列排布的感光像素单元和设置在所述感光像素单元上且呈阵列排布的滤光片单元。每个所述滤光片单元覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素。所述处理器用于:获取所述成像装置的当前变焦倍数和环境亮度;判断所述环境亮度是否大于预定阈值;在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像;在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像。
本申请实施方式的电子设备包括壳体和成像装置,所述成像装置包括图像传感器和处理器。所述图像传感器包括阵列排布的感光像素单元和设置在所述感光像素单元上且呈阵列排布的滤光片单元。每个所述滤光片单元覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素。所述处理器用于:获取所述成像装置的当前变焦倍数和环境亮度;判断所述环境亮度是否大于预定阈值;在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像;在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像。所述成像装置设于所述壳体内。
本申请实施方式的控制方法、成像装置和电子设备在周围环境亮度较高时控制每个感光像素分别输出以获得第一图像,因此获得的第一图像的分辨率较高,即此时摄像头的图像解析力更强,采用高分辨率的第一图像进行裁剪和处理,数码变焦后得到的图像清晰度更高。在周围环境亮度较低时,控制同一感光像素单元的多个感光像素合并输出,相当于增大了感光像素的面积,从而能够获得更多的进光量,使得获得的第二图像的信噪比较高,采用信噪比较高的第二图像进行裁剪和处理,数码变焦后得到的图像清晰度更高。
本申请的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本申请某些实施方式的控制方法的流程示意图;
图2是本申请某些实施方式的成像装置的结构示意图;
图3是本申请某些实施方式的电子设备的结构示意图;
图4是本申请某些实施方式的图像传感器的结构示意图;
图5至图7是本申请某些实施方式的控制方法的流程示意图;
图8是本申请某些实施方式的色块图像的状态示意图;
图9是本申请某些实施方式的色块图像和仿原图像的状态示意图;
图10和图11是本申请某些实施方式的控制方法的流程示意图;
图12是本申请某些实施方式的合并图像的状态示意图;
图13至图16是本申请某些实施方式的控制方法的流程示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
请结合图1至图4,本申请实施方式的控制方法用于控制成像装置100,成像装置100包括图像传感器10。图像传感器10包括阵列排布的感光像素单元13和设置在感光像素单元13上呈阵列排布的滤光片单元12。每个滤光片单元12覆盖一个感光像素单元13,每个感光像素单元13包括多个感光像素131。控制方法包括:
01,获取成像装置100的当前变焦倍数和环境亮度;
02,判断环境亮度是否大于预定阈值;
03,在环境亮度大于预定阈值时,控制每个感光像素131分别输出以获得第一图像,根据当前变焦倍数对第一图像进行裁剪以得到第一裁剪图像,对第一裁剪图像进行处理以得到第一目标图像;
04,在环境亮度小于或等于预定阈值时,控制同一感光像素单元13的多个感光像素131合并输出以获得第二图像,根据当前变焦倍数对第二图像进行裁剪以得到第二裁剪图像,对第二裁剪图像进行处理以得到第二目标图像。
本申请实施方式的成像装置100包括图像传感器10和处理器11,图像传感器10包括阵列排布的感光像素单元13和设置在感光像素单元13上且呈阵列排布的滤光片单元12。每个滤光片单元12覆盖一个感光像素单元13,每个感光像素单元13包括多个感光像素131。其中,成像装置100可以用于实现本申请实施方式的控制方法,步骤01、步骤02、步骤03和步骤04均可以由处理器11实现。也即是说,处理器11可用于:获取成像装置100的当前变焦倍数和环境亮度;判断环境亮度是否大于预定阈值;在环境亮度大于预定阈值时,控制图像传感器10的每个感光像素131分别输出以获得第一图像;根据当前变焦倍数对第一图像进行裁剪得到第一裁剪图像;对第一裁剪图像进行处理得到第一目标图像;在环境亮度小于或者等于预定阈值时,控制图像传感器10的同一感光像素单元13的多个感光像素131合并输出以获得第二图像;根据当前变焦倍数对第二图像进行裁剪得到第二裁剪图像;对第二裁剪图像进行处理得到第二目标图像。其中,第一目标图像和第二目标图像可以是成像装置100最终输出的图像,例如为JPG图像。第一目标图像和第二目标图像可以输出至显示屏以显示给用户看。
本申请实施方式的电子设备1000包括成像装置100和壳体200,成像装置100设于壳体200内部。壳体200能对成像装置100起到保护的作用。电子设备1000可为手机、平板电脑等具备成像装置100的电子设备,在此不作限制。本申请实施方式的电子设备1000是手机。当用户使用电子设备1000拍摄图像时,启动成像装置100,用户可根据拍摄场景对成像装置100的变焦倍数进行改变以得到用户想要的图像。这时,就可以由处理器11获取当前变焦倍数。在一个实施例中,用户可以在拍摄界面上进行缩小画面的方式或者放大画面的方式进行变焦,在缩小画面时,当前变焦倍数就是由大变小;在放大画面时,当前变焦倍数就由小变大。在另一个实施例中,也可以在拍摄界面上设置变焦倍数的图标,用户可通过点击该图标改变变焦倍数。例如,可在拍摄界面上设置两个图标,一个图标为增加变焦倍数的图标,一个为降低变焦倍数的图标,用户根据需要可点击相应的图标以改变变焦倍数。当然,也可在拍摄界面上设置一个变焦倍数长条,用户可在变焦倍数长条上点击或滑动以改变变焦倍数。本申请实施方式可以通过处理器11获取用户的操作指令,根据操作指令得到成像装置100的当前变焦倍数。
本申请实施方式的控制方法、成像装置100和电子设备1000在周围环境亮度较高时控制每个感光像素131分别输出以获得第一图像,因此获得的第一图像的分辨率较高,即此时摄像头的图像解析力更强,采用高分辨率的第一图像进行裁剪和处理,数码变焦后得到的图像清晰度更高。在周围环境亮度较低时,控制同一感光像素单元13的多个感光像素131合并输出,相当于增大了感光像素131的面积,从而能够获得更多的进光量,使得获得的第二图像的信噪比较高,采用信噪比较高的第二图像进行裁剪和处理,数码变焦后得到的图像清晰度更高。
在某些实施方式中,获取成像装置100的环境亮度可由电子设备1000中的其他感光装置(例如光线传感器)进行感光获得,处理器11可以读取感光装置检测获得的环境亮度。在其他实施方式中,成像装置100的环境亮度也可以通过处理成像装置100获取的图像获得,在此不作限制。
在某些实施方式中,预定阈值可以根据多次实验获得,然后存储在成像装置100的存储元件中。在其他实施方式中,预定阈值可以由用户根据自身喜好进行设置。当然,也可以在成像装置100中预先设定多个不同的预定阈值,然后由用户根据不同需求选择不同的预定阈值控制成像装置进行工作,以得到更好的图像。
请参阅图5,在某些实施方式中,步骤02包括:
021,判断成像装置100的感光度是否小于预设感光度;
022,在成像装置100的感光度小于预设感光度时,确定环境亮度大于预定阈值;
023,在成像装置100的感光度大于或等于预设感光度时,确定环境亮度小于或等于预定阈值。
在某些实施方式中,步骤01包括:
011,获取成像装置100的感光度。
在某些实施方式中,步骤021、步骤022和步骤023可以由处理器11实现。也即是说,处理器11可用于:判断成像装置100的感光度是否小于预设感光度;在成像装置100的感光度小于预设感光度时,确定环境亮度大于预定阈值;在成像装置100的感光度大于或等于预设感光度时,确定环境亮度小于或等于预定阈值。
具体地,可以在步骤02前获取成像装置100的感光度,感光度是指感光元件的感光灵敏度,通常用ISO来表示。获取成像装置100的感光度的大小,并与预设感光度进行对比,当感光度小于预设感光度时,可以确定此时环境亮度较高,因此可输出分辨率更高的图像。在感光度大于或者等于预设感光度时,可以确定此时环境亮度较低,因此可以采用多个感光像素131合并输出以增强感光像素单元13采集光线的能力。需要说的是,预设感光度可以根据多次实验获得,也可以由用户设置,还可以预先设定好多个不同的预设感光度以供用户选择。在此不作限制。在一个实施方式中,预设感光度为ISO800。通过判断感光度是否小于预设感光度,可以准确地确定环境亮度是否大于预定阈值。
请参阅图6,在某些实施方式中,在步骤02前,控制方法还包括:
05,判断当前变焦倍数是否大于预定变焦倍数阈值;
在当前变焦倍数大于或等于预定变焦倍数阈值时,进入步骤02(判断环境亮度是否大于预定阈值);
06,在当前变焦倍数小于预定变焦倍数阈值时,控制同一感光像素单元13的多个感光像素131合并输出以获得第二图像。
在某些实施方式中,步骤05、步骤06可以由处理器11实现。也即是说,处理器11可用于:判断当前变焦倍数是否大于预定变焦倍数阈值;在当前变焦倍数大于或等于预定变焦倍数阈值时,进入步骤02(判断环境亮度是否大于预定阈值);在当前变焦倍数小于预定变焦倍数阈值时,控制同一感光像素单元13的多个感光像素131合并输出以获得第二图像。
需要说明的是,预定变焦倍数阈值可由用户自行设置,或者直接在成像装置100中的处理器11中设置多个预设变焦倍数阈值,然后再由用户选择。在此不作限制。例如,预定变焦倍数阈值为2倍变焦。若当前变焦倍数为3倍变焦时,则进入判断环境亮度是否大于预定阈值的步骤。若当前变焦倍数为1倍(不变焦)时,则可以控制图像传感器10的同一感光像素单元13的多个感光像素131合并输出以获得第二图像。在当前变焦倍数小于预定变焦倍数阈值时所获取的第二图像不需要进行裁剪,可以在将第二图像转换为真彩图像后,输出至显示屏进行显示。在变焦倍数较大时,可以采用本申请实施方式的控制方法(例如步骤02、步骤03、步骤04)获得清晰度较高的图像;在变焦倍数较小时,由于不需要进行裁剪,因此合并输出的第二图像的分辨率已经能够满足用户的需求,同一感光像素单元13的多个感光像素131合并输出可以提高输出信号的信噪比。
在某些实施方式中,每个感光像素单元13可以包括2*2阵列的感光像素131。滤光片单元12可呈拜耳阵列排布,即相邻的四个滤光片单元12分别为一个红色滤光片、一个蓝色滤光片和两个绿色滤光片。每一个感光像素单元13对应同一颜色的滤光片单元12。
请参阅图7,在某些实施方式中,步骤03包括:
031,在环境亮度大于预定阈值时,控制每个感光像素131分别输出以获得色块图像;将色块图像转换为第一真彩图像以作为第一图像;根据当前变焦倍数对第一图像进行裁剪以得到第一裁剪图像;对第一裁剪图像进行处理以得到第一目标图像。
在某些实施方式中,步骤031可以由处理器11实现。也即是说,处理器11可用于:在环境亮度大于预定阈值时,控制每个感光像素131分别输出以获得色块图像;将色块图像转换为第一真彩图像以作为第一图像;根据当前变焦倍数对第一图像进行裁剪得到第一裁剪图像;对第一裁剪图像进行处理得到第一目标图像。
利用完整的色块图像转换获得的真彩图像的颜色更为准确和真实,从而真彩图像经过裁剪和处理后得到的第一目标图像也更加准确和真实。
请参阅图8,需要说明的是,色块图像包括图像像素单元,图像像素单元包括2*2的阵列排布的原始像素,该原始像素的大小与感光像素131大小相同,由于覆盖同一感光像素单元13的滤光片单元12为同一颜色,输出的每个图像像素单元的相邻四个原始像素颜色相同。所以需要对色块图像进行二次转换以提高图像的解析度。在某些实施方式中,可对色块图像进行处理得到仿原图像,然后由仿原图像转换得到真彩图像。其中,真彩图像中的每个像素点都具备R、G、B三个通道的像素值,当然,真彩图像也可以是指YUV图像。可以理解,色块图像在输出时是由每个感光像131分别输出,由于相邻四个感光像素131颜色相同,因此一个图像的感光像素单元13的四个相邻原始像素的颜色相同,所以色块图像就相当于非典型的拜耳阵列,而处理器11无法对非典型的拜耳阵列直接进行处理,所以需要将色块图像先转换为仿原图像。仿原图像包括典型的拜耳阵列,处理器11可对典型的拜耳阵列直接进行处理。仿原图像包括当前像素,原始像素包括与当前像素对应的关联像素。
请参阅图9,以图9为例,当前像素为R7’7’和B8’8’,对应的关联像素分别为R77和R88。
在获取当前像素R7’7’时,由于R7’7’与对应的关联像素R77的颜色相同,因此在转换时直接将R77的像素值作为R7’7’的像素值。
在获取当前像素B8’8’时,由于B8’8’与对应的关联像素R88的颜色不相同,显然不能直接将R88的像素值作为B8’8’的像素值,需要根据B8’8’的关联像素单元通过插值处理的方式计算得到。
需要说明的是,以上及下文中的像素值应当广义理解为该像素的颜色属性数值,例如色彩值。
关联像素单元包括多个,例如4个,颜色与当前像素相同且与关联像素相邻的图像像素单元中的原始像素。
需要说明的是,此处相邻应做广义理解,以图9为例,B8’8’对应的关联像素为R88,与R88所在的图像像素单元相邻的且与B8’8’颜色相同的关联像素单元所在的图像像素单元分别为B66、B69、B96、B99所在的图像像素单元,而并非在空间上距离R88所在的图像像素单元更远的其他的蓝色图像像素单元。其中,与R88在空间上距离最近的蓝色原始像素分别为B66、B69、B96和B99,也即是说,B8’8’的关联像素单元由B66、B69、B96和B99组成,B8’8’与B66、B69、B96和B99的颜色相同,关联像素单元B66、B69、B96和B99与B8’8’对应的R88相邻。
在某些实施方式中,处理器11还可用于:计算关联像素单元各个方向上的渐变量和权重、及根据渐变量和权重计算当前像素的像素值。插值处理的方式是参考图像在不同方向上的能量渐变,将与当前像素对应的颜色相同且与关联像素相邻的关联像素单元依据在不同方向上的渐变权重大小,通过线性插值的方式计算得到当前像素的像素值。本申请实施方式仅考虑水平和垂直方向。例如,B8’8’由B66、B69、B96和B99插值得到,而在水平和垂直方向上并不存在颜色相同的原始像素,因此需要根据关联像素单元计算在水平和垂直方向上的该颜色的分量。其中,水平方向上的分量为B68和B98、垂直方向上的分量为B86和B89可以分别通过B66、B69、B96和B99计算得到。具体地,B68=B66*1/3+B69*2/3,B98=B96*1/3+B99*2/3,B86=B66*1/3+B96*2/3,B89=B69*1/3+B99*2/3。然后分别计算在水平和垂直方向上的渐变量和权重,也就是,根据该颜色在不同方向的渐变量,以确定在插值时不同方向的参考权重。在渐变量小的方向,权重较大,而在渐变量较大的方向,权重较小。其中,在水平方向上渐变量X1=|B68-B98|,在垂直方向上的渐变量X2=|B86-B89|,W1=X1/(X1+X2),W2=X2/(X1+X2)。根据这个算法,可得到,B8’8’=(1/3*B68+2/3*B98)*W2+(1/3*B86+2/3*B89)*W1。可以理解,若X1大于X2,则W1大于W2,因此计算时水平方向的权重为W2,而垂直方向上的权重为W1,反之亦反。
通过插值算法可计算得到当前像素的像素值。根据这种插值算法,可将色块图像转换为仿原图像。即形成了2*2的典型拜耳阵列。然后由仿原图像转换为第一真彩图像。当然,在进行插值算法之前,还可以对色块图像做白平衡补偿,在插值算法之后,对仿原图像做白平衡补偿。具体的,在将色块图像转换为仿原图像的过程中,在插值过程中,红色和蓝色仿原像素往往不仅参考与其颜色相同的通道的原始像素的颜色,还会参考绿色通道的原始像素的颜色权重,因此,在插值前需要进行白平衡补偿,以在插值计算中排除白平衡的影响。为了不破坏色块图像的白平衡,因此,在插值之后需要将仿原图像进行白平衡补偿还原,还原时根据在补偿中红色、绿色及蓝色的增益值进行还原。如此,可排除在插值过程中白平衡的影响,并且能够使得插值后得到的仿原图像保持色块图像的白平衡。
在某些实施方式中,在做插值计算前,可对色块图像做坏点补偿。具体的,可以对原始像素进行检测,当检测到某一原始像素为坏点时,可根据其所在的图像像素单元的其他原始像素的像素值进行坏点补偿。可排除坏点对插值计算的影响,提高图像质量。
在将色块图像转换为仿原图像后,该仿原图像是典型的拜耳阵列的图像。再由仿原图像转换为第一真彩图像。然后根据当前变焦倍数对第一真彩图像进行裁剪,得到第一裁剪图像。例如,当前真彩图像为48M,当前变焦倍数为4倍变焦,则裁剪成12M的图像,即第一裁剪图像为12M。再对第一裁剪图像进行处理得到第一目标图像。需要说明的是,这里所说的处理可包括放大处理和/或多帧降噪处理等。例如,将12M的第一裁剪图像进行放大处理以形成16M的图像并在电子设备1000的显示屏中进行显示。
请参阅图10,在某些实施方式中,步骤03包括:
032,在环境亮度大于预定阈值时,控制每个感光像素131分别输出得到色块图像以作为第一图像。根据当前变焦倍数对色块图像进行裁剪得到第一裁剪图像。再由第一裁剪图像转换为第一真彩图像以作为第一目标图像。
在某些实施方式中,步骤032可以由处理器11实现。也即是说,处理器11可用于:在环境亮度大于预定阈值时,控制每个感光像素131分别输出得到色块图像即第一图像。根据当前变焦倍数对色块图像进行裁剪得到第一裁剪图像。再由第一裁剪图像转换为第一真彩图像以作为第一目标图像。
需要说明的是,由色块图像先进行裁剪得到第一裁剪图像,此时的第一裁剪图像的4个相邻感光像素单元的颜色相同,即可等同认为第一裁剪图像的感光像素单元还是呈非典型的拜耳阵列。所以可将第一裁剪图像转换为仿原图像,转换方法与上述一致,这里不再赘述。再将仿原图像转换为第一真彩图像。根据当前变焦倍数先对色块图像进行裁剪,将多余的图像区域去除,只对裁剪后的图像进行插值计算得到仿原图像,减少了插值计算的时间。
请参阅图11,在某些实施方式中,步骤04包括:
041,在环境亮度小于或等于预定阈值时,控制同一感光像素单元13的多个感光像素131合并输出以得到合并图像,将合并图像转换为第二真彩图像以作为第二图像,根据当前变焦倍数对第二图像进行裁剪得到第二裁剪图像,对第二裁剪图像进行处理得到第二目标图像。
在某些实施方式中,步骤041可以由处理器11实现。也即是说,处理器11可用于:在环境亮度小于或等于预定阈值时,控制同一感光像素单元13的多个感光像素131合并输出得到合并图像,将合并图像转换为第二真彩图像以作为第二图像,根据当前变焦倍数对第二图像进行裁剪得到第二裁剪图像,对第二裁剪图像进行处理得到第二目标图像
请参阅图12,由于合并图像在输出时,四个相邻的同色感光像素131作为一个合并像素进行输出,如此,合并像素中的四个相邻的合并像素仍可看作是典型的拜耳阵列,可以直接进行处理以输出合并真彩图像。然后再对得到的真彩图像根据当前变焦倍数进行裁剪得到第二裁剪图像。对第二裁剪图像进行处理得到第二目标图像。这里所说的处理可包括放大处理、多帧降噪处理等。由于先将完整的合并图像转换为真彩图像,因此转换获得的真彩图像的颜色更为准确和真实,从而真彩图像经过裁剪和处理后得到的第一目标图像也更加准确和真实。
请参阅图13,在某些实施方式中,步骤04包括:
042,在环境亮度小于或等于预定阈值时,控制同一感光像素单元13的多个感光像素131合并输出得到合并图像以作为第二图像,根据当前变焦倍数对合并图像进行裁剪得到第二裁剪图像,再对第二裁剪图像进行处理得到第二真彩图像以作为第二目标图像。
在某些实施方式中,步骤042可以由处理器11实现。也即是说,处理器11可用于:在环境亮度小于或等于预定阈值时,由处理器11控制同一感光像素单元13的多个感光像素131合并输出得到合并图像以作为第二图像,根据当前变焦倍数对合并图像进行裁剪得到第二裁剪图像,再对第二裁剪图像进行处理得到第二真彩图像以作为第二目标图像。
先对合并图像进行裁剪,经裁剪后,合并图像的尺寸减小,在由合并图像转换为第二真彩图像时速度更快,提高了运算速度,使得拍照过程更加流畅,提高用户体验。
需要说明的是,步骤031可分别与步骤041或步骤042组合,步骤032可分别与步骤041或步骤042组合。请参阅图14,例如,可将步骤031与步骤041组合。即:
031,在环境亮度大于预定阈值时,控制每个感光像素131分别输出以获得色块图像,将色块图像转换为第一真彩图像以作为第一图像,根据当前变焦倍数对第一图像进行裁剪得到第一裁剪图像,对第一裁剪图像进行处理得到第一目标图像;
041,在环境亮度小于或等于预定阈值时,控制同一感光像素单元13的多个感光像素131合并输出得到合并图像,将合并图像转换为第二真彩图像以作为第二图像,根据当前变焦倍数对第二图像进行裁剪得到第二裁剪图像,对第二裁剪图像进行处理得到第二目标图像。
当然,还可以是类似步骤031和步骤042的组合,或者步骤032和步骤041的组合,也可以是步骤032和步骤042的组合。这些组合与上述组合类似,在此不一一赘述。
请参阅图15,在某些实施方式中,步骤03还包括:
033,在环境亮度大于预定阈值时,控制每个感光像素131分别输出以获得多帧第一图像,根据当前变焦倍数对多帧第一图像进行裁剪以得到多帧第一裁剪图像,对多帧第一裁剪图像采用多帧处理方法处理以得到第一目标图像。
在某些实施方式中,步骤033可以由处理器11实现。也即是说,处理器11可用于:在环境亮度大于预定阈值时,控制每个感光像素131分别输出以获得多帧第一图像,根据当前变焦倍数对多帧第一图像进行裁剪以得到多帧第一裁剪图像,对多帧第一裁剪图像采用多帧处理方法处理以得到第一目标图像。
需要说明的是,在得到多帧裁剪图像后,多帧裁剪图像的每个像素为一一对应的关系。先计算每帧裁剪图像中所有像素的像素值,然后对多帧裁剪图像对应的像素的像素值作均值计算,将计算得到的像素值均值作为第一目标图像的对应像素的像素值。当然,也可以是其他多帧处理方式。例如,还可以通过获取多帧裁剪图像的清晰度值;根据多帧裁剪图像的清晰度,对多帧裁剪图像进行筛选,保留清晰的目标裁剪图像;根据筛选掉的裁剪图像的帧数得到噪声抑制程度;根据噪声抑制程度,对保留的目标裁剪图像进行合成降噪。对多帧裁剪图像进行筛选可包括根据多帧裁剪图像与预设清晰度的大小关系进行筛选,以得到清晰的目标裁剪图像。例如,当裁剪图像的清晰度大于预设清晰度时,则说明该帧裁剪图像比较清晰,则保留该帧裁剪图像;当裁剪图像的清晰度小于或等于预设清晰度时,则说明该帧裁剪图像模糊,则被筛选掉。再根据筛选掉的裁剪图像的帧数,确定噪声抑制程度,将多帧裁剪图像的清晰度与预设清晰度比较,对多帧原始图像进行筛选,如果筛选掉的裁剪图像的帧数不为零,根据筛选掉的裁剪图像的帧数,在初始噪声抑制程度的基础上,对噪声抑制程度进行提高。可以理解的是,当筛选掉的裁剪图像的帧数较多时,此时裁剪图像中模糊的帧数较多,需要丢掉较模糊的图像,此时进行降噪的图像变少,在初始噪声抑制程度的基础上,提高噪声抑制程度从而使剩余的图像实现有效的降噪。由此,筛选掉的裁剪图像的帧数越多,在初始噪声抑制程度的基础上,噪声抑制程度提高的越大。再根据噪声抑制程度,对保留的清晰裁剪图像进行合成降噪。当然,还可以是其他多帧处理方式,在此不一一赘述。
请参阅图16,在某些实施方式中,步骤04还包括:
043,在环境亮度小于或等于预定阈值时,控制同一感光像素单元13的多个感光像素131合并输出以获得多帧第二图像,根据当前变焦倍数对多帧第二图像进行裁剪以得到多帧第二裁剪图像,对多帧第二裁剪图像采用多帧处理方法处理以得到第二目标图像。
在某些实施方式中,步骤043可以由处理器11实现。也即是说,处理器11可用于:在环境亮度小于或等于预定阈值时,控制同一感光像素单元13的多个感光像素131合并输出以获得多帧第二图像,根据当前变焦倍数对多帧第二图像进行裁剪以得到多帧第二裁剪图像,对多帧第二裁剪图像采用多帧处理方法处理以得到第二目标图像。
这里的多帧处理方法与上述可以相同,也可以是其他多帧处理方式。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (10)
1.一种控制方法,用于控制成像装置,其特征在于,所述成像装置包括图像传感器,所述图像传感器包括阵列排布的感光像素单元和设置在所述感光像素单元上且呈阵列排布的滤光片单元,每个所述滤光片单元覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制方法包括:
获取所述成像装置的当前变焦倍数和环境亮度;
判断所述环境亮度是否大于预定阈值;
在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像;
在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像。
2.根据权利要求1所述的控制方法,其特征在于,在所述判断所述环境亮度是否大于预定阈值前,所述控制方法还包括:
判断所述当前变焦倍数是否大于预定变焦倍数阈值;
在所述当前变焦倍数大于所述预定变焦倍数阈值时,进入判断所述环境亮度是否大于所述预定阈值的步骤;
在所述当前变焦倍数小于所述预定变焦倍数阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得所述第二图像。
3.根据权利要求1所述的控制方法,其特征在于,所述判断所述环境亮度是否大于预定阈值,包括:
判断所述成像装置的感光度是否小于预设感光度;
在所述感光度小于所述预设感光度时确定所述环境亮度大于所述预定阈值。
4.根据权利要求1所述的控制方法,其特征在于,所述在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像,包括:
在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得色块图像,将所述色块图像转换为第一真彩图像以作为所述第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像;
所述在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像,包括:
在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得合并图像,将所述合并图像转换为第二真彩图像以作为所述第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像。
5.根据权利要求1所述的控制方法,其特征在于,所述在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像,包括:
在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得色块图像作为所述第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,将所述第一裁剪图像转换为第一真彩图像以作为第一目标图像;
所述在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像,包括:
在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得合并图像作为所述第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,将所述第二裁剪图像转换为第二真彩图像以作为第二目标图像。
6.根据权利要求1所述的控制方法,其特征在于,所述对所述第一裁剪图像进行处理以得到第一目标图像,包括:
获取多帧所述第一裁剪图像并采用多帧处理方法处理多帧所述第一裁剪图像以得到所述第一目标图像。
7.根据权利要求1所述的控制方法,其特征在于,所述对所述第二裁剪图像进行处理以得到第二目标图像,包括:
获取多帧所述第二裁剪图像并采用多帧处理方法处理多帧所述第二裁剪图像以得到所述第二目标图像。
8.根据权利要求1所述的控制方法,其特征在于,每个所述感光像素单元包括2*2阵列的所述感光像素。
9.一种成像装置,其特征在于,所述成像装置包括图像传感器和处理器,所述图像传感器包括阵列排布的感光像素单元和设置在所述感光像素单元上且呈阵列排布的滤光片单元,每个所述滤光片单元覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述处理器用于:
获取所述成像装置的当前变焦倍数和环境亮度;
判断所述环境亮度是否大于预定阈值;
在所述环境亮度大于所述预定阈值时,控制每个所述感光像素分别输出以获得第一图像,根据所述当前变焦倍数对所述第一图像进行裁剪以得到第一裁剪图像,对所述第一裁剪图像进行处理以得到第一目标图像;
在所述环境亮度小于所述预定阈值时,控制同一所述感光像素单元的多个所述感光像素合并输出以获得第二图像,根据所述当前变焦倍数对所述第二图像进行裁剪以得到第二裁剪图像,对所述第二裁剪图像进行处理以得到第二目标图像。
10.一种电子设备,其特征在于,所述电子设备包括权利要求9所述的成像装置和壳体,所述成像装置设于所述壳体内。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910767929.XA CN110475066A (zh) | 2019-08-20 | 2019-08-20 | 控制方法、成像装置和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910767929.XA CN110475066A (zh) | 2019-08-20 | 2019-08-20 | 控制方法、成像装置和电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110475066A true CN110475066A (zh) | 2019-11-19 |
Family
ID=68511978
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910767929.XA Pending CN110475066A (zh) | 2019-08-20 | 2019-08-20 | 控制方法、成像装置和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110475066A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111970451A (zh) * | 2020-08-31 | 2020-11-20 | Oppo(重庆)智能科技有限公司 | 图像处理方法、图像处理装置及终端设备 |
CN112019738A (zh) * | 2020-07-31 | 2020-12-01 | 广东小天才科技有限公司 | 一种拍照方法及终端设备 |
CN112351193A (zh) * | 2020-09-17 | 2021-02-09 | 格科微电子(上海)有限公司 | 基于时序控制的变焦方法、图像采集设备及存储介质 |
CN112437237A (zh) * | 2020-12-16 | 2021-03-02 | 维沃移动通信有限公司 | 拍摄方法及装置 |
CN115426449A (zh) * | 2022-07-30 | 2022-12-02 | 荣耀终端有限公司 | 一种拍照方法和终端 |
WO2022262260A1 (zh) * | 2021-06-15 | 2022-12-22 | 荣耀终端有限公司 | 一种拍摄方法及电子设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102868855A (zh) * | 2011-07-04 | 2013-01-09 | 安凯(广州)微电子技术有限公司 | 一种数码变焦方法和装置 |
CN105578067A (zh) * | 2015-12-18 | 2016-05-11 | 广东欧珀移动通信有限公司 | 图像生成方法、装置及终端设备 |
CN105611185A (zh) * | 2015-12-18 | 2016-05-25 | 广东欧珀移动通信有限公司 | 图像生成方法、装置及终端设备 |
CN106341670A (zh) * | 2016-11-29 | 2017-01-18 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106412592A (zh) * | 2016-11-29 | 2017-02-15 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置、成像装置及电子装置 |
CN106454054A (zh) * | 2016-11-29 | 2017-02-22 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN108419022A (zh) * | 2018-03-06 | 2018-08-17 | 广东欧珀移动通信有限公司 | 控制方法、控制装置、计算机可读存储介质和计算机设备 |
CN109089046A (zh) * | 2018-09-25 | 2018-12-25 | Oppo广东移动通信有限公司 | 图像降噪方法、装置、计算机可读存储介质及电子设备 |
CN109803051A (zh) * | 2019-01-14 | 2019-05-24 | 北京小米移动软件有限公司 | 环境亮度值获取方法及装置 |
-
2019
- 2019-08-20 CN CN201910767929.XA patent/CN110475066A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102868855A (zh) * | 2011-07-04 | 2013-01-09 | 安凯(广州)微电子技术有限公司 | 一种数码变焦方法和装置 |
CN105578067A (zh) * | 2015-12-18 | 2016-05-11 | 广东欧珀移动通信有限公司 | 图像生成方法、装置及终端设备 |
CN105611185A (zh) * | 2015-12-18 | 2016-05-25 | 广东欧珀移动通信有限公司 | 图像生成方法、装置及终端设备 |
CN106341670A (zh) * | 2016-11-29 | 2017-01-18 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106412592A (zh) * | 2016-11-29 | 2017-02-15 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置、成像装置及电子装置 |
CN106454054A (zh) * | 2016-11-29 | 2017-02-22 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN108419022A (zh) * | 2018-03-06 | 2018-08-17 | 广东欧珀移动通信有限公司 | 控制方法、控制装置、计算机可读存储介质和计算机设备 |
CN109089046A (zh) * | 2018-09-25 | 2018-12-25 | Oppo广东移动通信有限公司 | 图像降噪方法、装置、计算机可读存储介质及电子设备 |
CN109803051A (zh) * | 2019-01-14 | 2019-05-24 | 北京小米移动软件有限公司 | 环境亮度值获取方法及装置 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112019738A (zh) * | 2020-07-31 | 2020-12-01 | 广东小天才科技有限公司 | 一种拍照方法及终端设备 |
CN111970451A (zh) * | 2020-08-31 | 2020-11-20 | Oppo(重庆)智能科技有限公司 | 图像处理方法、图像处理装置及终端设备 |
CN111970451B (zh) * | 2020-08-31 | 2022-01-07 | Oppo(重庆)智能科技有限公司 | 图像处理方法、图像处理装置及终端设备 |
CN112351193A (zh) * | 2020-09-17 | 2021-02-09 | 格科微电子(上海)有限公司 | 基于时序控制的变焦方法、图像采集设备及存储介质 |
CN112437237A (zh) * | 2020-12-16 | 2021-03-02 | 维沃移动通信有限公司 | 拍摄方法及装置 |
WO2022262260A1 (zh) * | 2021-06-15 | 2022-12-22 | 荣耀终端有限公司 | 一种拍摄方法及电子设备 |
CN115426449A (zh) * | 2022-07-30 | 2022-12-02 | 荣耀终端有限公司 | 一种拍照方法和终端 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110475066A (zh) | 控制方法、成像装置和电子设备 | |
JP6173156B2 (ja) | 画像処理装置、撮像装置及び画像処理方法 | |
US8203633B2 (en) | Four-channel color filter array pattern | |
US7952618B2 (en) | Apparatus for controlling display of detection of target image, and method of controlling same | |
TWI524709B (zh) | 影像擷取設備、影像擷取設備之控制方法及電子裝置 | |
US8237831B2 (en) | Four-channel color filter array interpolation | |
JP5543616B2 (ja) | 色フィルタアレイ画像反復デノイズ | |
JP3675412B2 (ja) | 撮像装置 | |
CN107343190A (zh) | 白平衡调节方法、装置和终端设备 | |
CN105659159A (zh) | 相机系统、相机机身及通信方法 | |
CN102461175A (zh) | 用于四通道彩色滤光片阵列的内插 | |
JP2010213213A (ja) | 撮像装置及び撮像方法 | |
US9262062B2 (en) | Method of providing thumbnail image and image photographing apparatus thereof | |
CN110447223A (zh) | 成像元件以及摄像装置 | |
TWI446085B (zh) | 攝像裝置、自動聚焦方法及記錄媒體 | |
JP2010147786A (ja) | 撮像装置及び画像処理方法 | |
JP7158180B2 (ja) | 画像処理装置、画像処理方法、プログラム、記憶媒体 | |
EP2214136B1 (en) | Method and program for controlling image capture apparatus | |
JP5600812B2 (ja) | 撮像装置 | |
JP2016100879A (ja) | 撮像装置、画像処理方法 | |
CN101790037B (zh) | 成像设备和成像方法 | |
JP2007336107A (ja) | 撮像装置及びその制御方法並びに撮像システム | |
CN112640430B (zh) | 成像元件、摄像装置、图像数据处理方法及存储介质 | |
JP6245847B2 (ja) | 画像処理装置および画像処理方法 | |
CN110463184A (zh) | 图像处理装置、图像处理方法及程序 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191119 |
|
RJ01 | Rejection of invention patent application after publication |