CN113630558A - 一种摄像曝光方法及电子设备 - Google Patents
一种摄像曝光方法及电子设备 Download PDFInfo
- Publication number
- CN113630558A CN113630558A CN202110789690.3A CN202110789690A CN113630558A CN 113630558 A CN113630558 A CN 113630558A CN 202110789690 A CN202110789690 A CN 202110789690A CN 113630558 A CN113630558 A CN 113630558A
- Authority
- CN
- China
- Prior art keywords
- image
- camera
- exposure
- road
- main
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/665—Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
Abstract
一种摄像曝光方法及电子设备,包括:电子设备获取主路图像,主路图像是通过主路摄像头获取的图像,主路摄像头获取的主路图像用于所述电子设备显示预览画面;电子设备基于主路图像获取主路曝光参数,主路曝光参数包括主路摄像头的曝光量;电子设备基于主路曝光参数和曝光参数的映射表确定辅路曝光参数,辅路曝光参数包括辅路摄像头的曝光量,曝光参数的映射表是主路曝光参数和辅路曝光参数之间的映射表。电子设备基于辅路曝光参数对辅路摄像头进行曝光,得到辅路图像。本申请实施例,可节约计算资源。
Description
技术领域
本方案涉及电子技术领域,尤其涉及一种摄像曝光方法及电子设备。
背景技术
目前,在手机、平板等电子设备上,相机应用是重要的应用之一。用户可通过电子设备上的相机应用记录和分享图片、视频。当前用户对相机应用和摄影效果要求也越来越高。
随着相机相关技术的发展,为了呈现更好的图片效果,电子设备可以同时使用多个不同的摄像头,通过这不同的摄像头获取图像。当电子设备获取到多张来自不同摄像头的图像之后,可以对这多张图像进行融合,使图片达到更好的呈像效果。
在上述多路摄像头的拍摄过程中,需要多个摄影头进行的曝光。然而,每个摄像头的曝光均需要一个自动曝光进程时,多个曝光进程占用的计算资源较多。
发明内容
本申请实施例公开一种摄像曝光方法及电子设备,可以节约计算资源。
第一方面,本申请实施例公开在一种摄像曝光方法,包括:电子设备获取主路图像,所述主路图像是通过主路摄像头获取的图像,所述主路摄像头获取的主路图像用于所述电子设备显示预览画面;所述电子设备基于所述主路图像获取主路曝光参数,所述主路曝光参数包括所述主路摄像头的曝光量;所述电子设备基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,所述辅路曝光参数包括辅路摄像头的曝光量,所述曝光参数的映射表是所述主路曝光参数和所述辅路曝光参数之间的映射表;所述电子设备基于所述辅路曝光参数对所述辅路摄像头进行曝光,得到辅路图像,所述辅路图像是通过辅路摄像头获取的图像,所述辅路摄像头为正在运行且未进行显示预览画的摄像头。
在本申请实施例中,电子设备可以通过主路摄像头的自动曝光进程获取辅路摄像头的曝光参数,此时,仅仅需要运行一个自动曝光进程,从而可以节约计算资源。
在一种可能的实现方式中,所述电子设备基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,具体包括:确定所述辅路曝光参数yn,表示为:
yn=λ·ym
其中,所述ym为所述主路曝光参数,所述λ为所述主路曝光参数和所述辅路曝光参数之间的系数。这样,电子设备可以根据已知的主路曝光参数获取辅路曝光参数,辅路摄像头便不需要运行自动曝光进程,从而可以节约计算资源。
在一种可能的实现方式中,所述主路曝光参数还包括所述主路图像的色温和照度,所述方法还包括:所述电子设备基于所述主路图像的色温和照度确定所述λ。这样,可以根据图像的不同影响因素(即色温和照度),确定λ值,从而可以准确地确定λ的值,从而可以提高确定的系数的准确性,进而可以保证辅路摄像头的曝光效果。
在一种可能的实现方式中,所述λ包括彩色摄像头和彩色摄像头之间的曝光参数映射关系,和/或,所述λ为彩色摄像头和黑白摄像头之间的曝光参数映射关系,所述彩色摄像头的图像传感器所采集的图像为彩色图像,所述黑白摄像头的图像传感器所采集的图像为黑白图像。这样,不同的摄像头对应的映射参数可以不同,这样具体的摄像头的映射表可以具体确定,能够保证映射过程的准确性,从而保证辅路曝光参数的准确性。
在一种可能的实现方式中,所述λ的范围为0到20。
在一种可能的实现方式中,所述电子设备获取主路图像,具体包括:所述电子设备获取第一图像,所述第一图像为所述主路摄像头获取的进行初始化曝光的图像;所述电子设备开启主路摄像头对应的自动曝光进程,基于所述第一图像获取所述主路图像,所述主路图像为经过自动曝光进程调整后的图像。
在一种可能的实现方式中,所述方法还包括:在获取所述主路图像和所述辅路图像之后,所述电子设备对所述主路图像和所述辅路图像进行融合,得到目标图像。
第二方面,本申请实施例公开一种电子设备,所述包括一个或多个处理器、存储器,以及多个摄像头。所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,所述一个或多个处理器用于调用所述计算机指令以使得所述电子设备执行:获取主路图像,所述主路图像是通过主路摄像头获取的图像,所述主路摄像头获取的主路图像用于所述电子设备显示预览画面;基于所述主路图像获取主路曝光参数,所述主路曝光参数包括所述主路摄像头的曝光量;基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,所述辅路曝光参数包括辅路摄像头的曝光量,所述曝光参数的映射表是所述主路曝光参数和所述辅路曝光参数之间的映射表;基于所述辅路曝光参数对所述辅路摄像头进行曝光,得到辅路图像,所述辅路图像是通过辅路摄像头获取的图像,所述辅路摄像头为正在运行且未进行显示预览画的摄像头。
在本申请实施例中,电子设备可以通过主路摄像头的自动曝光进程获取辅路摄像头的曝光参数,此时,仅仅需要运行一个自动曝光进程,从而可以节约计算资源。
在一种可能的实现方式中,所述电子设备基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,具体执行:
确定所述辅路曝光参数yn为:
yn=λ·ym
其中,所述ym为所述主路曝光参数,所述λ为所述主路曝光参数和所述辅路曝光参数之间的系数。这样,电子设备可以根据已知的主路曝光参数获取辅路曝光参数,辅路摄像头便不需要运行自动曝光进程,从而可以节约计算资源。
在一种可能的实现方式中,所述主路曝光参数还包括所述主路图像的色温和照度,所述电子设备还执行:基于所述主路图像的色温和照度确定所述λ。这样,可以根据图像的不同影响因素(即色温和照度),确定λ值,从而可以准确地确定λ的值,从而可以提高确定的系数的准确性,进而可以保证辅路摄像头的曝光效果。
在一种可能的实现方式中,所述λ包括彩色摄像头和彩色摄像头之间的曝光参数映射关系,和/或,所述λ为彩色摄像头和黑白摄像头之间的曝光参数映射关系,所述彩色摄像头的图像传感器所采集的图像为彩色图像,所述黑白摄像头的图像传感器所采集的图像为黑白图像。这样,不同的摄像头对应的映射参数可以不同,这样具体的摄像头的映射表可以具体确定,能够保证映射过程的准确性,从而保证辅路曝光参数的准确性。
在一种可能的实现方式中,所述λ的范围为0到20。
在一种可能的实现方式中,所述电子设备获取主路图像,具体执行:获取第一图像,所述第一图像为所述主路摄像头获取的进行初始化曝光的图像;开启主路摄像头对应的自动曝光进程,基于所述第一图像获取所述主路图像,所述主路图像为经过自动曝光进程调整后的图像。
在一种可能的实现方式中,所述电子设备还执行:在获取所述主路图像和所述辅路图像之后,对所述主路图像和所述辅路图像进行融合,得到目标图像。
第三方面,本申请提供了一种电子设备,包括触控屏、摄像头、一个或多个处理器和一个或多个存储器。该一个或多个处理器与触控屏、摄像头、以及一个或多个存储器耦合,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,使得电子设备执行上述任一方面任一项可能的实现方式中的摄像曝光方法。
第四方面,本申请提供了一种电子设备,包括:一个或多个功能模块。一个或多个功能模块用于执行上述任一方面任一项可能的实现方式中的摄像曝光方法。
第五方面,本申请实施例提供了一种计算机存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得计算机装置执行上述任一方面任一项可能的实现方式中的摄像曝光方法。
第六方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行上述任一方面任一项可能的实现方式中的摄像曝光方法。
附图说明
下面对本申请实施例用到的附图进行介绍。
图1是本申请实施例提供的一种颜色过滤装置的示意图;
图2是本申请实施例提供的一种电子设备100的硬件结构示意图;
图3是本申请实施例提供的电子设备100的软件结构框图;
图4是本申请实施例提供的一种多摄像头的曝光流程的示意图;
图5是本申请实施例提供的另一种多摄像头的曝光流程的示意图;
图6是本申请实施例提供的又一种多摄像头的曝光流程的示意图;
图7是本申请实施例提供的一种摄像曝光方法的流程示意图;
图8是本申请实施例提供的一种λ系数映射的示意图;
图9是本申请实施例提供的另一种λ系数映射的示意图;
图10是本申请实施例提供的另一种摄像曝光方法的流程示意图;
图11是本申请实施例提供的又一种摄像曝光方法的流程示意图。
具体实施方式
下面将结合附图对本申请实施例中的技术方案进行清楚、详尽地描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本申请实施例提供了一种摄像曝光方法及电子设备。电子设备多个摄像头曝光模式下,可以先获取主路摄像头的曝光参数,之后可以通过主路摄像头的曝光参数确定辅路摄像头的曝光参数,从而可以节约计算资源。
下面介绍本申请实施例中相关的一些概念。
(1)主路摄像头和辅路摄像头
在现有的摄像模式中,电子设备可以有一个或多个摄像头,且不同的摄像头功能不同。例如,电子设备的摄像头可以包括广角摄像头、标准摄像头(也称,主摄摄像头)、长焦摄像头和微距摄像头等其中的两个及以上的摄像头。
当电子设备采用多摄方案时,电子设备可以同时采用多摄像头进行拍摄。由于每个摄像头均有其自身的功能和优点,因此,多摄方案可以对多个摄像头的功能进行融合,让送显的图像可以结合各个优点,从而提升电子设备的拍摄性能,让电子设备拍摄的图像质量也很佳优质。
多摄像头可以包括主路摄像头和辅路摄像头。其中,主路摄像头为送显(显示预览画面) 的摄像头,即当某一摄像头的获取的图像显示在电子设备的屏幕上时,这一摄像头为主路摄像头。其他正在运行且未进行显示预览画面的摄像头为辅路摄像头。主路摄像头和辅路摄像头可以进行切换。主路摄像头包括一个,辅路摄像头可以包括一个或多个。在多摄方案中,主路摄像头可以用来确定送显图片的取景范围,主路摄像头可以为广角摄像头或者主摄摄像头(也可以解释为,在照相App在拍照模式下的默认送显摄像头)等。辅路摄像头可以根据拍摄场景提升图片的呈像效果,辅路摄像头可以为长焦摄像头,虚化摄像头、微距摄像头等。例如,在远景的拍摄场景中,多摄摄像头的组合可以为广角摄像头(主路)+长焦摄像头(辅路),广角摄像头可以使得图像的取景范围更大,长焦摄像头可以使得用户关注的景物的清晰度更高;在近景的拍摄场景中,多摄摄像头的组合可以为标准摄像头(主路)+微距摄像头(辅路),微距摄像头可以使得近处的景物的清晰度更高等。
每个摄像头可以包括镜头(lens)、图像传感器(sensor)等器件。
镜头能够让光线进入摄像头,并呈现在图像传感器上。不同的镜头的结构对应的入射光线不同,从而可以使得电子设备的预览界面显示的取景范围不同。例如,广角摄像头的取景范围大,而相对长焦摄像头的取景范围窄,但图像清晰。
图像传感器可以投射经过镜头的光学图像。投射在图像传感器上的图像可以分为彩色图像和黑白图像。当镜头与图像传感器之间存在颜色过滤(color filter)装置时,投射在图像传感器上的图像为彩色图像。图1示出了一种颜色过滤装置的示意图。如图1所示,在图像传感器上装上一套镶嵌式的颜色滤镜,即一个颜色过滤排列(color filter array,CFA)装置,使得图像传感器可以区分组成可以光的红、绿、蓝(red green blue,RGB)三种基本颜色。反之,当镜头与图像传感器之间不存在颜色过滤装置时,投射在图像传感器上的图像为黑白图像。此时,由于透射在图像传感器的光没有进行颜色过滤,图像传感器在单位时间内接收到的光子数比彩色图像传感器多,因此,黑白的图像传感器比彩色的图像传感器的感光度更好。
其中,上述的颜色过滤装置可以是其他类型的装置。
基于上述黑白和彩色摄像头的分类方式,多摄像头的组合方式还可以是:彩色摄像头+ 黑白摄像头、以及彩色摄像头+彩色摄像头。其中,彩色摄像头可以是主路摄像头,也可以是辅路摄像头,黑白摄像头可以是辅路摄像头。例如,广角摄像头(主路摄像头)+长焦摄像头 (辅路摄像头)的组合可以是彩色摄像头+彩色摄像头的组合,还可以是彩色摄像头+黑白摄像头的组合。
可理解,多摄方案不限于上述内容,还可以有其他组合形式,本申请对此不作限制。
(2)拍摄参数
拍摄参数可包含快门、曝光时间、光圈值(aperture value,AV)、曝光值(exposurevalue, EV)和感光度ISO。以下分别进行介绍。
快门是控制光线进入相机时间长短,以决定图片曝光时间的装置。快门保持在开启状态的时间越长,进入摄像头的光线越多,图片的曝光时间越长。快门保持在开启状态的时间越短,进入摄像头的光线越少,图片的曝光时间越短。
快门速度,是快门保持开启状态的时间。快门速度即是从快门开启状态到关闭状态的时间间隔。在这一段时间内,物体可以在底片上留下影像。快门速度越快,运动物体在图像传感器上呈现的图片越清晰。反之,快门速度越慢,运动的物体呈现的图片就越模糊。
曝光时间是指为了将光投射到摄像头的感光材料的感光面上,快门所要打开的时间。曝光时间由感光材料的感光度和对感光面上的照度确定。曝光时间越长,进入摄像头的光越多。因此暗光场景下需要长的曝光时间,逆光场景下需要短的曝光时间。快门速度即是曝光时间。
光圈值,是镜头的焦距与镜头通光直径的比值。光圈值越大,进入摄像头的光线越多。光圈值越小,进入摄像头的光线越少。
曝光值是快门速度和光圈值组合来表示摄像头的镜头通光能力的一个数值。曝光值的定义可以是:
其中N是光圈值;t是曝光时间(快门),单位秒。
ISO用于衡量底片对于光的灵敏程度,即感光度或增益。对于不敏感的底片,需要更长的曝光时间以达到跟敏感底片亮度相同的成像。对于敏感的底片,需要较短的曝光时间以达到的与不敏感的底片亮度相同的成像。
拍摄参数中,快门、曝光时间、光圈值、曝光值和ISO,电子设备可通过算法实现自动对焦(auto focus,AF)、自动曝光(automatic exposure,AE)、自动白平衡(auto whitebalance, AWB)和3A(AF、AE和AWB),以实现这些拍摄参数的自动调节。
(3)自动曝光
自动曝光(AE)是指电子设备根据可用的光源条件自动设置曝光值。电子设备可根据当前所采集图片的曝光值,自动调整快门速度(曝光时间)、光圈值(光圈大小)和ISO感光度,以实现自动设定曝光值。
一种可能的AE自动曝光方式,电子设备可以对当前图像进行亮度统计,当亮度满足要求时,可以结束曝光进程(即不需要再调整曝光值);当亮度不满足要求,可以根据当前图像亮度确定曝光值,并根据曝光值计算曝光时间、光圈值和增益,之后将计算好的曝光参数应用到相机。当调整相机的曝光参数之后,可以重新开始进行亮度统计,并进行上述过程。
应理解,上述的自动曝光过程仅仅是举例说明不加限定。
下面介绍本申请实施例涉及的装置。
图2为本申请实施例提供的一种电子设备100的硬件结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(Universal Serial Bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(Subscriber Identification Module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M 等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(Application Processor,AP),调制解调处理器,图形处理器(Graphics Processingunit,GPU),图像信号处理器(Image Signal Processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(Digital Signal Processor,DSP),基带处理器,和/或神经网络处理器(Neural-network Processing Unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
可理解,处理器110中还可以包括AE系统。AE系统可以具体设置在ISP中。AE系统可用于实现曝光参数的自动调整。可选的,AE系统还可以集成在其它处理器芯片中。本申请实施例对此不作限定。
在本申请提供的实施例中,电子设备100可以通过处理器110执行所述曝光强度调节方法。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110 中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备100,例如AR设备等。
充电管理模块140用于从充电器接收充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备100供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块 141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(Low Noise Amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(WirelessLocal Area Networks,WLAN)(如无线保真(Wireless Fidelity,Wi-Fi)网络),蓝牙(Bluetooth,BT),全球导航卫星系统(Global Navigation Satellite System,GNSS),调频(Frequency Modulation, FM),近距离无线通信技术(Near Field Communication,NFC),红外技术(Infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(Liquid Crystal Display,LCD),有机发光二极管(Organic Light-EmittingDiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(Active-MatrixOrganic Light Emitting Diode的,AMOLED),柔性发光二极管(Flex Light-EmittingDiode,FLED),Mini LED, Micro LED,Micro-OLED,量子点发光二极管(Quantum Dot LightEmitting Diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现获取功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像或视频。在一些实施例中,ISP可以设置在摄像头193中。
在本申请实施例中,在电子设备运行自动曝光AE进程的过程中,ISP可以输出AE的统计信息。当多个AE进程同时运行时,ISP也需要同时支持多路进程的AE统计信息的输出。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(Charge Coupled Device,CCD)或互补金属氧化物半导体 (Complementary Metal-Oxide-Semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像或视频信号。ISP将数字图像或视频信号输出到DSP加工处理。DSP将数字图像或视频信号转换成标准的RGB,YUV等格式的图像或视频信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1 的正整数。例如,在一些实施例中,电子设备100可以利用N个摄像头193获取多个曝光系数的图像,进而,在视频后处理中,电子设备100可以根据多个曝光系数的图像,通过HDR 技术合成HDR图像。
在本申请实施例中,N为大于等于2的整数,即电子设备可以包括多个摄像头,从而可以进行多摄处理。
数字信号处理器用于处理数字信号,除了可以处理数字图像或视频信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组 (Moving Picture Experts Group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(Neural-Network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备 100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像视频播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。电子设备100可以设置至少一个麦克风170C。
耳机接口170D用于连接有线耳机。
传感器模块180可以包括1个或多个传感器,这些传感器可以为相同类型或不同类型。可理解,图1所示的传感器模块180仅为一种示例性的划分方式,还可能有其他划分方式,本申请对此不作限制。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C 测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备100姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。
环境光传感器180L用于感知环境光亮度。
指纹传感器180H用于获取指纹。
温度传感器180J用于检测温度。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
在本申请的一个实施例中,用户利用电子设备100进行延时摄影或连拍,需要获取一系列图像。在延时摄像或连拍的场景中,电子设备100可以采取AE模式。即电子设备100自动调整AE值,在预览这一系列图像的过程中,若用户有触摸操作作用于显示屏194,可能触发touchAE模式。在touchAE模式下,电子设备100可以调整用户触摸显示屏的相应位置的亮度,并进行高权重测光。使得计算画面平均亮度的时候,用户触摸区域的权重明显高于其他区域,最终计算所得的画面平均亮度更加靠近用户触摸区域的平均亮度。
骨传导传感器180M可以获取振动信号。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
图3为本申请实施例提供的一种电子设备100的软件结构示意图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将系统分为四层,从上至下分别为应用程序层,应用程序框架层,运行时(Runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图3所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序(也可以称为应用)。
应用程序框架层为应用程序层的应用程序提供应用编程接口(ApplicationProgramming Interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图3所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话界面形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
运行时(Runtime)包括核心库和虚拟机。Runtime负责系统的调度和管理。
核心库包含两部分:一部分是编程语言(例如,java语言)需要调用的功能函数,另一部分是系统的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的编程文件(例如,java文件)执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(Surface Manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),二维图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了二维(2-Dimensional, 2D)和三维(3-Dimensional,3D)图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现3D图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动,虚拟卡驱动。
下面结合拍摄场景,示例性说明电子设备100软件以及硬件的工作流程。
当触摸传感器180K接收到触摸操作,相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标,触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,识别该输入事件所对应的控件。以该触摸操作是触摸单击操作,该单击操作所对应的控件为相机应用图标的控件为例,相机应用调用应用框架层的接口,启动相机应用,进而通过调用内核层启动摄像头驱动,通过摄像头 193捕获静态图像或视频。
在多摄方案中,电子设备可以通过不同摄像头获取多张图像,之后可以对这多张图像进行融合得到一张图像,从而可以提高图像效果。例如,在彩色摄像头+黑白摄像头的多摄组合方式中,电子设备可以将黑白图像的细节强化进彩色图像,将两张图像融合成一张图像,通过这种方式合成的图像,画质更棒、细节更清晰。
以下说明两种在多摄场景中,电子设备需要通过多个摄像头分别进行自动曝光的过程:
实施方式1:分别运行多路摄像头的对应的自动曝光多路进程。
图4示出了一种多摄像头的曝光流程的示意图。
当ISP支持运行多个进行曝光进程时,主路摄像头和辅路摄像头可以各自运行自己曝光进程。然而,电子设备多路曝光便需要各自运行对应多个曝光进程,多路曝光进程占用的计算资源较多。
示例性地,如图4中的(A)所示,电子设备100可以显示有主屏幕的界面410,该界面410中显示了一个放置有应用图标的页面,该页面包括多个应用图标(例如,图库应用图标、相机应用图标等等)。此外,该页面可以包括多个托盘图标(例如拨号应用图标、信息应用图标、联系人应用图标)。上述图片图标是可选的,本申请实施例对此不作限制。
电子设备100可以接收用户作用于相机应用图标的输入操作(例如,单击),响应于该输入操作,电子设备100可以显示如图4中的(B)所示的拍摄界面420。
如图4中的(B)所示,该拍摄界面420可以包括有回显控件421、拍摄控件422、摄像头转换控件423、摄像头捕捉的画面424、设置控件425和变焦倍率控件426。摄像头捕捉的画面424为主路摄像头捕捉的画面。其中,该回显控件421可用于显示已拍摄的图像。该拍摄控件422用于触发保存摄像头拍摄到的图像。该摄像头转换控件423可用于切换拍照的摄像头。该设置控件425可用于设置拍照功能。该变焦倍率控件426可用于设置摄像头的变焦倍数。其中,该变焦倍率控件426可以触发电子设备100显示变焦滑动条,该变焦滑动条可以接收用户的向上(或向下)滑动的操作,使得电子设备100增大(或减小)摄像头的变焦倍率。可能的,该变焦倍率控件426可以电子设备100显示变焦增大控件和变焦增小控件,变焦增大控件可用于接收并响应于用户的输入,触发电子设备100增大摄像头的变焦倍率;变焦减小控件可用于接收并响应于用户的输入,触发电子设备100减小摄像头的变焦倍率。该拍摄模式控件可用于触发开启该拍摄模式对应的图像处理流程。
在电子设备显示拍摄界面420之后,电子设备可以启动自动曝光AE进程1,对当前的图像画面进行自动曝光。当AE进程1的曝光参数稳定之后,电子设备可以显示如图4中的(C) 所示的拍摄界面430。图4中的(C)的描述可以参考图4中的(B)的描述,不加赘述。
当电子设备启动多路摄像头,且ISP可以支持分别多路摄像头的AE进程时,如图4中的(D)所示,电子设备可以辅路摄像头获取图像440,之后电子设备可以启动辅路摄像头的 AE进程2,对图像440进程曝光。当AE进程2的曝光参数调整之后,电子设备可以显示如图4中的(E)所示的图像450。
其中,主路摄像头和辅路摄像头可以是不同功能的两个摄像头,例如,主路摄像头是广角摄像头,辅路摄像头是长焦摄像头。
需要说明的是,AE进程1和AE进程2可以同时运行,也可以不同时运行,即主路摄像头和辅路摄像头分别由各自的AE进程自动曝光,互不影响。
当电子设备的取景画面中的图像需要多路摄像头的图像进行融合时,电子设备可以将主路摄像头的画面图4中的(C)和辅路摄像头的画面图4中的(E)进行融合。如图4中的(F) 所示,电子设备可以显示融合后的画面460。当主路摄像头是广角摄像头,辅路摄像头是长焦摄像头时,取景画面中融合后的图像其能够保持广角摄像头的更广范围的画面,还可以更加清晰地显示长焦摄像头中的画面。此处为举例说明融合方式,不加限定。
实施方式2:依次运行多路摄像头的自动曝光进程。
图5示出了另一种多摄像头的曝光流程的示意图。
当ISP不支持运行多个摄像头同时进行曝光时,电子设备需要切换曝光进程。电子设备通过主路摄像头和辅路摄像头进行曝光的时候,在其中一路摄像头曝光完成后,结束这一路摄像头的曝光进程,并启动另一路摄像头的曝光进程,再继续进行曝光。例如,电子设备需要先停止主路摄像头的进程,再启动辅路摄像头的曝光进程。然而,上述切换曝光进程的过程中,从主路摄像头开始曝光到辅路摄像头曝光存在时间差,切换AE进程存在时间差,电子设备需要经过一定时间才能够获取融合后的图像,因而用户感知到预览画面的连续性较差。此外,由于电子设备需要依次运行多路的自动曝光进程,因此,自动曝光消耗的计算资源较多。
示例性地,如图5中的(A)所示,电子设备100可以显示有主屏幕的界面510,电子设备100可以接收用户作用于相机应用图标的输入操作,响应于该输入操作,电子设备100可以显示如图5中的(B)所示的拍摄界面520。图5中的(A)的描述可以参考图4中的(A) 的描述,不加赘述。
在电子设备显示拍摄界面520之后,电子设备可以启动自动曝光(AE)进程1,对当前的图像画面进行自动曝光。当AE进程1的曝光参数确定之后,电子设备可以显示如图5中的(C)所示的拍摄界面530。图5中的(B)和(C)的描述可以参考图4中的(B)的描述,不加赘述。
当电子设备启动多路摄像头,且ISP可以不支持多路摄像头的AE进程(即ISP仅仅可以运行一个AE进程)时,电子设备可以在主路摄像头自动曝光进程结束之后,开启辅路摄像头的自动曝光进程,即关闭AE进程1后开启AE进程2。如图5中的(D)所示,电子设备可以通过辅路摄像头获取图像540,之后电子设备根据AE进程2进行自动曝光。当AE进程2的曝光参数调整之后,电子设备可以显示如图5中的(E)所示的图像550。
需要说明的是,AE进程1和AE进程2不能同时运行,即电子设备不能同时运行多路AE进程,在主路摄像头和辅路摄像头自动曝光过程中,AE进程需要进行切换。
当主路摄像头和辅路摄像头均能获取曝光参数调整之后的图像时,可以对图像进行融合,即可以将据如图5中的(C)和(E)进行融合,得到如图5中的(F)。具体描述可以参考图 4中的(F),不加赘述。
在上述两种实施方式中,电子设备选择的曝光方式过程,要么多路摄像头需要多个的AE 进程分别曝光,要么需要切换AE进程曝光。而运行多个AE进程意味着需要占用更多计算资源。
针对上述的问题,本申请实施例提出一种曝光方法,在多路摄像头曝光场景中,电子设备可以在主路摄像头自动曝光结束之后,根据主路摄像头的参数,以及不同摄像头之间的曝光参数映射表得到辅路摄像头的曝光参数。上述曝光过程中,电子设备可以通过一个摄像头的AE进程获取其他的摄像头的曝光参数,此时,仅仅需要运行一个AE进程,从而可以节约计算资源。
下面结合具体场景,具体介绍本申请实施例提供的摄像曝光方法。
图6示出了一种多摄像头的曝光流程的示意图。
如图6中的(A)所示,电子设备100可以接收用户作用于相机应用图标的输入操作(例如,单击),响应于该输入操作,电子设备100可以显示如图6中的(B)所示的拍摄界面620。其中,图6中的(A)的描述可以参考图4中的(A)的描述,不加赘述。
在电子设备显示拍摄界面620之后,电子设备可以启动自动曝光(AE)进程1,对当前的图像画面进行自动曝光。在电子设备进入拍照的预览、拍摄或录像的过程中,电子设备的摄像头便可以持续地进行曝光,从而电子设备可以获取曝光参数。当AE进程1的曝光参数调整之后,电子设备可以显示如图6中的(C)所示的拍摄界面630。图6中的(B)到(C) 为电子设备AE调整前后的图像。图6中的(B)和(C)的描述可以参考图4中的(B)的描述,不加赘述。
当电子设备启动多路摄像头,如图6中的(D)和(E)所示,电子设备可以通过辅路摄像头获取图像640,图像640是未进行曝光参数调整的图像。电子设备可以通过主路曝光参数确定辅路曝光参数,之后可以根据辅路曝光参数直接调整辅路曝光,得到图像650。图6中的(E)为基于辅路曝光参数获取的图像650。
需要说明的是,在整个曝光过程中,电子设备可以只运行主路摄像头对应的AE进程1,不需要运行其他辅路摄像头对应的AE进程。
可选地,当电子设备的取景画面中的图像需要多路摄像头的图像进行融合时,电子设备可以将曝光调整结束之后的图像进行融合,即可以将主路摄像头的画面图6中的(C)和辅路摄像头的画面图6中的(E)进行融合。如图6中的(F)所示,电子设备可以显示融合后的画面660。当主路摄像头是广角摄像头,辅路摄像头是长焦摄像头时,取景画面中融合后的图像其能够保持广角摄像头的更广范围的画面,还可以更加清晰地显示长焦摄像头中的画面。应理解,不同的摄像头,融合之后的效果不同,上述仅仅试举例说明其中一种融合方式,不加限定。
请参阅图7,图7是本申请实施例提供的一种摄像曝光方法的流程示意图。如图7所示,该摄像曝光方法包含步骤S101~S102。
S101、电子设备获取主路曝光参数。
其中,主路曝光参数为主路摄像头经过自动曝光调整之后得到图像的曝光参数。主路曝光参数可以包括主路摄像头的曝光量,还可以包括照度和色温。主路摄像头为送显的摄像头。
电子设备进入相机的预览画面中,可以启动主路摄像头的自动曝光进程,当自动曝光进程结束后,电子设备可以获取主路摄像头的曝光参数。
S102、电子设备基于主路曝光参数和曝光参数的映射表确定辅路曝光参数。
其中,曝光参数的映射表可以为多个(两个及以上)摄像头之间的曝光参数的映射表。该映射表可以是彩色摄像头与彩色摄像头之间曝光参数的映射表,还可以是彩色摄像头与黑白摄像头之间曝光参数的映射表。辅路曝光参数为辅路摄像头经过自动曝光调整之后得到的曝光参数。辅路曝光参数可以包括辅路摄像头的曝光量,还可以包括照度和色温。
电子设备获取主路曝光参数之后,可以基于主路曝光参数和曝光参数的映射表确定辅路曝光参数。
以下说明电子设备确定辅路曝光参数的过程:
当主路曝光参数为ym,曝光参数的映射表(λ系数表)中,主路曝光参数和辅路曝光参数之间的系数为λ时,则辅路曝光参数为yn=λ·ym。其中λ大于0。优选地,λ的范围为0到20。λ可以从曝光参数的映射表获得。
以下示例性地说明两种曝光参数的映射表,如下:
曝光参数的映射表1:
表1
照度\色温 | 2800 | 3500 | 4600 | 5800 |
50 | 0.915416 | 0.904526 | 0.890903 | 0.798177 |
300 | 0.943512 | 0.93176 | 0.910628 | 0.815249 |
1000 | 0.952774 | 0.911136 | 0.933982 | 0.837368 |
在这一映射表中,主路摄像头的图像传感器获得彩色图像,辅路摄像头的图像传感器获得黑白图像。如表1所示,在确定照度和色温之后,可以确定λ。电子设备可以根据当前图像获取每个像素对应的λ值。对应地,图8示出了一种λ系数映射的示意图。如图8所示,随着照度和色温的变化,λ系数呈现一个曲面的变化。当电子设备已知图像中某一像素的照度和色温时,可以确定λ。例如,当某一像素的色温为4600K(开尔文),照度为50lux(勒克斯)时,则电子设备可以确定λ为0.890903。
曝光参数的映射表2:
表2
照度\色温 | 2800 | 3500 | 4600 | 5800 |
50 | 8.382892 | 10.7387 | 13.30506 | 12.00865 |
300 | 1.266048 | 1.787721 | 1.796727 | 1.753718 |
1000 | 1.860655 | 1.778243 | 1.8243 | 1.690202 |
这一映射表中,主路摄像头和辅路摄像头的图像传感器均能获得彩色图像。如表2所示,在确定照度和色温时,可以确定λ。电子设备可以根据当前图像获取每个像素对应的λ值。对应地,图9示出了另一种λ系数映射的示意图。如图9所示,随着照度和色温的变化,λ系数呈现一个曲面的变化。当电子设备已知图像中某一像素的照度和色温时,可以确定λ。例如,当某一像素的色温为4600K,照度为50lux时,则电子设备可以确定λ为13.30506。
上述两种映射关系中,λ的值可以大于1,也可以等1,还可以小于1,不加限定。λ主要是关于图像传感器和颜色过滤装置的参数,其关于外界环境的影响因素主要包括光照和色温。
需要说明的是,上述的λ的映射关系表是示例性的举例说明,不同的摄像头对应的系数λ不尽相同,此处不加限定。
本申请实施例中,电子设备可以仅仅通过主路摄像头的曝光进程,便能够确定辅路摄像头的曝光参数,从而可以不用每个摄像头均开启对应的AE进程。减少AE进程的运行的数量,便可以节约计算资源。此外,对于一些ISP不支持多个摄像头的AE进程同时运行的情况,切换AE进程会造成预览画面的连续性不好,而本申请通过一路AE进程变能够得到多路的曝光参数,提高预览画面的连续性。
请参阅图10,图10是本申请实施例提供的另一种摄像曝光方法的流程示意图。如图10 所示,该摄像曝光方法包含步骤S201~S205。
S201、电子设备获取第一图像。
电子设备可以通过主路摄像头获取第一图像,第一图像为主路摄像头获取的进行初始化曝光的图像,初始化曝光的图像为曝光参数尚未调整好的图像。
S202、电子设备基于第一图像进行自动曝光,得到主路曝光参数,基于主路曝光参数进行曝光,得到主路图像。
其中,步骤S202可以参考步骤S101的描述,不加赘述。
S203、电子设备基于主路曝光参数和曝光参数映射表确定辅路曝光参数。
其中,步骤S203可以参考步骤S102的描述,不加赘述。
S204、电子设备基于辅路曝光参数对辅路摄像头进行曝光,得到辅路图像。
当确定辅路曝光参数之后,可以将该辅路摄像头的曝光参数调整为上述辅路曝光参数,从而进行曝光,得到曝光后的辅路图像。
S205、电子设备融合主路图像和辅路图像,得到目标图像。
当电子设备获取到主路图像和辅路图像之后可以对主路图像和辅路图像进行融合,得到目标图像。
主路图像和辅路图像的融合方式可以参考图4-图6中的融合方式,不加赘述。
示例性地,图11示出了又一种摄像曝光方法的流程示意图。根据上述,结合图10,具体说明一种摄像曝光方法:
第一步,在第N帧图像曝光结束时,电子设备通过主路摄像头的图像传感器获取第N帧图像的曝光参数。例如,第N帧图像每一帧的照度和色温。
第二步,电子设备可以通过开启AE进程(AE算法)进行自动曝光。电子设备可以获取第N帧图像的曝光参数,即这一图像每个像素点的曝光量ym。
第三步,电子设备可以根据照度和色温,在映射表中查找每一像素点的λ,之后可以根据 yn=ym·λ,确定对应的辅路摄像头在每个像素点的曝光值yn。
第四步,电子设备可以在第N+2帧曝光之前,将向主路摄像头的图像传感器发送ym,以及向辅路摄像头的图像传感器发送yn。
此后,电子设备在曝光第N+2帧的图像时,主路摄像头可以基于ym进行曝光,辅路摄像头可以基于yn进行曝光。
可选地,当电子设备获取到经过调整曝光之后的图像时,可以对主路摄像头和辅路摄像头的图像进行融合。
在上述实施例中,全部或部分功能可以通过软件、硬件、或者软件加硬件的组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如,固态硬盘(solidstate disk,SSD)) 等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,该流程可以由计算机程序来指令相关的硬件完成,该程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法实施例的流程。而前述的存储介质包括:ROM或随机存储记忆体 RAM、磁碟或者光盘等各种可存储程序代码的介质。
Claims (16)
1.一种摄像曝光方法,其特征在于,所述方法包括:
电子设备获取主路图像,所述主路图像是通过主路摄像头获取的图像,所述主路摄像头获取的主路图像用于所述电子设备显示预览画面;
所述电子设备基于所述主路图像获取主路曝光参数,所述主路曝光参数包括所述主路摄像头的曝光量;
所述电子设备基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,所述辅路曝光参数包括辅路摄像头的曝光量,所述曝光参数的映射表是所述主路曝光参数和所述辅路曝光参数之间的映射表;
所述电子设备基于所述辅路曝光参数对所述辅路摄像头进行曝光,得到辅路图像,所述辅路图像是通过辅路摄像头获取的图像,所述辅路摄像头为正在运行且未进行显示预览画的摄像头。
2.根据权利要求1所述的方法,其特征在于,所述电子设备基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,具体包括:
确定所述辅路曝光参数yn为:
yn=λ·ym
其中,所述ym为所述主路曝光参数,所述λ为所述主路曝光参数和所述辅路曝光参数之间的系数。
3.根据权利要求2所述的方法,其特征在于,所述主路曝光参数还包括所述主路图像的色温和照度,所述方法还包括:
所述电子设备基于所述主路图像的色温和照度确定所述λ。
4.根据权利要求2或3所述的方法,其特征在于,所述λ包括彩色摄像头和彩色摄像头之间的曝光参数映射关系,和/或,所述λ为彩色摄像头和黑白摄像头之间的曝光参数映射关系,所述彩色摄像头的图像传感器所采集的图像为彩色图像,所述黑白摄像头的图像传感器所采集的图像为黑白图像。
5.根据权利要求2-4任一项所述的方法,其特征在于,所述λ的范围为0到20。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述电子设备获取主路图像,具体包括:
所述电子设备获取第一图像,所述第一图像为所述主路摄像头获取的进行初始化曝光的图像;
所述电子设备开启主路摄像头对应的自动曝光进程,基于所述第一图像获取所述主路图像,所述主路图像为经过自动曝光进程调整后的图像。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
在获取所述主路图像和所述辅路图像之后,所述电子设备对所述主路图像和所述辅路图像进行融合,得到目标图像。
8.一种电子设备,其特征在于,摄像头、一个或多个处理器和一个或多个存储器,所述一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当所述一个或多个处理器执行所述计算机指令时,以使得所述电子设备执行:
获取主路图像,所述主路图像是通过主路摄像头获取的图像,所述主路摄像头获取的主路图像用于所述电子设备显示预览画面;
基于所述主路图像获取主路曝光参数,所述主路曝光参数包括所述主路摄像头的曝光量;
基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,所述辅路曝光参数包括辅路摄像头的曝光量,所述曝光参数的映射表是所述主路曝光参数和所述辅路曝光参数之间的映射表;
基于所述辅路曝光参数对所述辅路摄像头进行曝光,得到辅路图像,所述辅路图像是通过辅路摄像头获取的图像,所述辅路摄像头为正在运行且未进行显示预览画的摄像头。
9.根据权利要求8所述的方法,其特征在于,所述电子设备基于所述主路曝光参数和曝光参数的映射表确定辅路曝光参数,具体执行:
确定所述辅路曝光参数yn为:
yn=λ·ym
其中,所述ym为所述主路曝光参数,所述λ为所述主路曝光参数和所述辅路曝光参数之间的系数。
10.根据权利要求9所述的方法,其特征在于,所述主路曝光参数还包括所述主路图像的色温和照度,所述电子设备还执行:基于所述主路图像的色温和照度确定所述λ。
11.根据权利要求8或9所述的方法,其特征在于,所述λ包括彩色摄像头和彩色摄像头之间的曝光参数映射关系,和/或,所述λ为彩色摄像头和黑白摄像头之间的曝光参数映射关系,所述彩色摄像头的图像传感器所采集的图像为彩色图像,所述黑白摄像头的图像传感器所采集的图像为黑白图像。
12.根据权利要求9-11任一项所述的方法,其特征在于,所述λ的范围为0到20。
13.根据权利要求8-12任一项所述的方法,其特征在于,所述电子设备获取主路图像,具体执行:
获取第一图像,所述第一图像为所述主路摄像头获取的进行初始化曝光的图像;
开启主路摄像头对应的自动曝光进程,基于所述第一图像获取所述主路图像,所述主路图像为经过自动曝光进程调整后的图像。
14.根据权利要求8-13任一项所述的方法,其特征在于,所述电子设备还执行:
在获取所述主路图像和所述辅路图像之后,对所述主路图像和所述辅路图像进行融合,得到目标图像。
15.一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在电子设备上运行时,使得所述电子设备执行如权利要求1-7中任一项所述的方法。
16.一种计算机可读存储介质,包括指令,其特征在于,当所述指令在电子设备上运行时,使得所述电子设备执行如权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110789690.3A CN113630558B (zh) | 2021-07-13 | 2021-07-13 | 一种摄像曝光方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110789690.3A CN113630558B (zh) | 2021-07-13 | 2021-07-13 | 一种摄像曝光方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113630558A true CN113630558A (zh) | 2021-11-09 |
CN113630558B CN113630558B (zh) | 2022-11-29 |
Family
ID=78379699
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110789690.3A Active CN113630558B (zh) | 2021-07-13 | 2021-07-13 | 一种摄像曝光方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113630558B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115460355A (zh) * | 2022-08-31 | 2022-12-09 | 青岛海信移动通信技术股份有限公司 | 一种图像采集方法及装置 |
CN116074636A (zh) * | 2022-05-30 | 2023-05-05 | 荣耀终端有限公司 | 一种拍摄方法及电子设备 |
CN116528052A (zh) * | 2023-04-14 | 2023-08-01 | 北京拙河科技有限公司 | 一种增加高速运动下光场相机曝光精度的方法及装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108848294A (zh) * | 2018-08-15 | 2018-11-20 | 努比亚技术有限公司 | 一种拍摄参数调整方法、终端及计算机可读存储介质 |
CN109495689A (zh) * | 2018-12-29 | 2019-03-19 | 北京旷视科技有限公司 | 一种拍摄方法、装置、电子设备及存储介质 |
CN109862269A (zh) * | 2019-02-18 | 2019-06-07 | Oppo广东移动通信有限公司 | 图像采集方法、装置、电子设备和计算机可读存储介质 |
CN110213494A (zh) * | 2019-07-03 | 2019-09-06 | Oppo广东移动通信有限公司 | 拍摄方法和装置、电子设备、计算机可读存储介质 |
CN110225248A (zh) * | 2019-05-29 | 2019-09-10 | Oppo广东移动通信有限公司 | 图像采集方法和装置、电子设备、计算机可读存储介质 |
US20200336643A1 (en) * | 2019-04-22 | 2020-10-22 | Canon Kabushiki Kaisha | Image capturing apparatus, method of controlling the same, and storage medium |
CN111917950A (zh) * | 2020-06-30 | 2020-11-10 | 北京迈格威科技有限公司 | 图像处理方法、装置、电子设备及存储介质 |
-
2021
- 2021-07-13 CN CN202110789690.3A patent/CN113630558B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108848294A (zh) * | 2018-08-15 | 2018-11-20 | 努比亚技术有限公司 | 一种拍摄参数调整方法、终端及计算机可读存储介质 |
CN109495689A (zh) * | 2018-12-29 | 2019-03-19 | 北京旷视科技有限公司 | 一种拍摄方法、装置、电子设备及存储介质 |
CN109862269A (zh) * | 2019-02-18 | 2019-06-07 | Oppo广东移动通信有限公司 | 图像采集方法、装置、电子设备和计算机可读存储介质 |
US20200336643A1 (en) * | 2019-04-22 | 2020-10-22 | Canon Kabushiki Kaisha | Image capturing apparatus, method of controlling the same, and storage medium |
CN110225248A (zh) * | 2019-05-29 | 2019-09-10 | Oppo广东移动通信有限公司 | 图像采集方法和装置、电子设备、计算机可读存储介质 |
CN110213494A (zh) * | 2019-07-03 | 2019-09-06 | Oppo广东移动通信有限公司 | 拍摄方法和装置、电子设备、计算机可读存储介质 |
CN111917950A (zh) * | 2020-06-30 | 2020-11-10 | 北京迈格威科技有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116074636A (zh) * | 2022-05-30 | 2023-05-05 | 荣耀终端有限公司 | 一种拍摄方法及电子设备 |
CN116074636B (zh) * | 2022-05-30 | 2023-11-17 | 荣耀终端有限公司 | 一种拍摄方法及电子设备 |
CN115460355A (zh) * | 2022-08-31 | 2022-12-09 | 青岛海信移动通信技术股份有限公司 | 一种图像采集方法及装置 |
CN115460355B (zh) * | 2022-08-31 | 2024-03-29 | 青岛海信移动通信技术有限公司 | 一种图像采集方法及装置 |
CN116528052A (zh) * | 2023-04-14 | 2023-08-01 | 北京拙河科技有限公司 | 一种增加高速运动下光场相机曝光精度的方法及装置 |
CN116528052B (zh) * | 2023-04-14 | 2024-05-31 | 北京拙河科技有限公司 | 一种增加高速运动下光场相机曝光精度的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN113630558B (zh) | 2022-11-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114157804B (zh) | 一种长焦拍摄的方法及电子设备 | |
CN112532859B (zh) | 视频采集方法和电子设备 | |
WO2021052232A1 (zh) | 一种延时摄影的拍摄方法及设备 | |
CN113132620B (zh) | 一种图像拍摄方法及相关装置 | |
WO2020073959A1 (zh) | 图像捕捉方法及电子设备 | |
US11949978B2 (en) | Image content removal method and related apparatus | |
CN113630558B (zh) | 一种摄像曝光方法及电子设备 | |
WO2021129198A1 (zh) | 一种长焦场景下的拍摄方法及终端 | |
WO2023015981A1 (zh) | 图像处理方法及其相关设备 | |
WO2023015991A1 (zh) | 拍照方法、电子设备和计算机可读存储介质 | |
WO2023273323A1 (zh) | 一种对焦方法和电子设备 | |
CN113891009B (zh) | 曝光调整方法及相关设备 | |
CN115526787B (zh) | 视频处理方法和装置 | |
CN113810603B (zh) | 点光源图像检测方法和电子设备 | |
WO2023131070A1 (zh) | 一种电子设备的管理方法、电子设备及可读存储介质 | |
US20240119566A1 (en) | Image processing method and apparatus, and electronic device | |
CN113452898A (zh) | 一种拍照方法及装置 | |
WO2022267608A1 (zh) | 一种曝光强度调节方法及相关装置 | |
CN117135257B (zh) | 一种图像显示方法、电子设备及计算机可读存储介质 | |
CN115460343B (zh) | 图像处理方法、设备及存储介质 | |
CN116048323B (zh) | 图像处理方法及电子设备 | |
CN113891008B (zh) | 一种曝光强度调节方法及相关设备 | |
CN116723383B (zh) | 一种拍摄方法及相关设备 | |
CN116723382B (zh) | 一种拍摄方法及相关设备 | |
CN116193269A (zh) | 一种曝光模式切换方法及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20230831 Address after: 201306 building C, No. 888, Huanhu West 2nd Road, Lingang New Area, Pudong New Area, Shanghai Patentee after: Shanghai Glory Smart Technology Development Co.,Ltd. Address before: Unit 3401, unit a, building 6, Shenye Zhongcheng, No. 8089, Hongli West Road, Donghai community, Xiangmihu street, Futian District, Shenzhen, Guangdong 518040 Patentee before: Honor Device Co.,Ltd. |