CN116996777B - 一种拍摄方法、电子设备及存储介质 - Google Patents

一种拍摄方法、电子设备及存储介质 Download PDF

Info

Publication number
CN116996777B
CN116996777B CN202311250268.6A CN202311250268A CN116996777B CN 116996777 B CN116996777 B CN 116996777B CN 202311250268 A CN202311250268 A CN 202311250268A CN 116996777 B CN116996777 B CN 116996777B
Authority
CN
China
Prior art keywords
light source
camera
audio
frequency
exposure time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202311250268.6A
Other languages
English (en)
Other versions
CN116996777A (zh
Inventor
罗润发
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202311250268.6A priority Critical patent/CN116996777B/zh
Publication of CN116996777A publication Critical patent/CN116996777A/zh
Application granted granted Critical
Publication of CN116996777B publication Critical patent/CN116996777B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/745Detection of flicker frequency or suppression of flicker wherein the flicker is caused by illumination, e.g. due to fluorescent tube illumination or pulsed LED illumination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/62Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels
    • H04N25/628Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels for reducing horizontal stripes caused by saturated regions of CMOS sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本申请涉及终端技术领域,公开了一种拍摄的方法、电子设备及存储介质,该方法采用如光电二极管的光学器件来检测摄像头所拍摄的光源的光源频率,然后基于光学器件检测到的光源频率来确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,如此,可以控制电子设备中传感器的曝光时间为光源的闪烁周期的整数倍,进而可以减少电子设备的拍摄画面或者录制画面出现banding现象。

Description

一种拍摄方法、电子设备及存储介质
技术领域
本申请涉及终端技术领域,特别涉及一种拍摄方法、电子设备及存储介质。
背景技术
在用户采用电子设备拍摄发光物体或者反射光的物体(下文称为光源)的场景中,由于电子设备的曝光时间不满足光源的闪烁周期的整数倍,因此,在电子设备的预览画面或者录像画面所显示的图像可能会出现一条条滚动的明暗条纹,简称banding现象。
为了避免电子设备的预览画面或者录像画面出现banding现象,在一些技术方案中,电子设备采用封装好的Flicker器件来测量光源频率,进而基于光源频率来确定光源的闪烁周期,并控制电子设备中图像传感器(complementary metal-oxide-semiconductor,CMOS)的曝光时间满足光源的闪烁周期的整数倍。然而,由于封装好的Flicker器件的检测能力有限,如封装好的Flicker器件的采样周期固定为1ms,即封装好的Flicker器件能够检测出的最大光源频率为1000Hz,无法检测出更高的光源频率,导致电子设备的拍摄画面或者录制画面仍然有可能出现banding现象。
发明内容
为解决电子设备的拍摄画面会出现banding现象的问题,本申请实施例提供一种拍摄方法、电子设备及存储介质。
第一方面,本申请提供一种拍摄方法,应用于电子设备,包括:通过电子设备的光学器件检测电子设备的摄像头拍摄的光源的光源信息;对光源信息进行光电转换,得到光源的频率;基于光源的频率,将摄像头的曝光时间从第一曝光时间调整为第二曝光时间。
可以理解,光学器件可以为电子设备(如手机)中的光电二极管等可以采集光源的光源信息的器件。光源可以是指发光物体或者反射光的物体。光源信息可以为光源的光信号。
基于上述方案,通过采用光学器件来检测摄像头所拍摄的光源的光源频率,可以控制电子设备中传感器的曝光时间为光源的闪烁周期的整数倍,进而可以减少电子设备的拍摄画面或者录制画面出现banding现象。
在上述第一方面的一种可能的实现中,基于光源的频率,将摄像头的曝光时间从第一曝光时间调整为第二曝光时间,包括:基于光源的频率确定光源的闪烁周期;将摄像头的曝光时间从第一曝光时间调整为第二曝光时间,其中,第二曝光时间为光源的闪烁周期的整数倍。
在上述第一方面的一种可能的实现中,对光源信息进行光电转换,得到光源的频率,包括:通过电子设备的光电转换器件对光源信息进行光电转换,将光源信息转换为数字信号;基于数字信号确定光源的频率。
可以理解,光电转换器件可以为任意可以将光信号转换为电信号的器件,如音频编解码器。
在上述第一方面的一种可能的实现中,光学器件包括光电二极管。
在上述第一方面的一种可能的实现中,光电转换器件包括音频编解码器,光学器件与音频编解码器的第一接口连接,光学器件通过所述第一接口将光源的频率传输至音频编解码器。
可以理解,第一接口可以为音频编解码器的一个处于未利用状态的接口。利用音频编解码器具有信号转换的性能,可以将光源的光信号转换为数字信号,即光源对应的数字信号。并且,利用音频编解码的高量化精度和高采样频率的特性可以实现更高范围的光源的频率的检测。
在上述第一方面的一种可能的实现中,基于光源的频率,将摄像头的曝光时间从第一曝光时间调整为第二曝光时间,包括:通过电子设备的音频数字信号处理器中的音频线程将光源的频率传输至相机硬件抽象模块;通过相机硬件抽象模块基于光源的频率,将摄像头的曝光时间从第一曝光时间调整为第二曝光时间。
本申请实施例中,通过利用音频线程将光源频率传输至相机硬件抽象模块,即打通相机和音频之间的大量数据传输通路,配合利用光学器件和音频编解码器的硬件设计,可以利用音频编解码的高量化精度和高采样频率的特性可以实现更高范围的光源的频率的检测。
第二方面,本申请提供一种拍摄装置,包括:摄像头;光学器件;光电转换器件;存储器,用于存储电子设备的一个或多个处理器执行的指令;以及处理器,是电子设备的一个或多个处理器之一,用于通过执行存储器上的指令,以控制摄像头、光学器件和光电转换器件,实现本申请提及的拍摄方法。
可以理解,光电转换器件可以包括音频编解码器。
第三方面,本申请提供一种拍摄装置,包括:摄像头;光学器件;存储器,用于存储电子设备的一个或多个处理器执行的指令;以及处理器,是电子设备的一个或多个处理器之一,处理器包括具有光电转换功能的处理器,并且用于通过执行存储器上的指令,以控制摄像头和光学器件,实现本申请提及的拍摄方法。
可以理解,处理器可以包括音频编解码器和音频数字信号处理器。
第四方面,本申请提供一种电子设备,包括:存储器,用于存储电子设备的一个或多个处理器执行的指令,以及处理器,是电子设备的一个或多个处理器之一,用于执行本申请提及的拍摄方法。
第五方面,本申请提供一种可读存储介质,可读存储介质上存储有指令,指令在电子设备上执行时使得电子设备执行本申请提及的拍摄方法。
第六方面,本申请实施例提供一种计算机程序产品,包括:非易失性计算机可读存储介质,非易失性计算机可读存储介质包含用于执行第一方面的拍摄方法的计算机程序代码。
附图说明
图1根据本申请的一些实例,示出了一种应用场景示意图;
图2根据本申请的一些实例,示出了一种banding现象形成的原因示意图;
图3根据本申请的一些实例,示出了一种拍摄方法的流程示意图;
图4根据本申请的一些实例,示出了一种电子设备的系统架构示意图;
图5根据本申请的一些实例,示出了一种数据处理的交互示意图;
图6根据本申请的一些实例,示出了一种Flicker器件的系统架构示意图;
图7根据本申请的一些实例,示出了另一种电子设备的系统架构示意图;
图8根据本申请的一些实例,示出了第一种数据处理的交互示意图;
图9根据本申请的一些实例,示出了第二种数据处理的交互示意图;
图10根据本申请的一些实例,示出了一种电子设备的硬件结构示意图。
具体实施方式
本申请的说明性实施例包括但不限于一种拍摄方法、电子设备及介质。
可以理解,本申请实施例提及的拍摄方法可以适用于采用各种电子设备拍摄光源环境的场景,如利用手机拍摄台式电脑屏幕,利用平板电脑拍摄火车站LED显示屏,利用无人机拍摄商场显示屏等。
为了清楚地说明本申请实施例提及的方案,首先对本申请实施例提及的banding现象进行介绍。
当拍摄场景中存在光源时,电子设备的预览画面或者录像画面可能会出现滚动条纹,即手机、平板、无人机的预览画面或者录像画面可能出现如图1所示的一条条滚动的明暗条纹,这种现象称为banding现象。banding现象形成原因在于:电子设备的曝光时间不满足光源的闪烁周期的整数倍。
banding现象的具体形成过程如下:
例如,当光源接50Hz的交流电时,对光源进行信号转换,可以得到如图2所示的光信号的波形为频率为100Hz的周期性变化的包络。将光源的闪烁周期记为T,则T=1/100s。此时,电子设备中图像传感器(即CMOS模组)的曝光时间记为t,其中,电子设备中CMOS模组的曝光时间可以是指CMOS模组曝光某一帧图像每一行像素所需的时间。
继续如图2所示,当电子设备中CMOS模组的曝光时间t不满足光源的闪烁周期的整数倍,如t=T+t1。CMOS模组在曝光该帧图像的第i行像素时,第i行像素接收的光能量为S+S1,其中,S可以表示第i行像素在时间T内接收到的光能量,S1可以表示第i行像素在时间t1内接收的光能量。CMOS模组在曝光该帧图像的第i+1行像素时,第i+1行像素接收的光能量为S2+S3+S4,其中,S2可以表示第i+1行像素在时间t4内接收到的光能量,S3可以表示第i+1行像素在时间t2内接收的光能量,S4可以表示第i+1行像素在时间t3内接收的光能量。
由于t1=t2=t3,因此S1=S3<S4,S+S1<S2+S3+S4,即第i行像素接收的光能量比第i+1行像素接收的光能量少,故电子设备的预览画面或者录像画面显示该帧图像时,第i行像素和第i+1行像素的亮度不同,因此,第i行像素比第i+1行像素暗一些。
然而,由于封装好的Flicker器件的检测能力有限,如封装好的Flicker器件的采样周期固定为1ms,即封装好的Flicker器件能够检测出的最大光源频率为1000Hz,无法检测出更高的光源频率,导致电子设备的拍摄画面或者录制画面仍然出现banding现象。
可以理解,电子设备中一般会存在与Flicker器件相比,能够检测更大的光源频率范围的光学器件,例如,光电二极管能够检测出的最大光源频率16KHz。
因此,为了解决上述问题,本申请实施例提供一种拍摄方法,该方法采用如光电二极管的光学器件来检测摄像头所拍摄的光源的光源频率,然后基于光学器件检测到的光源频率来确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,如此,可以控制电子设备中传感器的曝光时间为光源的闪烁周期的整数倍,进而可以减少电子设备的拍摄画面或者录制画面出现banding现象。
例如,在一些实施例中,可以将封装好的Flicker器件替换为光学器件,如光电二极管,并将光学器件接到电子设备的信号转换模块(如音频编解码器),利用信号转换模块将光源频率对应的电信号转换为数字信号,并基于光源频率对应的数字信号来确定光源的闪烁周期,以及基于光源的闪烁周期调整传感器的曝光时间。
下面对本申请实施例提及的拍摄方法进行介绍,图3示出了一种拍摄方法的流程示意图,如图3所示,拍摄方法可以包括:
301:通过光学器件检测摄像头拍摄的光源的光源信息。
可以理解,光学器件可以为电子设备(如手机)中的光电二极管等可以采集光源的光源信息的器件。光源可以是指发光物体或者反射光的物体。光源信息可以为光源的光信号。
本申请实施例中,通过外接光学器件检测光源的光源信息,相较于Flicker器件,可以检测出更高的光源频率,可以减少电子设备的拍摄画面或者录制画面出现banding现象。
302:通过音频编解码器对光源信息进行光电转换处理,得到光源的频率。
可以理解,光学器件可以与音频编解码器的第一接口连接,其中,第一接口可以为音频编解码器的一个处于未利用状态的接口。
在一些可选的实例中,可以利用音频编解码器具有信号转换的性能,将光源的光信号转换为数字信号,即光源对应的数字信号。并且,利用音频编解码的高量化精度和高采样频率的特性可以实现更高范围的光源的频率的检测。
303:通过相机硬件抽象模块基于光源的频率,确定光源的闪烁周期,并将摄像头的曝光时间调整为光源的闪烁周期的整数倍。
本申请实施例中,通过将摄像头的曝光时间调整为光源的闪烁周期的整数倍,可以减少电子设备的拍摄画面或者录制画面出现banding现象。
下面在对本申请实施例提及的拍摄方法进行详细介绍之前,对该拍摄方法所应用的电子设备的系统架构进行介绍。
图4示出了一种电子设备的系统架构示意图,如图4所示,电子设备400可以包括应用程序层(APP)411、框架层(Framework,FWK)412、系统层(Native)413、硬件抽象层(hardware abstract layer,HAL)414、内核层(kernel)415、音频数字信号处理器(audiodigital signal processing,ADSP)416和硬件(Hardware)417。
应用程序层(APP)411可以包括环境光遮蔽相机(ambient occlusion camera,AOCam) 4111、自研相机4112、三方相机4113等相机应用,还可以包括系统音4114、音乐4115、三方应用4116等音频应用。其中,环境光遮蔽相机(ambient occlusion camera,AO Cam)4111、自研相机4112、三方相机4113均可以包括预览、拍照、录像、人像、HDR和大光圈等相机典型模式。
框架层(Framework,FWK)412可以包括相机管理器(camera-service)4121和音频管理器(audio-service)4122。框架层(framework,FWK)412可以为应用程序层(APP)411提供应用编程接口(applictaion programming interface,AIP)和编程框架。框架层包括一些预定义的函数。其中,相机管理器(camera-service)4121用于管理相机应用。相机管理器(camera-service)4121可以判断相机应用的相机模式。音频管理器(audio-service)4122用于提供音频播放功能。例如音量大小的管理(包括调高音量、降低音量等)。
系统层(Native)413可以包括多个服务,例如,相机服务(camera-server)4131和音频服务(audio-server)4132。其中,相机服务(camera-server)4131可以用于实现画面预览、录像预览等。音频服务(audio-server)4132可以用于实现音频处理等。
硬件抽象层(hardware abstract layer,HAL)414可以包括相机硬件抽象模块(Camera-HAL)4141和音频硬件抽象模块(Audio-HAL)4142。其中,相机硬件抽象模块(Camera-HAL)4141可以调整传感器的曝光时间,例如,可以调整电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍。
在一些可选的实例中,硬件抽象层(hardware abstract layer,HAL)414也可以称为用户态。
内核层(Kernel)415可以包括高通信息接口(qualcomm messaging interface,QMI)4151和音频驱动(Audio-kernel)4152。
在一些可选的实例中,内核层(Kernel)415也可以称为内核态,是硬件和软件之间的层。
音频数字信号处理器(audio digital signal processing,ADSP)416可以包括传感器进程(Sensor-pd)4161和音频进程(Audio-pd)4162。
硬件320可以包括光电二极管(PD)4171、音频编解码器(Codec)4172和麦克风(Microphone,MIC)4173。其中,光电二极管(PD)4171可以将光源波动(即PD可以输出模拟信号)传递给音频编解码器(Codec)4172。音频编解码器(Codec)4172可以对PD 4171输出的模拟信号进行数模转换,获取光电二极管(PD)4171输出的模拟信号对应的数字信号。
下面基于图4所示的系统架构,对本申请实施例提及的拍摄方法进行介绍。
在图4所示的系统架构中,在用户打开相机应用时,可以控制光电二极管(PD)4171检测光源,并通过音频编解码器(Codec)4172将光源对应的电信号转换为数字信号,然后经过音频进程(Audio-pd)4162传输至传感器进程(Sensor-pd)4161,再由传感器进程(Sensor-pd)4161传输至相机硬件抽象模块(Camera-HAL)4141。
在相机硬件抽象模块(Camer-HAL)4141中,可以基于光源频率对应的数字信号确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,如此,可以控制电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍,进而可以减少电子设备的拍摄画面或者录制画面出现banding现象。
在一些可选的实例中,控制光电二极管(PD)4171检测光源的方式可以采用如下方式:
在用户打开相机应用时,如打开环境光遮蔽相机(ambient occlusion camera,AOCam) 4111、自研相机4112或者三方相机4113时,并启动应用程序层(APP)411中的预览、拍照、录像、人像、HDR和大光圈相机典型模式中的任意一种相机模式后,框架层(Framework,FWK)412中的相机管理器(camera-service)4121接收相机启动的控制信号,并将该相机启动的控制信号依次经由系统层(Native)413中的相机服务(camera-server)4131、硬件抽象层(hardwareabstract layer,HAL)414中的相机硬件抽象模块(Camer-HAL)4141、内核层(Kernel)415中的高通信息接口(qualcomm messaging interface,QMI)4151、音频数字信号处理器(audio digital signal processing,ADSP)416中的传感器进程(Sensor-pd)4161、音频数字信号处理器(audio digital signal processing,ADSP)416中的音频进程(Audio-pd)4162、硬件抽象层(hardware abstract layer,HAL)414中的相机硬件抽象模块(Camer-HAL)4141后,传输至内核层(Kernel)415中的音频驱动(Audio-kernel)4152,音频驱动(Audio-kernel)4152可以基于相机启动的控制信号控制光电二极管(PD)4171检测光源。
在一些具体的实现中,如图4中虚线所示,用户打开相机应用,进入拍照模式,Camera-HAL 4141可以注册Ncs服务,注册QSEE类型的interface接口层,并且QSEE与Sensor-pd 4161建立QMI4151连接,下发控制信号到Sensor-pd 4161,Sensor-pd 4161接收到控制信号后,下发控制信号到Audio-pd 4162。然后,Audio-pd 4162可以对整体进行初始化,以及对PD 4171进行上电,完成整体的控制流。
如图4中实线所示,PD 4171可以输出模拟信号,音频Codec 4172可以模拟信号进行采样量化,输出光源频率对应的数字信号至Audio-pd 4162,Audio-pd 4162闭包banding算法,光源频率对应的数字信号经过banding算法处理后可以得到光源频率,然后可以将光源频率传输至Sensor-pd 4161。Sensor-pd 4161接收到光源频率后,按照既定类型进行数据上报回调,Ncs服务接收到光源频率后,可以保存至已申请的缓存(buffer)中,Camera-HAL4141可以按照自身的频率进行数据拿取,完成整体的数据流上报。
下面以一个具体的例子,对上文提及的数据方法进行详细介绍。图5示出了一种数据处理的交互示意图,如图5所示,该拍摄方法可以包括:
501:用户点击应用。
在一些可选的实例中,电子设备可以提供环境光遮蔽相机(ambient occlusioncamera,AO Cam) 、自研相机、三方相机等相机应用。用户(user)可以通过触摸电子设备上相机应用对应的区域实现打开相机应用。其中,环境光遮蔽相机(ambient occlusioncamera,AO Cam) 、自研相机、三方相机均可以包括预览、拍照、录像、人像、HDR和大光圈等相机典型模式。
502:相机应用向相机服务发送打开相机、进入预览的控制信号。
在一些可选的实例中,当user打开相机(Camera)应用的预览模式时,相机(Camera)应用可以向相机(Camera)服务发送打开相机、进入预览的控制信号。
503:相机服务初始化相机硬件抽象模块。
504:相机硬件抽象模块注册相机Ncs服务。
在一些可选的实例中,Camera-HAL 可以注册Camera-Ncs,注册QSEE类型的interface接口层,并且QSEE与Sensor-pd 建立QMI 连接。
505:相机Ncs服务对传感器线程进行使能器件驱动,将控制信号输入传感器线程。
可以理解,Sensor-pd允许Camera-Ncs将控制信号输入Sensor-pd。
506:传感器线程向音频线程通知控制信号。
可以理解,在将控制信号输入Sensor-pd后,Sensor-pd可以将控制信号传输至Audio-pd。
507:音频线程向相机硬件抽象模块上报控制信号。
可以理解,在Audio-pd接收到将控制信号后,Audio-pd可以将控制信号上报至Audio-HAL。
508:相机硬件抽象模块初始化音频线程的通路。
可以理解,在Audio-HAL接收到控制信号后,可以初始化通路。
509:音频硬件抽象层对PD进行使能器件。
可以理解,音频硬件抽象层对PD进行使能器件,即允许PD采集的光源频率对应的数字信号输入Audio-pd。
510:光电二极管触发中断,向音频线程上传数据。
可以理解,PD可以检测光源输出模拟信号,音频Codec 可以对模拟信号进行采样量化,输出光源频率对应的数字信号至Audio-pd 。
511:音频线程计算光源频率。
可以理解,Audio-pd 闭包banding算法,光源频率对应的数字信号经过banding算法处理后可以得到光源频率,然后可以将光源频率传输至Sensor-pd。
512:传感器线程接收光源频率。
可以理解,Sensor-pd 接收到光源频率后,按照既定类型进行数据上报回调。
513:传感器定时向相机Ncs服务提供光源频率。
可以理解,Ncs服务接收到光源频率后,可以保存至已申请的buffer中。
514:相机服务向相机硬件抽象层下发请求。
可以理解,Camera服务可以向Camera-HAL发送光源频率获取请求。
515:相机硬件抽象层从相机Ncs服务中拿取光源频率。
516:相机Ncs服务返回光源频率。
517:相机硬件抽象层调整曝光参数。
可以理解,Camera-HAL可以基于光源频率确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,例如,可以控制电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍,进而得到无banding现象的图像。
518:相机硬件抽象层返回无banding现象的图像至相机服务。
519:相机服务返回无banding现象的图像至相机应用。
520:相机应用向用户显示预览画面。
本申请实施例中,提供采用如光电二极管的光学器件来检测摄像头所拍摄的光源的光源频率,然后基于光学器件检测到的光源频率来确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,如此,可以控制电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍,进而可以减少电子设备的拍摄画面或者录制画面出现banding现象。
本申请实施例还提供了另一种电子设备的系统架构示意图,该电子设备的系统架构是基于Flicker器件的系统架构基础提出的。下面对Flicker器件的系统架构进行介绍。
图6示出了一种Flicker器件的系统架构示意图,如图6所示,Flicker器件600可以包括:框架层(Framework,FWK)611、硬件抽象层(hardware abstract layer,HAL)612、安卓传感器层(android-sensor)613、内核层(kernel)614和硬件615。
框架层(Framework,FWK)611可以包括相机管理器(camera-service)6111。
相机管理器(camera-service)6111用于管理相机应用。相机管理器(camera-service)6111可以判断相机应用的相机模式。
在一些可选的实例中,框架层(Framework,FWK)611可以通过硬件接口定义语言(hardware interface interface definition language,HIDL)对硬件抽象层(hardwareabstract layer,HAL)612进行升级。
硬件抽象层(hardware abstract layer,HAL)612可以包括图形视频处理模块(after effect,AE)6121、自动白平衡模块(auto white balance,AWB)6122和网络控制接口模块(network control system,NCS)6123。
在一些可选的实例中,图形视频处理模块(after effect,AE)6121可以用于从缓存(buffer)中拿取数据,如光源频率。网络控制接口模块(network control system,NCS)6123可以用于提供Ncs服务。
安卓传感器层(android-sensor)613可以包括传感器硬件抽象模块(sensor-HAL)6131。其中,安卓传感器层(android-sensor)613是一种封装框架。
硬件抽象层(hardware abstract layer,HAL)612与安卓传感器层(android-sensor)613之间通过dlopen进行通信,其中,dlopen是以动态库so的方式加载,使用函数指针调用实现通信。
内核层(kernel)614可以包括色彩传感器驱动(color sensor driver)6141。色彩传感器驱动(color sensor driver)6141可以实现Flicker功能,即实现检测光源频率功能。
安卓传感器层(android-sensor)613与内核层(kernel)614通过Linux IO实现命令的下发和数据获取。
硬件615可以包括光源传感器(spectral sensor)6151。其中,光源传感器(spectral sensor)521可用于检测光源。
内核层(kernel)614与硬件615通过通信协议进行通信,如I2C,I2C是一种硬件通信协议。
在一些可选的实例中,色彩传感器驱动(color sensor driver)6141是Flicker器件的驱动实现,位于kernel中,kernel本身存在pipe等等IPC通信方式,而音频数据可以通过audio-kernel进行上传。因此,可以考虑通过audio-kernel从audio-pd中拿取光源频率对应的数字信号。
下面对本申请实施例提供的另一种电子设备的系统架构进行介绍。图7示出了另一种电子设备的系统架构示意图,如图7所示,电子设备700可以包括应用程序层(APP)711、框架层(Framework,FWK)712、系统层(Native)713、硬件抽象层(hardware abstractlayer,HAL)714、内核层(Kernel)715、音频数字信号处理器(ADSP)716和硬件7171。
应用程序层(APP)711可以包括环境光遮蔽相机(ambient occlusion camera,AOCam) 7111、自研相机7112、三方相机7113等相机应用,还可以包括系统音7114、音乐7115、三方应用7116等音频应用。其中,环境光遮蔽相机(ambient occlusion camera,AO Cam)7111、自研相机7112、三方相机7113均可以包括预览、拍照、录像、人像、HDR和大光圈等相机典型模式。
框架层(Framework,FWK)712可以包括相机管理器(camera-service)7131和音频管理器(audio-service)7132。框架层(Framework,FWK)712可以为应用程序层(APP)711提供应用编程接口(applictaion programming interface,API)和编程框架。框架层包括一些预定义的函数。其中,相机管理器(camera-service)7121用于管理相机应用。相机管理器(camera-service)7121可以判断相机应用的相机模式。音频管理器(audio-service)7122用于提供音频播放功能。例如音量大小的管理(包括调高音量、降低音量等)。
系统层(Native)713可以包括多个服务,例如相机服务(camera-server)7131和音频服务(audio-server)7132。其中,相机服务(camera-server)7131可以用于实现画面预览、录像预览等。音频服务(audio-server)7132可以用于实现音频处理等。
硬件抽象层(hardware abstract layer,HAL)714可以包括相机硬件抽象模块(Camera-HAL)7141和音频硬件抽象模块(Audio-HAL)7142。其中,相机硬件抽象模块(Camera-HAL)7141可以调整传感器的曝光时间,例如,可以调整电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍。
在一些可选的实例中,硬件抽象层(hardware abstract layer,HAL)314也可以称为用户态。
内核层(Kernel)715可以包括Flicker器件驱动(Flicker-Driver)7151和音频驱动(Audio-kernel)7152。
在一些可选的实例中,内核层(Kernel)715也可以称为内核态,是硬件和软件之间的层。
音频数字信号处理器(ADSP)716可以包括音频进程(Audio-pd)7161。
硬件620可以包括光电二极管(PD)7171、音频编解码器(Codec)7172和麦克风(Microphone,MIC)7173。其中,光电二极管(PD)7171可以将光源波动(即PD可以输出模拟信号)传递给音频编解码器(Codec)7172。音频编解码器(Codec)3172可以对PD 7171输出的模拟信号进行数模转换,获取光电二极管(PD)7171输出的模拟信号对应的数字信号。
下面基于图7所示的系统架构,对本申请实施例提及的拍摄方法进行介绍。
在图7所示的系统架构中,在用户打开相机应用时,可以控制光电二极管(PD)7171检测光源,并通过音频编解码器(Codec)7172将光源对应的电信号转换为数字信号,然后经过音频进程(Audio-pd)7161传输至音频驱动(Audio-kernel)7152,再由音频驱动(Audio-kernel)7152传输至Flicker器件驱动(Flicker-Driver)7151,再由Flicker器件驱动(Flicker-Driver)7151传输至相机硬件抽象模块(Camera-HAL)7141。
在相机硬件抽象模块(Camera-HAL)7141中,可以基于光源频率对应的数字信号确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,如此,可以控制电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍,进而可以减少电子设备的拍摄画面或者录制画面出现banding现象。
在一些可选的实例中,控制光电二极管(PD)7171检测光源的方式可以采用如下方式:
在用户打开相机应用时,如打开环境光遮蔽相机(ambient occlusion camera,AOCam) 7111、自研相机7112或者三方相机7113时,并启动应用程序层(APP)711中的预览、拍照、录像、人像、HDR和大光圈相机典型模式中的任意一种相机模式后,框架层(Framework,FWK)712中的相机管理器(camera-service)7121接收相机启动的控制信号,并将该相机启动的控制信号依次经由系统层(Native)713中的相机服务(camera-server)7131、硬件抽象层(hardwareabstract layer,HAL)714中的相机硬件抽象模块(Camera-HAL)7141、内核层(Kernel)715中的Flicker器件驱动(Flicker-Driver)7151、内核层(Kernel)715中音频驱动(Audio-kernel)7152,音频驱动(Audio-kernel)7172可以基于相机启动的控制信号控制光电二极管(PD)7171检测光源。
在一些具体的实现中,如图7中实线所示,PD7171可以输出模拟信号,音频Codec7172可以模拟信号进行采样量化,输出光源频率对应的数字信号至Audio-pd 7161,开辟处理流程pipeline,单独进行光源频率对应的数字信号的传递。然后,可以使用glink的通信方法将光源频率对应的数字信号传输至Audio-kernel 7152,以实现数据的跨核通信。接着,可以采用共享内存的方式,在Kernel715不通过ko传递光源频率对应的数字信号。其中,拍摄方法的具体流程将在图7中进行详述。
在另一些具体的实现中,PD7171可以输出模拟信号,音频Codec 7172可以模拟信号进行采样量化,输出光源频率对应的数字信号至Audio-pd 7161,然而,不针对光源频率对应的数字信号进行单独地传递,而是把光源频率对应的数字信号加入到音频信号进行混合处理,得到一路混合信号,然后,可以使用glink的通信方法这一路混合信号传输至Audio-kernel 7152,以实现数据的跨核通信。接着,可以对这一路混合信号进行拆解,将光源频率对应的数字信号从混合信号中拆解后采用共享内存的方式,在Kernel715不通过ko传递光源频率对应的数字信号。其中,拍摄方法的具体流程将在图8中进行详述。
下面以一个具体的例子,对上文提及的数据方法进行详细介绍。图8示出了一种数据处理的交互示意图,如图8所示,该拍摄方法可以包括:
801:用户点击应用。
在一些可选的实例中,电子设备可以提供环境光遮蔽相机(ambient occlusioncamera,AO Cam) 、自研相机、三方相机等相机应用。用户(user)可以通过触摸电子设备上相机应用对应的区域实现打开相机应用。其中,环境光遮蔽相机(ambient occlusioncamera,AO Cam) 、自研相机、三方相机均可以包括预览、拍照、录像、人像、HDR和大光圈等相机典型模式。
802:相机应用向相机服务发送打开相机、进入预览的控制信号。
在一些可选的实例中,当user打开相机(Camera)应用的预览模式时,相机(Camera)应用可以向相机(Camera)服务发送打开相机、进入预览的控制信号。
803:相机服务初始化相机硬件抽象模块。
804:相机硬件抽象对Flicker器件驱动进行使能器件,将控制信号输入Flicker器件驱动。
可以理解,Flicker-Driver允许Camera-HAL将控制信号输入Flicker-Driver。
805:Flicker器件驱动向音频驱动通知控制信号,初始化管道。
806:音频驱动向音频硬件抽象模块上报控制信号。
807:音频硬件抽象模块控制音频驱动。
808:音频硬件抽象模块初始化音频线程的通路。
809:音频驱动创建数据传输通路,并通知音频线程。
810:音频硬件抽象模块对光电二极管进行使能器件,使得光电二极管上电。
可以理解,Audio-HAL对PD进行使能器件,即允许PD采集的光源频率对应的数字信号输入Audio-HAL。
811:光电二极管触发中断,向音频线程上传数据。
可以理解,PD可以检测光源输出模拟信号,音频Codec 可以对模拟信号进行采样量化,输出光源频率对应的数字信号至Audio-pd 。
812:音频线程传递光源频率至音频驱动。
813:音频驱动将光源频率传输至Flicker器件驱动。
814:相机服务向相机硬件抽象层下发请求。
可以理解,Camera服务可以向Camera-HAL发送光源频率获取请求。
815:相机硬件抽象层从Flicker器件驱动中拿取光源频率。
816:Flicker器件驱动返回光源频率。
817:相机硬件抽象层调整曝光参数。
可以理解,Camera-HAL可以基于光源频率确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,例如,可以控制电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍,进而得到无banding现象的图像。
818:相机硬件抽象层返回无banding现象的图像至相机服务。
819:相机服务返回无banding现象的图像至相机应用。
820:相机应用向用户显示预览画面。
下面以一个具体的例子,对上文提及的数据方法进行详细介绍。图9示出了一种数据处理的交互示意图,如图9所示,该拍摄方法可以包括:
901:用户点击应用。
在一些可选的实例中,电子设备可以提供环境光遮蔽相机(ambient occlusioncamera,AO Cam) 、自研相机、三方相机等相机应用。用户(user)可以通过触摸电子设备上相机应用对应的区域实现打开相机应用。其中,环境光遮蔽相机(ambient occlusioncamera,AO Cam) 、自研相机、三方相机均可以包括预览、拍照、录像、人像、HDR和大光圈等相机典型模式。
902:相机应用向相机服务发送打开相机、进入预览的控制信号。
在一些可选的实例中,当user打开相机(Camera)应用的预览模式时,相机(Camera)应用可以向相机(Camera)服务发送打开相机、进入预览的控制信号。
903:相机服务初始化相机硬件抽象模块。
904:相机硬件抽象对Flicker器件驱动进行使能器件,将控制信号输入Flicker器件驱动。
可以理解,Flicker-Driver允许Camera-HAL将控制信号输入Flicker-Driver。
905:Flicker器件驱动向音频驱动通知控制信号,初始化管道。
906:音频驱动向音频硬件抽象模块上报控制信号。
907:音频硬件抽象模块控制音频驱动。
908:音频硬件抽象模块初始化音频线程的通路。
909:音频硬件抽象模块对光电二极管进行使能器件,使得光电二极管上电。
可以理解,Audio-HAL对PD进行使能器件,即允许PD采集的光源频率对应的数字信号输入Audio-HAL。
910:光电二极管触发中断,向音频线程上传数据。
可以理解,PD可以检测光源输出模拟信号,音频Codec 可以对模拟信号进行采样量化,输出光源频率对应的数字信号至Audio-pd 。
911:音频线程进行多数据混合。
可以理解,音频线程可以把光源频率对应的数字信号加入到音频信号进行混合处理,得到一路混合信号,然后可以向音频驱动发送该一路混合信号,也称为混合数据。
912:音频驱动接收音频线程传递的混合数据。
913:音频驱动从混合数据中拆解光源频率。
可以理解,Audio-driver可以对这一路混合信号进行拆解,将光源频率对应的数字信号从混合信号中拆解。
914:音频驱动将光源频率传输至Flicker器件驱动。
915:相机服务向相机硬件抽象层下发请求。
可以理解,Camera服务可以向Camera-HAL发送光源频率获取请求。
916:相机硬件抽象层从Flicker器件驱动中拿取光源频率。
917:Flicker器件驱动返回光源频率。
918:相机硬件抽象层调整曝光参数。
可以理解,Camera-HAL可以基于光源频率确定光源的闪烁周期,并基于光源的闪烁周期调整传感器的曝光时间,例如,可以控制电子设备中CMOS模组的曝光时间为光源的闪烁周期的整数倍,进而得到无banding现象的图像。
919:相机硬件抽象层返回无banding现象的图像至相机服务。
920:相机服务返回无banding现象的图像至相机应用。
921:相机应用向用户显示预览画面。
下面对本申请实施例提及的拍摄方法的拍摄装置进行介绍。
在一些可选的实例中,拍摄装置可以包括:摄像头;光学器件;光电转换器件;存储器,用于存储电子设备的一个或多个处理器执行的指令;以及处理器,是电子设备的一个或多个处理器之一,用于通过执行存储器上的指令,以控制摄像头、光学器件和光电转换器件,实现本申请提及的拍摄方法。
可以理解,光电转换器件可以包括音频编解码器。
在另一些可选的实例中,拍摄装置可以包括:摄像头;光学器件;存储器,用于存储电子设备的一个或多个处理器执行的指令;以及处理器,是电子设备的一个或多个处理器之一,处理器包括具有光电转换功能的处理器,并且用于通过执行存储器上的指令,以控制摄像头和光学器件,实现本申请提及的拍摄方法。
可以理解,处理器可以包括音频编解码器和音频数字信号处理器。
下面对电子设备的硬件结构进行介绍。如图10所示,电子设备1000可以包括处理器1010,外部存储器接口1020,内部存储器1021,通用串行总线(universal serial bus,USB)接口1030,充电管理模块1040,电源管理模块1041,电池1042,天线1,天线2,移动通信模块1050,无线通信模块1060,音频模块1070,扬声器1070A,受话器1070B,麦克风1070C,耳机接口1070D,传感器模块1080,按键1090,马达1091,指示器1092,摄像头1093,显示屏1094,以及用户标识模块(subscriber identification module,SIM)卡接口1095等。其中传感器模块1080可以包括压力传感器1080A,陀螺仪传感器1080B,气压传感器1080C,磁传感器1080D,加速度传感器1080E,距离传感器1080F,接近光传感器1080G,指纹传感器1080H,温度传感器1080J,触摸传感器1080K,环境光传感器1080L,骨传导传感器1080M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备的具体限定。在本申请另一些实施例中,电子设备1000可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器1010可以包括一个或多个处理单元,例如:处理器1010可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digitalsignal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。其中,处理器可以上文中提及的应用程序层对应的硬件单元。
处理器1010中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器1010中的存储器为高速缓冲存储器。该存储器可以保存处理器1010刚用过或循环使用的指令或数据。如果处理器1010需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器1010的等待时间,因而提高了系统的效率。例如,处理器1010可以执行本申请实施例提及的拍摄方法。
在一些实施例中,处理器1010可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integratedcircuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriberidentity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2S接口可以用于音频通信。在一些实施例中,处理器1010可以包含多组I2S总线。处理器1010可以通过I2S总线与音频模块1070耦合,实现处理器1010与音频模块1070之间的通信。在一些实施例中,音频模块1070可以通过I2S接口向无线通信模块1060传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块1070与无线通信模块1060可以通过PCM总线接口耦合。在一些实施例中,音频模块1070也可以通过PCM接口向无线通信模块1060传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器1010与无线通信模块1060。例如:处理器1010通过UART接口与无线通信模块1060中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块1070可以通过UART接口向无线通信模块1060传递音频信号,实现通过蓝牙耳机播放音乐的功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器1010与摄像头1093,显示屏1094,无线通信模块1060,音频模块1070,传感器模块1080等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备1000的结构限定。在本申请另一些实施例中,电子设备1000也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
电子设备通过GPU,显示屏1094,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏1094和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器1010可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏1094用于显示图像,视频等。显示屏1104包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机光电二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emittingdiode的,AMOLED),柔性光电二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点光电二极管(quantumdot lightemitting diodes,QLED)等。在一些实施例中,电子设备可以包括1个或N个显示屏1104,N为大于1的正整数。
电子设备可以通过ISP,摄像头1093,视频编解码器,GPU,显示屏1094以及应用处理器等实现拍摄功能。
ISP 用于处理摄像头1093反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头1093中。
摄像头1093用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementarymetal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备可以包括1个或N个摄像头1093,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备可以支持一种或多种视频编解码器。这样,电子设备可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
在附图中,可以以特定布置和/或顺序示出一些结构或方法特征。然而,应该理解,可能不需要这样的特定布置和/或排序。而是,在一些实施例中,这些特征可以以不同于说明性附图中所示的方式和/或顺序来布置。另外,在特定图中包括结构或方法特征并不意味着暗示在所有实施例中都需要这样的特征,并且在一些实施例中,可以不包括这些特征或者可以与其他特征组合。
需要说明的是,本申请各设备实施例中提到的各单元/模块都是逻辑单元/模块,在物理上,一个逻辑单元/模块可以是一个物理单元/模块,也可以是一个物理单元/模块的一部分,还可以以多个物理单元/模块的组合实现,这些逻辑单元/模块本身的物理实现方式并不是最重要的,这些逻辑单元/模块所实现的功能的组合才是解决本申请所提出的技术问题的关键。此外,为了突出本申请的创新部分,本申请上述各设备实施例并没有将与解决本申请所提出的技术问题关系不太密切的单元/模块引入,这并不表明上述设备实施例并不存在其它的单元/模块。
本申请公开的机制的各实施例可以被实现在硬件、软件、固件或这些实现方法的组合中。本申请的实施例可实现为在可编程系统上执行的计算机程序或程序代码,该可编程系统包括至少一个处理器、存储系统(包括易失性和非易失性存储器和/或存储元件)、至少一个输入设备以及至少一个输出设备。
可将程序代码应用于输入指令,以执行本申请描述的各功能并生成输出信息。可以按已知方式将输出信息应用于一个或多个输出设备。为了本申请的目的,处理系统包括具有诸如例如数字信号处理器(DSP)、微控制器、专用集成电路或微处理器之类的处理器的任何系统。
程序代码可以用高级程序化语言或面向对象的编程语言来实现,以便与处理系统通信。在需要时,也可用汇编语言或机器语言来实现程序代码。事实上,本申请中描述的机制不限于任何特定编程语言的范围。在任一情形下,该语言可以是编译语言或解释语言。
在一些情况下,所公开的实施例可以以硬件、固件、软件或其任何组合来实现。所公开的实施例还可以被实现为由一个或多个暂时或非暂时性机器可读(例如,计算机可读)存储介质承载或存储在其上的指令,其可以由一个或多个处理器读取和执行。例如,指令可以通过网络或通过其他计算机可读介质分发。因此,机器可读介质可以包括用于以机器(例如,计算机)可读的形式存储或传输信息的任何机制,包括但不限于,软盘、光盘、光碟、只读存储器(CD-ROMs)、磁光盘、只读存储器(ROM)、随机存取存储器(RAM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、磁卡或光卡、闪存、或用于利用因特网以电、光、声或其他形式的传播信号来传输信息(例如,载波、红外信号数字信号等)的有形的机器可读存储器。因此,机器可读介质包括适合于以机器(例如,计算机)可读的形式存储或传输电子指令或信息的任何类型的机器可读介质。
需要说明的是,在本专利的示例和说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
虽然通过参照本申请的某些优选实施例,已经对本申请进行了图示和描述,但本领域的普通技术人员应该明白,可以在形式上和细节上对其作各种改变,而不偏离本申请的范围。

Claims (10)

1.一种拍摄方法,其特征在于,应用于电子设备,包括:
通过所述电子设备的光学器件检测所述电子设备的摄像头拍摄的光源的光源信息,所述光学器件包括光电二极管,所述光电二极管能够检测到16KHz的光源频率的光源信息;
通过所述电子设备的音频编解码器获取所述光源信息,并对所述光源信息进行光电转换,得到所述光源的频率;所述光源频率经过音频进程、传感器进程传输至相机硬件抽象模块,或者,所述光源频率经由音频驱动、Flicker器件驱动传输至所述相机硬件抽象模块;
所述相机硬件抽象模块基于所述光源的频率,将所述摄像头的曝光时间从第一曝光时间调整为第二曝光时间。
2.根据权利要求1所述的方法,其特征在于,所述基于所述光源的频率,将所述摄像头的曝光时间从第一曝光时间调整为第二曝光时间,包括:
基于所述光源的频率确定所述光源的闪烁周期;
将所述摄像头的曝光时间从所述第一曝光时间调整为所述第二曝光时间,其中,所述第二曝光时间为所述光源的闪烁周期的整数倍。
3.根据权利要求1所述的方法,其特征在于,所述对所述光源信息进行光电转换,得到所述光源的频率,包括:
通过所述电子设备的光电转换器件对所述光源信息进行光电转换,将所述光源信息转换为数字信号;
基于所述数字信号确定所述光源的频率。
4.根据权利要求1所述的方法,其特征在于,所述光学器件包括光电二极管。
5.根据权利要求3所述的方法,其特征在于,所述光电转换器件包括音频编解码器,所述光学器件与所述音频编解码器的第一接口连接;
所述光学器件通过所述第一接口将所述光源的频率传输至所述音频编解码器。
6.根据权利要求5所述的方法,其特征在于,所述基于所述光源的频率,将所述摄像头的曝光时间从第一曝光时间调整为第二曝光时间,包括:
通过所述电子设备的音频数字信号处理器中的音频线程将所述光源的频率传输至相机硬件抽象模块;
通过所述相机硬件抽象模块基于所述光源的频率,将所述摄像头的曝光时间从第一曝光时间调整为第二曝光时间。
7.一种拍摄装置,其特征在于,包括:
摄像头;
光学器件;
光电转换器件;
存储器,用于存储电子设备的一个或多个处理器执行的指令;
以及处理器,是所述电子设备的一个或多个处理器之一,用于通过执行所述存储器上的所述指令,以控制所述摄像头、光学器件和光电转换器件,实现权利要求1-6中任一项所述的拍摄方法。
8.一种拍摄装置,其特征在于,包括:
摄像头;
光学器件;
存储器,用于存储电子设备的一个或多个处理器执行的指令;
以及处理器,是所述电子设备的一个或多个处理器之一,所述处理器包括具有光电转换功能的处理器,
并且用于通过执行所述存储器上的所述指令,以控制所述摄像头和所述光学器件,实现权利要求1-6任一项所述的拍摄方法。
9.一种电子设备,其特征在于,包括:存储器,用于存储所述电子设备的一个或多个处理器执行的指令,以及所述处理器,是所述电子设备的一个或多个处理器之一,用于执行权利要求1-6中任一项所述的拍摄方法。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储有指令,所述指令在电子设备上执行时使得所述电子设备执行权利要求1-6中任一项所述的拍摄方法。
CN202311250268.6A 2023-09-26 2023-09-26 一种拍摄方法、电子设备及存储介质 Active CN116996777B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311250268.6A CN116996777B (zh) 2023-09-26 2023-09-26 一种拍摄方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311250268.6A CN116996777B (zh) 2023-09-26 2023-09-26 一种拍摄方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN116996777A CN116996777A (zh) 2023-11-03
CN116996777B true CN116996777B (zh) 2024-04-05

Family

ID=88526948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311250268.6A Active CN116996777B (zh) 2023-09-26 2023-09-26 一种拍摄方法、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN116996777B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109120863A (zh) * 2018-10-23 2019-01-01 Oppo广东移动通信有限公司 拍摄方法、装置、存储介质及移动终端
CN110248110A (zh) * 2019-06-28 2019-09-17 Oppo广东移动通信有限公司 拍摄参数设置方法、设置装置、终端设备及可读存储介质
CN115529419A (zh) * 2021-06-24 2022-12-27 荣耀终端有限公司 一种多人工光源下的拍摄方法及相关装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109120863A (zh) * 2018-10-23 2019-01-01 Oppo广东移动通信有限公司 拍摄方法、装置、存储介质及移动终端
CN110248110A (zh) * 2019-06-28 2019-09-17 Oppo广东移动通信有限公司 拍摄参数设置方法、设置装置、终端设备及可读存储介质
CN115529419A (zh) * 2021-06-24 2022-12-27 荣耀终端有限公司 一种多人工光源下的拍摄方法及相关装置

Also Published As

Publication number Publication date
CN116996777A (zh) 2023-11-03

Similar Documents

Publication Publication Date Title
WO2022262260A1 (zh) 一种拍摄方法及电子设备
CN113810600B (zh) 终端的图像处理方法、装置和终端设备
CN112532892B (zh) 图像处理方法及电子装置
US20230162324A1 (en) Projection data processing method and apparatus
CN115526787B (zh) 视频处理方法和装置
WO2021190613A9 (zh) 一种拍照方法及装置
CN113810603B (zh) 点光源图像检测方法和电子设备
CN112954251B (zh) 视频处理方法、视频处理装置、存储介质与电子设备
CN113810601A (zh) 终端的图像处理方法、装置和终端设备
WO2024045670A1 (zh) 生成高动态范围视频的方法和电子设备
CN113436576B (zh) 应用于二维码扫描的oled显示屏调光方法及装置
WO2023160295A1 (zh) 视频处理方法和装置
WO2023077939A1 (zh) 摄像头的切换方法、装置、电子设备及存储介质
CN113572948A (zh) 视频处理方法和视频处理装置
CN113630558B (zh) 一种摄像曝光方法及电子设备
WO2022083325A1 (zh) 拍照预览方法、电子设备以及存储介质
WO2023226612A1 (zh) 一种曝光参数确定方法和装置
WO2024032033A1 (zh) 视频处理的方法及电子设备
CN116996777B (zh) 一种拍摄方法、电子设备及存储介质
CN115631250B (zh) 图像处理方法与电子设备
CN113891008B (zh) 一种曝光强度调节方法及相关设备
CN117714890B (zh) 一种曝光补偿方法、电子设备及存储介质
US20240155236A1 (en) Image processing method and electronic device
CN116095509B (zh) 生成视频帧的方法、装置、电子设备及存储介质
WO2024082863A1 (zh) 图像处理方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant