CN115412678A - 曝光处理方法、装置及电子设备 - Google Patents
曝光处理方法、装置及电子设备 Download PDFInfo
- Publication number
- CN115412678A CN115412678A CN202211284938.1A CN202211284938A CN115412678A CN 115412678 A CN115412678 A CN 115412678A CN 202211284938 A CN202211284938 A CN 202211284938A CN 115412678 A CN115412678 A CN 115412678A
- Authority
- CN
- China
- Prior art keywords
- frame
- exposure
- image
- frame image
- short
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 12
- 238000000034 method Methods 0.000 claims abstract description 64
- 238000012545 processing Methods 0.000 claims abstract description 49
- 230000001965 increasing effect Effects 0.000 claims description 35
- 238000004590 computer program Methods 0.000 claims description 24
- 238000004422 calculation algorithm Methods 0.000 claims description 11
- 238000003860 storage Methods 0.000 claims description 10
- 230000008859 change Effects 0.000 claims description 8
- 230000008569 process Effects 0.000 abstract description 14
- 238000004364 calculation method Methods 0.000 abstract description 5
- 238000004891 communication Methods 0.000 description 37
- 230000006854 communication Effects 0.000 description 37
- 230000006870 function Effects 0.000 description 20
- 238000007726 management method Methods 0.000 description 15
- 238000010295 mobile communication Methods 0.000 description 15
- 230000005236 sound signal Effects 0.000 description 12
- 210000000988 bone and bone Anatomy 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 229920001621 AMOLED Polymers 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 230000036772 blood pressure Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000010009 beating Methods 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 230000002087 whitening effect Effects 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
Abstract
本申请提供一种曝光处理方法、装置及电子设备,该方法包括:获取第N次出帧的长帧图像、中帧图像和短帧图像,N为正整数;根据长帧图像和欠曝光阈值,调整长帧曝光参数;根据短帧图像和过曝光阈值,调整短帧曝光参数;根据中帧图像,调整中帧曝光参数;根据调整后的长帧曝光参数、中帧曝光参数和短帧曝光参数进行第N+1次出帧。该方案每次出帧都是长中短三帧图像,然后分别调整曝光参数,之后在下一次出帧时就可以根据调整后的曝光参数进行出帧。该方案实现了曝光参数的闭环调节,一次次的调整修正使得曝光参数能够越来越收敛到期望值。并且方法步骤简单易于实现,也不需要繁琐的计算过程。
Description
技术领域
本申请涉及图像采集技术领域,尤其涉及一种曝光处理方法、装置及电子设备。
背景技术
对于手机这类可以拍摄图像的电子设备,如果拍照动态范围(dynamic range,DR)的估计不准,会导致屏幕发蓝、夕阳发红、广告牌发白等问题。
为了解决这一问题,出现了采用单帧图像作为参考帧的方案,也就是通过估算参考帧的过曝光率和欠曝光率,然后生成曝光参数,再按照生成的曝光参数依次曝光得到多帧图像,之后将得到的多帧图像进行融合得到融合图像。但是这类方案的准确性完全依赖于估算的算法。常见的估算算法有时间域的多帧估计方法和空间域的多帧估计方法。但是,时间域的多帧估计方法由于存在延时过长的问题,导致收敛缓慢,预览性能差,也就是说,等估算完成的时候可能预览场景(待拍摄的场景)已经发生变化。而空间域的多帧估计方法又需要在每帧曝光的图像中牺牲部分像素来进行估计,这样会劣化最终合成图像的分辨率。
因此,如何更好的进行曝光处理是亟待解决的技术问题。
发明内容
本申请提供一种曝光处理方法、装置及电子设备,能够更好的进行曝光处理。
第一方面,提供了一种曝光处理方法,该方法包括:获取第N次出帧的长帧图像、中帧图像和短帧图像,N为正整数;根据长帧图像和欠曝光阈值,调整长帧曝光参数;根据短帧图像和过曝光阈值,调整短帧曝光参数;根据中帧图像,调整中帧曝光参数;根据调整后的长帧曝光参数、中帧曝光参数和短帧曝光参数进行第N+1次出帧。
在本申请技术方案中,每次出帧都是长中短三帧图像,然后分别按照长帧图像和短帧图像曝光情况与各自对应的阈值的关系来调整长帧曝光参数和短帧曝光参数,以及按照中帧图像的曝光情况调整中帧曝光参数,之后在下一次出帧时就可以根据调整后的曝光参数进行出帧。该方案实现了曝光参数的闭环调节,一次次的调整修正使得曝光参数能够越来越收敛到期望值。并且方法步骤简单易于实现,也不需要繁琐的计算过程。
与采用单帧图像作为参考帧的传统方案相比,本申请技术方案每次出帧是长中短三帧,因此延时小,此外,每次调整都是三帧图像分别调整三组曝光参数,所以也不需要牺牲像素。
除此之外,本申请技术方案由于是三帧图像分别调整三组参数,所以三组参数不需要组合运算,也不需要串行处理,而是一种并行的处理方式。串行处理例如先调长帧曝光参数,再在调整好的长帧曝光参数的基础上调整短帧曝光参数,之后再调中帧曝光参数,这样的串行调整其实会导致前面调整好的最优值因为后面的再次调整而可能变差,最终调整后的效果是难以判断的,而且串行处理的方式处理的时长会更长。而并行的处理方式,三组参数互不影响,都能够收敛到最优,而且还能够提高处理效率。
结合第一方面,在第一方面的某些实现方式中,在根据长帧图像和欠曝光阈值,调整长帧曝光参数时,可以包括:当长帧图像的欠曝光比例大于欠曝光阈值时,增大长帧曝光量,并根据增大后的长帧曝光量调整长帧曝光参数;或者,当长帧图像的欠曝光比例小于或等于欠曝光阈值时,减小长帧曝光量,并根据减小后的长帧曝光量调整长帧曝光参数。需要说明的是,在实际场景中,一帧图像虽然可以分析出存在欠曝光,但当欠曝光非常严重时,欠曝光比例就是设备的极限值,但无法得知具体欠曝光比例超出了极限值多少。而采用本申请实施例的方案,通过一次次判断欠曝光比例是否超出阈值,并对应调整曝光量,就能够最终调整到满足阈值要求。举例说明,假设欠曝光阈值是A,当收到第一次出帧的长帧图像,发现长帧图像的欠曝光比例是极限值B,将曝光量增大,依次执行完其他步骤;当收到第二次出帧的长帧图像,发现长帧图像的欠曝光比例还是极限值B,再次将曝光量增大,依次执行完其他步骤;当收到第三次出帧的长帧图像,发现长帧图像的欠曝光比例是B1,B1略小于B,但是B还是大于A的,再次将曝光量增大,依次执行完其他步骤;当收到第四次出帧的长帧图像,发现长帧图像的欠曝光比例是B2, B2是小于A的,此时将曝光量减小。
也就是说,本申请实施例的方法,在欠曝光比例超出极限值时,不需要分析出具体欠曝光比例是多少的情况下就能够将曝光参数调整到合适状态。
结合第一方面,在第一方面的某些实现方式中,在根据短帧图像和过曝光阈值,调整短帧曝光参数时,可以包括:当短帧图像的过曝光比例大于过曝光阈值时,减小短帧曝光量,并根据减小后的短帧曝光量调整短帧曝光参数;或者,当短帧图像的过曝光比例小于或等于过曝光阈值时,增大短帧曝光量,并根据增大后的短帧曝光量调整短帧曝光参数。
结合第一方面,在第一方面的某些实现方式中,上述方法还包括:将短帧曝光参数对应的短帧曝光时长调整为光源变化周期的整数倍。
结合第一方面,在第一方面的某些实现方式中,上述方法还包括:将中帧图像确定为用于送显的预览图像。也就是说,可以直接将每次出帧的中帧图像用来送显,用户通过电子设备的拍摄界面看到的预览图像就是中帧图像。
结合第一方面,在第一方面的某些实现方式中,上述方法还包括:当长帧图像的欠曝光比例小于或等于欠曝光阈值且短帧图像的过曝光比例小于或等于过曝光阈值时,将长帧图像、中帧图像和短帧图像进行融合得到融合图像,将融合图像确定为用于送显的预览图像。也就是说,可以在长帧图像和短帧图像的曝光比例都满足要求的时候,将融合图像用来送显,用户通过电子设备的拍摄界面看到的预览图像就是融合图像,这种方式能够提升用户的视觉体验,看到的是更优的显示图像。
结合第一方面,在第一方面的某些实现方式中,上述长帧图像、中帧图像和短帧图像是在交错高动态范围下出帧的。
结合第一方面,在第一方面的某些实现方式中,长帧曝光参数、中帧曝光参数和短帧曝光参数是利用自动曝光算法进行调整的。
第二方面,提供了一种曝光处理装置,该装置包括由软件和/或硬件组成的用于执行第一方面中的任意一种方法的单元。
第三方面,提供了一种电子设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,当处理器执行计算机程序时能够实现第一方面的任意一种方法。
第四方面,提供了一种芯片,包括处理器,该处理器用于读取并执行存储在存储器中的计算机程序,当计算机程序被处理器执行时能够实现第一方面中的任意一种方法。
可选地,该芯片还包括存储器,存储器与处理器电连接。
可选地,该芯片还可以包括通信接口。
第五方面,提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,当计算机程序被处理器执行时能够实现第一方面中的任意一种方法。
第六方面,提供了一种计算机程序产品,该计算机程序产品包括计算机程序,当计算机程序被处理器执行时能够实现第一方面中的任意一种方法。
附图说明
图1是本申请实施例的一种拍摄场景的示意图。
图2是本申请实施例的SHDR出帧示意图。
图3是本申请实施例的一种曝光处理方法的示意性流程图。
图4是本申请实施例的另一种曝光处理方法的示意性流程图。
图5是本申请实施例的一种应用场景的示意图。
图6是本申请实施例的一种曝光处理装置的示意图。
图7是本申请实施例的一种电子设备的硬件结构的示意图。
具体实施方式
下面结合附图对本申请实施例的方案进行介绍。
为了便于理解,首先对本申请涉及的一些技术术语进行介绍。
图1是本申请实施例的一种拍摄场景的示意图。如图1所示,假设图1中(a)所示的场景是傍晚太阳落山场景,太阳为夕阳。如果用电子设备100进行拍摄,当用户打开电子设备100的拍摄软件,就可以进入图1中(b)所示的拍摄界面。此时用户可以通过拍摄界面看到夕阳场景的预览图像。如果电子设备100的动态范围估计不准,用户此时通过拍摄界面看到的夕阳就可能是比实际颜色偏红的。如果用户触发了拍摄操作,就会得到一张夕阳发红的图像。用户例如可以通过点击图1中(b)所示的拍摄界面中的拍摄触摸键触发拍摄,或者通过语音控制触发拍摄,或者通过按压快捷键(机械按键)触发拍摄等,具体触发方式没有限制。
图1中(b)所示的电子设备100可以是手机、电脑、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等,只要能够具备拍摄功能即可。
传统的改进动态范围估计不准的方法是通过最后一次拍摄的图像作为参考帧,进行曝光率分析,来指导当前的拍摄,但是这种方案并不准确,且计算繁琐。因此针对上述问题,本申请提供一种曝光处理方案,主要通过闭环控制和长中短三帧的分别调整,来简化处理过程中运算的同时还能保证曝光处理的准确性。
为了便于理解方案,下面结合图2,对本申请实施例采用的交错高动态范围(stagger high dynamic range,SHDR)技术进行介绍。如图2所示,SHDR的出帧过程中,每次会连续出三帧图像,也就是说,第N-1帧、第N帧和第N+1帧都是分别包括长帧、中帧和短帧三帧的。第N帧可以理解为第N次出帧。N可以为正整数。
通常得到三帧图像之后,会进行多帧融合得到一帧图像。而在本申请实施例中,主要利用了SHDR技术一次出帧能够交错曝光出长中短三帧的特点,尤其利用其中的长帧和短帧进行曝光参数的调整,从而提高曝光参数的准确性。
还应理解,SHDR也可以每次出帧只出中帧和短帧,则调整曝光参数时,只需要调整中帧的曝光参数和短帧的曝光参数。
图3是本申请实施例的一种曝光处理方法的示意性流程图。下面对图3所示步骤进行介绍。
S301、获取第N次出帧的长帧图像、中帧图像和短帧图像,N为正整数。
在一种实现方式中,可以利用SHDR技术进行出帧,也就是步骤S301获取到的长帧图像、中帧图像和短帧图像是在SHDR下出帧的。但应理解,也可以采用其他能够一次出长中短三帧图像的技术进行出帧,也就是步骤S301获取到的长帧图像、中帧图像和短帧图像是在其他能够一次出长中短三帧的技术下出帧的。
长帧图像可以理解为长曝光帧图像,短帧图像可以理解为短曝光帧图像,中帧图像则可以理解为中曝光帧图像,或者可以认为介于长帧图像和短帧图像的曝光时长之间的图像。长帧图像的曝光时长大于中帧图像的曝光时长,中帧图像的曝光时长大于短帧图像的曝光时长。曝光时长即为曝光参数的其中一个参数。对于一次可以出多帧图像的出帧技术,例如上述SHDR或者其他的HDR技术,都可以每次出多帧图像,这些多帧图像可以根据曝光时长区分出长帧图像、中帧图像和短帧图像。其他HDR技术也可能每次只出两帧图像。
步骤S301可以是在电子设备的预览场景下实时获取,也就是用户能够通过电子设备的拍摄界面看到预览图像;也可以是从存储装置中读取;还可以是通过通信接口从网络中获取,不存在限定。
S302、根据长帧图像和欠曝光阈值,调整长帧曝光参数;根据短帧图像和过曝光阈值,调整短帧曝光参数;根据中帧图像,调整中帧曝光参数。
曝光参数可以包括光圈、曝光时长(快门)和感光度中的至少一项。
可选地,可以根据长帧图像的欠曝光比例和欠曝光阈值,调整长帧曝光参数;根据短帧图像的过曝光比例和过曝光阈值,调整短帧曝光参数。
在一种实现方式中,可以根据长帧图像的欠曝光比例和欠曝光阈值的关系,和/或短帧图像的过曝光比例和过曝光阈值的关系,调整长帧曝光量,然后根据调整后的曝光量调整曝光参数。
在一个例子中,步骤S302中在根据长帧图像和欠曝光阈值,调整长帧曝光参数时,可以包括:当长帧图像的欠曝光比例大于欠曝光阈值时,增大长帧曝光量,并根据增大后的长帧曝光量调整长帧曝光参数;或者,当长帧图像的欠曝光比例小于欠曝光阈值时,减小长帧曝光量,并根据减小后的长帧曝光量调整长帧曝光参数;或者,当长帧图像的欠曝光比例等于欠曝光阈值时,保持长帧曝光量,并根据保持的长帧曝光量调整长帧曝光参数。
在另一个例子中,步骤S302中在根据长帧图像和欠曝光阈值,调整长帧曝光参数时,可以包括:当长帧图像的欠曝光比例大于欠曝光阈值时,增大长帧曝光量,并根据增大后的长帧曝光量调整长帧曝光参数;或者,当长帧图像的欠曝光比例小于或等于欠曝光阈值时,减小长帧曝光量,并根据减小后的长帧曝光量调整长帧曝光参数。
需要说明的是,在实际场景中,一帧图像虽然可以分析出存在欠曝光,但当欠曝光非常严重时,欠曝光比例就是设备的极限值,但无法得知具体欠曝光比例超出了极限值多少。而采用本申请实施例的方案,通过一次次判断欠曝光比例是否超出阈值,并对应调整曝光量,就能够最终调整到满足阈值要求。举例说明,假设欠曝光阈值是A,当收到第一次出帧的长帧图像,发现长帧图像的欠曝光比例是极限值B,B大于A,将曝光量增大,依次执行完其他步骤;当收到第二次出帧的长帧图像,发现长帧图像的欠曝光比例还是极限值B,再次将曝光量增大,依次执行完其他步骤;当收到第三次出帧的长帧图像,发现长帧图像的欠曝光比例是B1,B1小于B,但是B还是大于A的,再次将曝光量增大,依次执行完其他步骤;当收到第四次出帧的长帧图像,发现长帧图像的欠曝光比例是B2, B2是小于A的,此时将曝光量减小。
也就是说,本申请实施例的方法,在欠曝光比例超出极限值时,不需要分析出具体欠曝光比例是多少的情况下就能够将曝光参数调整到合适状态。
在一个例子中,步骤S302中在根据短帧图像和过曝光阈值,调整短帧曝光参数时,可以包括:当短帧图像的过曝光比例大于过曝光阈值时,减小短帧曝光量,并根据减小后的短帧曝光量调整短帧曝光参数;或者,当短帧图像的过曝光比例小于过曝光阈值时,增大短帧曝光量,并根据增大后的短帧曝光量调整短帧曝光参数;或者,当短帧图像的过曝光比例等于过曝光阈值时,保持短帧曝光量,并根据保持的短帧曝光量调整短帧曝光参数。
在另一个例子中,步骤S302中在根据短帧图像和过曝光阈值,调整短帧曝光参数时,可以包括:当短帧图像的过曝光比例大于过曝光阈值时,减小短帧曝光量,并根据减小后的短帧曝光量调整短帧曝光参数;或者,当短帧图像的过曝光比例小于或等于过曝光阈值时,增大短帧曝光量,并根据增大后的短帧曝光量调整短帧曝光参数。
需要说明的是,在实际场景中,一帧图像虽然可以分析出存在过曝光,但当过曝光非常严重时,过曝光比例就是设备的极限值,但无法得知具体过曝光比例超出了极限值多少。而采用本申请实施例的方案,通过一次次判断过曝光比例跟过曝光阈值的关系,并对应调整曝光量,就能够最终调整到满足阈值要求。举例说明,假设过曝光阈值是C,当收到第一次出帧的短帧图像,发现短帧图像的过曝光比例是D,D大于C,将曝光量减小,依次执行完其他步骤;当收到第二次出帧的短帧图像,发现短帧图像的过曝光比例是D1,D1是小于C的,此时将曝光量增大。
欠曝光阈值和过曝光阈值可以是预设置好的。
在一种实现方式中,可以利用自动曝光(auto exposure,AE)算法执行步骤S302,也就是说,利用AE算法调整上述长帧曝光参数、中帧曝光参数和短帧曝光参数。AE算法可以包括上述判断曝光比例和阈值关系的步骤。
在另一种实现方式中,还可以增加对于水波纹(anti-banding)现象的抑制。也就是说,在调整上述短帧曝光参数的时候,一方面需要根据短帧图像的过曝光比例和阈值调整,另一方面也要考虑光源的影响,将短帧曝光参数对应的短帧曝光时长调整为光源变化周期的整数倍。假设光源是50/60赫兹(HZ)的特定频率的光源,就可以按照该光源变化周期的整数倍确定出短帧曝光时长。
S303、根据调整后的长帧曝光参数、中帧曝光参数和短帧曝光参数进行第N+1次出帧。
也就是说,在第N+1次出帧的时候,根据步骤S302得到的曝光参数进行出帧。
图3所示方法,每次出帧都是长中短三帧图像,然后分别按照长帧图像和短帧图像曝光情况与各自对应的阈值的关系来调整长帧曝光参数和短帧曝光参数,以及按照中帧图像的曝光情况调整中帧曝光参数,之后在下一次出帧时就可以根据调整后的曝光参数进行出帧。该方案实现了曝光参数的闭环调节,一次次的调整修正使得曝光参数能够越来越收敛到期望值。并且方法步骤简单易于实现,也不需要繁琐的计算过程。
与采用单帧图像作为参考帧的传统方案相比,该方案每次出帧是长中短三帧,因此延时小,此外,每次调整都是三帧图像分别调整三组曝光参数,所以也不需要牺牲像素。
除此之外,该术方案由于是三帧图像分别调整三组参数,所以三组参数不需要组合运算,也不需要串行处理,而是一种并行的处理方式。串行处理例如先调长帧曝光参数,再在调整好的长帧曝光参数的基础上调整短帧曝光参数,之后再调中帧曝光参数,这样的串行调整其实会导致前面调整好的最优值因为后面的再次调整而变差,最终调整后的效果是难以判断的,而且串行处理的方式处理的时长会更长。而并行的处理方式,三组参数互不影响,都能够收敛到最优,而且还能够提高处理效率。
在一种实现方式中,图3所示方法还包括:将中帧图像确定为用于送显的预览图像。也就是说,可以直接将每次出帧的中帧图像用来送显,用户通过电子设备的拍摄界面看到的预览图像就是中帧图像。
在一种实现方式中,图3所示方法还包括:当长帧图像的欠曝光比例小于或等于欠曝光阈值且短帧图像的过曝光比例小于或等于过曝光阈值时,将长帧图像、中帧图像和短帧图像进行融合得到融合图像,将融合图像确定为用于送显的预览图像。也就是说,可以在长帧图像和短帧图像的曝光比例都满足要求的时候,将融合图像用来送显,用户通过电子设备的拍摄界面看到的预览图像就是融合图像,这种方式能够提升用户的视觉体验,看到的是更优的显示图像。
图4是本申请实施例的另一种曝光处理方法的示意性流程图。下面对图4所示步骤进行介绍。
S401、传感器第N次出帧得到中帧图像、长帧图像和短帧图像。
也就是说,传感器是通过三次曝光出了三帧图像。步骤S401步骤S301的一个示例。
S402、判断长帧图像的欠曝光比例是否大于阈值,当判断结果为“是”时执行步骤S403;当判断结果为“否”时,执行步骤S404。
需要说明的是,步骤S402中的阈值是欠曝光阈值。
S403、增大曝光量。
S404、减小曝光量。
也就是说,步骤S402-S404为:当长帧图像的欠曝光比例大于欠曝光阈值时,增大长帧曝光量,并根据增大后的长帧曝光量调整长帧曝光参数;或者,当长帧图像的欠曝光比例小于或等于欠曝光阈值时,减小长帧曝光量,并根据减小后的长帧曝光量调整长帧曝光参数。
S405、判断短帧图像的过曝光比例是否大于阈值,当判断结果为“是”时执行步骤S406;当判断结果为“否”时,执行步骤S407。
需要说明的是,步骤S402中的阈值是欠曝光阈值。
S406、减小曝光量。
S407、增大曝光量。
也就是说,步骤S405-S407为:当短帧图像的过曝光比例大于过曝光阈值时,减小短帧曝光量,并根据减小后的短帧曝光量调整短帧曝光参数;或者,当短帧图像的过曝光比例小于或等于过曝光阈值时,增大短帧曝光量,并根据增大后的短帧曝光量调整短帧曝光参数。
S408、调整短帧曝光时长。
步骤S408是通过将短帧曝光时长调整为光源变化周期的整数倍的一个示例。
S409、调整中帧曝光参数、长帧曝光参数、短帧曝光参数。
也就是说,在步骤S408之后,执行AE算法的其他步骤,从而最终实现对于此次三组曝光参数的调整。
步骤S402-S409可以看作是步骤S302的一个示例。
步骤S409之后,传感器可以进行第N+1次出帧,也就是执行步骤S303。
需要说明的是,步骤S402-S404、步骤S405-S407,以及中帧图像到生成中帧曝光参数的步骤是可以并行执行的三组步骤。
还应理解,本申请实施例的方案是如何调整曝光的方案,可以应用于拍摄,但并不需要拍摄事件才能触发。
图5是本申请实施例的一种应用场景的示意图。如图5所示,在电子设备100的界面510,也就是桌面的界面上点击拍照应用的图标,打开界面520,界面520为拍摄界面。在界面520中用户就可以看到待拍摄的画面的图像,也就是预览图像,例如上述通过中帧图像送显的方式,用户看到的实际是每次出帧之后的中帧图像。也就是说,在界面520的运行过程中,本申请实施例的步骤就在循环运行了,由于动态范围估计相对比较准确,用户看到的预览图像的视觉体验就会相对较好。如果进一步采用了上述在满足阈值时进行融合再送显预览图像的步骤,用户的视觉体验或进一步提升。界面520以拍摄对象是电脑为例,此时电脑屏幕就不会出现屏幕发蓝的情况了。
如果用户在界面520上点击拍摄键,就可以得到一张融合图像,如界面530所示,界面530为图像查看和编辑应用的界面,这张融合图像由于拍摄时已经利用本申请实施例的方案对曝光参数进行了优化,所以可以避免动态范围估计不准导致的问题,也就是说,界面530中图像中的电脑屏幕就不会出现屏幕发蓝的情况。
上文主要结合附图对本申请实施例的方法进行了介绍。应理解,虽然如上所述的各实施例所涉及的流程图中的各个步骤依次显示,但是这些步骤并不是必然按照图中所示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。下面结合附图对本申请实施例的装置进行介绍。
图6是本申请实施例的一种曝光处理装置的示意图。如图6所示,该装置1000包括获取单元1001和处理单元1002。该装置1000可以是本申请实施例所述的任意一种电子设备,例如图1和图5所示的电子设备100和图7所示的电子设备700。
该装置2000能够用于执行上文任意一种曝光处理方法。例如,获取单元1001可用于执行步骤S301,处理单元2002可用于执行步骤S302和S303。又例如,获取单元1001可用于执行步骤S401,处理单元2002可用于执行步骤S402-S409。
在一种实现方式中,装置1000还可以包括存储单元,用于存储曝光参数等数据。该存储单元可以是集成在处理单元1002中,也可以是独立于获取单元1001和处理单元1002之外的单元。
图7是本申请实施例的一种电子设备的硬件结构的示意图。如图7所示,电子设备700可以包括处理器710,外部存储器接口720,内部存储器721,通用串行总线(universalserial bus,USB)接口730,充电管理模块740,电源管理模块741,电池742,天线1,天线2,移动通信模块750,无线通信模块760,音频模块770,扬声器770A,受话器770B,麦克风770C,耳机接口770D,传感器模块780,按键790,马达791,指示器792,摄像头793,显示屏794,以及用户标识模块(subscriber identification module,SIM)卡接口795等。其中,传感器模块780可以包括压力传感器780A,陀螺仪传感器780B,气压传感780C,磁传感器780D,加速度传感器780E,距离传感器780F,接近光传感器780G,指纹传感器780H,温度传感器780J,触摸传感器780K,环境光传感器780L,骨传导传感器780M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备700的具体限定。在本申请另一些实施例中,电子设备700可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
示例性地,图7所示的处理器710可以包括一个或多个处理单元,例如:处理器710可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processing unit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备700的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器710中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器710中的存储器为高速缓冲存储器。该存储器可以保存处理器710刚用过或循环使用的指令或数据。如果处理器710需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器710的等待时间,因而提高了系统的效率。
在一些实施例中,处理器710可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
在一些实施例中,I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。处理器710可以包含多组I2C总线。处理器710可以通过不同的I2C总线接口分别耦合触摸传感器780K,充电器,闪光灯,摄像头793等。例如,处理器710可以通过I2C接口耦合触摸传感器780K,使处理器710与触摸传感器780K通过I2C总线接口通信,实现电子设备700的触摸功能。
在一些实施例中,I2S接口可以用于音频通信。处理器710可以包含多组I2S总线。处理器710可以通过I2S总线与音频模块770耦合,实现处理器710与音频模块770之间的通信。
在一些实施例中,音频模块770可以通过I2S接口向无线通信模块760传递音频信号,实现通过蓝牙耳机接听电话的功能。
在一些实施例中,PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。音频模块770与无线通信模块760可以通过PCM总线接口耦合。
在一些实施例中,音频模块770也可以通过PCM接口向无线通信模块760传递音频信号,实现通过蓝牙耳机接听电话的功能。应理解,I2S接口和PCM接口都可以用于音频通信。
在一些实施例中,UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。UART接口通常被用于连接处理器710与无线通信模块760。例如,处理器710通过UART接口与无线通信模块760中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块770可以通过UART接口向无线通信模块760传递音频信号,实现通过蓝牙耳机播放音乐的功能。
在一些实施例中,MIPI接口可以被用于连接处理器710与显示屏794,摄像头793等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(display serial interface,DSI)等。处理器710和摄像头793通过CSI接口通信,实现电子设备700的拍摄功能。处理器710和显示屏794通过DSI接口通信,实现电子设备700的显示功能。
在一些实施例中,GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。GPIO接口可以用于连接处理器710与摄像头793,显示屏794,无线通信模块760,音频模块770,传感器模块780等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
示例性地,USB接口730是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备700充电,也可以用于电子设备700与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备700的结构限定。在本申请另一些实施例中,电子设备700也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块740用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块740可以通过USB接口730接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块740可以通过电子设备700的无线充电线圈接收无线充电输入。充电管理模块740为电池742充电的同时,还可以通过电源管理模块741为电子设备供电。
电源管理模块741用于连接电池742,充电管理模块740与处理器710。电源管理模块741接收电池742和/或充电管理模块740的输入,为处理器710,内部存储器721,外部存储器,显示屏794,摄像头793,和无线通信模块760等供电。电源管理模块741还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块741也可以设置于处理器710中。在另一些实施例中,电源管理模块741和充电管理模块740也可以设置于同一个器件中。
电子设备700的无线通信功能可以通过天线1,天线2,移动通信模块750,无线通信模块760,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备700中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如,可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块750可以提供应用在电子设备700上的无线通信的解决方案,例如下列方案中的至少一个:第二代(2th generation,2G)移动通信解决方案、第三代(3thgeneration,3G)移动通信解决方案、第四代(4th generation,5G)移动通信解决方案、第五代(5th generation,5G)移动通信解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块750可以由天线1接收电磁波,并对接收的电磁波进行滤波和放大等处理,随后传送至调制解调处理器进行解调。移动通信模块750还可以放大经调制解调处理器调制后的信号,放大后的该信号经天线1转变为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器710中。在一些实施例中,移动通信模块750的至少部分功能模块可以与处理器710的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器770A,受话器770B等)输出声音信号,或通过显示屏794显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器710,与移动通信模块750或其他功能模块设置在同一个器件中。
无线通信模块760可以提供应用在电子设备700上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块760可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块760经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器710。无线通信模块760还可以从处理器710接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备700的天线1和移动通信模块750耦合,电子设备700的天线2和无线通信模块760耦合,使得电子设备700可以通过无线通信技术与网络和其他电子设备通信。该无线通信技术可以包括以下通信技术中的至少一个:全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packetradio service,GPRS),码分多址接入(code division multiple access,CDMA),宽带码分多址(wideband code division multiple access,WCDMA),时分码分多址(time-divisioncode division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,IR技术。该GNSS可以包括以下定位技术中的至少一个:全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigationsatellite system,GLONASS),北斗卫星导航系统(beidou navigation satellitesystem,BDS),准天顶卫星系统(quasi-zenith satellite system,QZSS),星基增强系统(satellite based augmentation systems,SBAS)。
电子设备700通过GPU,显示屏794,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏794和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器710可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏794用于显示图像,视频等。显示屏X94包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Mini-led,Micro-Led,Micro-oLed,量子点发光二极管(quantum dot light-emitting diodes,QLED)等。在一些实施例中,电子设备700可以包括1个或N个显示屏794,N为大于1的正整数。
电子设备700可以通过ISP,摄像头793,视频编解码器,GPU,显示屏794以及应用处理器等实现拍摄功能。
ISP用于处理摄像头793反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头793中。
摄像头793用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备700可以包括1个或N个摄像头793,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备700在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备700可以支持一种或多种视频编解码器。这样,电子设备700可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备700的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口720可以用于连接外部存储卡,例如安全数码(secure digital,SD)卡,实现扩展电子设备700的存储能力。外部存储卡通过外部存储器接口120与处理器710通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器721可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器710通过运行存储在内部存储器721的指令,从而执行电子设备700的各种功能应用以及数据处理。内部存储器721可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备700使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器721可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备700可以通过音频模块770,扬声器770A,受话器770B,麦克风770C,耳机接口770D,以及应用处理器等实现音频功能。例如,音乐播放,录音等。
音频模块770用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块770还可以用于对音频信号编码和解码。在一些实施例中,音频模块770可以设置于处理器710中,或将音频模块770的部分功能模块设置于处理器710中。
扬声器770A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备700可以通过扬声器770A收听音乐,或收听免提通话。
受话器770B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备700接听电话或语音信息时,可以通过将受话器770B靠近人耳接听语音。
麦克风770C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风770C发声,将声音信号输入到麦克风770C。电子设备700可以设置至少一个麦克风770C。在另一些实施例中,电子设备700可以设置两个麦克风770C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备700还可以设置三个,四个或更多麦克风770C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口770D用于连接有线耳机。耳机接口770D可以是USB接口730,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器780A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器780A可以设置于显示屏794。压力传感器780A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器780A,电极之间的电容改变。电子设备700根据电容的变化确定压力的强度。当有触摸操作作用于显示屏794,电子设备700根据压力传感器780A检测所述触摸操作强度。电子设备700也可以根据压力传感器780A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如,当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感780B可以用于确定电子设备700的运动姿态。在一些实施例中,可以通过陀螺仪传感器780B确定电子设备700围绕三个轴(即7,y和z轴)的角速度。陀螺仪传感器780B可以用于拍摄防抖。示例性地,当按下快门,陀螺仪传感器780B检测电子设备700抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备700的抖动,实现防抖。陀螺仪传感器780B还可以用于导航,体感游戏场景。
气压传感器780C用于测量气压。在一些实施例中,电子设备700通过气压传感器780C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器780D包括霍尔传感器。电子设备700可以利用磁传感器780D检测翻盖皮套的开合。在一些实施例中,当电子设备700是翻盖机时,电子设备700可以根据磁传感器780D检测翻盖的开合;根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器780E可检测电子设备700在各个方向上(一般为三轴)加速度的大小。当电子设备700静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器780F用于测量距离。电子设备700可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备700可以利用距离传感器780F测距以实现快速对焦。
接近光传感器780G可以包括例如发光二极管(light-emitting diode,LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备700通过发光二极管向外发射红外光。电子设备700使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备700附近有物体。当检测到不充分的反射光时,电子设备700可以确定电子设备700附近没有物体。电子设备700可以利用接近光传感器780G检测用户手持电子设备700贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器780G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器780L用于感知环境光亮度。电子设备700可以根据感知的环境光亮度自适应调节显示屏794亮度。环境光传感器780L也可用于拍照时自动调节白平衡。环境光传感器780L还可以与接近光传感器780G配合,检测电子设备700是否在口袋里,以防误触。
指纹传感器780H用于采集指纹。电子设备700可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器780J用于检测温度。在一些实施例中,电子设备700利用温度传感器780J检测的温度,执行温度处理策略。例如,当温度传感器780J上报的温度超过阈值,电子设备700执行降低位于温度传感器780J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备700对电池742加热,以避免低温导致电子设备700异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备700对电池742的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器780K,也称“触控面板”。触摸传感器780K可以设置于显示屏794,由触摸传感器780K与显示屏794组成触摸屏,也称“触控屏”。触摸传感器780K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏794提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器780K也可以设置于电子设备700的表面,与显示屏794所处的位置不同。
骨传导传感器780M可以获取振动信号。在一些实施例中,骨传导传感器780M可以获取人体声部振动骨块的振动信号。骨传导传感器780M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器780M也可以设置于耳机中,结合成骨传导耳机。音频模块770可以基于所述骨传导传感器780M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器780M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键790包括开机键,音量键等。按键790可以是机械按键。也可以是触摸式按键。电子设备700可以接收按键输入,产生与电子设备700的用户设置以及功能控制有关的键信号输入。
马达791可以产生振动提示。马达791可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏794不同区域的触摸操作,马达791也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器792可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口795用于连接SIM卡。SIM卡可以通过插入SIM卡接口795,或从SIM卡接口795拔出,实现和电子设备700的接触和分离。电子设备700可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口795可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口795可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口795也可以兼容不同类型的SIM卡。SIM卡接口795也可以兼容外部存储卡。电子设备700通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备700采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备700中,不能和电子设备700分离。
电子设备700的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。
需要说明的是,上述装置/单元之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本申请实施例还提供了一种电子设备,该电子设备包括:至少一个处理器、存储器以及存储在所述存储器中并可在所述至少一个处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述各个方法实施例中的步骤。
本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,当计算机程序被处理器执行时能够实现上述各个方法实施例中的步骤。
本申请实施例提供了一种计算机程序产品,该计算机程序产品包括计算机程序,当计算机程序被处理器执行时能够实现上述各个方法实施例中的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括:能够将计算机程序代码携带到拍照装置/电子设备的任何实体或装置、记录介质、计算机存储器、只读存储器(read-only memory,ROM)、随机存取存储器(random accessmemory,RAM)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区,根据立法和专利实践,计算机可读介质不可以是电载波信号和电信信号。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置/设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/网络设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
应当理解,当在本申请说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (18)
1.一种曝光处理方法,其特征在于,包括:
获取第N次出帧的长帧图像、中帧图像和短帧图像,N为正整数;
根据所述长帧图像和欠曝光阈值,调整长帧曝光参数;根据所述短帧图像和过曝光阈值,调整短帧曝光参数;根据所述中帧图像,调整中帧曝光参数;
根据调整后的所述长帧曝光参数、所述中帧曝光参数和所述短帧曝光参数进行第N+1次出帧。
2.根据权利要求1所述的方法,其特征在于,所述根据所述长帧图像和欠曝光阈值,调整长帧曝光参数,包括:
当所述长帧图像的欠曝光比例大于所述欠曝光阈值时,增大长帧曝光量,并根据增大后的长帧曝光量调整所述长帧曝光参数;或者,
当所述长帧图像的欠曝光比例小于或等于所述欠曝光阈值时,减小长帧曝光量,并根据减小后的长帧曝光量调整所述长帧曝光参数。
3.根据权利要求1所述的方法,其特征在于,所述根据所述短帧图像和过曝光阈值,调整短帧曝光参数,包括:
当所述短帧图像的过曝光比例大于所述过曝光阈值时,减小短帧曝光量,并根据减小后的短帧曝光量调整所述短帧曝光参数;或者,
当所述短帧图像的过曝光比例小于或等于所述过曝光阈值时,增大短帧曝光量,并根据增大后的短帧曝光量调整所述短帧曝光参数。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述短帧曝光参数对应的短帧曝光时长调整为光源变化周期的整数倍。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述方法还包括:将所述中帧图像确定为用于送显的预览图像。
6.根据权利要求1至4中任一项所述的方法,其特征在于,所述方法还包括:
当所述长帧图像的欠曝光比例小于或等于所述欠曝光阈值且所述短帧图像的过曝光比例小于或等于所述过曝光阈值时,将所述长帧图像、所述中帧图像和所述短帧图像进行融合得到融合图像,将所述融合图像确定为用于送显的预览图像。
7.根据权利要求1至4中任一项所述的方法,其特征在于,所述长帧图像、所述中帧图像和所述短帧图像是在交错高动态范围SHDR下出帧的。
8.根据权利要求1至4中任一项所述的方法,其特征在于,所述长帧曝光参数、所述中帧曝光参数和所述短帧曝光参数是利用自动曝光AE算法进行调整的。
9.一种曝光处理装置,其特征在于,包括:
获取单元,用于获取第N次出帧的长帧图像、中帧图像和短帧图像,N为正整数;
处理单元,用于根据所述长帧图像和欠曝光阈值,调整长帧曝光参数;根据所述短帧图像和过曝光阈值,调整短帧曝光参数;根据所述中帧图像,调整中帧曝光参数;
所述处理单元还用于,根据调整后的所述长帧曝光参数、所述中帧曝光参数和所述短帧曝光参数进行第N+9次出帧。
10.根据权利要求9所述的装置,其特征在于,所述处理单元具体用于:
当所述长帧图像的欠曝光比例大于所述欠曝光阈值时,增大长帧曝光量,并根据增大后的长帧曝光量调整所述长帧曝光参数;或者,
当所述长帧图像的欠曝光比例小于或等于所述欠曝光阈值时,减小长帧曝光量,并根据减小后的长帧曝光量调整所述长帧曝光参数。
11.根据权利要求9所述的装置,其特征在于,所述处理单元具体用于:
当所述短帧图像的过曝光比例大于所述过曝光阈值时,减小短帧曝光量,并根据减小后的短帧曝光量调整所述短帧曝光参数;或者,
当所述短帧图像的过曝光比例小于或等于所述过曝光阈值时,增大短帧曝光量,并根据增大后的短帧曝光量调整所述短帧曝光参数。
12.根据权利要求9所述的装置,其特征在于,所述处理单元还用于:
将所述短帧曝光参数对应的短帧曝光时长调整为光源变化周期的整数倍。
13.根据权利要求9至12中任一项所述的装置,其特征在于,所述处理单元还用于:将所述中帧图像确定为用于送显的预览图像。
14.根据权利要求9至12中任一项所述的装置,其特征在于,所述处理单元还用于:
当所述长帧图像的欠曝光比例小于或等于所述欠曝光阈值且所述短帧图像的过曝光比例小于或等于所述过曝光阈值时,将所述长帧图像、所述中帧图像和所述短帧图像进行融合得到融合图像,将所述融合图像确定为用于送显的预览图像。
15.根据权利要求9至12中任一项所述的装置,其特征在于,所述长帧图像、所述中帧图像和所述短帧图像是在交错高动态范围SHDR下出帧的。
16.根据权利要求9至12中任一项所述的装置,其特征在于,所述长帧曝光参数、所述中帧曝光参数和所述短帧曝光参数是利用自动曝光AE算法进行调整的。
17.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至8中任一项所述的方法。
18.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211284938.1A CN115412678B (zh) | 2022-10-20 | 2022-10-20 | 曝光处理方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211284938.1A CN115412678B (zh) | 2022-10-20 | 2022-10-20 | 曝光处理方法、装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115412678A true CN115412678A (zh) | 2022-11-29 |
CN115412678B CN115412678B (zh) | 2023-05-26 |
Family
ID=84167109
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211284938.1A Active CN115412678B (zh) | 2022-10-20 | 2022-10-20 | 曝光处理方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115412678B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117499779A (zh) * | 2023-12-27 | 2024-02-02 | 荣耀终端有限公司 | 一种图像预览方法、设备以及存储介质 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106961550A (zh) * | 2017-03-07 | 2017-07-18 | 浙江大华技术股份有限公司 | 一种摄像状态的切换方法及装置 |
CN107197167A (zh) * | 2016-03-14 | 2017-09-22 | 杭州海康威视数字技术股份有限公司 | 一种获得图像的方法及装置 |
CN109788207A (zh) * | 2019-01-30 | 2019-05-21 | Oppo广东移动通信有限公司 | 图像合成方法、装置、电子设备及可读存储介质 |
CN110248108A (zh) * | 2019-06-14 | 2019-09-17 | 浙江大华技术股份有限公司 | 宽动态下的曝光调整及动态范围确定方法和相关装置 |
CN110430368A (zh) * | 2018-05-01 | 2019-11-08 | 韩华泰科株式会社 | 用于处理图像的设备和方法 |
CN110445989A (zh) * | 2019-08-05 | 2019-11-12 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110602415A (zh) * | 2019-09-30 | 2019-12-20 | 杭州海康威视数字技术股份有限公司 | 曝光控制装置、方法及摄像机 |
CN110830727A (zh) * | 2018-08-07 | 2020-02-21 | 浙江宇视科技有限公司 | 曝光比自动调整方法及装置 |
CN112738414A (zh) * | 2021-04-06 | 2021-04-30 | 荣耀终端有限公司 | 一种拍照方法、电子设备及存储介质 |
CN112738411A (zh) * | 2020-12-29 | 2021-04-30 | 重庆紫光华山智安科技有限公司 | 曝光调节方法、装置、电子设备及存储介质 |
CN113824914A (zh) * | 2021-08-12 | 2021-12-21 | 荣耀终端有限公司 | 视频处理方法、装置、电子设备和存储介质 |
WO2022206353A1 (zh) * | 2021-03-27 | 2022-10-06 | 影石创新科技股份有限公司 | 图像处理方法、拍摄装置、图像处理装置及可读存储介质 |
-
2022
- 2022-10-20 CN CN202211284938.1A patent/CN115412678B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107197167A (zh) * | 2016-03-14 | 2017-09-22 | 杭州海康威视数字技术股份有限公司 | 一种获得图像的方法及装置 |
CN106961550A (zh) * | 2017-03-07 | 2017-07-18 | 浙江大华技术股份有限公司 | 一种摄像状态的切换方法及装置 |
CN110430368A (zh) * | 2018-05-01 | 2019-11-08 | 韩华泰科株式会社 | 用于处理图像的设备和方法 |
CN110830727A (zh) * | 2018-08-07 | 2020-02-21 | 浙江宇视科技有限公司 | 曝光比自动调整方法及装置 |
CN109788207A (zh) * | 2019-01-30 | 2019-05-21 | Oppo广东移动通信有限公司 | 图像合成方法、装置、电子设备及可读存储介质 |
CN110248108A (zh) * | 2019-06-14 | 2019-09-17 | 浙江大华技术股份有限公司 | 宽动态下的曝光调整及动态范围确定方法和相关装置 |
CN110445989A (zh) * | 2019-08-05 | 2019-11-12 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110602415A (zh) * | 2019-09-30 | 2019-12-20 | 杭州海康威视数字技术股份有限公司 | 曝光控制装置、方法及摄像机 |
CN112738411A (zh) * | 2020-12-29 | 2021-04-30 | 重庆紫光华山智安科技有限公司 | 曝光调节方法、装置、电子设备及存储介质 |
WO2022206353A1 (zh) * | 2021-03-27 | 2022-10-06 | 影石创新科技股份有限公司 | 图像处理方法、拍摄装置、图像处理装置及可读存储介质 |
CN112738414A (zh) * | 2021-04-06 | 2021-04-30 | 荣耀终端有限公司 | 一种拍照方法、电子设备及存储介质 |
CN113824914A (zh) * | 2021-08-12 | 2021-12-21 | 荣耀终端有限公司 | 视频处理方法、装置、电子设备和存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117499779A (zh) * | 2023-12-27 | 2024-02-02 | 荣耀终端有限公司 | 一种图像预览方法、设备以及存储介质 |
CN117499779B (zh) * | 2023-12-27 | 2024-05-10 | 荣耀终端有限公司 | 一种图像预览方法、设备以及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN115412678B (zh) | 2023-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110072070B (zh) | 一种多路录像方法及设备、介质 | |
CN113727016A (zh) | 一种拍摄方法及电子设备 | |
CN113810600B (zh) | 终端的图像处理方法、装置和终端设备 | |
CN113810601B (zh) | 终端的图像处理方法、装置和终端设备 | |
CN111770282B (zh) | 图像处理方法及装置、计算机可读介质及终端设备 | |
CN114489533A (zh) | 投屏方法、装置、电子设备及计算机可读存储介质 | |
CN111552451A (zh) | 显示控制方法及装置、计算机可读介质及终端设备 | |
CN114422340A (zh) | 日志上报方法、电子设备及存储介质 | |
CN113572948B (zh) | 视频处理方法和视频处理装置 | |
CN113542613A (zh) | 一种用于拍照的装置及方法 | |
CN112188094B (zh) | 图像处理方法及装置、计算机可读介质及终端设备 | |
CN114500901A (zh) | 双景录像方法、装置和电子设备 | |
CN115412678B (zh) | 曝光处理方法、装置及电子设备 | |
CN115134640A (zh) | 同步播放方法及装置 | |
WO2023030067A1 (zh) | 遥控方法、遥控设备和被控制设备 | |
CN113923351B (zh) | 多路视频拍摄的退出方法、设备和存储介质 | |
CN113674258B (zh) | 图像处理方法及相关设备 | |
CN117593236A (zh) | 图像的显示方法、装置和终端设备 | |
CN111885768B (zh) | 调节光源的方法、电子设备和系统 | |
CN115706869A (zh) | 终端的图像处理方法、装置和终端设备 | |
CN112422814A (zh) | 一种拍摄方法和电子设备 | |
CN115145517A (zh) | 一种投屏方法、电子设备和系统 | |
CN111432156A (zh) | 图像处理方法及装置、计算机可读介质及终端设备 | |
CN115297269B (zh) | 曝光参数的确定方法及电子设备 | |
CN117714835B (zh) | 一种图像处理方法、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |