CN112822413B - 拍摄预览方法、装置、终端和计算机可读存储介质 - Google Patents

拍摄预览方法、装置、终端和计算机可读存储介质 Download PDF

Info

Publication number
CN112822413B
CN112822413B CN202011612501.7A CN202011612501A CN112822413B CN 112822413 B CN112822413 B CN 112822413B CN 202011612501 A CN202011612501 A CN 202011612501A CN 112822413 B CN112822413 B CN 112822413B
Authority
CN
China
Prior art keywords
image
color image
digital image
pixel
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011612501.7A
Other languages
English (en)
Other versions
CN112822413A (zh
Inventor
蒋乾波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oppo Chongqing Intelligent Technology Co Ltd
Original Assignee
Oppo Chongqing Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oppo Chongqing Intelligent Technology Co Ltd filed Critical Oppo Chongqing Intelligent Technology Co Ltd
Priority to CN202011612501.7A priority Critical patent/CN112822413B/zh
Publication of CN112822413A publication Critical patent/CN112822413A/zh
Application granted granted Critical
Publication of CN112822413B publication Critical patent/CN112822413B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range
    • H04N25/58—Control of the dynamic range involving two or more exposures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/62—Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本申请实施例提供了一种摄预览方法、装置、终端和计算机可读存储介质，终端获取当前场景的环境信息和第一数字图像；根据环境信息和第一数字图像的像素值，确定目标工作模式；根据目标工作模式，获取当前场景的第二数字图像，并对第二数字图像进行预处理，得到预处理数字图像；基于预处理数字图像，得到预览图像。

Description

拍摄预览方法、装置、终端和计算机可读存储介质
技术领域
本申请涉及图像处理技术，尤其涉及一种拍摄预览方法、装置、终端和计算机可读存储介质。
背景技术
目前，为了使手机进行全屏显示，手机的前置摄像头通常为屏下摄像头；为了改善屏下摄像头进光量小的问题，通常将手机摄像头的工作模式设置为像素合成(binning)模式，然而在光线充足的场景，将会导致显示的预览图像过曝；并且，屏下摄像头的设置通常还会使预览图像“发雾”，或者存在衍射光斑等现象，导致预览图像质量差。
发明内容
本申请实施例提供一种拍摄预览方法、装置、终端和计算机可读存储介质，提高了预览图像的质量。
本申请的技术方案是这样实现的：
本申请实施例提供一种拍摄预览方法，包括：
获取当前场景的环境信息和第一数字图像；根据所述环境信息和所述第一数字图像的像素值，确定目标工作模式；根据所述目标工作模式，获取所述当前场景的第二数字图像，并对所述第二数字图像进行预处理，得到预处理数字图像；基于所述预处理数字图像，得到预览图像。
本申请实施例提供一种拍摄预览装置，包括：
获取模块，用于获取当前场景的环境信息和第一数字图像；确定模块，用于根据所述环境信息和所述第一数字图像的像素值，确定目标工作模式；预处理模块，用于根据所述目标工作模式，获取所述当前场景的第二数字图像，并对所述第二数字图像进行预处理，得到预处理数字图像；预览模块，用于基于所述预处理数字图像，得到预览图像。
本申请实施例提供一种终端，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述存储器中存储的计算机程序时，实现上述拍摄预览方法。
本申请实施例提供一种计算机可读存储介质，存储有计算机程序，用于被处理器执行时，实现上述拍摄预览方法。
本申请实施例具有以下有益效果：
本申请实施例所提供了一种拍摄预览方法、装置、终端和计算机可读存储介质，终端获取当前场景的环境信息和第一数字图像；根据环境信息和第一数字图像的像素值，确定目标工作模式；根据目标工作模式，获取当前场景的第二数字图像，并对第二数字图像进行预处理，得到预处理数字图像；基于预处理数字图像，得到预览图像；也就是说，终端可以根据环境信息和第一数字图像的像素值，确定出合适的目标工作模式，使终端按照目标工作模式对第二数字图像进行对应的预处理，得到预处理数字图像，进而得到预览图像，从而提高了预览图像的质量。
附图说明
图1为本申请实施例提供的一种拍摄预览系统的结构示意图；
图2为本申请实施例提供的一种可选终端的结构组成示意图；
图3为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图4为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图5为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图6为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图7为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图8为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图9为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图10为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图11为本申请实施例提供的一种可选的拍摄预览方法流程示意图；
图12为本申请实施例提供的一种可选的终端的硬件结构组成示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述，所描述的实施例不应视为对本申请的限制，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。
在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。
在以下的描述中，所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象，不代表针对对象的特定排序，可以理解地，“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序，以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的，不是旨在限制本申请。
对本申请实施例进行进一步详细说明之前，对本申请实施例中涉及的名词和术语进行说明，本申请实施例中涉及的名词和术语适用于如下的解释。
1)RAW图像：CMOS或者CCD图像传感器将捕捉到的光源信号转化为数字信号的原始数据图像。传感器是通过多个感光点对光进行采样和量化，一个感光点感应一种颜色。
2)RGB图像：红、黄和蓝编码的彩色图像；其中每个像素点的颜色是红、黄和蓝的混合色；即，一个像素点包括红、黄和蓝三色的色彩分量。
3)YUV图像：YUV编码的彩色图像；其中，Y表示明亮度(Luminance或Luma)，也就是灰阶值，“U”和“V”表示的则是色度(Chrominance或Chroma)，作用是描述影像色彩及饱和度，用于指定像素的颜色。
需要说明的是，手机、PAD等各种终端都带有前置摄像头和后置摄像头，用户在拍摄照片的过程中，通过终端显示屏上显示的预览图像进行拍摄预览，并根据预览图像决定是否进行拍摄，以保存当前预览图像；然而，由于手机目前都是全屏显示，因此，手机的前置摄像头通常需设置为屏下摄像头；由于摄像头前存在显示屏，由于显示屏自身的光学结构、走线排布以及像素密度等各方面因素的影响，导致屏下摄像头比非屏下摄像头的进光量少很多，影响预览图像的亮度；目前，手机摄像头的工作模式通常设置为像素合成(binning)模式，来提高预览图像的亮度；但是，在光线充足的情况下，采用binning模式，会导致预览图像过曝；并且，屏下摄像头还会导致预览图像“发雾”，或者存在衍射光斑等现象，导致预览图像质量差。
本申请实施例提供一种拍摄预览方法、装置、终端和计算机可读存储介质，能够根据当前场景，确定合适的工作模式，提高预览图像的质量。下面说明本申请实施例提供的终端示例性应用，本申请实施例提供的终端可以实施为带有摄像装置的笔记本电脑，平板电脑，台式计算机，机顶盒，移动设备(例如，移动电话，便携式音乐播放器，个人数字助理，专用消息设备，便携式游戏设备)等各种类型的用户终端。下面，将说明本申请实施例中终端的示例性应用。
参见图1，图1是本申请实施例提供的拍摄预览系统100的一个可选的架构示意图，拍摄预览系统中包括拍摄预览装置；为实现支撑一个拍摄预览应用，终端400通过网络300连接服务器200，网络300可以是广域网或者局域网，又或者是二者的组合。
终端400用于获取当前场景的环境信息和第一数字图像；根据环境信息和第一数字图像的像素值，确定目标工作模式；根据目标工作模式，获取当前场景的第二数字图像，并对第二数字图像进行预处理，得到预处理数字图像；基于预处理数字图像，得到预览图像；将预览图像显示在终端的显示界面4001上。服务器200用于通过数据库500中预先存储的工作模式数据，对终端400提供预处理支持。
示例性的，终端400打开拍摄应用，通过摄像头的传感器获取当前场景的光线强度和RAW图像1，根据光线强度和RAW图像1确定工作模式为binning模式；基于binning模式，获取当前场景的RAW图像2，对RAW图像2进行4合1像素合成，得到预处理数字图像；将预处理数字图像转换为YUV图像，然后对YUV图像进行降噪、去雾、去衍射光斑，得到优化图像；在接收到用户的渲染指令的情况下，终端需要对优化图像中的人脸进行妆容修饰，则终端可以通过服务器200从数据库500中获取妆容数据，基于妆容数据渲染优化图像中的人脸，从而得到预览图像，在终端400显示界面4001上显示预览图像。
在一些实施例中，服务器200可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。终端400可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等，但并不局限于此。终端以及服务器可以通过有线或无线通信方式进行直接或间接地连接，本发明实施例中不做限制。
参见图2，图2是本申请实施例提供的终端400的结构示意图，图2所示的终端400包括：至少一个处理器410、存储器450、至少一个网络接口420和用户接口430。终端400中的各个组件通过总线系统440耦合在一起。可理解，总线系统440用于实现这些组件之间的连接通信。总线系统440除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图2中将各种总线都标为总线系统440。
处理器410可以是一种集成电路芯片，具有信号的处理能力，例如通用处理器、数字信号处理器(DSP，Digital Signal Processor)，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，其中，通用处理器可以是微处理器或者任何常规的处理器等。
用户接口430包括使得能够呈现媒体内容的一个或多个输出装置431，包括一个或多个扬声器和/或一个或多个视觉显示屏。用户接口430还包括一个或多个输入装置432，包括有助于用户输入的用户接口部件，比如键盘、鼠标、麦克风、触屏显示屏、摄像头、其他输入按钮和控件。
存储器450可以是可移除的，不可移除的或其组合。示例性的硬件设备包括固态存储器，硬盘驱动器，光盘驱动器等。存储器450可选地包括在物理位置上远离处理器410的一个或多个存储设备。
存储器450包括易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。非易失性存储器可以是只读存储器(ROM，Read Only Memory)，易失性存储器可以是随机存取存储器(RAM，Random Access Memory)。本申请实施例描述的存储器450旨在包括任意适合类型的存储器。
在一些实施例中，存储器450能够存储数据以支持各种操作，这些数据的示例包括程序、模块和数据结构或者其子集或超集，下面示例性说明。
操作系统451，包括用于处理各种基本系统服务和执行硬件相关任务的系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务；
网络通信模块452，用于经由一个或多个(有线或无线)网络接口420到达其他计算设备，示例性的网络接口420包括：蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB，Universal Serial Bus)等；
呈现模块453，用于经由一个或多个与用户接口430相关联的输出装置431(例如，显示屏、扬声器等)使得能够呈现信息(例如，用于操作外围设备和显示内容和信息的用户接口)；
输入处理模块454，用于对一个或多个来自一个或多个输入装置432之一的一个或多个用户输入或互动进行检测以及翻译所检测的输入或互动。
在一些实施例中，本申请实施例提供的装置可以采用软件方式实现，图2示出了存储在存储器450中的拍摄预览装置455，其可以是程序和插件等形式的软件，包括以下软件模块：获取模块4551、确定模块4552、预处理模块4553和预览模块4554，这些模块是逻辑上的，因此根据所实现的功能可以进行任意的组合或进一步拆分。
将在下文中说明各个模块的功能。
在另一些实施例中，本申请实施例提供的拍摄预览装置可以采用硬件方式实现，作为示例，本申请实施例提供的拍摄预览装置可以是采用硬件译码处理器形式的处理器，其被编程以执行本申请实施例提供的图像处理方法，例如，硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC，Application Specific IntegratedCircuit)、DSP、可编程逻辑器件(PLD，Programmable Logic Device)、复杂可编程逻辑器件(CPLD，Complex Programmable Logic Device)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)或其他电子元件。
将结合本申请实施例提供的终端的示例性应用和实施，说明本申请实施例提供的拍摄预览方法。
参见图3，图3是本申请实施例提供的拍摄预览方法的一个可选的流程示意图，将结合图3示出的步骤进行说明。
S101、获取当前场景的环境信息和第一数字图像；
在本申请实施例中，终端设置有摄像装置，通过摄像装置的图像传感器获取当前场景的第一数字图像和当前场景的光环境信息。
在本申请实施例中，终端通过图像传感器可以对当前场景获取多个数字图像，将多个数字图像保存在缓存中；终端可以在缓存中获取第一数字图像。
在本申请实施例中，当前场景的环境信息是对拍摄效果有影响的环境因素，根据这些环境因素调整预览图像；这里，环境因素可以包括以下至少之一：环境亮度、环境景深和环境色彩；对此，本申请实施例不作限制。
在本申请实施例中，数字图像为RAW图像；RAW图像包括多个像素；每个像素的像素值可以表示图像传感器感应到的光强；像素值越高，表示当前场景的光线强度越强。
在本申请实施例中，终端可以将第一数字图像中所有像素值的均值作为第一数字图像的像素值；也可以将第一数字图像中的所有像素值进行排序，取像素值的中位值作为第一数字图像的像素值；或者对所有像素值进行排序后，取排序靠前的预设数量个像素值和排序靠后的预设数量个像素值，并计算这些像素值的均值，作为第一数字图像的像素值；对此，本申请实施例不作限制。
在本申请实施例中，RAW图像可以是RAW8格式，可以是RAW10格式，也可以是RAW12格式，对此，本申请实施例不作限制。
S102、根据环境信息和第一数字图像的像素值，确定目标工作模式；
在本申请实施例中，终端在获取环境信息和第一数字图像后，可以根据环境信息和第一数字图像的像素值，确定目标工作模式。
在本申请的一些实施例中，环境信息可以为环境亮度，环境亮度可以通过光照强度表征；光照强度表示单位面积上所接收可见光的光通量，简称照度，通常表示为luxindex值，luxindex值越高表示照度越大，即当前场景的光线强度越强。
在本申请的一些实施例中，环境亮度可以通过感光度表征；感光度通常表示为ISO值；ISO值越高表示照度越大，即当前场景的光线强度越强。
需要说明的是，环境亮度的表征方式可以根据需要设置，对此本申请实施例不作限制。
在本申请实施例中，终端可以设置多个环境亮度条件，不同的环境亮度条件对应不同的工作模式；如此，终端可以在环境亮度和第一数字图像的像素值满足某个环境亮度条件的情况下，将该环境亮度条件对应的工作模式确定为目标工作模式。
在本申请实施例中，不同的环境亮度条件对应的不同的工作模式可以包括：像素合成(binning)模式、3-HDR模式、高分辨率还原(remosaic)模式等；对此，可以根据需要设置，本申请实施例不作限制。
其中，binning模式可以将多个相邻像素合成为一个像素，从而提升图像亮度；3-HDR模式可以通过3级分级曝光，提高逆光场景下的拍摄效果；remosaic模式可以通过将原始像素排布还原为普通拜耳(bayer)结构，从而得到高分辨率图像。
示例性的，光线强度通过照度表征；终端设置3个场景亮度条件，其中，第一场景亮度条件为：照度在0-499范围内，且第一数字图像的像素值在0-79范围内；第二场景亮度条件为：照度在500-2000范围内，且第一数字图像的像素值在80-199范围内；第三场景亮度条件为：照度在2001以上，且第一数字图像的像素值在200以上；第一场景亮度条件对应binning模式，第二场景亮度条件对应3-HDR模式，第三场景亮度条件对应remosaic模式；则终端在确定照度为679，且第一数字图像的像素值为150的情况下，确定目标模式为3-HDR模式。
S103、根据目标工作模式，获取当前场景的第二数字图像，并对第二数字图像进行预处理，得到预处理数字图像；
在本申请实施例中，终端在确定目标工作模式后，将按照目标工作模式，获取当前场景的第二数字图像，并对第二数字图像进行预处理，得到预处理数字图像。
在本申请实施例中，终端通过图像传感器可以对当前场景获取多个数字图像，将多个数字图像保存在缓存中；如此，终端可以在缓存中获取第二数字图像。
示例性的，目标工作模式为3-HDR模式，终端需要对当前场景获取3个不同曝光的数字图像，作为第二数字图像；则预处理可以包括，对第二数字图像中的3个不同曝光的数字图像进行高动态范围(High Dynamic Range，HDR)合成，得到合成的一个数字图像，即预处理数字图像。
在本申请的一些实施例中，第二数字图像可以为第一数字图像。
示例性的，目标工作模式为binning模式，则终端可以将第一数字图像作为第二数字图像；也就是说，终端在获取第一数字图像，并根据第一数字图像的像素值和光线强度确定目标工作模式为binning模式后，可以对第一数字图像进行像素合成，得到预处理数字图像。
S104、基于预处理图像，得到预览图像。
在本申请实施例中，终端在得到预处理数字图像后，可以对预处理数字图像进行图像信号处理，将预处理数字图像转换为彩色图像；基于彩色图像，得到预览图像。
在本申请实施例中，彩色图像中可能包括噪声，则终端可以对彩色图像进行降噪处理，以提升预览效果。
在本申请实施例中，光线通过屏幕会产生光学衍射，从而导致彩色图像有朦胧感，即“发雾”现象，因此，终端可以对彩色图像进行去雾，改善彩色图像的朦胧感，以提升预览效果。
在本申请实施例中，由于屏幕的光学衍射，彩色图像中的发光物体周围会产生衍射光斑，因此，终端可以对彩色图像进行去光斑处理，以提升预览效果。
在本申请实施例中，终端还可以对彩色图像中的人脸进行显示效果加强，例如：提升人脸清晰度等，从而提升预览效果。
可以理解的是，终端通过环境信息和第一数字图像的像素值，可以从多种工作模式中确定出当前场景适用的目标工作模式；如此，根据目标工作模式获得到预处理数字图像后，基于预处理图像得到预览图像，可以提高预览图像的质量，从而提高了预览效果。
在本申请的一些实施例中，环境信息为光照强度值；终端可以在光照强度值和第一数字图像的像素值满足环境亮度条件的情况下，将第一模式确定为目标工作模式；第一模式用于平衡第二数字图像的亮度；或者，终端可以在光照强度值和第一数字图像的像素值不满足环境亮度条件的情况下，将第二模式确定为目标工作模式；第一模式用于平衡第二数字图像的亮度。
在本申请实施例中，终端可以设置环境亮度条件；这样，终端在获取光照强度值和第一数字图像的像素值后，可以判断光照强度值和第一数字图像的像素值是否满足环境亮度条件；若光照强度值和第一数字图像的像素值满足环境亮度条件，则将第一模式作为目标工作模式；若光照强度值和第一数字图像的像素值不满足环境亮度条件，则将第二模式作为目标工作模式。
在本申请实施例中，如果光照强度值和第一数字图像的像素值满足环境亮度条件，则终端在第一模式下，对第二数字图像的亮度做平衡处理，得到预处理数字图像；其中，平衡处理可以包括对第二数字图像的亮度不作调整，或者对第二数字图像中过亮的区域减弱亮度，并对过暗的区域增加亮度；对此，本申请实施例不作限制。
在本申请实施例中，如果光照强度值和第一数字图像的像素值不满足环境亮度条件，则终端在第二模式下，对第二数字图像的亮度做增强处理，得到预处理数字图像；其中，增强处理用于对第二数字图像整体增加亮度。
在本申请的一些实施例中，环境亮度条件包括：所述光照强度值大于或者等于光照强度阈值，且所述第一数字图像的像素值的均值大于或者等于像素阈值。
在本申请实施例中，光照强度阈值和像素阈值可以根据需要设置，对此本申请实施例不作限制。
示例性的，光照强度阈值为2000，像素阈值为180；若终端获取光照强度为1768，第一数字图像的像素均值为189，表示光照强度值小于光照强度阈值，且第一数字图像的像素值大于像素阈值，则光照强度值和第一数字图像的像素值不满足环境亮度条件；终端将第一模式确定为目标工作模式，基于目标工作模式获取预处理数字图像。
在本申请的一些实施例中，第一模式为分级曝光动态范围合成模式；第二模式为像素合成模式；分级曝光动态合成模式，用于将三个不同曝光值的数字图像进行高动态范围合成，从而得到预处理数字图像；像素合成模式，用于将数字图像中的相邻像素进行像素合并，从而得到预处理数字图像。
在本申请实施例中，终端可以在光照强度值和第一数字图像的像素值满足环境亮度条件的情况下，将分级曝光动态范围合成模式，即3-HDR模式确定为目标工作模式；在3-HDR模式下，终端可以获取3张曝光值不同的数字图像，这三张曝光值不同的数字图像都是对当前场景采集的第二数字图像，将高曝光值数字图像的暗部细节、低曝光值数字图像亮部细节以及正常曝光值数字他图像的普通亮度部分的细节合并，能够避免高反差拍照场景中过亮或者过暗的问题。
在本申请实施例中，终端可以在光照强度值和第一数字图像的像素值满足环境亮度条件的情况下，将像素合成模式，即binning模式确定为目标工作模式；在binning模式下，终端可以对获取的第二数字图像的相邻像素进行合并，从而提高了预览图像的亮度，避免在环境亮度不足的情况下，预览图像偏暗。
在本申请的一些实施例中，binning模式为4合1binning，即，相邻的4个像素合成为一个像素，提高了预处理数字图像的亮度，从而提高了预览图像的亮度。
在本申请的一些实施例中，S104中基于预处理图像，得到预览图像的实现，如图4所示，可以包括：S201-S203。
S201、对所述预处理数字图像进行图像信号处理，得到彩色图像；
在本申请实施例中，终端在得到预处理数字图像后，需要对预处理数字图像进行图像信号处理，将数字图像转换为彩色图像。
在本申请实施例中，彩色图像可以为YUV图像，也可以为RGB图像等；对于彩色图像的格式，本申请实施例不作限制。
其中，YUV图像与RGB图像之间可以相互转换。
在本申请实施例中，图像信号处理除了将数字图像转换为彩色图像以外，还可以包括：自动对焦控制、自动白平衡控制、自动曝光控制、坏点校正等，对此，本申请实施例不作限值。
S202、对所述彩色图像进行质量优化处理，得到优化图像；
在本申请实施例中，终端在得到彩色图像之后，可以对彩色图像进行质量优化处理，以提高预览图像的质量。
在本申请的一些实施例中，S202对所述彩色图像进行质量优化处理，得到优化图像的实现，可以包括：对所述彩色图像进行降噪处理、去雾处理、光斑消除处理和人脸超分处理中的至少一种优化处理，得到优化图像。
需要说明的是，人脸超分处理是对图像中的人脸区域进行亮度和清晰度调整的处理方式，以达到提高预览图像中人脸亮度和清晰度的效果；同时，不对图像中的其他区域造成影响。
在本申请实施例中，S202中对所述彩色图像进行质量优化处理，得到优化图像的实现可以包括：
S2021、对彩色图像进行降噪处理、去雾处理、光斑消除处理和人脸超分处理中的一种或多种优化处理,得到优化图像.
在本申请实施例中，终端可以根据实际情况，对彩色图像进行以下至少一种优化处理：降噪处理、去雾处理、光斑消除处理和人脸超分处理。
在本申请实施例中，若终端需要对彩色图像进行多种优化处理，则处理方式的顺序可以根据实际需要设置，对此，本申请实施例不作限制。
在本申请的一些实施例中，至少一种优化处理包括人脸超分处理；S2021中对所述彩色图像进行降噪处理、去雾处理、光斑消除处理和人脸超分处理中的至少一种优化处理，得到优化图像的实现，如图5所示，可以包括：S301-S302。
S301、在彩色图像中包括人脸的情况下，通过场景检测网络检测当前场景，得到当前场景的置信度；
在本申请实施例中，终端可以通过人脸检测网络对彩色图像进行人脸检测，从而确定彩色图像中是否包括人脸；如果彩色图像中包含人脸，则可以通过当前场景检测网络检测当前场景，得到当前场景的置信度。
在本申请实施例中，终端可以通过场景检测网络对当前场景进行检测，从而得到当前场景作为目标场景的置信度。
在本申请实施例中，目标场景可以为逆光场景和/或暗光场景；在逆光场景或者暗光场景下拍摄，将导致预览图像中人脸偏暗、不清晰，因此，在当前场景为逆光或者暗光场景的情况下，需要对彩色图像进行人脸超分处理。
在本申请实施例中，场景检测网络可以为单目标场景检测网络，终端可以通过暗光场景检测网络得到当前场景为暗光场景的置信度，以及通过逆光场景检测网络得到当前场景为逆光场景的置信度；场景检测网络也可以为多目标场景检测网络，终端可以通过场景检测网络检测当前场景为逆光场景的置信度以及当前场景为暗光场景的置信度；对于场景检测网络，可以根据需要设置，对此，本申请实施例不作限制。
S302、根据置信度，对彩色图像进行人脸超分处理，得到优化图像。
在本申请实施例中，终端在确定当前场景为目标场景的置信度之后，可以根据置信度确定当前场景是否为目标场景，在当前场景为目标场景的情况下，对彩色图像进行人脸超分处理，从而得到优化图像。
在本申请的一些实施例中，置信度包括暗光置信度；终端可以在置信度大于或者等于暗光置信度阈值的情况下，对彩色图像进行人脸超分处理，得到优化图像。
需要说明的是，终端在得到当前场景为暗光场景的置信度，即暗光置信度后，可以在暗光置信度大于或者等于暗光置信度阈值的情况下，确定当前场景为暗光场景；如此，终端可以对彩色图像进行人脸超分处理，得到优化图像。
在本申请的一些实施例中，置信度包括逆光置信度；终端可以在置信度大于或者等于暗光置信度阈值的情况下，统计前景的亮度以及背景的亮度；然后，根据前景亮度与背景亮度的比值是否在预设比值范围内，确定当前场景是否为逆光场景，在当前场景为逆光场景的情况下，对彩色图像进行人脸超分处理，得到优化图像。
在本申请的一些实施例中，置信度包括逆光置信度；S302中根据置信度，对彩色图像进行人脸超分处理，得到优化图像的实现如图6所示，可以包括：S401-S402。
S401、在逆光置信度大于或者等于逆光置信度阈值的情况下，统计彩色图像中第一饱和像素的数量和第二饱和像素的数量的比值，作为饱和像素比；其中，第一饱和像素大于或者等于饱和像素阈值；第二饱和像素小于饱和像素阈值；
在本申请实施例中，终端通过场景检测网络检测出当前场景为逆光场景的置信度，即逆光置信度大于或者等于逆光置信度阈值的情况下，可以统计彩色图像中大于或者等于饱和像素阈值的第一饱和像素的数量，以及小于或者等于饱和像素阈值的第二饱和像素的数量，将第一饱和像素的数量与第二饱和像素的数量作比，得到彩色图像的饱和像素比。
S402、在饱和像素比大于像素比阈值的情况下，对彩色图像进行人脸超分处理，得到优化图像。
在本申请实施例中，终端在得到饱和像素比的情况下，可以判断饱和像素比是否大于像素比阈值；若饱和像素比大于像素比阈值，则确定当前场景为逆光场景；否则，确定当前场景不是逆光场景。
在本申请实施例中，终端在确定当前场景为逆光场景的情况下，对彩色图像进行人脸超分处理。
需要说明的是，像素比阈值和逆光置信度阈值可以根据需要设置，对此，本申请实施例不作限制。
示例性的，逆光置信度阈值为0.7，像素比阈值为1.5；如果终端检测当前场景为逆光场景的置信度为0.8，且饱和像素比为1.6，则可以确定当前场景为逆光场景；如果终端检测当前场景为逆光场景的置信度为0.8，且饱和像素比为1.1，则可以确定当前场景不是逆光场景。
可以理解的是，通过场景检测网络可以得到当前场景为逆光场景的置信度，在当前场景为目标场景的置信度高于逆光场景置信度的情况下，终端还统计了饱和像素比，在饱和像素比大于像素比阈值的情况下，才确定当前场景为逆光场景，提高了场景检测的准确度；进而对彩色图像进行人脸超分处理，提高了预览图像的预览效果。
在本申请的一些实施例中，S401中在逆光置信度大于或者等于逆光置信度阈值的情况下，统计彩色图像中第一饱和像素的数量和第二饱和像素的数量的比值，作为饱和像素比之后的实现，如图7所示，可以包括：S501-S502。
S501、对逆光置信度和所述饱和像素比进行加权求和，得到加权和值；
在本申请实施例中，终端在得到逆光置信度以及饱和像素比之后，可以对逆光置信度和饱和像素比进行加权求和，得到加权和值。
在本申请实施例中，终端可以将置信度乘以第一加权值，得到置信度加权值；以及将饱和像素比乘以第二加权值，得到像素加权值；再将置信度加权值和像素加权值求和，得到加权和值。
在本申请实施例中，第一加权值和第二加权值的和为1，其中，第一加权值和第二加权值可以根据实际需要设置，对此，本申请实施例不作限制。
S502、在加权和值大于或者等于加权阈值的情况下，对彩色图像进行人脸超分处理，得到优化图像。
在本申请实施例中，终端可以在加权和值大于或者等于加权阈值的情况下，确定当前场景为逆光场景；如此，终端可以对彩色图像进行人脸超分处理，得到优化图像。
可以理解的是，终端通过对饱和像素比和逆光置信度进行加权求和，来判断当前场景是否为逆光场景，由于设置了加权值，相当于考虑了逆光置信度和饱和像素比在判断当前场景是否为逆光场景时的重要性，由此，进一步提高了场景检测的准确度，提高了预览图像的预览效果。
在本申请的一些实施例中，彩色图像的数量为两张或两张以上；至少一种优化处理包括降噪处理；S2021中对彩色图像进行降噪处理、去雾处理、光斑消除处理和人脸超分处理中的至少一种优化处理，得到优化图像的实现如图8所示，可以包括：S601-S602。
S601、通过多帧降噪算法对至少两张彩色图像进行降噪合成，得到降噪彩色图像；
在本申请实施例中，终端可以获取的第二数字图像中包括至少两张数字图像，如此，终端对第二数字图像进行预处理后，可以得到至少两张预处理数字图像；对至少两张张预处理数字图像进行图像信号处理后，得到对应的至少两张彩色图像。
在本申请实施例中，终端可以对至少两张彩色图像进行降噪合成，对至少两张彩色图像中的噪点进行替换，从而合成为一张没有噪点的彩色图像，即降噪彩色图像。
在本申请的一些实施例中，至少两张彩色图像为YUV图像，实现YUV域多帧降噪，能够较好的保留图像的细节。
S602、基于降噪彩色图像，得到优化图像。
在本申请实施例中，终端可以在得到降噪彩色图像后，可以基于降噪彩色图像得到优化图像。
在本申请的一些实施例中，终端对彩色图像进行的质量优化处理只包括降噪处理，则终端可以在得到降噪彩色图像后，直接将降噪彩色图像直接作为优化图像。
在本申请的一些实施例中，终端在得到降噪彩色图像后，还可以对降噪彩色图像进行降噪处理以外的其他质量优化处理，从而得到优化图像。
可以理解的是，终端通过对多张彩色图像进行合成，得到没有噪点的降噪彩色图像，在保留图像细节的同时，提高了预览图像的显示效果。
在本申请的一些实施例中，彩色图像的数量为两张或两张以上；至少一种优化处理包括去雾处理；S2021中对彩色图像进行降噪处理、去雾处理、光斑消除处理和人脸超分处理中的至少一种优化处理，得到优化图像的实现如图9所示，可以包括：S701-S704。
S701、计算所述彩色图像的雾图；所述雾图用于表征所述彩色图像的发雾区域；
在本申请实施例中，终端在得到彩色图像后，需要对彩色图像进行去雾处理；则终端可以通过去雾算法计算彩色图像的雾图；这里，雾图用于表征彩色图像的发雾区域；如此，终端可以根据雾图对彩色图像进行去雾处理，将发雾区域的“雾”进行去除。
在本申请实施例中，去雾算法可以为暗通道先验算法，也可以为最大对比度方法，也可以为颜色衰减先验方法，还可以为基于神经网络学习的方法；对此，本申请实施例不作限制。
S702、基于所述彩色图像，对所述雾图进行细化处理，得到细化后的雾图；
在本申请实施例中，终端在得到彩色图像的雾图后，可以将彩色图像作为引导图，对雾图进行引导滤波，得到细化后的雾图。
可以理解的是，通过引导滤波操作细化雾图，可以提升去雾的处理效率，有助于预览图像的及时显示；同时，提高了去雾效果。
S703、根据所述彩色图像和所述细化后的雾图，对所述彩色图像进行去雾，得到去雾彩色图像；
在本申请实施例中，终端在得到细化后的雾图后，可以采用彩色图像减去细化后的雾图，从而得到去雾后的彩色图像，即去雾彩色图像。
S704、基于去雾彩色图像，得到优化图像。
在本申请实施例中，终端得到去雾彩色图像后，可以基于去雾彩色图像，得到优化图像。
在本申请的一些实施例中，终端对彩色图像进行的质量优化处理只包括去雾处理，则终端在得到去雾彩色图像后，可以直接将去雾彩色图像作为优化图像。
在本申请的一些实施例中，终端在得到去雾彩色图像后，还可以对去雾彩色图像进行去雾处理以外的其他质量优化处理，从而得到优化图像。
可以理解的是，终端可以计算彩色图像的雾图，基于雾图对彩色图像进行去雾处理，从而得到去雾彩色图像；基于去雾彩色图像得到预览图像，从而减轻预览图像的朦胧感，提升预览图像的预览效果。
在本申请的一些实施例中，至少一种优化处理包括光斑消除处理；S2021中对彩色图像进行降噪处理、去雾处理、光斑消除处理和人脸超分处理中的至少一种优化处理，得到优化图像的实现如图10所示，可以包括：S801-S802。
S801、在彩色图像中存在衍射光斑的情况下，通过图像增强算法去除彩色图像中的衍射光斑，得到光斑消除彩色图像；
在本申请实施例中，终端可以检测彩色图像中是否包括发光物体，从而确定当前彩色图像中是否存在衍射光斑；或者，终端还可以通过基于神经网络的光斑检测网络对彩色图像进行光斑检测；对于光斑检测的方式，本申请实施例不作限制。
在本申请实施例中，终端在确定彩色图像中存在衍射光斑的情况下，可以通过图像增强算法去除彩色图像中的衍射光斑，从而得到光斑消除彩色图像。
其中，图像增强算法可以为Retinex算法，也可以为人群密度估计算法(Single-Image Crowd Counting via Multi-Column Convolutional Neural Network，MCNN)等基于神经网络的算法；其中，Retinex算法可以为单尺度算法，也可以为多尺度算法；这里，对于图像增强算法，本申请实施例不作限制。
在本申请的一些实施例中，彩色图像为YUV图像，终端可以通过多尺度Retinex算法对炫光分量最少的通道进行计算，得到V通道的替换通道；通过V通道的替换通道替换原有V通道，消除了图像中的炫光，从而消除衍射光斑。
S802、基于光斑消除彩色图像，得到优化图像。
在本申请实施例中，终端得到光斑消除彩色图像后，可以基于光斑消除彩色图像，得到优化图像。
在本申请的一些实施例中，终端对彩色图像进行的质量优化处理只包括光斑消除处理，则终端在得到光斑消除彩色图像后，可以直接将光斑消除彩色图像作为优化图像。
在本申请的一些实施例中，终端在得到光斑消除彩色图像后，还可以对光斑消除彩色图像进行光斑消除处理以外的其他质量优化处理，从而得到优化图像。
可以理解的是，终端在检测到彩色图像中存在衍射光斑的情况下，可以通过图像增强算法消除彩色光斑，进而提升预览图像的质量。
S203、基于优化图像，进行美化渲染，得到预览图像。
在本申请实施例中，终端在得到优化图像后，可以结合摄像头的标定数据调整优化图像；其中，摄像头的标定数据包括镜头畸变系数，结合镜头畸变系数，终端可以纠正优化图像的边缘畸变；摄像头的标定数据还包括摄像头的深度信息，结合深度信息，终端可以对优化图像进行背景虚化等处理。
在本申请实施例中，终端还可以获取渲染数据，基于渲染数据对优化图像进行渲染，将渲染后的优化图像作为预览图像。
其中，渲染数据可以包括滤镜数据、虚拟动画数据、人脸妆容数据等；对此，本申请实施例不作限制。
可以理解的是，终端在确定了目标模式后，在目标模式下获取第二数字图像，并对第二数字图像进行预处理，得到预处理图像；再对预处理图像进行质量优化处理，得到优化图像，由此提升了预览图像的质量；之后，还可以对优化图像进行美化渲染，将美化渲染后的图像作为预览图像，提升了预览图像的预览效果。
在本申请实施例中，在得到预览图像后，终端可以基于拍摄指令，通过编码器对预览图像进行编码，得到编码数据，将编码数据存储在存储器中。
在本申请实施例中，通过对预览图像进行编码，可以将预览图像转换为可存储的格式，如bmp、jpg、tif等格式，对此，可以根据需要设置，本申请实施例不作限制。
本申请实施例提供了一种拍摄预览方法流程图，如图11所示，可以包括：
S01、获取当前场景的光照强度值和第一数字图像；
S02、判断当前场景的光照强度值和第一数字图像的像素值是否满足环境亮度条件；若是，则执行S03-S06；否则，执行S07-S10；
在本申请实施例中，环境亮度条件为光照强度值大于或者等于光照强度阈值，且第一数字图像的像素值的均值大于或者等于像素阈值。
在本申请实施例中，若当前场景的照度和第一数字图像的像素值满足环境亮度条件，表示当前场景的环境亮度正常，则终端可以将摄像头的工作模式确定为3-HDR模式；若当前场景的照度和第一数字图像的像素值不满足环境亮度条件，表示当前场景的环境亮度偏暗，则终端可以将摄像头的工作模式确定为4合1binning模式。
S03、获取当前场景的m组数字图像；其中，每组数字图像包括3张不同曝光值的数字图像；
S04、对每组数字图像中的3张不同曝光值的数字图像，进行高动态范围合成，得到m张预处理数字图像；
在本申请实施例中，终端确定目标工作模式为3-HDR工作模式，则需要获取m组数字图像，每组数字图像包括3张不同的曝光值的数字图像；对每组数字图像进行HDR合成，得到一张预处理数字图像，从而得到m张预处理数字图像。
S05、对m张预处理数字图像进行图像信号处理，得到m张彩色图像；
S06、对m张彩色图像进行YUV域多帧降噪，得到降噪彩色图像；
S07、获取当前场景的n张数字图像；
S08、对n张数字图像进行4合1像素合成，得到n张预处理数字图像；
S09、对n张预处理数字图像进行图像信号处理，得到n张彩色图像；
S10、对n张彩色图像进行YUV域多帧降噪，得到降噪彩色图像；
在本申请实施例中，m与n可以相同，也可以不同；对此，可以根据需要设置，本申请实施例不作限制。
S11、基于暗通道先验算法，计算降噪彩色图像的雾图；
S12、将降噪彩色图像作为引导图，对雾图进行引导滤波，得到细化雾图；
S13、利用降噪彩色图像减去细化雾图，得到去雾彩色图像；
S14、检测去雾彩色图像中是否存在衍射光斑；如果是，则执行S15；否则，执行S16；
S15、通过Retinex算法去除去雾彩色图像中的衍射光斑，得到光斑消除彩色图像；
S16、将去雾彩色图像作为光斑消除彩色图像；
S17、通过场景检测网络检测当前场景为暗光场景的暗光置信度，以及当前场景为逆光场景的逆光置信度；
在本申请实施例中，终端可以通过场景检测网络对当前场景进行检测，得到当前场景为暗光场景的置信度，即暗光置信度，以及当前场景为逆光场景的执行度，即逆光置信度。
S18、判断暗光置信度是否大于或者等于暗光置信度阈值；如果是，则执行S19；否则，执行S21；
S19、检测光斑消除彩色图像中是否存在人脸；如果是，则执行S20；否则执行S24；
S20、对光斑消除彩色图像进行人脸超分处理，得到优化图像；
S21、判断逆光置信度是否大于或者等于逆光置信度阈值；如果是，则执行S22、否则执行S24；
S22、统计光斑消除彩色图像中第一饱和像素的数量和第二饱和像素的数量的比值，作为饱和像素比；
S23、判断饱和像素比是否大于像素比阈值；如果是，则执行S19；否则，执行S24；
S24、将光斑消除彩色图像作为优化图像；
S25、基于优化图像，进行美化渲染，得到预览图像。
可以理解的是，终端可以根据光照强度值和第一数字图像的像素值，确定目标工作模式为3-HDR工作模式，还是4合1binning模式，从而选择合适的工作模式获取数字图像，并对数字图像进行预处理，得到预处理图像；之后，终端对预处理图像依次进行多帧降噪、去雾、去衍射光斑以及人脸超分处理，实现对预处理图像的质量优化，得到优化图像；最后，对优化图像进行美化渲染，将美化渲染后的图像作为预览图像，从而提高了预览图像的质量。
本申请实施例提供一种终端的硬件结构组成示意图，如图12所示，终端400包括：图像传感器4011、图像信号处理模块(Image Signal Processing，ISP)4012、图像质量优化模块4013、中央处理器(Central Processing Unit，CPU)4014、图形处理器(GraphicsProcessing Unit，GPU)4015、显示器4016、编码器4017和存储器4018。
在本申请实施例中，终端通过图像传感器4011获取数字图像和环境信息；图像传感器4011中还设置有工作模式处理模块，工作模式处理模块用于根据第一数字图像和环境信息确定目标模式；在目标模式下，终端通过图像传感器4011获取第二数字图像，并通过工作模式处理模块对第二数字图像进行预处理，得到预处理数字图像。
在本申请实施例中，图像信号处理模块4012用于将预处理数字图像转换为彩色图像；图像质量优化模块4013中存储有质量优化处理方法；质量优化处理方法包括以下至少之一：多帧降噪方法、去雾处理方法、衍射光斑消除处理方法和人脸超分处理方法；通过图像质量优化模块对彩色图像进行质量优化，得到优化图像。
在本申请实施例中，中央处理器4014用于结合标定数据对优化图像进行调整，得到调整后的优化图像，调整后的优化图像消除了优化图像的边缘畸变和/或进行了背景虚化处理；图形处理器4015用于对调整后的优化图像进行美化渲染，得到预览图像，将预览图像显示在显示器4016上；编码器4017用于在接收到拍摄指令后，对预览图像进行编码，得到编码数据，将编码数据保存在存储器4018中。
其中，存储器4018可以为存储器450，中央处理器4014可以为至少一个处理器410中的任意一个或多个。
下面继续说明本申请实施例提供的拍摄预览装置455的实施为软件模块的示例性结构，在一些实施例中，如图3所示，存储在存储器440的拍摄预览装置455中的软件模块可以包括：
获取模块4551，用于获取当前场景的环境信息和第一数字图像；
确定模块4552，用于根据所述环境信息和所述第一数字图像的像素值，确定目标工作模式；
预处理模块4553，用于根据所述目标工作模式，获取所述当前场景的第二数字图像，并对所述第二数字图像进行预处理，得到预处理数字图像；
预览模块4554，用于基于所述预处理数字图像，得到预览图像。
在一些实施例中，所述环境信息为光照强度值；所述确定模块4552，还用于在所述光照强度值和所述第一数字图像的像素值满足环境亮度条件的情况下，将第一模式确定为所述目标工作模式；在所述光照强度值和所述第一数字图像的像素值不满足环境亮度条件的情况下，将第二模式确定为所述目标工作模式。
在一些实施例中，所述环境亮度条件包括：所述光照强度值大于或者等于光照强度阈值，且所述第一数字图像的像素值的均值大于或者等于像素阈值。
在一些实施例中，所述第一模式为分级曝光动态范围合成模式；所述第二模式为像素合成模式；所述分级曝光动态合成模式，用于将三个不同曝光值的数字图像进行高动态范围合成，从而得到所述预处理数字图像；所述像素合成模式，用于将数字图像中的相邻像素进行像素合并，从而得到所述预处理数字图像。
在一些实施例中，所述预览模块4554，还用于对所述预处理数字图像进行图像信号处理，得到彩色图像；对所述彩色图像进行质量优化处理，得到优化图像；基于所述优化图像，进行美化渲染，得到所述预览图像。
在一些实施例中，所述预览模块4554，还用于对所述彩色图像进行降噪处理、去雾处理、光斑消除处理和人脸超分处理中的至少一种优化处理，得到所述优化图像；其中，人脸超分处理用于对所述彩色图像中的人脸区域进行亮度调整和清晰度调整。
在一些实施例中，所述至少一种优化处理包括人脸超分处理；所述预览模块4554，还用于在所述彩色图像中包括人脸的情况下，通过场景检测网络检测所述当前场景，得到所述当前场景的置信度；根据所述置信度，对所述彩色图像进行人脸超分处理，得到所述优化图像。
在一些实施例中，所述置信度包括暗光置信度；所述预览模块4554，还用于在所述暗光置信度大于或者等于暗光置信度阈值的情况下，对所述彩色图像进行人脸超分处理，得到所述优化图像。
在一些实施例中，所述置信度包括逆光置信度；所述预览模块4554，还用于在所述逆光置信度大于或者等于逆光置信度阈值的情况下，统计所述彩色图像中第一饱和像素的数量和第二饱和像素的数量的比值，作为饱和像素比；其中，所述第一饱和像素大于或者等于饱和像素阈值；所述第二饱和像素小于所述饱和像素阈值；在所述饱和像素比大于像素比阈值的情况下，对所述彩色图像进行人脸超分处理，得到所述优化图像。
在一些实施例中，所述预览模块4554，还用于在所述逆光置信度大于或者等于逆光置信度阈值的情况下，统计所述彩色图像中第一饱和像素的数量和第二饱和像素的数量的比值，作为饱和像素比之后，对所述逆光置信度和所述饱和像素比进行加权求和，得到加权和值；在所述加权和值大于或者等于加权阈值的情况下，对所述彩色图像进行人脸超分处理，得到所述优化图像。
在一些实施例中，所述彩色图像的数量为两张或两张以上；所述至少一种优化处理包括降噪处理；所述预览模块4554，还用于通过多帧降噪算法对至少两张彩色图像进行降噪合成，得到降噪彩色图像；基于所述降噪彩色图像，得到所述优化图像。
在一些实施例中，述至少一种优化处理包括去雾处理；所述预览模块4554，还用于计算所述彩色图像的雾图；所述雾图用于表征所述彩色图像的发雾区域；于所述彩色图像，对所述雾图进行细化处理，得到细化后的雾图；根据所述彩色图像和所述细化后的雾图，对所述彩色图像进行去雾，得到去雾彩色图像；基于所述去雾彩色图像，得到所述优化图像。
在一些实施例中，所述至少一种优化处理包括光斑消除处理；所述预览模块4554，还用于在所述彩色图像中存在衍射光斑的情况下，通过图像增强算法去除所述彩色图像中的所述衍射光斑，得到光斑消除彩色图像；基于所述光斑消除彩色图像，得到所述优化图像。
本申请实施例提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行本申请实施例上述的拍摄预览方法。
本申请实施例提供一种存储有可执行指令的计算机可读存储介质，其中存储有可执行指令，当可执行指令被处理器执行时，将引起处理器执行本申请实施例提供的方法，例如，如图3-10示出的方法。
在一些实施例中，计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器；也可以是包括上述存储器之一或任意组合的各种设备。
在一些实施例中，可执行指令可以采用程序、软件、软件模块、脚本或代码的形式，按任意形式的编程语言(包括编译或解释语言，或者声明性或过程性语言)来编写，并且其可按任意形式部署，包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例，可执行指令可以但不一定对应于文件系统中的文件，可以可被存储在保存其它程序或数据的文件的一部分，例如，存储在超文本标记语言(HTML，Hyper TextMarkup Language)文档中的一个或多个脚本中，存储在专用于所讨论的程序的单个文件中，或者，存储在多个协同文件(例如，存储一个或多个模块、子程序或代码部分的文件)中。
作为示例，可执行指令可被部署为在一个计算设备上执行，或者在位于一个地点的多个计算设备上执行，又或者，在分布在多个地点且通过通信网络互连的多个计算设备上执行。
综上所述，本申请实施例通过拍摄预览装置，能够根据环境信息和第一数字图像确定目标工作模式，在目标工作模式下，获取第二数字图像，对第二数字图像进行对应的预处理，得到预处理数字图像；基于预处理数字图像，得到预览图像；使终端在屏下摄像头进光量小的情况下，能够选择合适的工作模式对数字图像进行预处理，从而提高了预览图像的质量；进一步的，终端可以在在环境亮度偏暗的情况下通过4合1binnging模式提高预处理数字图像的亮度，从而提高预览图像的亮度；同时，在环境亮度正常的情况下采用3-HDR模式，提升图像细节，从而提高预览图像的质量，避免预览图像过曝；进一步的，终端可以综合考虑场景检测网络对当前场景的检测结果以及饱和像素比，来确定当前场景是否为逆光场景，在逆光场景下进行人脸超分处理，提高了人脸的清晰度和亮度，从而提高了预览图像的质量。以上所述，仅为本申请的实施例而已，并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等，均包含在本申请的保护范围之内。

Claims (11)

1.一种拍摄预览方法，其特征在于，包括：
获取当前场景的环境信息和第一数字图像；
根据所述环境信息、所述第一数字图像的像素值和环境亮度条件，确定目标工作模式；其中，所述环境信息为光照强度值；所述环境亮度条件包括：所述光照强度值大于或者等于光照强度阈值，且所述第一数字图像的像素值的均值大于或者等于像素阈值；
根据所述目标工作模式，获取所述当前场景的第二数字图像，并对所述第二数字图像进行预处理，得到预处理数字图像；
对所述预处理数字图像进行图像信号处理，得到彩色图像；
在所述彩色图像中包括人脸的情况下，通过场景检测网络检测所述当前场景，得到所述当前场景的置信度；所述置信度包括逆光置信度；
在所述逆光置信度大于或者等于逆光置信度阈值的情况下，统计所述彩色图像中第一饱和像素的数量和第二饱和像素的数量的比值，作为饱和像素比；其中，所述第一饱和像素大于或者等于饱和像素阈值；所述第二饱和像素小于所述饱和像素阈值；
对所述逆光置信度和所述饱和像素比进行加权求和，得到加权和值；
在所述加权和值大于加权阈值的情况下，对所述彩色图像进行人脸超分处理，得到优化图像；其中，所述人脸超分处理用于对所述彩色图像中的人脸区域进行亮度调整和清晰度调整；
基于所述优化图像，进行美化渲染，得到预览图像。
2.根据权利要求1所述的方法，其特征在于，所述根据所述环境信息、所述第一数字图像的像素值和环境亮度条件，确定目标工作模式，包括：
在所述光照强度值和所述第一数字图像的像素值满足所述环境亮度条件的情况下，将第一模式确定为所述目标工作模式；所述第一模式用于平衡所述第二数字图像的亮度；
在所述光照强度值和所述第一数字图像的像素值不满足所述环境亮度条件的情况下，将第二模式确定为所述目标工作模式；所述第二模式用于增强所述第二数字图像的亮度。
3.根据权利要求2所述的方法，其特征在于，所述第一模式为分级曝光动态范围合成模式；所述第二模式为像素合成模式；
所述分级曝光动态范围合成模式，用于将三个不同曝光值的数字图像进行高动态范围合成，从而得到所述预处理数字图像；
所述像素合成模式，用于将数字图像中的相邻像素进行像素合并，从而得到所述预处理数字图像。
4.根据权利要求1所述的方法，其特征在于，所述对所述彩色图像进行人脸超分处理，得到优化图像时，所述方法还包括：
对所述彩色图像进行人脸超分处理，并对所述彩色图像进行降噪处理、去雾处理、光斑消除处理中的至少一种优化处理，得到所述优化图像。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：所述置信度包括暗光置信度；在所述暗光置信度大于或者等于暗光置信度阈值的情况下，对所述彩色图像进行人脸超分处理，得到所述优化图像。
6.根据权利要求4所述的方法，其特征在于，所述彩色图像的数量为两张或两张以上；所述至少一种优化处理包括降噪处理；所述对所述彩色图像进行降噪处理、去雾处理、光斑消除处理中的至少一种优化处理，得到所述优化图像，包括：
通过多帧降噪算法对至少两张彩色图像进行降噪合成，得到降噪彩色图像；
基于所述降噪彩色图像，得到所述优化图像。
7.根据权利要求4所述的方法，其特征在于，所述至少一种优化处理包括去雾处理；所述对所述彩色图像进行降噪处理、去雾处理、光斑消除处理中的至少一种优化处理，得到所述优化图像，包括：
计算所述彩色图像的雾图；所述雾图用于表征所述彩色图像的发雾区域；
基于所述彩色图像，对所述雾图进行细化处理，得到细化后的雾图；
根据所述彩色图像和所述细化后的雾图，对所述彩色图像进行去雾，得到去雾彩色图像；
基于所述去雾彩色图像，得到所述优化图像。
8.根据权利要求4所述的方法，其特征在于，所述至少一种优化处理包括光斑消除处理；所述对所述彩色图像进行降噪处理、去雾处理、光斑消除处理中的至少一种优化处理，得到所述优化图像，包括：
在所述彩色图像中存在衍射光斑的情况下，通过图像增强算法去除所述彩色图像中的所述衍射光斑，得到光斑消除彩色图像；
基于所述光斑消除彩色图像，得到所述优化图像。
9.一种拍摄预览装置，其特征在于，包括：
获取模块，用于获取当前场景的环境信息和第一数字图像；
确定模块，用于根据所述环境信息、所述第一数字图像的像素值和环境亮度条件，确定目标工作模式；其中，所述环境信息为光照强度值；所述环境亮度条件包括：所述光照强度值大于或者等于光照强度阈值，且所述第一数字图像的像素值的均值大于或者等于像素阈值；
预处理模块，用于根据所述目标工作模式，获取所述当前场景的第二数字图像，并对所述第二数字图像进行预处理，得到预处理数字图像；
预览模块，用于对所述预处理数字图像进行图像信号处理，得到彩色图像；在所述彩色图像中包括人脸的情况下，通过场景检测网络检测所述当前场景，得到所述当前场景的置信度；所述置信度包括逆光置信度；在所述逆光置信度大于或者等于逆光置信度阈值的情况下，统计所述彩色图像中第一饱和像素的数量和第二饱和像素的数量的比值，作为饱和像素比；其中，所述第一饱和像素大于或者等于饱和像素阈值；所述第二饱和像素小于所述饱和像素阈值；对所述逆光置信度和所述饱和像素比进行加权求和，得到加权和值；在所述加权和值大于加权阈值的情况下，对所述彩色图像进行人脸超分处理，得到优化图像；其中，所述人脸超分处理用于对所述彩色图像中的人脸区域进行亮度调整和清晰度调整；基于所述优化图像，进行美化渲染，得到预览图像。
10.一种终端，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述存储器中存储的计算机程序时，实现权利要求1至8任一项所述的方法。
11.一种计算机可读存储介质，其特征在于，存储有计算机程序，用于被处理器执行时，实现权利要求1至8任一项所述的方法。
CN202011612501.7A 2020-12-30 2020-12-30 拍摄预览方法、装置、终端和计算机可读存储介质 Active CN112822413B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011612501.7A CN112822413B (zh) 2020-12-30 2020-12-30 拍摄预览方法、装置、终端和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011612501.7A CN112822413B (zh) 2020-12-30 2020-12-30 拍摄预览方法、装置、终端和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112822413A CN112822413A (zh) 2021-05-18
CN112822413B true CN112822413B (zh) 2024-01-26

Family

ID=75855445

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011612501.7A Active CN112822413B (zh) 2020-12-30 2020-12-30 拍摄预览方法、装置、终端和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN112822413B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113556519A (zh) * 2021-07-01 2021-10-26 Oppo广东移动通信有限公司 图像处理方法、电子设备和非易失性计算机可读存储介质
WO2023245391A1 (zh) * 2022-06-20 2023-12-28 北京小米移动软件有限公司 一种相机预览的方法及其装置

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101008762A (zh) * 2007-01-30 2007-08-01 北京中星微电子有限公司 一种逆光检测方法、逆光补偿终止检测方法及相应装置
CN105049743A (zh) * 2015-08-21 2015-11-11 宇龙计算机通信科技(深圳)有限公司 逆光检测方法、逆光检测系统、拍照设备和终端
CN105611140A (zh) * 2015-07-31 2016-05-25 宇龙计算机通信科技(深圳)有限公司 拍照控制方法、拍照控制装置及终端
CN105791709A (zh) * 2015-12-29 2016-07-20 福建星网锐捷通讯股份有限公司 带有逆光补偿的自动曝光处理方法及装置
CN105872399A (zh) * 2016-04-19 2016-08-17 奇酷互联网络科技（深圳）有限公司 逆光检测方法和逆光检测系统
CN105872351A (zh) * 2015-12-08 2016-08-17 乐视移动智能信息技术（北京）有限公司 逆光场景的照片拍摄方法和装置
CN106161967A (zh) * 2016-09-13 2016-11-23 维沃移动通信有限公司 一种逆光场景全景拍摄方法及移动终端
CN106412214A (zh) * 2015-07-28 2017-02-15 中兴通讯股份有限公司 一种终端及终端拍摄的方法
US10009551B1 (en) * 2017-03-29 2018-06-26 Amazon Technologies, Inc. Image processing for merging images of a scene captured with differing camera parameters
CN108307109A (zh) * 2018-01-16 2018-07-20 维沃移动通信有限公司 一种高动态范围图像预览方法及终端设备
CN108322669A (zh) * 2018-03-06 2018-07-24 广东欧珀移动通信有限公司 图像的获取方法及装置、成像装置、计算机可读存储介质和计算机设备
CN108419022A (zh) * 2018-03-06 2018-08-17 广东欧珀移动通信有限公司 控制方法、控制装置、计算机可读存储介质和计算机设备
CN108805103A (zh) * 2018-06-29 2018-11-13 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN110198417A (zh) * 2019-06-28 2019-09-03 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110248098A (zh) * 2019-06-28 2019-09-17 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110445988A (zh) * 2019-08-05 2019-11-12 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110933302A (zh) * 2019-11-27 2020-03-27 维沃移动通信有限公司 一种拍摄方法及电子设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7756330B2 (en) * 2006-07-27 2010-07-13 Eastman Kodak Company Producing an extended dynamic range digital image

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101008762A (zh) * 2007-01-30 2007-08-01 北京中星微电子有限公司 一种逆光检测方法、逆光补偿终止检测方法及相应装置
CN106412214A (zh) * 2015-07-28 2017-02-15 中兴通讯股份有限公司 一种终端及终端拍摄的方法
CN105611140A (zh) * 2015-07-31 2016-05-25 宇龙计算机通信科技(深圳)有限公司 拍照控制方法、拍照控制装置及终端
CN105049743A (zh) * 2015-08-21 2015-11-11 宇龙计算机通信科技(深圳)有限公司 逆光检测方法、逆光检测系统、拍照设备和终端
CN105872351A (zh) * 2015-12-08 2016-08-17 乐视移动智能信息技术（北京）有限公司 逆光场景的照片拍摄方法和装置
CN105791709A (zh) * 2015-12-29 2016-07-20 福建星网锐捷通讯股份有限公司 带有逆光补偿的自动曝光处理方法及装置
CN105872399A (zh) * 2016-04-19 2016-08-17 奇酷互联网络科技（深圳）有限公司 逆光检测方法和逆光检测系统
CN106161967A (zh) * 2016-09-13 2016-11-23 维沃移动通信有限公司 一种逆光场景全景拍摄方法及移动终端
US10009551B1 (en) * 2017-03-29 2018-06-26 Amazon Technologies, Inc. Image processing for merging images of a scene captured with differing camera parameters
CN108307109A (zh) * 2018-01-16 2018-07-20 维沃移动通信有限公司 一种高动态范围图像预览方法及终端设备
CN108322669A (zh) * 2018-03-06 2018-07-24 广东欧珀移动通信有限公司 图像的获取方法及装置、成像装置、计算机可读存储介质和计算机设备
CN108419022A (zh) * 2018-03-06 2018-08-17 广东欧珀移动通信有限公司 控制方法、控制装置、计算机可读存储介质和计算机设备
CN108805103A (zh) * 2018-06-29 2018-11-13 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN110198417A (zh) * 2019-06-28 2019-09-03 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110248098A (zh) * 2019-06-28 2019-09-17 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110445988A (zh) * 2019-08-05 2019-11-12 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110933302A (zh) * 2019-11-27 2020-03-27 维沃移动通信有限公司 一种拍摄方法及电子设备

Also Published As

Publication number Publication date
CN112822413A (zh) 2021-05-18

Similar Documents

Publication Publication Date Title
US11228720B2 (en) Method for imaging controlling, electronic device, and non-transitory computer-readable storage medium
EP3609177B1 (en) Control method, control apparatus, imaging device, and electronic device
US9826149B2 (en) Machine learning of real-time image capture parameters
CN108335279B (zh) 图像融合和hdr成像
CN110766621B (zh) 图像处理方法、装置、存储介质及电子设备
CN110033418B (zh) 图像处理方法、装置、存储介质及电子设备
US20180109711A1 (en) Method and device for overexposed photography
CN107690804B (zh) 一种图像处理方法及用户终端
CN105323497A (zh) 恒定包围的高动态范围（cHDR）操作
CN108510557B (zh) 图像色调映射方法及装置
EP3820141A1 (en) Imaging control method and apparatus, electronic device, and readable storage medium
AU2016358299A1 (en) Method for generating high-dynamic range image, camera device, terminal and imaging method
KR20170017911A (ko) 디지털 이미지들의 컬러 프로세싱을 위한 방법들 및 시스템들
CN112822413B (zh) 拍摄预览方法、装置、终端和计算机可读存储介质
US20170154437A1 (en) Image processing apparatus for performing smoothing on human face area
EP3839878A1 (en) Image denoising method and apparatus, and device and storage medium
CN110213462B (zh) 图像处理方法、装置、电子设备、图像处理电路及存储介质
CN113962859A (zh) 一种全景图生成方法、装置、设备及介质
CN114257750A (zh) 向后兼容的高动态范围（hdr）图像
CN116055895B (zh) 图像处理方法及其装置、芯片系统和存储介质
WO2015189369A1 (en) Methods and systems for color processing of digital images
US11729513B2 (en) Electronic device and HDR image generation method therefor
CN111970451B (zh) 图像处理方法、图像处理装置及终端设备
CN113256785B (zh) 图像处理方法、装置、设备及介质
US20230156349A1 (en) Method for generating image and electronic device therefor

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant