WO2019105304A1 - 图像白平衡处理方法、计算机可读存储介质和电子设备 - Google Patents

图像白平衡处理方法、计算机可读存储介质和电子设备 Download PDF

Info

Publication number
WO2019105304A1
WO2019105304A1 PCT/CN2018/117292 CN2018117292W WO2019105304A1 WO 2019105304 A1 WO2019105304 A1 WO 2019105304A1 CN 2018117292 W CN2018117292 W CN 2018117292W WO 2019105304 A1 WO2019105304 A1 WO 2019105304A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
white balance
processed
white
gain
Prior art date
Application number
PCT/CN2018/117292
Other languages
English (en)
French (fr)
Inventor
孙剑波
Original Assignee
Oppo广东移动通信有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oppo广东移动通信有限公司 filed Critical Oppo广东移动通信有限公司
Publication of WO2019105304A1 publication Critical patent/WO2019105304A1/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control

Definitions

  • the present application relates to the field of image white balance processing technologies, and in particular, to an image white balance processing method, a nonvolatile computer readable storage medium, and an electronic device.
  • An image white balance processing method, a nonvolatile computer readable storage medium, and an electronic device are provided in accordance with various embodiments of the present application.
  • An image white balance processing method includes:
  • One or more non-transitory computer readable storage media containing computer executable instructions that, when executed by one or more processors, cause the processor to:
  • An electronic device comprising a memory and a processor, the memory storing computer readable instructions, wherein when executed by the processor, the processor causes the processor to:
  • FIG. 2 is a schematic diagram showing the internal structure of an electronic device in an embodiment.
  • 4A is a schematic diagram of an image to be processed in one embodiment.
  • FIG. 6 is a flow chart of an image white balance processing method in another embodiment.
  • Fig. 7 is a block diagram showing the structure of an image white balance processing apparatus in an embodiment.
  • Figure 8 is a schematic illustration of a capture circuit in one embodiment.
  • FIG. 1 is an application environment diagram of an image white balance processing method in an embodiment.
  • the electronic device 110 can call the camera on the camera to perform shooting, such as real-time scanning of the object 120 in the environment to obtain a frame image, and generate a captured image according to the frame image.
  • the camera may be a dual camera, including a main camera and a sub camera, and the image is generated according to the main camera and the sub camera.
  • the electronic device may use the frame image or the generated image as an image to be processed, and acquire environment information of the image to be processed obtained by moving the camera in advance; calculate white balance data according to the environment information; and perform the image to be processed according to the white balance data White balance processing.
  • the electronic device includes a processor, a memory, a display, and a camera connected by a system bus.
  • the processor is used to provide computing and control capabilities to support the operation of the entire electronic device.
  • the memory is used to store data, programs, etc., and at least one computer program is stored on the memory, and the computer program can be executed by the processor to implement an image white balance processing method suitable for an electronic device provided in the embodiments of the present application.
  • the memory may include a non-volatile storage medium such as a magnetic disk, an optical disk, a read-only memory (ROM), or a random storage memory (Random-Access-Memory, RAM).
  • the memory includes a non-volatile storage medium and an internal memory.
  • Non-volatile storage media stores operating systems, databases, and computer programs.
  • the database stores data related to an image white balance processing method provided by the following embodiments, such as data that can be processed, environment information, and the like.
  • the computer program can be executed by a processor for implementing an image white balance processing method provided by the following various embodiments.
  • the internal memory provides a cached operating environment for operating systems and computer programs in non-volatile storage media.
  • the display screen can be a touch screen, such as a capacitive screen or an electronic screen, for displaying visual information such as an image to be processed, and can also be used to detect a touch operation acting on the display screen to generate a corresponding instruction.
  • FIG. 2 is only a block diagram of a part of the structure related to the solution of the present application, and does not constitute a limitation on the electronic device to which the solution of the present application is applied.
  • the specific electronic device may be It includes more or fewer components than those shown in the figures, or some components are combined, or have different component arrangements.
  • the electronic device may further include a network interface connected through a system bus, and communicate with other devices through the network interface, for example, data such as an image or a white balance algorithm on other devices may be acquired through the network interface.
  • an image white balance processing method is provided.
  • the method is mainly applied to the electronic device shown in FIG. 1 , and the method includes:
  • Operation 302 obtaining an image to be processed.
  • the image to be processed refers to an image that needs to be white balanced, and may be an image that has been captured, or may be a frame image obtained by real-time scanning by a camera in a shooting mode.
  • the electronic device When the image to be processed is a frame image, when the electronic device receives an instruction to turn on the camera, the electronic camera may be called to enter a shooting state.
  • the camera may further include a main camera and a sub camera. The electronic device can scan an object in the shooting environment through the main camera and/or the sub camera to form the frame image.
  • the electronic device may receive a shooting instruction, and generate a captured image according to the real-time frame image obtained by scanning, and the generated image is the image to be processed.
  • the shooting instruction may be a shooting instruction triggered by the detected related touch operation, the pressing operation of the physical button, or the voice control operation.
  • the touch operation can be a touch click operation, a touch long press operation, a touch slide operation, a multi-touch operation, and the like.
  • the electronic device can provide a shooting button for triggering shooting, and when a click operation on the button is detected, a shooting instruction is triggered.
  • the electronic device may also preset shooting voice information for triggering the shooting instruction. By calling the voice receiving device, the corresponding voice information is received, and by analyzing the voice information, when the voice information is detected to match the captured voice information, the shooting instruction can be triggered.
  • Operation 304 Acquire environment information of a to-be-processed image obtained by moving the camera in advance.
  • the electronic device may acquire environmental information related to the image to be processed before generating the image to be processed or in the process of generating the image to be processed, that is, by moving the camera.
  • the environment information is information about an environment in which the image to be processed is located, and includes information about a scene in the image to be processed and a periphery of the scene.
  • the environment information may be embodied in the form of an image or a frame image. Each pixel on the environment information corresponds to a location within the environment, and the color represented by the pixel is displayed by the camera scanning the corresponding position in the environment. s color.
  • the environmental information is presented in the form of an image or a frame image
  • the environment information presents an environment in which the image to be processed is located.
  • FIG. 4A is a schematic diagram of an image to be processed
  • FIG. 4B is a schematic diagram of environmental information of the image to be processed.
  • the image to be processed is mainly a cartoon portrait
  • the environmental information includes the cartoon portrait, and also includes information on the plants on both sides of the portrait body and the white background on both sides of the cartoon portrait head. It can be understood that the user can move the camera in the shooting state before taking the image to be processed.
  • the electronic device can record and organize the environmental information of the image to be processed by the movement of the camera.
  • Operation 306 calculating white balance data based on the environmental information.
  • the electronic device may be pre-configured with a white balance algorithm, which may include one or more of a gray world algorithm, a perfect reflection algorithm, a global white balance algorithm, and a local white balance method.
  • the electronic device may select one of the algorithms, use the environment information (and the image to be processed) as an input of the white balance algorithm, and run the white balance algorithm to obtain corresponding white balance data.
  • Operation 308 performing white balance processing on the image to be processed according to the white balance data.
  • the image to be processed is composed of a plurality of pixels, each of which may be composed of a plurality of color channels, each of which represents a color component.
  • an image can be composed of three channels of RGB (red, green, and blue), or it can be composed of three channels of HSV (hue, saturation, and lightness), or it can be composed of CMY (cyan, magenta, or magenta and Yellow three colors) three channels.
  • the electronic device can correct the color value of the corresponding color channel according to the corresponding white balance data. Thereby, the white balance processing of the image to be processed is realized, so that the corrected color value can more reflect the true color of the corresponding photographed object.
  • Operation 502 generating a panoramic image according to the environmental information.
  • Operation 604 acquiring a real-time frame image obtained by moving the camera in advance.
  • the camera can be moved to any position, such as left and right, up and down, front and back, for example, the camera can be rotated left and right at a certain fixed position.
  • the larger the range of camera movement the more environmental information that can be collected, making the subsequent white balance processing more accurate.
  • the user can hold the electronic device and perform an environment scan on the scene to be photographed before the image is to be processed.
  • the electronic device can be hand-held for 360° rotation to obtain environmental information of the entire space.
  • the frame image can be generated in real time according to a preset frame rate.
  • Operation 606 comparing frame images generated at different times to obtain environment information of the image to be processed.
  • the frame image that participates in extracting the environment information may be a frame image acquired within a preset duration before the generation time of the image to be processed, or in the process of capturing the image to be processed, in the no-stop shooting mode. And the resulting frame image.
  • the electronic device can compare the image frames of each adjacent two frames of images to identify a non-overlapping region of the current frame relative to a preset number of frame image frames preceding the current frame.
  • the positional relationship of each non-repetitive area in the entire space is analyzed, and the environmental information of the image to be processed is formed according to the non-repetitive area and the positional relationship.
  • Operation 608 generating a panoramic image according to the environmental information, and identifying white pixel points in the panoramic image.
  • the non-overlapping region is also composed of corresponding pixel points, and the positional relationship between the non-repetitive regions also determines the positional relationship between each pixel point, and the panoramic image can be synthesized according to the pixel point and the positional relationship. It can be understood that since the manner of moving the camera is not necessarily regular, the synthesized panoramic image is not necessarily a complete rectangle, and there may be a lack of pixel points on a certain area.
  • the electronic device can calculate the first gain and the second gain at each pixel, such as calculating R/G and B/G, when the R/G and B/G When they are all within the preset numerical range, it is determined that the corresponding pixel is a white pixel.
  • the range of values may be any suitable range set, such as 0.8 to 1.2. When 0.8 ⁇ R / G ⁇ 1.2 and 0.8 ⁇ B / G ⁇ 1.2, the pixel is determined to be a white pixel.
  • Operation 610 calculating a first gain of the first color channel and a second gain of the second color channel according to the pixel mean according to the pixel mean of the pixels on the white pixel.
  • the image white balance processing method described above when acquiring an image, acquiring environmental information of a to-be-processed image obtained by moving the camera in advance; and calculating white balance data according to the environmental information; since the captured image to be processed is introduced
  • the environmental information provides more reference information for calculating the white balance data, improves the accuracy of the calculated white balance data, and then performs white balance processing on the image to be processed according to the white balance data, and correspondingly improves the image white Balance the accuracy of processing.
  • the environment information generating module 704 is further configured to invoke a motion detecting component to detect motion data of the camera when each frame image is generated, and to obtain environment information of the image to be processed from the frame image according to the motion data.
  • the white balance processing module 706 is further configured to generate a panoramic image according to the environmental information; identify white pixel points in the panoramic image; and calculate white balance data according to the white pixel points.
  • the white balance processing module 706 is further configured to detect a ratio of all the white pixel points occupying in the panoramic image; and calculate white balance data according to the white balance calculation model corresponding to the scale.
  • the white balance data includes a first gain and a second gain; the white balance processing module 706 is further configured to calculate a first gain of the first color channel according to the pixel mean according to a pixel mean of pixels on the white pixel point; And a second gain of the second color channel; performing white balance correction on the first color channel of each pixel in the image to be processed according to the first gain; performing white balance on the second color channel of each pixel in the image to be processed according to the second gain Correction.
  • Each of the above-described image white balance processing devices may be implemented in whole or in part by software, hardware, and combinations thereof.
  • the above modules may be embedded in the hardware in the processor or in the memory in the server, or may be stored in the memory in the server, so that the processor calls the corresponding operations of the above modules.
  • the terms "component”, “module” and “system” and the like are intended to mean a computer-related entity, which may be hardware, a combination of hardware and software, software, or software in execution.
  • a component can be, but is not limited to being, a process running on a processor, a processor, an object, an executable, a thread of execution, a program, and/or a computer.
  • an application running on a server and a server can be a component.
  • One or more components can reside within a process and/or executed thread, and the components can be located within one computer and/or distributed between two or more computers.
  • an electronic device including a memory, a processor, and a computer program stored on the memory and operable on the processor, and the image provided by the above embodiments is implemented when the processor executes the computer program Balance the operation of the processing method.
  • An embodiment of the present application further provides an electronic device.
  • the above electronic device includes a photographing circuit, and the photographing circuit can be implemented by using hardware and/or software components, and can include various processing units defining an ISP (Image Signal Processing) pipeline.
  • Figure 8 is a schematic illustration of a capture circuit in one embodiment. As shown in FIG. 8, for convenience of explanation, only various aspects of the photographing technique related to the embodiment of the present application are shown.
  • the photographing circuit includes an ISP processor 840 and a control logic 850.
  • the image data captured by imaging device 810 is first processed by ISP processor 840, which analyzes the image data to capture image statistics that can be used to determine and/or control one or more control parameters of imaging device 810.
  • Imaging device 810 can include a camera having one or more lenses 812 and image sensors 814.
  • Image sensor 814 can include a color filter array (such as a Bayer filter) that can capture light intensity and wavelength information captured with each imaging pixel of image sensor 814 and provide a set of primitives that can be processed by ISP processor 840 Image data.
  • a sensor 820 such as a gyroscope, can provide the acquired captured parameters (such as anti-shake parameters) to the ISP processor 840 based on the sensor 820 interface type.
  • the sensor 820 interface may utilize a SMIA (Standard Mobile Imaging Architecture) interface, other serial or parallel camera interfaces, or a combination of the above.
  • SMIA Standard Mobile Imaging Architecture
  • image sensor 814 can also transmit raw image data to sensor 820, which can provide raw image data to ISP processor 840 based on sensor 820 interface type, or sensor 820 can store raw image data into image memory 830.
  • the ISP processor 840 processes the raw image data pixel by pixel in a variety of formats.
  • each image pixel may have a bit depth of 8, 10, 12, or 14 bits, and the ISP processor 840 may perform one or more shooting operations on the raw image data, collecting statistical information about the image data. Among them, the shooting operation can be performed with the same or different bit depth precision.
  • ISP processor 840 can also receive image data from image memory 830.
  • sensor 820 interface sends raw image data to image memory 830, which is then provided to ISP processor 840 for processing.
  • Image memory 830 can be part of a memory device, a storage device, or a separate dedicated memory within an electronic device, and can include DMA (Direct Memory Access) features.
  • DMA Direct Memory Access
  • the ISP processor 840 can perform one or more capture operations, such as time domain filtering.
  • the processed image data can be sent to image memory 830 for additional processing prior to being displayed.
  • the ISP processor 840 can also receive processing data from the image memory 830, processing the processed data in image data in the original domain and in the RGB and YCbCr color spaces.
  • the processed image data can be output to display 880 for viewing by a user and/or further processed by a graphics engine or a GPU (Graphics Processing Unit). Additionally, the output of ISP processor 840 can also be sent to image memory 830, and display 880 can read image data from image memory 830.
  • image memory 830 can be configured to implement one or more frame buffers. Additionally, the output of ISP processor 840 can be sent to encoder/decoder 870 for encoding/decoding image data. The encoded image data can be saved and decompressed before being displayed on the display 880 device.
  • the ISP processor 840 processes the image data by performing VFE (Video Front End) processing and CPP (Camera Post Processing) processing on the image data.
  • VFE processing of the image data may include correcting the contrast or brightness of the image data, modifying the digitally recorded illumination state data, performing compensation processing on the image data (such as white balance, automatic gain control, gamma correction, etc.), and performing image data. Filter processing, etc.
  • CPP processing of image data may include scaling the image, providing a preview frame and a recording frame to each path. Among them, CPP can use different codecs to process preview frames and record frames.
  • the image data processed by the ISP processor 840 can be sent to the beauty module 860 to perform a cosmetic process on the image before being displayed.
  • the beauty treatment of the image data by the beauty module 860 may include: whitening, freckle, dermabrasion, face-lifting, acne, eye enlargement, and the like.
  • the beauty module 860 can be a CPU (Central Processing Unit), a GPU, or a coprocessor in an electronic device.
  • the processed data of the beauty module 860 can be sent to the encoder/decoder 870 to encode/decode the image data.
  • the encoded image data can be saved and decompressed before being displayed on the display 880 device.
  • the beauty module 860 can also be located between the encoder/decoder 870 and the display 880, that is, the beauty module performs cosmetic processing on the imaged image.
  • the encoder/decoder 870 described above may be a CPU, a GPU, a coprocessor, or the like in an electronic device.
  • the image white balance processing method as described above can be realized by the photographing technique in FIG.
  • Non-volatile memory can include read only memory (ROM), programmable ROM (PROM), electrically programmable ROM (EPROM), electrically erasable programmable ROM (EEPROM), or flash memory.
  • Volatile memory can include random access memory (RAM), which acts as an external cache.
  • RAM is available in a variety of forms, such as static RAM (SRAM), dynamic RAM (DRAM), synchronous DRAM (SDRAM), dual data rate SDRAM (DDR SDRAM), enhanced SDRAM (ESDRAM), synchronization.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

一种图像白平衡处理方法，包括：获取待处理图像；获取预先通过移动摄像头而得到的所述待处理图像的环境信息；根据所述环境信息计算出白平衡数据；根据所述白平衡数据对所述待处理图像进行白平衡处理。

Description

图像白平衡处理方法、计算机可读存储介质和电子设备
相关申请的交叉引用
本申请要求于2017年11月28日提交中国专利局、申请号为2017112134636、发明名称为“图像白平衡处理方法、装置、存储介质和电子设备”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。
技术领域
本申请涉及图像白平衡处理技术领域，特别是涉及一种图像白平衡处理方法、非易失性计算机可读存储介质和电子设备。
背景技术
拍照设备在拍摄同一色彩的对象时，在不同光照环境下，拍摄呈现出该对象的颜色不同。因此，需要对拍摄的图像进行自动白平衡(Auto White Balance，AWB)处理，以解决拍摄对象色彩失真的问题。白平衡是描述显示器中红、绿、蓝三基色混合生成后白色精确度的一项指标。
传统的图像白平衡处理方法，都是基于拍摄生成的图像中已有的环境信息，采用预设的白平衡算法，对该图像进行自动白平衡处理，从而生成白平衡处理后的图像。然而从该拍摄的图像中能得到的环境信息有限，因此传统的方法对拍摄对象的色彩还原不够准确。
发明内容
根据本申请的各种实施例提供一种图像白平衡处理方法、非易失性计算机可读存储介质和电子设备。
一种图像白平衡处理方法，包括：
获取待处理图像；
获取预先通过移动摄像头而得到的所述待处理图像的环境信息；
根据所述环境信息计算出白平衡数据；及
根据所述白平衡数据对所述待处理图像进行白平衡处理。
一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行以下操作：
获取待处理图像；
获取预先通过移动摄像头而得到的所述待处理图像的环境信息；
根据所述环境信息计算出白平衡数据；及
根据所述白平衡数据对所述待处理图像进行白平衡处理。
一种电子设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行以下操作：
获取待处理图像；
获取预先通过移动摄像头而得到的所述待处理图像的环境信息；
根据所述环境信息计算出白平衡数据；及
根据所述白平衡数据对所述待处理图像进行白平衡处理。
本申请实施例通过进行拍摄图像时，获取预先通过移动摄像头而得到的待处理图像的环境信息；并根据环境信息计算出白平衡数据；由于引入了所拍摄的待处理图像的环境信息，从而为计算白平衡数据提供了更多的参考信息，提高了计算出的白平衡数据的准确性，进而再根据白平衡数据对待处理图像进行白平衡处理，也相应提高了对图像白平衡处理的准确性。
本申请的一个或多个实施例的细节在下面的附图和描述中提出。本申请的其它特征、目的和优点将从说明书、附图以及权利要求书变得明显。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为一个实施例中图像白平衡处理方法的应用环境图。
图2为一个实施例中电子设备的内部结构示意图。
图3为一个实施例中图像白平衡处理方法的流程图。
图4A为一个实施例中待处理图像的示意图。
图4B为一个实施例中待处理图像的环境信息的示意图。
图5为一个实施例中根据白平衡数据对待处理图像进行白平衡处理。
图6为另一个实施例中图像白平衡处理方法的流程图。
图7为一个实施例中图像白平衡处理装置的结构框图。
图8为一个实施例中拍摄电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
可以理解，本申请实施例所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一增益称为第二增益，且类似地，可将第二增益称为第一增益。第一增益和第二增益两者都是增益，但其不是同一增益。
图1为一个实施例中图像白平衡处理方法的应用环境图。参考如图1所示，电子设备110可调用其上的摄像头进行拍摄，如对环境中的物体120进行实时扫描得到帧图像，根据该帧图像生成拍摄的图像。可选地，该摄像头可为双摄像头，包含主摄像头和副摄像头，根据该主摄像头和副摄像头共同实现拍摄，生成图像。电子设备可以将该帧图像或者生成的图像，作为待处理图像，并获取预先通过移动摄像头而得到的待处理图像的环境信息；根据环境信息计算出白平衡数据；根据白平衡数据对待处理图像进行白平衡处理。
图2为一个实施例中电子设备的内部结构示意图。如图2所示，该电子设备包括通过系统总线连接的处理器、存储器、显示屏和摄像头。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器用于存储数据、程序等，存储器上存储至少一个计算机程序，该计算机程序可被处理器执行，以实现本申请实施例中提供的适用于电子设备的图像白平衡处理方法。存储器可包括磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等非易失性存储介质，或随机存储记忆体(Random-Access-Memory，RAM)等。例如，在一个实施例中，存储器包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统、数据库和计算机程序。数据库中存储有用于实现以下各个实施例所提供的一种图像白平衡处理方法相关的数据，比如可存储有待处理图像、环境信息等数据。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像白平衡处理方法。内存储器为非易失性存储介质中的操作系统和计算机程序提供高速缓存的运行环境。显示屏可以是触摸屏，比如为电容屏或电子屏，用于显示待处理图像等可视信息，还可以被用于检测作用于该显示屏的触摸操作，生成相应的指令。
本领域技术人员可以理解，图2中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的电子设备的限定，具体的电子设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。比如该电子设备还可包括通过系统总线连接的网络接口，并通过该网络接口与其它设备进行通信，比如可通过该网络接口与获取其它设备上的图像或白平衡算法等数据。
在一个实施例中，如图3所示，提供了一种图像白平衡处理方法，本实施例主要以该方法应用于如图1所示的电子设备中进行说明，该方法包括：
操作302，获取待处理图像。
待处理图像是指需要进行白平衡处理的图像，可以是已经拍摄生成的图像，还可以是在拍摄模式下，通过摄像头实时扫描得到帧图像。
当待处理图像为帧图像时，电子设备接收到开启摄像头的指令时，可调用摄像头进入拍摄状态。可选地，摄像头还可包括主摄像头和副摄像头。电子设备可通过该主摄像头和/或副摄像头对拍摄环境中的物体进行扫描，形成该帧图像。
当待处理图像为已经拍摄生成的图像，电子设备可接收拍摄指令，根据扫描得到实时的帧图像生成拍摄的图像，该生成的图像即为该待处理图像。其中，拍摄指令可以是通过侦测到的相关触控操作、物理按键的按压操作或语音控制操作等触发的拍摄指令。触控操作可为触摸点击操作、触摸长按操作、触摸滑动操作、多点触控操作等操作。电子设备可提供用于触发进行拍摄的拍摄按钮，当侦测到对该按钮的点击操作时，触发拍摄指令。电子设备还可预设用于触发该拍摄指令的拍摄语音信息。通过调用语音接收装置，接收对应的语音信息，通过解析该语音信息，当检测到该语音信息与该拍摄语音信息匹配时，可触发该拍摄指令。
操作304，获取预先通过移动摄像头而得到的待处理图像的环境信息。
电子设备可在生成待处理图像之前或在生成待处理图像的过程中，即通过移动摄像头而获取与待处理图像相关的环境信息。其中，该环境信息为待处理图像所处环境的信息，包含待处理图像中的场景和该场景的周边的信息。该环境信息可以以图像或帧图像的数据形式体现，环境信息上的每个像素点对应所处环境内的位置，该像素点呈现的颜色即为该环境中的对应位置通过摄像头扫描而呈现出的颜色。当将环境信息以图像或帧图像的形式呈现时，该环境信息所呈现出的即为待处理图像所处环境。
如图4A和图4B所示，其中，图4A为待处理图像的示意图，图4B即为该待处理图像的环境信息的示意图。其中，待处理图像中呈现的主要是一个卡通人像，而该环境信息中包含了该卡通人像之外，还包含人像身体两侧的植物以及卡通人像头部两侧的白色背景等信息。可以理解地，用户可在拍摄该待处理图像之前，可移动处于拍摄状态的摄像头。电子设备可通过该摄像头的移动，而记录并整理出待处理图像的环境信息。
操作306，根据环境信息计算出白平衡数据。
白平衡数据为用于对待处理图像进行白平衡处理时所需使用到的数据，比如可为颜色通道的增益。电子设备可根据该待处理图像和环境信息进行白平衡数据的计算，以得出对应的白平衡数据，该白平衡数据为根据待处理图像和环境信息而得出的数据。通常的，该环境信息中即包含该待处理图像中的所呈现的内容，因此，可仅根据该环境数据来得到白平衡数据。
在一个实施例中，电子设备可预设有白平衡算法，该白平衡算法可包括灰度世界算法、完美反射算法、全局白平衡算法和局部白平衡法等其中的一种或多种。电子设备可选取其中一种算法，将该环境信息(和待处理图像)作为该白平衡算法的输入，并运行该白平衡算法，而得到相应的白平衡数据。
操作308，根据白平衡数据对待处理图像进行白平衡处理。
待处理图像由若干个像素点构成的，每个像素点可以由多个颜色通道构成，每个颜色 通道表示一个颜色分量。例如，图像可以由RGB(红、绿、蓝三种颜色)三通道构成，也可以是由HSV(色调、饱和度和明度)三通道构成，还可以是由CMY(青、洋红或品红和黄三种颜色)三通道构成。
针对每个像素点上的每个颜色通道，电子设备可按照相应的白平衡数据对对应的显色通道的颜色值进行修正。从而实现对待处理图像的白平衡处理，使得修正后的颜色值更能反映出对应拍摄物体的真实色彩。
上述的图像白平衡处理方法，当在进行拍摄图像时，获取预先通过移动摄像头而得到的待处理图像的环境信息；并根据环境信息计算出白平衡数据；由于引入了所拍摄的待处理图像的环境信息，从而为计算白平衡数据提供了更多的参考信息，提高了计算出的白平衡数据的准确性，进而再根据白平衡数据对待处理图像进行白平衡处理，也相应提高了对图像白平衡处理的准确性。
在一个实施例中，上述的操作302可在操作304之前执行，还可在操作306之后执行，也可以在获取待处理图像之前，先计算出白平衡数据，该白平衡数据可由环境信息所计算出，可进一步提高对待处理图像进行白平衡处理的效率。比如，电子设备可将摄像头设置为拍摄状态，并在移动摄像头的过程中，在生成拍摄待处理图像之前，根据移动扫描来得到实时的环境信息，并根据该环境信息实时计算出白平衡数据。当接收到拍摄指令时，生成待处理图像，并使用最新计算出的白平衡数据对待处理图像进行白平衡处理，从而提高了白平衡处理的效率。
在一个实施例中，操作304包括：获取预先通过移动摄像头得到的实时的帧图像；根据不同时刻生成的帧图像得到待处理图像的环境信息。
电子设备可按照对应的帧率来实时生成帧图像。其中，该帧率可为固定设置的帧率，还可为根据当前环境的亮度等信息自适应确定的帧率。比如可以以每秒30帧的帧率来实时生成帧图像。在实时生成帧图像的过程中，可移动该摄像头，使得不同的时刻生成的帧图像不一定相同。电子设备可将每个帧图像中的信息均纳入环境信息中，由该不同时刻生成的帧图像而得到完整的环境信息。或者可仅提取不同时刻生成的帧图像中，与之前所生成的帧图像中的图像信息不同的图像区域，将该图像区域纳入环境信息中，从而由使得环境信息中包含待处理图像所在空间信息，且该空间信息不重复。
在一个实施例中，根据不同时刻生成的帧图像得到待处理图像的环境信息，包括：将不同时刻生成的帧图像进行对比，得到待处理图像的环境信息。
电子设备可提取每个帧图像中的像素点的颜色通道，并对当前帧和在该当前帧之前的预设数量的帧图像进行图像画面比较，识别出当前帧相对于在该当前帧之前的预设数量的帧图像画面的不重复区域。电子设备可以进一步分析每个不重复区域在整个空间中的位置关系，根据该不重复区域和位置关系，形成该待处理图像的环境信息。其中，该环境信息可为帧图像的数据形式体现，即该环境信息可由上述检测出的各个帧图像中，不重复区域以及该区域在整个环境中对应的空间位置，而合成的全景图像。通过移动摄像头扫描而得到实时的帧图像，并根据不同时刻生成的帧图像得到待处理图像的环境信息，使得获取的环境信息的信息量更多。
可选地，电子设备可按照空间场景建模算法，在画面移动过程中，比较相邻的前后帧图像之间的画面的差异区域，根据该差异区域在对应帧图像中的区域来确定摄像头在整个拍摄场景中的空间坐标，该空间坐标包括直线坐标和角度坐标。根据所确定的空间坐标，可获知该拍摄场景中的每个区域与摄像头之间的坐标位置，从而根据该坐标位置以及每个帧图像中的不同画面，得到环境信息。其中，该待处理图像所拍摄的区域即处于该拍摄场景中。在一个实施例中，该空间场景建模算法可为即时定位与地图构建(simultaneous localization and mapping，SLAM)算法，电子设备通过在摄像头移动的过程中，实时生 成相应的帧图像，按照该帧图像与预设的SLAM算法，可构建出摄像头在当前拍摄画面下，所处空间中的空间信息，根据该空间信息，尽可能多地记录环境信息，以将该环境信息用于白平衡处理。
在一个实施例中，根据不同时刻生成的帧图像得到待处理图像的环境信息，包括：调用运动检测元件，检测在生成每个帧图像时摄像头的移动数据；根据移动数据从帧图像中得到待处理图像的环境信息。
运动检测元件为适用于检测设备运动状态的元件，可包括但不限于陀螺仪或重力感应装置。加速度传感器等元件。电子设备可调用内置的运动检测元件，计算出摄像头在移动过程中的移动数据。其中，移动数据可包括移动速度、移动距离和移动角度等其中的一种或多种的组合。按照拍摄扫描的帧率，计算出拍摄当前帧图像时，相对于拍摄参考帧，摄像头的相对移动数据。其中，该相对移动数据为在当前时刻，相对于拍摄参考帧的时刻，摄像头的移动数据。参考帧可为首次用于记录环境信息时的帧图像，或者被用于参与记录环境信息的帧图像中的任意一帧图像。根据该相对移动数据，电子设备可计算出当前拍摄的帧图像的画面信息和参考帧之间的画面信息，在空间中的位置关系。可以理解地，该画面信息之间可能具有重复的部分。根据该位置关系，可以从不同时刻生成的帧图像中，得到通过摄像头所扫描到的全部环境信息。
在一个实施例中，如图5所示，操作308包括：
操作502，根据环境信息生成全景图像。
电子设备可根据该环境信息中包含的像素点以及像素点之间的位置关系，合成对应的图像，由于该环境信息是由通过移动摄像头来扫描而得到的，所以合成的图像即类似全景图像。
操作504，识别全景图像中的白色像素点。
以像素点的颜色通道为RGB三通道为例，当像素点上的RGB三通道的各颜色通道的数值相同时，该像素点呈现的颜色即为白色。电子设备可检测每个像素点上的三通道的数值是否相同或者近似相同，将数值相同或近似相同的像素点判定为白色像素点。其中，近似相同表示三通道的数值差值或增益在对应的预设数值范围内。该增益表示两个颜色通道的数值之比。记RGB三通道的各颜色通道的数值分别为R、G、B。则当同一像素上的R＝G＝B时，该像素点的颜色即为标准白色。以G通道为参考，该增益包括：R/G＝1.0；B/G＝1.0。当增益R/G、B/G均处于预设数值范围之内时，则判定该三通道的数值R、G、B近似相同，即判定该像素点的颜色接近白色。
操作506，根据白色像素点计算出白平衡数据。
在一个实施例中，电子设备可对每个白色像素点上的各个颜色通道，求取白的像素点的平均增益，将该平均增益作为白平衡数据。可选地，可对每个白色像素点上的各个颜色通道，将相同颜色通道的数值进行求和，根据每个颜色通道的数值之和计算出该平均增益，如R/G_average,B/G_average，该平均增益即为白平衡数据。
上述实施例中，通过环境信息生成全景图像，再根据全景图像中的白色像素点来计算出白平衡数据，可进一步提高白平衡数据计算的准确性。
在一个实施例中，根据白色像素点计算出白平衡数据，包括：检测所有的白色像素点在全景图像中占据的比例；根据与比例对应的白平衡计算模型计算出白平衡数据。
本实施例中，不同的白平衡计算模型所需的白平衡数据不一定相同。且不同的拍摄环境所适用的白平衡计算模型也不一定相同。电子设备预设了多种白平衡计算模型，比如可预设包含上述的灰度世界算法、完美反射算法、全局白平衡算法和局部白平衡法等计算模型。针对不同的计算模型，电子设备进一步设置了白色像素点在全景图像中占据的比例与相关计算模型的对应关系，使得在不同的占比下，获取对应的计算模型来计算该白平衡数据，并按照对应的计算模型和该白平衡数据对待处理图像进行白平衡处理。
电子设备可计算白色像素点的白点数量，以及该全景图像中的像素点的总数量，该白点数量与总数量之比即为白色像素点在全景图像中占据的比例。进一步地，可设置不同的白平衡计算模型与白色像素点的占比范围之间的对应关系，比如，当白色像素点在全景图像中占据的比例处于A％～B％时，对应白平衡计算模型A，当处于B％～C％时，对应白平衡计算模型B。可选地，该比例范围和对应的计算模型可按照经验设置，使得根据该对应关系选取的白平衡计算模型为最适用于对待处理图像进行白平衡处理的计算模型。
在一个实施例中，白平衡数据包括第一增益和第二增益；根据白色像素点计算出白平衡数据，包括：根据白色像素点上的像素的像素均值；根据像素均值计算出第一颜色通道的第一增益和第二颜色通道的第二增益；根据白平衡数据对待处理图像进行白平衡处理，包括：根据第一增益对待处理图像中每个像素的第一颜色通道进行白平衡矫正；根据第二增益对待处理图像中每个像素的第二颜色通道进行白平衡矫正。
增益表示两个颜色通道的数值之比。第一增益和第二增益分别表示一其中一个颜色通道为基准，另外两个颜色通道的数值与该基准的颜色通道的数值之比。同样以颜色通道为RGB三通道为例进行说明，上述的R/G_average,B/G_average可为该第一增益和第二增益，即为该R通道的增益和G通道的增益。电子设备针对每个颜色通道，将判定为白色像素的相同颜色通道进行求平均，得到每个颜色通道的均值，该均值即为像素均值。可以理解地，该像素均值可包括R均值、G均值和B均值。以G通道作为基准，则分别将R均值除以该G均值；将B均值除以G均值，即分别得到上述的R/G_average,B/G_average。
电子设备可将待处理图像上，每个像素点的R通道乘以R/G_average,B通道乘以B/G_average的倒数，从而实现对待处理图像的颜色矫正，实现对待处理图像的白平衡处理。
上述实施例中，通过对环境信息进行分析，从待处理图像所在的整个环境中得到白色像素点，使得可提高对白色像素点获取的全面性，进而根据该白色像素点来得到第一增益和第二增益，按照该第一增益和第二增益对待处理图像进行白平衡处理，提高了对待处理图像进行白平衡处理的准确性。
在一个实施例中，如图6所示，提供了另一种图像白平衡处理方法，该方法包括：
操作602，获取待处理图像。
可选地，该待处理图像可为在拍摄模式下，实时生成的图像，或者可为按照预设帧率实时呈现在显示屏上的帧图像。
操作604，获取预先通过移动摄像头得到的实时的帧图像。
电子设备在拍摄模式下，在显示屏上显示移动摄像头的提示信息，以提示用户对摄像头进行移动。可以理解地，该提示信息的显示方式和提示信息的数据格式均可包含多种。比如电子设备可显示“请左右移动摄像头”等类似的文字提示信息，或者可显示用于表示左右移动图形或符号等标记，比如可显示表示左右移动的箭头等。电子设备可在拍摄模式下，在获取到待处理图像之前，即可缓存该实时扫描得到的帧图像。
可选地，摄像头可进行左右、上下、前后等任意位置移动，比如摄像头可以以某个固定位置进行左右转动。摄像头移动范围越大，则对应可采集到的环境信息更丰富，使得后续白平衡处理的准确性更高。举例来说，用户可在拍摄出待处理图像之前，可手持该电子设备，对要拍摄的场景进行环境扫描，比如可手持该电子设备进行360°转动一圈，以得到整个空间的环境信息。在电子设备移动的过程中，可按照预设的帧率实时地生成帧图像。
操作606，将不同时刻生成的帧图像进行对比，得到待处理图像的环境信息。
可选地，参与提取环境信息的帧图像，可为在待处理图像的生成时间之前的预设时长之内获取的帧图像，或者为在拍摄待处理图像的过程中，在没有终止拍摄模式下，而生成的帧图像。
电子设备可将每个相邻两帧图像进行图像画面比较，识别出当前帧相对于在该当前帧 之前的预设数量的帧图像画面的不重复区域。分析每个不重复区域在整个空间中的位置关系，根据该不重复区域和位置关系，形成该待处理图像的环境信息。
在一个实施例中，电子设备可按照预设的SLAM算法，在移动拍摄过程中，按照拍摄的帧图像，构建出待处理图像的拍摄场景所处的整个空间信息。根据该空间信息，尽可能多地记录环境信息，以将该环境信息用于白平衡处理。
操作608，根据环境信息生成全景图像，识别全景图像中的白色像素点。
其中，该不重复区域也是由对应的像素点所构成，该不重复区域之间的位置关系也决定每个像素点之间的位置关系，根据该像素点和位置关系，可合成该全景图像。可以理解地，由于移动摄像头的方式不一定规则，该合成的全景图像并不一定为一个完整的矩形，可能存在某一区域上的像素点的缺失。
以像素点的颜色通道为RGB三通道为例，电子设备可计算每个像素点上的第一增益和第二增益，比如计算R/G和B/G，当该R/G和B/G均处于预设的数值范围之内时，则判定对应的像素点为白色像素点。该数值范围可为设置的任意合适的范围，比如可为0.8～1.2，当0.8<R/G<1.2且0.8<B/G<1.2时，判定该像素点为白色像素点。
操作610，根据白色像素点上的像素的像素均值，根据像素均值计算出第一颜色通道的第一增益和第二颜色通道的第二增益。
电子设备可对判定为白色像素点的像素，求取其像素均值，得到各个颜色通道的均值即为该像素均值。并以其中一个颜色通道为基准，另外两个颜色通道现对于该基准的颜色通道的增益即为该第一增益和第二增益。比如以G通道为基准，该R通道的增益R/G_average和B通道的增益B/G_average则分别为上述的第一颜色通道的第一增益和第二颜色通道的第二增益。
操作612，根据第一增益对待处理图像中每个像素的第一颜色通道进行白平衡矫正；根据第二增益对待处理图像中每个像素的第二颜色通道进行白平衡矫正。
可选地，电子设备可将待处理图像中的R通道乘以R/G_average,将B通道乘以B/G_average的倒数，以完成对该第一颜色通道和第二颜色通道的白平衡矫正，实现对待处理图像的白平衡处理。
上述的图像白平衡处理方法，当在进行拍摄图像时，获取预先通过移动摄像头而得到的待处理图像的环境信息；并根据环境信息计算出白平衡数据；由于引入了所拍摄的待处理图像的环境信息，从而为计算白平衡数据提供了更多的参考信息，提高了计算出的白平衡数据的准确性，进而再根据白平衡数据对待处理图像进行白平衡处理，也相应提高了对图像白平衡处理的准确性。
本申请实施例的方法流程图中的各个操作按照箭头的指示依次显示，但是这些操作并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些操作的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，本申请实施例的方法流程图中的至少一部分操作可以包括多个子操作或者多个阶段，这些子操作或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他操作或者其他操作的子操作或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中，如图7所示，提供了一种图像白平衡处理装置，该装置包括：
图像获取模块702，用于获取待处理图像。
环境信息生成模块704，用于获取预先通过移动摄像头而得到的待处理图像的环境信息。
白平衡处理模块706，用于根据环境信息计算出白平衡数据；根据白平衡数据对待处理图像进行白平衡处理。
在一个实施例中，环境信息生成模块704还用于获取预先通过移动摄像头得到的实时 的帧图像；根据不同时刻生成的帧图像得到待处理图像的环境信息。
在一个实施例中，环境信息生成模块704还用于将不同时刻生成的帧图像进行对比，得到待处理图像的环境信息。
在一个实施例中，环境信息生成模块704还用于调用运动检测元件，检测在生成每个帧图像时摄像头的移动数据；根据移动数据从帧图像中得到待处理图像的环境信息。
在一个实施例中，白平衡处理模块706还用于根据环境信息生成全景图像；识别全景图像中的白色像素点；根据白色像素点计算出白平衡数据。
在一个实施例中，白平衡处理模块706还用于检测所有的白色像素点在全景图像中占据的比例；根据与比例对应的白平衡计算模型计算出白平衡数据。
在一个实施例中，白平衡数据包括第一增益和第二增益；白平衡处理模块706还用于根据白色像素点上的像素的像素均值；根据像素均值计算出第一颜色通道的第一增益和第二颜色通道的第二增益；根据第一增益对待处理图像中每个像素的第一颜色通道进行白平衡矫正；根据第二增益对待处理图像中每个像素的第二颜色通道进行白平衡矫正。
上述图像白平衡处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像白平衡处理装置按照需要划分为不同的模块，以完成上述图像白平衡处理装置的全部或部分功能。
上述图像白平衡处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于服务器中的处理器中，也可以以软件形式存储于服务器中的存储器中，以便于处理器调用执行以上各个模块对应的操作。如在本申请中所使用的，术语“组件”、“模块”和“系统”等旨在表示计算机相关的实体，它可以是硬件、硬件和软件的组合、软件、或者执行中的软件。例如，组件可以是但不限于是，在处理器上运行的进程、处理器、对象、可执行码、执行的线程、程序和/或计算机。作为说明，运行在服务器上的应用程序和服务器都可以是组件。一个或多个组件可以驻留在进程和/或执行的线程中，并且组件可以位于一个计算机内和/或分布在两个或更多的计算机之间。
在一个实施例中，提供了一种非易失性计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述各实施例所提供的图像白平衡处理方法的操作。
在一个实施例中，提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述各实施例所提供的图像白平衡处理方法的操作。
本申请实施例还提供了一种计算机程序产品。一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述各实施例所提供的图像白平衡处理方法的操作。
本申请实施例还提供一种电子设备。上述电子设备中包括拍摄电路，拍摄电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图8为一个实施例中拍摄电路的示意图。如图8所示，为便于说明，仅示出与本申请实施例相关的拍摄技术的各个方面。
如图8所示，拍摄电路包括ISP处理器840和控制逻辑器850。成像设备810捕捉的图像数据首先由ISP处理器840处理，ISP处理器840对图像数据进行分析以捕捉可用于确定和/或成像设备810的一个或多个控制参数的图像统计信息。成像设备810可包括具有一个或多个透镜812和图像传感器814的照相机。图像传感器814可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器814可获取用图像传感器814的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器840处理的一组原始图像数据。传感器820(如陀螺仪)可基于传感器820接口类型把采集的拍摄的参数(如防抖参数)提供给ISP处理器840。传感器820接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移 动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外，图像传感器814也可将原始图像数据发送给传感器820，传感器820可基于传感器820接口类型把原始图像数据提供给ISP处理器840，或者传感器820将原始图像数据存储到图像存储器830中。
ISP处理器840按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器840可对原始图像数据进行一个或多个拍摄操作、收集关于图像数据的统计信息。其中，拍摄操作可按相同或不同的位深度精度进行。
ISP处理器840还可从图像存储器830接收图像数据。例如，传感器820接口将原始图像数据发送给图像存储器830，图像存储器830中的原始图像数据再提供给ISP处理器840以供处理。图像存储器830可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。
当接收到来自图像传感器814接口或来自传感器820接口或来自图像存储器830的原始图像数据时，ISP处理器840可进行一个或多个拍摄操作，如时域滤波。处理后的图像数据可发送给图像存储器830，以便在被显示之前进行另外的处理。ISP处理器840还可从图像存储器830接收处理数据，对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器880，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器840的输出还可发送给图像存储器830，且显示器880可从图像存储器830读取图像数据。在一个实施例中，图像存储器830可被配置为实现一个或多个帧缓冲器。此外，ISP处理器840的输出可发送给编码器/解码器870，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器880设备上之前解压缩。
ISP处理器840处理图像数据的操作包括：对图像数据进行VFE(Video Front End，视频前端)处理和CPP(Camera Post Processing，摄像头后处理)处理。对图像数据的VFE处理可包括修正图像数据的对比度或亮度、修改以数字方式记录的光照状态数据、对图像数据进行补偿处理(如白平衡，自动增益控制，γ校正等)、对图像数据进行滤波处理等。对图像数据的CPP处理可包括对图像进行缩放、向每个路径提供预览帧和记录帧。其中，CPP可使用不同的编解码器来处理预览帧和记录帧。ISP处理器840处理后的图像数据可发送给美颜模块860，以便在被显示之前对图像进行美颜处理。美颜模块860对图像数据美颜处理可包括：美白、祛斑、磨皮、瘦脸、祛痘、增大眼睛等。其中，美颜模块860可为电子设备中CPU(Central Processing Unit，中央处理器)、GPU或协处理器等。美颜模块860处理后的数据可发送给编码器/解码器870，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器880设备上之前解压缩。其中，美颜模块860还可位于编码器/解码器870与显示器880之间，即美颜模块对已成像的图像进行美颜处理。上述编码器/解码器870可为电子设备中CPU、GPU或协处理器等。
ISP处理器840确定的统计数据可发送给控制逻辑器850单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜812阴影校正等图像传感器814统计信息。控制逻辑器850可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备810的控制参数以及ISP处理器840的控制参数。例如，成像设备810的控制参数可包括传感器820控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜812控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜812阴影校正参数。
运用图8中拍摄技术可实现如上的图像白平衡处理方法。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/ 或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (21)

  1. 一种图像白平衡处理方法，包括：
    获取待处理图像；
    获取预先通过移动摄像头而得到的所述待处理图像的环境信息；
    根据所述环境信息计算出白平衡数据；及
    根据所述白平衡数据对所述待处理图像进行白平衡处理。
  2. 根据权利要求1所述的方法，其特征在于，所述获取预先通过移动摄像头而得到的所述待处理图像的环境信息，包括：
    获取预先通过移动摄像头得到的实时的帧图像；及
    根据不同时刻生成的帧图像得到所述待处理图像的环境信息。
  3. 根据权利要求2所述的方法，其特征在于，所述根据不同时刻生成的帧图像得到所述待处理图像的环境信息，包括：
    将不同时刻生成的帧图像进行对比，得到所述待处理图像的环境信息。
  4. 根据权利要求2所述的方法，其特征在于，所述根据不同时刻生成的帧图像得到所述待处理图像的环境信息，包括：
    调用运动检测元件，检测在生成每个帧图像时所述摄像头的移动数据；及
    根据所述移动数据从所述帧图像中得到所述待处理图像的环境信息。
  5. 根据权利要求1所述的方法，其特征在于，所述根据所述环境信息计算出白平衡数据，包括：
    根据所述环境信息生成全景图像；
    识别所述全景图像中的白色像素点；及
    根据所述白色像素点计算出白平衡数据。
  6. 根据权利要求5所述的方法，其特征在于，所述根据所述白色像素点计算出白平衡数据，包括：
    检测所有的白色像素点在所述全景图像中占据的比例；及
    根据与所述比例对应的白平衡计算模型计算出白平衡数据。
  7. 根据权利要求5所述的方法，其特征在于，所述白平衡数据包括第一增益和第二增益；所述根据所述白色像素点计算出白平衡数据，包括：
    根据所述白色像素点上的像素的像素均值；及
    根据所述像素均值计算出第一颜色通道的第一增益和第二颜色通道的第二增益；
    所述根据所述白平衡数据对所述待处理图像进行白平衡处理，包括：
    根据所述第一增益对所述待处理图像中每个像素的第一颜色通道进行白平衡矫正；及
    根据所述第二增益对所述待处理图像中每个像素的第二颜色通道进行白平衡矫正。
  8. 一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行以下操作：
    获取待处理图像；
    获取预先通过移动摄像头而得到的所述待处理图像的环境信息；
    根据所述环境信息计算出白平衡数据；及
    根据所述白平衡数据对所述待处理图像进行白平衡处理。
  9. 根据权利要求8所述的非易失性计算机可读存储介质，其特征在于，所述处理器执行所述获取预先通过移动摄像头而得到的所述待处理图像的环境信息，还执行以下操作：
    获取预先通过移动摄像头得到的实时的帧图像；及
    根据不同时刻生成的帧图像得到所述待处理图像的环境信息。
  10. 根据权利要求9所述的非易失性计算机可读存储介质，其特征在于，所述处理器执行所述根据不同时刻生成的帧图像得到所述待处理图像的环境信息，还执行以下操作：
    将不同时刻生成的帧图像进行对比，得到所述待处理图像的环境信息。
  11. 根据权利要求9所述的非易失性计算机可读存储介质，其特征在于，所述处理器执行所述根据不同时刻生成的帧图像得到所述待处理图像的环境信息，还执行以下操作：
    调用运动检测元件，检测在生成每个帧图像时所述摄像头的移动数据；及
    根据所述移动数据从所述帧图像中得到所述待处理图像的环境信息。
  12. 根据权利要求8所述的非易失性计算机可读存储介质，其特征在于，所述处理器执行所述根据所述环境信息计算出白平衡数据，还执行以下操作：
    根据所述环境信息生成全景图像；
    识别所述全景图像中的白色像素点；及
    根据所述白色像素点计算出白平衡数据。
  13. 根据权利要求12所述的非易失性计算机可读存储介质，其特征在于，所述处理器执行所述根据所述白色像素点计算出白平衡数据，还执行以下操作：
    检测所有的白色像素点在所述全景图像中占据的比例；及
    根据与所述比例对应的白平衡计算模型计算出白平衡数据。
  14. 根据权利要求12所述的非易失性计算机可读存储介质，其特征在于，所述处理器执行所述根据所述白色像素点计算出白平衡数据，还执行以下操作：
    根据所述白色像素点上的像素的像素均值；及
    根据所述像素均值计算出第一颜色通道的第一增益和第二颜色通道的第二增益；
    所述处理器执行所述根据所述白平衡数据对所述待处理图像进行白平衡处理，还执行以下操作：
    根据所述第一增益对所述待处理图像中每个像素的第一颜色通道进行白平衡矫正；及
    根据所述第二增益对所述待处理图像中每个像素的第二颜色通道进行白平衡矫正。
  15. 一种电子设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述计算机可读指令被所述处理器执行时，使得所述处理器执行以下操作：
    获取待处理图像；
    获取预先通过移动摄像头而得到的所述待处理图像的环境信息；
    根据所述环境信息计算出白平衡数据；及
    根据所述白平衡数据对所述待处理图像进行白平衡处理。
  16. 根据权利要求15所述的电子设备，其特征在于，所述处理器执行所述获取预先通过移动摄像头而得到的所述待处理图像的环境信息，还执行以下操作：
    获取预先通过移动摄像头得到的实时的帧图像；及
    根据不同时刻生成的帧图像得到所述待处理图像的环境信息。
  17. 根据权利要求16所述的电子设备，其特征在于，所述处理器执行所述根据不同时刻生成的帧图像得到所述待处理图像的环境信息，还执行以下操作：
    将不同时刻生成的帧图像进行对比，得到所述待处理图像的环境信息。
  18. 根据权利要求16所述的电子设备，其特征在于，所述处理器执行所述根据不同时刻生成的帧图像得到所述待处理图像的环境信息，还执行以下操作：
    调用运动检测元件，检测在生成每个帧图像时所述摄像头的移动数据；及
    根据所述移动数据从所述帧图像中得到所述待处理图像的环境信息。
  19. 根据权利要求15所述的电子设备，其特征在于，所述处理器执行所述根据所述环境信息计算出白平衡数据，还执行以下操作：
    根据所述环境信息生成全景图像；
    识别所述全景图像中的白色像素点；及
    根据所述白色像素点计算出白平衡数据。
  20. 根据权利要求19所述的电子设备，其特征在于，所述处理器执行所述根据所述白色像素点计算出白平衡数据，还执行以下操作：
    检测所有的白色像素点在所述全景图像中占据的比例；及
    根据与所述比例对应的白平衡计算模型计算出白平衡数据。
  21. 根据权利要求19所述的电子设备，其特征在于，所述处理器执行所述根据所述白色像素点计算出白平衡数据，还执行以下操作：
    根据所述白色像素点上的像素的像素均值；及
    根据所述像素均值计算出第一颜色通道的第一增益和第二颜色通道的第二增益；
    所述处理器执行所述根据所述白平衡数据对所述待处理图像进行白平衡处理，还执行以下操作：
    根据所述第一增益对所述待处理图像中每个像素的第一颜色通道进行白平衡矫正；及
    根据所述第二增益对所述待处理图像中每个像素的第二颜色通道进行白平衡矫正。
PCT/CN2018/117292 2017-11-28 2018-11-23 图像白平衡处理方法、计算机可读存储介质和电子设备 WO2019105304A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201711213463.6A CN107911683B (zh) 2017-11-28 2017-11-28 图像白平衡处理方法、装置、存储介质和电子设备
CN201711213463.6 2017-11-28

Publications (1)

Publication Number Publication Date
WO2019105304A1 true WO2019105304A1 (zh) 2019-06-06

Family

ID=61849105

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2018/117292 WO2019105304A1 (zh) 2017-11-28 2018-11-23 图像白平衡处理方法、计算机可读存储介质和电子设备

Country Status (2)

Country Link
CN (1) CN107911683B (zh)
WO (1) WO2019105304A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107911683B (zh) * 2017-11-28 2019-07-23 Oppo广东移动通信有限公司 图像白平衡处理方法、装置、存储介质和电子设备
CN112492286B (zh) * 2019-09-11 2024-10-18 深圳开阳电子股份有限公司 一种自动白平衡校正方法、装置及计算机存储介质
US11849264B2 (en) * 2019-11-22 2023-12-19 Samsung Electronics Co., Ltd. Apparatus and method for white balance editing
CN112712568B (zh) * 2020-12-16 2024-07-19 杭州博联智能科技股份有限公司 颜色亮度识别方法、装置、设备及介质
CN114697629B (zh) * 2020-12-25 2023-10-20 惠州视维新技术有限公司 一种白平衡处理方法、装置、存储介质及终端设备
CN113115014B (zh) * 2021-04-15 2023-07-18 北京有竹居网络技术有限公司 图像处理方法、装置、设备、介质和计算机程序产品

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102271260A (zh) * 2011-09-07 2011-12-07 天津天地伟业数码科技有限公司 白平衡调节的方法
CN102905079A (zh) * 2012-10-16 2013-01-30 北京小米科技有限责任公司 用于全景拍摄的方法、装置及移动终端
EP2760208A1 (en) * 2013-01-25 2014-07-30 BlackBerry Limited Reduce operating environment effect using mulitple cameras
CN104394392A (zh) * 2014-11-14 2015-03-04 广东欧珀移动通信有限公司 一种白平衡调节方法、装置以及终端
CN105227945A (zh) * 2015-10-21 2016-01-06 维沃移动通信有限公司 一种自动白平衡的控制方法及移动终端
CN107911683A (zh) * 2017-11-28 2018-04-13 广东欧珀移动通信有限公司 图像白平衡处理方法、装置、存储介质和电子设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100576907C (zh) * 2007-12-25 2009-12-30 谢维信 利用单摄像机实时生成360°无缝全景视频图像的方法
CN103957396A (zh) * 2014-05-14 2014-07-30 姚杰 利用智能设备进行舌诊时的图像处理方法、装置及设备
EP3195594B1 (en) * 2014-09-17 2019-08-14 SZ DJI Technology Co., Ltd. Automatic white balancing system and method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102271260A (zh) * 2011-09-07 2011-12-07 天津天地伟业数码科技有限公司 白平衡调节的方法
CN102905079A (zh) * 2012-10-16 2013-01-30 北京小米科技有限责任公司 用于全景拍摄的方法、装置及移动终端
EP2760208A1 (en) * 2013-01-25 2014-07-30 BlackBerry Limited Reduce operating environment effect using mulitple cameras
CN104394392A (zh) * 2014-11-14 2015-03-04 广东欧珀移动通信有限公司 一种白平衡调节方法、装置以及终端
CN105227945A (zh) * 2015-10-21 2016-01-06 维沃移动通信有限公司 一种自动白平衡的控制方法及移动终端
CN107911683A (zh) * 2017-11-28 2018-04-13 广东欧珀移动通信有限公司 图像白平衡处理方法、装置、存储介质和电子设备

Also Published As

Publication number Publication date
CN107911683B (zh) 2019-07-23
CN107911683A (zh) 2018-04-13

Similar Documents

Publication Publication Date Title
WO2019105305A1 (zh) 图像亮度处理方法、计算机可读存储介质和电子设备
EP3477931B1 (en) Image processing method and device, readable storage medium and electronic device
WO2019105304A1 (zh) 图像白平衡处理方法、计算机可读存储介质和电子设备
CN107911682B (zh) 图像白平衡处理方法、装置、存储介质和电子设备
US10997696B2 (en) Image processing method, apparatus and device
WO2021017811A1 (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
JP7145208B2 (ja) デュアルカメラベースの撮像のための方法および装置ならびに記憶媒体
WO2019085786A1 (en) Image processing method and device, electronic device and computer-readable storage medium
JP6903816B2 (ja) 画像処理方法および装置
CN108419028B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
WO2021057474A1 (zh) 主体对焦方法、装置、电子设备和存储介质
CN108717530B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
US8310553B2 (en) Image capturing device, image capturing method, and storage medium having stored therein image capturing program
JP5536010B2 (ja) 電子カメラ、撮像制御プログラム及び撮像制御方法
US20220222830A1 (en) Subject detecting method and device, electronic device, and non-transitory computer-readable storage medium
CN107959841B (zh) 图像处理方法、装置、存储介质和电子设备
KR20200023651A (ko) 미리보기 사진 블러링 방법 및 장치 및 저장 매체
CN107862658B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN107948511B (zh) 图像亮度处理方法、装置、存储介质和图像亮度处理设备
CN110866486B (zh) 主体检测方法和装置、电子设备、计算机可读存储介质
WO2019015477A1 (zh) 图像矫正方法、计算机可读存储介质和计算机设备
CN109685853A (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN107578372B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN108769510B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN108737797B (zh) 白平衡处理方法、装置和电子设备

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18884111

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18884111

Country of ref document: EP

Kind code of ref document: A1