CN107959843A - 图像处理方法及装置、计算机可读存储介质和计算机设备 - Google Patents

图像处理方法及装置、计算机可读存储介质和计算机设备 Download PDF

Info

Publication number
CN107959843A
CN107959843A CN201711423753.3A CN201711423753A CN107959843A CN 107959843 A CN107959843 A CN 107959843A CN 201711423753 A CN201711423753 A CN 201711423753A CN 107959843 A CN107959843 A CN 107959843A
Authority
CN
China
Prior art keywords
light source
described image
image
portrait area
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711423753.3A
Other languages
English (en)
Other versions
CN107959843B (zh
Inventor
王会朝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201711423753.3A priority Critical patent/CN107959843B/zh
Publication of CN107959843A publication Critical patent/CN107959843A/zh
Application granted granted Critical
Publication of CN107959843B publication Critical patent/CN107959843B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Processing (AREA)

Abstract

本申请公开一种图像处理方法。图像处理方法包括:处理图像以判断图像中是否存在人脸;在图像中存在人脸时获取图像中的人像区域;处理人像区域以检测人像区域的光源;确定人像区域的光源的颜色以确定人像区域的光源的色温;和根据人像区域的光源的色温对图像进行白平衡处理。本申请还公开一种图像处理装置、计算机可读存储介质和计算机设备。本申请实施方式的图像处理方法及装置、计算机可读存储介质和计算机设备根据人像区域的光源的色温对图像进行白平衡处理,从而使得白平衡处理后的图像中的人像区域的颜色更加准确,图像的视觉效果更佳。

Description

图像处理方法及装置、计算机可读存储介质和计算机设备
技术领域
本申请涉及图像处理技术,特别涉及一种图像处理方法、图像处理装置、计算机可读存储介质和计算机设备。
背景技术
相关技术的白平衡技术通过检测图像对应的场景的光源的色温并根据光源的色温对图像进行白平衡处理,然而,这种方式的白平衡技术注重场景的还原度,容易导致图像中的人像区域发生偏色。
发明内容
本申请的实施例提供了一种图像处理方法、图像处理装置、计算机可读存储介质和计算机设备。
本申请实施方式的图像处理方法包括以下步骤:
处理图像以判断所述图像中是否存在人脸;
在所述图像中存在所述人脸时获取所述图像中的人像区域;
处理所述人像区域以检测所述人像区域的光源;
确定所述人像区域的光源的颜色以确定所述人像区域的光源的色温;和
根据所述人像区域的光源的色温对所述图像进行白平衡处理。
本申请实施方式的图像处理装置包括:
判断模块,所述判断模块用于处理图像以判断所述图像中是否存在人脸;
获取模块,所述获取模块用于在所述图像中存在所述人脸时获取所述图像中的人像区域;
第一处理模块,所述第一处理模块用于处理所述人像区域以检测所述人像区域的光源;
第一确定模块,所述第一确定模块用于确定所述人像区域的光源的颜色以确定所述人像区域的光源的色温;和
第二处理模块,所述第二处理模块用于根据所述人像区域的光源的色温对所述图像进行白平衡处理。
本申请实施方式的一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行所述图像处理方法。
本申请实施方式的计算机设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行所述图像处理方法。
本申请实施方式的图像处理方法及装置、计算机可读存储介质和计算机设备根据人像区域的光源的色温对图像进行白平衡处理,从而使得白平衡处理后的图像中的人像区域的颜色更加准确,图像的视觉效果更佳。
本申请的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请某些实施方式的图像处理方法的流程示意图。
图2是本申请某些实施方式的图像处理装置的模块示意图。
图3是本申请某些实施方式的计算机设备的平面示意图。
图4是本申请某些实施方式的图像处理方法的流程示意图。
图5是本申请某些实施方式的第一处理模块的模块示意图。
图6是本申请某些实施方式的拍摄场景的示意图。
图7是本申请某些实施方式的图像处理方法的流程示意图。
图8是本申请某些实施方式的拍摄场景的示意图。
图9是本申请某些实施方式的第一确定模块的模块示意图。
图10是本申请某些实施方式的色温曲线示意图。
图11是本申请某些实施方式的图像处理方法的流程示意图。
图12是本申请某些实施方式的图像处理装置的模块示意图。
图13是本申请某些实施方式的图像处理方法的流程示意图。
图14是本申请某些实施方式的第三处理模块的模块示意图。
图15是本申请某些实施方式的图像处理方法的流程示意图。
图16是本申请某些实施方式的第二确定模块的模块示意图。
图17是本申请某些实施方式的计算机设备的模块示意图。
图18是本申请某些实施方式的图像处理电路的模块示意图。
主要元件符号说明:
计算机设备1000、图像处理装置200、判断模块212、获取模块214、第一处理模块216、第一划分单元2161、第一判断单元2163、第二判断单元2165、第一拼接单元2167、第一确定单元2169、第一确定模块218、第二确定单元2182、第一处理单元2184、第三确定单元2186、第二处理模块222、第三处理模块224、第二划分单元2241、第三判断单元2243、第四判断单元2245、第二拼接单元2247、第四确定单元2249、第二确定模块226、第五确定单元2262、第二处理单元2264、第六确定单元2266、第四处理模块228、系统总线510、处理器520、存储器530、内存储器540、显示屏550、输入装置560、图像处理电路800、ISP处理器810、控制逻辑器820、摄像头830、透镜832、图像传感器834、传感器840、图像存储器850、编码器/解码器860、显示器870。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
请参阅图1,本申请实施方式的图像处理方法包括以下步骤:
S212:处理图像以判断图像中是否存在人脸;
S214:在图像中存在人脸时获取图像中的人像区域;
S216:处理人像区域以检测人像区域的光源;
S218:确定人像区域的光源的颜色以确定人像区域的光源的色温;和
S222:根据人像区域的光源的色温对图像进行白平衡处理。
请参阅图2,本申请实施方式的图像处理装置200包括判断模块212、获取模块214、第一处理模块216、第一确定模块218和第二处理模块222。判断模块212用于处理图像以判断图像中是否存在人脸。获取模块214用于在图像中存在人脸时获取图像中的人像区域。第一处理模块216用于处理人像区域以检测人像区域的光源。第一确定模块218用于确定人像区域的光源的颜色以确定人像区域的光源的色温。第二处理模块222用于根据人像区域的光源的色温对图像进行白平衡处理。
本申请实施方式的图像处理方法可以由本申请实施方式的图像处理装置200实现,其中,步骤S212可以由判断模块212实现,步骤S214可以由获取模块214实现,步骤S216可以由第一处理模块216实现,步骤S218可以由第一确定模块218实现,步骤S222可以由第二处理模块222实现。
请参阅图3,本申请实施方式的图像处理装置200可以应用于本申请实施方式的计算机设备1000中,也即是说,本申请实施方式的计算机设备1000可以包括本申请实施方式的图像处理装置200。
本申请实施方式的图像处理方法、图像处理装置200和计算机设备1000根据人像区域的光源的色温对图像进行白平衡处理,从而使得白平衡处理后的图像中的人像区域的颜色更加准确,图像的视觉效果更佳。
在本申请实施方式中,可以根据人脸检测技术快速地检测图像中是否存在人脸,在图像中存在人脸时,可以判断图像中存在对应的人像区域,因此可以确定人脸的位置并根据人脸的位置获取人像区域。
在某些实施方式中,计算机设备1000内预存有色温和白平衡参数的对应关系,根据人像区域的光源的色温在色温和白平衡参数的对应关系中可以查找获得相应的白平衡参数,从而可以根据白平衡参数对图像进行白平衡处理。
请参阅图4,在某些实施方式中,步骤S216包括以下步骤:
S2161:将人像区域分成多个区域;
S2163:根据每个区域的直方图判断区域是否为包括人像区域的光源的目标区域;
S2165:判断是否存在相邻的多个目标区域;
S2167:在存在相邻的多个目标区域时将相邻的多个目标区域拼接为人像区域的光源;和
S2169:在不存在相邻的多个目标区域时将目标区域确定为人像区域的光源。
请参阅图5,在某些实施方式中,第一处理模块216包括第一划分单元2161、第一判断单元2163、第二判断单元2165、第一拼接单元2167和第一确定单元2169。第一划分单元2161用于将人像区域分成多个区域。第一判断单元2163用于根据每个区域的直方图判断区域是否为包括人像区域的光源的目标区域。第二判断单元2165用于判断是否存在相邻的多个目标区域。第一拼接单元2167用于在存在相邻的多个目标区域时将相邻的多个目标区域拼接为人像区域的光源。第一确定单元2169用于在不存在相邻的多个目标区域时将目标区域确定为人像区域的光源。
也即是说,步骤S2161可以由第一划分单元2161实现,步骤S2163可以由第一判断单元2163实现,步骤S2165可以由第二判断单元2165实现,步骤S2167可以由第一拼接单元2167实现,步骤S2169可以由第一确定单元2169实现。
如此,可以确定人像区域中的光源位置。
具体地,可以将人像区域分成多个区域,例如将人像分成64*48个区域。根据每个区域的直方图可以判断每个区域中像素值超过预设像素值P的像素的占比是否超过预设比例,预设像素值P例如是239,预设比例例如是5%,即判断每个区域中像素值超过239的像素的占比是否超过5%,像素值超过预设像素值P的像素的占比超过预设比例的对应区域为包括人像区域的光源的目标区域。在人像区域中不存在目标区域时,可以处理图像以检测图像的光源并根据图像的光源的色温对图像进行白平衡处理。在人像区域中存在目标区域时,判断是否存在相邻的多个目标区域,在存在相邻的多个目标区域时,相邻的多个目标区域在场景中属于同一个光源,因此可以将相邻的多个目标区域拼接为人像区域的光源;在不存在相邻的多个目标区域时,目标区域即可认为是人像区域的光源。因此,通过目标区域可以确定人像区域中的光源位置。
请参阅图6,在一个例子中,根据每个区域的直方图可以判断区域A、区域B、区域C和区域D是包括人像区域的光源的目标区域,例如从区域A的直方图中,可以判断出区域A中像素值超过预设像素值P的像素的占比超过了预设比例,由于区域A、区域B、区域C和区域D是相邻的多个目标区域,因此可以将区域A、区域B、区域C和区域D拼接起来,从而获得较为完整的光源。
请参阅图7和图8,在某些实施方式中,步骤S218包括以下步骤:
S2182:根据人像区域的光源的中心沿径向向外的亮度分布确定高亮区域H和中亮区域M;
S2184:将高亮区域H的基色通道像素平均值减去中亮区域M的基色通道像素平均值以确定人像区域的光源的颜色;和
S2186:根据人像区域的光源的颜色确定人像区域的光源的色温。
请参阅图8和图9,在某些实施方式中,第一确定模块218包括第二确定单元2182、第一处理单元2184和第三确定单元2186。第二确定单元2182用于根据人像区域的光源的中心沿径向向外的亮度分布确定高亮区域H和中亮区域M。第一处理单元2184用于将高亮区域H的基色通道像素平均值减去中亮区域M的基色通道像素平均值以确定人像区域的光源的颜色。第三确定单元2186用于根据人像区域的光源的颜色确定人像区域的光源的色温。
也即是说,步骤S2182可以由第二确定单元2182实现,步骤S2184可以由第一处理单元2184实现,步骤S2186可以由第三确定单元2186实现。
如此,可以通过高亮区域H和中亮区域M确定人像区域的光源的颜色和色温。
请再次参阅图8,在人像区域中的光源位置确定后,可以理解,人像区域中的光源的中心区域O为过曝区域,一般为大白斑,不包含光源的颜色的信息。光源的颜色可以通过高亮区域H和中亮区域M的基色通道像素平均值确定。高亮区域H可以是指光源的中心沿径向向外的亮度值处于第一亮度范围L1的像素所构成的区域,第一亮度范围L1例如为[200,239)。中亮区域M可以是指光源的中心沿径向向外的亮度值处于第二亮度范围L2的像素所构成的区域,第二亮度范围L2例如为[150,200)。需要说明的是,第一亮度范围L1和第二亮度范围L2的具体取值可以根据光源的中心O沿径向向外的亮度分布确定,例如光源的亮度衰减得比较快,可以增大第一亮度范围L1和第二亮度范围L2;例如光源的亮度衰减得比较慢,可以减小第一亮度范围L1和第二亮度范围L2。
在某些实施方式中,基色通道是指颜色通道,例如包括R(红色)通道、Gr(绿红)通道、Gb(绿蓝)通道、B(蓝色)通道中的至少一个,在某些实施方式中,可以通过Gr通道的像素值和Gb通道的像素值获得G(绿色)通道的像素值。像素平均值可以是指多个像素值的算术平均值,多个像素值可以是高亮区域的所有像素的像素值或中亮区域的所有像素的像素值。在一个例子中,高亮区域的各个基色通道像素平均值(Ravg,Gavg,Bavg)为(200,210,220),中亮区域的各个基色通道像素平均值(Ravg,Gavg,Bavg)为(160,180,190),则光源颜色的通道(R,G,B)为(200-160,210-180,220-190),即(40,30,30)。
在某些实施方式中,根据光源的颜色(例如人像区域的光源的颜色)确定光源的色温(例如人像区域的光源的色温),具体可以为:根据光源的颜色、光源的颜色和光源的色温的对应关系确定光源的色温。其中,光源的颜色和光源的色温的对应关系可以是映射表和/或色温曲线。
请参阅图10,在一个实施例中,可以在色温分别为3000K、4000K、5000K、6000K等标准灯箱下,获取图像并通过计算得到在上述不同色温下对应的光源的颜色,由此可以形成光源的颜色和色温的色温曲线,并可以将该色温曲线保存在计算机设备1000中。通过光源的颜色在色温曲线中查找即可获得对应的光源的色温。
请参阅图11,在某些实施方式中,在步骤S212后包括以下步骤:
S224:在图像中不存在人脸时处理图像以检测图像的光源;
S226:确定图像的光源的颜色以确定图像的光源的色温;和
S228:根据图像的光源的色温对图像进行白平衡处理。
请参阅图12,在某些实施方式中,图像处理装置200包括第三处理模块224、第二确定模块226和第四处理模块228。第三处理模块224用于在图像中不存在人脸时处理图像以检测图像的光源。第二确定模块226用于确定图像的光源的颜色以确定图像的光源的色温。第四处理模块228用于根据图像的光源的色温对图像进行白平衡处理。
也即是说,步骤S224可以由第三处理模块224实现,步骤S226可以由第二确定模块226实现,步骤S228可以由第四处理模块228实现。
如此,在图像中不存在人脸时,可以根据整帧图像的光源的色温对图像进行白平衡处理,从而准确地调整图像的色调。
具体地,在图像中不存在人脸(即图像中不存在人像区域)时,不会出现人像区域偏色的情况,因此可以根据图像的光源的色温对图像进行白平衡处理,从而使得白平衡处理后的图像显得更加真实。
请参阅图13,在某些实施方式中,步骤S224包括以下步骤:
S2241:将图像分成多个区域;
S2243:根据每个区域的直方图判断区域是否为包括图像的光源的目标区域;
S2245:判断是否存在相邻的多个目标区域;
S2247:在存在相邻的多个目标区域时将相邻的多个目标区域拼接为图像的光源;和
S2249:在不存在相邻的多个目标区域时将目标区域确定为图像的光源。
请参阅图14,在某些实施方式中,第三处理模块224包括第二划分单元2241、第三判断单元2243、第四判断单元2245、第二拼接单元2247和第四确定单元2249。第二划分单元2241用于将图像分成多个区域。第三判断单元2243用于根据每个区域的直方图判断区域是否为包括图像的光源的目标区域。第四判断单元2245用于判断是否存在相邻的多个目标区域。第二拼接单元2247用于在存在相邻的多个目标区域时将相邻的多个目标区域拼接为图像的光源。第四确定单元2249用于在不存在相邻的多个目标区域时将目标区域确定为图像的光源。
也即是说,步骤S2241可以由第二划分单元2241实现,步骤S2243可以由第三判断单元2243实现,步骤S2245可以由第四判断单元2245实现,步骤S2247可以由第二拼接单元2247实现,步骤S2249可以由第四确定单元2249实现。
如此,可以确定图像中的光源位置。
在某些实施方式中,确定图像中的光源位置的方法与上述确定人像区域中的光源位置的方法类似,在此不做赘述。
请参阅图15,在某些实施方式中,步骤S226包括以下步骤:
S2262:根据图像的光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域;
S2264:将高亮区域的基色通道像素平均值减去中亮区域的基色通道像素平均值以确定图像的光源的颜色;和
S2266:根据图像的光源的颜色确定图像的光源的色温。
请参阅图16,在某些实施方式中,第二确定模块226包括第五确定单元2262、第二处理单元2264和第六确定单元2266。第五确定单元2262用于根据图像的光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域。第二处理单元2264用于将高亮区域的基色通道像素平均值减去中亮区域的基色通道像素平均值以确定图像的光源的颜色。第六确定单元2266用于根据图像的光源的颜色确定图像的光源的色温。
也即是说,步骤S2262可以由第五确定单元2262实现,步骤S2264可以由第二处理单元2264实现,步骤S2266可以由第六确定单元2266实现。
如此,可以通过高亮区域和中亮区域确定图像的光源的颜色和色温。
在某些实施方式中,通过高亮区域和中亮区域确定图像的光源的颜色和色温的方法与上述通过高亮区域和中亮区域确定人像区域的光源的颜色和色温的方法类似,在此不做赘述。
上述图像处理装置200中各个模块的划分仅用于举例说明,在其他实施例中,可将图像处理装置200按照需要划分为不同的模块,以完成上述图像处理装置200的全部或部分功能。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当计算机可执行指令被一个或多个处理器执行时,使得处理器执行以下步骤:
S212:处理图像以判断图像中是否存在人脸;
S214:在图像中存在人脸时获取图像中的人像区域;
S216:处理人像区域以检测人像区域的光源;
S218:确定人像区域的光源的颜色以确定人像区域的光源的色温;和
S222:根据人像区域的光源的色温对图像进行白平衡处理。
图17为一个实施例中计算机设备的内部结构示意图。如图17所示,该计算机设备1000包括通过系统总线510连接的处理器520、存储器530(例如为非易失性存储介质)、内存储器540、显示屏550和输入装置560。其中,计算机设备1000的存储器530存储有操作系统和计算机可读指令。该计算机可读指令可被处理器520执行,以实现本申请实施方式的图像处理方法。该处理器520用于提供计算和控制能力,支撑整个计算机设备1000的运行。计算机设备1000的内存储器530为存储器520中的计算机可读指令的运行提供环境。计算机设备1000的显示屏550可以是液晶显示屏或者电子墨水显示屏等,输入装置560可以是显示屏550上覆盖的触摸层,也可以是计算机设备1000外壳上设置的按键、轨迹球或触控板,也可以是外接的键盘、触控板或鼠标等。该计算机设备1000可以是手机、平板电脑、笔记本电脑、个人数字助理或穿戴式设备(例如智能手环、智能手表、智能头盔、智能眼镜)等。本领域技术人员可以理解,图17中示出的结构,仅仅是与本申请方案相关的部分结构的示意图,并不构成对本申请方案所应用于其上的计算机设备1000的限定,具体的计算机设备1000可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
请参阅图18,本申请实施例的计算机设备1000中包括图像处理电路800,图像处理电路800可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图18为一个实施例中图像处理电路800的示意图。如图18所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图18所示,图像处理电路800包括ISP处理器810(ISP处理器810可为处理器520或处理器520的一部分)和控制逻辑器820。摄像头830捕捉的图像数据首先由ISP处理器810处理,ISP处理器810对图像数据进行分析以捕捉可用于确定摄像头830的一个或多个控制参数的图像统计信息。摄像头830可包括一个或多个透镜832和图像传感器834。图像传感器834可包括色彩滤镜阵列(如Bayer滤镜),图像传感器834可获取每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器810处理的一组原始图像数据。传感器840(如陀螺仪)可基于传感器840接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器810。传感器840接口可以为SMIA(StandardMobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器834也可将原始图像数据发送给传感器840,传感器840可基于传感器840接口类型把原始图像数据提供给ISP处理器810,或者传感器840将原始图像数据存储到图像存储器850中。
ISP处理器810按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器810可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器810还可从图像存储器850接收图像数据。例如,传感器840接口将原始图像数据发送给图像存储器850,图像存储器850中的原始图像数据再提供给ISP处理器810以供处理。图像存储器850可为存储器530、存储器530的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器834接口或来自传感器840接口或来自图像存储器850的原始图像数据时,ISP处理器810可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器850,以便在被显示之前进行另外的处理。ISP处理器810从图像存储器850接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器810处理后的图像数据可输出给显示器870(显示器870可包括显示屏550),以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器810的输出还可发送给图像存储器850,且显示器870可从图像存储器850读取图像数据。在一个实施例中,图像存储器850可被配置为实现一个或多个帧缓冲器。此外,ISP处理器810的输出可发送给编码器/解码器860,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器870设备上之前解压缩。编码器/解码器860可由CPU或GPU或协处理器实现。
ISP处理器810确定的统计数据可发送给控制逻辑器820单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜832阴影校正等图像传感器834统计信息。控制逻辑器820可包括执行一个或多个例程(如固件)的处理元件和/或微控制器,一个或多个例程可根据接收的统计数据,确定摄像头830的控制参数及ISP处理器810的控制参数。例如,摄像头830的控制参数可包括传感器840控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜832控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜832阴影校正参数。
以下为运用图18中图像处理技术实现图像处理方法的步骤:
S212:处理图像以判断图像中是否存在人脸;
S214:在图像中存在人脸时获取图像中的人像区域;
S216:处理人像区域以检测人像区域的光源;
S218:确定人像区域的光源的颜色以确定人像区域的光源的色温;和
S222:根据人像区域的光源的色温对图像进行白平衡处理。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)等。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (14)

1.一种图像处理方法,其特征在于,所述图像处理方法包括以下步骤:
处理图像以判断所述图像中是否存在人脸;
在所述图像中存在所述人脸时获取所述图像中的人像区域;
处理所述人像区域以检测所述人像区域的光源;
确定所述人像区域的光源的颜色以确定所述人像区域的光源的色温;和
根据所述人像区域的光源的色温对所述图像进行白平衡处理。
2.根据权利要求1所述的图像处理方法,其特征在于,所述处理所述人像区域以检测所述人像区域的光源的步骤包括以下步骤:
将所述人像区域分成多个区域;
根据每个所述区域的直方图判断所述区域是否为包括所述人像区域的光源的目标区域;
判断是否存在相邻的多个所述目标区域;
在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述人像区域的光源;和
在不存在相邻的多个所述目标区域时将所述目标区域确定为所述人像区域的光源。
3.根据权利要求1所述的图像处理方法,其特征在于,所述确定所述人像区域的光源的颜色以确定所述人像区域的光源的色温的步骤包括以下步骤:
根据所述人像区域的光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域;
将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定所述人像区域的光源的颜色;和
根据所述人像区域的光源的颜色确定所述人像区域的光源的色温。
4.根据权利要求1所述的图像处理方法,其特征在于,在所述处理图像以判断所述图像中是否存在人脸的步骤后包括以下步骤:
在所述图像中不存在所述人脸时处理所述图像以检测所述图像的光源;
确定所述图像的光源的颜色以确定所述图像的光源的色温;和
根据所述图像的光源的色温对所述图像进行白平衡处理。
5.根据权利要求4所述的图像处理方法,其特征在于,所述在所述图像中不存在所述人脸时处理所述图像以检测所述图像的光源的步骤包括以下步骤:
将所述图像分成多个区域;
根据每个所述区域的直方图判断所述区域是否为包括所述图像的光源的目标区域;
判断是否存在相邻的多个所述目标区域;
在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述图像的光源;和
在不存在相邻的多个所述目标区域时将所述目标区域确定为所述图像的光源。
6.根据权利要求4所述的图像处理方法,其特征在于,所述确定所述图像的光源的颜色以确定所述图像的光源的色温的步骤包括以下步骤:
根据所述图像的光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域;
将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定所述图像的光源的颜色;和
根据所述图像的光源的颜色确定所述图像的光源的色温。
7.一种图像处理装置,其特征在于,所述图像处理装置包括:
判断模块,所述判断模块用于处理图像以判断所述图像中是否存在人脸;
获取模块,所述获取模块用于在所述图像中存在所述人脸时获取所述图像中的人像区域;
第一处理模块,所述第一处理模块用于处理所述人像区域以检测所述人像区域的光源;
第一确定模块,所述第一确定模块用于确定所述人像区域的光源的颜色以确定所述人像区域的光源的色温;和
第二处理模块,所述第二处理模块用于根据所述人像区域的光源的色温对所述图像进行白平衡处理。
8.根据权利要求7所述的图像处理装置,其特征在于,所述第一处理模块包括:
第一划分单元,所述第一划分单元用于将所述人像区域分成多个区域;
第一判断单元,所述第一判断单元用于根据每个所述区域的直方图判断所述区域是否为包括所述人像区域的光源的目标区域;
第二判断单元,所述第二判断单元用于判断是否存在相邻的多个所述目标区域;
第一拼接单元,所述第一拼接单元用于在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述人像区域的光源;和
第一确定单元,所述第一确定单元用于在不存在相邻的多个所述目标区域时将所述目标区域确定为所述人像区域的光源。
9.根据权利要求7所述的图像处理装置,其特征在于,所述第一确定模块包括:
第二确定单元,所述第二确定单元用于根据所述人像区域的光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域;
第一处理单元,所述第一处理单元用于将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定所述人像区域的光源的颜色;和
第三确定单元,所述第三确定单元用于根据所述人像区域的光源的颜色确定所述人像区域的光源的色温。
10.根据权利要求7所述的图像处理装置,其特征在于,图像处理装置包括:
第三处理模块,所述第三处理模块用于在所述图像中不存在所述人脸时处理所述图像以检测所述图像的光源;
第二确定模块,所述第二确定模块用于确定所述图像的光源的颜色以确定所述图像的光源的色温;和
第四处理模块,所述第四处理模块用于根据所述图像的光源的色温对所述图像进行白平衡处理。
11.根据权利要求10所述的图像处理装置,其特征在于,所述第三处理模块包括:
第二划分单元,所述第二划分单元用于将所述图像分成多个区域;
第三判断单元,所述第三判断单元用于根据每个所述区域的直方图判断所述区域是否为包括所述图像的光源的目标区域;
第四判断单元,所述第四判断单元用于判断是否存在相邻的多个所述目标区域;
第二拼接单元,所述第二拼接单元用于在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述图像的光源;和
第四确定单元,所述第四确定单元用于在不存在相邻的多个所述目标区域时将所述目标区域确定为所述图像的光源。
12.根据权利要求10所述的图像处理装置,其特征在于,所述第二确定模块包括:
第五确定单元,所述第五确定单元用于根据所述图像的光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域;
第二处理单元,所述第二处理单元用于将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定所述图像的光源的颜色;和
第六确定单元,所述第六确定单元用于根据所述图像的光源的颜色确定所述图像的光源的色温。
13.一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行权利要求1至6中任一项所述的图像处理方法。
14.一种计算机设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行权利要求1至6中任一项所述的图像处理方法。
CN201711423753.3A 2017-12-25 2017-12-25 图像处理方法及装置、计算机可读存储介质和计算机设备 Active CN107959843B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711423753.3A CN107959843B (zh) 2017-12-25 2017-12-25 图像处理方法及装置、计算机可读存储介质和计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711423753.3A CN107959843B (zh) 2017-12-25 2017-12-25 图像处理方法及装置、计算机可读存储介质和计算机设备

Publications (2)

Publication Number Publication Date
CN107959843A true CN107959843A (zh) 2018-04-24
CN107959843B CN107959843B (zh) 2019-07-05

Family

ID=61956361

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711423753.3A Active CN107959843B (zh) 2017-12-25 2017-12-25 图像处理方法及装置、计算机可读存储介质和计算机设备

Country Status (1)

Country Link
CN (1) CN107959843B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109035288A (zh) * 2018-07-27 2018-12-18 北京市商汤科技开发有限公司 一种图像处理方法及装置、设备和存储介质
CN109151428A (zh) * 2018-08-30 2019-01-04 Oppo广东移动通信有限公司 自动白平衡处理方法、装置以及计算机存储介质
CN114374793A (zh) * 2021-12-17 2022-04-19 深圳云天励飞技术股份有限公司 曝光控制方法、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101039439A (zh) * 2007-04-23 2007-09-19 北京中星微电子有限公司 一种实现白平衡校正的方法及装置
CN106534835A (zh) * 2016-11-30 2017-03-22 珠海市魅族科技有限公司 一种图像处理方法以及装置
CN106851121A (zh) * 2017-01-05 2017-06-13 广东欧珀移动通信有限公司 控制方法及控制装置
CN106973278A (zh) * 2014-11-11 2017-07-21 怀效宁 一种参照人脸色彩特征的自动白平衡装置及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101039439A (zh) * 2007-04-23 2007-09-19 北京中星微电子有限公司 一种实现白平衡校正的方法及装置
CN106973278A (zh) * 2014-11-11 2017-07-21 怀效宁 一种参照人脸色彩特征的自动白平衡装置及方法
CN106534835A (zh) * 2016-11-30 2017-03-22 珠海市魅族科技有限公司 一种图像处理方法以及装置
CN106851121A (zh) * 2017-01-05 2017-06-13 广东欧珀移动通信有限公司 控制方法及控制装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109035288A (zh) * 2018-07-27 2018-12-18 北京市商汤科技开发有限公司 一种图像处理方法及装置、设备和存储介质
CN109035288B (zh) * 2018-07-27 2024-04-16 北京市商汤科技开发有限公司 一种图像处理方法及装置、设备和存储介质
CN109151428A (zh) * 2018-08-30 2019-01-04 Oppo广东移动通信有限公司 自动白平衡处理方法、装置以及计算机存储介质
CN114374793A (zh) * 2021-12-17 2022-04-19 深圳云天励飞技术股份有限公司 曝光控制方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN107959843B (zh) 2019-07-05

Similar Documents

Publication Publication Date Title
CN108174172B (zh) 拍摄方法及装置、计算机可读存储介质和计算机设备
CN107959851B (zh) 色温检测方法及装置、计算机可读存储介质和计算机设备
CN108012134B (zh) 拍摄方法及装置、计算机可读存储介质和计算机设备
CN108322669A (zh) 图像的获取方法及装置、成像装置、计算机可读存储介质和计算机设备
CN107424198A (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN107872663B (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN108419022A (zh) 控制方法、控制装置、计算机可读存储介质和计算机设备
CN107800971B (zh) 全景拍摄的自动曝光控制处理方法、装置及设备
CN108063926A (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN108833802A (zh) 曝光控制方法、装置和电子设备
CN107317967A (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN107959843B (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN108900785A (zh) 曝光控制方法、装置和电子设备
CN107194901A (zh) 图像处理方法、装置、计算机设备和计算机可读存储介质
CN107948617A (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
CN107563979A (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
CN108012135A (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN107801011A (zh) 全景拍摄的白平衡处理方法、装置及设备
CN108063934A (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN107465903A (zh) 图像白平衡方法、装置和计算机可读存储介质
CN108259754A (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN108174173A (zh) 拍摄方法及装置、计算机可读存储介质和计算机设备
CN108156434B (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN107341782A (zh) 图像处理方法、装置、计算机设备和计算机可读存储介质
CN108063933A (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant