CN101124611A - 颜色增益值的自动白平衡 - Google Patents
颜色增益值的自动白平衡 Download PDFInfo
- Publication number
- CN101124611A CN101124611A CNA2006800054024A CN200680005402A CN101124611A CN 101124611 A CN101124611 A CN 101124611A CN A2006800054024 A CNA2006800054024 A CN A2006800054024A CN 200680005402 A CN200680005402 A CN 200680005402A CN 101124611 A CN101124611 A CN 101124611A
- Authority
- CN
- China
- Prior art keywords
- pixel
- value
- local
- window
- yield value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 41
- 238000004458 analytical method Methods 0.000 claims abstract description 12
- 238000004590 computer program Methods 0.000 claims description 41
- 238000012545 processing Methods 0.000 claims description 14
- 238000003384 imaging method Methods 0.000 description 26
- 230000008569 process Effects 0.000 description 11
- 238000012937 correction Methods 0.000 description 7
- 238000005286 illumination Methods 0.000 description 7
- 230000015654 memory Effects 0.000 description 7
- 238000003672 processing method Methods 0.000 description 7
- 238000001228 spectrum Methods 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000003595 spectral effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000011282 treatment Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 240000001439 Opuntia Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000003760 hair shine Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000001915 proofreading effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/40—Image enhancement or restoration using histogram techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/6027—Correction or control of colour gradation or colour contrast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
- Facsimile Image Signal Circuits (AREA)
- Image Processing (AREA)
Abstract
一种用于利用像素对图像执行白平衡操作的方法和有关装置,其中先确定为图像的基本上所有像素所共用的全局颜色增益值。然后基于对包括图像的单独像素和多个相邻像素的局部窗口的分析为所述单独像素确定局部颜色增益值。随后,为图像的单独像素将最终颜色增益值确定为全局颜色增益值和局部颜色增益值的加权平均值,并且使用最终颜色增益值对图像来执行白平衡操作。
Description
技术领域
本发明涉及图像重建并且特别地涉及图像颜色的自动白平衡。
背景技术
在彩色图像处理中具有挑战性的问题之一是当在存在具有某些光谱性质的光源情况下执行成像时调整所捕获的图像的颜色增益以便补偿成像传感器可靠地再现颜色的能力的变化。这些光谱性质也意味着照射光源的色温。成像传感器在暴露于不同类型的普通照射源时可能在它们的光谱响应方面具有显著差异。传感器响应也通常为非线性的,因此依赖于传入光的量和数个其它环境条件。出于这些原因,有必要在成像系统中校正这一问题,而与这一点有关的操作广义地称为白平衡。为了补偿照射光谱的变化,应当调整颜色处理系统和/或成像器的增益。通常执行这一调整以校正图像的总照度(亮度)以及接近所感知的颜色在成像的场景中可接受的再现。出于这一目的,已经开发各种自动白平衡(AWB)方法。在多数相机系统中,AWB是图像重建链完整的一部分并且用来保证即使已经在变化的闪光条件下(例如在阳光下或者在人工闪光条件下)记录该图像仍将正确地再现所成像的场景的颜色。AWB限定了将与各色成分即红色(R)、绿色(G)和蓝色(B)相关联的偏移和增益值。其结果限定了图像的色平衡。
当照射源的光谱对于图像重建设备是未知的时候,于是基于对所捕获的图像本身的分析来执行AWB调整。这些AWB算法通常基于将对与各色成分相关联的唯一全局偏移和增益值最终进行限定的直方图测量。这一方式基于在复杂图像中所有颜色在图像的所有部分中都相当等同地来表示这一假设。由此,与图像中所有RGB色成分相关联的增益值能够限定为遍及整个图像区域的常数。在这一方式中,对整个图像全局地进行自动白平衡校正。
如果所成像的场景包含颜色有变和不同的对象的大型集合或者甚至大的灰色区域,则将基本上正确地再现图像的颜色。然而,如果图像包含任何大的基本上单色的区域,例如具有大块蓝天部分的风景,或者如果在不均匀的照射条件下拍摄图像,则常规方式失效。这里,不均匀的照射是指如下情形,在这些情形下通过具有不同光谱和/或强度性质的光源来照射图像的不同部分。
为了增强对图像的照射光谱差异的分析,US20030222992提出将图像划分成子帧并且仅将图像中能够被清晰地识别为非单色的那些部分用于白平衡校正计算。然后,如果图像平均值的变化归因于照射光谱的变化而不是归因于图像中存在大的单色区域则能够使图像的整体白平衡移位。
然而,与上述布置相关联的问题在于子帧划分仅用来包括或者排出图像的某些部分用于全局AWB校正分析。在已经执行子帧分析之后,所述方法仍然为整个图像确定全局AWB校正。结果,如果图像包括具有相对照度差异的区域,则针对整个图像而应用的这些全局AWB校正参数不能补偿这些差异。
发明内容
现在已经发明一种用于为图像执行自动白平衡校正的改进方法和一种用于实施该方法的装置。作为本发明的不同方面,介绍了其特征在于独立权利要求中公开的特征的一种方法、一种图像处理设备、一种计算机程序和一种图像处理系统。
在从属权利要求中公开了本发明的一些实施例。
本发明基于如下事项:对图像执行白平衡操作,使得在一开始为图像的各色成分全局地确定第一增益值。然后通过先确定为图像的基本上所有像素所共用的全局颜色增益值、然后基于对包括图像的单独像素和多个相邻像素的局部窗口的分析为所述单独像素确定局部颜色增益值来开始确定局部增益值的操作。最后,为图像的单独像素将第三即最终增益值确定为全局颜色增益值和局部颜色增益值的加权平均值,并且使用最终颜色增益值来执行白平衡操作。
根据一个实施例,在确定局部增益值的操作过程中,先将图像划分成各包括数个像素的多个块,然后确定所述局部窗口使得它包括多个所述块。
根据一个实施例,白平衡操作还包括:为各块收集局部直方图的值;以及为块的色成分确定具体块的增益值。
根据一个实施例,为单独像素确定所述局部增益值还包括:过滤具体决的增益值;为各像素确定从该像素到所述局部窗口所包括的块的中央点的距离;以及以从对应块的中央点到所述像素的距离来内插所过滤的具体块的增益值。
根据一个可选实施例,在确定局部增益值的操作过程中,确定所述局部窗口使得它包括在将要为其局部地确定第二增益值的像素周围的可移动窗口,该窗口包括多个像素。
然后,为单独像素确定所述局部增益值包括:根据位于第一窗口位置的可移动窗口的像素为第一像素收集局部直方图的值;将用于第一像素的所述局部直方图的值存储于第一缓存器中;以及为所述第一像素局部地确定所述第二增益值。
根据一个实施例,为单独像素确定所述局部增益值还包括:将所述可移动窗口移动到与将要为其局部地确定第二增益值的第二像素相对应的第二位置;将用于第一像素的局部直方图的值拷贝到第二缓存器中;更新第二缓存器中的局部直方图的值使得第一窗口位置中不属于第二窗口位置的像素从局部直方图的值递减,而第二窗口位置中不属于第一窗口位置的像素递增到局部直方图的值;以及为所述第二像素局部地确定所述第二增益值。
根据一个实施例,该方法也能够应用于为图像的单独像素将偏移值确定为局部偏移值和全局偏移值的加权平均值。
本发明的方法和布置提供了如下优点:平滑变化的增益值将减少阴影问题并且校正跨图像区域的不均匀闪光。另外,通过调整单个参数,能够根据成像设备的性质或者使用条件来调节全局增益值与局部增益值之间的加权平均值。该算法在相机没有配备闪光灯时或者在不可能使用这些闪光灯时(例如在近距离成像时)是尤其有用的。该算法也能够用来补偿其它光学阴影问题。另外,开销计算和存储要求是适度的。
附图说明
在下文中将参照附图借助优选实施例更具体地描述本发明,在附图中:
图1是图示了根据本发明实施例的图像处理方法的流程图;
图2a和图2b分别示出了利用现有技术的方法和根据本发明实施例来重建的图像;
图3是图示了根据本发明另一实施例的图像处理方法的流程图;
图4图示了根据图3的实施例的一些细节的实施;以及
图5示出了根据本发明的成像设备的框图。
具体实施方式
图1图示了根据本发明实施例的图像处理方法,该方法可以由与图像传感器一起操作的微处理器或者微控制器来实现。在已经使用图像传感器捕获图像之后的任何时间都可以将根据本发明的AWB校正引入到图像中。因此,本发明可以实施到相机设备中或者也能够实施到对提供给其的数字图像进行处理的任何其它设备或者系统中。
当通过图像传感器拍摄图像或者以别的方式提供图像以供处理(100)时开始图像处理方法。先全局地分析图像数据(101)。这包括为各原始图像F收集直方图,所述直方图对应于所分析的色成分(红色、绿色、蓝色):HistR、HistG、HistB。这些直方图通过对图像中具有相同特征的像素的数目进行计数来表征图像的色组成。
然后,通过使用上述直方图来计算全局增益值和偏移值(102),这些全局增益值和偏移值对应于各色成分:(GR,OfsR)、(GG,OfsG)、(GB,OfsB)。因而,这一步骤提供了如下文所讨论的那样在该方法的后续阶段中需要的针对全部图像数据而导出的全局参数。
在下一步骤(104)中,将图像划分成优选为但并非必须大小相等的适当数目的块Bk。这些块优选地形成M×N个矩形的矩阵,使得k={1,...,MN}是贯穿图像所有块的索引。例如,对于VGA图像(分辨率640×480),图像可以被划分成64个块,即8×8个块,各块包括80×60个像素。可以根据图像的类型、可用的处理能力、图像再现的所需准确度等来调整块的数目以及它们以像素为单位的大小。
为各块Bk(k={1,...,MN})收集局部直方图的值(106),这些局部直方图的值对应于特定块的各色成分:HistR(Bk)、HistG(Bk)、HistB(Bk)。这些局部化直方图用来计算对应于各色成分的局部增益:GR(Bk)、GG(Bk)、GB(Bk)。如这里公开的同一方法可以应用于为各色成分确定局部偏移值,但是为了说明实施例,仅更具体地公开对色增益值的确定。
为了计算所述局部增益值,可以使用数种方法。一种方法是简单的代数过程,该过程对局部直方图的中值相对于全局直方图的中值数值进行均衡。
然后可选地,能够通过复制块边界上的值来填充块增益值的M×N的增益“图像”。该填充提供了恰当地平滑块边界以便保证正确处理边界区域这一优点。结果,创建并且在存储器中存储大小为(M1×N1)的所填充的增益图像(IR,IQ,IB)(108)。接着,能够可选地使用平滑过滤器来平滑所填充的增益“图像”,该过滤器可以例如是具有归一化值[1/12,1/12,1/12;1/12,1/3,1/12;1/12,1/12,1/12]的简易3×3二维卷积过滤器。该过滤显著地增加了系统针对跨块的突然变化以及可能在罕见的场景条件下发生的任何可能错误而言的鲁棒性。此外,填充和过滤没有造成显著的计算成本。
为图像F的各像素(x,y)限定由围绕块组成的窗口(110),由此围绕块应当对应于所填充的增益图像(IR,IG,IB)的索引。确定从所述像素(x,y)到各围绕块中央点的距离di。通过以它们的对应距离在窗口中内插(IR,IG,IB)的值来计算局部增益值。作为计算结果,获得针对各像素(x,y)的局部增益值GRL(x,y)、GGL(x,y)、GBL(x,y)。
在最后步骤(112)中,将在各像素位置(x,y)处的最终增益值计算为全局增益值与局部增益值之间的加权平均值,这可以以一般化的形式表达如下:
G(x,y)=k*Gglobal+(1-k)*Glocal(x,y),0≤k≤1
更具体而言,为各色成分(R,G,B)相应地计算在各像素位置(x,y)处的最终增益值如下:
GR(x,y)=k*GR+(1-k)*GRL(x,y),0≤k≤1
GG(x,y)=k*GG+(1-k)*GGL(x,y),0≤k≤1
GB(x,y)=k*GL+(1-k)*GBL(x,y),0≤k≤1
由此,通过调整参数k,能够根据例如是包括相机的各种移动电话这样的成像设备的性质或者使用条件来调节全局增益值与局部增益值之间的加权平均值。例如,对于不含闪存的成像设备,可能优选的是比在包括闪存的成像设备的情况下更注重于局部增益值。使用条件的一个例子是近距离成像,由此通常不能使用闪光灯。
使用上述局部化增益值来照常计算AWB过程的输出值即局部化AWB校正参数。根据上述公式可见AWB过程造成在空间上可变的增益值,这将减少阴影问题并且校正跨图像区域的不均匀闪光。
根据实施例的图像处理方法的效果可以通过图2a和图2b来图示。图2a示出了完全使用全局AWB过程即常规AWB过程来重建的图像。图2b示出了利用根据本发明的空间AWB过程来重建的对应图像。通过比较这些图像可以清楚地看到图像质量的改进。在图2a中图像下部分的细节由于干扰光反射而模糊严重,而在图2b中已经校正这一光反射并且能够清楚地区分细节。该算法也可以用来补偿其它光学阴影问题。
注意到图1的实施例是用于本发明的图像处理方法的仅一个可能实施。可以以数种方式来实现通过使用局部增益值来施加空间AWB校正这一发明思想。图3图示了本发明的另一实施例。
图3的方法提出用于收集直方图统计的另一实施。因此当与图1相比时,如图1中说明的那样进行如下步骤:提供数字图像(步骤300)、为全局分析的各色成分(红色、绿色、蓝色)收集直方图:HistR、HistG、HistB(步骤301)以及通过使用直方图来计算全局增益值和偏移值(步骤302)。
然后,取代了将图像划分成多个块(比较图1中的步骤104),将滑动窗口的方法应用于收集局部直方图的值。该窗口优选为大小为M×N个像素的矩形形状的矩阵。为各窗口位置收集直方图值,使得可以为位于窗口中央点的像素计算局部增益值。例如在图像的左上角开始收集局部直方图的值,并且以光栅扫描的次序执行窗口滑动。自然而言,也能够使用任何其它开始点和扫描次序。该实施优选地包括两个缓存存储器,其中存储当前窗口位置和下一窗口位置的直方图值。
一般而言,可以通过参照图4来图示滑动窗口的原理。向图像的任意位置k施加滑动窗口Wk,该窗口覆盖M×N个像素,使得最后(最左侧)垂直线包括N个像素值VLLk的阵列。针对窗口位置Wk收集直方图的值Hist(Wk)并且将这些值存储于第一缓存存储器中。然后为像素(x,y)计算局部增益值GRL(x,y)、GGL(x,y)、GBL(x,y)。
然后向右滑动窗口到下一位置Wk+1。拷贝直方图的值Hist(Wk)并且将它作为Hist(Wk+1)=Hist(Wk)存储到第二缓存存储器。然后更新直方图的值Hist(Wk+1)以反应所改变的位置,使得对于各i=1至N(窗口的垂直线的大小)VLLk(i)从Hist(Wk+1)递减,并且对应地,VLNk(i)递增到Hist(Wk+1)。换而言之,从更新的直方图值中消除窗口位置Wk的最左垂直线的效果而向更新的直方图值Hist(Wk+1)添加窗口位置Wk+1的最右垂直线的效果。然后为像素(x+1,y+1)计算局部增益值GRL(x+1,y)、GGL(x+1,y)、GBL(x+1,y)。
然后以与图1中公开的方式(步骤112)相同的方式将在各像素位置(x,y)处的最终增益值计算为全局增益值与局部增益值之间的加权平均值。
作为上述两个实施例的组合可以实施又一实施例。据此,将图像划分成覆盖整个图像区域的块,但是对于给定数目的块,将各块的大小限定得较大,使得这些块部分地重叠,至少与一个相邻块重叠。换而言之,在块的边界区域中的像素对于至少两个相邻块而言是共同的。这增加了照射光谱的局部变化对AWB计算的影响,由此造成更好的空间图像重建。
如上所述,各上述实施例也能够简易地应用于为色成分确定偏移值,由此最终偏移值将计算为图像的局部偏移值和全局偏移值的加权平均值。
对于各上述实施例,开销计算和存储器要求是适度的。
对于没有完全意识到照射问题或者照相原理的用户,所提出的方法实现了以改进的质量来拍摄图像。该方法对于诸如文档成像这样的应用是特别有用的,在这些应用中成像设备通常定位于光源(例如,吊灯)与待成像的文档之间,由此造成有一些阴影效果到文档上。一般而言,该方法在将需要后处理操作的任何应用中都是有用的,该后处理操作如分割、识别、分类等。
图5图示了将本发明的特征并入其中的成像设备500的例子。成像设备500例如可以包括相机系统、移动电话、计算机系统或者任何其它与成像有关的电子装置。该成像设备包括用于将来自待成像的物体的光引向图像传感器504的透镜系统502。该图像传感器可以例如是CMOS传感器或者电荷耦合器件(CCD),并且它可以与处理器如CPU、数字信号处理器或者微处理器组合形成实施为单个集成电路的图像感测单元504。
该成像设备还包括用于将在图像感测单元504处接收的图像信号转换成数字信号的模拟到数字转换器506。然后在处理单元508如CPU中处理数字图像信号。包括AWB处理在内的处理优选地作为在处理单元508中执行的计算机程序代码来执行。可选地,具体的硬件组件可以用于处理,或者也可以使用硬件解决方案和软件解决方案的组合。因而,处理单元508然后可以包括用于执行如上所述AWB过程的具体电路。该成像设备还可以包括用于将图像数据转换成适当文件格式以便向用户输出或者显示的转换单元510以及用于控制整个成像装置500的操作的控制器512。
如上所述,优选地通过执行存储于处理单元508中的存储器(MEM)内的计算机软件代码来实施上述实施例。由此,用于实现上述图像处理方法的装置通常实施为计算机软件代码。计算机软件可以存储于任何存储器装置如PC的硬盘或者CD-ROM盘中,从该存储器装置能够将它加载到成像设备的存储器中。如果成像设备包括通信装置,即成像设备是包括相机的移动电话,则也能够例如使用TCP/IP协议栈通过网络来加载计算机软件。
由此,用于根据本发明的第一方面对图像执行白平衡操作的计算机程序可以优选地包括:用于为图像的各色成分全局地确定第一增益值的计算机程序代码部分;用于为图像的各像素确定包括多个相邻像素的局部窗口和用于所述局部窗口的局部直方图的计算机程序代码部分;用于基于所述局部直方图为图像的各像素局部地确定第二增益值的计算机程序代码部分;用于将用于图像各像素的第三增益值确定为第二增益值和第一增益值的加权平均值的计算机程序代码部分;以及用于使用第三增益值来执行白平衡操作的计算机程序代码部分。
对于本领域技术人员不言而喻,随着技术的进步,本发明的概念能够用各种方式来实施。本发明及其实施例不限于上述例子而是可以在权利要求的范围内变化。
Claims (29)
1.一种用于利用像素对图像执行白平衡操作的方法,该方法包括:
确定为所述图像的基本上所有像素所共用的全局颜色增益值;
基于对包括所述图像的单独像素和多个相邻像素的局部窗口的分析为所述单独像素确定局部颜色增益值;
为所述图像的单独像素将最终颜色增益值确定为所述全局颜色增益值和所述局部颜色增益值的加权平均值;以及
使用所述最终颜色增益值对所述图像执行白平衡操作。
2.根据权利要求1所述的方法,其中确定局部颜色增益值的所述步骤还包括:
将所述图像划分成各包括数个像素的多个块;以及
确定所述局部窗口使得它包括多个所述块。
3.根据权利要求2所述的方法,还包括:
为各块收集局部直方图的值;以及
为所述块的色成分确定具体块的颜色增益值。
4.根据权利要求3所述的方法,还包括:
过滤所述具体块的颜色增益值;
为单独像素确定从该像素到所述局部窗口所包括的所述块的中央点的距离;以及
以从对应块的中央点到所述像素的所述距离来内插所过滤的所述具体块的颜色增益值。
5.根据权利要求2、3或者4所述的方法,其中确定局部颜色增益值的所述步骤还包括将所述图像划分成数个像素的多个块使得所述块与至少一个相邻块部分地重合。
6.根据权利要求1所述的方法,其中确定局部颜色增益值的所述步骤还包括:
确定所述局部窗口使得它包括在将要为其确定所述局部颜色增益值的单独像素周围的可移动窗口,所述窗口包括多个像素。
7.根据权利要求6所述的方法,还包括:
根据位于第一窗口位置的所述可移动窗口的像素为第一像素收集局部直方图的值;
将用于所述第一像素的所述局部直方图的值存储于第一缓存器中;以及
为所述第一像素确定所述局部颜色增益值。
8.根据权利要求7所述的方法,还包括:
将所述可移动窗口移动到与将要为其确定所述局部颜色增益值的第二像素相对应的第二位置;
将用于所述第一像素的所述局部直方图的值拷贝到第二缓存器中;
更新所述第二缓存器中的所述局部直方图的值使得所述第一窗口位置中不属于所述第二窗口位置的像素从所述局部直方图的值递减,而所述第二窗口位置中不属于所述第一窗口位置的像素递增到所述局部直方图的值;以及
为所述第二像素确定所述局部颜色增益值。
9.根据任一前述权利要求所述的方法,其中:
所述方法应用于为所述图像的单独像素将偏移值确定为局部偏移值和全局偏移值的加权平均值。
10.一种图像处理设备,布置用以利用像素对图像执行白平衡操作,该设备包括:
第一确定装置,用于确定为所述图像的基本上所有像素所共用的全局颜色增益值;
第二确定装置,用于基于对包括所述图像的单独像素和多个相邻像素的局部窗口的分析为所述单独像素确定局部颜色增益值;
第三确定装置,用于为所述图像的单独像素将最终颜色增益值确定为所述全局颜色增益值和所述局部颜色增益值的加权平均值;以及
处理装置,用于使用所述最终颜色增益值执行白平衡操作。
11.根据权利要求10所述的设备,其中所述第二确定装置被布置用以:
将所述图像划分成各包括数个像素的多个块;以及
确定所述局部窗口使得它包括多个所述块。
12.根据权利要求11所述的设备,其中所述第二确定装置被布置用以:
为各块收集局部直方图的值;以及
为所述块的色成分确定具体块的增益值。
13.根据权利要求12所述的设备,其中所述第二确定装置还被布置用以:
过滤所述具体块的增益值;
为单独像素确定从该像素到所述局部窗口所包括的所述块的中央点的距离;以及
以从对应块的中央点到所述像素的所述距离来内插所过滤的所述具体块的增益值。
14.根据权利要求11、12或者13所述的设备,其中所述第二确定装置被布置用以:
将所述图像划分成多个块使得所述块与至少一个相邻块部分地重合。
15.根据权利要求10所述的设备,其中所述第二确定装置被布置用以:
确定所述局部窗口使得它包括在将要为其局部地确定所述第二增益值的像素周围的可移动窗口,所述窗口包括多个像素。
16.根据权利要求15所述的设备,其中所述第二确定装置被布置用以:
根据位于第一窗口位置的所述可移动窗口的像素为第一像素收集局部直方图的值;
将用于所述第一像素的所述局部直方图的值存储于第一缓存器中;以及
为所述第一像素确定所述局部颜色增益值。
17.根据权利要求16所述的设备,其中所述第二确定装置还被布置用以:
将所述可移动窗口移动到与将要为其局部地确定所述第二增益值的第二像素相对应的第二位置;
将用于所述第一像素的所述局部直方图的值拷贝到第二缓存器中;
更新所述第二缓存器中的所述局部直方图的值使得所述第一窗口位置中不属于所述第二窗口位置的像素从所述局部直方图的值递减,而所述第二窗口位置中不属于所述第一窗口位置的像素递增到所述局部直方图的值;以及
为所述第二像素确定所述局部颜色增益值。
18.根据权利要求10至17中任一权利要求所述的设备,所述设备被布置用以将用于所述图像的单独像素的偏移值确定为局部偏移值和全局偏移值的加权平均值。
19.一种用于利用像素对图像执行白平衡操作的计算机程序,该计算机程序包括:
用于确定为所述图像的基本上所有像素所共用的全局颜色增益值的计算机程序代码部分;
用于基于对包括所述图像的单独像素和多个相邻像素的局部窗口的分析为所述单独像素确定局部颜色增益值的计算机程序代码部分;
用于为所述图像的单独像素将最终颜色增益值确定为所述全局颜色增益值和所述局部颜色增益值的加权平均值的计算机程序代码部分;以及
用于使用所述最终颜色增益值对所述图像执行白平衡操作的计算机程序代码部分。
20.根据权利要求19所述的计算机程序,还包括:
用于将所述图像划分成各包括数个像素的多个块的计算机程序代码部分;以及
用于确定所述局部窗口使得它包括多个所述块的计算机程序代码部分。
21.根据权利要求20所述的计算机程序,还包括:
用于为各块收集局部直方图的值的计算机程序代码部分;以及
用于为所述块的色成分确定具体块的增益值的计算机程序代码部分。
22.根据权利要求21所述的计算机程序,还包括:
用于过滤所述具体块的增益值的计算机程序代码部分;
用于为单独像素确定从该像素到所述局部窗口所包括的所述块的中央点的距离的计算机程序代码部分;以及
用于以从对应块的中央点到像素的所述距离来内插所过滤的具体块的增益值的计算机程序代码部分。
23.根据权利要求20、21或者22所述的计算机程序,还包括:
用于将所述图像划分成多个块使得所述块与至少一个相邻块部分地重合的计算机程序代码部分。
24.根据权利要求19所述的计算机程序,还包括:
用于确定所述局部窗口使得它包括在将要为其局部地确定所述第二增益值的像素周围的可移动窗口的计算机程序代码部分,所述窗口包括多个像素。
25.根据权利要求24所述的计算机程序,还包括:
用于根据位于第一窗口位置的所述可移动窗口的像素为第一像素收集局部直方图的值的计算机程序代码部分;
用于将用于所述第一像素的所述局部直方图的值存储于第一缓存器中的计算机程序代码部分;以及
用于为所述第一像素确定所述局部颜色增益值的计算机程序代码部分。
26.根据权利要求25所述的计算机程序,还包括:
用于将所述可移动窗口移动到与将要为其确定所述局部颜色增益值的第二像素相对应的第二位置的计算机程序代码部分;
用于将用于所述第一像素的所述局部直方图的值拷贝到第二缓存器中的计算机程序代码部分;
用于更新所述第二缓存器中的所述局部直方图的值使得所述第一窗口位置中不属于所述第二窗口位置的像素从所述局部直方图的值递减,而所述第二窗口位置中不属于所述第一窗口位置的像素递增到所述局部直方图的值的计算机程序代码部分;以及
用于为所述第二像素确定所述局部颜色增益值的计算机程序代码部分。
27.根据前述权利要求19至26中任一权利要求所述的计算机程序,其中所述计算机程序被布置用以为所述图像的单独像素将偏移值确定为局部偏移值和全局偏移值的加权平均值。
28.根据前述权利要求19至27中任一权利要求所述的计算机程序,其中所述计算机程序可在根据权利要求10所述的图像处理设备中执行。
29.一种图像处理系统,布置用以利用像素对图像执行白平衡操作,该系统包括:
第一确定装置,用于确定为所述图像的基本上所有像素所共用的全局颜色增益值;
第二确定装置,用于基于对包括所述图像的单独像素和多个相邻像素的局部窗口的分析为所述单独像素确定局部颜色增益值;
第三确定装置,用于为所述图像的单独像素将最终颜色增益值确定为所述全局颜色增益值和所述局部颜色增益值的加权平均值;以及
处理装置,用于使用所述最终颜色增益值执行白平衡操作。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/031,493 | 2005-01-07 | ||
US11/031,493 US7394930B2 (en) | 2005-01-07 | 2005-01-07 | Automatic white balancing of colour gain values |
PCT/FI2006/050011 WO2006072671A1 (en) | 2005-01-07 | 2006-01-05 | Automatic white balancing of colour gain values |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101124611A true CN101124611A (zh) | 2008-02-13 |
CN101124611B CN101124611B (zh) | 2012-03-21 |
Family
ID=36647450
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2006800054024A Active CN101124611B (zh) | 2005-01-07 | 2006-01-05 | 颜色增益值的自动白平衡的方法和装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US7394930B2 (zh) |
EP (1) | EP1834302B1 (zh) |
CN (1) | CN101124611B (zh) |
WO (1) | WO2006072671A1 (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103517049A (zh) * | 2013-10-15 | 2014-01-15 | 上海交通大学 | 一种自动白平衡的方法及电路 |
CN101983510B (zh) * | 2008-04-08 | 2016-04-06 | 美商豪威科技股份有限公司 | 自适应局部白平衡调节的系统与方法 |
CN102957879B (zh) * | 2011-08-24 | 2017-03-29 | 现代摩比斯株式会社 | 图像传感器的像素间偏移校正设备及其校正方法 |
CN110290371A (zh) * | 2018-03-19 | 2019-09-27 | 株式会社东芝 | 图像信号处理装置及图像处理电路 |
CN110944116A (zh) * | 2019-11-08 | 2020-03-31 | 福州瑞芯微电子股份有限公司 | 基于白平衡的单个闪光灯补偿方法、装置、设备和介质 |
CN113035147A (zh) * | 2021-03-03 | 2021-06-25 | Tcl华星光电技术有限公司 | 显示面板的灰阶补偿方法及灰阶补偿装置 |
CN113850878A (zh) * | 2021-09-30 | 2021-12-28 | 福州大学 | 基于颜色直方图的非光源估计awb方法及系统 |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006121612A (ja) * | 2004-10-25 | 2006-05-11 | Konica Minolta Photo Imaging Inc | 撮像装置 |
JP4740602B2 (ja) * | 2005-01-19 | 2011-08-03 | イーストマン コダック カンパニー | オートホワイトバランス装置及びホワイトバランス調整方法 |
US20070081103A1 (en) * | 2005-10-11 | 2007-04-12 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
US8594445B2 (en) | 2005-11-29 | 2013-11-26 | Adobe Systems Incorporated | Fast bilateral filtering using rectangular regions |
JP2008009877A (ja) * | 2006-06-30 | 2008-01-17 | Brother Ind Ltd | 画像処理装置,画像処理方法およびプログラム |
US7889245B2 (en) * | 2007-01-12 | 2011-02-15 | Seiko Epson Corporation | Automatic white balancing of a digital image |
US7974487B2 (en) * | 2007-04-17 | 2011-07-05 | Kabushiki Kaisha Toshiba | System and method for image white balance adjustment |
JP4998287B2 (ja) * | 2008-01-25 | 2012-08-15 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
US8159616B2 (en) * | 2008-03-27 | 2012-04-17 | Bang & Olufsen A/S | Histogram and chrominance processing |
US8655097B2 (en) | 2008-08-22 | 2014-02-18 | Adobe Systems Incorporated | Adaptive bilateral blur brush tool |
US8315473B1 (en) * | 2008-08-22 | 2012-11-20 | Adobe Systems Incorporated | Variably fast and continuous bilateral approximation filtering using histogram manipulations |
US8717459B2 (en) * | 2008-12-11 | 2014-05-06 | Texas Instruments Incorporated | Method and apparatus for improving automatic white balance with scene information |
US8035698B2 (en) * | 2009-01-21 | 2011-10-11 | Seiko Epson Corporation | Joint automatic demosaicking and white balancing |
KR101030369B1 (ko) * | 2009-02-23 | 2011-04-20 | 인하대학교 산학협력단 | 영상 분류 장치 및 방법 |
JP4900419B2 (ja) * | 2009-05-20 | 2012-03-21 | カシオ計算機株式会社 | 画像処理装置、及び画像処理プログラム |
JP2014044345A (ja) * | 2012-08-28 | 2014-03-13 | Ricoh Co Ltd | 撮像装置 |
US20140267679A1 (en) * | 2013-03-13 | 2014-09-18 | Leco Corporation | Indentation hardness test system having an autolearning shading corrector |
CN103177694B (zh) * | 2013-04-18 | 2015-03-04 | 广州市观泰数字显示设备有限公司 | Led显示屏的调白平衡方法 |
CN108965846A (zh) * | 2018-09-07 | 2018-12-07 | 晶晨半导体(上海)股份有限公司 | 调节白平衡的方法、系统及显示器 |
KR20230074357A (ko) * | 2021-11-19 | 2023-05-30 | 삼성디스플레이 주식회사 | 표시 장치 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5223921A (en) * | 1990-04-27 | 1993-06-29 | Sanyo Electric Co., Ltd. | White balance adjusting apparatus for automatically adjusting white balance on the basis of a color information signal obtained from an image-sensing device |
JP2735003B2 (ja) * | 1994-09-28 | 1998-04-02 | 松下電器産業株式会社 | ホワイトバランス調整量演算装置 |
JP4239234B2 (ja) * | 1998-04-16 | 2009-03-18 | 株式会社ニコン | 電子スチルカメラ |
US6069972A (en) * | 1998-06-02 | 2000-05-30 | Intel Corporation | Global white point detection and white balance for color images |
KR100298070B1 (ko) * | 1998-08-28 | 2001-10-26 | 윤종용 | 비디오카메라의화이트밸런스보정방법 |
US6791606B1 (en) * | 2000-05-09 | 2004-09-14 | Eastman Kodak Company | Auto white balancing apparatus and method |
US6798449B2 (en) | 2001-01-18 | 2004-09-28 | Kinpo Electronics, Inc. | Automatic white-balance correction for digital camera |
JP2002232906A (ja) * | 2001-01-31 | 2002-08-16 | Ricoh Co Ltd | ホワイトバランス制御装置 |
JP4314822B2 (ja) * | 2002-02-13 | 2009-08-19 | 株式会社ニコン | 画像処理装置、画像処理方法、及び画像処理プログラム |
JP2004007133A (ja) | 2002-05-31 | 2004-01-08 | Minolta Co Ltd | 撮像装置 |
US7190394B2 (en) * | 2002-06-04 | 2007-03-13 | Micron Technology, Inc. | Method for statistical analysis of images for automatic white balance of color channel gains for image sensors |
US7236190B2 (en) | 2002-10-31 | 2007-06-26 | Freescale Semiconductor, Inc. | Digital image processing using white balance and gamma correction |
JP4158592B2 (ja) | 2003-04-25 | 2008-10-01 | 富士フイルム株式会社 | オートホワイトバランス調整方法及びこの方法が適用されたカメラ |
JP4269780B2 (ja) | 2003-05-26 | 2009-05-27 | 株式会社ニコン | 画像処理装置、電子カメラ、及び画像処理プログラム |
US7126644B2 (en) * | 2003-07-07 | 2006-10-24 | Destiny Technology Corporation | Rapid white balance method for color digital images |
US7317842B2 (en) * | 2003-10-30 | 2008-01-08 | Samsung Electronics Co., Ltd. | Global and local statistics controlled noise reduction system |
US7486819B2 (en) | 2003-12-23 | 2009-02-03 | Aptina Imaging Corporation | Sampling images for color balance information |
-
2005
- 2005-01-07 US US11/031,493 patent/US7394930B2/en active Active
-
2006
- 2006-01-05 EP EP06700069.5A patent/EP1834302B1/en active Active
- 2006-01-05 CN CN2006800054024A patent/CN101124611B/zh active Active
- 2006-01-05 WO PCT/FI2006/050011 patent/WO2006072671A1/en active Application Filing
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101983510B (zh) * | 2008-04-08 | 2016-04-06 | 美商豪威科技股份有限公司 | 自适应局部白平衡调节的系统与方法 |
CN102957879B (zh) * | 2011-08-24 | 2017-03-29 | 现代摩比斯株式会社 | 图像传感器的像素间偏移校正设备及其校正方法 |
CN103517049A (zh) * | 2013-10-15 | 2014-01-15 | 上海交通大学 | 一种自动白平衡的方法及电路 |
CN103517049B (zh) * | 2013-10-15 | 2015-06-24 | 上海交通大学 | 一种自动白平衡的方法及电路 |
CN110290371A (zh) * | 2018-03-19 | 2019-09-27 | 株式会社东芝 | 图像信号处理装置及图像处理电路 |
CN110944116A (zh) * | 2019-11-08 | 2020-03-31 | 福州瑞芯微电子股份有限公司 | 基于白平衡的单个闪光灯补偿方法、装置、设备和介质 |
CN110944116B (zh) * | 2019-11-08 | 2021-06-25 | 瑞芯微电子股份有限公司 | 基于白平衡的单个闪光灯补偿方法、装置、设备和介质 |
CN113035147A (zh) * | 2021-03-03 | 2021-06-25 | Tcl华星光电技术有限公司 | 显示面板的灰阶补偿方法及灰阶补偿装置 |
CN113035147B (zh) * | 2021-03-03 | 2022-04-26 | Tcl华星光电技术有限公司 | 显示面板的灰阶补偿方法及灰阶补偿装置 |
CN113850878A (zh) * | 2021-09-30 | 2021-12-28 | 福州大学 | 基于颜色直方图的非光源估计awb方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
US20060153444A1 (en) | 2006-07-13 |
CN101124611B (zh) | 2012-03-21 |
EP1834302A4 (en) | 2011-05-04 |
EP1834302B1 (en) | 2017-10-25 |
WO2006072671A1 (en) | 2006-07-13 |
EP1834302A1 (en) | 2007-09-19 |
US7394930B2 (en) | 2008-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101124611B (zh) | 颜色增益值的自动白平衡的方法和装置 | |
CN108024055B (zh) | 白平衡处理的方法、装置、移动终端和存储介质 | |
US20210192698A1 (en) | Image Processing Method, Electronic Device, and Non-Transitory Computer-Readable Storage Medium | |
CN106797437A (zh) | 使用多个图像的高动态范围图像合成 | |
CN110536068A (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
JP2002125136A (ja) | ディジタル画像の輝度調整のためのディジタル画像処理方法及び装置 | |
US8285135B2 (en) | Method and device for adjusting weighting values in light metering | |
CN107911625A (zh) | 测光方法、装置、可读存储介质和计算机设备 | |
CN107563976A (zh) | 美颜参数获取方法、装置、可读存储介质和计算机设备 | |
CN101753797A (zh) | 图像信号处理设备及方法和程序 | |
US6822690B2 (en) | Image processing apparatus, image pickup apparatus, and image processing method capable of eliminating effect of outside light | |
CN101569173A (zh) | 数字图像中降低的位置相关噪声 | |
CN1984260A (zh) | 自动曝光控制方法及自动曝光补偿装置 | |
CN107800971B (zh) | 全景拍摄的自动曝光控制处理方法、装置及设备 | |
CN107948617A (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
CN110881108B (zh) | 图像处理方法及图像处理装置 | |
US6954228B1 (en) | Image processing methods and apparatus | |
WO2002001209A1 (en) | Compensation system and related techniques for use in a printed circuit board inspection system | |
CN107911683A (zh) | 图像白平衡处理方法、装置、存储介质和电子设备 | |
CN107801011A (zh) | 全景拍摄的白平衡处理方法、装置及设备 | |
CN114866754A (zh) | 自动白平衡方法、装置及计算机可读存储介质和电子设备 | |
CN107920205A (zh) | 图像处理方法、装置、存储介质和电子设备 | |
US7227991B2 (en) | Method for improving the quality of a digital image | |
CN111629201B (zh) | 一种摄像模组的调试方法、装置、设备及介质 | |
GB2460241A (en) | Correction of optical lateral chromatic aberration |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20160112 Address after: Espoo, Finland Patentee after: Technology Co., Ltd. of Nokia Address before: Espoo, Finland Patentee before: Nokia Oyj |