CN105163102A - 一种基于fpga的实时图像自动白平衡系统及方法 - Google Patents

Abstract

一种基于FPGA的实时图像自动白平衡系统及方法，先统计图像中R、G、B三分量信息，判断图像色彩是否丰富，选择相应的阈值fv做色温估计，选取R、G、B三分量都大于fv的像素点作为参考点，用这些参考点像素R、G、B三分量的均值来进行增益计算，确定R、G、B三分量的调整系数u、v、w。由于对一幅图像进行两次统计R、G、B三分量均值，为了减少延时，对图像缓存一幅，在缓存的同时计算出阈值fv，然后按行读出缓存图像进行插值，接着计算R、G、B三分量的调整系数u、v、w，对下一幅图像进行调整。本发明综合了灰度世界法和全反射法的优势，具有硬件开销小，适应性强，白平衡效果好的优点。

Description

一种基于FPGA的实时图像自动白平衡系统及方法

技术领域

本发明涉及一种基于FPGA的实时图像自动白平衡系统及方法。属于图像白平衡处理领域。

背景技术

轻小型低功耗面阵CMOS相机已广泛应用于卫星本体机构、深空探测、空间站及飞船上的视频遥测。其中，使目标物体的色彩与人眼观察的色彩一致是一个难点，主要因素在于：不同光照条件的色温差异往往会导致同一目标物体的发射光线偏离真实色彩，在低色温光照条件下偏红，在高色温光照条件下偏蓝；况且空间环境复杂，目标物体特殊，很少有人的参与；再加上要对目标物体进行实时检测，拍摄的图像数据量大。因此需要对图像进行实时自动白平衡处理。

目前，自动白平衡方法有多种，包括灰度世界法(GWM，grayworldMethod)，全反射法(PRM，PerfectReflectorMethod)、灰度世界和全反射正交组合法(QCGP，QuadraticCornbiningGW&PR)、色域映射法(GMM，GamutMappingMethod)、模糊规则法(FRM，fuzzyrulemethod)、神经网络法(NNM，NeuralNetworkMethod)。这些方法中后四种算法比较复杂，难以满足实时性要求。因此能够用FPGA实现的实时自动白平衡方法主要有：灰度世界法、全反射法。

灰度世界法假设图像有丰富的色彩变化，则它的RGB分量的均值会趋于相等。这是一个在自动白平衡方面应用极为广泛的理论。缺点是当图像的色彩并不丰富时，灰度世界法往往会失真；全反射法假设图像上最亮点就是白点，并以此白点为参考对图像进行自动白平衡。全反射法也是在自动白平衡处理中最常用的理论之一。如果只把一个点作为参考，结果往往不太理想。一种改进的方法是用图像上最亮的一部分点的均值作为参考，对图像进行自动白平衡处理，例如用图像最亮的前20％的部分，作为参考。缺点是当图像的最亮部分并非白点时，全反射算法得到的数值是不真实的。

发明内容

本发明的技术解决问题是：针对现有技术中，对不丰富图像，采用灰度世界法处理，出现失真问题；对最亮部分不是白点的图像，采用全反射法处理，出现失真问题。针对上述的两个白平衡算法的缺点，提供了一种基于FPGA的实时图像自动白平衡系统及方法，综合考虑了灰度世界法和镜平面反射法的优势。先判断图像色彩是否丰富，如果图像色彩丰富则使用接近于灰度世界法的自动白平衡算法；如果色彩不丰富，则使用接近于镜平面法的自动白平衡算法。

本发明的技术解决方案是：一种基于FPGA的实时图像自动白平衡系统，包括数据转换模块、统计模块、图像插值模块、存储器接口驱动模块、计算比值模块、阈值产生模块、三分量调整模块、计算调整系数模块，在FPGA中能实现；

外部传感器将采集的Bayer格式图像数据，包括多比特数据、1bit场同步信号和1bit行同步信号，分别送至数据转换模块和统计模块；

统计模块，以2x2像素为单元统计Bayer格式图像数据中红Red、绿Green、蓝Blue这三个分量的均值，分别为红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave，送至计算比值模块；

计算比值模块，从红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave中找出最大的均值Kmax和最小的均值Kmin，再将最大的均值Kmax和最小的均值Kmin的比值K送至阈值产生模块；

阈值产生模块根据最大的均值和最小的均值的比值K，确定阈值参数fv，确定方法如下：

$\begin{array}{cc}K\≥2& fv=\left\{\begin{array}{cc}K\max +50& K\max \≤170\\ 220& K\max >170\end{array}\right.\end{array}$

$\begin{array}{cc}1.5\&le;K<2& fv=\left\{\begin{array}{cc}Kmax+40& Kmax\&le;160\\ 200& Kmax>160\end{array}\right.\end{array}$

1.2≤K＜1.5fv＝Kmin

1≤K＜1.2fv＝50；

将阈值参数fv送至计算调整系数模块；

数据转换模块，根据1bit行同步信号和1bit场同步信号，将多比特数据进行位宽转换并通过存储器接口驱动模块存储至外部存储器；同时数据转换模块，通过存储器驱动接口模块，从外部存储器中按行读出Bayer格式图像数据，同时产生1bit新的行同步信号和1bit新的场同步信号，并将按行读出的Bayer格式图像数据、1bit新的行同步信号和1bit新的场同步信号送至图像插值模块；

图像插值模块，根据1bit新的行同步信号和1bit新的场同步信号，对按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像，该三基色RGB彩色图像包括R分量、G分量、B分量、三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，分别送至三分量调整模块和计算调整系数模块；

计算调整系数模块，选出三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点，再统计该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值R2ave、G2ave和B2ave，根据该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值，确定R的调整系数u、G的调整系数v、B的调整系数w，公式如下：

$u=\frac{Kave}{R2ave},v=\frac{Kave}{G2ave},w=\frac{Kave}{G2ave}$

式中Kave＝(R2ave+G2ave+B2ave)/3；

然后将R的调整系数u、G的调整系数v、B的调整系数w，送至三分量调整模块；

三分量调整模块，根据三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，对图像插值模块送来的三基色RGB彩色图像进行调整，得到调整后的RGB三分量，即调整后的红色分量R’、调整后的红色分量G’和调整后的红色分量B’，和调整后的三基色RGB彩色图像的场同步信号、调整后的三基色RGB彩色图像的行同步信号，即完成图像白平衡，调整公式为：R’＝R×u，G’＝G×v，B’＝B×w；

将三分量调整模块调整后的三基色RGB彩色图像输出。

所述图像插值模块，根据1bit新的行同步信号和1bit新的场同步信号，对按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像采用双线性内插法。

基于上述系统的一种基于FPGA的实时图像自动白平衡方法，步骤如下：

(1)外部传感器将采集的Bayer格式图像数据，包括多比特数据、1bit场同步信号和1bit行同步信号，分别送至数据转换模块和统计模块；

(2)统计模块，以2x2像素为单元统计步骤(1)Bayer格式图像数据中红Red、绿Green、蓝Blue这三个分量的均值，分别为红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave，送至计算比值模块；

(3)计算比值模块，从步骤(2)红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave中找出最大的均值Kmax和最小的均值Kmin，再将最大的均值Kmax和最小的均值Kmin的比值K送至阈值产生模块；

(4)阈值产生模块根据步骤(3)的最大的均值和最小的均值的比值K，确定阈值参数fv，确定方法如下：

$\begin{array}{cc}K\&GreaterEqual;2& fv=\left\{\begin{array}{cc}Kmax+50& Kmax\&le;170\\ 220& Kmax>170\end{array}\right.\end{array}$

$\begin{array}{cc}1.5\&le;K<2& fv=\left\{\begin{array}{cc}Kmax+40& Kmax\&le;160\\ 200& Kmax>160\end{array}\right.\end{array}$

1.2≤K＜1.5fv＝Kmin

1≤K＜1.2fv＝50；

将阈值参数fv送至计算调整系数模块；

(5)数据转换模块，根据步骤(1)1bit行同步信号和1bit场同步信号，将步骤(1)多比特数据进行位宽转换并通过存储器接口驱动模块存储至外部存储器；同时数据转换模块，通过存储器驱动接口模块，从外部存储器中按行读出Bayer格式图像数据，同时产生1bit新的行同步信号和1bit新的场同步信号，并将按行读出的Bayer格式图像数据、1bit新的行同步信号和1bit新的场同步信号送至图像插值模块；

(6)图像插值模块，根据步骤(5)1bit新的行同步信号和1bit新的场同步信号，对步骤(5)按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像，该三基色RGB彩色图像包括R分量、G分量、B分量、三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，分别送至三分量调整模块和计算调整系数模块；

(7)计算调整系数模块，选出步骤(6)三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点，再统计该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值R2ave、G2ave和B2ave，根据该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值，确定R的调整系数u、G的调整系数v、B的调整系数w，公式如下：

$u=\frac{Kave}{R2ave},v=\frac{Kave}{G2ave},w=\frac{Kave}{G2ave}$

式中Kave＝(R2ave+G2ave+B2ave)/3；

然后将R的调整系数u、G的调整系数v、B的调整系数w，送至三分量调整模块；

(8)三分量调整模块，根据步骤(6)三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，利用步骤(7)R的调整系数u、G的调整系数v、B的调整系数w，对步骤(6)图像插值模块送来的三基色RGB彩色图像进行调整，得到调整后的RGB三分量，即调整后的红色分量R’、调整后的红色分量G’和调整后的红色分量B’，和调整后的三基色RGB彩色图像的场同步信号、调整后的三基色RGB彩色图像的行同步信号，即完成图像白平衡，调整公式为：R’＝R×u，G’＝G×v，B’＝B×w；

将三分量调整模块调整后的三基色RGB彩色图像输出。

本发明相对现有技术相比的有益效果是：

(1)、本发明根据统计模块、计算比值模块方案，能够有效判断图像色彩是否丰富，简化了算法的复杂度。

(2)、本发明根据阈值产生模块方案，能够进行色温估计，对不同的色温，调整约束条件，做到更准确的估计。

(3)、本发明通过统计模块、计算比值模块和阈值产生模块方案，先判断图像色彩是否丰富，根据色彩丰富性，选择近似于灰度世界法或近似于全反射法的算法，综合了灰度世界法和全反射法的优势，提高了系统的适应性。

(4)、本发明根据方法中步骤(2)、(3)和(4)与方法中步骤(5)并行运行，在对图像缓存的同时，对图像进行统计和计算阈值等操作，减少延时，提高实时性。

附图说明

图1为本发明的方法流程图；

图2为本发明的系统框图。

具体实施方式

下面结合附图对本发明作详细具体说明。

如图2所示，一种基于FPGA的实时图像自动白平衡系统，包括数据转换模块、统计模块、图像插值模块、存储器接口驱动模块、计算比值模块、阈值产生模块、三分量调整模块、计算调整系数模块，在FPGA中能实现；

外部传感器将采集的Bayer格式图像数据，包括多比特数据、1bit场同步信号和1bit行同步信号，分别送至数据转换模块和统计模块；

统计模块，以2x2像素为单元统计Bayer格式图像数据中红Red、绿Green、蓝Blue这三个分量的均值，分别为红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave，送至计算比值模块；

计算比值模块，从红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave中找出最大的均值Kmax和最小的均值Kmin，再将最大的均值Kmax和最小的均值Kmin的比值K送至阈值产生模块；

该统计模块、计算比值模块，能够有效判断图像色彩是否丰富，简化了算法的复杂度；阈值产生模块根据最大的均值和最小的均值的比值K，确定阈值参数fv。K值大，说明R、G、B中的某一色偏多，色彩相对不够丰富；K值小，说明R、G、B三色相当，色彩相对比较丰富。

最后根据K值确定阈值参数fv。确定原则为：K值大则选取的阈值参数fv要大一些；K值小则选取的阈值参数fv要小一些。经过多次试验，确定公式如下：

$\begin{array}{cc}K\&GreaterEqual;2& fv=\left\{\begin{array}{cc}Kmax+50& Kmax\&le;170\\ 220& Kmax>170\end{array}\right.\end{array}$

$\begin{array}{cc}1.5\&le;K<2& fv=\left\{\begin{array}{cc}Kmax+40& Kmax\&le;160\\ 200& Kmax>160\end{array}\right.\end{array}$

1.2≤K＜1.5fv＝Kmin

1≤K＜1.2fv＝50；

例如K＝1.1时，说明R、G、B三色相当，根据上式可得阈值参数fv＝50，在计算调整系数模块中挑选出RGB彩色图像中R分量、G分量、B分量都大于50的像素点，进行计算，这是近似于灰度世界法的白平衡法。

例如K＝2时，说明R、G、B中的某一色偏多，如果Kmax＝180时，根据上式可得阈值参数fv＝220，在计算调整系数模块中挑选出RGB彩色图像中R分量、G分量、B分量都大于220的像素点，进行计算，这是近似于全反射法的白平衡法。

将阈值参数fv送至计算调整系数模块；

阈值产生模块，能够进行色温估计，对不同的色温，调整约束条件，做到更准确的估计；

通过统计模块、计算比值模块和阈值产生模块，先判断图像色彩是否丰富，根据色彩丰富性，选择近似于灰度世界法或近似于全反射法的算法，综合了灰度世界法和全反射法的优势，提高了系统的适应性；

数据转换模块，根据1bit行同步信号和1bit场同步信号，将多比特数据进行位宽转换并通过存储器接口驱动模块存储至外部存储器；同时数据转换模块，通过存储器驱动接口模块，从外部存储器中按行读出Bayer格式图像数据，同时产生1bit新的行同步信号和1bit新的场同步信号，并将按行读出的Bayer格式图像数据、1bit新的行同步信号和1bit新的场同步信号送至图像插值模块；

图像插值模块，根据1bit新的行同步信号和1bit新的场同步信号，对按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像，该三基色RGB彩色图像包括R分量、G分量、B分量、三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，分别送至三分量调整模块和计算调整系数模块；

计算调整系数模块，选出三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点，再统计该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值R2ave、G2ave和B2ave，根据该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值，确定R的调整系数u、G的调整系数v、B的调整系数w，公式如下：

$u=\frac{Kave}{R2ave},v=\frac{Kave}{G2ave},w=\frac{Kave}{G2ave}$

式中Kave＝(R2ave+G2ave+B2ave)/3；

然后将R的调整系数u、G的调整系数v、B的调整系数w，送至三分量调整模块；

三分量调整模块，根据三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，对图像插值模块送来的三基色RGB彩色图像进行调整，得到调整后的RGB三分量，即调整后的红色分量R’、调整后的红色分量G’和调整后的红色分量B’，和调整后的三基色RGB彩色图像的场同步信号、调整后的三基色RGB彩色图像的行同步信号，即完成图像白平衡，调整公式为：R’＝R×u，G’＝G×v，B’＝B×w；

将三分量调整模块调整后的三基色RGB彩色图像输出。

如图1所示，一种基于FPGA的实时图像自动白平衡方法的流程，步骤如下：

(1)外部传感器将采集的Bayer格式图像数据，包括多比特数据、1bit场同步信号和1bit行同步信号，分别送至数据转换模块和统计模块；

(2)统计模块，以2x2像素为单元统计步骤(1)Bayer格式图像数据中红Red、绿Green、蓝Blue这三个分量的均值，分别为红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave，送至计算比值模块；

(3)计算比值模块，从步骤(2)红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave中找出最大的均值Kmax和最小的均值Kmin，再将最大的均值Kmax和最小的均值Kmin的比值K送至阈值产生模块；

(4)阈值产生模块根据步骤(3)的最大的均值和最小的均值的比值K，确定阈值参数fv，确定方法如下：

$\begin{array}{cc}K\&GreaterEqual;2& fv=\left\{\begin{array}{cc}Kmax+50& Kmax\&le;170\\ 220& Kmax>170\end{array}\right.\end{array}$

$\begin{array}{cc}1.5\&le;K<2& fv=\left\{\begin{array}{cc}Kmax+40& Kmax\&le;160\\ 200& Kmax>160\end{array}\right.\end{array}$

1.2≤K＜1.5fv＝Kmin

1≤K＜1.2fv＝50；

将阈值参数fv送至计算调整系数模块；

根据方法中步骤(2)、(3)和(4)与方法中步骤(5)并行运行，在对图像缓存的同时，对图像进行统计和计算阈值等操作，减少延时，提高实时性。

(5)数据转换模块，根据步骤(1)1bit行同步信号和1bit场同步信号，将步骤(1)多比特数据进行位宽转换并通过存储器接口驱动模块存储至外部存储器；同时数据转换模块，通过存储器驱动接口模块，从外部存储器中按行读出Bayer格式图像数据，同时产生1bit新的行同步信号和1bit新的场同步信号，并将按行读出的Bayer格式图像数据、1bit新的行同步信号和1bit新的场同步信号送至图像插值模块；

(6)图像插值模块，根据步骤(5)1bit新的行同步信号和1bit新的场同步信号，对步骤(5)按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像，该三基色RGB彩色图像包括R分量、G分量、B分量、三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，分别送至三分量调整模块和计算调整系数模块；

(7)计算调整系数模块，选出步骤(6)三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点，再统计该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值R2ave、G2ave和B2ave，根据该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值，确定R的调整系数u、G的调整系数v、B的调整系数w，公式如下：

$u=\frac{Kave}{R2ave},v=\frac{Kave}{G2ave},w=\frac{Kave}{G2ave}$

式中Kave＝(R2ave+G2ave+B2ave)/3；

然后将R的调整系数u、G的调整系数v、B的调整系数w，送至三分量调整模块；

(8)三分量调整模块，根据步骤(6)三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，利用步骤(7)R的调整系数u、G的调整系数v、B的调整系数w，对步骤(6)图像插值模块送来的三基色RGB彩色图像进行调整，得到调整后的RGB三分量，即调整后的红色分量R’、调整后的红色分量G’和调整后的红色分量B’，和调整后的三基色RGB彩色图像的场同步信号、调整后的三基色RGB彩色图像的行同步信号，即完成图像白平衡，调整公式为：R’＝R×u，G’＝G×v，B’＝B×w；

将三分量调整模块调整后的三基色RGB彩色图像输出。

以上结合附图对本发明的具体实施方式作了说明，但这些说明不能被理解为限制本发明的范围，本发明的保护范围由随附的权利要求书限定，任何在本发明权利要求基础上的改动都是本发明的保护范围。

Claims (3)

1.一种基于FPGA的实时图像自动白平衡系统，其特征在于：包括数据转换模块、统计模块、图像插值模块、存储器接口驱动模块、计算比值模块、阈值产生模块、三分量调整模块、计算调整系数模块，在FPGA中实现；

外部传感器将采集的Bayer格式图像数据，包括多比特数据、1bit场同步信号和1bit行同步信号，分别送至数据转换模块和统计模块；

统计模块，以2x2像素为单元统计Bayer格式图像数据中红Red、绿Green、蓝Blue这三个分量的均值，分别为红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave，送至计算比值模块；

计算比值模块，从红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave中找出最大的均值Kmax和最小的均值Kmin，再将最大的均值Kmax和最小的均值Kmin的比值K送至阈值产生模块；

阈值产生模块根据最大的均值和最小的均值的比值K，确定阈值参数fv，确定方法如下：

$\begin{array}{cc}K\&GreaterEqual;2& fv=\left\{\begin{array}{cc}K\max +50& K\max \&le;170\\ 220& K\max >170\end{array}\right.\end{array}$

$\begin{array}{cc}1.5\&le;K<2& fv=\left\{\begin{array}{cc}Kmax+40& Kmax\&le;160\\ 200& Kmax>160\end{array}\right.\end{array}$

1.2≤K＜1.5fv＝Kmin

1≤K＜1.2fv＝50；

将阈值参数fv送至计算调整系数模块；

数据转换模块，根据1bit行同步信号和1bit场同步信号，将多比特数据进行位宽转换并通过存储器接口驱动模块存储至外部存储器；同时数据转换模块，通过存储器驱动接口模块，从外部存储器中按行读出Bayer格式图像数据，同时产生1bit新的行同步信号和1bit新的场同步信号，并将按行读出的Bayer格式图像数据、1bit新的行同步信号和1bit新的场同步信号送至图像插值模块；

图像插值模块，根据1bit新的行同步信号和1bit新的场同步信号，对按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像，该三基色RGB彩色图像包括R分量、G分量、B分量、三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，分别送至三分量调整模块和计算调整系数模块；

计算调整系数模块，选出三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点，再统计该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值R2ave、G2ave和B2ave，根据该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值，确定R的调整系数u、G的调整系数v、B的调整系数w，公式如下：

$u=\frac{Kave}{R2ave},v=\frac{Kave}{G2ave},w=\frac{Kave}{G2ave}$

式中Kave＝(R2ave+G2ave+B2ave)/3；

然后将R的调整系数u、G的调整系数v、B的调整系数w，送至三分量调整模块；

三分量调整模块，根据三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，对图像插值模块送来的三基色RGB彩色图像进行调整，得到调整后的RGB三分量，即调整后的红色分量R’、调整后的红色分量G’和调整后的红色分量B’，和调整后的三基色RGB彩色图像的场同步信号、调整后的三基色RGB彩色图像的行同步信号，即完成图像白平衡，调整公式为：R’＝R×u，G’＝G×v，B’＝B×w；

将三分量调整模块调整后的三基色RGB彩色图像输出。

2.根据权利要求1所述的一种基于FPGA的实时图像自动白平衡系统，其特征在于：所述图像插值模块，根据1bit新的行同步信号和1bit新的场同步信号，对按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像采用双线性内插法。

3.一种基于FPGA的实时图像自动白平衡方法，其特征在于，步骤如下：

(1)外部传感器将采集的Bayer格式图像数据，包括多比特数据、1bit场同步信号和1bit行同步信号，分别送至数据转换模块和统计模块；

(2)统计模块，以2x2像素为单元统计步骤(1)Bayer格式图像数据中红Red、绿Green、蓝Blue这三个分量的均值，分别为红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave，送至计算比值模块；

(3)计算比值模块，从步骤(2)红Red的全图像均值R1ave、绿Green的全图像均值G1ave、蓝Blue全图像均值B1ave中找出最大的均值Kmax和最小的均值Kmin，再将最大的均值Kmax和最小的均值Kmin的比值K送至阈值产生模块；

(4)阈值产生模块根据步骤(3)的最大的均值和最小的均值的比值K，确定阈值参数fv，确定方法如下：

$\begin{array}{cc}K\&GreaterEqual;2& fv=\left\{\begin{array}{cc}Kmax+50& Kmax\&le;170\\ 220& Kmax>170\end{array}\right.\end{array}$

$\begin{array}{cc}1.5\&le;K<2& fv=\left\{\begin{array}{cc}Kmax+40& Kmax\&le;160\\ 200& Kmax>160\end{array}\right.\end{array}$

1.2≤K＜1.5fv＝Kmin

1≤K＜1.2fv＝50；

将阈值参数fv送至计算调整系数模块；

(5)数据转换模块，根据步骤(1)1bit行同步信号和1bit场同步信号，将步骤(1)多比特数据进行位宽转换并通过存储器接口驱动模块存储至外部存储器；同时数据转换模块，通过存储器驱动接口模块，从外部存储器中按行读出Bayer格式图像数据，同时产生1bit新的行同步信号和1bit新的场同步信号，并将按行读出的Bayer格式图像数据、1bit新的行同步信号和1bit新的场同步信号送至图像插值模块；

(6)图像插值模块，根据步骤(5)1bit新的行同步信号和1bit新的场同步信号，对步骤(5)按行读出的Bayer格式图像数据进行插值，插成三基色RGB彩色图像，该三基色RGB彩色图像包括R分量、G分量、B分量、三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，分别送至三分量调整模块和计算调整系数模块；

(7)计算调整系数模块，选出步骤(6)三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点，再统计该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值R2ave、G2ave和B2ave，根据该三基色RGB彩色图像中R分量、G分量、B分量都大于阈值参数fv的像素点的均值，确定R的调整系数u、G的调整系数v、B的调整系数w，公式如下：

$u=\frac{Kave}{R2ave},v=\frac{Kave}{G2ave},w=\frac{Kave}{G2ave}$

式中Kave＝(R2ave+G2ave+B2ave)/3；

然后将R的调整系数u、G的调整系数v、B的调整系数w，送至三分量调整模块；

(8)三分量调整模块，根据步骤(6)三基色RGB彩色图像的场同步信号、三基色RGB彩色图像的行同步信号，利用步骤(7)R的调整系数u、G的调整系数v、B的调整系数w，对步骤(6)图像插值模块送来的三基色RGB彩色图像进行调整，得到调整后的RGB三分量，即调整后的红色分量R’、调整后的红色分量G’和调整后的红色分量B’，和调整后的三基色RGB彩色图像的场同步信号、调整后的三基色RGB彩色图像的行同步信号，即完成图像白平衡，调整公式为：R’＝R×u，G’＝G×v，B’＝B×w；

将三分量调整模块调整后的三基色RGB彩色图像输出。