CN103796003A - 一种立体摄像的图像修正方法及系统 - Google Patents

一种立体摄像的图像修正方法及系统 Download PDF

Info

Publication number
CN103796003A
CN103796003A CN201410028698.8A CN201410028698A CN103796003A CN 103796003 A CN103796003 A CN 103796003A CN 201410028698 A CN201410028698 A CN 201410028698A CN 103796003 A CN103796003 A CN 103796003A
Authority
CN
China
Prior art keywords
color
temperature environment
color temperature
photographing module
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410028698.8A
Other languages
English (en)
Other versions
CN103796003B (zh
Inventor
曾云龙
李炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inlife Handnet Co Ltd
Original Assignee
Inlife Handnet Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inlife Handnet Co Ltd filed Critical Inlife Handnet Co Ltd
Priority to CN201410028698.8A priority Critical patent/CN103796003B/zh
Publication of CN103796003A publication Critical patent/CN103796003A/zh
Application granted granted Critical
Publication of CN103796003B publication Critical patent/CN103796003B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Color Television Image Signal Generators (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

本发明涉及一种立体摄像的图像修正方法及系统,其中立体摄像的图像修正方法包括如下步骤:S1、获取立体摄像时所使用的两个摄像模块在标准色温环境下的色彩偏差率;S2、测定使用环境色温,确定当前色彩偏差率;S3、根据所述当前色彩偏差率修正所述两个摄像模块所获得的两路图像。本发明可以动态即时调整各路图像在色彩和亮度方面的偏差,消除了图像传感器和环境光线的差异对成像的影响,明显提高其观看舒适度和立体感受。

Description

一种立体摄像的图像修正方法及系统
技术领域
本发明涉及立体摄像领域,更具体地说,涉及一种立体摄像的图像修正方法及系统。
背景技术
立体视频图像拍摄时,至少需要同时采集两路图像,例如分别对应于人的第一和第二眼图像的第一图像和第二图像,在进行立体视频图像拍摄的过程中通常使用方式是将第一图像和第二图像进行拼接合成。在获取第一图像和第二图像的过程中由于第一图像感应器和第二图像感应器的个体差异性,造成两个图像的色彩和亮度出现明显差异,导致不能合成出高质量的立体图像。
对于目前数码摄像机,前端数据的采集需要高精密感光的图像传感器,图像传感器主要分为电荷耦合元件(Charge-coupled Device,CCD)图像传感器和互补金属氧化物半导体(Complementary Metal Oxide Semiconductor,CMOS)图像传感器(Sensor)两种类型,图像传感器将光信号转化为电子数字信号送给后端图像处理器。通常情况下单个图像传感器在不同色温环境下会出现偏色现象,在高色温环境偏蓝,低色温环境偏红,这就是所谓的白平衡问题,数码摄像机通常会有一套自动白平衡机制去保证在不同色温下拍摄的图像尽量接近真实色彩(减少色彩偏差)。但是对于不同的图像传感器个体,即使是在同样的色温条件下,图像传感器之间相对于真实色彩偏差大小通常都不一样,而且在同样的光源环境下对亮度感应强度也不一样。所以通常立体摄像机拍摄出来的立体图像明显可以看出其各路图像在色彩和亮度方面的偏差。对于拍摄的3D照片,一般需要通过电脑安装专用图像处理软件去人为修正其色彩和亮度的偏差,但是对于拍摄的动态视频,如果要靠人工去处理,那工作量是巨大的。而且当我们拍摄色温环境条件变化时,其各路图像的偏差情况也会随之变化,因此我们有必要在拍摄立体图像的同时,根据当前的色温情况即时把各路图像在色彩和亮度上的偏差修正过来,确保生成的原始立体图像其第一和第二画面在色彩和亮度上没有明显的差异,以保证高质量的立体视觉观看效果。
发明内容
本发明所要解决的技术问题在于,提供一种立体摄像的图像修正方法及系统,以克服拍摄的3D视频图像由于各路图像在色彩和亮度方面的偏差引起的图像失真。
本发明所要解决的技术问题还在于,提供一种立体摄像的图像修正方法及系统,以克服动态视频拍摄过程中需要大量人工修正其色彩和亮度的缺陷。
本发明为解决其技术问题所采用的技术方案是:提供一种立体摄像的图像修正方法,包括如下步骤:
S1、获取立体摄像时所使用的两个摄像模块在标准色温环境下的色彩偏差率;
S2、测定使用环境色温,确定当前色彩偏差率;
S3、根据所述当前色彩偏差率修正所述两个摄像模块所获得的两路图像。
在本发明的图像修正方法中,所述标准色温环境的数量为预设数量,每个所述色温区间的宽度为预设宽度。
在本发明的图像修正方法中,所述步骤S1具体为:分别统计所述两个摄像模块在不同标准色温环境下其颜色分量或者色彩亮度分量的平均值,以不同摄像模块的所述颜色分量或者色彩亮度分量的比值作为其在各种标准色温环境下的色彩偏差率。
在本发明的图像修正方法中,所述步骤S2中“确定当前色彩偏差率”的计算方式为如下方法中的一种:平均值法、最近距离法、线性函数插值法、二次函数插值法、多项式插值法。
在本发明的图像修正方法中,所述平均值法具体为:以所述标准色温环境为端点划分色温区间,计算使用环境色温所处的色温区间,若所处的色温区间具有两个端点,则当前色彩偏差率等于该所处的色温区间两端点对应的两个色彩偏差率的平均值;若所处的色温区间只具有一个端点,则当前色彩偏差率等于该端点对应的色彩偏差率。
在本发明的图像修正方法中,所述最近距离法具体为:以所述标准色温环境中相邻的两色温的平均值为端点划分色温区间,计算使用环境色温所处的色温区间,当前色彩偏差率等于该所处的色温区间中的标准色温环境所对应的色彩偏差率。
在本发明的图像修正方法中,所述线性函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN);其色彩偏差率记为(Rx,Gx,Bx);
当Kx≤K2时,采用K1与K2对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = R 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Rb 2 Ra 2 - Rb 1 Ra1 )
Gx = G 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Gb 2 Ga 2 - Gb 1 Ga 1 )
Bx = B 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Bb 2 Ba 2 - Bb 1 Ba 1 )
当Kx≥K(N-1)时,采用K(N-1)与KN对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = RN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( RbN RaN - Rb ( N - 1 ) Ra ( N - 1 ) )
Gx = GN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( GbN GaN - Gb ( N - 1 ) Ga ( N - 1 ) )
Bx = BN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( BbN BaN - Bb ( N - 1 ) Ba ( N - 1 ) )
当Kn<Kx<K(n-1),(n=2,3……N)时,采用采用K(n-1)与Kn对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = Rbn Ran + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Rbn Ran - Rb ( n - 1 ) Ra ( n - 1 ) )
Gx = Gbn Gan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Gbn Gan - Gb ( n - 1 ) Ga ( n - 1 ) )
Bx = Bbn Ban + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Bbn Ban - Bb ( n - 1 ) Ba ( n - 1 ) )
在本发明的图像修正方法中,所述线性函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
当Kx≤K2时,采用K1与K2对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = Y 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Yb 2 Ya 2 - Yb 1 Ya 1 )
Ux = U 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Ub 2 Ua 2 - Ub 1 Ua 1 )
Vx = V 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Vb 2 Va 2 - Vb 1 Va 1 )
当Kx≥K(N-1)时,采用K(N-1)与KN对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = YN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( YbN YaN - Yb ( N - 1 ) Ya ( N - 1 ) )
Ux = UN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( UbN UaN - Ub ( N - 1 ) Ua ( N - 1 ) )
Vx = VN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( VbN VaN - Vb ( N - 1 ) Va ( N - 1 ) )
当Kn<Kx<K(n-1),(n=2,3……N)时,采用采用K(n-1)与Kn对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = Ybn Yan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Ybn Yan - Yb ( n - 1 ) Ya ( n - 1 ) )
Ux = Ubn Uan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Ubn Uan - Ub ( n - 1 ) Ua ( n - 1 ) ) Vx = Vbn Van + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Vbn Van - Vb ( n - 1 ) Va ( n - 1 ) )
在本发明的图像修正方法中,所述二次函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN);其色彩偏差率记为(Rx,Gx,Bx);
计算得出离Kx最近的三种标准色温环境,设定为Kn,K(n-1),K(n-2),其中n=3,4……N;
Rx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Rb ( n - 2 ) Ra ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Rb ( n - 1 ) Ra ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Rbn Ran
Gx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Gb ( n - 2 ) Ga ( n - 2 )
+ ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Gb ( n - 1 ) Ga ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Gbn Gan
Bx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Bb ( n - 2 ) Ba ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Bb ( n - 1 ) Ba ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Bbn Ban
在本发明的图像修正方法中,任意选取所述标准色温环境为K1、K2……KN中的三项,分别与Kx相减,将相减所得结果的绝对值求和,所得最小绝对值之和的所述三项标准色温环境为所述的Kn,K(n-1),K(n-2)。
在本发明的图像修正方法中,所述二次函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
计算得出离Kx最近的三种标准色温环境,设定为Kn,K(n-1),K(n-2),其中n=3,4……N;
Yx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Yb ( n - 2 ) Ya ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Yb ( n - 1 ) Ya ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Ybn Yan
Ux = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Ub ( n - 2 ) Ua ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Ub ( n - 1 ) Ua ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Ubn Uan
Vx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Vb ( n - 2 ) Va ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Vb ( n - 1 ) Va ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Vbn Van
在本发明的图像修正方法中,任意选取所述标准色温环境为K1、K2……KN中的三项,分别与Kx相减,将相减所得结果的绝对值求和,所得最小绝对值之和的所述三项标准色温环境为所述的Kn,K(n-1),K(n-2)。
在本发明的图像修正方法中,所述多项式插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN);其色彩偏差率记为(Rx,Gx,Bx);
Figure BDA0000459653940000061
Figure BDA0000459653940000062
Figure BDA0000459653940000063
其中
在本发明的图像修正方法中,所述多项式插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
Figure BDA0000459653940000065
Figure BDA0000459653940000066
Figure BDA0000459653940000067
其中
Figure BDA0000459653940000068
本发明为解决其技术问题所采用的技术方案还可以是:提供一种立体摄像的图像修正系统,包括中央数据处理模块、色温测定模块,中央数据处理模块与色温测定模块连接,所述图像修正系统修正第一摄像模块和第二摄像模块获取的图像,其中,
中央数据处理模块获取第一摄像模块和第二摄像模块在标准色温环境下的色彩偏差率;
色温测定模块测定使用环境色温,并传给所述中央数据处理模块,确定当前色彩偏差率;
第一摄像模块获取第一路图像,第二摄像模块获取第二路图像,中央数据处理模块根据所述当前色彩偏差率修正所述第一路图像和第二路图像。
本发明的有益效果在于,动态即时调整各路图像在色彩和亮度方面的偏差,消除了图像传感器和环境光线的差异对成像的影响,明显提高其观看舒适度和立体感受。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的部分实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明立体摄像的图像修正方法的流程图;
图2是本发明第一较佳实施例至第四较佳实施例中当前色彩偏差率与使用环境色温之间的关系图;
图3是本发明第五较佳实施例中当前色彩偏差率与使用环境色温之间的关系图;
图4是本发明第六较佳实施例中当前色彩偏差率与使用环境色温之间的关系图;
图5是本发明第七较佳实施例中当前色彩偏差率与使用环境色温之间的关系图;
图6是本发明第八较佳实施例中当前色彩偏差率与使用环境色温之间的关系图;
图7是本发明立体摄像的图像修正系统的工作原理图。
具体实施方式
下面将对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本发明的立体摄像的图像修正方法,包括如下步骤:
S1、获取立体摄像时所使用的两个摄像模块在标准色温环境下的色彩偏差率;
S2、测定使用环境色温,确定当前色彩偏差率;
S3、根据所述当前色彩偏差率修正所述两个摄像模块所获得的两路图像。
实施例1
本发明的第一较佳实施例为修正具有第一摄像模块和第二摄像模块的立体数码摄像机的图像,具有第一摄像模块和第二摄像模块的立体数码摄像机由于图像感应器件之间存在差异,拍摄出来的两路图像存在色彩和亮度上的差异,而且其差异会伴随环境的变化而变化。拍摄静态照片时可以通过电脑上的图像处理软件后期人工处理,但是对于视频,如果采用同样的方法其后期处理工作量将是巨大的。因此目前基于消费级的立体数码摄像机,拍摄出来的第一和第二视频,其第一和第二两路图像经常存在明显的色彩以及亮度的偏差。
所述立体摄像的图像修正方法,包括如下步骤:
S1、获取第一和第二摄像模块在不同色温区间下的色彩偏差率;
S2、测定使用环境色温,计算所述使用环境色温所处的色温区间,确定当前色彩偏差率;
S3、根据所述当前色彩偏差率修正第一路图像。
所述步骤S1具体为,在工厂测试模式中,将立体摄像机放入色温箱,分别将第一、第二摄像模块对准白色卡,开启立体摄像机,关闭立体摄像机摄像模块白平衡调整功能,统计第一、第二摄像模块在不同色温环境下其颜色分量的平均值,现以红绿蓝三原色为例说明其具体过程。
色温箱可以采用如下由低到高的N种标准色温环境(如N为5时,选定K1=2700K,K2=3200K,K3=4000K,K4=5000K,K5=6500K),在上述N种色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN)。
如图2所示,在上述N种标准色温环境为端点划分色温区间的情况下,形成了N+1种色温区间,设定每个色温区间内的色彩偏差率相同,记为(R0,G0,B0),(R1,G1,B1)……(RN,GN,BN),其中,第一个和最后一个色温区间只具有一个端点,设定当前色彩偏差率等于该端点对应的色彩偏差率,具体为:
R0=Rb1/Ra1;
G0=Gb1/Ga1;
B0=Bb1/Ba1;
RN=RbN/RaN;
GN=GbN/GaN;
BN=BbN/BaN。
因为,对于通常的使用环境色温,一般都处于在工厂测试模式下使用的最低色温和最高色温之间,根据实践经验表明,低于工厂测试模式下色温箱中最低色温或高于色温箱中最高色温的环境下,其第一和第二摄像模块的色彩亮度偏差情况和最低色温或最高色温对应的偏差非常接近,因此直接设定了上述(R0,G0,B0)和(RN,GN,BN)的色彩偏差率的值。
处于灯箱中最低与最高色温之间的色温区间具有两个端点,则当前色彩偏差率等于该所处的色温区间两端点对应的两个色彩偏差率的平均值,具体为,色彩偏差率(R1,G1,B1),(R2,G2,B2)……(R(N-1),G(N-1),B(N-1))可以采用如下计算方法:
Rn=(Rb(n+1)/Ra(n+1)+Rbn/Ran)/2;
Gn=(Gb(n+1)/Ga(n+1)+Gbn/Gan)/2;
Bn=(Bb(n+1)/Ba(n+1)+Bbn/Ban)/2。其中(n=1,2……N-1)。
在此需要特别示出的是,上述色温环境为示例性,不能理解为是对其的限定,因为色温环境的选择完全取决于图像修正精度的需要,例如当需要更加精确的划分色温区间的情况下,可以选定N=7,其中K1=1930K,K2=2700K,K3=3200K,K4=4000K,K5=5000K,K6=6500K,K7=8000K;或者选定N=8,其中K1=1930K,K2=2700K,K3=3200K,K4=4000K,K5=5000K,K6=6500K,K7=8000K,K8=10000K。
步骤S2具体为:通过立体摄像机自带的色温测定装置或者色温预测算法测定使用环境色温,也可以通过外带色温测定模块来测定使用环境色温。对于消费级立体摄像机通常采用图像算法预估的方式来判定使用环境色温,虽然不是很精准,但是能基本确定其色温的范围,计算出使用环境色温最接近于工厂测试模式下的哪一种色温区间,取对应的色彩偏差率(Rn,Gn,Bn)作为当前色彩偏差率。
步骤S3具体为:将上述当前色彩偏差率作为第一和第二图像的修正因子(即选取步骤S1中对应色温区间中的色彩偏差率做为修正因子),修正第一摄像模块每一个像素点(R,G,B)的值,计为R’,G’,B’,具体为,
R’=R*Rn;
G’=G*Gn;
B’=B*Bn。
由于各色彩偏差率(Rn,Gn,Bn)是工厂测试模式下得到的已有数据,不需要在拍摄动态视频时再进行计算,因此只需少量的计算就可以把第一摄像模块色彩亮度修正成接近于第二摄像模块的色彩亮度。
待第一图像色彩亮度修正完成后,根据立体摄像合成原理,通过图像合成系统,将第二路图像与修正过的第一路图像合成为一路立体图像数据,送给后端摄像机图像数据处理器。图像处理器对整个图像做一系列的加工处理,最终得到色彩亮度偏差小,整个图像质量优的第一和第二格式的视频图像。
优选的,在拍摄动态视频图像时,定时检测使用环境色温,当检测使用环境色温有任何变化时,重复本实施例中的上述步骤S2、S3和S4,这样就能即时动态的保证在不同色温环境下第一和第二图像色彩和亮度的一致性。
实施例2
本发明的第二较佳实施例也是修正具有第一和第二摄像模块的立体数码摄像机的图像,与第一较佳实施例不同之处在于,通过修正第二摄像模块色彩亮度去接近第一摄像模块,后续的图像再加工处理同样也是基于第一摄像模块,所述立体摄像的图像修正方法,包括如下步骤:
S1、获取第一和第二摄像模块在不同色温区间下的色彩偏差率;
S2、测定使用环境色温,计算所述使用环境色温所处的色温区间,确定当前色彩偏差率;
S3、根据所述当前色彩偏差率修正第二路图像;
S4、将第一路图像与修正过的所述第二路图像合成为一路立体图像数据。
所述步骤S1具体为,在工厂测试模式中,将立体摄像机放入色温箱,分别将第一、第二摄像模块对准白色卡,开启立体摄像机,关闭立体摄像机第一摄像模块白平衡调整功能,统计第一、第二摄像模块在不同色温环境下,其颜色分量的平均值,现以红绿蓝三原色为例说明其具体过程。
色温箱可以采用如下由低到高的N种标准色温环境(如N为5时,选定K1=2700K,K2=3200K,K3=4000K,K4=5000K,K5=6500K),在上述N种色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN)。
在上述N种标准色温环境为端点划分色温区间的情况下,形成了N+1种色温区间,设定每个色温区间内的色彩偏差率相同,记为(R0,G0,B0),(R1,G1,B1)……(RN,GN,BN),其中,第一个和最后一个色温区间只具有一个端点,设定当前色彩偏差率等于该端点对应的色彩偏差率,具体为:
R0=Ra1/Rb1;
G0=Ga1/Gb1;
B0=Ba1/Bb1;
RN=RaN/RbN;
GN=GaN/GbN;
BN=BaN/BbN。
因为,对于通常的使用环境色温,一般都处于在工厂测试模式下使用的最低色温和最高色温之间,根据实践经验表明,低于工厂测试模式下色温箱中最低色温或高于色温箱中最高色温的环境下,其第一和第二摄像模块的色彩亮度偏差情况和最低色温或最高色温对应的偏差非常接近,因此直接设定了上述(R0,G0,A0)和(RN,GN,AN)的色彩偏差率的值。
处于灯箱中最低与最高色温之间的色温区间具有两个端点,则当前色彩偏差率等于该所处的色温区间两端点对应的两个色彩偏差率的平均值,具体为,色彩偏差率(R1,G1,B1),(R2,G2,B2)……(R(N-1),G(N-1),B(N-1))可以采用如下计算方法:
Rn=(Ra(n+1)/Rb(n+1)+Ran/Rbn)/2;
Gn=(Ga(n+1)/Gb(n+1)+Gan/Gbn)/2;
Bn=(Ba(n+1)/Bb(n+1)+Ban/Bbn)/2。其中(n=1,2……N-1)。
在此需要特别示出的是,上述色温环境为示例性,不能理解为是对其的限定,因为色温环境的选择完全取决于图像修正精度的需要,例如当需要更加精确的划分色温区间的情况下,可以选定N=7,其中K1=1930K,K2=2700K,K3=3200K,K4=4000K,K5=5000K,K6=6500K,K7=8000K;或者选定N=8,其中K1=1930K,K2=2700K,K3=3200K,K4=4000K,K5=5000K,K6=6500K,K7=8000K,K8=10000K。
步骤S2具体为:通过立体摄像机自带的色温测定装置或者色温预测算法测定使用环境色温,也可以通过外带色温测定模块来测定使用环境色温。对于消费级立体摄像机通常采用图像算法预估的方式来判定使用环境色温,虽然不是很精准,但是能基本确定其色温的范围,计算出使用环境色温最接近于工厂测试模式下的哪一种色温区间,取对应的色彩偏差率(Rn,Gn,An)作为当前色彩偏差率。
步骤S3具体为:将上述当前色彩偏差率作为第一和第二图像的修正因子(即选取步骤S1中对应色温区间中的色彩偏差率做为修正因子),修正第二摄像模块每一个像素点(R,G,A)的值,计为R’,G’,A’,具体为,
R’=R*Rn;
G’=G*Gn;
B’=A*Bn。
由于各色彩偏差率(Rn,Gn,Bn)是工厂测试模式下得到的已有数据,不需要在拍摄动态视频时再进行计算,因此只需少量的计算就可以把第二摄像模块色彩亮度修正成接近于第一摄像模块的色彩亮度。
待第二图像色彩亮度修正完成后,根据立体摄像合成原理,通过图像合成系统,将第一路图像与修正过的第二路图像合成为一路立体图像数据,送给后端摄像机图像数据处理器。图像处理器对整个图像做一系列的加工处理,最终得到色彩亮度偏差小,整个图像质量优的第一和第二格式的视频图像。
优选的,在拍摄动态视频图像时,定时检测使用环境色温,当检测使用环境色温有任何变化时,重复本实施例中的上述步骤S2、S3和S4,这样就能即时动态的保证在不同色温环境下第一和第二图像色彩和亮度的一致性。
实施例3
上述第一较佳实施例、第二较佳实施例都是采用修正红绿蓝三原色来实现修正图像的目的,本发明的第三较佳实施例与上述两个实施例不同之处在于,采用修正亮度和色度的YUV色彩空间的方式,具体的修正过程与上述完全相同,只是将上述所有的RGB值用YUV取代即可,例如,在N种色温环境下第一摄像模块的颜色分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的颜色分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);
再例如,第一摄像模块和第二摄像模块处于灯箱中最低与最高色温之间的色彩偏差率(Y1,U1,V1),(Y2,U2,V2)……(Y(N-1),U(N-1),V(N-1))可以采用如下计算方法:
Yn=(Ya(n+1)/Yb(n+1)+Yan/Ybn)/2;
Un=(Ua(n+1)/Ub(n+1)+Uan/Ubn)/2;
Vn=(Va(n+1)/Vb(n+1)+Van/Vbn)/2。其中(n=1,2……N-1)。
其它步骤也做同样的替换,步骤S3中的修正和步骤S4中的合成也与上述两个实施例中的相同,在此不再赘述。
实施例4
本发明的第四较佳实施例是对上述所有实施例的进一步改进,与上述三个实施例的不同之处在于,步骤S2中“确定当前色彩偏差率”的方式不同,由于其他步骤均与前面三个实施例相同,在此不再赘述,只就“确定当前色彩偏差率”的方式做具体描述。
上述四个实施例中所述的当前色彩偏差率的计算方式可以简单的描述为“平均值法”,计算使用环境色温所处的色温区间(该色温区间的端点值等于所选定的N种色温环境中的相邻的两个色温环境,N种色温环境确定了N+1种色温区间,所有选定的N种色温环境都有其对应的色彩偏差率,即图2中黑点),所有位于该色温区间内的色彩偏差率都等于两端点对应的两个色彩偏差率的平均值。所述平均值法具体为:以所述标准色温环境为端点划分色温区间,计算使用环境色温所处的色温区间,若所处的色温区间具有两个端点,则当前色彩偏差率等于该所处的色温区间两端点对应的两个色彩偏差率的平均值;若所处的色温区间只具有一个端点,则当前色彩偏差率等于该端点对应的色彩偏差率。
本实施例中的当前色彩偏差率的计算方式可以简单的描述为“最近距离法”,如图3所示,所述最近距离法具体为:以所述标准色温环境中相邻的两色温的平均值为端点划分色温区间,计算使用环境色温所处的色温区间,当前色彩偏差率等于该所处的色温区间中的标准色温环境所对应的色彩偏差率。所选定的N种色温环境只确定了N种色温区间,该N种色温区间被N-1个端点值所划分,所述端点值=(Kn+K(n+1))/2,(n=1,2,3,……N)
以颜色分量为例,当前色彩偏差率的计算方式为:
Rn=Rbn/Ran;
Gn=Gbn/Gan;
Rn=Bbn/Ban;(n=1,2,3,……N)
类似的,以色彩亮度分量获得色彩偏差率的计算方式为:
Yn=Ybn/Yan;
Un=Ubn/Uan;
Vn=Vbn/Van;(n=1,2,3,……N)
在此需要特别,当前色彩偏差率同样可以采用第二较佳实施例中所述的修正第二路图像、第三较佳实施例中所述的YUV色彩空间,按上述实施例中的具体方式变换即可。
实施例5
本发明的第五较佳实施例与本发明的第四较佳实施例类似,提供了另外一种“确定当前色彩偏差率”的方式,简称为“线性函数插值法”,如图4所示,以颜色分量为例,当前色彩偏差率的计算方式为:
设定当前色温环境为Kx,其三原色色彩偏差率记为(Rx,Gx,Bx)
当Kx≤K2时,采用K1与K2对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = R 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Rb 2 Ra 2 - Rb 1 Ra1 )
Gx = G 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Gb 2 Ga 2 - Gb 1 Ga 1 )
Bx = B 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Bb 2 Ba 2 - Bb 1 Ba 1 )
当Kx≥K(N-1)时,采用K(N-1)与KN对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = RN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( RbN RaN - Rb ( N - 1 ) Ra ( N - 1 ) )
Gx = GN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( GbN GaN - Gb ( N - 1 ) Ga ( N - 1 ) )
Bx = BN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( BbN BaN - Bb ( N - 1 ) Ba ( N - 1 ) )
当Kn<Kx<K(n-1),(n=2,3……N)时,采用采用K(n-1)与Kn对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = Rbn Ran + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Rbn Ran - Rb ( n - 1 ) Ra ( n - 1 ) ) Gx = Gbn Gan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Gbn Gan - Gb ( n - 1 ) Ga ( n - 1 ) )
Bx = Bbn Ban + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Bbn Ban - Bb ( n - 1 ) Ba ( n - 1 ) )
类似的,以色彩亮度分量获得当前色彩偏差率,设定当前色温环境为Kx,
标准色温环境为K1、K2……KN,在上述N种色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
当Kx≤K2时,采用K1与K2对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = Y 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Yb 2 Ya 2 - Yb 1 Ya 1 )
Ux = U 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Ub 2 Ua 2 - Ub 1 Ua 1 )
Vx = V 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Vb 2 Va 2 - Vb 1 Va 1 )
当Kx≥K(N-1)时,采用K(N-1)与KN对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = YN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( YbN YaN - Yb ( N - 1 ) Ya ( N - 1 ) ) Ux = UN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( UbN UaN - Ub ( N - 1 ) Ua ( N - 1 ) )
Vx = VN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( VbN VaN - Vb ( N - 1 ) Va ( N - 1 ) )
当Kn<Kx<K(n-1),(n=2,3……N)时,采用采用K(n-1)与Kn对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = Ybn Yan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Ybn Yan - Yb ( n - 1 ) Ya ( n - 1 ) )
Ux = Ubn Uan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Ubn Uan - Ub ( n - 1 ) Ua ( n - 1 ) ) Vx = Vbn Van + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Vbn Van - Vb ( n - 1 ) Va ( n - 1 ) )
在此需要特别,当前色彩偏差率同样可以采用第二较佳实施例中所述的修正第二路图像、第三较佳实施例中所述的YUV色彩空间,按上述实施例中的具体方式变换即可。
实施例6
本发明的第六较佳实施例与本发明的第四较佳实施例类似,提供了另外一种“确定当前色彩偏差率”的方式,简称为“二次函数插值法”如图5所示,以颜色分量为例,当前色彩偏差率的计算方式为:
计算离Kx最近的3种色温,设定为Kn,K(n-1),K(n-2),任意选取所述标准色温环境为K1、K2……KN中的三项,分别与Kx相减,将相减所得结果的绝对值求和,所得最小绝对值之和的所述三项准色温环境为所述的Kn,K(n-1),K(n-2),其中n=3,4……N;不妨设为Kn,K(n-1),K(n-2),其中(n=3,4……N)采用二次曲线插值方法计算当前第一和第二摄像模块之间的色彩偏差率,计算方法如下:
Rx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Rb ( n - 2 ) Ra ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Rb ( n - 1 ) Ra ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Rbn Ran
Gx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Gb ( n - 2 ) Ga ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Gb ( n - 1 ) Ga ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Gbn Gan
Bx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Bb ( n - 2 ) Ba ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Bb ( n - 1 ) Ba ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Bbn Ban
类似的,也可以色彩亮度分量确定当前色彩偏差率,设定当前色温环境为Kx,标准色温环境为K1、K2……KN,在上述N种色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
计算得出离Kx最近的三种标准色温环境,设定为Kn,K(n-1),K(n-2),任意选取所述标准色温环境为K1、K2……KN中的三项,分别与Kx相减,将相减所得结果的绝对值求和,所得最小绝对值之和的所述三项准色温环境为所述的Kn,K(n-1),K(n-2),其中n=3,4……N;
Yx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Yb ( n - 2 ) Ya ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Yb ( n - 1 ) Ya ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Ybn Yan
Ux = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Ub ( n - 2 ) Ua ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Ub ( n - 1 ) Ua ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Ubn Uan
Vx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Vb ( n - 2 ) Va ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Vb ( n - 1 ) Va ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Vbn Van
在此需要特别,当前色彩偏差率同样可以采用第二较佳实施例中所述的修正第二路图像、第三较佳实施例中所述的YUV色彩空间,按上述实施例中的具体方式变换即可。
实施例7
本发明的第七较佳实施例与本发明的第四较佳实施例类似,提供了另外一种“确定当前色彩偏差率”的方式,简称为“多项式插值法”,如图6所示,以颜色分量为例,当前色彩偏差率的计算方式为:
Figure BDA0000459653940000176
其中
Figure BDA0000459653940000177
类似的,也可以色彩亮度分量确定当前色彩偏差率,设定当前色温环境为Kx,标准色温环境为K1、K2……KN,在上述N种色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
Figure BDA0000459653940000178
Figure BDA0000459653940000179
Figure BDA0000459653940000181
其中
Figure BDA0000459653940000182
在此需要特别,当前色彩偏差率同样可以采用第二较佳实施例中所述的修正第二路图像、第三较佳实施例中所述的YUV色彩空间,按上述实施例中的具体方式变换即可。
实施例8
本发明还提供了一种立体摄像的图像修正系统,如图7所示,本发明图像修正系统200包括中央数据处理模块201、色温测定模块202,中央数据处理模块与色温测定模块连接,所述图像修正系统修正第一摄像模块101和第二摄像模块102获取的图像,本实施例中的图像修正系统200使用了实施例1-7中的立体摄像的图像修正方法,其中,
中央数据处理模块201获取第一摄像模块101和第二摄像模块102在标准色温环境下的色彩偏差率;
色温测定模块202测定使用环境色温,并传给所述中央数据处理模块201,确定当前色彩偏差率;
第一摄像模块101获取第一路图像,第二摄像模块102获取第二路图像,中央数据处理模块根据所述当前色彩偏差率修正所述第一路图像和第二路图像;
图像修正系统200将所述的两路图像修正过后传给图像合成系统300,所述图像合成系统300将修正过的所述两路图像合成为一路立体图像数据。

Claims (15)

1.一种立体摄像的图像修正方法,其特征在于,所述图像修正方法包括如下步骤:
S1、获取立体摄像时所使用的两个摄像模块在标准色温环境下的色彩偏差率;
S2、测定使用环境色温,确定当前色彩偏差率;
S3、根据所述当前色彩偏差率修正所述两个摄像模块所获得的两路图像。
2.根据权利要求1所述的图像修正方法,其特征在于,所述标准色温环境的数量为预设数量,每个所述色温区间的宽度为预设宽度。
3.根据权利要求2所述的图像修正方法,其特征在于,所述步骤S1具体为:分别统计所述两个摄像模块在不同标准色温环境下其颜色分量或者色彩亮度分量的平均值,以不同摄像模块的所述颜色分量或者色彩亮度分量的比值作为其在各种标准色温环境下的色彩偏差率。
4.根据权利要求1-3任意一项所述的图像修正方法,其特征在于,所述步骤S2中“确定当前色彩偏差率”的计算方式为如下方法中的一种:平均值法、最近距离法、线性函数插值法、二次函数插值法、多项式插值法。
5.根据权利要求4所述的图像修正方法,其特征在于,所述平均值法具体为:以所述标准色温环境为端点划分色温区间,计算使用环境色温所处的色温区间,若所处的色温区间具有两个端点,则当前色彩偏差率等于该所处的色温区间两端点对应的两个色彩偏差率的平均值;若所处的色温区间只具有一个端点,则当前色彩偏差率等于该端点对应的色彩偏差率。
6.根据权利要求4所述的图像修正方法,其特征在于,所述最近距离法具体为:以所述标准色温环境中相邻的两色温的平均值为端点划分色温区间,计算使用环境色温所处的色温区间,当前色彩偏差率等于该所处的色温区间中的标准色温环境所对应的色彩偏差率。
7.根据权利要求4所述的图像修正方法,其特征在于,所述线性函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN);其色彩偏差率记为(Rx,Gx,Bx);
当Kx≤K2时,采用K1与K2对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = R 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Rb 2 Ra 2 - Rb 1 Ra1 )
Gx = G 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Gb 2 Ga 2 - Gb 1 Ga 1 )
Bx = B 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Bb 2 Ba 2 - Bb 1 Ba 1 )
当Kx≥K(N-1)时,采用K(N-1)与KN对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = RN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( RbN RaN - Rb ( N - 1 ) Ra ( N - 1 ) )
Gx = GN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( GbN GaN - Gb ( N - 1 ) Ga ( N - 1 ) )
Bx = BN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( BbN BaN - Bb ( N - 1 ) Ba ( N - 1 ) )
当Kn<Kx<K(n-1),(n=2,3……N)时,采用采用K(n-1)与Kn对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Rx = Rbn Ran + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Rbn Ran - Rb ( n - 1 ) Ra ( n - 1 ) ) Gx = Gbn Gan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Gbn Gan - Gb ( n - 1 ) Ga ( n - 1 ) )
Bx = Bbn Ban + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Bbn Ban - Bb ( n - 1 ) Ba ( n - 1 ) )
8.根据权利要求4所述的图像修正方法,其特征在于,所述线性函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
当Kx≤K2时,采用K1与K2对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = Y 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Yb 2 Ya 2 - Yb 1 Ya 1 )
Ux = U 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Ub 2 Ua 2 - Ub 1 Ua 1 )
Vx = V 1 + ( Kx - K 1 ) ( K 2 - K 1 ) ( Vb 2 Va 2 - Vb 1 Va 1 )
当Kx≥K(N-1)时,采用K(N-1)与KN对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = YN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( YbN YaN - Yb ( N - 1 ) Ya ( N - 1 ) )
Ux = UN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( UbN UaN - Ub ( N - 1 ) Ua ( N - 1 ) )
Vx = VN + ( Kx - KN ) ( KN - K ( N - 1 ) ) * ( VbN VaN - Vb ( N - 1 ) Va ( N - 1 ) )
当Kn<Kx<K(n-1),(n=2,3……N)时,采用采用K(n-1)与Kn对应的色彩偏差率做线性插值获取当前色彩偏差率,计算方法如下:
Yx = Ybn Yan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Ybn Yan - Yb ( n - 1 ) Ya ( n - 1 ) )
Ux = Ubn Uan + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Ubn Uan - Ub ( n - 1 ) Ua ( n - 1 ) )
Vx = Vbn Van + ( Kx - Kn ) ( Kn - K ( n - 1 ) ) ( Vbn Van - Vb ( n - 1 ) Va ( n - 1 ) )
9.根据权利要求4所述的图像修正方法,其特征在于,所述二次函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN);其色彩偏差率记为(Rx,Gx,Bx);
计算得出离Kx最近的三种标准色温环境,设定为Kn,K(n-1),K(n-2),其中n=3,4……N;
Rx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Rb ( n - 2 ) Ra ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Rb ( n - 1 ) Ra ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Rbn Ran
Gx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Gb ( n - 2 ) Ga ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Gb ( n - 1 ) Ga ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Gbn Gan
Bx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Bb ( n - 2 ) Ba ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Bb ( n - 1 ) Ba ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Bbn Ban
10.根据权利要求9所述的图像修正方法,其特征在于,任意选取所述标准色温环境为K1、K2……KN中的三项,分别与Kx相减,将相减所得结果的绝对值求和,所得最小绝对值之和的所述三项标准色温环境为所述的Kn,K(n-1),K(n-2)。
11.根据权利要求4所述的图像修正方法,其特征在于,所述二次函数插值法具体为:
当前色温环境记为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
计算得出离Kx最近的三种标准色温环境,设定为Kn,K(n-1),K(n-2),其中n=3,4……N;
Yx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Yb ( n - 2 ) Ya ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Yb ( n - 1 ) Ya ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Ybn Yan
Ux = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Ub ( n - 2 ) Ua ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Ub ( n - 1 ) Ua ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Ubn Uan
Vx = ( Kx - K ( n - 1 ) ) * ( Kx - Kn ) ( K ( n - 2 ) - K ( n - 1 ) ) * ( K ( n - 2 ) - Kn ) Vb ( n - 2 ) Va ( n - 2 ) + ( Kx - K ( n - 2 ) ) * ( Kx - Kn ) ( K ( n - 1 ) - K ( n - 2 ) ) * ( K ( n - 1 ) - Kn ) Vb ( n - 1 ) Va ( n - 1 ) + ( Kx - K ( n - 1 ) ) * ( Kx - K ( n - 2 ) ) ( Kn - K ( n - 1 ) ) * ( Kn - K ( n - 2 ) ) Vbn Van
12.根据权利要求11所述的图像修正方法,其特征在于,任意选取所述标准色温环境为K1、K2……KN中的三项,分别与Kx相减,将相减所得结果的绝对值求和,所得最小绝对值之和的所述三项标准色温环境为所述的Kn,K(n-1),K(n-2)。
13.根据权利要求4所述的图像修正方法,其特征在于,所述多项式插值法具体为:
设定当前色温环境为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的颜色分量的平均值为(Ra1,Ga1,Ba1),(Ra2,Ga2,Ba2)……(RaN,GaN,BaN);第二摄像模块的颜色分量的平均值为(Rb1,Gb1,Bb1),(Rb2,Gb2,Bb2)……(RbN,GbN,BbN);其色彩偏差率记为(Rx,Gx,Bx);
Figure FDA0000459653930000052
Figure FDA0000459653930000053
其中
Figure FDA0000459653930000054
14.根据权利要求4所述的图像修正方法,其特征在于,所述多项式插值法具体为:
设定当前色温环境为Kx,标准色温环境为K1、K2……KN,在所述N种标准色温环境下第一摄像模块的色彩亮度分量的平均值为(Ya1,Ua1,Va1),(Ya2,Ua2,Va2)……(YaN,UaN,VaN);第二摄像模块的色彩亮度分量的平均值为(Yb1,Ub1,Vb1),(Yb2,Ub2,Vb2)……(YbN,UbN,VbN);其色彩偏差率记为(Yx,Ux,Vx);
Figure FDA0000459653930000055
Figure FDA0000459653930000056
Figure FDA0000459653930000058
其中
15.一种立体摄像的图像修正系统,其特征在于,包括中央数据处理模块、色温测定模块,中央数据处理模块与色温测定模块连接,所述图像修正系统修正第一摄像模块和第二摄像模块获取的图像,其中,
中央数据处理模块获取第一摄像模块和第二摄像模块在标准色温环境下的色彩偏差率;
色温测定模块测定使用环境色温,并传给所述中央数据处理模块,确定当前色彩偏差率;
第一摄像模块获取第一路图像,第二摄像模块获取第二路图像,中央数据处理模块根据所述当前色彩偏差率修正所述第一路图像和第二路图像。
CN201410028698.8A 2014-01-21 2014-01-21 一种立体摄像的图像修正方法及系统 Active CN103796003B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410028698.8A CN103796003B (zh) 2014-01-21 2014-01-21 一种立体摄像的图像修正方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410028698.8A CN103796003B (zh) 2014-01-21 2014-01-21 一种立体摄像的图像修正方法及系统

Publications (2)

Publication Number Publication Date
CN103796003A true CN103796003A (zh) 2014-05-14
CN103796003B CN103796003B (zh) 2016-03-02

Family

ID=50671228

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410028698.8A Active CN103796003B (zh) 2014-01-21 2014-01-21 一种立体摄像的图像修正方法及系统

Country Status (1)

Country Link
CN (1) CN103796003B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105681782A (zh) * 2016-01-11 2016-06-15 广东欧珀移动通信有限公司 色温传感器校准方法和相关装置
CN106131527A (zh) * 2016-07-26 2016-11-16 深圳众思科技有限公司 双摄像头颜色同步方法、装置及终端
CN106303505A (zh) * 2015-05-29 2017-01-04 鸿富锦精密工业(深圳)有限公司 摄像头模块色彩一致性检测装置及检测方法
CN107135384A (zh) * 2017-05-19 2017-09-05 中国科学院深圳先进技术研究院 白平衡调节方法、装置、图像处理终端及存储介质
CN107205143A (zh) * 2016-03-17 2017-09-26 深圳超多维光电子有限公司 一种调整立体图像的方法及装置
CN107360418A (zh) * 2017-09-21 2017-11-17 长沙全度影像科技有限公司 一种全景相机颜色一致性评判系统及方法
CN108881737A (zh) * 2018-07-06 2018-11-23 漳州高新区远见产业技术研究有限公司 一种应用于移动终端的vr成像方法
WO2019000409A1 (zh) * 2017-06-30 2019-01-03 华为技术有限公司 一种颜色检测的方法及终端
CN109406506A (zh) * 2018-12-06 2019-03-01 北京腾康汇医科技有限公司 一种共享式自测健康终端及测试方法
WO2022036539A1 (zh) * 2020-08-18 2022-02-24 华为技术有限公司 一种多相机色彩一致性校正方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101998131A (zh) * 2009-08-11 2011-03-30 索尼公司 显示装置、显示方法和计算机程序
CN102480625A (zh) * 2010-11-26 2012-05-30 日立民用电子株式会社 立体影像处理装置及方法,立体显示装置和接收装置
CN102812714A (zh) * 2010-03-24 2012-12-05 富士胶片株式会社 立体图像获取装置
CN202713529U (zh) * 2012-05-31 2013-01-30 新奥特(北京)视频技术有限公司 一种3d视频色彩校正器
CN103139591A (zh) * 2013-03-24 2013-06-05 成都索贝数码科技股份有限公司 一种基于图形处理器的3d视频颜色自动校正方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101998131A (zh) * 2009-08-11 2011-03-30 索尼公司 显示装置、显示方法和计算机程序
CN102812714A (zh) * 2010-03-24 2012-12-05 富士胶片株式会社 立体图像获取装置
CN102480625A (zh) * 2010-11-26 2012-05-30 日立民用电子株式会社 立体影像处理装置及方法,立体显示装置和接收装置
CN202713529U (zh) * 2012-05-31 2013-01-30 新奥特(北京)视频技术有限公司 一种3d视频色彩校正器
CN103139591A (zh) * 2013-03-24 2013-06-05 成都索贝数码科技股份有限公司 一种基于图形处理器的3d视频颜色自动校正方法

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106303505A (zh) * 2015-05-29 2017-01-04 鸿富锦精密工业(深圳)有限公司 摄像头模块色彩一致性检测装置及检测方法
CN105681782A (zh) * 2016-01-11 2016-06-15 广东欧珀移动通信有限公司 色温传感器校准方法和相关装置
CN107205143A (zh) * 2016-03-17 2017-09-26 深圳超多维光电子有限公司 一种调整立体图像的方法及装置
CN106131527A (zh) * 2016-07-26 2016-11-16 深圳众思科技有限公司 双摄像头颜色同步方法、装置及终端
CN107135384A (zh) * 2017-05-19 2017-09-05 中国科学院深圳先进技术研究院 白平衡调节方法、装置、图像处理终端及存储介质
US11284013B2 (en) 2017-06-30 2022-03-22 Huawei Technologies Co., Ltd. Color detection method and terminal
WO2019000409A1 (zh) * 2017-06-30 2019-01-03 华为技术有限公司 一种颜色检测的方法及终端
CN107360418A (zh) * 2017-09-21 2017-11-17 长沙全度影像科技有限公司 一种全景相机颜色一致性评判系统及方法
CN108881737A (zh) * 2018-07-06 2018-11-23 漳州高新区远见产业技术研究有限公司 一种应用于移动终端的vr成像方法
CN109406506B (zh) * 2018-12-06 2020-03-17 北京腾康汇医科技有限公司 一种共享式自测健康终端及测试方法
CN109406506A (zh) * 2018-12-06 2019-03-01 北京腾康汇医科技有限公司 一种共享式自测健康终端及测试方法
WO2022036539A1 (zh) * 2020-08-18 2022-02-24 华为技术有限公司 一种多相机色彩一致性校正方法和装置
EP4195662A4 (en) * 2020-08-18 2023-07-26 Huawei Technologies Co., Ltd. METHOD AND DEVICE FOR COLOR CONSISTENCY CORRECTION FOR MULTIPLE CAMERAS

Also Published As

Publication number Publication date
CN103796003B (zh) 2016-03-02

Similar Documents

Publication Publication Date Title
CN103796003B (zh) 一种立体摄像的图像修正方法及系统
US10542243B2 (en) Method and system of light source estimation for image processing
CN107197225B (zh) 基于色适应模型的彩色数码相机白平衡校正方法
CN105185314B (zh) Led显示屏均匀性补偿方法
JP5427247B2 (ja) 自動ホワイトバランス(awb)調整
CN102611897B (zh) 对彩色数字图像进行视觉感知高保真变换的方法及系统
US9500526B2 (en) High-throughput and high resolution method for measuring the color uniformity of a light spot
CN108600725A (zh) 一种基于rgb-ir图像数据的白平衡校正装置及方法
CN104618702B (zh) 一种基于白块假设的数码摄像装置自动白平衡方法
KR100615277B1 (ko) 이미지 센서에서의 렌즈 셰이딩 현상 보정 방법 및 장치
JP6508890B2 (ja) 画像処理装置、その制御方法、および制御プログラム
CN108174172B (zh) 拍摄方法及装置、计算机可读存储介质和计算机设备
CN105578166B (zh) 一种色温确定方法及装置
WO2015079795A1 (ja) マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
CN106373523A (zh) 拼接亮暗线补偿方法
CN105100601B (zh) 摄像装置及其控制方法和信号处理装置
WO2015141050A1 (ja) マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
US9307213B2 (en) Robust selection and weighting for gray patch automatic white balancing
CN107872663A (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN105336308A (zh) 显示设备的色彩校准方法及色彩校准系统
KR20160025631A (ko) 화상 처리 장치, 화상 처리 방법 및 화상 처리 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체
WO2017000811A1 (zh) 一种投影图像调整方法及投影仪
EP3319316A1 (en) Method for controlling projector and projector applicable to same
US9654756B1 (en) Method and apparatus for interpolating pixel colors from color and panchromatic channels to color channels
CN107231549A (zh) 自动白平衡检测系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee
CP03 Change of name, title or address

Address after: 518000 Beek science and technology building, room, No. 9 research road, Nanshan District high tech Zone, Guangdong, China, 1501-B

Patentee after: INLIFE-HANDNET CO., LTD.

Address before: 518054 Guangdong city of Shenzhen province Nanshan District Nanhai Road Guangdong sea (Shenzhen city) 7 Building 3 floor

Patentee before: Inlife-handnet Co., Ltd.

EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20140514

Assignee: Anshun virtual reality Industrial Park Co., Ltd.

Assignor: INLIFE-HANDNET CO., LTD.

Contract record no.: 2017440020022

Denomination of invention: Method and system for correcting images shot in stereoscopic mode

Granted publication date: 20160302

License type: Common License

Record date: 20170315