具体实施方式
下面将结合本实用新型实施例中的附图,对本实用新型实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本实用新型一部分实施例,而不是全部的实施例。基于本实用新型中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本实用新型保护的范围。
本实用新型实施例所描述的终端可以包括智能手机(如Android手机、iOS手机、Windows Phone手机等)、平板电脑、掌上电脑、笔记本电脑、移动互联网设备(MID,MobileInternet Devices)或穿戴式设备等,上述终端仅是举例,而非穷举,包含但不限于上述终端。
请参阅图1-图3,为本实用新型实施例提供的一种终端的结构示意图。本实施例中所描述的终端,具体如下:
如图1所示,图1包含一外壳10,该外壳10设置有摄像头11和光学窗口12,其中,该光学窗口12包含第一透镜121和第二透镜122,该第一透镜121下方设置有闪光灯13,该第二透镜122下方设置有颜色传感器14,该第一透镜121用于扩散闪光灯13的光线,第二透镜122用于辅助颜色传感器14采集环境光,以由颜色传感器14测量环境光颜色,其中,第二透镜122为已雾化处理的透镜。
具体地,如图2所示,上述光学窗口12包含第一透镜121和第二透镜122。其中,该第一透镜121和第二透镜122之间并行排列,第一透镜121与第二透镜122之间的距离小于1厘米。
具体地,如图3所示,图3为上述终端的侧视图,如图3中,PCB焊板15上焊接有闪光灯13和颜色传感器14,其中,该闪光灯13和颜色传感器14之间的距离小于2厘米,当然,两者之间的距离越小,那么,在外壳10上开口的大小越小,不仅有利于外壳的美观,也节省在制造光学窗口过程中的成本(闪光灯13和颜色传感器14之间的距离越小,对应的光学窗口的面积越小)。当然,闪光灯13与第一透镜121之间可以有一段距离间隔,颜色传感器14与第二透镜122之间可以有一段距离间隔,通常情况下,上述一段距离均在0.5厘米以内。
当然,本实用新型实施例中所描述的终端,还可包括前壳,显示屏(触摸屏)及其他功能按键(如:HOME键,音量+、音量-),还可以包含其他钻孔(如:麦克风孔、耳机孔等等)。
可选地,上述第一透镜121的雾度小于上述第二透镜122的雾度。上述第一透镜121和第二透镜122在制作过程中,内部可均匀参杂光扩散材料,以此实现第二透镜进行雾化处理,或者,第一透镜也可进行雾化处理,但是,须保证雾化处理后的第一透镜的雾度小于第二透镜的雾度。其中,光扩散材料是通过化学或物理的手段,利用光线在行径途中遇到两个折射率(密度)相异的介质时,发生折射、反射与散射的物理现象,通过在聚甲基丙烯酸甲酯(PMMA)、聚碳酸酯(Polycarbonate,PC)、聚苯乙烯(Polystyrene,PS)、聚丙烯(Polypropylene,PP)等基材基础中添加无机或有机光扩散剂,通过基材表面的微特征结构的阵列排列调整光线、使光线发生不同方向的折射、反射、与散射,从而改变光的行进路线,实现入射光充分散色以此产生光学扩散的效果。应用中,光扩散材料覆盖在颜色传感器上时,能增大入射角度的光线,且颜色传感器的各光点感应单元感应到的光线强度和光谱较为接近。由于扩散作用,测量的指向性更弱,不容易受到环境中局部鲜艳物体的影响,基于上述结构,可使得颜色传感器14能更准确地测量环境光信息。
需要说明的是,如图4所示,图4为两种透镜下颜色传感器采集环境光对比图,a图中透镜,其内部成分不包含上述光扩散材料,因而,光穿过透镜的时候,直接进行直射,因而,采集环境光的能力有限,并且有可能遗漏部分光源,而b图中透镜,其内部成分含上述光扩散材料,因而,光进入透镜的时候,光会发生折射,散射等现象,因而,可将一束光分为多束,而有的来自不同光源的光可进行混合(使得不同方向的光源的光线响应灵敏度比较接近),颜色传感器可充分采集环境光,因此,可接收不同光源混合后的光,可得到更多的环境光数据,可用于准确采集环境光。b图采集环境光的效果比图a采集环境光的效果好。
可选地,上述第一透镜121的视角(Field of View,FOV)小于第二透镜122的FOV。
进一步可选地,第二透镜122的FOV可大于摄像头11的FOV。例如,拍照过程中,可能摄像头的FOV有限,因而,拍照过程中视野范围中可能遗漏部分光源,而第二透镜122的FOV可大于摄像头11的FOV的话,第二透镜122的FOV更大,因此,具备采集摄像头的FOV以外的光源,从而,颜色传感器可更加准确地采集环境光。
可选地,上述摄像头11和闪光灯13的FOV通常可设计成比较接近,即摄像头11的视角与闪光灯13的FOV之间的差值小于某一阈值,从而,可以使得闪光灯13拍照时,画面亮度比较均匀。其中,上述阈值可为5度,4度,3度,1度,0.1度,具体地,依据具体实际应用需求而定,在此不作限定。当然,在环境光光源没有落在摄像头视野内时,可通过第二透镜122透过环境光,由颜色传感器14采集环境光。因此,在第二透镜122的FOV大于摄像头11的FOV,可进一步提高测量环境光的准确性。
可选地,第一透镜121可为菲尼尔透镜,第二透镜122可为平面透光镜。
可选地,第一透镜121可为菲尼尔透镜,第二透镜122可为菲尼尔透镜,但是,第一透镜121的雾度小于第二镜头122的雾度。进一步地,第一透镜121的焦距小于第二透镜122的焦距。
可以看出,通过本实用新型实施例中所描述的终端外壳设置有摄像头和光学窗口,其中,光学窗口包含第一透镜和第二透镜,第一透镜下方设置有闪光灯,第二透镜下方设置有颜色传感器,第一透镜用于扩散闪光灯的光线,第二透镜用于辅助颜色传感器采集环境光,其中,第二透镜为已雾化处理的透镜。从而,由于第二透镜进行了雾化处理,因此,可使得颜色传感器准确地采集环境光。
与上述一致地,请参阅图5-图7,为本实用新型实施例提供的一种终端的又一实施例结构示意图。本实施例中所描述的终端,包括:
结合图5-图7,外壳20,该外壳20设置有摄像头21和光学窗口22,其中,该光学窗口22包含第一透镜221和第二透镜222,该第一透镜221下方设置有闪光灯23,该第二透镜222下方设置有颜色传感器24,该第一透镜221用于扩散闪光灯23的光线,第二透镜222用于辅助颜色传感器24采集环境光,以由颜色传感器24测量环境光颜色,其中,第一透镜221为菲尼尔透镜,第二透镜222为平面透光镜,其中,第二透镜222为已雾化处理的透镜。通常情况下,平面透光镜的视角会大于菲尼尔透镜的视角(由于平面透光镜表面呈现平面,而菲尼尔透镜表面呈现凸透状,因而,平面透光镜的视角会大于菲尼尔透镜的视角),因此,可保证第二透镜222的视角大于第一透镜221的视角,以便于第二透镜222可在拍照过程中,辅助颜色传感器24全面采集环境光,当然,在开启闪光灯时,颜色传感器24可捕捉到闪光灯视角以外的环境光。
具体地,如图7所示,图7为上述终端的侧视图,如图7中,PCB焊板25上焊接有闪光灯23和颜色传感器24,其中,该闪光灯23和颜色传感器24之间的距离小于2厘米,当然,两者之间的距离越小,那么,在外壳20上开口的大小越小,不仅有利于外壳的美观,也节省在制造光学窗口过程中的成本(闪光灯23和颜色传感器24之间的距离越小,对应的光学窗口的面积越小)。
可以看出,通过本实用新型实施例中所描述的终端外壳设置有摄像头和光学窗口,其中,光学窗口包含第一透镜和第二透镜,第一透镜下方设置有闪光灯,第二透镜下方设置有颜色传感器,第一透镜用于扩散闪光灯的光线,第二透镜用于辅助颜色传感器采集环境光,其中,第一透镜221为菲尼尔透镜,第二透镜222为平面透光镜,第二透镜为已雾化处理的透镜。从而,由于第二透镜进行了雾化处理,因此,可使得颜色传感器准确地采集环境光。
基于上述终端的结构,请参阅图8,为本实用新型实施例提供的一种终端制造工艺的实施例流程示意图。本实施例中所描述的制造工艺,包括以下步骤:
801、提供PCB焊板,所述PCB焊板焊接有闪光灯和颜色传感器;
802、提供第一透镜和第二透镜;
803、提供外壳,所述外壳包含钻孔;
804、将所述第一透镜和所述第二透镜镶嵌于在所述钻孔的位置;
805、将所述PCB焊板和所述外壳组装在一起,使得所述第一透镜与所述闪光灯相对设置和所述第二透镜与所述颜色传感器相对设置。
其中,第一透镜与闪光灯相对设置可实现由第一透镜扩散闪光灯的光线,第二透镜与颜色传感器相对设置可由第二透镜辅助颜色传感器采集环境光。
可选地,上述提供第一透镜和第二透镜包括:
提供一个模具,在所述模具上并行排列所述第一透镜和所述第二透镜;采用PMMA对所述第一透镜和所述第二透镜进行注塑。当然,采用聚甲基丙烯酸甲酯(PMMA)对第一透镜和第二透镜,然后,采用一定的温度对其进行烧制,最后,冷却成型,即可将第一透镜和第二透镜集成到一起。其中,该第一透镜和第二透镜分开并行排列,第一透镜与第二透镜之间的距离小于1厘米。
可选地,第一透镜可为菲尼尔透镜,第二透镜可为平面透光镜。
可选地,第一透镜可为菲尼尔透镜,第二透镜可为菲尼尔透镜。
可选地,上述第一透镜的光扩散材料成分小于阈值,上述第二透镜的光扩散材料成分大于所述阈值。当然,第一透镜可以少含或者不含光扩散材料,第二透镜则含有光扩散材料。上述阈值可根据用户需求或者实际应用进行设置,在此不做限定。
当然,上述终端的外壳还可包含另一钻孔,即用于安置摄像头,该技术属于现有技术,在此不再赘述。
可选地,上述第一透镜的FOV可小于第二透镜的FOV。
进一步可选地,第二透镜的FOV可大于摄像头的FOV。
可选地,第一透镜的焦距小于第二透镜的焦距。
可以看出,通过本实用新型实施例中所描述的终端外壳设置有摄像头和光学窗口,其中,光学窗口包含第一透镜和第二透镜,第一透镜下方设置有闪光灯,第二透镜下方设置有颜色传感器,第一透镜用于扩散闪光灯的光线,第二透镜用于辅助颜色传感器采集环境光,其中,第二透镜为已雾化处理的透镜。从而,由于第二透镜进行了雾化处理,因此,可使得颜色传感器准确地采集环境光。
基于上述终端的结构及制造工艺,请参阅图9,为本实用新型实施例提供的一种图像处理的方法的实施例流程示意图。本实施例中所描述的图像处理的方法,包括以下步骤:
901、确定环境光与预设颜色卡之间的标定数据。
本实用新型实施例中,采用上述光学窗口的终端,颜色传感器可更全面的采集环境光。可基于上述结构的颜色传感器采集关于环境光的颜色数据,利用该终端的摄像头采集预设颜色卡的图像。其中,颜色传感器可为RGBW传感器、色谱传感器。其中,RGBW包含4个颜色数据采集通道,因而,可分别利用该4个通道采集不同的颜色数据,该4个颜色数据采集通道可分别为R(红色)通道的颜色数据、G(绿色)通道的颜色数据、B(蓝色)通道的颜色数据和W(白色)通道的颜色数据。其中,预设颜色卡可为灰卡和色卡,灰卡即只能显示黑白颜色,色卡可呈现彩色,常用的色卡,如24色卡、144色卡。可选地,本实用新型实施例中,可建立环境光的颜色数据与该环境光下的获取到的预设颜色卡的颜色卡图像之间的标定数据。
902、获取当前环境光的颜色数据。
本实用新型实施例中,由于每时每刻环境中的光线不一样,因此,终端可利用颜色传感器获取当前环境光的颜色数据。
需要说明的是,在预设颜色卡为灰卡时,可分别利用颜色传感器的各个通道对当前环境光采集颜色数据。在预设颜色卡为色卡时,可利用颜色传感器直接对当前环境光采集颜色数据。
进一步地,假设颜色传感器为RGBW传感器,那么,在预设颜色卡为灰卡时,由于灰卡为颜色为黑白,因而,它的数据只需要一个通道的数据便可表示,因而,终端可分别利用该RGBW传感器的4个通道对环境光采集颜色数据;在预设颜色卡为色卡时,由于色卡为彩色,包含RGB三个通道的数据,因而,终端可直接利用RGBW传感器的4个通道直接采集彩色的颜色数据。
903、根据所述标定数据和所述当前环境光的颜色数据确定环境光参数。
本实用新型实施例中,终端可构造颜色数据和标定数据之间的函数关系,例如,可将颜色数据作为输出数据,而将标定数据作为输入数据,输入数据与输出数据之间可存在映射关系,根据该映射关系构造输入数据和输出数据之间的函数,从而,可将求出的解作为环境光参数。或者,可将颜色数据作为输入数据,而将标定数据作为输出数据,输入数据与输出数据之间可存在映射关系,根据该映射关系构造输入数据和输出数据之间的函数,从而,可将求出的解作为环境光参数。
904、根据所述环境光参数对待处理图像进行颜色矫正。
本实用新型实施例中,终端可利用环境光参数对待处理图像进行颜色矫正。例如,环境光参数可为环境光中不同光源的光的比重,根据该环境光参数对待处理图像进行颜色矫正。
通过本实用新型实施例确定环境光与预设颜色卡之间的标定数据;获取当前环境光的颜色数据;根据该标定数据和该颜色数据确定环境光参数;根据该环境光参数对待处理图像进行颜色矫正。从而,可利用标定数据与当前环境中的环境光参数,根据该环境光参数对待处理图像进行颜色矫正,由于本实用新型实施例中利用环境光对颜色进行矫正,因而,可较准确地对彩色图像进行矫正。
与上述一致地,请参阅图10,为本实用新型实施例提供的一种图像处理的方法的又一实施例流程示意图。本实施例中所描述的图像处理的方法,包括以下步骤:
1001、利用颜色传感器分别采集N个不同光源环境下的N个颜色数据,其中,所述N为不小于3的整数。
本实用新型实施例中,N个不同光源为环境中的不同的光源,终端可利用颜色传感器采集该N个不同光源环境下的N个颜色数据。该N为不小于3的整数,即在步骤1001的实现过程中,要求采集不少于3种光源的颜色数据。在每一光源下可得到对应的颜色数据。
例如,可利用颜色传感器分别采集早上环境光的颜色数据、中午环境光的颜色数据和晚上环境光的颜色数据。或者,可利用颜色传感器采集路灯下环境光的颜色数据、手电筒下环境光的颜色数据和台灯下环境光的颜色数据。
首先,使用颜色传感器测量不同光源下的颜色数据sck,1<k≤N,其中N为光源种类的数量,其中,k表示第k个光源。
其中,SRk,SGk,SBk,SWk是RGBW传感器的4个通道测量得到的颜色数据,其中,SRk为红色通道得到的颜色数据,SGk为绿色通道得到的颜色数据,SBk为蓝色通道得到的颜色数据,SWk为白色通道得到的颜色数据。进一步地,sredk为归一化后的红色通道的颜色数据,sgreenk为归一化后的绿色通道的颜色数据,sbluek为归一化后的蓝色通道的颜色数据。其中,
1002、获取所述N个不同光源环境下针对灰卡的N个灰卡图像。
本实用新型实施例中,可分别N个不同光源环境下,利用终端的摄像头进行拍摄,以得到该针对灰卡的该N个不同光源环境下的N个灰卡图像,N个不同光源环境中的每一光源环境分别对应一个灰卡图像,Ik表示第k个灰卡图像,其中,1<k≤N。
具体地,终端可在N个不同光源环境下对准灰卡,即摄像头的拍摄范围被灰卡占据。在每一光源环境下,可得到针对灰卡的灰卡图像。
1003、根据所述N个颜色数据和所述N个灰卡图像确定标定数据。
本实用新型实施例中,终端可建立N个颜色数据与N个灰卡图像之间的映射关系。具体实现过程中,需要要求要尽可能地使光源类型覆盖了拍摄场景中可能出现的光源类型。
首先,计算各种光源类型下的针对灰卡的灰卡图像平均灰度grayk,表示第k个光源环境下的平均灰度。
然后,计算各场景下的灰卡的平均颜色;
Rk、Gk和Bk分别是第k个光源下灰卡图像的R通道、G通道、B通道的平均值。而rk表示归一化后的R通道的平均值,gk表示归一化后的G通道的平均值和表示归一化后的B通道的平均值。
最后,建立sck与grayk之间的映射关系,该两者之间的映射关系即是标定数据。
具体地,建立sck与grayk之间的映射关系的可如下:
sckM=grayk
即:
通过该等式可求解出每种光源下的M,其中,M即为标定数据,将N种光源环境下得到的标定数据进行保存,并建立标定数据库。
可选地,也通过对比方法确定sck与grayk之间的映射关系,然后,通过查表的方法查找该映射关系,即标定数据。其中,每一种光源环境下都有一组对应的映射关系,对N个映射关系进行拟合,从而,得到标定数据库。
1004、获取当前环境光的颜色数据。
本实用新型实施例中,终端可利用颜色传感器获取当前环境光的颜色数据。终端可利用RGBW颜色传感器获取当前环境光的颜色数据。
1005、根据所述标定数据和所述当前环境光的颜色数据确定环境光参数。
本实用新型实施例中,终端可利用当前环境光的颜色数据和标定数据确定环境光参数,其中,该环境光参数,即为当前环境下的各种光源的比例成分。
可选地,终端可确定标定数据中与当前环境下匹配的目标标定数据,根据该目标标定数据与当前环境光的颜色数据确定环境光参数。具体地,可拍摄待处理图像,同时利用颜色传感器测量当前环境光的颜色数据,然后求解环境光参数。进一步地,终端还可根据该环境光参数计算虚拟灰卡的颜色数据,最后根据虚拟灰卡的颜色数据计算白平衡增益,其中,该虚拟灰卡是指拍摄场景中并不存在,但是,本实用新型实施例中的算法可根据颜色传感器及先验知识估计出灰卡在当前拍摄场景中的颜色。
具体求解方法如下:
首先,终端可确定标定数据中与当前环境下匹配的目标标定数据,即计算当前环境下,标定数据中对应于N种光源中欧氏距离最小的三种标定光源的颜色(scm1 scm2 scm3),记作SCm=(scm1 scm2 scm3),即确定标定数据中与当前环境下匹配的目标标定数据。具体地,终端可确定出标定数据中与当前环境光的颜色数据之间欧式距离最小的3组数据作为目标标定数据。即计算当前环境光中颜色数据与标定数据库中包含的每一标定数据之间的欧氏距离,从而,可得到多个欧氏距离值,确定出该多个欧式距离值中最小的三个欧氏距离值,将该三个欧氏距离值对应的光源的颜色数据作为当前环境下的颜色数据。
然后,终端可根据目标标定数据与当前环境光的颜色数据确定环境光参数,
可令:
其中,pk表示环境光参数,k的取值为1,或2,或3,sck表示目标标定数据,sc表示当前环境下的颜色数据。
该映射关系可根据SCm的秩分为3种情况下,因而,计算矩阵SCm的秩。
(1)、若SCm的秩为1,则取scm1、scm2、scm3中的任一个颜色数据作为环境光的颜色数据。那么,虚拟灰卡的颜色数据为grayvirtual=graym1,即P=I,I为单位矩阵;
(2)、若SCm的秩为2,则认为当前环境光是标定光源中2种光源线性组合。
故,令其中P是加权系数,即环境光参数。
记为矩阵形式:SC3×2·P2×1=sc3×1,其中
从而,求解该矛盾方程SC3×2·P3×1=sc3×1得到环境光参数P=SC+·sc,SC+是SC的Moore-Penrose逆矩阵。
则,虚拟灰卡的颜色数据grayvirtual为:
(3)、若SCm的秩为3,则可认为当前环境光是标定光源中3种不同光源的线性组合。
故,令其中p是加权系数,即环境光参数。
记为矩阵形式:SC3×3·P3×1=sc3×1,其中:
从而,求解矛盾方程SC3×3·P3×1=sc3×1,得到环境光参数P=SC+·sc,令得到的环境光参数为:
则,虚拟灰卡的颜色数据grayvirtual为:
1006、根据所述环境光参数对待处理图像进行颜色矫正。
本实用新型实施例中,终端可利用环境光参数对待处理图像进行颜色矫正,具体如下:
具体地,grayvirtual可看作灰卡的颜色数据,将该grayvirtual分为RGB三通道数据,如下:
对该grayvirtual进行归一化处理,即可得到白平衡增益,如下:
利用该白平衡增益对待处理图像进行矫正:
其中,待处理图像I={IR,IG,IB},输出图像为I'={I'R,I'G,I'B}。
通过本实用新型实施例利用颜色传感器分别采集N个不同光源环境下的N个颜色数据,获取该N个不同光源环境下针对灰卡的N个颜色卡图像,并根据该N个颜色数据和该N个灰卡图像确定标定数据;获取当前环境光的颜色数据;根据该标定数据和该颜色数据确定环境光参数;根据该环境光参数对待处理图像进行颜色矫正。从而,可利用标定数据与当前环境中的环境光参数,根据该环境光参数对待处理图像进行颜色矫正,由于本实用新型实施例中利用环境光对颜色进行矫正,因而,可较准确地对彩色图像进行矫正。
与上述一致地,请参阅图11,为本实用新型实施例提供的一种图像处理的方法的又一实施例流程示意图。本实施例中所描述的图像处理的方法,包括以下步骤:
1101、确定环境光与色卡之间的标定数据。
本实用新型实施例中,终端可基于颜色传感器采集关于环境光的颜色数据,利用该终端的摄像头采集预设颜色卡的图像。其中,颜色传感器可为RGBW传感器、色谱传感器。
可选地,终端利用颜色传感器分别采集N个不同光源环境下的N个颜色数据,其中,该N为不小于3的整数,获取该N个不同光源环境下针对色卡的N个色卡图像,根据该N个颜色数据和该N个颜色卡图像确定标定数据。
具体实现过程中,首先,使用颜色传感器测量不同光源下的颜色数据sck,1<k≤N,其中N为光源种类的数量,其中,k表示第k个光源。
其中,SRk,SGk,SBk,SWk是RGBW传感器的4个通道测量得到的颜色数据,其中,SRk为红色通道得到的颜色数据,SGk为绿色通道得到的颜色数据,SBk为蓝色通道得到的颜色数据,SWk为白色通道得到的颜色数据。进一步地,sredk为归一化后的红色通道的颜色数据,sgreenk为归一化后的绿色通道的颜色数据,sbluek为归一化后的蓝色通道的颜色数据。其中,
然后,可分别N个不同光源环境下,利用终端的摄像头进行拍摄,以得到该针对色卡的该N个不同光源环境下的N个色卡图像,N个不同光源环境中的每一光源环境分别对应一个色卡图像,Ik表示第k个色卡图像,其中,1<k≤N。其中,终端可在N个不同光源环境下对准色卡,即摄像头的拍摄范围被色卡占据。在每一光源环境下,可得到针对色卡的色卡图像。
最后,终端可建立N个颜色数据与N个色卡图像之间的映射关系。具体实现过程中,需要要求要尽可能地使光源类型覆盖了拍摄场景中可能出现的光源类型。
(1),计算各种光源类型下的针对色卡的色卡图像平均灰度colork,表示第k个光源环境下的平均灰度。
然后,计算各场景下的色卡的平均颜色;
Rk、Gk和Bk分别是第k个光源下色卡图像的R通道、G通道、B通道的平均值。而rk表示归一化后的R通道的平均值,gk表示归一化后的G通道的平均值和表示归一化后的B通道的平均值。
最后,建立sck与colork之间的映射关系,该两者之间的映射关系即是标定数据。
具体地,建立sck与colork之间的映射关系的可如下:
sckX=colork
即:
通过该等式可求解出每种光源下的X,其中,X即为标定数据,将N种光源环境下得到的标定数据进行保存,并建立标定数据库。
可选地,也通过对比方法确定sck与colork之间的映射关系,然后,通过查表的方法查找该映射关系,即标定数据。其中,每一种光源环境下都有一组对应的映射关系,对N个映射关系进行拟合,从而,得到标定数据库。
本实用新型实施例中,终端可建立颜色数据与colork之间的映射关系。例如,令颜色数据为A,色卡图像为B,映射关系为C,AC=B,C也即为标定数据。具体地,终端可构造颜色数据与色卡图像之间的函数关系,根据该函数关系计算出标定数据。具体实现过程种,可以根据24色卡为例加以说明,即根据颜色传感器与24色卡确定环境光与24色卡之间的标定数据。
需要说明的是,colork是指第k种光源下,24色卡的亮度归一化颜色数据。由于不同拍摄场景中图像亮度可能不一致,在计算完颜色数据之后,要根据亮度对这些颜色数据实施归一化,可以选择第20号色块的亮度作为参考,对上述颜色数据倍乘一个系数K,使得这些颜色数据中第20号色块与标准色卡的第20号色块亮度相同即可。系数K为标准色卡的20号色块与各场景下拍摄的图像中20号色块的比值。
1102、获取当前环境光的颜色数据。
本实用新型实施例中,终端可利用颜色传感器获取当前环境光的颜色数据。终端可利用RGBW颜色传感器获取当前环境光的颜色数据。
1103、根据所述标定数据和所述当前环境光的颜色数据确定环境光参数。
本实用新型实施例中,终端可按照实施例1求解环境光参数方法如下:
即,终端可确定所述标定数据中与所述当前环境下匹配的目标标定数据;根据所述目标标定数据与所述当前环境光的颜色数据确定环境光参数。
具体地,首先,确定出标定数据中与当前环境光的颜色数据之间欧式距离最小的3组数据作为目标标定数据。即计算当前环境光中颜色数据与标定数据库中包含的每一标定数据之间的欧氏距离,从而,可得到多个欧氏距离值,确定出该多个欧式距离值中最小的三个欧氏距离值,将该三个欧氏距离值对应的光源的颜色数据作为当前环境下的颜色数据。
其次,计算与c欧氏距离最小的三种标定光源的颜色Cm=(cm1 cm2 cm3),然后计算Cm的秩。
(1)、若Cm的秩为1,则取cm1中任一种作为环境光的颜色数据,虚拟色卡的颜色数据为colorvirtual=colorm1;
(2)、若Cm的秩为2,认为当前环境光是标定光源中2种光源线性组合。
令:
其中p是加权系数。
记为矩阵形式:C·P=c,其中:
求解矛盾方程CP=c得到环境光参数P=C+·c,C+是C的Moore-Penrose逆矩阵。
colorvirtual=p1·colorm1+p2·colorm2
(3)、若Cm的秩为3,则认为当前环境光是标定光源中3种光源线性组合。
令:
其中,P是加权系数,也是环境光参数。
记为矩阵形式:C·P=c,其中:
求解方程CP=c得到环境光参数,求解P,可将P的形式记作如下:
1104、根据所述环境光参数确定虚拟色卡的颜色数据。
本实用新型实施例中,终端可在环境光基础上确定虚拟色卡的颜色数据,具体如下:
虚拟色卡可记作:
colorvirtual=p1·colorm1+p2·colorm2+p3·colorm3,
以24色卡为例进行说明,那么,
1105、获取标准色卡的颜色数据。
本实用新型实施例中,标准色卡的颜色数据可由厂家或者标准组织定义。
1106、根据所述标准色卡的颜色数据与所述虚拟色卡的颜色数据确定颜色再生矩阵。
本实用新型实施例中,记标准色卡各色块的颜色向量为colorstd,如果色卡中有N个色块,则colorstd为N×3的矩阵。该矩阵的数据由厂家或者标准组织定义。
以标准24色卡为例进行说明,该标准24色卡的颜色数据已知,记为:
要求解的颜色再生矩阵为M3×3得方程组:
colorstd=colorvirtual·M3×3
由于误差的原因上述方程对每个色块都成立,因此这是一个矛盾方程组,只需要求解最小二乘解。
即求解最优化问题:即是一个线性优化问题:
将上式进行展开可得到:
从而,得到三个独立的矛盾方程组矛盾方程组Ax=b的极小2范数最小2乘解为x=A+b,其中A+是A的Moore-Penrose逆矩阵。
用上述方法可以分别求得,
从而,可完成对M3×3的求解。
1107、根据所述颜色再生矩阵对待处理图像进行颜色矫正。
本实用新型实施例中,终端可根据下面方程对待处理图像中的每一像素点实施颜色矫正,如下:
可选地,还可以其他色卡作为预设颜色卡对本实用新型实施例进行求解。
本实用新型实施例中,标准色卡的颜色数据已知,可通过标准色卡的生产信息得知。而颜色再生矩阵,可记作如下:
其中,是输出颜色数据,为颜色再生矩阵,为待处理图像。
可将颜色再生矩阵记作为:
那么,可以得到:
总之,在矩阵M3×3能够准确求解时,输出图像的颜色一般都能够颜色再生矩阵的转换较为准确地还原颜色。
通过本实用新型实施例确定环境光与色卡之间的标定数据;获取当前环境光的颜色数据;根据该标定数据和该颜色数据确定环境光参数;根据该环境光参数确定虚拟色卡的颜色数据;获取标准色卡的颜色数据,根据该标准色卡的颜色数据与该虚拟色卡的颜色数据确定颜色再生矩阵;根据该颜色再生矩阵对待处理图像进行颜色矫正。从而,可利用标定数据与当前环境中的环境光参数,根据该环境光参数对待处理图像进行颜色矫正,由于本实用新型实施例中利用环境光对颜色进行矫正,因而,可较准确地对彩色图像进行矫正。
与上述一致地,以下为实施上述图像处理方法的虚拟装置及实体装置,具体如下:
请参阅图12,为本实用新型实施例提供的一种终端的又一实施例结构示意图。本实施例中所描述的终端,包括:第一确定单元1201、第一获取单元1202、第二确定单元1203和第一矫正单元1204,具体如下:
第一确定单元1201,用于确定环境光与预设颜色卡之间的标定数据。
第一获取单元1202,用于获取当前环境光的颜色数据。
第二确定单元1203,用于根据所述第一确定单元1201确定的所述标定数据和所述第一获取单元1202获取到的所述颜色数据确定环境光参数。
第一矫正单元1204,用于根据所述第二确定单元1203确定的所述环境光参数对待处理图像进行颜色矫正。
可选地,所述第一确定单元1201包括:
采集单元(图中未标出),用于利用颜色传感器分别采集N个不同光源环境下的N个颜色数据,其中,所述N为不小于3的整数。
第二获取单元(图中未标出),用于获取所述N个不同光源环境下预设颜色卡的N个颜色卡图像;
第三确定单元(图中未标出),根据所述采集单元采集到的所述N个颜色数据和所述第二获取单元获取到的所述N个颜色卡图像确定标定数据。
可选地,所述第二确定单元1203包括:
第四确定单元(图中未标出),用于确定所述标定数据中与所述当前环境下匹配的目标标定数据
第五确定单元(图中未标出),用于构造所述第四确定单元确定的所述目标标定数据与所述当前环境光的颜色数据确定环境光参数。
进一步可选地,所述标定数据包含至少3组数据,所述第四确定单元具体用于:
确定出所述标定数据中与所述当前环境光的颜色数据之间欧式距离最小的3组数据作为目标标定数据。
可选地,在所述预设颜色卡为色卡时,所述第一矫正单元1204可包括:
第六确定单元(图中未标出),用于根据所述环境光参数确定虚拟色卡的颜色数据;
第三获取单元(图中未标出),用于获取标准色卡的颜色数据;
第七确定单元(图中未标出),用于根据所述第三获取单元获取的所述标准色卡的颜色数据与所述第六确定单元确定的所述虚拟色卡的颜色数据确定颜色再生矩阵;
第二矫正单元(图中未标出),用于根据所述第七确定单元确定的所述颜色再生矩阵对待处理图像进行颜色矫正。
通过本实用新型实施例所描述的终端确定环境光与该预设颜色卡之间的标定数据;获取当前环境光的颜色数据;根据该标定数据和该颜色数据确定环境光参数;根据该环境光参数对待处理图像进行颜色矫正。从而,可利用标定数据与当前环境中的环境光参数,根据该环境光参数对待处理图像进行颜色矫正,由于本实用新型实施例中利用环境光对颜色进行矫正。
请参阅图13,为本实用新型实施例提供的一种终端的又一实施例结构示意图。本实施例中所描述的终端,包括:至少一个输入设备1000;至少一个输出设备2000;至少一个处理器3000,例如CPU;和存储器4000,上述输入设备1000、输出设备2000、处理器3000和存储器4000通过总线5000连接。
其中,上述输入设备1000具体可为触控面板、物理按键或者鼠标。
上述输出设备2000具体可为显示屏。
上述存储器4000可以是高速RAM存储器,也可为非易失存储器(non-volatilememory),例如磁盘存储器。上述存储器4000用于存储一组程序代码,上述输入设备1000、输出设备2000和处理器3000用于调用存储器4000中存储的程序代码,执行如下操作:上述处理器3000,用于:
确定环境光与预设颜色卡之间的标定数据;
获取当前环境光的颜色数据;
根据所述标定数据和所述当前环境光的颜色数据确定环境光参数;
根据所述环境光参数对待处理图像进行颜色矫正。
可选地,上述处理器3000确定环境光与预设颜色卡之间的标定数据,包括:利用颜色传感器分别采集N个不同光源环境下的N个颜色数据,其中,所述N为不小于3的整数;
获取所述N个不同光源环境下预设颜色卡的N个颜色卡图像;
根据所述N个颜色数据和所述N个颜色卡图像确定标定数据。
可选地,上述处理器3000根据所述标定数据和所述当前环境光的颜色数据确定环境光参数,包括:
确定所述标定数据中与所述当前环境下匹配的目标标定数据;
构造所述目标标定数据与所述当前环境光的颜色数据之间的映射关系;
根据所述映射关系计算出环境光参数。
可选地,所述标定数据包含至少3组数据,上述处理器3000所述确定标定数据中与所述当前环境下匹配的目标标定数据,包括:
确定出所述标定数据中与所述当前环境光的颜色数据之间欧式距离最小的3组数据作为目标标定数据。
可选地,上述处理器3000,在所述预设颜色卡为色卡时,根据所述环境光参数对待处理图像进行颜色矫正,包括:
根据所述环境光参数确定虚拟色卡的颜色数据;
获取标准色卡的颜色数据;
根据所述标准色卡的颜色数据与所述虚拟色卡的颜色数据确定颜色再生矩阵;
根据所述颜色再生矩阵对待处理图像进行颜色矫正。
本实用新型所有实施例中的单元,可以通过通用集成电路,例如CPU(CentralProcessing Unit,中央处理器),或通过ASIC(Application Specific IntegratedCircuit,专用集成电路)来实现。
本实用新型实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本实用新型实施例终端中的单元可以根据实际需要进行合并、划分和删减。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存取存储器(Random AccessMemory,简称RAM)等。
以上对本实用新型实施例所提供的图像处理方法、终端及其制造工艺进行了详细介绍,本文中应用了具体个例对本实用新型的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本实用新型的方法及其核心思想;同时,对于本领域的一般技术人员,依据本实用新型的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本实用新型的限制。