CN112153356A - 图像参数的确定方法、图像传感器、装置、电子设备及存储介质 - Google Patents

图像参数的确定方法、图像传感器、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112153356A
CN112153356A CN202010974590.3A CN202010974590A CN112153356A CN 112153356 A CN112153356 A CN 112153356A CN 202010974590 A CN202010974590 A CN 202010974590A CN 112153356 A CN112153356 A CN 112153356A
Authority
CN
China
Prior art keywords
image
spectral information
determining
color
spectral
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010974590.3A
Other languages
English (en)
Inventor
刘君
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202010974590.3A priority Critical patent/CN112153356A/zh
Publication of CN112153356A publication Critical patent/CN112153356A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals

Abstract

本申请公开了一种图像参数的确定方法、图像传感器、装置、电子设备及存储介质。其中,方法包括:通过设定的图像传感器获取待处理图像对应的光谱信息;所述光谱信息由所述图像传感器的第一区域获取到;所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素点组成的区域;所述第一区域上成像的图像携带有光谱信息;根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵。

Description

图像参数的确定方法、图像传感器、装置、电子设备及存储 介质
技术领域
本申请涉及图像技术领域,尤其涉及一种图像参数的确定方法、图像传感器、装置、电子设备及存储介质。
背景技术
目前,在对图像进行处理的时候,基于图像传感器采集的色彩信息确定图像的照明情况,根据照明情况对应的颜色转换矩阵(CCM,Color Correction Matrix),将图像传感器采集的色彩信息转换为与人眼相关的三刺激值信息,会导致输出的图像的颜色与实际图像的颜色存在较大的偏差,降低了图像处理的效果。
发明内容
有鉴于此,本申请实施例提供一种图像参数的确定方法、装置、电子设备及存储介质,以至少解决相关技术出现的图像的颜色出现偏差,降低图像处理的效果的问题。
本申请实施例的技术方案是这样实现的:
本申请实施例提供了一种图像参数的确定方法,所述方法包括:
通过设定的图像传感器获取待处理图像对应的光谱信息;所述光谱信息由所述图像传感器的第一区域获取到;所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素点组成的区域;所述第一区域上成像的图像携带有光谱信息;
根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵。
上述方案中,所述根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵。
上述方案中,所述根据所述光谱信息与待处理图像的颜色信息,确定所述待处理图像对应的颜色矩阵,包括:
根据所述光谱信息以及人眼光谱响应,确定响应参数;所述响应参数表征人眼在所述光谱信息对应的照明环境下对颜色的响应;
根据所述颜色信息以及响应参数,确定所述待处理图像对应的颜色矫正矩阵。
上述方案中,所述根据所述光谱信息以及人眼光谱响应,确定响应参数,包括:
对所述人眼光谱响应进行插值处理,使所述人眼光谱响应中每个颜色分量的维度与所述光谱信息中包含的通道数相同;
根据所述光谱信息以及插值处理后的人眼光谱响应,确定所述响应参数。
上述方案中,所述根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
当设定数据库中存在与所述光谱信息匹配的光谱信息时,将所述设定数据库中与匹配的光谱信息关联的颜色矫正矩阵确定为所述待处理图像对应的颜色矫正矩阵;其中,
所述设定数据库中存储有至少一个颜色矫正矩阵和与所述至少一个颜色矫正矩阵中的每个颜色矫正矩阵关联的光谱信息。
上述方案中,所述方法还包括:
当设定数据库中不存在与所述光谱信息匹配的光谱信息时,根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵;
将所述颜色矫正矩阵与所述光谱信息关联存储至设定数据库。
上述方案中,所述方法还包括:
根据所述颜色矫正矩阵调整所述待处理图像的颜色信息,并输出调整后的待处理图像。
本申请实施例还提供了一种图像传感器,包括:
位于第一区域且对与设定光谱区域相关联的光信号敏感的第一像素单元;
所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素单元组成的区域。
上述方案中,所述第一像素单元包括光传感器和滤色片;所述光传感器用于获取与设定光谱区域相关联的光信号的光谱信息;所述滤色片用于滤除设定的光谱区域之外的所有光信号,使得仅通过与设定光谱区域相关联的光信号。
本申请实施例还提供了一种图像参数的确定装置,包括:
获取单元,用于通过设定的图像传感器获取待处理图像对应的光谱信息;所述光谱信息由所述图像传感器的第一区域获取到;所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素点组成的区域;所述第一区域上成像的图像携带有光谱信息;
确定单元,用于根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵。
本申请实施例还提供了一种电子设备,包括:处理器和用于存储能够在处理器上运行的计算机程序的存储器,
其中,所述处理器用于运行所述计算机程序时,执行上述任一方法的步骤。
本申请实施例还提供了一种存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一方法的步骤。
在本申请实施例中,通过设定的图像传感器获取待处理图像对应的光谱信息,光谱信息由图像传感器的第一区域获取到,第一区域为图像传感器的像素阵列边缘的至少一排像素点组成的区域,第一区域上成像的图像携带有光谱信息,根据光谱信息,确定待处理图像对应的颜色矫正矩阵,能够结合待处理图像所处的环境光源的特点确定颜色矫正矩阵,提高了颜色矫正的准确性,有利于还原图像的颜色,使图像的颜色与人眼对场景真实颜色的感知相吻合,提高了图像处理的效果。
附图说明
图1为本申请一实施例提供的图像参数的确定方法的实现流程示意图;
图2为本申请一实施例提供的图像传感器收集颜色信息与光谱信息的示意图;
图3为本申请一实施例提供的图像参数的确定方法的实现流程示意图;
图4为本申请又一实施例提供的图像参数的确定方法的实现流程示意图;
图5为本申请一实施例提供的CIE1931三刺激值描述的响应参数的示意图;
图6为本申请一实施例提供的图像传感器RGB通道对应的光谱响应;
图7为本申请一实施例提供的F8光源与D50光源对应的光谱信息;
图8为本申请一实施例提供的基于爱色丽24色色卡的两组颜色矫正矩阵的对比示意图;
图9本申请一实施例提供的图像参数的确定方法的实现流程示意图;
图10为本申请一实施例提供的图像参数的确定装置的结构示意图;
图11为本申请一实施例提供电子设备的硬件组成结构示意图。
具体实施方式
下面结合附图及具体实施例对本申请作进一步详细的说明。
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
需要说明的是,本申请实施例所记载的技术方案之间,在不冲突的情况下,可以任意组合。
另外,在本申请实施例中,“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本申请实施例提供了一种图像参数的确定方法,图1为本申请实施例的图像参数的确定方法的一种流程示意图。如图1所示,所述方法包括:
S101:通过设定的图像传感器获取待处理图像对应的光谱信息;所述光谱信息由所述图像传感器的第一区域获取到;所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素点组成的区域;所述第一区域上成像的图像携带有光谱信息。
这里,通过设定的图像传感器获取待处理图像对应光谱信息,其中,光谱信息是用于描述待处理图像所处的环境光源的特征。在实际应用中,成像系统不能对变化的环境光源做出对应的光谱响应,使得采集的图像的颜色发生了偏移,引起图像偏色,示例地,色温随可见光的光谱成分变化而变化,在低色温光源下,白色物体偏红,在高色温光源下,白色物体偏蓝,为了更准确地将采集待处理图像的颜色信息还原为理想光源下的无偏色信息,需要获取待处理图像所处的环境下的光谱信息。图像传感器上分布有像素阵列,像素阵列是由一个个像素组成的,对应待处理图像中的每个像素,第一区域为图像传感器的像素阵列边缘的至少一排像素点组成的区域,第一区域上成像的图像携带有光谱信息,通过图像传感器的第一区域能够收集到待处理图像的光谱信息,在实际应用中,第一区域中的每个像素点可以配置为对可见光中的一个通道敏感,从而能够通过第一区域收集可见光中不同通道的对应的光谱信息,示例地,可见光的波长为400nm-700nm,将可见光分为3个通道,位于第一区域的一侧的第一个像素点可以配置为收集波长为400nm-500nm对应的光谱信息,位于第一区域的一侧的第二个像素点可以配置为收集波长为500nm-600nm对应的光谱信息,位于第一区域的一侧的第三个像素点可以配置为收集波长为600nm-700nm对应的光谱信息,并且可以对其他像素点进行周期性的配置,从而能够根据不同的像素点收集不同波长的光谱信息,可以通过在图像传感器第一区域上所在的每个像素带有不同的特性的滤光镀膜,不同特性的滤光镀膜会对不同波长的光敏感,从而可以通过不同特性的滤光镀膜选择性地获取对应的敏感波长的光谱信息。在实际应用中,由于绿光在可见光谱的中心位置,是人眼最敏感的色彩频率范围,因此,可以在图像传感器的第一区域上配置对绿光波长敏感的多个通道,从而能够获取更多关于绿光的光谱信息。在实际应用中,由于颜色信息通常分为R、G、B三个颜色通道,因此在对第一区域至少需要配置3个通道采集可见光的光谱信息,从而才能获取与颜色分量相对应的光谱信息,通过对图像传感器中的像素阵列进行不同的配置之后,能够在一个图像传感器上获取光谱信息,不需要额外配置其他的硬件,从而能够降低硬件的要求。
S102:根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵。
这里,根据光谱信息,确定待处理图像对应的颜色矫正矩阵。在实际应用中,会出现图像传感器获取的图像的颜色与人眼实际看到的颜色存在偏差的情况,需要经过CCM进行矫正,使得最终呈现的图像的颜色与人眼视觉在色彩上保持一致。待处理图像对应的光谱信息记录了待处理图像所处的照明环境下的特征,基于待处理图像所处的照明环境下的光谱信息,能够还原待处理图像的真实颜色,从而能够确定在待处理图像所处的照明环境下所对应的CCM,对待处理图像进行更准确的颜色矫正。
在上述实施例中,通过设定的图像传感器获取待处理图像对应的光谱信息,光谱信息由图像传感器的第一区域获取到,第一区域为图像传感器的像素阵列边缘的至少一排像素点组成的区域,第一区域上成像的图像携带有光谱信息,根据光谱信息,确定待处理图像对应的颜色矫正矩阵,从而能够准确地根据环境的照明情况,确定对应的颜色矫正矩阵,提高了颜色矫正矩阵的准确性,有利于将图像的颜色还原为真实的颜色,提高了图像处理的效果。
在一实施例中,所述根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵。
这里,根据光谱信息与待处理图像的颜色信息,确定待处理图像对应的颜色矫正矩阵,其中,通常采用RGB的方式描述待处理图像的颜色信息,通过图像传感器的第一区域之外的区域所组成的像素点采集颜色信息,示例地,如图2所示,图2示出了图像传感器收集颜色信息与光谱信息的示意图,在图2中,图像传感器的像素阵列边缘的一排像素点组成第一区域,是用于收集光谱信息的,图像传感器的像素阵列中除了第一区域之外的其他像素点是用于收集颜色信息的,用于收集颜色信息的像素点可以采取拜耳阵列、CMY阵列、RGBW阵列等像素阵列中的一种阵列用以获取待处理图像的颜色信息,通过第一区域,能够获取待处理图像的光谱信息W=[W1,W2…,Wn],当图像传感器中用于采集颜色信息的像素为拜耳阵列的RGB通道构成时,能够获取待处理图像的多组RGB颜色信息。在实际应用中,一般将像素阵列边缘的一排像素点用于收集光谱信息,其余的像素点用于收集颜色信息,从而避免图像的颜色信息被破坏。待处理图像的光谱信息能够确定待处理图像在当前的照明环境下对应的真实颜色,基于图像传感器收集到的待处理图像的颜色信息,能够确定出当前的照明环境下对应的颜色矫正矩阵。
上述实施例中,根据光谱信息与待处理图像的颜色信息,确定待处理图像对应的颜色矫正系数,从而能够通过图像传感器获取图像的颜色信息与光谱信息,并能够得到符合当前环境光源下的颜色矫正矩阵,从而能够很好地将图像的颜色信息进行还原,符合人眼对场景真实颜色的感知,提高了图像的处理效果。
在一实施例中,如图3所示,所述根据所述光谱信息与待处理图像的颜色信息,确定所述待处理图像对应的颜色矩阵,包括:
S301:根据所述光谱信息以及人眼光谱响应,确定响应参数;所述响应参数表征人眼在所述光谱信息对应的照明环境下对颜色的响应。
这里,人眼光谱响应是描述人眼对于不同波长的可见光的主观视觉感受,根据待处理图像对应的光谱信息以及人眼光谱响应,能够确定人眼在光谱信息对应的照明环境下对颜色的响应参数。在实际应用中,响应参数可以使用CIE1931色彩空间的三色刺激值X、Y、Z来表示,X、Y、Z是从红色、绿色、蓝色导出来的参数,确定响应参数的具体算法表达式为:
Figure BDA0002685320840000081
其中,
Figure BDA0002685320840000082
为CIE1931三刺激值的光谱响应,Wi为待处理图像对应的光谱信息。
在一实施例中,如图4所示,所述根据所述光谱信息以及人眼光谱响应,确定响应参数,包括:
S401:对所述人眼光谱响应进行插值处理,使所述人眼光谱响应中每个颜色分量的维度与所述光谱信息中包含的通道数量相同。
这里,对人眼光谱响应进行插值处理,经过插值处理的人眼光谱响应中每个颜色分量的数量与光谱信息中包含的通道数量相同。在实际应用中,通过图像传感器的第一区域获取的光谱信息的光谱分辨率较低,需要对人眼光谱响应中的每个颜色分量进行插值,获取光谱信息中包含的通道数量,通过插值将人眼光谱相应中的每个颜色分量的维度与光谱信息中含有的通道数量相同,例如,当图像传感器的第一区域配置收集可见光8个通道的光谱信息,在对人眼光谱响应进行插值处理的时候,将人眼光谱响应中每个颜色分量的维度降低到8个通道。
S402:根据所述待处理图像对应的光谱信息以及插值处理后的人眼光谱响应,确定响应参数。
这里,在对人眼光谱响应进行插值处理之后,根据待处理图像对应的光谱信息以及插值处理后的人眼光谱响应,能够更快速地确定响应参数,从而得到的响应参数的维度也与人眼光谱响应的通道数量相同。
在上述实施例中,对人眼光谱响应进行插值处理,使人眼光谱响应中每个颜色分量的维度与光谱信息中包含的通道数量相同,根据待处理图像不同区域对应的光谱信息以及插值处理后的人眼光谱响应,确定响应参数,从而能够获取维度为光谱信息的通道数量的响应参数,有利于提高图像的处理效率。
S302:根据所述颜色信息以及响应参数,确定所述待处理图像对应的颜色矫正矩阵。
这里,根据确定的响应参数与待处理图像对应的颜色信息,确定待处理图像对应的颜色矫正矩阵,对于待处理图像的边缘区域,能够通过图像传感器获取待处理图像对应的颜色信息以及根据光谱信息确定对应的响应参数,如图5所示,图5示出了通过CIE1931三刺激值描述的响应参数的示意图,响应参数是待处理图像在当前照明环境下的真实颜色,图6示出了图像传感器RGB通道对应的光谱响应,可见人眼对场景的真实感知与图像传感器收集的光谱响应存在偏差,需要利用颜色矫正矩阵对待处理图像对应的颜色信息进行矫正以还原待处理图像的真实颜色,在此基础上,当存在多组颜色信息与响应参数的对应关系时,可以获取待处理图像在当前的照明环境下对应的颜色矫正矩阵,在实际应用中,响应参数、待处理图像对应的颜色信息以及颜色矫正矩阵之间的关系为:
Figure BDA0002685320840000091
其中,XmYmZm代表待处理图像上边缘的第m个区域的XYZ值与RmGmBm待处理图像上边缘第的m个区域所对应的图像传感器的RGB值。在实际应用中,当m≥3的时候,能够解出方程组并得到CCM。以爱色丽24色色卡为拍摄对象,表1为实验室下得到模拟太阳光的D50光源对应的CCM1。
表1
Figure BDA0002685320840000092
当拍摄的环境光源为F8,F8光源和D50光源的色温均为5000K,根据图像传感器获取的待处理图像对应的颜色信息与光谱信息,得到如表2所示的CCM2。
表2
Figure BDA0002685320840000101
将图像传感器获得的RGB信息分别经过CCM1与CCM2进行调整后,得到RGB信息经过CCM1调整后的三刺激值以及RGB信息经过CCM2调整后的三刺激值。在实际应用中,F8光源与D50光源的色温相同,成像系统直接根据设定的颜色矫正矩阵进行调节的时候,会采用基于D50光源得到的颜色矫正矩阵,但F8光源的光谱信息与D50光源的光谱信息是不相同的,如图7所示,图7示出了F8光源的光谱信息与D50光源的光谱信息,因此,如果直接采用D50光源的颜色矫正矩阵对图像的颜色进行调整,调整后的图像依然存在颜色偏差的问题,图8为基于爱色丽24色色卡的两组颜色矫正矩阵的对比示意图,图8示出了人眼对爱色丽24色色卡的真实三刺激值、RGB原始信息、RGB信息经过CCM1调整后的三刺激值、RGB信息经过CCM2调整后的三刺激值以及通过计算和比较经过CCM调整后的三刺激值与真实三刺激值的欧氏距离,经过CCM2调整后的三刺激值更接近人眼的真实三刺激值,从而能够提高图像采集的准确性。
在上述实施例中,根据光谱信息以及人眼光谱响应,确定响应参数,响应参数表征人眼在光谱信息对应的照明环境下对颜色的响应,根据颜色信息以及响应参数,确定待处理图像对应的颜色矫正矩阵,从而能够通过准确地确定当前照明环境下的颜色矫正矩阵,能够提高图像的采集效率,使图像的颜色更加还原。
在一实施例中,所述根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
当设定数据库中存在与所述光谱信息匹配的光谱信息时,将所述设定数据库中与匹配的光谱信息关联的颜色矫正矩阵确定为所述待处理图像对应的颜色矫正矩阵;其中,
所述设定数据库中存储有至少一个颜色矫正矩阵和与所述至少一个颜色矫正矩阵中的每个颜色矫正矩阵关联的光谱信息。
这里,将图像传感器中获取的待处理图像的光谱信息与存储在设定数据库中的光谱信息进行比较,当设定数据库中存在与所述光谱信息匹配的光谱信息时,说明图像传感器在之前采集到在相同照明环境下的图像,已经获取了相同照明环境下对应的颜色矫正矩阵,从而能够将设定数据库中与匹配的光谱信息关联的颜色矫正矩阵确定未待处理图像对应的颜色矫正矩阵,其中,设定数据库中存储有至少一个颜色矫正矩阵以及至少一个与颜色矫正矩阵中的每个颜色矫正矩阵关联的光谱信息,使每种光谱信息对应于一个颜色矫正矩阵。
在上述实施例中,当设定数据库中存在与光谱信息匹配的光谱信息时,将设定数据库中与匹配的光谱信息关联的颜色矫正矩阵确定为待处理图像对应的颜色矫正矩阵,其中,设定数据库中存储有至少一个颜色矫正矩阵和与至少一个颜色矫正矩阵中的每个颜色矫正矩阵关联的光谱信息,从而能够提高确定颜色矫正矩阵的速率,有利于提高图像的处理效率,缩短图像的处理时间。
在一实施例中,如图9所示,所述方法还包括:
S901:当设定数据库中不存在与所述光谱信息匹配的光谱信息时,根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵。
这里,如果设定数据库中不存在与光谱信息匹配的光谱信息时,说明图像传感器在此前没有在当前照明环境下采集图像,相应地也没有确定当前照明环境对应的颜色矫正矩阵,需要根据光谱信息与待处理图像的颜色信息,确定待处理图像对应的颜色矫正矩阵。
S902:将所述颜色矫正矩阵与所述光谱信息关联存储至设定数据库。
这里,将确定的颜色矫正矩阵与光谱信息关联存储至设定数据库中,以使图像传感器再次在相同光谱信息的照明环境下采集图像的时候,能够快速地通过从设定数据库中获取颜色矫正矩阵,其中,设定数据库中可以为电子设备上的存储空间,也可以是云数据库。
在上述实施例中,当设定数据库中不存在与光谱信息匹配的光谱信息时,根据光谱信息与待处理图像的颜色信息,确定待处理图像对应的颜色矫正矩阵,将颜色矫正矩阵与光谱信息关联存储至设定数据库,能够根据设定数据库的存储情况选择确定颜色矫正矩阵的方法,并且将颜色矫正矩阵与光谱信息关联存储有利于提高获取颜色矫正矩阵的速率,提高了图像的处理效率。
在一实施例中,所述方法还包括:
根据所述颜色矫正矩阵调整所述待处理图像的颜色信息,并输出调整后的待处理图像。
这里,在获取了当前光谱信息对应的颜色矫正矩阵之后,根据颜色矫正矩阵调整待处理图像的颜色信息,通过颜色矫正矩阵中的系数,将待处理图像的颜色信息中的各个颜色分量的数值进行调整,经过调整后的待处理图像的颜色能够与人眼对场景真实颜色的感知相吻合,输出调整后的待处理图像,避免输出的图像出现颜色偏差的问题。
在上述实施例中,根据颜色矫正矩阵调整待处理图像的颜色信息,并输出调整后的待处理图像,从而能够根据照明环境对应的颜色矫正矩阵对图像的颜色进行调整,将图像的颜色还原为真实的颜色,避免出现颜色偏差的现象,提高了图像处理的效果。
为实现本申请实施例的方法,本申请实施例还提供了一种图像传感器,包括:
位于第一区域且对与设定光谱区域相关联的光信号敏感的第一像素单元;
所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素单元组成的区域。
这里,图像传感器的像素阵列上设置有第一像素单元,第一像素单元位于第一区域上且对与设定光谱区域相关联的光信号敏感,第一区域为位于图像传感器的像素阵列边缘的至少一排像素点组成的区域。在实际应用中,第一像素单元可以配置为对不同可见光光谱区域敏感,例如,可以将第一区域上的不同第一像素单元分别设置为青色光谱区域敏感、洋红色光谱区域敏感、黄色光谱区域敏感、蓝色光谱区域敏感,从而能够通过第一像素单元收集到不同波长的光信号的光谱信息。对通过对图像传感器第一区域的像素进行配置,使第一区域的像素能够获取图像的光谱信息。在实际应用中,第一区域上的第一配件可以为滤光镀膜,第一区域上至少分不了三种性能不同的滤光镀膜,分别对绿光、红光、蓝光敏感,从而能够通过三种性能不同的滤光镀膜获取不同波长下光谱信息。
在一实施例中,所述第一像素单元包括光传感器和滤色片;所述光传感器用于获取与设定光谱区域相关联的光信号的光谱信息;所述滤色片用于滤除设定的光谱区域之外的所有光信号,使得仅通过与设定光谱区域相关联的光信号。
这里,第一像素单元包括光传感器与滤色片,其中,光传感器能够获取与设定光谱区域相关联的光信号的光谱信息,例如,第一像素单元对蓝色光谱区域敏感,光传感器能够收集到蓝光的光信号的光谱信息。在实际应用中,通过滤色片能够使第一像素单元对设定光谱区域敏感,滤色片能够滤除设定的光谱区域之外的所有光信号,从而能够使与设定光谱区域相关联的光信号通过,示例地,第一像素单元对蓝色光谱区域敏感,片滤色片能够将蓝光对应的波长之外的光信号进行滤除,使光传感器能收集到的光谱信息均为蓝光的光谱信息。在实际应用中,图像传感器上的像素阵列中除去第一区域以外的其他像素点组成的区域是用于获取成像的图像的色彩信息,用于获取成像的图像的颜色信息的像素点可以配置为对颜色信息敏感的配件,例如,配置不同的彩色感光器件,在实际应用中,用于获取图像的颜色信息的像素点可以组成拜耳阵列、CMY阵列、RGBW阵列等像素阵列中的一种阵列,从而可以对不同颜色敏感,采集图像中的不同颜色的颜色信息。
为实现本申请实施例的方法,本申请实施例还提供了一种图像参数的确定装置,如图10所示,该装置包括:
获取单元1001,用于通过设定的图像传感器获取待处理图像对应的光谱信息;所述光谱信息由所述图像传感器的第一区域获取到;所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素点组成的区域;所述第一区域上成像的图像携带有光谱信息;
确定单元1002,用于根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵。
在一实施例中,所述确定单元1002根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵。
在一实施例中,所述确定单元1002根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
根据所述光谱信息以及人眼光谱响应,确定响应参数;所述响应参数表征人眼在所述光谱信息对应的照明环境下对颜色的响应;
根据所述颜色信息以及响应参数,确定所述待处理图像对应的颜色矫正矩阵。
在一实施例中,所述确定单元1002根据所述光谱信息以及人眼光谱响应,确定响应参数,包括:
对所述人眼光谱响应进行插值处理,使所述人眼光谱响应中每个颜色分量的维度与所述光谱信息中包含的通道数相同;
根据所述光谱信息以及插值处理后的人眼光谱响应,确定所述响应参数。
在一实施例中,所述确定单元1002根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
当设定数据库中存在与所述光谱信息匹配的光谱信息时,将所述设定数据库中与匹配的光谱信息关联的颜色矫正矩阵确定为所述待处理图像对应的颜色矫正矩阵;其中,
所述设定数据库中存储有至少一个颜色矫正矩阵和与所述至少一个颜色矫正矩阵中的每个颜色矫正矩阵关联的光谱信息。
在一实施例中,所述装置还包括:
确定单元,用于当设定数据库中不存在与所述光谱信息匹配的光谱信息时,根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵;
存储单元,用于将所述颜色矫正矩阵与所述光谱信息关联存储至设定数据库。
在一实施例中,所述装置还包括:
输出单元,根据所述颜色矫正矩阵调整所述待处理图像的颜色信息,并输出调整后的待处理图像。
实际应用时,获取单元1001、确定单元1002可由图像参数的确定装置中的处理器来实现。当然,处理器需要运行存储器中存储的程序来实现上述各程序模块的功能。
需要说明的是,上述图10实施例提供的图像参数的确定装置在进行图像参数确定时,仅以上述各程序模块的划分进行举例说明,实际应用中,可以根据需要而将上述处理分配由不同的程序模块完成,即将装置的内部结构划分成不同的程序模块,以完成以上描述的全部或者部分处理。另外,上述实施例提供的图像参数的确定装置与图像参数的确定方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
基于上述程序模块的硬件实现,且为了实现本申请实施例的方法,本申请实施例还提供了一种电子设备,图11为本申请实施例电子设备的硬件组成结构示意图,如图11所示,电子设备包括:
通信接口1,能够与其它设备比如网络设备等进行信息交互;
处理器2,与通信接口1连接,以实现与其它设备进行信息交互,用于运行计算机程序时,执行上述一个或多个技术方案提供的图像参数的确定方法。而所述计算机程序存储在存储器3上。
当然,实际应用时,电子设备中的各个组件通过总线系统4耦合在一起。可理解,总线系统4用于实现这些组件之间的连接通信。总线系统4除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图11中将各种总线都标为总线系统4。
本申请实施例中的存储器3用于存储各种类型的数据以支持电子设备的操作。这些数据的示例包括:用于在电子设备上操作的任何计算机程序。
可以理解,存储器3可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(ROM,Read Only Memory)、可编程只读存储器(PROM,Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM,Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM,Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM,ferromagnetic random access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM,Compact Disc Read-Only Memory);磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM,Random AccessMemory),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(SRAM,Static Random Access Memory)、同步静态随机存取存储器(SSRAM,Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM,Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM,SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM,Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM,Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM,SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM,Direct Rambus Random Access Memory)。本申请实施例描述的存储器3旨在包括但不限于这些和任意其它适合类型的存储器。
上述本申请实施例揭示的方法可以应用于处理器2中,或者由处理器2实现。处理器2可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器2中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器2可以是通用处理器、DSP,或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器2可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤,可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中,该存储介质位于存储器3,处理器2读取存储器3中的程序,结合其硬件完成前述方法的步骤。
处理器2执行所述程序时实现本申请实施例的各个方法中的相应流程,为了简洁,在此不再赘述。
在示例性实施例中,本申请实施例还提供了一种存储介质,即计算机存储介质,具体为计算机可读存储介质,例如包括存储计算机程序的存储器3,上述计算机程序可由处理器2执行,以完成前述方法所述步骤。计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、Flash Memory、磁表面存储器、光盘、或CD-ROM等存储器。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置、终端和方法,可以通过其它的方式实现。以上所描述的设备实施例仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本申请各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台电子设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (12)

1.一种图像参数的确定方法,其特征在于,包括:
通过设定的图像传感器获取待处理图像对应的光谱信息;所述光谱信息由所述图像传感器的第一区域获取到;所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素点组成的区域;所述第一区域上成像的图像携带有光谱信息;
根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵。
2.根据权利要求1所述的图像参数的确定方法,其特征在于,所述根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵。
3.根据权利要求2所述的图像参数的确定方法,其特征在于,所述根据所述光谱信息与待处理图像的颜色信息,确定所述待处理图像对应的颜色矩阵,包括:
根据所述光谱信息以及人眼光谱响应,确定响应参数;所述响应参数表征人眼在所述光谱信息对应的照明环境下对颜色的响应;
根据所述颜色信息以及响应参数,确定所述待处理图像对应的颜色矫正矩阵。
4.根据权利要求3所述的图像参数的确定方法,其特征在于,所述根据所述光谱信息以及人眼光谱响应,确定响应参数,包括:
对所述人眼光谱响应进行插值处理,使所述人眼光谱响应中每个颜色分量的维度与所述光谱信息中包含的通道数相同;
根据所述光谱信息以及插值处理后的人眼光谱响应,确定所述响应参数。
5.根据权利要求1所述的图像参数的确定方法,其特征在于,所述根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵,包括:
当设定数据库中存在与所述光谱信息匹配的光谱信息时,将所述设定数据库中与匹配的光谱信息关联的颜色矫正矩阵确定为所述待处理图像对应的颜色矫正矩阵;其中,
所述设定数据库中存储有至少一个颜色矫正矩阵和与所述至少一个颜色矫正矩阵中的每个颜色矫正矩阵关联的光谱信息。
6.根据权利要求5所述的图像参数的确定方法,其特征在于,所述方法还包括:
当设定数据库中不存在与所述光谱信息匹配的光谱信息时,根据所述光谱信息与所述待处理图像的颜色信息,确定所述待处理图像对应的颜色矫正矩阵;
将所述颜色矫正矩阵与所述光谱信息关联存储至设定数据库。
7.根据权利要求1所述的图像参数的确定方法,其特征在于,所述方法还包括:
根据所述颜色矫正矩阵调整所述待处理图像的颜色信息,并输出调整后的待处理图像。
8.一种图像传感器,其特征在于,所述图像传感器包括:
位于第一区域且对与设定光谱区域相关联的光信号敏感的第一像素单元;
所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素单元组成的区域。
9.根据权利要求8所述的图像传感器,其特征在于,所述第一像素单元包括光传感器和滤色片;所述光传感器用于获取与设定光谱区域相关联的光信号的光谱信息;所述滤色片用于滤除设定的光谱区域之外的所有光信号,使得仅通过与设定光谱区域相关联的光信号。
10.一种图像参数的确定装置,其特征在于,包括:
获取单元,用于通过设定的图像传感器获取待处理图像对应的光谱信息;所述光谱信息由所述图像传感器的第一区域获取到;所述第一区域为位于所述图像传感器的像素阵列边缘的至少一排像素点组成的区域;所述第一区域上成像的图像携带有光谱信息;
确定单元,用于根据所述光谱信息,确定所述待处理图像对应的颜色矫正矩阵。
11.一种电子设备,其特征在于,包括:处理器和用于存储能够在处理器上运行的计算机程序的存储器,
其中,所述处理器用于运行所述计算机程序时,执行权利要求1至7任一项所述方法的步骤。
12.一种存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7任一项所述方法的步骤。
CN202010974590.3A 2020-09-16 2020-09-16 图像参数的确定方法、图像传感器、装置、电子设备及存储介质 Pending CN112153356A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010974590.3A CN112153356A (zh) 2020-09-16 2020-09-16 图像参数的确定方法、图像传感器、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010974590.3A CN112153356A (zh) 2020-09-16 2020-09-16 图像参数的确定方法、图像传感器、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN112153356A true CN112153356A (zh) 2020-12-29

Family

ID=73894057

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010974590.3A Pending CN112153356A (zh) 2020-09-16 2020-09-16 图像参数的确定方法、图像传感器、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112153356A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112950455A (zh) * 2021-02-09 2021-06-11 维沃移动通信有限公司 图像显示方法及装置
CN113873117A (zh) * 2021-09-22 2021-12-31 Oppo广东移动通信有限公司 终端设备及色彩采集方法、存储介质
WO2023016320A1 (zh) * 2021-08-11 2023-02-16 维沃移动通信(杭州)有限公司 图像处理方法、装置、设备及介质
WO2023108442A1 (zh) * 2021-12-14 2023-06-22 深圳传音控股股份有限公司 图像处理方法、智能终端及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150070528A1 (en) * 2012-10-23 2015-03-12 Olympus Corporation Imaging device and image generation method
US20170150112A1 (en) * 2015-11-25 2017-05-25 Google Inc. Methodologies for Mobile Camera Color Management
CN111256826A (zh) * 2020-05-01 2020-06-09 武汉精立电子技术有限公司 显示屏色度测量方法、装置及终端设备
US20200202809A1 (en) * 2017-09-28 2020-06-25 Samsung Electronics Co., Ltd. Electronic device and method for controlling same

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150070528A1 (en) * 2012-10-23 2015-03-12 Olympus Corporation Imaging device and image generation method
US20170150112A1 (en) * 2015-11-25 2017-05-25 Google Inc. Methodologies for Mobile Camera Color Management
US20200202809A1 (en) * 2017-09-28 2020-06-25 Samsung Electronics Co., Ltd. Electronic device and method for controlling same
CN111256826A (zh) * 2020-05-01 2020-06-09 武汉精立电子技术有限公司 显示屏色度测量方法、装置及终端设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112950455A (zh) * 2021-02-09 2021-06-11 维沃移动通信有限公司 图像显示方法及装置
WO2023016320A1 (zh) * 2021-08-11 2023-02-16 维沃移动通信(杭州)有限公司 图像处理方法、装置、设备及介质
CN113873117A (zh) * 2021-09-22 2021-12-31 Oppo广东移动通信有限公司 终端设备及色彩采集方法、存储介质
WO2023108442A1 (zh) * 2021-12-14 2023-06-22 深圳传音控股股份有限公司 图像处理方法、智能终端及存储介质

Similar Documents

Publication Publication Date Title
US10070104B2 (en) Imaging systems with clear filter pixels
CN112153356A (zh) 图像参数的确定方法、图像传感器、装置、电子设备及存储介质
US9959604B2 (en) Dynamic global tone mapping with integrated 3D color look-up table
US10136107B2 (en) Imaging systems with visible light sensitive pixels and infrared light sensitive pixels
US10645268B2 (en) Image processing method and apparatus of terminal, and terminal
US8803994B2 (en) Adaptive spatial sampling using an imaging assembly having a tunable spectral response
KR20170074602A (ko) 영상 출력 장치 및 영상 출력 방법
CN111161188B (zh) 降低图像色彩噪声的方法、计算机装置及可读存储介质
US9961236B2 (en) 3D color mapping and tuning in an image processing pipeline
WO2012024163A2 (en) Image capture with identification of illuminant
CA3044988A1 (en) Systems, methods and computer programs for colorimetric mapping
US10616536B2 (en) Imaging systems having broadband monochromatic and chromatic image sensors
JP2003102031A (ja) 画像処理方法、画像処理装置、撮影装置評価方法、画像情報保存方法、画像処理システム、および画像データファイルにおけるデータ構造
US11381796B2 (en) Image-sensing device and method for auto white balance therefor
CN114268774A (zh) 图像采集方法、图像传感器、装置、设备以及存储介质
KR102285756B1 (ko) 전자 시스템 및 영상 처리 방법
US8115834B2 (en) Image processing device, image processing program and image processing method
US20200228769A1 (en) Lens rolloff assisted auto white balance
EP1687689B1 (en) System and method for effectively performing an image data transformation procedure
Garud et al. A fast color constancy scheme for automobile video cameras
WO2022198436A1 (zh) 图像传感器、图像数据获取方法、成像设备
JP3976562B2 (ja) 色補正マトリクス決定方法および装置
CN115619640A (zh) 图像处理方法及装置、终端、芯片、芯片模组
CN114885143A (zh) 一种色彩校正矩阵的调整方法、装置、终端及存储介质
CN117201950A (zh) 色相调整方法、装置和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20201229