CN113676713A - 图像处理方法、装置、设备及介质 - Google Patents
图像处理方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN113676713A CN113676713A CN202110921151.0A CN202110921151A CN113676713A CN 113676713 A CN113676713 A CN 113676713A CN 202110921151 A CN202110921151 A CN 202110921151A CN 113676713 A CN113676713 A CN 113676713A
- Authority
- CN
- China
- Prior art keywords
- image
- color
- color information
- multispectral
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000013507 mapping Methods 0.000 claims abstract description 131
- 238000012545 processing Methods 0.000 claims abstract description 21
- 238000000034 method Methods 0.000 claims description 41
- 238000012937 correction Methods 0.000 claims description 32
- 238000005286 illumination Methods 0.000 claims description 21
- 239000011159 matrix material Substances 0.000 claims description 12
- 238000012546 transfer Methods 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 claims description 2
- 230000003595 spectral effect Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000005484 gravity Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 101000929663 Homo sapiens Phospholipid-transporting ATPase ABCA7 Proteins 0.000 description 2
- 102100036620 Phospholipid-transporting ATPase ABCA7 Human genes 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 241001442234 Cosa Species 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Color Television Image Signal Generators (AREA)
- Image Processing (AREA)
Abstract
本申请公开了一种图像处理方法、装置、设备及介质，属于电子设备技术领域。应用于包括第一摄像头、第二摄像头和多光谱传感器的电子设备的图像处理方法包括：获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；根据自动白平衡，矫正第一图像的颜色，得到第四图像；根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。
Description
技术领域
本申请属于图像处理技术领域，具体涉及一种图像处理方法、装置、设备及介质。
背景技术
随着电子设备和摄像头技术的发展，同一电子设备上可以集成安装多个摄像头。在利用多摄像头进行拍摄时，需要保证多个摄像头的颜色一致性，以获得符合人眼观感的图像。
相关技术中在保证多摄像头颜色一致性时，是利用一个摄像头预测光源，通过光源确定该摄像头与其他摄像头的颜色转移矩阵(即色彩映射关系)，然后根据该颜色转移矩阵对其他摄像头拍摄得到的图像进行颜色矫正。
但受光源色温的影响，摄像头在拍照时会出现“同色异谱”现象，“同色异谱”现象会导致预测光源时不准确，进而导致通过光源确定出的颜色转移矩阵不准确，图像颜色矫正不准确，图像颜色矫正准确性较差。
发明内容
本申请实施例的目的是提供一种图像处理方法、装置、设备及介质，能够解决图像颜色矫正准确性差的问题。
第一方面，本申请实施例提供了一种图像处理方法，应用于电子设备，电子设备包括第一摄像头、第二摄像头和多光谱传感器，方法包括：
获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；
根据自动白平衡，矫正第一图像的颜色，得到第四图像；
根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；
根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。
第二方面，本申请实施例提供了一种图像处理装置，应用于电子设备，电子设备包括第一摄像头、第二摄像头和多光谱传感器，装置包括：
第一获取模块，用于获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；
第一矫正模块，用于根据自动白平衡，矫正第一图像的颜色，得到第四图像；
第一确定模块，用于根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；
第二矫正模块，用于根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。
第三方面，本申请实施例提供了一种电子设备，该电子设备包括第一摄像头、第二摄像头、多光谱传感器、处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法的步骤。
在本申请实施例中，通过获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；根据自动白平衡，矫正第一图像的颜色，得到第四图像；根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。能够保证颜色矫正后的第一图像(即第四图像)与颜色矫正后的第二图像(即第五图像)颜色一致，并且由于第一摄像头和第二摄像头之间的第一色彩映射关系是根据多光谱高维颜色信息与色彩映射关系的对应关系，和多光谱传感器采集到的第三图像对应的第一多光谱高维颜色信息确定的，多光谱传感器比摄像头传感器接收的光谱波段更广且对光谱波段划分的更细，通过多光谱传感器能够更准确的区分不同光源下摄像头之间的色彩映射关系，因此，能够提高颜色矫正的准确性，能够避免“同色异谱”现象导致的颜色矫正准确性差的问题。
附图说明
图1是本申请实施例提供的应用于电子设备的图像处理方法的流程示意图；
图2是本申请实施例提供的第一摄像头、第二摄像头和多光谱传感器的布置示意图；
图3是本申请实施例提供的应用于电子设备的图像处理装置的结构示意图；
图4是实现本申请实施例的电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像处理方法、装置、设备及介质进行详细地说明。
图1是本申请实施例提供的应用于电子设备的图像处理方法的流程示意图。电子设备包括第一摄像头、第二摄像头和多光谱传感器。本申请实施例中的电子设备可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobilepersonal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。
应用于电子设备的图像处理方法可以包括：
S101：获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；
S102：根据自动白平衡，矫正第一图像的颜色，得到第四图像；
S103：根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；
S104：根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。
上述各步骤的具体实现方式将在下文中进行详细描述。
在本申请实施例中，通过获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；根据自动白平衡，矫正第一图像的颜色，得到第四图像；根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。能够保证颜色矫正后的第一图像(即第四图像)与颜色矫正后的第二图像(即第五图像)颜色一致，并且由于第一摄像头和第二摄像头之间的第一色彩映射关系是根据多光谱高维颜色信息与色彩映射关系的对应关系和多光谱传感器采集到的第三图像对应的第一多光谱高维颜色信息确定的，多光谱传感器比摄像头传感器接收的光谱波段更广且对光谱波段划分的更细，通过多光谱传感器能够更准确的区分不同光源下摄像头之间的色彩映射关系，因此，能够提高颜色矫正的准确性，能够避免“同色异谱”现象导致的颜色矫正准确性差的问题。
在本申请实施例的一些可能实现中，第一摄像头为主摄像头，第二摄像头为副摄像头。
在本申请实施例的一些可能实现中，第一摄像头、第二摄像头和多光谱传感器的朝向满足第一条件。
在本申请实施例的一些可能实现中，第一条件可以为第一摄像头、第二摄像头和多光谱传感器的朝向一致，即第一摄像头、第二摄像头和多光谱传感器的朝向相同。
在本申请实施例的一些可能实现中，第一摄像头、第二摄像头和多光谱传感器距离较近，以保证摄像头之间有较大的重叠视野。
图2是本申请实施例提供的第一摄像头、第二摄像头和多光谱传感器的布置示意图。在图2中，多光谱传感器202、第一摄像头203和第二摄像头204设置于背板201上。也就是说，多光谱传感器202、第一摄像头203和第二摄像头204通过背板201安装于电子设备中。
在本申请实施例的一些可能实现中，可以没有背板201，也就是说，多光谱传感器202、第一摄像头203和第二摄像头204可以不通过背板201而是直接安装于电子设备中。
在本申请实施例的一些可能实现中，在S103之前，本申请实施例提供的应用于电子设备的图像处理方法还包括：在至少两个光照条件中的每一目标光照条件下，获取第一摄像头、第二摄像头和多光谱传感器分别针对目标对象采集到的第六图像、第七图像和第八图像；根据第六图像和第七图像，确定第一摄像头和第二摄像头在目标光照条件下的第二色彩映射关系；建立第八图像对应的第三多光谱高维颜色信息与第二色彩映射关系在目标光照条件下的对应关系。
在本申请实施例的一些可能实现中，目标对象包括标准色卡，其中，标准色卡包括但不限于中性灰卡、白卡和24色卡等。
在本申请实施例的一些可能实现中，光照条件指在环境不变的情况下，某一光源发出的光。本申请实施例中的光源包括但不限于：太阳、日光灯、卤素灯、白炽灯和烛光等等。
示例性地，获取在第一光源下第一摄像头、第二摄像头和多光谱传感器分别针对标准色卡采集到的第六图像、第七图像和第八图像，从第六图像和第七图像中得到各自图像中白颜色像素点的像素值。其中，第六图像中白颜色像素点的像素值为(Rmaster，Gmaster，Bmaster)，第七图像中白颜色像素点的像素值为(Rslave，Gslave，Bslave)，以M1表示第一摄像头与第二摄像头在第一光源X1下的色彩映射关系对应的颜色转移矩阵，则有下述公式(1)所示关系：
通过最小二乘法对上述公式(1)进行求解，可得到第一摄像头与第二摄像头在第一光源X1下的色彩映射关系对应的颜色转移矩阵M1。可以理解的是，第一摄像头与第二摄像头的色彩映射关系对应的颜色转移矩阵为3行3列的矩阵。
根据第八图像得到在第一光源X1下第八图像对应的多光谱高维颜色信息，以向量表示为(FX1-1，FX1-2，……，FX1-n)，其中，FX1-n为在第一光源X1下第n个窄带波段信号值。
建立在第一光源X1下第一摄像头与第二摄像头的色彩映射关系，与在第一光源X1下的第八图像对应的多光谱高维颜色信息的对应关系。
类似的，建立在第n光源Xn下第一摄像头与第二摄像头的色彩映射关系，与在第n光源Xn下的第八图像对应的多光谱高维颜色信息的对应关系。
多光谱高维颜色信息与色彩映射关系的对应关系如表1所示。
表1
| 多光谱高维颜色信息 | 色彩映射关系 |
| (F<sub>X1-1</sub>，F<sub>X1-2</sub>，……，F<sub>X1-n</sub>) | M1 |
| (F<sub>X2-1</sub>，F<sub>X2-2</sub>，……，F<sub>X2-n</sub>) | M2 |
| …… | …… |
| (F<sub>Xn-1</sub>，F<sub>Xn-2</sub>，……，F<sub>Xn-n</sub>) | Mn |
在本申请实施例的一些可能实现中，S103可以包括：根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息；将与第二多光谱高维颜色信息对应的色彩映射关系，确定为第一色彩映射关系。
在本申请实施例的一些可能实现中，根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息可以包括：计算至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的空间点与第一多光谱高维颜色信息对应的空间点的距离；将距离小于预设距离的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
示例性地，第一多光谱高维颜色信息以向量表示为(F1，F2，……，Fn)，则计算该向量对应的空间点与上述表1中的每个向量对应的空间点的距离。
第一多光谱高维颜色信息对应的向量对应的空间点与上述表1中的在第i光源Xi下的多光谱传感器采集到的图像的多光谱高维颜色信息对应的向量对应的空间点的距离DXi为：
其中，公式(2)中，1≤i≤n，i为正整数。
假设，DX2小于预设距离，则将在第2光源X2下第八图像对应的多光谱高维颜色信息(FX2-1，FX2-2，……，FX2-n)确定为上述第二多光谱高维颜色信息，进而将在第2光源X2下第八图像对应的多光谱高维颜色信息(FX2-1，FX2-2，……，FX2-n)对应的色彩映射关系M2，确定为上述第一色彩映射关系。
在本申请实施例的一些可能实现中，根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息可以包括：计算至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的向量与第一多光谱高维颜色信息对应的向量的夹角的余弦值；将余弦值大于预设余弦值的向量对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
示例性地，第一多光谱高维颜色信息以向量表示为(F1，F2，……，Fn)，则计算该向量与上述表1中的每个向量的夹角的余弦值。
第一多光谱高维颜色信息对应的向量与上述表1中的在第i光源Xi下的多光谱传感器采集到的图像的多光谱高维颜色信息对应的向量的夹角的余弦值cosaxi为：
其中，公式(3)中，1≤i≤n，i为正整数。
假设，cosax3大于预设余弦值，则将在第3光源X3下第八图像对应的多光谱高维颜色信息(FX3-1，FX3-2，……，FX3-n)确定为上述第二多光谱高维颜色信息，进而将在第3光源X3下第八图像对应的多光谱高维颜色信息(FX3-1，FX3-2，……，FX3-n)对应的色彩映射关系M3，确定为上述第一色彩映射关系。
也就是说，可以通过欧式距离或余弦相似性，确定上述第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息可以包括：在第一多光谱高维颜色信息对应的空间点在多个多光谱高维颜色信息对应的空间点构成的第一多面体内部的情况下，可以将该第一多面体的重心对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息可以包括：在第一多光谱高维颜色信息对应的空间点在M个多光谱高维颜色信息对应的空间点中的N个空间点构成的第二多面体内部的情况下，可以将该第二多面体的重心对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息可以包括：在第一多光谱高维颜色信息对应的空间点在多个多面体内部的情况下，可以将多个多面体的交点对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息，其中，多个多面体中每个多面体为由M个多光谱高维颜色信息对应的空间点中的N个空间点构成的多面体。
其中，上述的M大于N，且M和N均为正整数。
本申请实施例并不对确定空间点在多面体的内部所采用的方式进行限定，任何可用的方式均可以应用于本申请实施例中。例如，先计算目标多面体的体积，然后，分别计算由该空间点和除去目标多面体中的一个顶点之后剩余顶点构成的多面体的体积，将分别计算得到的多个多面体的体积进行求和，若多个多面体的体积和不大于上述目标多面体的体积，则确定该空间点在目标多面体的内部，否则，该空间点在目标多面体的外部。示例性地，以确定点X是否在由点A、B、C和D四个点构成的多面体内部为例，首先，计算多面体ABCD的体积，然后计算多面体XBCD、AXCD、ABXD和ABCX的体积，计算多面体XBCD、AXCD、ABXD和ABCX的体积和，若多面体XBCD、AXCD、ABXD和ABCX的体积和不大于多面体ABCD的体积，则点X在多面体ABCD的内部，否则，点X在多面体ABCD的外部。本申请实施例并不对计算多面体体积所采用的方式进行限定，任何可用的方式均可以应用于本申请实施例中。
当采用上述三种方式确定出与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息后，可能上述表1中不存在与第二多光谱高维颜色信息对应的色彩映射关系，此时，可以根据表1，确定与第二多光谱高维颜色信息对应的色彩映射关系，进而，将所确定出的与第二多光谱高维颜色信息对应的色彩映射关系，确定为第一色彩映射关系。本申请实施例并不对根据表1，确定与第二多光谱高维颜色信息对应的色彩映射关系所采用的方式进行限定，任何可用的方式均可以应用于本申请实施例中，例如，利用插值算法确定与第二多光谱高维颜色信息对应的色彩映射关系。
在本申请实施例的一些可能实现中，当确定出的第一色彩映射关系仅包括一个色彩映射关系时，例如，确定出的第一色彩映射关系为M5。利用该色彩映射关系M5对第四图像P4中白颜色像素点的像素值进行映射，得到第二摄像头拍摄得到的第二图像P2中白颜色像素点的像素值colorP2。
其中，公式(4)中，RP2、GP2、BP2分别为第二图像P2中白颜色像素点的像素值的红色分量、绿色分量和蓝色分量；RP4、GP4、BP4分别为第四图像P4中白颜色像素点的像素值的红色分量、绿色分量和蓝色分量。
当确定出第二图像P2中白颜色像素点的像素值colorP2后，利用该第二图像P2中白颜色像素点的像素值colorP2对第二图像P2中的每个像素点的像素值进行矫正。
具体地，可以通过如下公式(5)、(6)和(7)对第二图像P2中的每个像素点的像素值进行矫正。
其中，公式(7)中，RP2-i1、GP2-i1、BP2-i1分别为第二图像P2中颜色矫正后的第i个像素点的像素值的红色分量、绿色分量和蓝色分量，RP2-i0、GP2-i0、BP2-i0分别为第二图像P2中颜色矫正前的第i个像素点的像素值的红色分量、绿色分量和蓝色分量；RGainP2为第二图像P2的红色增益，BGainP2为第二图像P2的蓝色增益。
在本申请实施例的一些可能实现中，第一色彩映射关系包括至少两个色彩映射关系；相应地，S104可以包括：计算至少两个色彩映射关系中的每个色彩映射关系对应的颜色转移矩阵与第一颜色值的乘积，得到至少两个第二颜色值；将至少两个第二颜色值的加权平均值，确定为第二图像中白颜色像素点的第三颜色值；根据第三颜色值，矫正第二图像中的每个像素点的颜色。
示例性地，确定出的第一色彩映射关系包括M1、M3和M4。则计算M1与第四图像P4中白颜色像素点的像素值的乘积colorP2-M1，计算M3与第四图像P4中白颜色像素点的像素值的乘积colorP2-M3，计算M4与第四图像P4中白颜色像素点的像素值的乘积colorP2-M4，然后，将colorP2-M1、colorP2-M3和colorP2-M4加权平均，得到第二图像P2中白颜色像素点的颜色值colorP2，进而根据上述公式(5)、(6)和(7)对第二图像P2中的每个像素点的像素值进行矫正。
在本申请实施例的一些可能实现中，至少两个第二颜色值中的目标第二颜色值对应的权重，包括：第一空间点与第一多光谱高维颜色信息对应的第二空间点的距离，其中，第一空间点为第四多光谱高维颜色信息对应的空间点，第四多光谱高维颜色信息为第三色彩映射关系对应的多光谱高维颜色信息，第三色彩映射关系为目标第二颜色值对应的色彩映射关系。则可以通过下述公式(8)计算第二图像P2中白颜色像素点的颜色值colorP2。
当根据公式(8)计算出第二图像P2中白颜色像素点的颜色值colorP2后，根据上述公式(5)、(6)和(7)对第二图像P2中的每个像素点的像素值进行矫正。
在本申请实施例的一些可能实现中，至少两个第二颜色值中的目标第二颜色值对应的权重，包括：上述第四多光谱高维颜色信息对应的向量与第一多光谱高维颜色信息对应的向量的夹角的余弦值。则可以通过下述公式(9)计算第二图像P2中白颜色像素点的颜色值colorP2。
当根据公式(9)计算出第二图像P2中白颜色像素点的颜色值colorP2后，根据上述公式(5)、(6)和(7)对第二图像P2中的每个像素点的像素值进行矫正。
在本申请实施例的一些可能实现中，在S102中，利用第一图像P1中白颜色像素点的像素值对第一图像P1中的每个像素点的像素值进行矫正。其中，利用第一图像P1中白颜色像素点的像素值对第一图像P1中的每个像素点的像素值进行矫正的过程与上述利用第二图像P2中白颜色像素点的像素值对第二图像P2中的每个像素点的像素值进行矫正的过程类似，具体可参考上述利用第二图像P2中白颜色像素点的像素值对第二图像P2中的每个像素点的像素值进行矫正的过程，本申请实施例在此不对其进行赘述。
本申请实施例并不对确定第一图像P1和第四图像P4中白颜色像素点的过程进行赘述，具体可参考相关技术中确定图像中白颜色像素点的过程。例如，将设置一颜色范围，当某一像素点的颜色在该颜色范围内时，认为该像素点为白颜色像素点。再例如，设置一灰度值，当某一像素点的灰度值大于该设置的灰度值时，认为该像素点为白颜色像素点。
当确定出第一图像P1中各个白颜色像素点后，可以将第一图像P1中各个白颜色像素点的像素值的平均值作为第一图像P1中白颜色像素点的像素值；当确定出第四图像P4中各个白颜色像素点后，可以将第四图像P4中各个白颜色像素点的像素值的平均值作为第四图像P4中白颜色像素点的像素值。
需要说明的是，本申请实施例提供的图像处理方法，执行主体可以为图像处理装置，或者该图像处理装置中的用于执行图像处理方法的控制模块。本申请实施例中以图像处理装置执行图像处理方法为例，说明本申请实施例提供的图像处理装置。
图3是本申请实施例提供的应用于电子设备的图像处理装置的结构示意图。应用于电子设备的图像处理装置300可以包括：
第一获取模块301，用于获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；
第一矫正模块302，用于根据自动白平衡，矫正第一图像的颜色，得到第四图像；
第一确定模块303，用于根据多光谱高维颜色信息与色彩映射关系的对应关系和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；
第二矫正模块304，用于根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。
在本申请实施例中，通过获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；根据自动白平衡，矫正第一图像的颜色，得到第四图像；根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。能够保证颜色矫正后的第一图像(即第四图像)与颜色矫正后的第二图像(即第五图像)颜色一致，并且由于第一摄像头和第二摄像头之间的第一色彩映射关系是根据多光谱高维颜色信息与色彩映射关系的对应关系和多光谱传感器采集到的第三图像对应的第一多光谱高维颜色信息确定的，多光谱传感器比摄像头传感器接收的光谱波段更广且对光谱波段划分的更细，通过多光谱传感器能够更准确的区分不同光源下摄像头之间的色彩映射关系，因此，能够提高颜色矫正的准确性，能够避免“同色异谱”现象导致的颜色矫正准确性差的问题。
在本申请实施例的一些可能实现中，第一确定模块303包括：
第一确定子模块，用于根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息；
第二确定子模块，用于将与第二多光谱高维颜色信息对应的色彩映射关系，确定为第一色彩映射关系。
在本申请实施例的一些可能实现中，第一确定子模块具体用于：
计算至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的空间点与第一多光谱高维颜色信息对应的空间点的距离；
将距离小于预设距离的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，第一确定子模块具体用于：
计算至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的向量与第一多光谱高维颜色信息对应的向量的夹角的余弦值；
将余弦值大于预设余弦值的向量对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，第一确定子模块具体用于：
在第一多光谱高维颜色信息对应的空间点在多个多光谱高维颜色信息对应的空间点构成的第一多面体内部的情况下，将该第一多面体的重心对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，第一确定子模块具体用于：
在第一多光谱高维颜色信息对应的空间点在M个多光谱高维颜色信息对应的空间点中的N个空间点构成的第二多面体内部的情况下，将该第二多面体的重心对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，第一确定子模块具体用于：
在第一多光谱高维颜色信息对应的空间点在多个多面体内部的情况下，将多个多面体的交点对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息，其中，多个多面体中每个多面体为由M个多光谱高维颜色信息对应的空间点中的N个空间点构成的多面体。
其中，上述的M大于N，且M和N均为正整数。
在本申请实施例的一些可能实现中，应用于电子设备的图像处理装置300还包括：
第二获取模块，用于在至少两个光照条件中的每一目标光照条件下，获取第一摄像头、第二摄像头和多光谱传感器分别针对目标对象采集到的第六图像、第七图像和第八图像；
第二确定模块，用于根据第六图像和第七图像，确定第一摄像头和第二摄像头在目标光照条件下的第二色彩映射关系；
建立模块，用于建立第八图像对应的第三多光谱高维颜色信息与第二色彩映射关系在目标光照条件下的对应关系。
在本申请实施例的一些可能实现中，第一色彩映射关系包括至少两个色彩映射关系；第二矫正模块304包括：
计算子模块，用于计算至少两个色彩映射关系中的每个色彩映射关系对应的颜色转移矩阵与第一颜色值的乘积，得到至少两个第二颜色值；
确定子模块，用于将至少两个第二颜色值的加权平均值，确定为第二图像中白颜色像素点的第三颜色值；
矫正子模块，用于根据第三颜色值，矫正第二图像中的每个像素点的颜色。
在本申请实施例的一些可能实现中，至少两个第二颜色值中的目标第二颜色值对应的权重，包括：
第一空间点与第一多光谱高维颜色信息对应的第二空间点的距离，其中，第一空间点为第四多光谱高维颜色信息对应的空间点，第四多光谱高维颜色信息为第三色彩映射关系对应的多光谱高维颜色信息，第三色彩映射关系为目标第二颜色值对应的色彩映射关系；或，
第四多光谱高维颜色信息对应的向量与第一多光谱高维颜色信息对应的向量的夹角的余弦值。
本申请实施例中的图像处理装置可以是装置，也可以是终端中的部件、集成电路、或芯片。本申请实施例中的电子设备可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。
本申请实施例中的电子设备装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为iOS操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。
本申请实施例提供的应用于电子设备的图像处理装置能够实现图1至图2的应用于电子设备的图像处理方法实施例中的各个过程，为避免重复，这里不再赘述。
本申请实施例还提供一种电子设备，包括第一摄像头、第二摄像头、多光谱传感器、处理器、存储器、存储在存储器上并可在所述处理器上运行的程序或指令，该程序或指令被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
需要注意的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
在本申请实施例的一些可能实现中，第一摄像头、第二摄像头和多光谱传感器的朝向满足第一条件。
在本申请实施例的一些可能实现中，第一条件可以为第一摄像头、第二摄像头和多光谱传感器的朝向一致，即第一摄像头、第二摄像头和多光谱传感器的朝向相同。
在本申请实施例的一些可能实现中，第一摄像头、第二摄像头和多光谱传感器距离较近，以保证摄像头之间有较大的重叠视野。
在本申请实施例的一些可能实现中，处理器可以包括中央处理器(CPU)，或者特定集成电路(Application Specific Integrated Circuit，ASIC)，或者可以被配置成实施本申请实施例的一个或多个集成电路。
在本申请实施例的一些可能实现中，存储器可以包括只读存储器(Read-OnlyMemory，ROM)，随机存取存储器(Random Access Memory，RAM)，磁盘存储介质设备，光存储介质设备，闪存设备，电气、光学或其他物理/有形的存储器存储设备。因此，通常，存储器包括一个或多个编码有包括计算机可执行指令的软件的有形(非暂态)计算机可读存储介质(例如，存储器设备)，并且当该软件被执行(例如，由一个或多个处理器)时，其可操作来执行参考根据本申请实施例的图像处理方法所描述的操作。
图4是实现本申请实施例的电子设备的硬件结构示意图。
该电子设备400包括但不限于：射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、以及处理器410等部件。
本领域技术人员可以理解，电子设备400还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器410逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图4中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。
其中，处理器410用于：获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；根据自动白平衡，矫正第一图像的颜色，得到第四图像；根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。
在本申请实施例中，通过获取第一摄像头、第二摄像头和多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；根据自动白平衡，矫正第一图像的颜色，得到第四图像；根据多光谱高维颜色信息与色彩映射关系的对应关系，和第三图像对应的第一多光谱高维颜色信息，确定第一摄像头和第二摄像头之间的第一色彩映射关系；根据第一色彩映射关系和第四图像中白颜色像素点的第一颜色值，矫正第二图像的颜色，得到第五图像。能够保证颜色矫正后的第一图像(即第四图像)与颜色矫正后的第二图像(即第五图像)颜色一致，并且由于第一摄像头和第二摄像头之间的第一色彩映射关系是根据多光谱高维颜色信息与色彩映射关系的对应关系和多光谱传感器采集到的第三图像对应的第一多光谱高维颜色信息确定的，多光谱传感器比摄像头传感器接收的光谱波段更广且对光谱波段划分的更细，通过多光谱传感器能够更准确的区分不同光源下摄像头之间的色彩映射关系，因此，能够提高颜色矫正的准确性，能够避免“同色异谱”现象导致的颜色矫正准确性差的问题。
在本申请实施例的一些可能实现中，处理器410具体用于：
根据至少两个多光谱高维颜色信息，确定与第一多光谱高维颜色信息对应的第二多光谱高维颜色信息；
将与第二多光谱高维颜色信息对应的色彩映射关系，确定为第一色彩映射关系。
在本申请实施例的一些可能实现中，处理器410具体用于：
计算至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的空间点与第一多光谱高维颜色信息对应的空间点的距离；
将距离小于预设距离的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，处理器410具体用于：
计算至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的向量与第一多光谱高维颜色信息对应的向量的夹角的余弦值；
将余弦值大于预设余弦值的向量对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，处理器410具体用于：
在第一多光谱高维颜色信息对应的空间点在多个多光谱高维颜色信息对应的空间点构成的第一多面体内部的情况下，将该第一多面体的重心对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，处理器410具体用于：
在第一多光谱高维颜色信息对应的空间点在M个多光谱高维颜色信息对应的空间点中的N个空间点构成的第二多面体内部的情况下，将该第二多面体的重心对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息。
在本申请实施例的一些可能实现中，处理器410具体用于：
在第一多光谱高维颜色信息对应的空间点在多个多面体内部的情况下，将多个多面体的交点对应的空间点对应的多光谱高维颜色信息，确定为第二多光谱高维颜色信息，其中，多个多面体中每个多面体为由M个多光谱高维颜色信息对应的空间点中的N个空间点构成的多面体。
其中，上述的M大于N，且M和N均为正整数。
在本申请实施例的一些可能实现中，处理器410还用于：
在至少两个光照条件中的每一目标光照条件下，获取第一摄像头、第二摄像头和多光谱传感器分别针对目标对象采集到的第六图像、第七图像和第八图像；
第二确定模块，用于根据第六图像和第七图像，确定第一摄像头和第二摄像头在目标光照条件下的第二色彩映射关系；
建立第八图像对应的第三多光谱高维颜色信息与第二色彩映射关系在目标光照条件下的对应关系。
在本申请实施例的一些可能实现中，第一色彩映射关系包括至少两个色彩映射关系；处理器410具体用于：
计算至少两个色彩映射关系中的每个色彩映射关系对应的颜色转移矩阵与第一颜色值的乘积，得到至少两个第二颜色值；
将至少两个第二颜色值的加权平均值，确定为第二图像中白颜色像素点的第三颜色值；
根据第三颜色值，矫正第二图像中的每个像素点的颜色。
在本申请实施例的一些可能实现中，至少两个第二颜色值中的目标第二颜色值对应的权重，包括：
第一空间点与第一多光谱高维颜色信息对应的第二空间点的距离，其中，第一空间点为第四多光谱高维颜色信息对应的空间点，第四多光谱高维颜色信息为第三色彩映射关系对应的多光谱高维颜色信息，第三色彩映射关系为目标第二颜色值对应的色彩映射关系；或，
第四多光谱高维颜色信息对应的向量与第一多光谱高维颜色信息对应的向量的夹角的余弦值。
应理解的是，本申请实施例中，输入单元404可以包括图形处理器(GraphicsProcessing Unit，GPU)4041和麦克风4042，图形处理器4041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元406可包括显示面板4061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板4061。用户输入单元407包括触控面板4071以及其他输入设备4072。触控面板4071，也称为触摸屏。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。存储器409可用于存储软件程序以及各种数据，包括但不限于应用程序和操作系统。处理器410可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器410中。
本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质包括计算机可读存储介质，计算机可读存储介质的示例包括非暂态计算机可读存储介质，如ROM、RAM、磁碟或者光盘等。
本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对相关技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。
Claims (17)
1.一种图像处理方法，其特征在于，应用于电子设备，所述电子设备包括第一摄像头、第二摄像头和多光谱传感器，所述方法包括：
获取所述第一摄像头、所述第二摄像头和所述多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；
根据自动白平衡，矫正所述第一图像的颜色，得到第四图像；
根据多光谱高维颜色信息与色彩映射关系的对应关系，和所述第三图像对应的第一多光谱高维颜色信息，确定所述第一摄像头和所述第二摄像头之间的第一色彩映射关系；
根据所述第一色彩映射关系和所述第四图像中白颜色像素点的第一颜色值，矫正所述第二图像的颜色，得到第五图像。
2.根据权利要求1所述的方法，其特征在于，所述根据多光谱高维颜色信息与色彩映射关系的对应关系，和所述第三图像对应的第一多光谱高维颜色信息，确定所述第一摄像头和所述第二摄像头之间的第一色彩映射关系，包括：
根据至少两个多光谱高维颜色信息，确定与所述第一多光谱高维颜色信息对应的第二多光谱高维颜色信息；
将与所述第二多光谱高维颜色信息对应的色彩映射关系，确定为所述第一色彩映射关系。
3.根据权利要求2所述的方法，其特征在于，所述根据至少两个多光谱高维颜色信息，确定与所述第一多光谱高维颜色信息对应的第二多光谱高维颜色信息，包括：
计算所述至少两个多光谱高维颜色信息中，每个多光谱高维颜色信息对应的空间点与所述第一多光谱高维颜色信息对应的空间点的距离；
将所述距离小于预设距离的空间点对应的多光谱高维颜色信息，确定为所述第二多光谱高维颜色信息。
4.根据权利要求2所述的方法，其特征在于，所述根据至少两个多光谱高维颜色信息，确定与所述第一多光谱高维颜色信息对应的第二多光谱高维颜色信息，包括：
计算所述至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的向量与所述第一多光谱高维颜色信息对应的向量的夹角的余弦值；
将所述余弦值大于预设余弦值的向量对应的多光谱高维颜色信息，确定为所述第二多光谱高维颜色信息。
5.根据权利要求1所述的方法，其特征在于，在所述根据多光谱高维颜色信息与色彩映射关系的对应关系，和所述第三图像对应的第一多光谱高维颜色信息，确定所述第一摄像头和所述第二摄像头之间的第一色彩映射关系之前，所述方法还包括：
在至少两个光照条件中的每一目标光照条件下，获取所述第一摄像头、所述第二摄像头和所述多光谱传感器分别针对目标对象采集到的第六图像、第七图像和第八图像；
根据所述第六图像和所述第七图像，确定第一摄像头和所述第二摄像头在所述目标光照条件下的第二色彩映射关系；
建立所述第八图像对应的第三多光谱高维颜色信息与所述第二色彩映射关系在所述目标光照条件下的对应关系。
6.根据权利要求1所述的方法，其特征在于，所述第一色彩映射关系包括至少两个色彩映射关系；
所述根据所述第一色彩映射关系和所述第四图像中白颜色像素点的第一颜色值，矫正所述第二图像的颜色，包括：
计算所述至少两个色彩映射关系中的每个色彩映射关系对应的颜色转移矩阵与所述第一颜色值的乘积，得到至少两个第二颜色值；
将所述至少两个第二颜色值的加权平均值，确定为所述第二图像中白颜色像素点的第三颜色值；
根据所述第三颜色值，矫正所述第二图像中的每个像素点的颜色。
7.根据权利要求6所述的方法，其特征在于，所述至少两个第二颜色值中的目标第二颜色值对应的权重，包括：
第一空间点与所述第一多光谱高维颜色信息对应的第二空间点的距离，其中，所述第一空间点为第四多光谱高维颜色信息对应的空间点，所述第四多光谱高维颜色信息为第三色彩映射关系对应的多光谱高维颜色信息，所述第三色彩映射关系为所述目标第二颜色值对应的色彩映射关系；或，
所述第四多光谱高维颜色信息对应的向量与所述第一多光谱高维颜色信息对应的向量的夹角的余弦值。
8.一种图像处理装置，其特征在于，应用于电子设备，所述电子设备包括第一摄像头、第二摄像头和多光谱传感器，所述装置包括：
第一获取模块，用于获取所述第一摄像头、所述第二摄像头和所述多光谱传感器分别针对目标场景采集到的第一图像、第二图像和第三图像；
第一矫正模块，用于根据自动白平衡，矫正所述第一图像的颜色，得到第四图像；
第一确定模块，用于根据多光谱高维颜色信息与色彩映射关系的对应关系，和所述第三图像对应的第一多光谱高维颜色信息，确定所述第一摄像头和所述第二摄像头之间的第一色彩映射关系；
第二矫正模块，用于根据所述第一色彩映射关系和所述第四图像中白颜色像素点的第一颜色值，矫正所述第二图像的颜色，得到第五图像。
9.根据权利要求8所述的装置，其特征在于，所述第一确定模块包括：
第一确定子模块，用于根据至少两个多光谱高维颜色信息，确定与所述第一多光谱高维颜色信息对应的第二多光谱高维颜色信息；
第二确定子模块，用于将与所述第二多光谱高维颜色信息对应的色彩映射关系，确定为所述第一色彩映射关系。
10.根据权利要求9所述的装置，其特征在于，所述第一确定子模块具体用于：
计算所述至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的空间点与所述第一多光谱高维颜色信息对应的空间点的距离；
将所述距离小于预设距离的空间点对应的多光谱高维颜色信息，确定为所述第二多光谱高维颜色信息。
11.根据权利要求9所述的装置，其特征在于，所述第一确定子模块具体用于：
计算所述至少两个多光谱高维颜色信息中每个多光谱高维颜色信息对应的向量与所述第一多光谱高维颜色信息对应的向量的夹角的余弦值；
将所述余弦值大于预设余弦值的向量对应的多光谱高维颜色信息，确定为所述第二多光谱高维颜色信息。
12.根据权利要求8所述的装置，其特征在于，所述装置还包括：
第二获取模块，用于在至少两个光照条件中的每一目标光照条件下，获取所述第一摄像头、所述第二摄像头和所述多光谱传感器分别针对目标对象采集到的第六图像、第七图像和第八图像；
第二确定模块，用于根据所述第六图像和所述第七图像，确定第一摄像头和所述第二摄像头在所述目标光照条件下的第二色彩映射关系；
建立模块，用于建立所述第八图像对应的第三多光谱高维颜色信息与所述第二色彩映射关系在所述目标光照条件下的对应关系。
13.根据权利要求8所述的装置，其特征在于，所述第一色彩映射关系包括至少两个色彩映射关系；所述第二矫正模块包括：
计算子模块，用于计算所述至少两个色彩映射关系中的每个色彩映射关系对应的颜色转移矩阵与所述第一颜色值的乘积，得到至少两个第二颜色值；
确定子模块，用于将所述至少两个第二颜色值的加权平均值，确定为所述第二图像中白颜色像素点的第三颜色值；
矫正子模块，用于根据所述第三颜色值，矫正所述第二图像中的每个像素点的颜色。
14.根据权利要求13所述的装置，其特征在于，所述至少两个第二颜色值中的目标第二颜色值对应的权重，包括：
第一空间点与所述第一多光谱高维颜色信息对应的第二空间点的距离，其中，所述第一空间点为第四多光谱高维颜色信息对应的空间点，所述第四多光谱高维颜色信息为第三色彩映射关系对应的多光谱高维颜色信息，所述第三色彩映射关系为所述目标第二颜色值对应的色彩映射关系；或，
所述第四多光谱高维颜色信息对应的向量与所述第一多光谱高维颜色信息对应的向量的夹角的余弦值。
15.一种电子设备，其特征在于，所述电子设备包括：第一摄像头、第二摄像头、多光谱传感器、处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1至7任一项所述的图像处理方法的步骤。
16.根据权利要求15所述的电子设备，其特征在于，所述第一摄像头、所述第二摄像头和所述多光谱传感器的朝向满足第一条件。
17.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1至7任一项所述的图像处理方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110921151.0A CN113676713A (zh) | 2021-08-11 | 2021-08-11 | 图像处理方法、装置、设备及介质 |
| PCT/CN2022/110141 WO2023016320A1 (zh) | 2021-08-11 | 2022-08-04 | 图像处理方法、装置、设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110921151.0A CN113676713A (zh) | 2021-08-11 | 2021-08-11 | 图像处理方法、装置、设备及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113676713A true CN113676713A (zh) | 2021-11-19 |
Family
ID=78542330
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110921151.0A Pending CN113676713A (zh) | 2021-08-11 | 2021-08-11 | 图像处理方法、装置、设备及介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN113676713A (zh) |
| WO (1) | WO2023016320A1 (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114554169A (zh) * | 2022-02-24 | 2022-05-27 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置、电子设备及存储介质 |
| WO2023016320A1 (zh) * | 2021-08-11 | 2023-02-16 | 维沃移动通信（杭州）有限公司 | 图像处理方法、装置、设备及介质 |
| CN115955611A (zh) * | 2022-03-28 | 2023-04-11 | 荣耀终端有限公司 | 图像处理方法与电子设备 |
| WO2024027287A1 (zh) * | 2022-08-03 | 2024-02-08 | Oppo广东移动通信有限公司 | 图像处理系统及方法、计算机可读介质和电子设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150030244A1 (en) * | 2011-11-04 | 2015-01-29 | National Ict Australia Limitied | Determining colour values in hyperspectral or multispectral images |
| KR101958725B1 (ko) * | 2017-12-18 | 2019-07-02 | 건국대학교 산학협력단 | Mars를 활용한 영상 컬러 맵핑 수행 방법 및 장치 |
| CN111314683A (zh) * | 2020-03-17 | 2020-06-19 | Oppo广东移动通信有限公司 | 白平衡调节方法及相关设备 |
| CN111586300A (zh) * | 2020-05-09 | 2020-08-25 | 展讯通信（上海）有限公司 | 颜色校正方法、装置及可读存储介质 |
| CN111866483A (zh) * | 2020-07-06 | 2020-10-30 | Oppo广东移动通信有限公司 | 颜色还原方法及装置、计算机可读介质和电子设备 |
| CN112598594A (zh) * | 2020-12-24 | 2021-04-02 | Oppo（重庆）智能科技有限公司 | 颜色一致性矫正方法及相关装置 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4534340B2 (ja) * | 2000-10-31 | 2010-09-01 | ソニー株式会社 | 色再現補正装置 |
| JP5676906B2 (ja) * | 2010-04-13 | 2015-02-25 | 日本放送協会 | 色補正装置 |
| CN112153356A (zh) * | 2020-09-16 | 2020-12-29 | Oppo广东移动通信有限公司 | 图像参数的确定方法、图像传感器、装置、电子设备及存储介质 |
| CN113676713A (zh) * | 2021-08-11 | 2021-11-19 | 维沃移动通信（杭州）有限公司 | 图像处理方法、装置、设备及介质 |
-
2021
- 2021-08-11 CN CN202110921151.0A patent/CN113676713A/zh active Pending
-
2022
- 2022-08-04 WO PCT/CN2022/110141 patent/WO2023016320A1/zh unknown
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150030244A1 (en) * | 2011-11-04 | 2015-01-29 | National Ict Australia Limitied | Determining colour values in hyperspectral or multispectral images |
| KR101958725B1 (ko) * | 2017-12-18 | 2019-07-02 | 건국대학교 산학협력단 | Mars를 활용한 영상 컬러 맵핑 수행 방법 및 장치 |
| CN111314683A (zh) * | 2020-03-17 | 2020-06-19 | Oppo广东移动通信有限公司 | 白平衡调节方法及相关设备 |
| CN111586300A (zh) * | 2020-05-09 | 2020-08-25 | 展讯通信（上海）有限公司 | 颜色校正方法、装置及可读存储介质 |
| CN111866483A (zh) * | 2020-07-06 | 2020-10-30 | Oppo广东移动通信有限公司 | 颜色还原方法及装置、计算机可读介质和电子设备 |
| CN112598594A (zh) * | 2020-12-24 | 2021-04-02 | Oppo（重庆）智能科技有限公司 | 颜色一致性矫正方法及相关装置 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023016320A1 (zh) * | 2021-08-11 | 2023-02-16 | 维沃移动通信（杭州）有限公司 | 图像处理方法、装置、设备及介质 |
| CN114554169A (zh) * | 2022-02-24 | 2022-05-27 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置、电子设备及存储介质 |
| CN115955611A (zh) * | 2022-03-28 | 2023-04-11 | 荣耀终端有限公司 | 图像处理方法与电子设备 |
| CN115955611B (zh) * | 2022-03-28 | 2023-09-29 | 荣耀终端有限公司 | 图像处理方法与电子设备 |
| WO2024027287A1 (zh) * | 2022-08-03 | 2024-02-08 | Oppo广东移动通信有限公司 | 图像处理系统及方法、计算机可读介质和电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023016320A1 (zh) | 2023-02-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113676713A (zh) | 图像处理方法、装置、设备及介质 | |
| JP7391883B2 (ja) | 顔認識のための圧縮－拡張深さ方向畳み込みニューラルネットワーク | |
| CN106211804B (zh) | 利用对原始图像数据的色度测量进行自动白平衡 | |
| US9344690B2 (en) | Image demosaicing | |
| CN108965835B (zh) | 一种图像处理方法、图像处理装置及终端设备 | |
| JP7500869B2 (ja) | ホワイトバランス補正方法、装置及び電子機器 | |
| WO2019184503A1 (zh) | 一种数据处理方法、数据补偿方法及相关设备 | |
| WO2018072270A1 (zh) | 一种图像显示增强方法及装置 | |
| CN112840636A (zh) | 一种图像处理方法和装置 | |
| US20200288072A1 (en) | Electronic device and method for adjusting color of image data by using infrared sensor | |
| WO2023045884A1 (zh) | 屏幕光检测模型训练方法、环境光检测方法及装置 | |
| WO2022042754A1 (zh) | 图像处理方法、装置及设备 | |
| US20160366331A1 (en) | Methods and devices for correction of camera module sensitivity and flash color variation | |
| CN113676716A (zh) | 白平衡控制方法、装置、终端设备以及存储介质 | |
| CN104641631B (zh) | 通过色域扩展的色彩增强 | |
| CN114900199A (zh) | 散射参数确定方法与装置、信号处理电路和电子设备 | |
| CN112055190A (zh) | 图像处理方法、装置及存储介质 | |
| CN110944163A (zh) | 一种图像处理方法及电子设备 | |
| CN113628259A (zh) | 图像的配准处理方法及装置 | |
| CN109274950A (zh) | 图像处理方法、装置及电子设备 | |
| CN112446845A (zh) | 地图构建方法、装置、slam系统以及存储介质 | |
| CN111861965B (zh) | 图像逆光检测方法、图像逆光检测装置及终端设备 | |
| WO2023015993A9 (zh) | 一种色度信息的确定方法及相关电子设备 | |
| CN109614064A (zh) | 一种图片显示方法、图片显示装置及终端设备 | |
| CN113271450B (zh) | 白平衡调整方法、影像处理装置与影像处理系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |