CN117478802A - 图像处理方法、装置及电子设备 - Google Patents

Abstract

本申请提供一种图像处理方法、装置及电子设备，该图像处理方法包括：获取第一待显示图像；采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；控制在背景屏幕上显示第一校正图像；控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值，本申请可以得到高质量的拍摄图像。

Description

图像处理方法、装置及电子设备

技术领域

本申请涉及图像处理技术领域，尤其涉及图像处理方法、装置及电子设备。

背景技术

虚拟拍摄是将待拍对象放在背景屏幕前，在背景屏幕上显示背景图像，然后对待拍对象进行拍摄，使待拍对象宛如就是在实景画面里一样。虚拟拍摄相对绿幕拍摄，摄像机能够直接拍摄到最终画面，有助于提高拍摄和制作的效率，节约成本。

在虚拟拍摄过程中，若将待显示图像直接显示在背景屏幕上进行拍摄，则有拍摄环境的影响，使拍摄得到的图像中的背景与待显示图像会有明显的色差。为解决该色差问题，相关技术是对待显示图像进行颜色校正后，再进行拍摄，以达到拍摄图像与待显示图像的颜色对齐。

但是在实际的虚拟拍摄过程中，背景屏幕的颜色衰减、现场的灯光影响、摄像机角度、位置等多种因素是变化的，这些因素都会对拍摄得到的图像的颜色产生影响，即使经过颜色校正，也会导致拍摄图像与待显示图像之间产生较大的颜色差异，进而会影响得到图像的质量。

发明内容

本申请的多个方面提供图像处理方法、装置及电子设备，以提高拍摄图像的质量。

本申请实施例第一方面提供一种图像处理方法，包括：获取第一待显示图像；采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；控制在背景屏幕上显示第一校正图像；控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值。

本申请实施例第二方面提供一种图像处理装置，包括：

获取模块，用于获取第一待显示图像；

校正模块，用于采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；

第一控制模块，用于控制在背景屏幕上显示第一校正图像；

第二控制模块，控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值。

本申请实施例第三方面提供一种电子设备，包括：处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现如第一方面的图像处理方法。

本申请实施例第四方面提供一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，当计算机程序被处理器执行时，致使处理器实现如第一方面的图像处理方法。

本申请实施例应用于图像处理的场景中，通过获取第一待显示图像；采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；控制在背景屏幕上显示第一校正图像；控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值，可以得到高质量的拍摄图像。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为本申请示例性实施例提供的一种应用场景图；

图2为本申请示例性实施例提供的一种图像处理方法的步骤流程图；

图3为本申请示例性实施例提供的一种颜色映射表更新过程的示意图；

图4为本申请示例性实施例提供的一种合成扩展现实图像的示意图；

图5为本申请示例性实施例提供的一种确定第一区域和第二区域的示意图；

图6为本申请示例性实施例提供的一种像素聚类的示意图；

图7为本申请示例性实施例提供的一种图像处理装置的结构框图；

图8为本申请示例性实施例提供的一种电子设备的结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

随着显示和控制技术的不断进步，虚拟拍摄越来越多的应用到视频制作当中，尤其是XR(扩展现实)技术，在很多视频上都取得了较好的拍摄效果。但是采用XR技术拍摄视频同样面临多种的技术和系统的困难，其中，实拍部分和扩展部分的颜色不匹配就是其中的困难之一。

基于上述问题，本申请获取通过第一待显示图像，采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；控制在背景屏幕上显示第一校正图像；控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值，可以克服在拍摄中各种原因引起的颜色漂移导致的颜色失配问题，提升虚拟拍摄的视频质量。

在本实施例中，并不限定图像处理方法的执行设备。可选地，图像处理方法应用在终端，也可以借助云计算系统实现整体的图像处理方法。例如，图像处理方法可以应用于云服务器，以便借助于云上资源的优势运行各种模型；相对于应用于云端，图像处理方法也可以应用于常规服务器、云服务器或服务器阵列等服务端设备。

此外，参照图1，为本申请的一种应用场景图。该应用场景图为虚拟拍摄过程，该虚拟拍摄过程采用了XR技术，即在虚拟拍摄场景中设置背景屏幕、待拍对象和摄像机。先将扩展的待显示图像在背景屏幕上显示，待拍对象站在背景屏幕前，以背景屏幕上显示的内容为背景，摄像机对待拍对象进行拍摄，得到目标图像，该目标图像即为实拍部分。目标图像的背景是背景屏幕上显示的内容。可见，在图1中，若将待显示图像不经过处理直接显示在背景屏幕上，摄像机拍摄的目标图像的背景与背景屏幕显示的内容之间存在色差，参照图1中背景屏幕上显示的六角星和目标图像中六角星的颜色之间存在差异。

图1只是本申请示例性的一种应用场景，本申请还可以应用在其他相关场景中，在此不加以限定。

以下结合附图，详细说明本申请各实施例提供的技术方案。

图2为本申请示例性实施例提供的一种图像处理方法的步骤流程图。如图2所示该图像处理方法，具体包括以下步骤：

S201，获取第一待显示图像。

其中，第一待显示图像是预先设置好的，第一待显示图像中的内容是要在拍摄图像中显示的背景内容。

S202，采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像。

其中，第一颜色映射表可以是反向颜色查找表(look up table，LUT)，通过该第一颜色映射表可以对第一待显示图像的颜色进行校正，得到第一校正图像。其中，第一颜色映射表可以包括图像中多个颜色值中各颜色值对应的颜色变化值，将一个颜色值输入该第一颜色映射表可以输出另一颜色值，例如颜色值(R,G,B)为(5,4,6)，该颜色值经过第一颜色映射表校正后颜色值被校正为(6,5,7)。此外，第一颜色映射表还可以表示为其他形式，在此不加以限定。

其中，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的。

示例性地，参照图3，采用第二颜色映射表校正第二待显示图像后，得到第二校正图像，以第二校正图像为背景，拍摄第二校正图像后得到拍摄图像，可以以拍摄图像和第二待显示图像的第一颜色差异调整第二颜色映射表，得到第一颜色映射表。

S203，控制在背景屏幕上显示第一校正图像。

参照图1和图3，将第一校正图像显示在背景屏幕上

S204，控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像。

其中，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值。预设阈值是预先设定的，在本申请实施例中，第一颜色映射表是基于第二颜色映射表的基础上更新得到的，通过第一颜色映射表对第一待显示图像进行校正后再显示，这样可以使得到的目标图像与第一待显示图像之间的差异很小(也即小于预设阈值)。第一待显示图像与目标图像的共有区域可以是指两图像共同存在的区域，共有区域中显示的内容(包括对象、背景等)相同仅颜色存在差异。第一待显示图像与目标图像的共有区域参照图4，即第一待显示图像的第一区域和目标图像的第二区域的第二颜色差异小于预设阈值，可以保证得到的目标图像的质量。

进一步地，控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像之后，还包括：确定第一待显示图像和目标图像之间的第二颜色差异；根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表，并将第三颜色映射表确定为用于对第一待显示图像的下一帧的待显示图像的进行颜色校正的第一颜色映射表。例如，参照图3，第一待显示图像和目标图像的第二颜色差异可以用来调整第一颜色映射表，得到第三颜色映射表。

本申请实施例是对颜色映射表迭代调整的过程，具体地，是采用其他方法确定初始颜色映射表，然后在拍摄过程中，在每次拍摄到图像之前，基于当前最新的颜色映射表对待显示图像进行颜色校正后作为背景进行拍摄得到图像；在每次完成图像拍摄之后，根据拍摄的图像与待显示图像的颜色差异对当前的颜色映射表进行更新调整。也即，对当前的颜色映射表进行更新。例如，在视频拍摄过程中，有N个待显示图像，N个待显示图像需按顺序处理显示，其中，采用初始颜色映射表对第1个待显示图像进行校正得到第1个校正图像，拍摄背景屏幕上显示的第1个校正图像得到第1个拍摄图像，然后根据第1个拍摄图像和第1个待显示图像对初始颜色映射表进行调整，得到第2个颜色映射表。后续，采用第i个颜色映射表对第i个待显示图像进行校正得到第i个校正图像，拍摄背景屏幕上显示的第i个校正图像得到第i个拍摄图像，然后根据第i个拍摄图像和第i个待显示图像对第i个颜色映射表进行调整，得到第i+1个颜色映射表，i依次取2至N的整数，循环这个步骤，可以实现颜色映射表的迭代调整。

在本申请实施例中，可以在拍摄过程中，对颜色映射表进行迭代调整，使颜色映射表可以校正由于背景屏幕的颜色衰减、现场的灯光影响、摄像机角度、位置等多种变化因素导致的颜色差异，降低最终拍摄的目标图像和待显示图像的色差，提高拍摄的目标图像的质量。

进一步地，控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像之后，还包括：获取预设扩展图像，预设扩展图像的部分区域为第一待显示图像；合成预设扩展图像和目标图像，得到扩展现实图像。

示例性地，整个图像拍摄过程可以是先提取出预设扩展图像中第一待显示图像，该第一待显示图像可以为预设扩展图像中可以作为待拍对象背景的部分区域。然后对第一待显示图像进行上述步骤的处理得到目标图像，然后将预设扩展图像和目标图像进行合成，得到扩展现实图像。具体地，参照图4，将预设扩展图像和目标图像合成可以是将预设扩展图像中除去第一待显示图像的区域与目标图像进行拼接，得到扩展现实图像。在本申请实施例中，目标图像是实际拍摄的，预设扩展图像中可以是通过计算机技术虚构的一些三维场景，则得到的扩展现实图像可以实现待拍对象在真实三维场景的视觉效果。且，由于拍摄目标图像的过程中仅使用预设扩展图像中的第一待显示图像进行拍摄，使得图像颜色校正的速度、颜色映射表的更新速度都可以得到有效保障，同时由于待拍对象的背景小也可以降低对拍摄的硬件要求，降低了拍摄难度。

其中，确定第一待显示图像和目标图像之间的第二颜色差异之前，还可以包括：获取预设扩展图像，预设扩展图像的部分区域为第一待显示图像；从预设扩展图像中提取出第一待显示图像。例如，参照图4，可以直接通过剪裁的方式从预设扩展图像中提取到第一待显示图像。

其中，确定第一待显示图像和目标图像之间的第二颜色差异，可以包括：获取第一待显示图像的第一区域和目标图像的第二区域，第一区域和第二区域是第一待显示图像和目标图像的共有区域，第一区域和第二区域中具有相同的对象(该对象可以包括图像的背景显示在背景上的不同目标对象)；确定第一区域和第二区域的颜色差异值为第二颜色差异。其中，可以先确定出目标图像中除待拍对象所在区域之外的区域为第二区域，而后根据第二区域在目标图像中位置和形状将第一待显示图像中的对应区域确定为第一区域。

一种可选实施例中，本申请也可以在预设扩展图像中确定出第一区域，而后确定第一区域和第二区域的颜色差异值为第二颜色差异。其中，第一区域和第二区域是第一待显示图像和目标图像的共有区域。

示例性地，参照图5，第一待显示图像中除了待拍对象所在的第三区域之外的区域为第一区域，目标图像中除了与第三区域位置和形状对应的第四区域之外的区域为第二区域，第一区域和第二区域中包含相同的对象。

在本申请实施例中，可以确定第一区域和第二区域的颜色差异值为第二颜色差异，可以理解，颜色差异值可以是个集合，包括多个像素颜色差异值。

确定第一区域和第二区域的颜色差异值为第二颜色差异，可以包括：对第一区域内的像素进行聚类，得到多类第一像素，不同类的第一像素之间的颜色类别不同；在第二区域内，确定与第一像素位置相同的像素聚为一类，得到多类第二像素，第一像素与第二像素一一对应；针对第一像素，确定第一像素和对应第二像素的像素颜色差异值，并根据各类第一像素对应的像素颜色差异值确定第二颜色差异。

其中，一种聚类方式是按照像素的颜色类别进行聚类，不同颜色类别设置有不同的颜色值范围，例如，将红色类像素聚为一类，将白色类像素聚为一类，将蓝色类像素聚为一类，将绿色类像素聚为一类，可以得到多类第一像素。可以将每一类第一像素中各像素颜色的平均值作为该类第一像素的第一像素颜色值。

示例性地，参照图6，第一区域可以聚为三类第一像素分别为A1、A2和A3，对应第二区域聚为三类第二像素，分别为B1、B2和B3。其中，A1和B1对应，A2和B2对应，A3和B3对应。

表1

其中，在表1中，第一像素的第一像素颜色值是对应聚类区域各像素的颜色值的第一平均值，第二像素的第二像素颜色值是对应聚类区域各像素的颜色值的第二平均值。像素颜色差异值对应相同区域下，第二像素颜色值与第一像素颜色值的差值。以表1为例，C1表示A1类第一像素中各像素的颜色值的第一平均值与B1类第二像素中各像素的颜色值的第二平均值的差值，C2表示A2类第一像素中各像素的颜色值的第一平均值与B2类第二像素中各像素的颜色值的第二平均值的差值，C3表示A3类第一像素中各像素的颜色值的第一平均值与B3类第二像素中各像素的颜色值的第二平均值的差值。

在本申请实施例中，还可以采用其他聚类方式对第一区域内的像素进行分类，在此不加以限定。

进一步地，像素颜色差异值用于调整第一颜色映射表得到第三颜色映射表。示例性地，颜色值(5,6,7)输入第一颜色映射表后得到的校正后的颜色值为(4,5,7)；第一颜色映射表在调整后，颜色值(5,6,7)输入第一颜色映射表后得到的校正后颜色值变为(4,5,6)。其中，本申请对像素颜色差异值具体如何调整第一颜色映射表不加以限定，调整的后的结果是使采用第三颜色映射表对输入的颜色值进行校正后，该颜色值显示在屏幕上的颜色更接近输入的颜色值。

以上只是一种示例性方式，本申请还可以采用其他方式调整第一颜色映射表得到第三颜色映射表，对此不加以限定。

此外，根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表，可以包括：获取初始颜色映射表；以初始颜色映射表为约束，根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表。

其中，以初始颜色映射表为约束，根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表，包括：根据第二颜色差异调整第一颜色映射表中的颜色值，得到第三颜色映射表，使得基于第三颜色映射表对第一待显示图像的下一帧的待显示图像的进行颜色校正后，下一帧的待显示图像和基于下一帧的待显示图像得到的目标图像之间在共有区域的颜色差异缩小，且第三颜色映射表和初始颜色映射表之间的差异满足预设条件。

具体地，采用第二颜色差异更新第一颜色映射表后得到更新后的颜色映射表，若更新后的颜色映射表与初始颜色映射表的差异满足预设条件，则可以确定该更新后的颜色映射表为第三颜色映射表，若更新后的颜色映射表与初始颜色映射表的差异不满足预设条件，则可以缩小第二颜色差异后，再采用缩小的第二颜色差异更新第一颜色映射表，直到得到的更新后的颜色映射表与初始颜色映射表的差异满足预设条件。例如，先可以缩小第二颜色差异为0.9×第二颜色差异，采用0.9×第二颜色差异更新第一颜色映射表，若更新后的颜色映射表满足预设条件，则确定该更新后的颜色映射表为第三颜色映射表，否则缩小第二颜色差异为0.8×第二颜色差异，继续执行上述步骤，直到更新后的颜色映射表满足预设条件。

上述只是一种示例性的采用初始颜色映射表的约束方法，本申请还可以采用其他方式进行约束得到第三颜色映射表，

在本申请实施例中，预设条件是预先设置的，预设条件的作用是使颜色映射表在迭代更新时，围绕着初始颜色映射表变化，并不会与初始颜色映射表的差异过大。

在本申请实施例中，初始颜色映射表作为约束，提高确定的颜色映射表的准确度。此外，在实际XR拍摄过程中多种变量因素都可能导致颜色漂移，基于颜色映射表的迭代更新的，能让校色的颜色映射表始终跟随并抵消颜色变化，使拍摄的各目标图像均能达到很好的颜色匹配效果，性能鲁棒，适应性强。进一步地，根据目标图像和第一待显示图像确定公共的第一区域和第二区域，并聚类出多类第一像素和第二像素，根据确定成对的第一像素和第二像素之间的像素差异值，对颜色映射表进行更新，使颜色映射表的调整简单高效。

在本申请实施例中，还提供一种图像处理方法，包括：获取第一待显示图像；采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；向背景屏幕发送第一校正图像，以使背景屏幕显示第一校正图像。

该方法的具体实现过程参照上述实施例，对此不加以限定。

在本申请实施例中，除了提供一种图像处理方法之外，还提供一种图像处理装置，如图7所示，该图像处理装置70包括：

获取模块71，用于获取第一待显示图像；

校正模块72，用于采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；

第一控制模块73，用于控制在背景屏幕上显示第一校正图像；

第二控制模块74，控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值。

在一可选实施例中，更新模块(未示出)，用于在控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像之后，确定第一待显示图像和目标图像之间的第二颜色差异；根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表，并将第三颜色映射表确定为用于对第一待显示图像的下一帧的待显示图像的进行颜色校正的第一颜色映射表。

在一可选实施例中，更新模块在确定第一待显示图像和目标图像之间的第二颜色差异时，具体用于：获取第一待显示图像的第一区域和目标图像的第二区域，第一区域和第二区域表示第一待显示图像和目标图像的共有区域；确定第一区域和第二区域的颜色差异值为第二颜色差异。

在一可选实施例中，更新模块在确定第一区域和第二区域的颜色差异值为第二颜色差异时，具体用于：对第一区域内的像素进行聚类，得到多类第一像素，不同类的第一像素之间的颜色类别不同；在第二区域内，确定与第一像素位置相同的像素聚为一类，得到多类第二像素，第一像素与第二像素一一对应；针对第一像素，确定第一像素和对应第二像素的像素颜色差异值，根据各类第一像素对应的像素颜色差异值确定。

在一可选实施例中，更新模块在根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表时，具体用于：获取初始颜色映射表；以初始颜色映射表为约束，根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表。

在一可选实施例中，还包括，确定模块(未示出)，用于在确定第一待显示图像和目标图像的第二颜色差异之前，获取预设扩展图像，预设扩展图像的部分区域为第一待显示图像；从预设扩展图像中提取出第一待显示图像。

在一可选实施例中，还包括合成模块，用于在控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像之后，获取预设扩展图像，预设扩展图像的部分区域显示为第一待显示图像；合成预设扩展图像和目标图像，得到扩展现实图像；向背景屏幕发送第一校正图像，以使背景屏幕显示第一校正图像。

在一可选实施例中，更新模块在以初始颜色映射表为约束，根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表时，具体用于：根据第二颜色差异调整第一颜色映射表中的颜色值，得到第三颜色映射表，使得基于第三颜色映射表对第一待显示图像的下一帧的待显示图像的进行颜色校正后，下一帧的待显示图像和基于下一帧的待显示图像得到的目标图像之间在共有区域的颜色差异缩小，且第三颜色映射表和初始颜色映射表之间的差异满足预设条件。

具体实现过程参照上述实施例，在此不再赘述。

另外，在上述实施例及附图中的描述的一些流程中，包含了按照特定顺序出现的多个操作，但是应该清楚了解，这些操作可以不按照其在本文中出现的顺序来执行或并行执行，仅仅是用于区分开各个不同的操作，序号本身不代表任何的执行顺序。另外，这些流程可以包括更多或更少的操作，并且这些操作可以按顺序执行或并行执行。需要说明的是，本文中的“第一”、“第二”等描述，是用于区分不同的消息、设备、模块等，不代表先后顺序，也不限定“第一”和“第二”是不同的类型。

图8为本申请示例性实施例提供的一种电子设备的结构示意图。该电子设备80用于运行上述图像处理方法和图像处理方法。如图8所示，该电子设备包括：存储器84和处理器85。

存储器84，用于存储计算机程序，并可被配置为存储其它各种数据以支持在电子设备上的操作。该存储器84可以是对象存储(Object Storage Service，OSS)。

存储器84可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

处理器85，与存储器84耦合，用于执行存储器114中的计算机程序，以用于：获取第一待显示图像；采用第一颜色映射表对第一待显示图像进行颜色校正，得到第一校正图像，第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，第二待显示图像是第一待显示图像的前一帧图像，第二颜色映射表用于对第二待显示图像进行颜色校正得到第二校正图像，拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；控制在背景屏幕上显示第一校正图像；控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像，第一待显示图像和目标图像在共有区域的第二颜色差异小于预设阈值。

进一步可选地，处理器85用于在控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像之后，确定第一待显示图像和目标图像之间的第二颜色差异；根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表，并将第三颜色映射表确定为用于对第一待显示图像的下一帧的待显示图像的进行颜色校正的第一颜色映射表。

进一步可选地，处理器85在确定第一待显示图像和目标图像之间的第二颜色差异时，具体用于：获取第一待显示图像的第一区域和目标图像的第二区域，第一区域和第二区域表示第一待显示图像和目标图像的共有区域；确定第一区域和第二区域的颜色差异值为第二颜色差异。

进一步可选地，处理器85在确定第一区域和第二区域的颜色差异值为第二颜色差异时，具体用于：对第一区域内的像素进行聚类，得到多类第一像素，不同类的第一像素之间的颜色类别不同；在第二区域内，确定与第一像素位置相同的像素聚为一类，得到多类第二像素，第一像素与第二像素一一对应；针对第一像素，确定第一像素和对应第二像素的像素颜色差异值，第二颜色差异包括多个第一像素对应的像素颜色差异值，根据各类第一像素对应的像素颜色差异值确定。

在一可选实施例中，处理器85在根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表时，具体用于：获取初始颜色映射表；以初始颜色映射表为约束，根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表。。

在一可选实施例中，处理器85还用于在确定第一待显示图像和目标图像的第二颜色差异之前，获取预设扩展图像，预设扩展图像的部分区域为第一待显示图像；从预设扩展图像中提取出第一待显示图像。

在一可选实施例中，处理器85还用于在控制摄像机拍摄以第一校正图像为背景的待拍对象，得到目标图像之后，获取预设扩展图像，预设扩展图像的部分区域为第一待显示图像；合成预设扩展图像和目标图像，得到扩展现实图像。

在一可选实施例中，处理器85在以初始颜色映射表为约束，根据第二颜色差异更新第一颜色映射表，得到第三颜色映射表时，具体用于：根据第二颜色差异调整第一颜色映射表中的颜色值，得到第三颜色映射表，使得基于第三颜色映射表对第一待显示图像的下一帧的待显示图像的进行颜色校正后，下一帧的待显示图像和基于下一帧的待显示图像得到的目标图像之间在共有区域的颜色差异缩小，且第三颜色映射表和初始颜色映射表之间的差异满足预设条件。

进一步，如图8所示，该电子设备还包括：防火墙81、负载均衡器82、通信组件86、电源组件83等其它组件。图8中仅示意性给出部分组件，并不意味着电子设备只包括图8所示组件。

相应地，本申请实施例还提供一种存储有计算机程序的计算机可读存储介质，当计算机程序/指令被处理器执行时，致使处理器实现上述所示方法中的步骤。

相应地，本申请实施例还提供一种计算机程序产品，包括计算机程序/指令，当计算机程序/指令被处理器执行时，致使处理器实现上述所示方法中的步骤。

上述图8中的通信组件被配置为便于通信组件所在设备和其他设备之间有线或无线方式的通信。通信组件所在设备可以接入基于通信标准的无线网络，如WiFi，2G、3G、4G/LTE、5G等移动通信网络，或它们的组合。在一个示例性实施例中，通信组件经由广播信道接收来自外部广播管理系统的广播信号或广播相关文本。在一个示例性实施例中，通信组件还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

上述图8中的电源组件，为电源组件所在设备的各种组件提供电力。电源组件可以包括电源管理系统，一个或多个电源，及其他与为电源组件所在设备生成、管理和分配电力相关联的组件。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程文本处理设备的处理器以产生一个机器，使得通过计算机或其他可编程文本处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程文本处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程文本处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在一个典型的配置中，计算设备包括一个或多个处理器(CPU和/或GPU)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现文本存储。文本可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的文本。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。

以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

获取第一待显示图像；

采用第一颜色映射表对所述第一待显示图像进行颜色校正，得到第一校正图像，所述第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，所述第二待显示图像是所述第一待显示图像的前一帧图像，所述第二颜色映射表用于对所述第二待显示图像进行颜色校正得到第二校正图像，所述拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；

控制在背景屏幕上显示所述第一校正图像；

控制摄像机拍摄以所述第一校正图像为背景的待拍对象，得到目标图像，所述第一待显示图像和所述目标图像在共有区域的第二颜色差异小于预设阈值。

2.根据权利要求1所述的图像处理方法，其特征在于，所述控制摄像机拍摄以所述第一校正图像为背景的待拍对象，得到目标图像之后，还包括：

确定所述第一待显示图像和所述目标图像之间的第二颜色差异；

根据所述第二颜色差异更新所述第一颜色映射表，得到第三颜色映射表，并将所述第三颜色映射表确定为用于对所述第一待显示图像的下一帧的待显示图像的进行颜色校正的第一颜色映射表。

3.根据权利要求2所述的图像处理方法，其特征在于，所述确定所述第一待显示图像和所述目标图像之间的第二颜色差异，包括：

获取所述第一待显示图像的第一区域和所述目标图像的第二区域，所述第一区域和所述第二区域是所述第一待显示图像和所述目标图像的共有区域；

确定所述第一区域和所述第二区域的颜色差异值为所述第二颜色差异。

4.根据权利要求3所述的图像处理方法，其特征在于，所述确定所述第一区域和所述第二区域的颜色差异值为所述第二颜色差异，包括：

对所述第一区域内的像素进行聚类，得到多类第一像素，不同类的第一像素之间的颜色类别不同；

在所述第二区域内，确定与所述第一像素位置相同的像素聚为一类，得到多类第二像素，所述第一像素与所述第二像素一一对应；

针对第一像素，确定所述第一像素和对应第二像素的像素颜色差异值，根据各类第一像素对应的像素颜色差异值确定所述第二颜色差异。

5.根据权利要求4所述的图像处理方法，其特征在于，所述根据所述第二颜色差异更新所述第一颜色映射表，得到第三颜色映射表，包括：

获取初始颜色映射表；

以所述初始颜色映射表为约束，根据所述第二颜色差异更新所述第一颜色映射表，得到第三颜色映射表。

6.根据权利要求2至5任一项所述的图像处理方法，其特征在于，所述确定所述第一待显示图像和所述目标图像的第二颜色差异之前，还包括：

获取预设扩展图像，所述预设扩展图像的部分区域为所述第一待显示图像；

从所述预设扩展图像中提取出所述第一待显示图像。

7.根据权利要求1至5任一项所述的图像处理方法，其特征在于，所述控制摄像机拍摄以所述第一校正图像为背景的待拍对象，得到目标图像之后，还包括：

获取预设扩展图像，所述预设扩展图像的部分区域显示为所述第一待显示图像；

合成所述预设扩展图像和所述目标图像，得到扩展现实图像；

向背景屏幕发送所述第一校正图像，以使所述背景屏幕显示所述第一校正图像。

8.根据权利要求5所述的图像处理方法，其特征在于，所述以所述初始颜色映射表为约束，根据所述第二颜色差异更新所述第一颜色映射表，得到第三颜色映射表，包括：

根据所述第二颜色差异调整所述第一颜色映射表中的颜色值，得到第三颜色映射表，使得基于第三颜色映射表对所述第一待显示图像的下一帧的待显示图像的进行颜色校正后，下一帧的待显示图像和基于下一帧的待显示图像得到的目标图像之间在共有区域的颜色差异缩小，且第三颜色映射表和初始颜色映射表之间的差异满足预设条件。

9.一种图像处理装置，其特征在于，包括：

获取模块，用于获取第一待显示图像；

校正模块，用于采用第一颜色映射表对所述第一待显示图像进行颜色校正，得到第一校正图像，所述第一颜色映射表是根据第二待显示图像和拍摄图像的第一颜色差异更新第二颜色映射表得到的，所述第二待显示图像是所述第一待显示图像的前一帧图像，所述第二颜色映射表用于对所述第二待显示图像进行颜色校正得到第二校正图像，所述拍摄图像是摄像机拍摄以第二校正图像为背景的待拍对象得到的；

第一控制模块，用于控制在背景屏幕上显示所述第一校正图像；

第二控制模块，控制摄像机拍摄以所述第一校正图像为背景的待拍对象，得到目标图像，所述第一待显示图像和所述目标图像在共有区域的第二颜色差异小于预设阈值。

10.一种电子设备，其特征在于，包括：处理器、存储器及存储在所述存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至8任一项所述的图像处理方法。