CN104700354B

CN104700354B - 一种信息植入方法及装置

Info

Publication number: CN104700354B
Application number: CN201510149652.6A
Authority: CN
Inventors: 王涛; 杨琛
Original assignee: Beijing QIYI Century Science and Technology Co Ltd
Current assignee: Beijing QIYI Century Science and Technology Co Ltd
Priority date: 2015-03-31
Filing date: 2015-03-31
Publication date: 2018-11-02
Anticipated expiration: 2035-03-31
Also published as: CN104700354A

Abstract

本发明实施例公开了一种信息植入方法及装置，涉及图像处理技术领域，包括：对待植入信息的目标图像I进行检测，确定I中的模板区域，I为：将预设的植入模板图像M置于拍摄场景中拍摄得到的图像；对所确定的模板区域进行检测，识别所确定的模板区域中的S_I；确定M；根据所确定的模板区域中的S_I和M中的S_M，获得所确定的模板区域的形变系数；根据所确定的模板区域中各像素点的颜色值、所获得形变系数和M中的C_M内像素点的颜色值，获得所确定的模板区域中各像素点的色变系数；根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将待植入图像植入到I中。应用本发明实施例提供的方案，能够使得植入图像与周围场景比较协调。

Description

一种信息植入方法及装置

技术领域

本发明涉及图像处理技术领域，特别涉及一种信息植入方法及装置。

背景技术

由于视频具有信息量大、内容丰富等特点，其受众群体越来越大，因此，越来越多用户倾向于在视频中投放广告。

现有技术中，一种常见的在视频中植入广告的方式是直接将广告物置于拍摄场景中，使得拍摄得到的视频中包含该广告物，进而实现广告植入。然而，通过上述方式进行广告植入时，虽然能够得到较好的广告植入效果，但是由于在拍摄视频时，广告物已经确定，所以，能够植入的广告物是有限的，这样对于广告主而言，广告投放成本较高。

实际应用中，为解决广告投放成本高的问题，在视频拍摄完成后，通常根据用户的需求，通过替换视频中的广告物的方式实现广告植入。通过以上方式进行广告植入时，由于不同拍摄物其物理特性不同，例如，拍摄物表面对光的反射率、拍摄物的表面颜色分布等等，很难模拟出要替换的广告物在当时拍摄场景中的状态，所以，替换广告物后的各视频帧中广告物与周围场景不协调，影响视频的整体视觉效果。

发明内容

本发明实施例公开了一种信息植入方法及装置，以使得植入信息与周围场景协调，提高用户体验。

为达到上述目的，本发明实施例公开了一种信息植入方法，所述方法包括：

对待植入信息的目标图像I进行检测，确定所述I中的模板区域，其中，所述I为：将预设的植入模板图像M置于拍摄场景中拍摄得到的图像，所述M中存在色变检测区域C_M和形变检测区域S_M，所述I中存在一个对应于所述M的模板区域，且在该模板区域中存在：对应于S_M的形变检测区域S_I；

对所确定的模板区域进行检测，确定所确定的模板区域中的S_I；

确定所述M；

根据所确定的模板区域中的S_I和所述M中的S_M，获得所确定的模板区域的形变系数；

根据所确定的模板区域中各像素点的颜色值、所获得形变系数和所述M中的C_M内像素点的颜色值，获得所确定的模板区域中各像素点的色变系数；

根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中。

在本发明的一种具体实现方式中，所述确定所述M，包括：

识别所确定的模板区域中的S_I内包含的模板图像标识；

根据所述模板标识，从预设的模板图像集合中，确定所述M。

在本发明的一种具体实现方式中，在确定结果显示所确定的模板区域中包含多个S_I的情况下，所述根据所确定的模板区域中的S_I和所述M中的S_M，获得所确定的模板区域的形变系数，包括：

分别根据所确定的模板区域中每一S_I和所述M中与该S_I对应的S_M，计算该S_I的形变系数，进而得到所确定的模板区域中各个S_I的形变系数；

根据上述得到的各个S_I的形变系数，获得所确定的模板区域的形变系数。

在本发明的一种具体实现方式中，所述根据所确定的模板区域中各像素点的颜色值、所获得形变系数和所述M中的C_M内像素点的颜色值，获得所确定的模板区域中各像素点的色变系数，包括：

根据所确定的模板区域、所获得的形变系数和所述M中的C_M，确定所确定的模板区域中的C_I；

根据所确定的模板区域中的C_I和所获得的形变系数，建立所确定的C_I中各像素点与所述M中的C_M内像素点之间的对应关系；

根据所建立的每一对应关系中像素点的颜色值，计算所确定的模板区域中该对应关系对应的像素点的色变系数，进而获得所确定的模板区域中各像素点的色变系数。

在本发明的一种具体实现方式中，所述根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中，包括：

根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的模板区域中各像素点的待替换颜色值；

根据所确定的模板区域中各个像素点在所述I中的坐标，将上述计算得到的像素点的待替换颜色值更新至所述I中；

具体的，按照以下步骤计算所确定的模板区域中任一像素点P的待替换颜色值：

根据所获得的形变系数，确定所述P在所述待植入图像中的对应像素点Q；

根据所述Q的颜色值、所述Q周围预设数量个像素点的颜色值和所获得的色变系数，计算所述P的待替换颜色值。

确定所确定的模板区域中未被所述I的内容物遮挡的非遮挡有效区域；

根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的非遮挡有效区域中各像素点的待替换颜色值；

根据所确定的非遮挡有效区域中各个像素点在所述I中的坐标，将上述计算得到的像素点的待替换颜色值更新至所述I中。

在本发明的一种具体实现方式中，所述确定所确定的模板区域中未被所述目标图像的内容物遮挡的非遮挡有效区域，包括：

查找所确定的模板区域中满足以下关系式的像素点，

|Pix_{I_x'y'}-Pix_{R_xy}|<TH，

其中，Pix_{I_x'y'}为所确定的模板区域中坐标为(x’，y’)的像素点的颜色值，Pix_{R_xy}为待植入图像中坐标为(x，y)的像素点的颜色值，坐标(x，y)为根据所获得的形变系数获得的像素点(x’，y’)在待植入图像中的对应像素点的坐标，TH为预设的颜色变化阈值；

根据上述的查找结果确定所确定的模板区域中未被所述目标图像的内容物遮挡的非遮挡有效区域。

为达到上述目的，本发明实施例公开了一种信息植入装置，所述装置包括：

模板区域确定模块，用于对待植入信息的目标图像I进行检测，确定所述I中的模板区域，其中，所述I为：将预设的植入模板图像M置于拍摄场景中拍摄得到的图像，所述M中存在色变检测区域C_M和形变检测区域S_M，所述I中存在一个对应于所述M的模板区域，且在该模板区域中存在：对应于S_M的形变检测区域S_I；

形变检测区域确定模块，用于对所确定的模板区域进行检测，确定所确定的模板区域中的S_I；

模板图像确定模块，用于确定所述M；

形变系数获得模块，用于根据所确定的模板区域中的S_I和所述M中的S_M，获得所确定的模板区域的形变系数；

色变系数获得模块，用于根据所确定的模板区域中各像素点的颜色值、所获得形变系数和所述M中的C_M内像素点的颜色值，获得所确定的模板区域中各像素点的色变系数；

图像植入模块，用于根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中。

在本发明的一种具体实现方式中，所述模板图像确定模块，包括：

模板图像标识识别子模块，用于识别所确定的模板区域中的S_I内包含的模板图像标识；

模板图像确定子模块，用于根据所述模板标识，从预设的模板图像集合中，确定所述M。

在本发明的一种具体实现方式中，所述形变系数获得模块，包括：

形变系数计算子模块，用于在所述形变检测区域确定模块的确定结果显示所确定的模板区域中包含多个S_I的情况下，分别根据所确定的模板区域中每一S_I和所述M中与该S_I对应的S_M，计算该S_I的形变系数，进而得到所确定的模板区域中各个S_I的形变系数；

形变系数获得子模块，用于根据上述得到的各个S_I的形变系数，获得所确定的模板区域的形变系数。

在本发明的一种具体实现方式中，所述色变系数获得模块，包括：

色变检测区域确定子模块，用于根据所确定的模板区域、所获得的形变系数和所述M中的C_M，确定所确定的模板区域中的C_I；

对应关系建立子模块，用于根据所确定的模板区域中的C_I和所获得的形变系数，建立所确定的C_I中各像素点与所述M中的C_M内像素点之间的对应关系；

色变系数获得子模块，用于根据所建立的每一对应关系中像素点的颜色值，计算所确定的模板区域中该对应关系对应的像素点的色变系数，进而获得所确定的模板区域中各像素点的色变系数。

在本发明的一种具体实现方式中，所述图像植入模块，包括：

第一待替换颜色值计算子模块，用于根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的模板区域中各像素点的待替换颜色值；

第一像素点颜色值更新子模块，用于根据所确定的模板区域中各个像素点在所述I中的坐标，将上述计算得到的像素点的待替换颜色值更新至所述I中；

具体的，所述第一待替换颜色值计算子模块，包括：

对应像素点确定单元，用于根据所获得的形变系数，确定所确定的模板区域中任一像素点P在所述待植入图像中的对应像素点Q；

待替换颜色值计算单元，用于根据所述Q的颜色值、所述Q周围预设数量个像素点的颜色值和所获得的色变系数，计算所述P的待替换颜色值。

非遮挡有效区域确定子模块，用于确定所确定的模板区域中未被所述I的内容物遮挡的非遮挡有效区域；

第二待替换颜色值计算子模块，用于根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的非遮挡有效区域中各像素点的待替换颜色值；

第二像素点颜色值更新子模块，用于根据所确定的非遮挡有效区域中各个像素点在所述I中的坐标，将上述计算得到的像素点的待替换颜色值更新至所述I中。

在本发明的一种具体实现方式中，所述非遮挡有效区域确定子模块，包括：

像素点查找单元，用于查找所确定的模板区域中满足以下关系式的像素点，

|Pix_{I_x'y'}-Pix_{R_xy}|<TH，

非遮挡有效区域确定单元，用于根据上述的查找结果确定所确定的模板区域中未被所述目标图像的内容物遮挡的非遮挡有效区域。

由以上可见，本发明实施例提供的方案中，将预设的植入模板图像置于拍摄场景中得到目标图像，拍摄过程中由于拍摄角度、现场光线等因素的影响，可能目标图像中所呈现的植入模板图像与原始植入模板图像相比存在形状和颜色两方面的变化，基于此，在预设的植入模板图像中设置了用于检测植入模板图像形状变化的形变检测区域，和用于检测植入模板图像中各像素点颜色变化的色变检测区域，在进行信息植入时，计算出预设的植入模板图像所在区域的形变系数和色变系数，并根据计算结果在预设的植入模板图像所在区域中植入待植入图像。这样，在进行信息植入时，不仅考虑了拍摄过程中拍摄物在形状方面的变化，还考虑了拍摄物在颜色方面的变化，因此，完成信息植入后，待植入图像与周围场景在光照、形状等方面比较协调，能够得到较佳的视觉效果，提高了用户体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种信息植入方法的流程示意图；

图2a为本发明实施例提供的第一种预设的植入模板图像；

图2b为本发明实施例提供的第二种预设的植入模板图像；

图2c为本发明实施例提供的第三种预设的植入模板图像；

图3为本发明实施例提供的另一种信息植入方法的流程示意图；

图4为本发明实施例提供的包含遮挡区域的待植入信息的目标图像；

图5为本发明实施例提供的一种信息植入装置的结构示意图；

图6为本发明实施例提供的另一种信息植入装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1为本发明实施例提供的一种信息植入方法的流程示意图，该方法包括：

S101：对待植入信息的目标图像I进行检测，确定上述I中的模板区域。

近年来，随着植入式广告的兴起，各种广告频频出现在用户浏览的视频、图像中，由于视频、图像等可被重复浏览，因此，这些植入式广告也一并被重复向用户展现，随着广告合约的到期，视频、图像提供商可将植入到视频中的广告替换为其他广告，由此，在本发明的一个优选实施例中，要植入I的信息为广告信息。

另外，要植入I的信息还可以是某一物体如：球、箱子等等。

其中，上述的I为：将预设的植入模板图像M置于拍摄场景中拍摄得到的图像。拍摄得到的I中包含M对应的区域，在进行信息植入时，将要植入的信息植入至I中M对应的区域。

实际应用中，I中M对应的区域由于受拍摄过程中拍摄角度、环境光线等因素的影响而呈现与M不同的形状、不同的颜色，因此，在进行信息植入时，也应该考虑当时的拍摄角度、环境光线等因素，才能使得所植入的信息与周围场景协调，不会出现颜色跳跃等现象。

基于上述考虑，M中需存在用于检测M中各像素点颜色变化的色变检测区域C_M，和用于检测M形状变化的形变检测区域S_M。为了保证能够应用本发明实施例提供的方案进行信息植入，I中需存在一个对应于M的模板区域，且在该模板区域中存在：对应于S_M的形变检测区域S_I。

需要说明的是，上述的色变检测区域可以是条带状对色板，该对色板中所包含颜色的数量以及每个条带的宽度可以根据具体应用情况确定，另外，本领域内的技术人员能够理解的是，上述的色变检测区域还可以是圆形对色板，不同的颜色以具有一定宽度的颜色环呈现，还可以是多种颜色的颜色块随机排列组成的色变检测区域等等，除了上述的对色板之外，色变检测区域还可以是其他具有对色板功能的颜色区域。

上述的形变检测区域可以是具有规则形状的区域，例如，矩形区域、六边形区域、大矩形和小矩形嵌套的区域等等，另外，形变检测区域中还可以包括模板标识等信息，其中模板标识可以以二进制字符、字母等进行表示，本申请并不对形变检测区域的形状以及模板标识的表示形式进行限定，实际应用中可以根据具体情况进行设定。

参见图2a，提供了第一种预设的植入模板图像；

参见图2b，提供了第二种预设的植入模板图像。

具体的，预设的植入模板图像中可以仅仅包含一个色变检测区域，也可以包含多个色变检测区域。将包含多个色变检测区域的预设的植入模板图像置于拍摄场景中进行拍摄得到待植入信息的图像时，多个色变检测区域能够从多个角度提供颜色变化信息。

预设的植入模板图像中可以仅仅包含一个形变检测区域，也可以包含多个形变检测区域。将包含多个形变检测区域的预设的植入模板图像置于拍摄场景中进行拍摄得到待植入信息的图像时，多个形变检测区域不仅能够从多个角度提供形状变化信息，而且在其中一个或者几个形变检测区域被拍摄场景中的拍摄物物遮挡的情况下，也依然能够通过未被拍摄物遮挡的形变检测区域获得形状变化信息。

参见图2c，提供了第三种预设的植入模板图像。

该植入模板图像与图2a、图2b所示的植入模板图像不同，图2a、图2b所示的植入模板图像中包含一个形变检测区域和一个色变检测区域，而图2c所示的植入模板图像中包含四个形变检测区域和一个色变检测区域。

S102：对所确定的模板区域进行检测，确定所确定的模板区域中的S_I。

在图像中进行区域检测属于比较成熟的技术，本领域内的技术人员能够容易的获得Artoolkit等区域检测算法，这里不进行详细介绍。

色变检测区域中包含模板标识等信息时，在确定所确定的模板区域中的S_I的过程中，可以一并识别出所确定的模板区域中的模板标识等信息。

S103：确定上述I对应的预设的植入模板图像M。

若I中模板区域与预设的植入模板图像之间的对应关系是已知的，则可以直接根据该对应关系确定出M。

而在I中模板区域与预设的植入模板图像之间的对应关系未知时，在本发明的一种具体实现方式中，可以先识别所确定的模板区域中的S_I内包含的模板图像标识，再根据模板标识，从预设的模板图像集合中，确定M。

S104：根据所确定的模板区域中的S_I和上述M中的S_M，获得所确定的模板区域的形变系数。

若经上述的S102确定，所确定的模板区域中包含多个S_I，则可以根据所确定的模板区域中每一个S_I和上述M中与该S_I对应的S_M，计算该S_I的形变系数，进而得到所确定的模板区域中各个S_I的形变系数，再根据上述得到的各个S_I的形变系数，获得所确定的模板区域的形变系数。

根据多个S_I的形变系数，获得所确定的模板区域的形变系数时，可以根据各个S_I的位置等因素为各个S_I的形变系数设置不同的权重系数，然后通过加权计算的方式获得所确定的模板区域的形变系数。

S105：根据所确定的模板区域中各像素点的颜色值、所获得形变系数和上述M中的C_M内像素点的颜色值，获得所确定的模板区域中各像素点的色变系数。

由于拍摄过程中受各种因素的影响，所确定的模板区域相较于M可能会发生形变，因此，所确定的模板区域中的一个像素点可能对应于M中的一个像素点、对应于M中的多个像素点、也可能是所确定的模板区域中的多个像素点对应于M中的一个像素点。

由于所确定的模板区域中各像素点在M中所对应的像素点的数量因情况而异，所以，实际应用中，可以以所确定的模板区域中所包含的像素点为基准获得所确定的模板区域中各像素点的色变系数。在本发明的一种具体实现方式中，可以通过以下方式获得所确定的模板区域中各像素点的色变系数：根据所确定的模板区域、所获得的形变系数和上述M中的C_M，确定所确定的模板区域中的C_I，根据所确定的模板区域中的C_I和所获得的形变系数，建立所确定的C_I中各像素点与上述M中的C_M内像素点之间的对应关系，根据所建立的每一对应关系中像素点的颜色值，计算所确定的模板区域中该对应关系对应的像素点的色变系数，进而获得所确定的模板区域中各像素点的色变系数。

其中，确定C_I时，只要确定出该区域的边界，即可唯一的确定出该区域。例如，根据M中C_M的边界和所获得形变系数，确定上述边界中的各像素点在所确定的模板区域中对应的像素点，所确定出的像素点构成的边界可以认为是C_I的边界，进而得到C_I。本申请只是以上述为例进行说明，实际应用中确定C_I边界的方法并不仅限于此。

具体的，假设，所确定的模板区域中坐标为(x’，y’)的像素点的颜色值为Pix_{I_xy}，M中的C_M内坐标为(x，y)的像素点的颜色值为Pix_{M_xy}，则像素点(x’，y’)的色变系数α_xy可以根据以下表达式计算得到：

α_xy＝Pix_{I_xy}/Pix_{M_xy}，

其中，(x，y)为根据所获得的形变系数计算得到的像素点(x’，y’)在M中的对应像素点的坐标。

当然，上述表达式只是用于计算色变系数的一种表达式，实际应用中，本领域内的技术人员可以根据该表达式进行变形得到类似的计算表达式。

S106：根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将待植入图像植入到上述I中。

待植入图像所在区域可以大于、小于或者等于所确定的模板区域，其中，

当待植入图像所在区域大于所确定的模板区域时，待植入图像能够完全覆盖所确定的模板区域，但是待植入图像会超出植入的区域，即会超出前述的模板区域。所植入部分由所确定的模板区域和所获得的形变系数确定；

当待植入图像所在区域等于所确定的模板区域时，待植入图像能够完全覆盖所确定的模板区域，且待植入图像所在区域能够完全植入到I中，植入效果较佳；

当待植入图像所在区域小于所确定的模板区域时，待植入图像能够植入到I中，但是待植入图像不能够完全覆盖所确定的模板区域，会露出部分模板的区域，不影响植入效果。

在本发明的一种具体实现方式中，根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将待植入图像植入到上述I中时，可以先根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的模板区域中各像素点的待替换颜色值，再根据所确定的模板区域中各个像素点在上述I中的坐标，将上述计算得到的像素点的待替换颜色值更新至上述I中。

具体的，可以按照以下步骤计算所确定的模板区域中任一像素点P的待替换颜色值：

根据所获得的形变系数，确定P在待植入图像中的对应像素点Q；

根据Q的颜色值、Q周围预设数量个像素点的颜色值和所获得的色变系数，计算P的待替换颜色值。

由于所确定的模板区域中相邻的像素点在待植入图像中对应的像素点可能不是相邻的像素点，所以，在计算P的待替换颜色值时考虑Q周围的像素点，能够使得计算得到的所确定的模板区域的各像素点的待替换颜色值自然过渡，防止出现颜色跳跃的现象。

当然，实际应用中在计算P的待替换颜色值时也可以不考虑Q周围的像素点，而是值根据Q的颜色值和所获得的色变系数，计算P的待替换颜色值。

一种具体实现方式中，可以根据以下表达式计算所确定的区域内坐标为(x’，y’)的像素点的待替换颜色值Pix_{I_xy}：

Pix_{I_xy}＝α_xy*Pix_{R_xy}

其中，Pix_{R_xy}为待植入图像中坐标为(x，y)的像素点的颜色值，α_xy为所确定的区域内坐标为(x’，y’)的像素点的色变系数，((x，y)为根据所获得的形变系数计算得到的像素点(x’，y’)在M中的对应像素点的坐标。

由以上可见，本实施例提供的方案中，将预设的植入模板图像置于拍摄场景中得到目标图像，拍摄过程中由于拍摄角度、现场光线等因素的影响，可能目标图像中所呈现的植入模板图像与原始植入模板图像相比存在形状和颜色两方面的变化，基于此，在预设的植入模板图像中设置了用于检测植入模板图像形状变化的形变检测区域，和用于检测植入模板图像中各像素点颜色变化的色变检测区域，在进行信息植入时，计算出预设的植入模板图像所在区域的形变系数和色变系数，并根据计算结果在预设的植入模板图像所在区域中植入待植入图像。这样，在进行信息植入时，不仅考虑了拍摄过程中拍摄物在形状方面的变化，还考虑了拍摄物在颜色方面的变化，因此，完成信息植入后，待植入图像与周围场景在光照、形状等方面比较协调，能够得到较佳的视觉效果，提高了用户体验。

在本发明的一个具体实施例中，参见图3，提供了另一种信息植入方法的流程示意图，与前述实施例相比，本实施例中，

根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将待植入图像植入到所述I中(S106)，包括：

S106A：确定所确定的模板区域中未被上述I的内容物遮挡的非遮挡有效区域。

实际应用中，将预设的植入图像模板置于拍摄场景中后，该植入图像模板可能会被拍摄物遮挡，参见图4，提供了包含遮挡区域的待植入信息的目标图像，这种情况下，在进行信息植入时，需绕过遮挡区域，在非遮挡有效区域进行信息植入。

在本申请的一种可选实施方式中，可以通过以下方式确定所确定的模板区域中未被目标图像的内容物遮挡的非遮挡有效区域：

查找所确定的模板区域中满足以下关系式的像素点，|Pix_{I_x'y'}-Pix_{R_xy}|<TH；

根据上述的查找结果确定所确定的模板区域中未被目标图像的内容物遮挡的非遮挡有效区域。

其中，Pix_{I_x'y'}为所确定的模板区域中坐标为(x’，y’)的像素点的颜色值，Pix_{R_xy}为待植入图像中坐标为(x，y)的像素点的颜色值，坐标(x，y)为根据所获得的形变系数获得的像素点(x’，y’)在待植入图像中的对应像素点的坐标，TH为预设的颜色变化阈值。

S106B：根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的非遮挡有效区域中各像素点的待替换颜色值。

S106C：根据所确定的非遮挡有效区域中各个像素点在上述I中的坐标，将上述计算得到的像素点的待替换颜色值更新至上述I中。

由以上可见，本实施例提供的方案中，在进行信息植入之前在所确定的模板区域中先进行了非遮挡有效区域检测，并且只在非遮挡有效区域中进行信息植入，这样能够有效保证信息植入前后待植入目标图像一致，能够得到较佳的视觉效果。

与上述的信息植入方法相对应，本发明实施例还提供了一种信息植入装置。

图5为本发明实施例提供的一种信息植入装置的，该装置包括：模板区域确定模块501、形变检测区域确定模块502、模板图像确定模块503、形变系数获得模块504、色变系数获得模块505和图像植入模块506。

其中，模板区域确定模块501，用于对待植入信息的目标图像I进行检测，确定所述I中的模板区域，其中，所述I为：将预设的植入模板图像M置于拍摄场景中拍摄得到的图像，所述M中存在色变检测区域C_M和形变检测区域S_M，所述I中存在一个对应于所述M的模板区域，且在该模板区域中存在：对应于S_M的形变检测区域S_I；

形变检测区域确定模块502，用于对所确定的模板区域进行检测，确定所确定的模板区域中的S_I；

模板图像确定模块503，用于确定所述M；

形变系数获得模块504，用于根据所确定的模板区域中的S_I和所述M中的S_M，获得所确定的模板区域的形变系数；

色变系数获得模块505，用于根据所确定的模板区域中各像素点的颜色值、所获得形变系数和所述M中的C_M内像素点的颜色值，获得所确定的模板区域中各像素点的色变系数；

图像植入模块506，用于根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中。

具体的，所述模板图像确定模块503还可以包括：模板图像标识识别子模块和模板图像确定子模块(图中未示出)。

其中，模板图像标识识别子模块，用于识别所确定的模板区域中的S_I内包含的模板图像标识；

模板图像确定子模块，用于根据所述模板标识，从预设的模板图像集合中，确定所述M；

具体的，所述形变系数获得模块504可以包括：形变系数计算子模块和形变系数获得子模块(图中未示出)。

其中，形变系数计算子模块，用于在所述形变检测区域确定模块的确定结果显示所确定的模板区域中包含多个S_I的情况下，分别根据所确定的模板区域中每一S_I和所述M中与该S_I对应的S_M，计算该S_I的形变系数，进而得到所确定的模板区域中各个S_I的形变系数；

具体的，所述色变系数获得模块505可以包括：色变检测区域确定子模块、对应关系建立子模块和色变系数获得子模块(图中未示出)。

其中，色变检测区域确定子模块，用于根据所确定的模板区域、所获得的形变系数和所述M中的C_M，确定所确定的模板区域中的C_I；

具体的，所述图像植入模块506可以包括：第一待替换颜色值计算子模块和第一像素点颜色值更新子模块(图中未示出)。

其中，第一待替换颜色值计算子模块，用于根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的模板区域中各像素点的待替换颜色值；

具体的，所述第一待替换颜色值计算子模块，包括：

在本发明的一个具体实施例中，参见图6，提供了另一种信息植入装置的结构示意图，与前述实施例相比，本实施例中，

所述图像植入模块506包括：非遮挡有效区域确定子模块5061、第二待替换颜色值计算子模块5062和第二像素点颜色值更新子模块5063。

其中，非遮挡有效区域确定子模块5061，用于确定所确定的模板区域中未被所述I的内容物遮挡的非遮挡有效区域；

第二待替换颜色值计算子模块5062，用于根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，计算所确定的非遮挡有效区域中各像素点的待替换颜色值；

第二像素点颜色值更新子模块5063，用于根据所确定的非遮挡有效区域中各个像素点在所述I中的坐标，将上述计算得到的像素点的待替换颜色值更新至所述I中。

具体的，所述非遮挡有效区域确定子模块5061可以包括：像素点查找单元和非遮挡有效区域确定单元(图中未示出)。

其中，像素点查找单元，用于查找所确定的模板区域中满足以下关系式的像素点，

|Pix_{I_x'y'}-Pix_{R_xy}|<TH，

对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以存储于计算机可读取存储介质中，这里所称得的存储介质，如：ROM/RAM、磁碟、光盘等。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims

1.一种信息植入方法，其特征在于，所述方法包括：

确定所述M；

根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中；

其中，所述根据所确定的模板区域中各像素点的颜色值、所获得形变系数和所述M中的C_M内像素点的颜色值，获得所确定的模板区域中各像素点的色变系数，包括：

根据所确定的模板区域、所获得的形变系数和所述M中的C_M，确定所确定的模板区域中的色变检测区域C_I；

2.根据权利要求1所述的方法，其特征在于，所述确定所述M，包括：

识别所确定的模板区域中的S_I内包含的模板图像标识；

根据所述模板图像标识，从预设的模板图像集合中，确定所述M。

3.根据权利要求1或2所述的方法，其特征在于，在确定结果显示所确定的模板区域中包含多个S_I的情况下，所述根据所确定的模板区域中的S_I和所述M中的S_M，获得所确定的模板区域的形变系数，包括：

4.根据权利要求1或2所述的方法，其特征在于，所述根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中，包括：

5.根据权利要求1或2所述的方法，其特征在于，所述根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中，包括：

6.根据权利要求5所述的方法，其特征在于，所述确定所确定的模板区域中未被所述I的内容物遮挡的非遮挡有效区域，包括：

查找所确定的模板区域中满足以下关系式的像素点，

|Pix_{I_x'y'}-Pix_{R_xy}|<TH，

根据所述查找所确定的模板区域中满足关系式的像素点的查找结果确定所确定的模板区域中未被所述I的内容物遮挡的非遮挡有效区域。

7.一种信息植入装置，其特征在于，所述装置包括：

模板图像确定模块，用于确定所述M；

图像植入模块，用于根据待植入图像中像素点的颜色值、所获得的形变系数和色变系数，将所述待植入图像植入到所述I中；

其中，所述色变系数获得模块，包括：

色变检测区域确定子模块，用于根据所确定的模板区域、所获得的形变系数和所述M中的C_M，确定所确定的模板区域中的色变检测区域C_I；

8.根据权利要求7所述的装置，其特征在于，所述模板图像确定模块，包括：

模板图像确定子模块，用于根据所述模板图像标识，从预设的模板图像集合中，确定所述M。

9.根据权利要求7或8所述的装置，其特征在于，所述形变系数获得模块，包括：

10.根据权利要求7或8所述的装置，其特征在于，所述图像植入模块，包括：

具体的，所述第一待替换颜色值计算子模块，包括：

11.根据权利要求7或8所述的装置，其特征在于，所述图像植入模块，包括：

12.根据权利要求11所述的装置，其特征在于，所述非遮挡有效区域确定子模块，包括：

像素点查找单元，用于查找所确定的模板区域中满足以下关系式的像素点，|Pix_{I_x'y'}-Pix_{R_xy}|<TH，

非遮挡有效区域确定单元，用于根据所述查找所确定的模板区域中满足关系式的像素点的查找结果确定所确定的模板区域中未被所述I的内容物遮挡的非遮挡有效区域。