CN104735467B - 视频画中画广告生成方法及装置 - Google Patents

Abstract

本发明实施例提供的一种视频画中画广告生成方法及装置。该方法包括：确定目标片段的每帧图像中的第一类像素点的坐标；确定目标视频广告的每帧图像中第二类像素点的坐标；利用目标片段的相应帧图像的第一类像素点的坐标和目标视频广告的相应帧图像的第二类像素点的坐标，分别计算目标片段的每帧图像各自所对应的透视变化矩阵；利用目标片段的相应帧图像所对应的透视变化矩阵和目标视频广告的相应帧图像，分别对目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，在实现目标视频文件的目标片段的生成针对于目标视频广告的画中画广告。通过本方案，可以在视频拍摄完成后生成视频画中画广告，达到视频广告植入效果。

Description

视频画中画广告生成方法及装置

技术领域

本发明涉及技术视频处理领域，特别是涉及一种视频画中画广告生成方法及装置。

背景技术

植入式广告越来越多的被电影和电视剧所采用，而对于视频广告的植入而言，通常将处于播放状态的视频广告位于拍摄环境中，然后让该视频广告的画面出现在镜头中，从而生成了视频画中画广告。

对于某些情况下，视频拍摄过程中，并未存在视频广告的植入需求，但是，在后续的视频发行等过程中，会存在希望植入某些广告的需求，即存在生成视频画中画广告的需求。

因此，如何在视频拍摄完成后生成视频画中画广告是一个亟待解决的问题。

发明内容

本发明实施例的目的在于提供一种视频画中画广告生成方法及装置，以实现在视频拍摄完成后生成视频画中画广告，达到视频广告植入效果。具体技术方案如下：

第一方面，本发明实施例提供了一种视频画中画广告生成方法，包括：

确定目标片段的每帧图像中的第一类像素点的坐标，其中，每帧图像中的第一类像素点能够定位该帧图像中待植入画中画广告的区域，所述目标片段为目标视频文件中的待植入画中画广告的片段；

确定目标视频广告的每帧图像中的第二类像素点的坐标，其中，每帧图像中的第二类像素点能够定位该帧图像作为画中画广告的区域，所述目标视频广告中的图像帧数与所述目标片段的图像帧数相同，所述目标视频广告的每帧图像中的第二类像素点与所述目标片段的相应帧图像中的第一类像素点的个数相同，且具有一一对应性；

利用所述目标片段的相应帧图像的第一类像素点的坐标和所述目标视频广告的相应帧图像的第二类像素点的坐标，分别计算所述目标片段的每帧图像各自所对应的透视变化矩阵；

利用所述目标片段的相应帧图像所对应的透视变化矩阵和所述目标视频广告的相应帧图像，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在所述目标视频文件的所述目标片段的生成针对于所述目标视频广告的画中画广告。

可选的，所述利用所述目标片段的相应帧图像所对应的透视变化矩阵，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，包括：

利用所述目标片段的相应帧图像所对应的透视变化矩阵，分别确定所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点所对应的所述目标视频广告的相应帧图像中的像素点；

基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理。

可选的，所述基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理，包括：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的像素值。

可选的，所述基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理，包括：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的至少两个相邻像素点的像素值插值。

第二方面，本发明实施例提供了一种视频画中画广告生成装置，包括：

第一类像素点坐标确定模块，用于确定目标片段的每帧图像中的第一类像素点的坐标，其中，每帧图像中的第一类像素点能够定位该帧图像中待植入画中画广告的区域，所述目标片段为目标视频文件中的待植入画中画广告的片段；

第二类像素点坐标确定模块，用于确定目标视频广告的每帧图像中的第二类像素点的坐标，其中，每帧图像中的第二类像素点能够定位该帧图像作为画中画广告的区域，所述目标视频广告中的图像帧数与所述目标片段的图像帧数相同，所述目标视频广告的每帧图像中的第二类像素点与所述目标片段的相应帧图像中的第一类像素点的个数相同，且具有一一对应性；

透视变化矩阵确定模块，用于利用所述目标片段的相应帧图像的第一类像素点的坐标和所述目标视频广告的相应帧图像的第二类像素点的坐标，分别计算所述目标片段的每帧图像各自所对应的透视变化矩阵；

透视变化处理模块，用于利用所述目标片段的相应帧图像所对应的透视变化矩阵和所述目标视频广告的相应帧图像，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在所述目标视频文件的所述目标片段的生成针对于所述目标视频广告的画中画广告。

可选的，所述透视变化处理模块，包括：

像素点确定单元，用于利用所述目标片段的相应帧图像所对应的透视变化矩阵，分别确定所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点所对应的所述目标视频广告的相应帧图像中的像素点；

透视变化处理单元，用于基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理。

可选的，所述透视变化处理单元，具体用于：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的像素值。

可选的，所述透视变化处理单元，具体用于：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的至少两个相邻像素点的像素值插值。

本方案中，在生成视频画中画广告时，确定目标片段的每帧图像中的第一类像素点的坐标，每帧图像中第一类像素点能够定位该帧图像中待植入画中画广告的区域；确定目标视频广告的每帧图像中的第二类像素点的坐标，每帧图像中第二类像素点能够定位该帧图像作为画中画广告的区域；利用目标片段的相应帧图像的第一类像素点的坐标和目标视频广告的相应帧图像的第二类像素点的坐标，分别计算目标片段的每帧图像各自所对应的透视变化矩阵；利用目标片段的相应帧图像所对应的透视变化矩阵和目标视频广告的相应帧图像，分别对目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在目标视频文件的目标片段的生成针对于目标视频广告的画中画广告。可见，通过本方案，可以在视频拍摄完成后生成视频画中画广告，达到视频广告植入效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例所提供的一种视频画中画广告生成方法的流程图；

图2为本发明实施例中针对于第一类像素点的预定像素点选择方式所对应的像素点选择示意图；

图3为目标片段的各帧图像中的第一类像素点和目标视频广告的相应帧图像中的第二类像素点的对应关系示意图；

图4为目标片段的一帧图像的像素点和目标视频广告的相应帧图像的相应像素点的透视转化关系示意图；

图5为本发明实施例所提供的一种视频画中画广告生成装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

为了实现在视频拍摄完成后生成视频画中画广告，达到视频广告植入效果，本发明实施例提供了一种视频画中画广告生成方法及装置。

下面首先对本发明实施例所提供的一种视频画中画广告生成方法进行介绍。

需要说明的是，本发明实施例所提供的一种视频画中画广告生成方法的执行主体可以为一种视频画中画广告生成装置，该视频画中画广告生成装置位于电子设备内。

如图1所示，一种视频画中画广告生成方法，可以包括：

S101，确定目标片段的每帧图像中的第一类像素点的坐标；

在为目标视频文件生成视频画中画广告时，由于需要后续计算目标片段的每帧图像所对应的透视变化矩阵，因此，可以确定目标片段的每帧图像中的第一类像素点的坐标，其中，可以采用现有技术来确定目标片段的每帧图像中的第一类像素点的坐标。

其中，每帧图像中的第一类像素点能够定位该帧图像中待植入画中画广告的区域，该目标片段为目标视频文件中的待植入画中画广告的片段。其中，该目标片段为预先通过人工方式从目标视频文件中所确定出的，具体的，该目标片段包括：各帧图像中均包含墙面区域的视频片段；或者，各帧图像中均包含显示屏的视频片段，当然并不局限于此；另外，目标片段的每帧图像中的第一类像素点为预先通过人工方式所确定出的，并且，该第一类像素点的个数可以为至少4个，以唯一确定出待植入画中画广告的区域。

需要说明的是，目标片段的每帧图像中待植入画中画广告的区域可以通过人工方式确定出。其中，对于目标片段为各帧图像中均包含墙面区域的视频片段的情况而言，由于视频画中画广告的广告内容通常需要显示在显示屏内，因此，后续待植入的目标视频广告为广告内容已嵌入进显示屏的广告，即目标视频广告所显示的广告内容已通过显示显示屏呈现出来，此时，目标片段的各帧图像中待植入画中画广告的区域用于植入目标视频广告的广告内容以及该广告内容所在的显示屏，并且，待植入画中画广告的区域可以为墙面区域上的部分区域。

而对于目标片段为各帧图像中均包含显示屏的视频片段的情况而言，由于只需要替换该目标片段中显示屏内的显示画面，因此，后续待植入的目标视频广告可以为广告内容未嵌入进显示屏的广告，即目标视频广告为仅仅包含广告内容的视频，此时，目标片段的各帧图像中待植入画中画广告的区域用于植入目标视频广告的广告内容，且待植入画中画广告的区域可以为该目标片段的每帧图像中显示屏内的画面显示区域；当然，后续待植入的目标视频广告也可以为广告内容已嵌入进显示屏的广告，此时，目标片段的各帧图像中待植入画中画广告的区域用于植入目标视频广告中显示屏内部的广告内容，且待植入画中画广告的区域可以为该目标片段的每帧图像中显示屏内的画面显示区域。

进一步需要强调的是，目标片段的每帧图像中的第一类像素点可以通过预定像素点选择方式来进行确定。举例而言：如果目标片段的每帧图像均包括显示屏，该预定像素点选择方式可以为：将显示屏的画面显示区域的4个顶点处的像素点作为第一类像素点，当然并不局限于此；而如果目标片段的每帧图像均包含墙面区域，如图2所示，该预定像素点选择方式可以为：首先根据先验知识判断确定出墙面区域abcd上的相互垂直的两对平行线(ad所在直线∥bc所在直线且ab所在直线∥dc所在直线)，ba和cd的延长线交于A点，da和cb的延长线交于B点，根据所需的画中画广告显示位置，在墙面区域abcd上任选一点a1作为待植入画中画广告的区域的一个第一类像素点，在Aa1的延长线上任选一点a2作为待植入画中画广告的区域的另一个第一类像素点，在Ba1的延长线上选择一点a4作为待植入画中画广告的区域的另一个第一类像素点，其中，线段a1a4与线段a1a2的比值等于目标视频广告中的显示屏的长宽的比值，进而Aa4的延长线与Ba2的延长线交于点a3，将该a3作为作为待植入画中画广告的区域的另一个第一类像素点，最终确定出能够定位待植入画中画广告的区域的4个第一类像素点。

S102，确定目标视频广告的每帧图像中的第二类像素点的坐标；

由于需要后续计算目标片段的每帧图像所对应的透视变化矩阵，因此，可以确定目标视频广告的每帧图像中的第二类像素点的坐标，其中，可以采用现有技术来确定目标视频广告的每帧图像中的第二类像素点的坐标。

其中，每帧图像中的第二类像素点能够定位该帧图像作为画中画广告的区域，该目标视频广告中的图像帧数与该目标片段的图像帧数相同，该目标视频广告的每帧图像中的第二类像素点与该目标片段的相应帧图像中的第一类像素点的个数相同，且具有一一对应性；并且，目标视频广告的每帧图像中第二类像素点可以通过人工方式确定。

其中，目标视频广告的各帧图像中作为画中画广告的区域可以通过人工方式确定。其中，对于目标视频广告为仅仅包含广告内容的视频而言，根据目标片段的每帧图像中的显示屏所显示的完整程度，该目标视频广告的每帧图像中作为画中画广告的区域可以为整个画面区域或部分画面区域；对于目标视频广告为广告内容已嵌入显示屏的视频片段而言，如果目标片段为各帧图像中均包含显示屏的视频片段，根据目标片段的每帧图像中的显示屏所显示的完整程度，该目标视频广告的每帧图像中作为画中画广告的区域可以为显示有广告内容的整个画面区域或部分画面区域，而如果目标片段为各帧图像中均包含墙面区域的视频片段，该目标视频广告的每帧图像中作为画中画广告的区域可以为显示屏所在的区域，该区域显示有显示屏以及显示屏内部的广告内容。

并且，目标片段的任意一帧图像中的第二类像素点与目标视频广告的相应帧图像中的第二类像素点具有一一对应性。

举例而言，如果第一类像素点为显示屏的画面显示区域的4个顶点处的像素点：在目标视频广告的每帧图像中包含显示屏的情况下，第二类像素点为显示屏内与第一类像素点所定位区域完整程度相匹配的画面显示区域的4个顶点处的像素点，且处于显示屏等同位置的第一类像素点和第二像素点具有对应性，而在目标视频广告的每帧图像未包含显示屏的情况下，第二类像素点为与第一类像素点所定位区域完整程度相匹配的画面显示区域的4个顶点处的像素点，且显示屏内画面显示区域的左上角的第一类像素点和相应画面显示区域的左上角的第二类像素点具有对应性，显示屏内画面显示区域的右上角的第一类像素点和相应画面显示区域的右上角的第二类像素点具有对应性，以此类推。

举例而言，如果第一类像素点为墙面区域中的4个像素点，目标视频广告的每帧图像中第二类像素点为目标视频广告中显示屏外部的4个顶点处的像素点，且墙面区域左上角的第一类像素点和显示屏的左上角的第二类像素点具有对应性，墙面区域右上角的第一类像素点和显示屏的右上角的第二类像素点具有对应性，以此类推。

S103，利用该目标片段的相应帧图像的第一类像素点的坐标和该目标视频广告的相应帧图像的第二类像素点的坐标，分别计算该目标片段的每帧图像各自所对应的透视变化矩阵；

其中，在确定出该目标片段的相应帧图像的第一类像素点的坐标和该目标视频广告的相应帧图像的第二类像素点的坐标后，可以利用该目标片段中相应帧图像的第一类像素点的坐标和该目标视频广告的相应帧图像的第二类像素点的坐标，分别计算该目标片段的每帧图像各自所对应的透视变化矩阵，其中，透视变化矩阵表征该目标片段的该帧图像的第一类像素点的坐标和该目标视频广告的相应帧图像的第二类像素点的坐标的透视变化关系。

为了清楚，后续将以目标片段的每帧图像中存在4个第一类像素点为例，介绍目标片段的每帧图像所对应的透视变化矩阵的计算方式。可以理解的是，当目标片段的每帧图像中存在的第一类像素点的个数不为4个时，也可以参照所给出的该计算方式来计算目标片段的每帧图像所对应的透视变化矩阵。

S104，利用该目标片段的相应帧图像所对应的透视变化矩阵和该目标视频广告的相应帧图像，分别对该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理。

在确定出该目标片段的每帧图像各自所对应的透视变化矩阵后，即确定出了该目标片段的每帧图像的第一类像素点的坐标和该目标视频广告的相应帧图像的第二类像素点的坐标的透视变化关系，此时，可以利用目标片段的每帧图像所对应的透视变化矩阵来表征该目标片段的该帧图像的第一类像素点所定位区域中各个像素点的坐标和该目标视频广告的相应帧图像的第二类像素点所定位区域的各个像素点的坐标的透视变化关系。

基于上述内容，可以利用该目标片段的相应帧图像所对应的透视变化矩阵和该目标视频广告的相应帧图像，分别对该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在该目标视频文件的该目标片段中生成针对于该目标视频广告的画中画广告。

具体的，利用该目标片段的相应帧图像所对应的透视变化矩阵，分别对该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，可以包括：

利用该目标片段的相应帧图像所对应的透视变化矩阵，分别确定该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点所对应的该目标视频广告的相应帧图像中的像素点；

基于所确定出的该目标视频广告相应帧图像中的相应像素点，分别对该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理。

在一种具体实现方式中，所述基于所确定出的该目标视频广告相应帧图像中的相应像素点，分别对该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理，可以包括：

分别将该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：该目标视频广告相应帧图像中的相应像素点的像素值。

在另一种具体实现方式中，为了进一步提高图像平滑性，所述基于所确定出的该目标视频广告相应帧图像中的相应像素点，分别对该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理，可以包括：

分别将该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：该目标视频广告相应帧图像中的相应像素点的至少两个相邻像素点的像素值插值。

其中，该至少两个相邻像素点可以为2个像素点，如上侧像素点和下侧像素点，或者，左侧像素点和右侧像素点；也可以为4个像素点，如上下左右4个像素点，等等。并且，该至少两个相邻像素点的像素值插值为利用现有插值算法对该至少两个相邻像素点的像素值运算后所得到的值，该现有插值算法可以例如：双线性插值。

另外，对于利用像素值差值进行像素值更改时，也可以分别将该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：该目标视频广告相应帧图像中的相应像素点以及至少一个相邻像素点的像素值插值。

本方案中，在生成视频画中画广告时，确定目标片段的每帧图像中的第一类像素点的坐标，每帧图像中第一类像素点能够定位该帧图像中待植入画中画广告的区域；确定目标视频广告的每帧图像中的第二类像素点的坐标，每帧图像中第二类像素点能够定位该帧图像作为画中画广告的区域；利用目标片段的相应帧图像的第一类像素点的坐标和目标视频广告的相应帧图像的第二类像素点的坐标，分别计算目标片段的每帧图像各自所对应的透视变化矩阵；利用目标片段的相应帧图像所对应的透视变化矩阵和目标视频广告的相应帧图像，分别对目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而在目标视频文件的目标片段中生成针对于目标视频广告的画中画广告。可见，通过本方案，可以在视频拍摄完成后生成视频画中画广告，达到视频广告植入效果。

下面列举具体应用实例，对本发明实施例所提供的一种视频画中画广告生成方法进行介绍。

(1)确定目标片段的每帧图像中的4个第一类像素点的坐标；其中，每帧图像中的第一类像素点定位出该帧图像中待植入画中画广告的区域，该目标片段为目标视频文件中的待植入画中画广告的片段；

如图3所示，该目标片段的每帧图像中的4个第一类像素点为待植入画中画广告的四边形区域的四个顶点处的像素点。

(2)确定目标视频广告的每帧图像中的4个第二类像素点的坐标，其中，每帧图像中的第二类像素点能够定位该帧图像作为画中画广告的区域；

如图3所示，该目标视频广告的每帧图像中的4个第二类像素点为作为画中画广告的四边形区域的四个顶点处的像素点。

(3)利用该目标片段的相应帧图像的4个第一类像素点的坐标和该目标视频广告的相应帧图像的4个第二类像素点的坐标，分别计算该目标片段的每帧图像各自所对应的透视变化矩阵；

具体计算方法如下：

假设目标片段的一帧图像和目标视频广告的相应帧图像中的4组像素点的坐标为：第一类像素点(u_i',v_i',1)和第二类像素点(u_i,v_i,1)，i＝1,2,3,4，这4组像素点满足如下方程组：

其中，为第一类像素点的坐标所对应的矩阵，M_s为透视变化矩阵。由上述方程组可以解得到目标片段的该帧图像所对应的透视变化矩阵M_s为：

可以理解的是，目标片段的任意一帧图像所对应的透视变化矩阵的计算方式均可以参照上述所给出的计算方式。

(4)利用该目标片段的相应帧图像所对应的透视变化矩阵和该目标视频广告的相应帧图像，分别对该目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而在该目标视频文件的该目标片段中生成针对于该目标视频广告的画中画广告。

具体的，如图4所示，对目标片段的的某一帧图像中的待植入画中画广告的区域中的一像素点A的透视变化处理过程如下：

基于上述的公式(1)，由于像素点A的坐标(u_i',v_i',1)和该像素点A所在图像的透视变化矩阵M_s已经已知，因此，可得到目标视频广告的相应帧图像中的相应像素点a的坐标(u_i,v_i,1)，并根据(u_i,v_i,1)相邻4个像素点的像素值插值(比如双线性插值)得到该像素点A对应的待更改的像素值，从而将该像素点A的像素值更改为所得到的该待更改的像素值。当然，在确定出目标视频广告的相应帧图像中的相应像素点a的坐标(u_i,v_i,1)，也可以直接将该像素点a的像素值确定为该像素点A对应的待更改的像素值，从而将该像素点A的像素值更改为所得到的该待更改的像素值。

可以理解的是，对任意一帧图像中的待植入画中画广告的区域的各个像素点均可以采用上述的透视变化处理过程来实现透视变化处理，并且，在目标片段的各帧图像中的待植入画中画广告的区域的各个像素点均透视变化处理后，最终完成在该目标片段的生成针对于目标视频广告的画中画广告。

相应于上述方法实施例，本发明实施例还提供了一种视频画中画广告生成装置，如图5所示，可以包括：

第一类像素点坐标确定模块510，用于确定目标片段的每帧图像中的第一类像素点的坐标，其中，每帧图像中的第一类像素点能够定位该帧图像中待植入画中画广告的区域，所述目标片段为目标视频文件中的待植入画中画广告的片段；

第二类像素点坐标确定模块520，用于确定目标视频广告的每帧图像中的第二类像素点的坐标，其中，每帧图像中的第二类像素点能够定位该帧图像作为画中画广告的区域，所述目标视频广告中的图像帧数与所述目标片段的图像帧数相同，所述目标视频广告的每帧图像中的第二类像素点与所述目标片段的相应帧图像中的第一类像素点的个数相同，且具有一一对应性；

透视变化矩阵确定模块530，用于利用所述目标片段的相应帧图像的第一类像素点的坐标和所述目标视频广告的相应帧图像的第二类像素点的坐标，分别计算所述目标片段的每帧图像各自所对应的透视变化矩阵；

透视变化处理模块540，用于利用所述目标片段的相应帧图像所对应的透视变化矩阵和所述目标视频广告的相应帧图像，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在所述目标视频文件的所述目标片段的生成针对于所述目标视频广告的画中画广告。

本方案中，在生成视频画中画广告时，确定目标片段的每帧图像中的第一类像素点的坐标，每帧图像中第一类像素点能够定位该帧图像中待植入画中画广告的区域；确定目标视频广告的每帧图像中的第二类像素点的坐标，每帧图像中第二类像素点能够定位该帧图像作为画中画广告的区域；利用目标片段的相应帧图像的第一类像素点的坐标和目标视频广告中相应帧图像的第二类像素点的坐标，分别计算目标片段的每帧图像各自所对应的透视变化矩阵；利用目标片段的相应帧图像所对应的透视变化矩阵和目标视频广告的相应帧图像，分别对目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在目标视频文件的目标片段的生成针对于目标视频广告的画中画广告。可见，通过本方案，可以在视频拍摄完成后生成视频画中画广告，达到视频广告植入效果。

具体的，所述透视变化处理模块540，可以包括：

像素点确定单元，用于利用所述目标片段的相应帧图像所对应的透视变化矩阵，分别确定所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点所对应的所述目标视频广告的相应帧图像中的像素点；

透视变化处理单元，用于基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理。

在第一种实现方式中，所述透视变化处理单元，具体用于：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的像素值。

在第二种实现方式中，所述透视变化处理单元，具体用于：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的至少两个相邻像素点的像素值插值。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (2)

1.一种视频画中画广告生成方法，其特征在于，包括：

确定目标片段的每帧图像中的第一类像素点的坐标，其中，每帧图像中的第一类像素点能够定位该帧图像中待植入画中画广告的区域，所述目标片段为目标视频文件中的待植入画中画广告的片段；

确定目标视频广告的每帧图像中的第二类像素点的坐标，其中，每帧图像中的第二类像素点能够定位该帧图像作为画中画广告的区域，所述目标视频广告中的图像帧数与所述目标片段的图像帧数相同，所述目标视频广告的每帧图像中的第二类像素点与所述目标片段的相应帧图像中的第一类像素点的个数相同，且具有一一对应性；

利用所述目标片段的相应帧图像的第一类像素点的坐标和所述目标视频广告的相应帧图像的第二类像素点的坐标，分别计算所述目标片段的每帧图像各自所对应的透视变化矩阵；

利用所述目标片段的相应帧图像所对应的透视变化矩阵和所述目标视频广告的相应帧图像，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在所述目标视频文件的所述目标片段中生成针对于所述目标视频广告的画中画广告；

所述利用所述目标片段的相应帧图像所对应的透视变化矩阵，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，包括：

利用所述目标片段的相应帧图像所对应的透视变化矩阵，分别确定所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点所对应的所述目标视频广告的相应帧图像中的像素点；

基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理；

所述基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理，包括：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的至少两个相邻像素点的像素值插值；

其中，利用以下方式确定每一帧目标图像中的第一类像素点：

根据先验知识确定目标图像中包含的平面物体的区域abcd，其中，ba和cd的延长线交于A点，da和cb的延长线交于B点；

在所述区域abcd中任选一点a1作为所述待植入平面图案广告的区域的一个第一类像素点；

在Aa1的延长线上任选一点a2作为所述待植入平面图案广告的区域的另一个第一类像素点；

在Ba1的延长线上选择一点a4作为所述待植入平面图案广告的区域另一个第一类像素点，其中，线段a1a4与线段a1a2的比值等于待植入平面图案广告中的长宽的比值；

将Aa4的延长线与Ba2的延长线的交点a3作为所述待植入平面图案广告的区域的另一个第一类像素点。

2.一种视频画中画广告生成装置，其特征在于，包括：

第一类像素点坐标确定模块，用于确定目标片段的每帧图像中的第一类像素点的坐标，其中，每帧图像中的第一类像素点能够定位该帧图像中待植入画中画广告的区域，所述目标片段为目标视频文件中的待植入画中画广告的片段；

第二类像素点坐标确定模块，用于确定目标视频广告的每帧图像中的第二类像素点的坐标，其中，每帧图像中的第二类像素点能够定位该帧图像作为画中画广告的区域，所述目标视频广告中的图像帧数与所述目标片段的图像帧数相同，所述目标视频广告的每帧图像中的第二类像素点与所述目标片段的相应帧图像中的第一类像素点的个数相同，且具有一一对应性；

透视变化矩阵确定模块，用于利用所述目标片段的相应帧图像的第一类像素点的坐标和所述目标视频广告的相应帧图像的第二类像素点的坐标，分别计算所述目标片段的每帧图像各自所对应的透视变化矩阵；

透视变化处理模块，用于利用所述目标片段的相应帧图像所对应的透视变化矩阵和所述目标视频广告的相应帧图像，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点进行透视变化处理，从而实现在所述目标视频文件的所述目标片段中生成针对于所述目标视频广告的画中画广告；

所述透视变化处理模块，包括：

像素点确定单元，用于利用所述目标片段的相应帧图像所对应的透视变化矩阵，分别确定所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点所对应的所述目标视频广告的相应帧图像中的像素点；

透视变化处理单元，用于基于所确定出的所述目标视频广告相应帧图像中的相应像素点，分别对所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值进行调整处理；

所述透视变化处理单元，具体用于：

分别将所述目标片段的每帧图像的待植入画中画广告的区域中的各个像素点的像素值更改为：所述目标视频广告相应帧图像中的相应像素点的至少两个相邻像素点的像素值插值；

其中，第一类像素点坐标确定模块，具体用于利用以下方式确定每一帧目标图像中的第一类像素点：

根据先验知识确定目标图像中包含的平面物体的区域abcd，其中，ba和cd的延长线交于A点，da和cb的延长线交于B点；

在所述区域abcd中任选一点a1作为所述待植入平面图案广告的区域的一个第一类像素点；

在Aa1的延长线上任选一点a2作为所述待植入平面图案广告的区域的另一个第一类像素点；

在Ba1的延长线上选择一点a4作为所述待植入平面图案广告的区域另一个第一类像素点，其中，线段a1a4与线段a1a2的比值等于待植入平面图案广告中的长宽的比值；

将Aa4的延长线与Ba2的延长线的交点a3作为所述待植入平面图案广告的区域的另一个第一类像素点。