CN110880120A - 一种广告方法和广告系统以及识别装置 - Google Patents

Abstract

本发明公开了一种广告方法和系统、以及识别装置。其中，广告方法包括步骤：从视频流中提取至少一个视频帧；对所提取的视频帧进行识别处理，以确定在该视频流中待插入的广告元素属性；根据所确定的广告元素属性从广告资源集合中匹配出至少一个广告资源；以及将至少一个广告资源及视频流推送至客户端上进行播放。本发明还一并公开了相应的计算设备。

Description

一种广告方法和广告系统以及识别装置

技术领域

本发明涉及视频处理技术领域，尤其是一种广告方法和广告系统以及识别装置。

背景技术

随着互联网和移动终端等技术的发展，广告成为各种应用软件以及网站必不可少的部分，在用户浏览网页、观看视频等过程中投放相应的广告资源已经成为一种趋势。

在进行广告资源分配时，一种方式是：系统提供每天的广告时间段供各个业务方(广告客户)申请，申请完毕后按照申请的结果进行广告分配。例如在某段视频之前或之后可插入预定时长的广告、在某个时刻可插入预定类型的广告等，系统根据业务方的申请插入相应的广告资源。但这种方式比较单一，只能在固定时刻观看固定广告，而且缺乏用户的交互。这样，用户只能被动接受广告，甚至用户会见惯不怪，这就降低了广告投放的效果。另一种方式是：基于视频和网站用户的浏览行为、cookie中的特殊标记等为其分配相应的广告资源。但这种方式可能会出现插入的广告与视频、网站内容、风格等不匹配的情况，插入的广告像“牛皮癣”一样贴在视频内容中，给用户一种莫名其妙的感觉。

鉴于上述弊端，需要一种能够兼顾视频内容和视觉效果的方案，使得插入视频流中的广告达到最佳视觉和投放效果。

发明内容

为此，本发明提供了一种广告方法和广告系统，以力图解决或者至少缓解上面存在的至少一个问题。

根据本发明的一个方面，提供了一种广告方法，包括步骤：从视频流中提取至少一个视频帧；对所提取的视频帧进行识别处理，以确定在该视频流中待插入的广告元素属性；根据所确定的广告元素属性从广告资源集合中匹配出至少一个广告资源；以及将至少一个广告资源及视频流推送至客户端上进行播放。

可选地，在根据本发明的方法中，从视频流中提取至少一个视频帧的步骤还包括：判断该视频流是否配置有广告信息；若确定该视频流配置有广告信息，则从视频流中提取至少一个视频帧。

可选地，在根据本发明的方法中，对所提取的视频帧进行识别处理，以确定在该视频流中待插入的广告元素属性的步骤包括：对所提取的视频帧进行识别处理，以得到该视频流的至少一个特征；以及根据至少一个特征确定在该视频流中待插入的广告元素属性。

可选地，在根据本发明的方法中，判断视频流是否配置有广告信息的步骤还包括：在确定视频流配置有广告信息时，获取该视频流对应的广告信息。

可选地，在根据本发明的方法中，对所提取的视频帧进行识别处理，以确定在该视频流中待插入的广告元素属性的步骤包括：对所提取的视频帧进行识别处理，以得到该视频流的至少一个特征；以及根据至少一个特征和该视频流的广告信息来确定在该视频流中待插入的广告元素属性。

可选地，在根据本发明的方法中，根据至少一个特征确定在该视频流中待插入的广告元素属性的步骤还包括：根据至少一个特征和广告信息确定该视频流的至少一个广告位置。

可选地，在根据本发明的方法中，将至少一个广告资源及视频流推送至客户端上进行播放的步骤包括：将至少一个广告资源对应置入所确定的视频流的广告位置中，并推送至客户端上进行播放。

可选地，在根据本发明的方法中，对所提取的视频帧进行识别处理、以得到视频流的至少一个特征的步骤还包括：对所提取的视频帧进行目标检测处理，以得到视频帧中的至少一个目标，作为视频流的至少一个特征。

可选地，在根据本发明的方法中，广告信息包括以下信息中的一种或多种：允许插入广告的位置、每个位置上允许插入的广告尺寸、每个位置上允许插入的广告类型和广告属性。

根据本发明的另一方面，提供了一种识别装置，包括：判断单元，适于判断该视频流是否配置有广告信息；以及识别单元，适于在该视频流配置有广告信息时，对视频流进行识别处理来确定在该视频流中待插入的广告元素属性。

可选地，在根据本发明的识别装置中，识别单元还适于获取该视频流对应的广告信息，并对所提取的视频帧进行识别处理、以得到该视频流的至少一个特征；还适于根据至少一个特征和该视频流的广告信息来确定在该视频流中待插入的广告元素属性。

可选地，在根据本发明的识别装置中，识别单元还适于根据至少一个特征和广告信息来确定该视频流的至少一个广告位置。

根据本发明的再一方面，提供了一种广告系统，包括：第一客户端，适于将视频流推送到识别装置，其中该视频流中包含用于指示该视频流是否配置有广告信息的标识位；如上所述的识别装置，适于将该视频流和识别出待插入的广告元素属性发送给转码装置；以及转码装置，适于根据广告元素属性从广告资源集合中匹配出至少一个广告资源，并将匹配出的广告资源置入视频流中，一并推送至第二客户端上播放插入广告的视频流。

可选地，在根据本发明的系统中，第一客户端还适于预先配置视频流的广告信息；该系统还包括存储装置，适于存储第一客户端预先配置的广告信息。

可选地，在根据本发明的系统中，转码装置还适于将至少一个广告资源对应置入所确定的视频流的广告位置中，并推送至第二客户端。

可选地，在根据本发明的系统中，广告信息包括以下信息中的一种或多种：允许插入广告的位置、每个位置上允许插入的广告尺寸、每个位置上允许插入的广告类型和广告属性。

可选地，在根据本发明的系统中，还包括计费装置，适于统计广告在各第二客户端上的记录数据，以便于费用结算。

可选地，在根据本发明的系统中，记录数据包括广告被展现次数和广告被点击次数。

根据本发明的再一方面，提供了一种计算设备，包括：至少一个处理器；和存储有程序指令的存储器，其中，程序指令被配置为适于由至少一个处理器执行，程序指令包括用于执行如上所述方法的指令。

根据本发明的广告方法，通过识别视频流的一些特征来确认该视频流中待插入的广告元素属性，然后从广告资源库中匹配出符合广告元素属性的广告资源并插入到该视频流中。这样，插入视频流的广告就很好地考虑了视频流本身的内容特征(如目标物体特征、颜色特征)，提升了观众在观看视频流时的视觉体验。进一步地，在推流之前还会预先配置该视频流的广告信息，在识别过程中，可以结合预先配置的广告信息和识别出的特征来确认待插入的广告元素属性，以加强插入广告与视频本身内容的切合度，使得插入广告后的视频流具有很好地投放效果。

附图说明

为了实现上述以及相关目的，本文结合下面的描述和附图来描述某些说明性方面，这些方面指示了可以实践本文所公开的原理的各种方式，并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述，本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开，相同的附图标记通常指代相同的部件或元素。

图1示出了根据本发明一个实施例的广告系统100的示意图；

图2示出了根据本发明又一个实施例的系统100的示意图；

图3示出了根据本发明一个实施例的计算设备300的示意图；

图4示出了根据本发明一个实施例的广告方法400的流程图；以及

图5示出了根据本发明一个实施例的视频帧示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

图1示出了根据本发明一个实施例的广告系统100的示意图。概括来讲，系统100基于人工智能识别技术，对待插入广告的视频流进行识别分析、为其匹配到最佳的广告资源，进而将匹配到的广告资源插入该视频流中，得到被插入广告的视频流，以便在用户端播放。

以下将结合图1，对系统100的各组成部分进行一一介绍。

如图1所示，系统100中的各组成部分通过网络相连，系统100至少包括：第一客户端110、识别装置120和转码装置130(在根据本发明的实施方式中，识别装置120和转码装置130分别被配置为通过识别服务器120和转码服务器130来实现，如图1)。其中识别服务器120分别与第一客户端110和转码服务器130相连。在一种实施方式中，第一客户端110将视频流推送给识别服务器120。识别服务器120对视频流进行识别处理，从而确定在该视频流中待插入的广告元素属性。转码服务器130再根据所确定的广告元素属性为该视频流匹配到至少一个广告资源，并将匹配到的广告资源写入该视频流中，此时得到的视频流就是插入广告的视频流。

在根据本发明的另一些实施方式中，除了第一客户端110、识别服务器120和转码服务器130外，系统100还可以包括视频处理中心140和第二客户端150、存储装置160和计费装置170(在根据本发明的实施方式中，存储装置160和计费装置170分别被配置为通过存储服务器160和计费服务器170来实现，如图1)。在一种实施例中，视频流通过转码服务器130推送给第二客户端150，以便在第二客户端150上进行播放。在另一种实施例中，视频处理中心140分别与识别服务器120、转码服务器130、以及第二客户端150相连，通过食品处理中心140将来自识别服务器120的视频流或来自转码服务器130的插入广告后的视频流推送给第二客户端150。第二客户端150用来播放视频处理中心140推送的视频流。另一方面，存储服务器160分别与第一客户端110和识别服务器120相连，用来存储第一客户端110上预先配置的广告信息。取决于期望的配置，系统100还可以包含计费装置170(例如被配置为通过计费服务器170来实现)，与第二客户端150相连，用来统计各广告资源在第二客户端150上的记录数据，以便于后期进行广告费用的结算。

需要说明的是，图1仅是示例性的，本发明对系统100中各组成部分(如第一客户端110和第二客户端150)的数量均不作限制。另外，第一客户端110和第二客户端150可以通过布置相应的客户端应用来推送、播放视频流，本发明的实施例对此不做限制。

根据本发明的实施例，第一客户端110可以由一个或多个计算设备(或便携式计算设备)来实现，通过在第一客户端110上布置相应的应用来实现以下功能。第一客户端110将视频流推送到识别服务器120。在一种优选的实施例中，在推流之前，可以在第一客户端110上预先设置视频流的广告信息。换句话说，在第一客户端110上预先配置视频流上允许插入的广告信息，再推送该视频流。广告信息可以包括以下信息中的一种或多种：在视频流中允许插入广告的位置、每个位置上允许插入的广告尺寸、每个位置上允许插入的广告类型和广告属性。其中，广告类型例如可以根据不同的内容划分为商品广告、企业广告、服务广告和观念广告等，也可以根据表现艺术形式的不同划分为图片广告、文字广告、视频性广告等，系统100可根据应用场景具体设置，此处不做过多限制。在根据本发明的一个实施例中，广告类型指广告付费类型，如CPC(Cost Per Click，每点击成本)、CPM(Cost Per Mille，每千人成本)等；广告属性包括关键词属性、风格属性(如场景的匹配、产品的颜色等)、适应人群属性、平台推荐属性等。应当指出，关于广告信息的配置不限于此——例如，若A平台与B品牌有独家广告协议等排他性属性，则在A平台上布置的系统100中需要提前配置其广告属性：非B品牌不可见；又如，在一些青少年关注度高的视频流中，其广告属性可以配置为：限制插入奢侈品等高消费的广告，以避免对青少年产生误导；篇幅所限，此处不再一一展开列举。本领域技术人员可根据实际场景设置相应的广告信息。同时，在视频流中设置标识位，用于指示该视频流是否配置有广告信息。根据一种实施例，若视频流中已配置了上述广告信息，则标识位置1；若视频流中未配置广告信息，则标识位置0。

根据本发明的实施方式，在配置好广告信息后，第一客户端110将配置好的广告信息同步到存储服务器160上，存储服务器160关联存储视频流和对应的广告信息。优选地，每个视频流具有唯一标识符，存储服务器160关联存储视频流的唯一标识符和该视频流预先配置的广告信息。

识别服务器120可以由多个服务器或单个服务器构成。根据本发明的实施方式，识别服务器120包括判断单元122和识别单元124。判断单元122判断来自第一客户端110的视频流是否配置有广告信息，如前文所述，判断单元122可以根据标识位来判断该视频流中是否配置有广告信息。根据本发明的实施方式，若经判断确认该视频流中没有配置广告信息，则直接将该视频流推送到视频处理中心140，再经视频处理中心140转发给第二客户端150，由第二客户端150播放该视频流；若经判断确认该视频流中配置有广告信息，则通知识别单元124，由识别单元124对该视频流进行识别处理来确定在该视频流中待插入的广告元素属性。根据本发明的实施方式，对于实时直播的视频流，识别单元124从该视频流中提取至少一个视频帧(通常是从当前帧开始，提取前几帧)，而后识别单元124对所提取的视频帧进行识别处理，以得到该视频流的至少一个特征。对于非实时播放的视频流，识别单元124可以预先对整个视频流(即，提取视频流中的所有视频帧)进行识别分析，来得到该视频流的至少一个特征。根据一种实施例，对所提取的视频帧进行目标检测处理，以得到视频帧中的至少一个目标，作为视频流的至少一个特征。关于目标检测算法，可以采用传统的图像处理算法(如边缘检测、滤波处理等)来检测视频帧中出现的目标，也可以采用基于深度学习的方法(如R-CNN、YOLO模型等)来检测视频帧中出现的目标，本发明的实施例不限于此，任何目标检测算法均可以与本发明的实施例相结合，来实现本发明的在视频流中插入广告的方法。在根据本发明的又一些实施例中，目标检测处理还包括字体识别。在根据本发明的另一些实施例中，还可以通过目标检测识别来确认视频流所指向的场景类型(如根据识别出的目标的类别及各目标的布局位置来推断视频内容和场景类型)，在根据本发明的实施例中，场景类型一般包括游戏类、赛事类、秀场类、户外类、教育类等。如图5示出了根据本发明一个实施例的视频帧示意图，经过目标检测处理，至少可以得到该视频帧中的至少一个特征：米色桌子一张、年轻男性一个。另外，还可以得出该视频流指向的场景类型是教育类，且进一步通过字体识别及场景类型得出该视频内容指向新闻类节目。接下来，根据识别出的这至少一个特征就可以确定在该视频流中待插入的广告元素属性。

在根据本发明的另一些实施例中，若经判断确认该视频流中配置有广告信息，则识别单元124还可以从存储服务器160处获取该视频流对应的广告信息。如前文所述，根据该视频流的唯一标识符从存储服务器160中获取与唯一标识符相关联的广告信息。如图5中用矩形框示出了该视频流中预先配置的8个允许插入广告的位置及每个位置上允许插入广告的尺寸。综上所述，以图5为例，识别单元124获取到的特征和广告信息至少包括：新闻类节目、场景类型是教育类、有一张米色桌子、一个年轻男性、还有8个允许插入广告的位置。接下来识别单元124根据所获取到的至少一个特征和广告信息来确定在该视频流中待插入的广告元素属性。根据本发明的实施方式，确定待插入广告的广告元素属性的方式包括但不限于：待插入广告的颜色与识别出的物体的颜色(如米色的桌子)、属性(年轻男性)等相匹配，待插入广告的属性与识别出的场景类型(如教育类型的新闻节目)相匹配，待插入广告的素材宽高比与预先配置的广告位置的尺寸相匹配，待插入广告的属性应当与预先配置的广告信息相匹配，等等。

此外，识别单元124还可以根据获取到的特征和广告信息来确定该视频流的至少一个广告位置。具体地，识别单元124综合考虑上述获取到的特征和广告信息，从预先配置的诸多广告位置中筛选出一个或多个，作为最合适的广告位置，供插入广告。

至此，识别单元124通过对视频帧的处理，确定出在该视频帧中待插入的广告元素属性及至少一个广告位置，识别单元124将所确定的信息连同该视频流一并转发至转码服务器130，由转码服务器130根据广告元素属性从广告资源集合中匹配出至少一个广告资源，并将该广告资源置入所确定至少一个广告位置中，得到插入广告后的视频流。在根据本发明的实施例中，转码服务器130可以从广告资源集合中匹配出一个最佳的广告资源，将其写入所确定的每个广告位置中，使视频流中只展现一个广告；当然，转码服务器130也可以为所确定的每个广告位置都匹配一个广告资源，使视频流中展现不同的广告，本发明的实施例对此不做限制。应当指出，广告资源集合中存储了各种广告资源，它可以布置在转码服务器130中，作为转码服务器130上的一部分；也可以通过在系统100中布置相应的资源服务器(未示出)，用来存储所有的广告资源，形成广告资源集合；广告资源集合还可以来自第三方服务，例如由专门的广告方提供。本发明的实施例对此不做过多限制。

转码服务器130将插入广告后的视频流推送至视频处理中心140，经视频处理中心140转发给第二客户端150，由第二客户端150播放插入广告的视频流。

根据又一种实施方式，系统100中计费服务器170与第二客户端150相连，用于统计各广告在第二客户端150上的记录数据，以便于费用结算。根据一个实施例，广告付费类型为CPM+CPC，故计费服务器170获取各广告在第二客户端150上被展现的次数和被点击的次数，作为该广告的记录数据，以便于后期根据记录数据来结算费用。

根据本发明的广告系统100，一方面第一客户端110可以在推流之前预先配置视频流的广告信息，另一方面识别服务器120通过对视频流进行识别处理来获取该视频流的一些特征，并在综合考虑了所获取的特征和广告信息后，确定出视频流中待插入的广告元素属性。转码服务器130根据广告元素属性匹配出合适的广告资源并插入视频流中。这样，插入视频流的广告充分考虑了视频流的内容和场景类型，提升了广告与视频本身内容的切合度，使得插入广告后的视频流达到最佳视觉和投放效果。系统100可以被应用于各种视频流播放的场景中，如网络直播、视频点播回看等，来为视频流插入相匹配的广告。根据本发明的一种实施方式，系统100被布置在视频直播场景中，用于实现在直播视频流中插入广告。如图2，示出了根据本发明又一个实施例的在视频直播场景中的广告系统100的示意图。如图2所示，第一客户端110被实现为主播端110，第二客户端150被实现为用户端150，可以从直播网络中选取一个或多个CDN(内容分发网络)边缘节点布置成识别服务器120和存储服务器160、以及存储广告资源集合的资源服务器180(应当指出，本发明的实施例不限于此，存储服务器160和资源服务器180也可以由CDN之外的其他平台或系统提供，通过CDN边缘节点进行通信，如，资源服务器180可以是广告公司的服务器，直播网络中的CDN边缘节点可以对其进行访问并缓存使用)。此外，视频处理中心140被实现为CDN直播中心源站140，可以接受并存储直播音视频流。为缩短用户访问直播音视频流推流的时延，由CDN直播中心源站140将直播音视频流下发到各CDN边缘节点，用户端150就近向各CDN边缘节点拉取直播音视频流用来播放。转码服务器130可以采用直播网络中原有的直播转码服务器，也可以配置一个新的服务器来实现转码服务器130的上述功能，图2中为简化描述，仅示出了一个提供视频转码服务的转码服务器130。

根据图2示出的系统100，主播端110可以通过直播网络自带的推流工具(如OBS推流软件)进行直播推流，将直播视频流推送到附近的CDN边缘节点，即识别服务器120上。根据一种实施方式，主播端110在推流之前，会预先配置该直播视频流的广告信息。广告信息包括以下信息中的一种或多种：允许插入广告的位置、每个位置上允许插入的广告尺寸、每个位置上允许插入的广告类型和广告属性等。根据本发明的实施例，主播可以根据节目内容、主播风格和观众群的特征等在主播端110上配置允许插入的广告信息；平台也可以通过一些限制投放的规定来指导主播在主播端110上配置允许插入的广告信息。关于广告信息的进一步内容可参考前文关于广告信息的描述，此处不再赘述。在直播视频流中包含标识位，用来指示该直播视频流是否配置广告信息。同时，在配置了广告信息后，主播端110会将预先配置的广告信息同步到存储服务器160，由其关联存储直播视频流的唯一标识符和预先配置的广告信息。

识别服务器120在接收到来自主播端110的直播视频流时，先根据上述的标识位来判断直播视频流是否配置广告信息。若经判断确认该直播视频流中没有配置广告信息，则识别服务器120直接将该直播视频流推送到CDN直播中心源站140，再经CDN直播中心源站140转发给用户端150，观众可以在用户端150上观看该直播视频流。若经判断确认该直播视频流中配置有广告信息，则识别服务器120对该直播视频流进行识别处理来确定在该直播视频流中待插入的广告元素属性。

根据本发明的一种实施方式，识别服务器120可以通过识别直播视频流中的一些特征来确定待插入该直播视频流的广告元素属性。在一种实施例中，从该直播视频流中提取预定数量的视频帧(通常是从当前帧开始，提取前几帧)，对这预定数量的视频帧进行识别处理，以得到该直播视频流的至少一个特征。例如，对所提取的视频帧进行目标检测处理，以得到视频帧中的至少一个目标，作为视频流的至少一个特征。通过识别处理得到直播视频流的至少一个特征的具体处理过程可以参考前文关于目标检测处理的相关描述，此处不再赘述。应当指出，在根据本发明的实施例中，可以根据当前的应用场景选取合适的算法来提取视频流中的至少一个特征，以此来确认与提取出的特征相匹配的广告元素属性。例如，可以识别出视频帧中的目标的颜色，作为一个特征；然后设置待插入广告的颜色要与目标的颜色相一致，将其作为一个广告元素属性。还可以通过识别目标物体的位置来推断当前直播视频流的场景类型，作为一个特征；若推断场景类型是秀场类，则设置待插入的广告元素属性是与时尚相关。根据本发明的再一种实施方式，识别服务器120在通过识别得到直播视频流中的一些特征的同时，还可以从存储服务器160处获取该直播视频流对应的广告信息，然后结合所获取的特征和广告信息来确定待插入该直播视频流的广告元素属性。关于本部分内容可以参考前文对于识别单元124及图5的相关描述，此处不做展开赘述。根据本发明的又一种实施方式，识别服务器120还可以根据上述获取到的特征和广告信息来确定出直播视频流的至少一个广告位置。具体地，从所获取的允许插入广告的位置中筛选出一个最佳广告位置，或者是至少一个合适的广告位置。当然，在一段直播视频流中可以允许插入不止一个广告，可以筛选出多个广告位置，以便展现不同的广告资源。

识别服务器120将所确定的广告元素属性、广告位置等信息连同该直播视频流一并转发至转码服务器130。转码服务器130根据广告元素属性从资源服务器180中匹配出至少一个广告资源，并将该广告资源置入对应的广告位置中，得到插入广告后的直播视频流。而后，转码服务器130将插入广告后的直播视频流推送至CDN直播中心源站140，经CDN直播中心源站140转发给各CDN边缘节点，用户端150通过就近访问CDN边缘节点来播放插入广告的直播视频流。

根据再一种实施方式，计费服务器170分别与用户端150和主播端110相连。一方面统计各广告在用户端150上的记录数据，记录数据包括各广告在用户端150上被展现的次数和/或被点击的次数，另一方面将各广告的记录数据与各主播端110相关联，以便于统计各主播的贡献值，并反馈相应的奖励给主播端110。

根据本发明的实施方式，系统100中的各组成部分，如识别服务器120、转码服务器130、第一客户端110和第二客户端150等均可以通过如下所述的计算设备300来实现。图3示出了根据本发明一个实施例的计算设备300的示意图。

如图3所示，在基本的配置302中，计算设备300典型地包括系统存储器306和一个或者多个处理器304。存储器总线308可以用于在处理器304和系统存储器306之间的通信。

取决于期望的配置，处理器304可以是任何类型的处理，包括但不限于：微处理器(μP)、微控制器(μC)、数字信息处理器(DSP)或者它们的任何组合。处理器304可以包括诸如一级高速缓存310和二级高速缓存312之类的一个或者多个级别的高速缓存、处理器核心314和寄存器316。示例的处理器核心314可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器318可以与处理器304一起使用，或者在一些实现中，存储器控制器318可以是处理器304的一个内部部分。

取决于期望的配置，系统存储器306可以是任意类型的存储器，包括但不限于：易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。系统存储器306可以包括操作系统320、一个或者多个应用322以及程序数据324。在一些实施方式中，应用322可以布置为在操作系统上由一个或多个处理器304利用程序数据324执行指令。

计算设备300还可以包括有助于从各种接口设备(例如，输出设备342、外设接口344和通信设备346)到基本配置302经由总线/接口控制器330的通信的接口总线340。示例的输出设备342包括图形处理单元348和音频处理单元350。它们可以被配置为有助于经由一个或者多个A/V端口352与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口344可以包括串行接口控制器354和并行接口控制器356，它们可以被配置为有助于经由一个或者多个I/O端口358和诸如输入设备(例如，键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备346可以包括网络控制器360，其可以被布置为便于经由一个或者多个通信端口364与一个或者多个其他计算设备362通过网络通信链路的通信。

网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块，并且可以包括任何信息递送介质。“调制数据信号”可以是这样的信号，它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例，通信介质可以包括诸如有线网络或者专线网络之类的有线介质，以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。

计算设备300可以实现为服务器，例如文件服务器、数据库服务器、应用程序服务器和WEB服务器等，也可以实现为包括桌面计算机和笔记本计算机配置的个人计算机。当然，计算设备300还可以实现为小尺寸便携(或者移动)电子设备，如手机、平板等。在根据本发明的实施例中，计算设备300被实现为识别服务器、转码服务器、存储服务器、客户端等等，并被配置为执行根据本发明的广告方法400。其中，计算设备300的应用322中包含执行根据本发明的广告方法400的多条程序指令，而程序数据324还可以存储广告信息、广告资源等数据。

图4示出了根据本发明一个实施例的广告方法400的流程图。方法400在上述广告系统100中执行，以下将结合图4及前文描述，对方法400的执行过程加以描述。如图4所示，方法400始于步骤S410。

在步骤S410中，从视频流中提取至少一个视频帧。

根据本发明的实施方式，识别服务器120先判断来自第一客户端110的视频流是否配置有广告信息，并在经判断确定该视频流中配置有广告信息时，从该视频流中提取至少一个视频帧。在根据本发明的一些实施例中，第一客户端110在推流之前，会预先配置视频流的广告信息，并将配置的广告信息同步到存储服务器160上。这样，识别服务器120在确定接收到的视频流有配置广告信息时，还会从存储服务器160上获取该视频流对应的广告信息。根据一种实施例，广告信息包括以下信息中的一种或多种：允许插入广告的位置、每个位置上允许插入的广告尺寸、每个位置上允许插入的广告类型和广告属性等等。

根据一种实施方式，若经判断确定该视频流中没有配置广告信息，则直接执行步骤S440，将该视频流推送至视频处理中心140。

随后在步骤S420中，识别服务器120对所提取的视频帧进行识别处理，以确定在该视频流中待插入广告的广告元素属性。

根据一种实施方式，对所提取的视频帧进行识别处理，以得到该视频流的至少一个特征，然后根据所得到的特征确定在该视频流中待插入广告的广告元素属性。在一个优选的实施例中，对所提取的视频帧进行识别处理、以得到视频流的至少一个特征的步骤包括：对所提取的视频帧进行目标检测处理，以得到视频帧中的至少一个目标，作为视频流的至少一个特征。根据又一种实施方式，对所提取的视频帧进行识别处理，以得到该视频流的至少一个特征，然后结合这至少一个特征和该视频流的广告信息来确定在该视频流中待插入的广告元素属性。根据再一种实施方式，根据所获取的特征和该视频流的广告信息还可以确定该视频流的至少一个广告位置。

随后识别服务器120将所确定的广告元素属性连同视频流一并传送给转码服务器130，在步骤S430中，转码服务器130根据所确定的广告元素属性从广告资源集合中匹配出至少一个广告资源。

根据一种优选的实施方式，识别服务器120还会将所确定的广告位置一并传送给转码服务器130。

随后在步骤S440中，转码服务器130将至少一个广告资源及该视频流一并推送至第二客户端150上进行播放。在一种优先的实施例中，转码服务器130将至少一个广告资源及该视频流推送至视频处理中心140，由视频处理中心140将其传送到第二客户端150上进行播放。

根据本发明的一种实施方式，转码服务器130将匹配出的至少一个广告资源对应写入所确定的视频流的广告位置中，并推送至视频处理中心140。

需要说明的是，方法400执行过程中的一些细节在前文关于图1、图2的说明中已经进行了详细地阐述，相关内容可参考前文描述，篇幅所限，此处不再进行一一阐述。

根据本发明的广告方案，通过识别视频流的一些特征来确认该视频流中待插入的广告元素属性，然后从广告资源库中匹配出符合广告元素属性的广告资源并插入到该视频流中。这样，插入视频流的广告就很好地考虑了视频流本身的内容特征(如目标物体特征、颜色特征)，提升了观众在观看视频流时的视觉体验。进一步地，在推流之前还会预先配置该视频流的广告信息，在识别过程中，可以结合预先配置的广告信息和识别出的特征来确认待插入的广告元素属性，以加强插入广告与视频本身内容的切合度，使得插入广告后的视频流具有很好地投放效果。

应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中，或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

此外，所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此，具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外，装置实施例的在此所述的元素是如下装置的例子：该装置用于实施由为了实施该发明的目的的元素所执行的功能。

如在此所使用的那样，除非另行规定，使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例，并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。

尽管根据有限数量的实施例描述了本发明，但是受益于上面的描述，本技术领域内的技术人员明白，在由此描述的本发明的范围内，可以设想其它实施例。此外，应当注意，本说明书中使用的语言主要是为了可读性和教导的目的而选择的，而不是为了解释或者限定本发明的主题而选择的。因此，在不偏离所附权利要求书的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围，对本发明所做的公开是说明性的，而非限制性的，本发明的范围由所附权利要求书限定。

Claims (19)

1.一种广告方法，所述方法包括步骤：

从视频流中提取至少一个视频帧；

对所提取的视频帧进行识别处理，以确定在该视频流中待插入的广告元素属性；

根据所确定的广告元素属性从广告资源集合中匹配出至少一个广告资源；以及

将所述至少一个广告资源及所述视频流推送至客户端上进行播放。

2.如权利要求1所述的方法，其中，所述从视频流中提取至少一个视频帧的步骤还包括：

判断所述视频流是否配置有广告信息；

若确定所述视频流配置有广告信息，则从所述视频流中提取至少一个视频帧。

3.如权利要求1或2所述的方法，其中，所述对所提取的视频帧进行识别处理，以确定在该视频流中待插入的广告元素属性的步骤包括：

对所提取的视频帧进行识别处理，以得到所述视频流的至少一个特征；以及

根据所述至少一个特征确定在该视频流中待插入的广告元素属性。

4.如权利要求2或3所述的方法，其中，判断所述视频流是否配置有广告信息的步骤还包括：

在确定所述视频流配置有广告信息时，获取该视频流对应的广告信息。

5.如权利要求4所述的方法，其中，所述对所提取的视频帧进行识别处理，以确定在该视频流中待插入的广告元素属性的步骤包括：

对所提取的视频帧进行识别处理，以得到所述视频流的至少一个特征；以及

根据所述至少一个特征和该视频流的广告信息来确定在该视频流中待插入的广告元素属性。

6.如权利要求4或5所述的方法，其中，所述根据至少一个特征确定在该视频流中待插入的广告元素属性的步骤还包括：

根据所述至少一个特征和所述广告信息确定所述视频流的至少一个广告位置。

7.如权利要求6所述的方法，其中，所述将至少一个广告资源及视频流推送至客户端上进行播放的步骤包括：

将所述至少一个广告资源对应置入所确定的视频流的广告位置中，并推送至客户端上进行播放。

8.如权利要求3-7中任一项所述的方法，其中，所述对所提取的视频帧进行识别处理、以得到视频流的至少一个特征的步骤还包括：

对所提取的视频帧进行目标检测处理，以得到视频帧中的至少一个目标，作为视频流的至少一个特征。

9.如权利要求1-8中任一项所述的方法，其中，所述广告信息包括以下信息中的一种或多种：允许插入广告的位置、每个位置上允许插入的广告尺寸、每个位置上允许插入的广告类型和广告属性。

10.一种识别装置，包括：

判断单元，适于判断视频流是否配置有广告信息；以及

识别单元，适于在所述视频流配置有广告信息时，对所述视频流进行识别处理来确定在该视频流中待插入的广告元素属性。

11.如权利要求10所述的识别装置，其中，

所述识别单元还适于获取该视频流对应的所述广告信息，并对所提取的视频帧进行识别处理、以得到所述视频流的至少一个特征；还适于根据所述至少一个特征和该视频流的广告信息来确定在该视频流中待插入的广告元素属性。

12.如权利要求11所述识别装置，其中，

所述识别单元还适于根据所述至少一个特征和所述广告信息来确定所述视频流的至少一个广告位置。

13.一种广告系统，包括：

第一客户端，适于将视频流推送到识别装置，其中所述视频流中包含用于指示该视频流是否配置有广告信息的标识位；

如权利要求10-12中任一项所述的识别装置，适于将所述视频流和识别出待插入的广告元素属性发送给转码装置；以及

转码装置，适于根据所述广告元素属性从广告资源集合中匹配出至少一个广告资源，并将所匹配出的广告资源置入所述视频流中，推送至第二客户端上播放插入广告的所述视频流。

14.如权利要求13所述的系统，其中，

所述第一客户端还适于预先配置所述视频流的广告信息；

所述系统还包括存储装置，适于存储所述第一客户端预先配置的广告信息。

15.如权利要求15所述的系统，其中，

所述转码装置还适于将所述至少一个广告资源对应置入所确定的视频流的广告位置中，并推送至第二客户端。

16.如权利要求13-15中任一项所述的系统，其中，所述广告信息包括以下信息中的一种或多种：允许插入广告的位置、每个位置上允许插入的广告尺寸、每个位置上允许插入的广告类型和广告属性。

17.如权利要求13-16中任一项所述的系统，还包括：

计费装置，适于统计广告在各第二客户端上的记录数据，以便于费用结算。

18.如权利要求17所述的系统，其中，所述记录数据包括广告被展现次数和广告被点击次数。

19.一种计算设备，包括：

至少一个处理器；和

存储有程序指令的存储器，其中，所述程序指令被配置为适于由所述至少一个处理器执行，所述程序指令包括用于执行如权利要求1-9中任一项所述方法的指令。

Images