CN107845142A - 一种网络三维虚拟广告的自动生成及互动方法和系统 - Google Patents

Abstract

本发明公开了一种网络三维虚拟广告的自动生成及互动方法及系统，该方法包括：采集商品信息，对其分类并建立索引与商品信息数据表，并根据商品信息与预存三维模型的对应关系，生成分类匹配结果；实时监控并接收用户的反馈信息，产生互动模式指令；根据所述互动模式指令以及所述分类匹配结果，对相应的商品进行三维虚拟化处理，生成包含操作动作的文件模板，每个所述文件模板构成一条广告条目；根据用户反馈的对所述操作动作的提示确认信息，将视频采集设备实时采集的用户操作动作视频和所述广告条目进行混叠和渲染处理，形成完整的三维虚拟广告视频，再通过网络进行直播，完成广告内容上的互动。

Description

一种网络三维虚拟广告的自动生成及互动方法和系统

技术领域

本发明涉及互联网广告领域，具体涉及一种网络三维虚拟广告的自动生成及互动方法和系统。

背景技术

近年来，伴随着互联网的发展，网络广告迅速兴起并快速发展起来，而由于在互联网上投放广告方式快捷、传播速度快且范围广以及容易精准投放，从而获得企业和厂商的青睐，现已成为广告投放的重要途径，投放量逐年增加。

现有的网络广告通常是在网站的网页上放置已经制作好的广告条，当用户点击广告条，则弹出该广告条对应的广告页面或连接到该广告条所属的商品网站，向用户展示商品的详细信息。这种广告条一般是由平面图片广告和动画或者视频构成，由于其制作快速简单并且成本低廉，因此被大量采用。但是这种类型的网络广告向用户推送商品信息的方式简单粗放，使用户始终处于被动地接收大量不感兴趣的广告信息的状态下，会让用户觉得广告枯燥乏味，从而产生厌烦感，往往很快关掉广告网页或离开广告网站，甚至将广告网站屏蔽，这样就造成了广告投放的效率低下，大大浪费了广告资源。

针对上述网络广告的缺点，出现了精准投放的网络广告。所谓精准投放的网络广告就是对用户的浏览内容和习惯进行记录，然后根据预置的规则对记录内容分析，得出用户的喜好并根据喜好对用户推送商品信息，这样就能够剔除用户不感兴趣的商品信息，准确地向用户提供感兴趣的商品信息，从而提高广告的投放效率。虽然这种精准投放的网络广告对于广告的投放效率有所提高，但是还是存在单向推送信息地问题，也就是说说，用户还是处于被动接收广告信息的状态，而且长时间被动接收，会使得用户觉得枯燥无趣，注意力和关注度也会大幅下降，从而对广告产生疲劳感，进而关闭广告页面或离开广告网站。

针对用户被动接收广告信息地缺陷，出现了可互动的网络广告，即，可以对广告内容进行选择并可以在广告播放的同时对广告进行意见反馈的互动网络广告，虽然这类可互动的网络广告在一定程度上实现了互动性，提高了用户的接收兴趣，但仅仅是对于广告选择和意见反馈上的互动而已，并没有使用户真正地参与到广告内容中去，其本质还是没有脱离单向推送广告信息和用户对广告信息被动接收的状态，因此，这类网络广告实质上还是无法摆脱被动接收广告信息带来的上述缺陷。

发明内容

针对上面提到的现有的网络广告中存在的单向推送、与广告之间没有实质互动的技术问题，本发明提供一种网络三维虚拟广告的自动生成及互动方法和系统。

其中，本发明的网络三维虚拟广告的自动生成及互动方法包括：

从商品信息输入端采集商品信息，对商品信息进行分类并建立索引和商品信息数据表，将处理后的商品信息存入所述商品信息数据表中，然后根据采集的所述商品信息中的与预存三维模型的对应关系信息，生成分类匹配结果；

在客户端显示所述商品信息，并实时监控客户端用户对所述商品信息的反馈，形成互动模式指令，所述互动模式指令包括商品名称和互动操作信息；

根据所述互动模式指令以及其涉及的商品的分类匹配结果，对该商品进行三维虚拟化处理，生成包含互动操作信息的文件模板，每个所述文件模板构成一条广告条目，该广告条目暂存在数据服务器的缓存中；

向客户端发送互动提示，在接收到用户反馈回来的对所述互动提示的确认信息后，通过视频采集设备实时采集客户端用户对商品进行操作的视频，然后与数据服务器的缓存中的广告条目进行混叠和渲染处理，形成三维广告视频，并通过网络直播给用户。

可选地，所述商品信息可以是商品的描述信息、商品各视角的图片信息、商品的尺寸信息、商品特性分类信息、对商品的互动操作信息或与预存三维模型的对应关系信息。

在对商品信息进行分类时，可根据预置的特性分类表的分类规则对商品信息进行分类。其中所述分类匹配结果包括：商品的具体信息、相应的三维模型集合及支持三维模型集合的图文素材。

可选地，所述互动提示包括操作动作确认信息以及定位确认信息；所述互动模式指令包括四个数据段：目标、来源、命令、信息数据。

此外，本发明方法中的所述三维虚拟化处理包括：三维建模、生成动画时间线和替换模型中的纹理内容。

在一种可能的实施方式中，本发明的方法还进一步包括：将实时接入的视频信号和渲染后的三维虚拟广告视频进行再次叠加融合，按照三维场景中的物件纹理尺寸，对所述三维虚拟广告视频进行适配，形成再混叠三维虚拟广告视频。其中，所述实时接入的视频信号包括：对内容进行解说的主播画面、广告内容的视频画面和来自网络的广告内容。

在另一种可能的实施方式中，本发明的方法还进一步包括：记录和实时分析客户端用户的操作行为，建立预测内容网络图，在没有进一步输入的情况下，可以根据预测内容网络图进行进一步地自动播放已有的三维虚拟广告。

另一方面，本发明还提供了一种网络三维虚拟广告的自动生成及互动系统，该系统包括：

信息采编模块，用于采集和分类商品信息，建立相应的索引与商品信息数据表，并根据商品信息与预存三维模型的对应关系，生成分类匹配结果；

互动模式管理模块，用于实时监控并接收客户端用户的反馈信息，根据所述反馈信息产生互动模式指令；

广告条目生成模块，用于根据所述互动模式指令以及其涉及的商品的分类匹配结果，对该商品进行三维虚拟化处理，生成包含互动操作信息的文件模板，每个所述文件模板构成一条广告条目；

三维虚拟广告生成模块，基于客户端用户反馈回来的对所述互动提示的确认信息后，实时采集客户端用户对商品进行操作的视频，并将其与所述广告条目进行混叠和渲染处理，生成三维虚拟广告频；

视频直播模块，该模块将生成的三维虚拟广告视频进行压缩编码，通过RTMP协议进行网络发布，直播给用户。

本发明的网络三维虚拟广告的自动生成及互动方法和系统能够自动生成三维虚拟广告，并允许用户真正并深入地参与到三维虚拟广告内容的互动中去，避免了由于单向推送广告信息而使用户始终处于被动接收信息的状况，大大提高了户对广告本身的兴趣，使用户在互动中自然而然地对广告中的商品产生深入的了解并加深对商品的印象；同时，由于本发明允许用户真正地参与到与广告内容互动中去，增强了广告的趣味性，因此能够吸引用户主动参与到其不了解或不感兴趣的广告中，在与广告内容互动中，潜移默化地了解广告中的商品，从而对用户起到了消费引导和培养的作用；此外，由于本发明还能够邀请其他人共同参与到互动广告中去，从而能够快速并广泛地传播该广告，提高了广告传播的速度和广度，大大提高了广告投放的效率。

附图说明

图1为本发明网络三维虚拟广告的自动生成及互动方法的流程图；

图2为具有生成再混叠三维广告视频步骤的本发明一个实施例的流程图；

图3为具有建立预测内容网络图并自动播放三维虚拟广告步骤的本发明另一实施例的流程图；

图4为本发明网络三维虚拟广告的自动生成及互动系统的结构图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，下面所描述的实施例仅是本发明部分实施例，其仅用于更加清楚地对本发明进行解释和说明，并不能以此来限定本发明的保护范围。

图1所示为本发明的网络三维虚拟广告的自动生成及互动方法的流程图。如图1所示，本发明的方法主要包含：

S101，通过外围输入接口对广告供应商提供相应的商品信息进行采集，然后对商品信息进行分类并建立索引和商品信息数据表，将处理后的商品信息存入所述商品信息数据表中，在商品信息采集完毕之后，将所述商品信息数据表存入系统数据库，然后根据采集的所述商品信息中的与预存三维模型的对应关系信息，生成分类匹配结果。

S102，在客户端显示商品的信息，并实时监控并接收客户端用户输入的反馈信息，提取所述反馈信息中的商品名称和互动操作信息，以产生互动模式指令。优选地，所述互动模式指令包括四个数据段：目标、来源、命令、信息数据；

S103，根据所述互动模式指令，从所述商品信息数据表中提取所述互动模式指令涉及的商品的分类匹配结果，根据该分类匹配结果和所述互动模式指令中的互动操作信息对相应的商品进行三维虚拟化处理，生成包含操作动作的文件模板，每个所述文件模板构成一条广告条目，该广告条目暂存在数据服务器的缓存中；其中，所述三维虚拟化处理包括：三维建模、生成动画时间线和替换模型中的纹理内容；

S104，向客户端发送互动提示，在接收到用户反馈回来的对所述互动提示的确认信息后，通过视频采集设备实时采集客户端用户对商品进行操作的视频，再与数据服务器的缓存中的广告条目进行混叠和渲染处理，生成三维虚拟广告视频；

S105，将生成的三维虚拟广告视频进行压缩编码，通过RTMP协议进行网络发布，直播给用户。

可选地，步骤S101中的所述商品信息包括以文字形式保存的商品描述信息、以图片形式保存的商品各视角的图片信息、以数据表形式保存的商品的具体参数、以分类选择形式存在的商品特性分类信息、对商品的互动操作信息以及与预存三维模型的对应关系信息。所述互动操作信息包括操作动作确认信息以及定位确认信息。

此外，在步骤S101中，可以按照下面的方式生成对商品的分类匹配结果：在系统数据库中的三维场景库中进行查找和匹配，根据商品的分类形式，选取对应的一个或多个三维场景；根据对应的商品描述信息，选取相应的文字模型；根据商品图片信息和数量，选择对应的三维模型，并进行贴图计算，以三维物件方式对各视角内容进行展示；根据商品的具体参数，模块选择对应的三维图示，例如三维表格，三维柱状图等。然后，对此商品对应的各类资源，建立索引链接，并将此商品的类别信息存入系统数据库。其中，所述分类匹配结果包括：商品的具体信息、相应的三维模型集合及支持三维模型集合的图文素材。

可选地，在步骤S101中，对商品信息进行分类时，可以根据预置的特性分类表的分类规则进行分类。

在步骤S101中，还可以进一步包括，在商品信息采集过程中，从数据库中同步获取已有的同类商品展示内容和形式，对相关联的模型和渲染结果进行预览推送，以协助获取最好的显示效果。

在步骤S102中，当用户经由网络通过WEBSOCKET与服务器建立长链接后，对用户的输入的反馈信息或接收主控服务器的播放指令进行实时监控和相应，即用户在观看过程中，向服务器发送内容信息或控制信息，在对观看的用户和当前流地址进行信息封装和合并后，将其发送至服务器，服务解析提取内容后，根据当前流地址定位到直播用户，并生成互动模式指令；如果是内容信息，则生成定位到三维场景中的内容容器并加入内容队列、准备进行显示的互动模式指令；如果是控制信息，则根据控制信息，产生包含对三维物件的控制信息的互动模式指令，例如三维动画段的切换、三维物件的缩放和旋转等。

此外，在步骤S102中，客户端显示商品的信息提供了不同的操作可能性，通过接收各种用户反馈的信息，根据位置和当前的信息内容，精确定位点击目标，例如，用户可以通过鼠标控制具体的场景物件(即对应于商品的三维模型)，具体为：获得当前场景中的物件列表及点击位置，通过分析当前场景中物件的z序，定位当前点击的特定的物件，通过记录鼠标的操作并分析该操作，即可以实时完成对物件的控制功能之一。

其中，在步骤S103中，可以按照下面的具体方式进行三维虚拟化处理：读取相应的索引链接，并根据产生互动模式指令中的互动操作信息对索引链接中的三维物件、二维物件进行建模，生成具有互动操作信息的三维模型。针对单个商品，通过建立多个三维场景对使用到的三维物件和二维物件进行管理，每个场景由不同的三维物件组成，每个物件都具备属于自己的动画段和纹理内容。按照时间线对动画段进行排序，从而形成最终的文件模板，即广告条目，具体单个广告条目由多个动画段构成，每个动画段包含多个三维物件及其内容。

在步骤S104中，混叠和渲染处理具体可以如下进行：根据预编制好的广告条目进行准备工作，具体包括加载广告条目中的三维场景和物件以及各个动画段的内容到内存和显存中，通过可扩展插件对摄像头进行管理，在实时读取视频画面内容，将视频内容的背景色进行去除，然后将其作为纹理放入内存和显存中的所述三维场景中，同时由于内容的不确定性，在渲染内容时必须对内容根据尺寸进行适配，从而形成完整的输出内容，即生成完整的三维虚拟广告视频。

对获取的实时视频内容的背景色进行去除的步骤主要包含有：在视频采集步骤中，将视频图像对应的内存数据放入相关队列后，系统建立线程，对相关队列进行内容读取操作，队列中的图像帧，以RGBA32进行存取，即为8bit的红色值，8bit的绿色值，8bit的蓝色值，8bit的alpha透明度。在原始内容中，默认透明度为0，即不透明。具体步骤为，获取图像中特定的像素点，取名为A点，获取A点四周的8个像素点，依次命名为B1，B2,….B8，则A点的透明度为Aalpha＝(Agreen+B1green+…+B8green)/9；按序依次获取所有的像素点并进行透明度的计算，对于图像中的每个像素点，以1920*1080的标准高清图像为例，则有2073600个像素点需要进行透明度计算，通过利用支持128位整型运算的SSE2指令集，建立循环机制每次对3个像素点进行透明度的计算。

进行混叠及渲染处理的步骤主要包括：对三维场景进行导入，将场景拆分为三维物件描述数据、纹理内容文件和动画描述文件的组合形式进行加载，根据三维物件中纹理的索引和预置的uv值，将处理完的视频图像与三维物件进行混合叠加以及根据动画时间线，将当前场景的三角形顶点和纹理内容送入显卡进行内容的渲染。

可选地，所述的渲染处理可以对实时获取的一路或多路视频源的视频帧图像进行处理，将其转换为RGB24格式读入，根据选择的像素值，对每个像素点进行透明度计算，根据目标点和预置点的RGB值差异，设置该像素点的alpha值，即透明度(0-100)，依照此理论，与预置点相近的像素点则透明度基本为0，即全透明。加载选择的三维场景，三维场景由三维空间和空间内的物件组成，视频帧图像按照指定规则，作为纹理贴面赋予空间内的某个物件，从而达到视频帧图像与三维场景融合的目的。三维场景加载之后，送入显卡进行渲染，与此同时，根据时间线，实时更新三维物件的所有参数，例如空间位置、颜色、大小以及特效等，从而达到实时渲染。此外，在渲染过程中，还可以通过网络接收外部实时信息，并更新到三维场景中的物件属性中，例如文字内容，图片内容，视频内容，三维物件的动画播放等，并予以实时展示。

优选地，在获取实时视频和加载动态三维虚拟场景之后，根据当前的时间点和在此时间点场景内的三维物件属性，按照给定的帧率实时进行所述渲染处理。

在步骤S105中，视频的网络发布和直播的操作可以通过如下具体流程完成：从显卡中根据时序回读渲染完毕的内容并放入共享内存区块；创建虚拟摄像头，提供外部访问接口，并读取共享内存区块中的内容；通过外部访问接口获取虚拟摄像头读取到的共享内存区块内容，并进行x264编码；将编码完毕的内容通过rtmp协议通过互联网进行分发，任何支持rtmp的客户端都能通过地址直接进行观看。

可选地，在步骤S105中，还可在对三维虚拟广告视频进行压缩编码完毕后附加内容，所述附加内容包括直播用户标示、内容、分类、当前时间戳及视频流的唯一ID。附加完毕后，通过RTMP向服务器进行推流。服务器收到视频流后对应生成供访问观看的流地址。

图2所示具有生成再混叠三维虚拟广告视频步骤本发明一个实施例的流程图。在该实施例中，本发明进一步包括了在生成的三维虚拟广告视频的基础上，再次叠加实时视频的步骤S201，该步骤S201具体为：在前一个实施例的基础上，将实时接入的视频信号和渲染后的三维虚拟广告视频进行再次叠加融合，按照三维场景中的物件纹理尺寸，对所述三维虚拟广告视频进行适配，形成再混叠三维广告视频。其中，所述实时接入的视频信号包括：对内容进行解说的主播画面、广告内容的视频画面和来自网络的广告内容。通过这一步骤，可以使得一个用户邀请其他多个用户一起参与广告中，从而可以实现广告的多用户互动的功能。

图3所示为具有建立预测内容网络图并自动播放已有的三维虚拟广告步骤S301的本发明另一实施例的流程图。在该实施例中，本发明进一步包括了在自动生成三维虚拟广告并进行互动的步骤基础上还能够建立预测内容网络图，并自动执行操作的步骤，该步骤具体为：记录和实时分析客户端用户的操作行为，建立预测内容网络图，在没有进一步输入的情况下，可以根据预测内容网络图进行进一步的自动操作。其中，记录和实时分析客户端用户的操作行为具体为，实时跟踪用户鼠标点击的位置，实时获取该位置的相关信息，例如该位置上的文字、图片或视频等信息，将这些信息记录在数据库的缓存中，在一个周期的时间之后，对缓存中的信息进行统计，计算出信息中文字、图片或视频出现的频度，根据该频度建立预测内容网络图，并根据该预测内容网络图自动播放广告。

图4为一种三维虚拟广告的自动生成及互动系统的结构图，该系统可以实现前述实施例的三维虚拟广告的自动生成及互动方法，该系统包括：

信息采编模块M101，用于采集和分类商品信息，建立相应的索引与商品信息数据表，并根据商品信息与预存三维模型的对应关系，生成分类匹配结果；

互动模式管理模块M102，用于实时监控并接收客户端用户输入的反馈信息，提取所述反馈信息或播放指令中的商品名称和互动操作信息，产生互动模式指令；

广告条目生成模块M103，用于根据所述分类匹配结果对商品进行三维虚拟化处理，并根据所述互动模式指令中的操作动作和所述三维虚拟化的商品，生成包含操作动作的文件模板，每个所述文件模板构成一条广告条目；

三维虚拟广告生成模块M104，基于客户端用户反馈回来的对所述互动提示的确认信息后，实时采集客户端用户对商品进行操作的视频，并将其与所述广告条目进行混叠和渲染处理，生成三维虚拟广告频；

视频直播模块M105，该模块将生成的三维虚拟广告视频进行压缩编码，通过RTMP协议进行网络发布，直播给用户。

以上对本发明的具体实施方式进行了详细的描述，但本领域内的技术人员根据本发明的创造性概念，可以对本发明进行各种变形和修改，但所做的各种变形和修改不脱离本发明的精神和范围，皆属于本发明权利要求的范围之内。

Claims (10)

1.一种网络三维虚拟广告的自动生成及互动方法，其特征在于，该方法包括：

从商品信息输入端采集商品信息，对商品信息进行分类并建立索引和商品信息数据表，根据采集的所述商品信息中的与预存三维模型的对应关系信息，生成分类匹配结果；

在客户端显示所述商品信息，并实时监控客户端用户对所述商品信息的反馈信息，根据反馈信息形成互动模式指令，所述互动模式指令包括商品名称和互动操作信息；

根据所述互动模式指令以及其涉及的商品的分类匹配结果，对该商品进行三维虚拟化处理，生成包含互动操作信息的文件模板，每个所述文件模板构成一条广告条目，该广告条目暂存在数据服务器的缓存中；

向客户端发送互动提示，在接收到用户反馈的对所述互动提示的确认信息后，通过视频采集设备实时采集客户端用户对商品进行操作的视频，与数据服务器的缓存中的广告条目进行混叠和渲染处理，生成三维虚拟广告视频；

将生成的三维虚拟广告视频进行压缩编码，通过RTMP协议进行网络发布，向用户进行直播。

2.如权利要求1所述的方法，其特征在于，所述商品信息包括商品的描述信息、商品各视角的图片信息、商品的尺寸信息、商品特性分类信息、对商品的互动操作信息以及与预存三维模型的对应关系信息。

3.如权利要求1所述的方法，其特征在于，在商品信息采集过程中，从数据库中同步获取已有的同类商品展示内容和形式，对相关联的模型和渲染结果进行预览推送。

4.如权利要求1所述的方法，其特征在于，所述三维虚拟化处理包括：三维建模、生成动画时间线和替换模型中的纹理内容。

5.如权利要求1所述的方法，其特征在于，所述分类匹配结果包括：商品的具体信息、相应的三维模型集合及支持三维模型集合的图文素材。

6.如权利要求1所述的方法，其特征在于，所述互动模式指令包括四个数据段：目标、来源、命令、信息数据。

7.如权利要求1中任意一项所述的方法，其特征在于，该方法还包括：将实时接入的视频信号和渲染后的三维虚拟广告视频进行再次叠加融合，按照三维场景中的物件纹理尺寸，对所述三维虚拟广告视频进行适配，形成再混叠三维广告视频。

8.如权利要求7所述的方法，其特征在于，所述实时接入的视频信号包括：对内容进行解说的主播画面、广告内容的视频画面和来自网络的广告内容。

9.如权利要求1所述的方法，其特征在于还进一步包括：记录和实时分析客户端用户的操作行为，建立预测内容网络图，在没有进一步输入的情况下，根据预测内容网络图进行进一步地自动播放已有的三维虚拟广告。

10.一种三维虚拟广告的自动生成及互动系统，其特征在于，该系统包括：

信息采编模块，用于采集和分类商品信息，建立相应的索引与商品信息数据表，并根据商品信息与预存三维模型的对应关系，生成分类匹配结果；

互动模式管理模块，用于实时监控并接收客户端用户的反馈信息，根据所述反馈信息产生互动模式指令；

广告条目生成模块，用于根据所述互动模式指令以及其涉及的商品的分类匹配结果，对该商品进行三维虚拟化处理，生成包含互动操作信息的文件模板，每个所述文件模板构成一条广告条目；

三维虚拟广告生成模块，基于客户端用户反馈的对所述互动提示的确认信息后，实时采集客户端用户对商品进行操作的视频，并将其与所述广告条目进行混叠和渲染处理，生成三维虚拟广告视频；

视频直播模块，该模块将生成的三维虚拟广告视频进行压缩编码，通过RTMP协议进行网络发布，直播给用户。