CN108156158B - 一种基于公共场所的智能广告信息实时推送方法及装置 - Google Patents

Abstract

一种基于公共场所的智能广告信息实时推送方法及装置，各模块均部署于当前设备，广告信息提取模块识别录制环境，提取设备屏幕的所有多媒体信息，并根据需求，对有效区域的屏幕多媒体信息进行解码和RGB提取，获得已解码有效屏幕区域的RGB数据流，并将该数据流传输至图像跟踪处理模块，图像跟踪处理模块进行完整性检测和数据转换，并对视频推送清晰度的选择进行编码参数设置和循环编码；处理后获得FLV格式高质量多媒体数据流并传输至实时传输控制模块，实时传输控制模块将接收到的数据流进行延时处理，依序存入缓存池，在执行缓存空间判断、与目的服务器建立通信、甄别控制信号后，将图像数据以标准FLV格式视频流的形式实时推送出去。

Description

一种基于公共场所的智能广告信息实时推送方法及装置

技术领域

本发明属于信息技术领域，是一种基于公共场所的智能广告信息实时推送方法及装置。

背景技术

广告，在广义上即利用一些传播手段进行信息的传播及推广。在我国古代，就有实物广告、叫卖广告、招牌和幌子等广告手段的出现。随着技术的发展，人们开始使用霓虹灯广告、路牌广告、橱窗广告等一些新的广告形式。如今，互联网技术及多媒体技术不断发展，网络广告成为了大家的新宠。同时，广告发展至今，已不再局限于商业宣传，在一些公共场所同样也用于公益宣传、公告、启事等公众信息的传播。在我们的生活中，广告宣传无处不在。

然而，对于广告推送者来说，目前的广告推送方法实时性低，可操作性较差。在需要实时对广告进行更改时，如时间场所等，用户需先对广告进行更改，再移植至广告系统，才能进行推送。在广告部分敏感信息或无关信息需要隐藏时，用户也必须对广告进行更改再次推送，耗费人力物力。在公共场所中，如有特殊情况，需使用广告推送大屏进行信息的推送广播，则同样需要先制作推送内容，移植至广告系统再进行推送。

因此，公共场所广告推送的实时性、可操作性，以及用户体验还有待提高。市面上急需一种可以实现对广告内容实时修改及动态选择推送的解决方案。

发明内容

本发明的目的是为实现公共场所多媒体设备上的广告信息实时提取及推送，所研发的智能广告信息实时推送方法及装置。用户通过在多媒体设备上部署该装置来实现设备屏幕上广告信息的实时提取、处理，并以标准视频流的形式推送出去。同时，用户可自主选取屏幕广告多媒体信息的提取区域以及推送视频的清晰度，从而解决广告推送的实时性低、可操作性差、推送内容选择度低的问题，完成有效广告多媒体信息在当前设备与目的服务器之间的高效、实时传输。

本发明的技术方案：

一种基于公共场所的智能广告信息实时推送装置，包括广告信息提取模块、图像跟踪处理模块和实时传输控制模块；

各模块均部署于当前设备，广告信息提取模块对当前录制环境进行识别，适合录制时提取设备屏幕的所有多媒体信息，并根据用户的信息提取区域需求，对有效区域的屏幕多媒体信息进行解码和RGB信息提取，获得已解码有效屏幕区域的RGB数据流，并将该数据流传输至图像跟踪处理模块，图像跟踪处理模块对接收到的数据流进行完整性检测和数据转换，并根据用户对视频推送清晰度的选择进行编码参数设置和循环编码等处理；处理后获得FLV格式高质量多媒体数据流并传输至实时传输控制模块，实时传输控制模块将接收到的数据流进行延时处理后，依序存入缓存池，在执行缓存空间判断、与目的服务器建立通信、甄别控制信号后，将图像数据以标准FLV格式视频流的形式实时推送出去。

A、广告信息提取模块

广告信息提取模块部署于当前设备，包括环境识别单元、广告信息提取单元、用户操作检测单元、数据解码单元、有效信息提取单元和有效区域限定单元；

当用户对屏幕信息提取区域无特定需求时，环境识别单元、广告信息提取单元、用户操作检测单元、数据解码单元和有效信息提取单元依次相连，环境识别单元对当前录制环境背景进行识别，确认当前环境可进行录制操作后，广告信息提取单元从输入的待处理的广告流中，获取当前屏幕的所有多媒体信息，用户操作检测单元对用户的区域选择操作进行检测，检测到用户未对信息提取区域进行选择后，将整个屏幕作为有效区域输入给数据解码单元，数据解码单元对整个屏幕的多媒体数据包进行排序，并按序将整个屏幕的n×m个数据包重新整合成链式数据流，并发送给有效信息提取单元，再由有效信息提取单元从接收到的链式数据流中提取标准的RGB信息流，即获得完整的有效屏幕区域的RGB数据流；

当用户对屏幕提取区域有区域选取需求时，环境识别单元、广告信息提取单元、用户操作检测单元、有效区域限定单元、数据解码单元和有效信息提取单元依次相连，环境识别单元对当前录制环境背景进行识别，确认当前环境可进行录制操作后，广告信息提取单元从待处理的输入流中获取当前屏幕的所有多媒体信息，用户操作检测单元对用户的区域选择操作进行检测，检测到用户对信息提取区域进行选取后，有效区域限定单元将用户所选取的区域作为有效区域传送给数据解码单元，数据解码单元仅对该有效区域内的多媒体数据包进行排序，并按序将有效区域的a×b个数据包重新整合成链式数据流，然后发送给有效信息提取单元，再由信息提取单元从接收到的链式数据流中提取标准的RGB信息流，即获得完整的有效屏幕区域的RGB数据流；

B、图像跟踪处理模块

图像跟踪处理模块部署于当前设备，包括完整性检测单元、数据转换单元、清晰度检测单元、编码参数设置单元、数据编码单元和循环单元；

完整性检测单元、数据转换单元、清晰度检测单元、编码参数设置单元和数据编码单元依次相连，循环单元与数据编码单元相连；完整性检测单元对已接收到的有效屏幕区域的RGB数据流，进行完整性检测，若出现错误数据值，则其完整性已丧失，数据接收终止，丢弃已接收数据，重新接收；若检测无误，则将完整数据流传送至数据转换单元；数据转换单元对接收到的RGB数据流进行转换，将其中的RGB格式图像转化成2：1水平取样、2：1垂直取样的YUV420P格式；清晰度检测单元对用户视频推送的清晰度选择进行检测，并将检测结果传送至编码参数设置单元；编码参数设置单元根据检测到的清晰度要求对编码所需参数进行初始设置，做编码准备；数据编码单元根据所设置的编码参数将已转换的YUV420P格式图像进行H.264压缩编码，再由循环单元对后续各帧YUV格式图像依序循环执行数据编码单元的操作，获得FLV格式的高质量视频数据流；

C、实时传输控制模块

实时传输控制模块部署于当前设备，包括延时单元、缓存池、通信控制单元、控制信号甄别单元、数据传输单元和循环执行单元；延时单元、缓存池、通信控制单元、控制信号甄别单元和数据传输单元依次相连，循环执行单元连接于数据传输单元与通信控制单元之间；首先，延时单元在接收到FLV格式的高质量视频流后，对其进行延时处理，并将延时后的各帧图像数据依序存入缓存池，通信控制单元对缓存空间进行判断，若判断为空则不作任何处理，等待下一次判断；若判断未空，则与目的服务器建立通信，由控制信号甄别单元对服务器信号进行实时接收检测，当接收到对应服务器所发回的传输信号时，数据传输单元顺序提取缓存池内第一帧图像数据，以标准FLV格式进行实时传输，再由循环执行单元对缓存池内后续图像数据依序执行通信控制单元、控制信号甄别单元和数据传输单元的操作；在循环执行过程中，通信控制单元检测未空时，不再重新建立通信，保持原通信状态。

一种基于公共场所的智能广告信息实时推送方法，步骤如下：

A、设备屏幕有效区域广告信息提取

首先，环境识别单元识别当前环境是否适合录制屏幕。环境适合时，由广告信息提取单元从输入的待处理的广告流中获取当前屏幕的所有多媒体信息；然后，用户操作检测单元对用户操作进行检测，判断用户有无区域选取操作，若检测到用户无区域选取操作，数据解码单元则将整个屏幕作为有效区域进行多媒体信息的解码，并由有效信息提取单元提取其中的RGB信息流，获得已解码有效屏幕区域的RGB数据流；若检测到用户区域选取操作，则有效区域限定单元将用户所选取的区域作为有效区域传送至数据解码单元，数据解码单元仅将该有效区域内的多媒体信息进行解码，并由有效信息提取单元提取其中的RGB信息流，获得已解码有效屏幕区域的RGB数据流。

B、图像跟踪处理

首先，完整性检测单元接收已解码有效屏幕区域的RGB数据流，并检测其完整性，若出现错误数据值，则该数据流完整性已丧失，数据流接收终止，丢弃已接收数据，重新接收；若检测无误，则将完整数据流传送至数据转换单元；其次，数据转换单元对接收到的RGB数据流进行转化，将其中的RGB格式图像转化成2：1水平取样，2：1垂直取样的YUV420P格式；再次，清晰度检测单元对用户视频推送的清晰度选择进行检测，并将检测结果传送至编码参数设置单元；编码参数设置单元根据接收到的检测结果对编码所需参数进行相对应的初始设置，数据编码单元根据所设置的编码参数将已转换的YUV420P格式图像进行H.264压缩编码；最后，由循环单元对后续各帧YUV格式图像依序循环执行数据H.264压缩编码的操作，获得FLV特定格式的高质量视频数据流。

C、循环提取传输

首先，延时单元接收FLV特定格式的高质量视频数据，对其进行延时处理，并将延时后的数据依序存入缓存池，然后，通信控制单元对缓存池的内存空间是否为空进行判断，若判断为空则不作任何处理，等待下一次判断，若判断不为空则与目的服务器建立通信，由控制信号甄别单元对服务器信号进行实时接收检测，当检测到对应服务器所发回的传输信号时，数据传输单元顺序提取缓存池内第一帧图像数据，并以FLV格式进行实时传输，最后，循环执行单元对缓存池内后续图像数据依序循环执行缓存空间判断、通信保持、服务器信号甄别、数据传输操作。

本发明的有益效果：

A、设备通过多项环节检测，提高了数据传输的稳定性及准确性，可获取更高质量的视频流；

B、使用高级压缩算法及实时推送方法，可在将当前设备屏幕有效广告信息实时传输至目的服务器的同时，节省传输带宽、减小传输环境压力；

C、用户可对设备屏幕广告信息提取的区域以及推送视频的清晰度进行选择，提升了用户体验；

D、兼容各版本操作系统，装置搭建方便快捷。

附图说明

图1为本发明的模块架构图。

图2为本发明的广告信息提取模块流程图。

图3为本发明的解码操作示意图。

图4为本发明的图像跟踪处理模块流程图。

图5为本发明的YUV420P采样网络示意图。

图6为本发明的实时传输控制模块流程图。

具体实施方式

下面结合具体实施例和附图详细阐述本发明，但本发明并不局限于具体实施例。

实施例：

图1为本实施例的模块架构图。本实施例中，各模块分别执行以下步骤：

步骤101：提取当前设备有效广告多媒体信息。

在本实施例中，将三台不同型号的PC机作为信息推送设备，提供被采集广告多媒体信息，三台PC机的具体参数配置如下表。

当前设备开启设备信息推送任务，启动广告信息提取模块。广告信息提取模块采用信息提取方法。首先，确认当前环境可以进行录制操作后，获取屏幕的多媒体数据流，判断用户是否进行了区域选择操作。其中，①号设备不划定有效广告信息采集区域，②号设备划定1/2屏幕作为有效广告信息采集区域，③号设备由用户通过外部设备(鼠标等)划定有效广告信息采集区域。将获取到的有效区域的多媒体数据流重新整合成链式数据流，再从中提取指定有效区域的RGB信息，等待下一步处理；

步骤102：处理获取到的多媒体数据流。

首先，将步骤101压缩编码后获得的特定区域多媒体数据流进行完整性检测，若出现错误数据值，表示其完整性已丧失，则数据传输终止，丢弃已传输的数据，重新接收；若数据检测无误，则更换采样方式，将RGB信息转码成YUV420P数据流。然后进行数据编码，通过H.264算法与循环单元依序进行YUV420P数据流的压缩编码，获得用于传输的FLV特定格式的高质量视频数据流。

步骤103：对处理后的数据循环提取传输。

首先将模块102所处理后的数据进行延时，依序存入缓存池；然后，通信控制单元通过对缓存池内空间的判断确定是否与目的服务器建立或保持通信，若缓存池空间判断为空则等待下一次判断，不作任何处理，若判断不为空则与目的服务器建立通信；之后，由控制信号甄别单元对服务器信号进行实时接收检测，检测到对应服务器所发回的传输信号，数据传输单元即顺序提取缓存池内第一帧图像数据，并以FLV格式实时传输出去，最后，由循环执行单元对缓存池内后续图像数据依序循环执行缓存空间判断、通信保持、服务器信号甄别、数据传输操作。

使用移动终端设备小米6智能手机及多媒体数据流接收播放程序，对传输效果进行检测，智能手机由对应服务器提取所传输数据，可得到与传输设备所选取屏幕区域相同的实时广告画面。

Claims (2)

1.一种基于公共场所的智能广告信息实时推送装置，其特征在于，所述的基于公共场所的智能广告信息实时推送装置包括广告信息提取模块、图像跟踪处理模块和实时传输控制模块；

各模块均部署于当前设备，广告信息提取模块对当前录制环境进行识别，适合录制时提取设备屏幕的所有多媒体信息，并根据用户的信息提取区域需求，对有效区域的屏幕多媒体信息进行解码和RGB信息提取，获得已解码有效屏幕区域的RGB数据流，并将该数据流传输至图像跟踪处理模块，图像跟踪处理模块对接收到的数据流进行完整性检测和数据转换，并根据用户对视频推送清晰度的选择进行编码参数设置和循环编码处理；处理后获得FLV格式高质量多媒体数据流并传输至实时传输控制模块，实时传输控制模块将接收到的数据流进行延时处理后，依序存入缓存池，在执行缓存空间判断、与目的服务器建立通信、甄别控制信号后，将图像数据以标准FLV格式视频流的形式实时推送出去；

所述的广告信息提取模块部署于当前设备，包括环境识别单元、广告信息提取单元、用户操作检测单元、数据解码单元、有效信息提取单元和有效区域限定单元；

当用户对屏幕信息提取区域无特定需求时，环境识别单元、广告信息提取单元、用户操作检测单元、数据解码单元和有效信息提取单元依次相连，环境识别单元对当前录制环境背景进行识别，确认当前环境可进行录制操作后，广告信息提取单元从输入的待处理的广告流中，获取当前屏幕的所有多媒体信息，用户操作检测单元对用户的区域选择操作进行检测，检测到用户未对信息提取区域进行选择后，将整个屏幕作为有效区域输入给数据解码单元，数据解码单元对整个屏幕的多媒体数据包进行排序，并按序将整个屏幕的n×m个数据包重新整合成链式数据流，并发送给有效信息提取单元，再由有效信息提取单元从接收到的链式数据流中提取标准的RGB信息流，即获得完整的有效屏幕区域的RGB数据流；

当用户对屏幕提取区域有区域选取需求时，环境识别单元、广告信息提取单元、用户操作检测单元、有效区域限定单元、数据解码单元和有效信息提取单元依次相连，环境识别单元对当前录制环境背景进行识别，确认当前环境可进行录制操作后，广告信息提取单元从待处理的输入流中获取当前屏幕的所有多媒体信息，用户操作检测单元对用户的区域选择操作进行检测，检测到用户对信息提取区域进行选取后，有效区域限定单元将用户所选取的区域作为有效区域传送给数据解码单元，数据解码单元仅对该有效区域内的多媒体数据包进行排序，并按序将有效区域的a×b个数据包重新整合成链式数据流，然后发送给有效信息提取单元，再由有效信息提取单元从接收到的链式数据流中提取标准的RGB信息流，即获得完整的有效屏幕区域的RGB数据流；

所述的图像跟踪处理模块部署于当前设备，包括完整性检测单元、数据转换单元、清晰度检测单元、编码参数设置单元、数据编码单元和循环单元；

完整性检测单元、数据转换单元、清晰度检测单元、编码参数设置单元和数据编码单元依次相连，循环单元与数据编码单元相连；完整性检测单元对已接收到的有效屏幕区域的RGB数据流，进行完整性检测，若出现错误数据值，则其完整性已丧失，数据接收终止，丢弃已接收数据，重新接收；若检测无误，则将完整数据流传送至数据转换单元；数据转换单元对接收到的RGB数据流进行转换，将其中的RGB格式图像转化成2：1水平取样、2：1垂直取样的YUV420P格式；清晰度检测单元对用户视频推送的清晰度选择进行检测，并将检测结果传送至编码参数设置单元；编码参数设置单元根据检测到的清晰度要求对编码所需参数进行初始设置，做编码准备；数据编码单元根据所设置的编码参数将已转换的YUV420P格式图像进行H.264压缩编码，再由循环单元对后续各帧YUV格式图像依序循环执行数据编码单元的操作，获得FLV格式的高质量视频数据流；

所述的实时传输控制模块部署于当前设备，包括延时单元、缓存池、通信控制单元、控制信号甄别单元、数据传输单元和循环执行单元；延时单元、缓存池、通信控制单元、控制信号甄别单元和数据传输单元依次相连，循环执行单元连接于数据传输单元与通信控制单元之间；首先，延时单元在接收到FLV格式的高质量视频流后，对其进行延时处理，并将延时后的各帧图像数据依序存入缓存池，通信控制单元对缓存空间进行判断，若判断为空则不作任何处理，等待下一次判断；若判断未空，则与目的服务器建立通信，由控制信号甄别单元对服务器信号进行实时接收检测，当接收到对应服务器所发回的传输信号时，数据传输单元顺序提取缓存池内第一帧图像数据，以标准FLV格式进行实时传输，再由循环执行单元对缓存池内后续图像数据依序执行通信控制单元、控制信号甄别单元和数据传输单元的操作；在循环执行过程中，通信控制单元检测未空时，不再重新建立通信，保持原通信状态。

2.一种基于公共场所的智能广告信息实时推送方法，其特征在于，步骤如下：

A、设备屏幕有效区域广告信息提取

首先，环境识别单元识别当前环境是否适合录制屏幕；环境适合时，由广告信息提取单元从输入的待处理的广告流中获取当前屏幕的所有多媒体信息；然后，用户操作检测单元对用户操作进行检测，判断用户有无区域选取操作，若检测到用户无区域选取操作，数据解码单元则将整个屏幕作为有效区域进行多媒体信息的解码，并由有效信息提取单元提取其中的RGB信息流，获得已解码有效屏幕区域的RGB数据流；若检测到用户区域选取操作，则有效区域限定单元将用户所选取的区域作为有效区域传送至数据解码单元，数据解码单元仅将该有效区域内的多媒体信息进行解码，并由有效信息提取单元提取其中的RGB信息流，获得已解码有效屏幕区域的RGB数据流；

B、图像跟踪处理

首先，完整性检测单元接收已解码有效屏幕区域的RGB数据流，并检测其完整性，若出现错误数据值，则该数据流完整性已丧失，数据流接收终止，丢弃已接收数据，重新接收；若检测无误，则将完整数据流传送至数据转换单元；其次，数据转换单元对接收到的RGB数据流进行转化，将其中的RGB格式图像转化成2：1水平取样、2：1垂直取样的YUV420P格式；再次，清晰度检测单元对用户视频推送的清晰度选择进行检测，并将检测结果传送至编码参数设置单元；编码参数设置单元根据接收到的检测结果对编码所需参数进行相对应的初始设置，数据编码单元根据所设置的编码参数将已转换的YUV420P格式图像进行H.264压缩编码；最后，由循环单元对后续各帧YUV格式图像依序循环执行数据H.264压缩编码的操作，获得FLV特定格式的高质量视频数据流；

C、循环提取传输

首先，延时单元接收FLV特定格式的高质量视频数据，对其进行延时处理，并将延时后的数据依序存入缓存池，然后，通信控制单元对缓存池的内存空间是否为空进行判断，若判断为空则不作任何处理，等待下一次判断，若判断不为空则与目的服务器建立通信，由控制信号甄别单元对服务器信号进行实时接收检测，当检测到对应服务器所发回的传输信号时，数据传输单元顺序提取缓存池内第一帧图像数据，并以FLV格式进行实时传输，最后，循环执行单元对缓存池内后续图像数据依序循环执行缓存空间判断、通信保持、服务器信号甄别、数据传输操作。

Images