CN103763578A

CN103763578A - 一种节目关联信息推送方法和装置

Info

Publication number: CN103763578A
Application number: CN201410012710.6A
Authority: CN
Inventors: 李鹏; 陆承恩; 高鹏程
Original assignee: KUYUN INTERACTIVE TECHNOLOGY Ltd
Current assignee: KUYUN INTERACTIVE TECHNOLOGY Ltd
Priority date: 2014-01-10
Filing date: 2014-01-10
Publication date: 2014-04-30

Abstract

本发明公开了一种节目关联信息推送方法，所述方法包括：对多媒体数据流进行音视频分离处理，获得视频编码数据和音频编码数据；将所述节目关联信息编码数据作为声音水印嵌入所述音频编码数据，生成携带声音水印的音频编码数据；将所述携带声音水印的音频编码数据和所述视频编码数据进行合成处理，重新生成多媒体数据流；向节目播放终端发送所述重新生成的多媒体数据流。本发明实现了信息的高效推送并且不影响多媒体数据流的音视频播放效果。本发明还公开了用于实现上述方法的装置。

Description

一种节目关联信息推送方法和装置

技术领域

本发明涉及多媒体信息技术领域，尤其涉及一种节目关联信息推送方法和装置。

背景技术

在多媒体播放过程中，例如广播电视、网络直播以及在线视频等多媒体资源的播放，人们期望能够与播放内容相关的信息推送给观众。目前，在播放电视节目时屏幕画面中经常出现二维码，观众可以对二维码进行扫描获取更多信息。本申请的发明人发现，这种向用户推送信息的方式效率很低，并且受用户行为习惯以及周围环境的影响，扫描二维码的观众可能会非常少，导致信息推送效率低下。

可以有另一种实现方式，在多媒体资源的视频数据中添加字幕的方式将相关信息嵌入视频中，同视频一起播放并展示给观众。本申请的发明人发现，这种添加字幕的方式是将字幕数据添加到视频文件的文件头中，能够添加的信息内容数量有限，并且同视频一起展示其他信息会影响视频画面的整体播放效果。

发明内容

本发明实施例提供一种节目关联信息推送方法和装置，将关联信息以声音水印的方式添加到音频数据中，以供播放终端播放时进行解析并呈现给用户。

为达上述目的，本发明实施例采用以下技术方案：

一种节目关联信息推送方法，所述方法包括：

对多媒体数据流进行音视频分离处理，获得视频编码数据和音频编码数据；

将所述节目关联信息编码数据作为声音水印嵌入所述音频编码数据，生成携带声音水印的音频编码数据；

将所述携带声音水印的音频编码数据和所述视频编码数据进行合成处理，重新生成多媒体数据流；

向节目播放终端发送所述重新生成的多媒体数据流。

将节目关联信息编码数据以声音水印的方式嵌入到音频编码数据中并发送至节目播放终端，从而实现了信息的高效推送并且不影响多媒体数据流的音视频播放效果。

将节目关联信息编码数据作为声音水印嵌入所述音频编码数据，生成携带声音水印的音频编码数据，包括：将所述节目关联信息编码数据嵌入到所述音频编码数据中的非听觉频域内。从而不影响多媒体数据流的音质效果。

所述节目关联信息编码数据包括标签信息、字幕信息以及互动信息中的一种或多种。可将多种需要推送的信息以声音水印的方式嵌入到多媒体数据流中，提高信息推送效率。

一种节目关联信息推送方法，包括：

获取携带声音水印的音频编码数据；

从所述携带声音水印的音频编码数据中抽取节目关联信息编码数据；

向用户展示所述节目关联信息编码数据中的节目关联信息。

终端设备获取携带声音水印的音频编码数据后，抽取出其中作为声音水印的节目关联信息编码数据，将节目关联信息呈现给用户，从而实现信息推送的目的，并且不影响多媒体数据流的播放效果。

获取携带声音水印的音频编码数据，包括：对接收到的多媒体数据流进行解码处理，获取所述携带声音水印的音频编码数据；或者，通过在线方式向用户推送多媒体数据中的节目关联信息。

获取携带声音水印的音频编码数据，包括：通过录音的方式采集节目播放终端播放的所述携带声音水印的音频编码数据。实现了正常播放多媒体数据流的同时在另外一个终端设备上向用户呈现节目关联信息，不影响多媒体数据流的原有播放效果。

从所述携带声音水印的音频编码数据中抽取节目关联信息编码数据，包括：从所述携带声音水印的音频编码数据中的非听觉频域内抽取节目关联信息编码数据。不影响多媒体播放器的音质效果。

一种节目关联信息推送装置，所述装置包括：

分离模块，用于对多媒体数据流进行音视频分离处理，获得视频编码数据和音频编码数据；

嵌入模块，用于将节目关联信息编码数据作为声音水印嵌入所述音频编码数据，生成携带声音水印的音频编码数据；

合成模块，用于将所述携带声音水印的音频编码数据和所述视频编码数据进行合成处理，重新生成多媒体数据流；

发送模块，用于向节目播放终端发送所述重新生成的多媒体数据流。

所述嵌入模块将所述节目关联信息编码数据嵌入到所述音频编码数据中的非听觉频域内。

一种节目关联信息推送装置，所述装置包括：

获取模块，用于获取携带声音水印的音频编码数据；

抽取模块，用于从所述携带声音水印的音频编码数据中抽取节目关联信息编码数据；

展示模块，用于向用户展示所述节目关联信息编码数据中的节目关联信息。

所述获取模块包括：解码单元，用于对接收到的多媒体数据流进行解码处理，获取所述携带声音水印的音频编码数据；或者，

采集单元，用于通过录音方式采集节目播放终端播放的所述携带声音水印的音频编码数据。

所述抽取模块从所述携带声音水印的音频编码数据中的非听觉频域内抽取节目关联信息编码数据。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1是本发明实施例一提供的一种节目关联信息推送方法的流程示意图；

图2是本发明实施例二提供的一种节目关联信息推送方法的流程示意图；

图3是本发明实施例一提供的一种节目关联信息推送装置的结构示意图；

图4是本发明实施例二提供的一种节目关联信息推送装置的结构示意图；

图5是本发明实施例二中的一种获取模块的结构示意图。

图6是本发明实施例二中的另一种获取模块的结构示意图。

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

图1是本发明实施例一提供的一种节目关联信息推送方法，该方法包括：

S101，对多媒体数据流进行音视频分离处理，获得视频编码数据和音频编码数据。

多媒体数据流是来自电视台、电台以及网站上以点播或直播方式传播的多媒体节目信号。对上述节目信号的多媒体数据流进行音视频分离处理，以获得多媒体数据流的视频编码数据和音频编码数据。

S102，将节目关联信息编码数据作为声音水印嵌入音频编码数据，生成携带声音水印的音频编码数据。

上述节目关联信息编码数据中包括多媒体关联信息、同步码和校验码，根据其中的同步码和校验码将节目关联信息编码数据嵌入到音频编码数据中，使节目关联信息编码数据作为音频编码数据中的声音水印，以生成携带声音水印的音频编码数据。

节目关联信息编码数据可以是以盲水印嵌入算法嵌入到音频编码数据中，其优点是在进行声音水印抽取时，不需要检测全部的音频编码数据，只需要检测盲水印密钥，例如节目关联信息编码数据中的校验码，即可检测到声音水印的位置并进行抽取。

节目关联信息包括标签信息、字幕信息以及互动信息中的一种或多种，其中标签信息可以是与多媒体数据流播出的节目相关的任何资讯信息。

S103，将携带声音水印的音频编码数据和视频编码数据进行合成处理，重新生成多媒体数据流。

将携带声音水印的音频编码数据和S101中获得的视频编码数据再进行合成处理，重新生成多媒体数据流。

S104，向节目播放终端发送所述重新生成的多媒体数据流。

该重新生成的多媒体数据流能够将声音水印传递到节目播放终端。将重新生成的多媒体数据流发送至节目播放终端，其中的声音水印是嵌入在音频编码数据中的节目关联信息编码数据，从而将与多媒体数据流相关的节目关联信息推送至节目播放终端。

上述S101-S104的处理过程实现了将节目关联信息以声音水印的方式嵌入到多媒体数据流中并进行发送，从而将节目关联信息推送至节目播放终端。

上述步骤S101至步骤S103的处理过程可以离线或者在线的方式进行。以离线方式进行时，是在播出节目之前，即在节目制作过程中，按照上述处理过程对节目进行音视频处理，并将节目关联信息以声音水印的方式嵌入到音频编码数据中，再将携带声音水印的音频编码数据和视频编码数据进行合成处理，重新生成多媒体数据流。以在线方式进行时，是在节目播放过程中，后台服务器对节目的多媒体数据流进行处理，例如，针对电视节目，该多媒体数据流可以多媒体广播电视流进行传输，后台服务器在节目播放过程中进行音视频分离处理，将节目关联信息以声音水印的方式嵌入到音频编码数据中，再将携带声音水印的音频编码数据和视频编码数据进行合成处理，重新生成多媒体数据流。例如视频直播网站或电视节目直播过程中，后台服务器在线接收多媒体广播电视流，通过上述方式将节目关联信息以声音水印的方式嵌入进去，再将携带声音水印的多媒体数据流以多媒体广播电视流的形式发送给电视设备，在电视设备上进行播放，或者是通过互联网的发送给互联网设备，由互联网设备上的视频播放器进行播放。

在音频编码数据中嵌入声音水印时会改变原始的音频编码数据，为了不影响播放时的声音质量，在本发明的另一实施例中，将节目关联信息编码数据嵌入到音频编码数据的非听觉频域内。人类听觉频率范围为20Hz-20KHz，针对这一特点，可以先对音频编码数据进行傅里叶变换，将关联信息编码数据嵌入到人耳不敏感的频率在20KHz以上的高频区段，从而使音频编码数据的改变并不会在播放时使用户感到音质受到影响。

本发明实施例一，将关联信息编码数据以声音水印的方式嵌入到音频编码数据中并发送至其他节目播放终端，从而实现了信息的高效推送并且不影响多媒体数据流的音视频播放效果。

图2是本发明实施例二提供的一种节目关联信息推送方法，该方法包括：

S201，获取携带声音水印的音频编码数据。

终端设备获取携带声音水印的音频编码数据，其中的声音水印是嵌入到音频编码数据中的节目关联信息编码数据。节目关联信息编码数据可以是以盲水印嵌入算法嵌入音频编码数据中，其优点是在进行声音水印抽取时，不需要检测全部的音频编码数据，只需要检测盲水印密钥，例如关联信息编码数据中的校验码，即可检测到声音水印的位置并进行抽取。

S202，从携带声音水印的音频编码数据中抽取节目关联信息编码数据。

终端设备通过水印检测提取的方式抽取音频编码数据中的节目关联信息编码数据。节目关联信息编码数据中包括节目关联信息、同步码以及校验码，节目关联信息可以包括标签信息、字幕信息、互动信息或广告信息中的一种或多种，其中标签信息可以是与多媒体数据流播出的节目相关的任何资讯信息。

S203，向用户展示节目关联信息编码数据中的节目关联信息。

终端设备将抽取出的节目关联信息输出，在电视机的显示屏或移动终端的屏幕上展示上述的节目关联信息。

上述S201-S203的处理过程实现了从携带声音水印的多媒体数据流抽取节目关联信息编码数据，并且将其中的节目关联信息输出，呈现给用户。

本发明上述实施例中，其中可以是在节目播放终端上实现，或者是在移动终端上实现。具体的，针对电视节目，其中的节目播放终端可以是智能电视机，或者是机顶盒，与该机顶盒连接的电视机播放电视节目。

针对在不同的节目播放终端，其中S201获取携带声音水印的音频编码数据可以包括多种方式。在本发明另一实施例中，节目播放终端通过网络接收多媒体数据流，对于电视节目，该多媒体数据流以多媒体广播电视流的形式进行传输，节目播放终端通过广播电视网络接收多媒体广播流，对于互联网节目，节目播放终端通过互联网接收多媒体数据流。节目播放终端在接收到多媒体数据流后，对多媒体数据流进行解码处理，获取其中的携带声音水印的音频编码数据。然后进行S202-S203的处理，最终将节目关联信息呈现给用户。

在本发明另一实施例中，节目播放终端在接收到多媒体数据流后，进行播放，通过移动终端向用户呈现节目关联信息。此时上述S201-S203的处理过程在移动终端设备实现。节目播放终端播放多媒体数据流，包括视频编码数据和携带声音水印的音频编码数据。移动终端通过录音的方式采集该节目播放终端播放的携带声音水印的音频编码数据而获取到携带声音水印的音频编码数据，再进行S202-S203的处理过程，最终将节目关联信息在移动终端上呈现给用户。

为了不影响播放时的声音质量，在本发明另一实施例中，节目关联信息编码数据嵌入到音频编码数据的非听觉频域内，节目播放终端在获取携带声音水印的音频编码数据后，从人耳不敏感的频率在20KHz以上的高频区段中抽取出节目关联信息编码数据。终端设备播放携带上述声音水印的多媒体数据时，不会使用户感到音质受损。

本发明实施例二，终端设备获取携带声音水印的音频编码数据后，抽取出其中作为声音水印的节目关联信息编码数据，将节目关联信息呈现给用户，从而实现信息推送的目的，并且不影响多媒体数据流的播放效果。

相应的，本发明实施例提供了与实施例一对应的节目关联信息推送装置，如图3所示，该装置包括：

分离模块30，用于对多媒体数据流进行音视频分离处理，获得视频编码数据和音频编码数据；

嵌入模块31，用于将节目关联信息编码数据作为声音水印嵌入所述音频编码数据，生成携带声音水印的音频编码数据；

合成模块32，用于将所述携带声音水印的音频编码数据和所述视频编码数据进行合成处理，重新生成多媒体数据流；

发送模块33，用于向节目播放终端发送重新生成的多媒体数据流。

相应的，本发明实施例提供了与实施例二对应的一种节目关联信息推送装置，如图4所示，该装置包括：

获取模块40，用于获取携带声音水印的音频编码数据；

抽取模块41，用于从携带声音水印的音频编码数据中抽取节目关联信息编码数据；

展示模块42，用于向用户展示节目关联信息编码数据中的节目关联信息。

其中，获取模块40如图5所示，包括：

解码单元400，用于对接收到的多媒体数据流进行解码处理，获取携带声音水印的音频编码数据。或者，获取模块40如图6所示，包括：

采集单元401，用于通过录音方式采集节目播放终端播放的携带声音水印的音频编码数据。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器和光学存储器等）上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种节目关联信息推送方法，其特征在于，所述方法包括：

向节目播放终端发送所述重新生成的多媒体数据流。

2.如权利要求1所述的方法，其特征在于，将所述节目关联信息编码数据作为声音水印嵌入所述音频编码数据，生成携带声音水印的音频编码数据，包括：

将所述节目关联信息编码数据嵌入到所述音频编码数据中的非听觉频域内。

3.如权利要求1所述的方法，其特征在于，所述节目关联信息包括标签信息、字幕信息以及互动信息中的一种或多种。

4.一种节目关联信息推送方法，其特征在于，所述方法包括：

获取携带声音水印的音频编码数据；

向用户展示所述节目关联信息编码数据中的节目关联信息。

5.如权利要求4所述的方法，其特征在于，获取携带声音水印的音频编码数据，包括：

对接收到的多媒体数据流进行解码处理，获取所述携带声音水印的音频编码数据；或者

通过录音的方式采集节目播放终端播放的所述携带声音水印的音频编码数据。

6.如权利要求4所述的方法，其特征在于，从所述携带声音水印的音频编码数据中抽取节目关联信息编码数据，包括：

从所述携带声音水印的音频编码数据中的非听觉频域内抽取节目关联信息编码数据。

7.一种节目关联信息推送装置，其特征在于，所述装置包括：

嵌入模块，用于将所述节目关联信息编码数据作为声音水印嵌入所述音频编码数据，生成携带声音水印的音频编码数据；

8.如权利7述的装置，其特征在于，所述嵌入模块将所述节目关联信息编码数据嵌入到所述音频编码数据中的非听觉频域内。

9.一种节目关联信息推送装置，其特征在于，所述装置包括：

获取模块，用于获取携带声音水印的音频编码数据；

10.如权利要求9所述的装置，其特征在于，所述获取模块包括：

解码单元，用于对接收到的多媒体数据流进行解码处理，获取所述携带声音水印的音频编码数据；或者，

采集单元，用于通过录音的方式采集节目播放终端播放的所述携带声音水印的音频编码数据。

11.如权利要求9所述的装置，其特征在于，所述抽取模块从所述携带声音水印的音频编码数据中的非听觉频域内抽取节目关联信息编码数据。