CN103402118B - 一种媒体节目互动方法及系统 - Google Patents

Abstract

本发明适用于多媒体应用领域，提供了一种媒体节目互动方法及系统，所述方法包括：服务器实时建立音频特征库，存储所有媒体节目的音频特征值及节目互动信息；移动设备录制当前播放的媒体节目音频，提取媒体节目音频的音频特征值，并将提取的音频特征值发送至服务器；服务器将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配，识别当前播放的媒体节目；服务器判定当前播放媒体节目的类型信息，并根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备。能够准确、快速的将用户收看的媒体节目互动信息反馈给用户，互动信息信息量丰富，种类较多，能够满足用户的各种需求，用户体验较好。

Description

一种媒体节目互动方法及系统

技术领域

本发明属于多媒体应用领域，尤其涉及一种媒体节目互动方法及系统。

背景技术

随着电子技术的不断进步，人们在观看电视时已经不仅仅满足于单纯的视觉享受，更想要与参与到媒体节目中，实现互动。如看到电视上一件好看的衣服就想了解该衣服的信息及购买途径，又如看到一个有趣的娱乐节目，就想要与网友交流畅谈节目内容等。

基于用户的这种需求，现在已经有了一些能够与用户进行互动的技术。其中主要有以下几种，其一，通过电脑或手机等电子设备在各种搜索引擎中人为的搜索节目信息；其二，通过在电视屏幕上显示媒体节目的二维码信息，使用户通过扫描节目二维码进入节目网站或节目微博进行互动。

然而，通过搜索引擎搜索节目的方法用户体验较差，用户需要搜索的信息量过大难以查找到喜欢的节目信息。而通过二维码进行互动的方式要求各运营商必须根据各个媒体节目分别制作二维码，需要大量的开发资金，且每个二维码只能对应一个媒体节目，兼容性较差；其次，二维码不能一直显示于电视屏幕上，容易影响用户正常观看媒体节目；此外，用户通过扫描二维码也仅仅是能够登陆节目网站或节目微博等，获得的节目互动信息有限，且互动信息的内容较为单一，用户体验较差。

发明内容

本发明实施例的目的在于提供一种媒体节目互动方法及系统，旨在解决现有的媒体节目互动方法互动信息不易获取且互动信息量有限，内容较为单一，用户体验较差的问题。

本发明实施例是这样实现的，一种媒体节目互动方法，所述方法包括：

服务器实时建立音频特征库，存储所有媒体节目的音频特征值及节目互动信息；

移动设备录制当前播放的媒体节目音频，提取所述媒体节目音频的音频特征值，并将所提取的音频特征值发送至服务器；

服务器将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配，识别当前播放的媒体节目；

服务器判定当前播放媒体节目的类型信息，并根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备。

本发明实施例的另一目的在于提供一种媒体节目互动系统，所述系统包括移动设备及服务器，其中：

移动设备包括：

媒体节目音频特征提取单元，用于录制当前播放的媒体节目音频，提取所述媒体节目音频的音频特征值，并将所提取的音频特征值发送至服务器；

服务器包括：

音频特征库建立单元，用于实时建立音频特征库，存储所有媒体节目的音频特征值及节目互动信息；

音频特征匹配单元，用于将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配，识别当前播放的媒体节目；

互动信息推送单元，用于判定当前播放媒体节目的类型信息，并根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备。

在本发明实施例中，通过将移动设备录制的媒体节目音频在提取音频特征值后，与服务器中存储的所有媒体节目音频特征值进行匹配来识别当前播放的媒体节目，使得媒体节目的识别方式更为准确。此外，在识别媒体节目后，将对应的节目互动信息推送至移动设备，通过移动设备上的操作与用户进行互动，由此能够准确、快速的将用户收看的媒体节目互动信息及时反馈给用户，反馈的节目互动信息信息量丰富，种类较多，能够满足用户的各种需求，用户体验较好。且该方法适用于所有媒体节目，使用广泛，兼容性佳。

附图说明

图1是本发明实施例提供的媒体节目互动方法的流程图；

图2是本发明实施例提供的一种音频特征值的具体实例示意图；

图3是本发明实施例提供的媒体节目互动系统的结构示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。

实施例一：

如图1所示为本发明第一实施例提供的一种媒体节目互动方法流程图，为了便于说明，仅示出了与本发明实施例相关的部分。

在步骤S11中，服务器实时建立音频特征库，存储所有媒体节目的音频特征值及节目互动信息。这里所述的媒体节目包括电视节目、电台与网络视频节目等等。

在本发明实施例中，服务器端保存有运营商发布的节目信息，录制每个运营商播放的媒体节目的音频，并分别对录制所有媒体节目音频进行处理以提取每个媒体节目音频的音频特征值。对每个媒体节目音频提取音频特征值的方法为，服务器通过将录制的媒体节目音频的PCM（Pulse-code modulation，脉冲编码调制）数据流分成若干帧，并对每帧音频数据进行傅里叶变换生成频谱信息，然后将傅立叶变换后得到的每帧频谱信息连接成对应的声谱图，最后从声谱图中每秒取若干个频率极大值点，可将所取的频率极大值点的频率值和时间点作为媒体节目音频特征值。获取每个媒体节目的音频特征值后，将所有媒体节目的音频特征值存储至音频特征库，音频特征库中每个媒体节目的音频特征值对应包括多个频率值及对应的时间点。在本发明实施例中，服务器提取每个媒体节目的音频特征值的方法与移动设备提取录制的媒体节目音频的音频特征值的方法相同，因而提取每个媒体节目的音频特征值的方法详见步骤S13，此处不再详述。其中，音频特征库中还存储有各个媒体节目的节目互动信息及各个媒体节目运营商的EPG（Electronic Program Guide，电子节目菜单）信息。

在步骤S12中，移动设备录制当前播放的媒体节目音频，提取媒体节目音频的音频特征值，并将所提取的音频特征值发送至服务器。

在本发明实施例中，为了通过移动设备实现与媒体节目的互动，则需在播放媒体节目时，开启移动设备的录音功能，通过移动设备的麦克风录制一段当前正在播放的媒体节目的音频信息。

在本发明实施例中，移动设备对所录制的媒体节目音频进行模数转换，将音频从模拟信号转换为数字信息，以此对所录制的音频进行降噪处理，并将模数转换后的音频PCM数据流存放至数组中。随后，将音频PCM数据流分成若干帧，对每帧音频PCM数据分别进行傅里叶变换，并将每帧音频在傅里叶变换后生成的频谱信息连接在一起，获得对应的声谱图。由于在声音效果中，能量较大的频率才能对声效产生较大影响，而能量较小的频率对声效的影响不大，因而需要在上述声谱图中选取能量强度最大的点，而这些能量强度最大的点对应的频率值就是对声效影响最大的点，因而将这些能量强度最大的点对应的频率值和时间点作为音效特征值。在本发明中，由于在声谱图中，灰度值越大，则该点的能量值越大，因而在声谱图中选取固定时间内灰度值最大的点，即为所需的频率极大值点。为了综合选取的频率极大值点，则采取从声谱图中每秒取若干个频率极大值点的方法，例如可预先设定一个N值，N即为每秒选取的频率极大值点的个数，若N值为3，则从声谱图中每秒取3个频率极大值点，也就是在每1/3的时间内选取灰度值最大的点作为频率极大值点。最后将所取的频率极大值点的频率值和时间点作为媒体节目音频特征值。

在本发明实施例中，获取媒体节目音频特征值后，将其存放至哈希表中，并将存储有音频特征值的哈希表发送至服务器。

在步骤S13中，服务器将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配，识别当前播放的媒体节目。

在本发明实施例中，服务器接收到当前节目音频的音频特征值后，采用特征点对的方法与音频特征库中的音频特征值进行匹配检索。具体为，服务器从接收到的音频特征值中任意选取两个连续时间点的频率值作为样本频率值，并将这两个连续时间点间隔的时间差作为样本时间差，随后，在音频特征库中的哈希表中进行查找，找出与样本频率值相等的多对频率值（由于样本频率值是两个时间点的两个频率值，因而查找到的相等频率值也都是两个频率值为一对的多对频率值），此时，依次计算查找到的每对频率值对应的时间点间隔的时间差，再将所计算出的时间差与样本时间差进行比较，选出与样本时间差相等的那对频率值，则该对频率值对应的媒体节目即为当前播放的媒体节目。若服务器将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配后，未能匹配成功，则发送提示信息至移动设备，提示用户重新录制当前播放的媒体节目音频。

下面举一个实例来进行说明。

如图2所示，左边为服务器接收到的当前播放媒体节目音频的音频特征值哈希表，右边为音频特征库中媒体节目的音频特征值哈希表。

从当前播放媒体节目音频的音频特征值哈希表中选取两个连续时间点的频率值作为样本频率值，即300.44HZ及892.31HZ，并计算出这两个频率对应时间点的间隔时间差为0.167秒。随后，在音频特征库中查找到两对与样本频率值相等的频率值，分别是对应于ad B的一对频率值，及对应于ad C的一对频率值，则计算出这两对样本频率值对应时间点的间隔时间差，得知对应于ad C的一对频率值对应的时间点间隔的时间差114.013秒，对应于ad B的一对频率值对应的时间点间隔的时间差为0.167秒，由此可知，当前播放的媒体节目即为ad B。

在步骤S14中，服务器判定当前播放媒体节目的类型信息，并根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备。

在本发明实施例中，根据所录制的音频识别的是多种类型的媒体节目，而不仅仅限于识别歌曲音频，因而服务器在识别当前播放的媒体节目后，需判定当前播放媒体节目的类型信息，其中，媒体节目的类型信息包括但不限于：广告节目，影视节目，娱乐节目及新闻节目。确定媒体节目的类型信息后，服务器便可根据媒体节目的类型信息，推送相应的节目互动信息至移动设备。如：若判定媒体节目类型信息为广告节目，则可将广告中产品的相关信息、产品的购买网址链接、购买优惠券等广告节目互动信息推送到移动设备；若判定媒体节目类型信息为影视节目，则可将影视剧节目互动信息，如影视简介、演员简介，影视观看和下载的网址，影视中演员服装、配饰等道具的介绍信息及购物链接、影视剧贴吧地址、影视剧官方微博号等发送到移动设备；若判定媒体节目类型信息为娱乐节目，则可将娱乐节目中主持人、嘉宾、节目介绍信息，节目播出时间、娱乐节目竞猜信息、节目微博、节目微信等娱乐节目互动信息发送到移动设备；若判定媒体节目类型信息为新闻节目，则可将新闻节目互动信息，如新闻的主持人名字、播出时间、新闻内容标题等发送至移动设备一一进行罗列，也可将新闻“爆料”的电话、邮箱、网址等推送至移动设备，供用户进行新闻“爆料”。

在步骤S15中，移动设备显示节目互动信息后，接收用户输入的用户互动信息，并将用户互动信息上传至网络以实现媒体节目互动。

在本发明实施例中，移动设备将收到的节目互动信息显示给用户后，用户可根据需求，输入对应的用户互动信息，则移动设备将用户互动信息上传至网络来实现用户与媒体节目的互动。例如：移动设备接收到服务器推送的当前播放的娱乐节目的官方微博地址，则用户可通过该微博地址，对当前播放的节目进行评价等。

在本发明实施例中，通过将移动设备录制的媒体节目音频在提取音频特征值后，与服务器中存储的所有媒体节目音频特征值进行匹配来识别当前播放的媒体节目，使得媒体节目的识别方式更为准确。此外，在识别媒体节目后，将对应的节目互动信息推送至移动设备，通过移动设备上的操作与用户进行互动，由此能够准确、快速的将用户收看的媒体节目互动信息及时反馈给用户，反馈的节目互动信息信息量丰富，种类较多，能够满足用户的各种需求，用户体验较好。且该方法适用于所有媒体节目，使用广泛，兼容性佳。

实施例二：

图3为本发明实施例提供的媒体节目互动系统的结构示意图，为了便于说明，仅示出了与本发明实施例相关的部份。

在本发明实施例中，该媒体节目互动系统包括移动设备1及服务器2，其中：

移动设备1包括两个单元，分别为：

媒体节目音频特征提取单元11，用于录制当前播放的媒体节目音频，提取媒体节目音频的音频特征值，并将所提取的音频特征值发送至服务器。

其中，媒体节目特征提取单元11包括三个子单元，分别为：

数据变换单元111，用于将录制的媒体节目音频的PCM数据流分成若干帧，并对每帧音频数据进行傅里叶变换。

声谱构成单元112，用于将傅里叶变换后生成的每帧频谱信息连接成对应的声谱图。

音频特征获取单元113，用于从声谱图中每秒取若干个频率极大值点，将所取的多个频率极大值点的频率值和时间点作为媒体节目音频的音频特征值。

用户信息接收单元12，用于显示节目互动信息后，接收用户输入的用户互动信息，并将用户互动信息上传至网络以实现媒体节目互动。

服务器2包括3个单元，分别为：

音频特征库建立单元21，用于实时建立音频特征库，存储所有媒体节目的音频特征值及节目互动信息。

在本发明实施例中，音频特征库建立单元21包括：

音频特征全提取单元211，用于对所有的运营商进行实时监控，获取所有实时播放媒体节目的音频特征值，并存储至音频特征库中，其中，每个媒体节目的音频特征值对应包括多个频率值及对应的时间点。

在本发明实施例中，音频特征全提取单元211提取音频特征值的方法与媒体节目特征提取单元11中提取音频特征值的方法相同。

音频特征库完善单元212，用于将所有运营商的EPG信息及所有媒体节目的节目互动信息存储至音频特征库。

音频特征匹配单元22，用于将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配，识别当前播放的媒体节目。

在本发明实施例中，音频特征匹配单元22包括三个子单元，分别为：

样本获取单元221，用于从接收到的音频特征值中选取两个连续时间点的频率值作为样本频率值，将这两个时间点的时间差作为样本时间差。

样本频率对比单元222，用于在音频特征库查找出所有与所述样本频率值相同的多对频率值。

媒体节目确定单元223，用于计算多对频率值对应的时间点的时间差，与样本时间差相等的那对频率值所对应的媒体节目即为当前播放的媒体节目。

互动信息推送单元23，用于判定当前播放媒体节目的类型信息，并根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备。

在本发明实施例中，媒体节目的类型信息包括但不限于：广告节目，影视节目，娱乐节目及新闻节目。若判定媒体节目类型信息为广告节目，则可将广告节目互动信息推送到移动设备；若判定媒体节目类型信息为影视节目，则可将影视剧节目互动信息发送到移动设备；若判定媒体节目类型信息为娱乐节目，则可将娱乐节目互动信息发送到移动设备；若判定媒体节目类型信息为新闻节目，则可将新闻节目互动信息发送至移动设备一一进行罗列等。

在本发明实施例中，通过将移动设备录制的媒体节目音频在提取音频特征值后，与服务器中存储的所有媒体节目音频特征值进行匹配来识别当前播放的媒体节目，使得媒体节目的识别方式更为准确。此外，在识别媒体节目后，将对应的节目互动信息推送至移动设备，通过移动设备上的操作与用户进行互动，由此能够准确、快速的将用户收看的媒体节目互动信息及时反馈给用户，反馈的节目互动信息信息量丰富，种类较多，能够满足用户的各种需求，用户体验较好。且该方法适用于所有媒体节目，使用广泛，兼容性佳。

本领域普通技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以在存储于一计算机可读取存储介质中，所述的存储介质，如ROM/RAM、磁盘、光盘等。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种媒体节目互动方法，其特征在于，所述方法包括：

服务器端保存运营商发布的节目信息，录制每个运营商播放的媒体节目的音频；服务器实时建立音频特征库，存储所有媒体节目的音频特征值及节目互动信息；其中，服务器便可根据媒体节目的类型信息，推送相应的节目互动信息至移动设备；

移动设备录制当前播放的媒体节目音频，提取所述媒体节目音频的音频特征值，并将所提取的音频特征值发送至服务器；

服务器将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配，识别当前播放的媒体节目；

服务器判定当前播放媒体节目的类型信息，并根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备；

若判定媒体节目类型信息为广告节目，则将广告中产品的相关信息、产品的购买网址链接、购买优惠券广告节目互动信息推送到移动设备；若判定媒体节目类型信息为影视节目，则将包括影视简介、演员简介，影视观看和下载的网址，影视中演员服装、配饰道具的介绍信息及购物链接、影视剧贴吧地址、影视剧官方微博号的影视剧节目互动信息发送到移动设备；若判定媒体节目类型信息为娱乐节目，则将包括娱乐节目中主持人、嘉宾、节目介绍信息，节目播出时间、娱乐节目竞猜信息、节目微博、节目微信娱乐节目互动信息发送到移动设备；若判定媒体节目类型信息为新闻节目，则将新闻节目互动信息，包括新闻的主持人名字、播出时间、新闻内容标题发送至移动设备一一进行罗列，并将新闻“爆料”的电话、邮箱、网址推送至移动设备，供用户进行新闻“爆料”；

其中，所述移动设备提取所述媒体节目音频的音频特征值包括：

移动设备将录制的媒体节目音频的PCM数据流分成若干帧，并对每帧音频数据进行傅里叶变换；

移动设备将傅里叶变换后生成的每帧频谱信息连接成对应的声谱图；

移动设备从所述声谱图中每秒取若干个频率极大值点，将所取的多个频率极大值点的频率值和时间点作为媒体节目音频的音频特征值；

其中，所述服务器将接收到的音频特征值与音频特征库中的音频特征值进行相似度匹配，识别当前播放的媒体节目包括：

服务器从接收到的音频特征值中选取两个连续时间点的频率值作为样本频率值，将这两个时间点的时间差作为样本时间差；

服务器在音频特征库查找出所有与所述样本频率值相同的多对频率值；

服务器计算所述多对频率值对应的时间点的时间差，与所述样本时间差相等的那对频率值所对应的媒体节目即为当前播放的媒体节目。

2.如权利要求1所述的方法，其特征在于，所述音频特征库中每个媒体节目的音频特征值对应包括多个频率值及对应的时间点。

3.如权利要求1所述的方法，其特征在于，所述服务器根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备之后，所述方法还包括：

移动设备显示所述节目互动信息后，接收用户输入的用户互动信息，并将所述用户互动信息上传至网络以实现媒体节目互动。

4.一种媒体节目互动系统，其特征在于，所述系统包括移动设备及服务器，其中：

移动设备包括：

媒体节目音频特征提取单元，用于录制当前播放的媒体节目音频，提取所述媒体节目音频的音频特征值，并将所提取的音频特征值发送至服务器；

服务器包括：

音频特征库建立单元，用于服务器端保存运营商发布的节目信息，录制每个运营商播放的媒体节目的音频；实时建立音频特征库，存储所有媒体节目的音频特征值及节目互动信息；其中，服务器便可根据媒体节目的类型信息，推送相应的节目互动信息至移动设备；

音频特征匹配单元，用于将接收到的音频特征值与音频特征库中所有媒体节目的音频特征值进行相似度匹配，识别当前播放的媒体节目；

互动信息推送单元，用于判定当前播放媒体节目的类型信息，并根据当前播放媒体节目的类型信息，推送相应的节目互动信息至移动设备；

若判定媒体节目类型信息为广告节目，则将广告中产品的相关信息、产品的购买网址链接、购买优惠券广告节目互动信息推送到移动设备；若判定媒体节目类型信息为影视节目，则将包括影视简介、演员简介，影视观看和下载的网址，影视中演员服装、配饰道具的介绍信息及购物链接、影视剧贴吧地址、影视剧官方微博号的影视剧节目互动信息发送到移动设备；若判定媒体节目类型信息为娱乐节目，则将包括娱乐节目中主持人、嘉宾、节目介绍信息，节目播出时间、娱乐节目竞猜信息、节目微博、节目微信娱乐节目互动信息发送到移动设备；若判定媒体节目类型信息为新闻节目，则将新闻节目互动信息，包括新闻的主持人名字、播出时间、新闻内容标题发送至移动设备一一进行罗列，并将新闻“爆料”的电话、邮箱、网址推送至移动设备，供用户进行新闻“爆料”；

其中，所述媒体节目音频特征提取单元包括：

数据变换单元，用于将录制的媒体节目音频的PCM数据流分成若干帧，并对每帧音频数据进行傅里叶变换；

声谱构成单元，用于将傅里叶变换后生成的每帧频谱信息连接成对应的声谱图；

音频特征获取单元，用于从所述声谱图中每秒取若干个频率极大值点，将所取的多个频率极大值点的频率值和时间点作为媒体节目音频的音频特征值；

其中，所述音频特征匹配单元包括：

样本获取单元，用于从接收到的音频特征值中选取两个连续时间点的频率值作为样本频率值，将这两个时间点的时间差作为样本时间差；

样本频率对比单元，用于在音频特征库查找出所有与所述样本频率值相同的多对频率值；

媒体节目确定单元，用于计算所述多对频率值对应的时间点的时间差，与所述样本时间差相等的那对频率值所对应的媒体节目即为当前播放的媒体节目。

5.如权利要求4所述的系统，其特征在于，所述移动设备还包括：

用户信息接收单元，用于显示所述节目互动信息后，接收用户输入的用户互动信息，并将所述用户互动信息上传至网络以实现媒体节目互动。

6.如权利要求4所述的系统，其特征在于，所述音频特征库建立单元包括：

音频特征全提取单元，用于对所有的运营商进行实时监控，获取所有实时播放媒体节目的音频特征值，并存储至音频特征库中，其中，每个媒体节目的音频特征值对应包括多个频率值及对应的时间点；

音频特征库完善单元，用于将所有运营商的EPG信息及所有媒体节目的节目互动信息存储至音频特征库。