与电视、电台中的广告进行交互的方法及系统
技术领域
本发明涉及一种与电视、电台中的广告进行交互的方法及系统。
背景技术
音频指纹技术常用在音乐搜索领域,通过音频特征信息的比对能够利用几秒钟的音乐片段,在上百万首歌的曲库中迅速检索出目标歌曲。
另外,电视/电台广告是以电视/电台为媒体的一种广告形式。目前电视/电台广告的流转是由广告投放方投放、电视/电台播放、观众/听众被动收看/收听的形式。在这三角关系中,观众/听众缺乏及时有效的途径参与到广告互动之中,特别是感兴趣的广告,而广告的刺激作用在观众/听众离开频道后会明显衰退。
为了能够让收听/收看广告的用户反馈更加及时,增加用户收听、收看广告的参与感,本发明提供一种与电视/电台中的广告进行交互的方法及系统。
发明内容
鉴于以上所述现有技术的缺点,本发明的目的在于提供一种与电视、电台中的广告进行交互的方法及系统,用于解决现有技术中用户无法与电视/电台中播放的广告进行互动的问题。
为实现上述目的及其他相关目的,本发明提供一种与电视、电台中的广告进行交互的系统,应用于相互通信的网络设备和用户设备构成的网络架构中,其至少包括:获取单元,用于实时获取预设的电视/电台频道的第一音频信号;第一音频特征提取单元,用于从所述获取单元所获取的各第一音频信号中提取各自的第一音频特征信息;第二音频特征提取单元,用于提取所录制的电视/电台频道中的音频节段中的第二音频特征信息;音频特征处理单元,用于将各第一音频特征信息分别与预设的多个广告的音频特征信息进行匹配,建立匹配成功的第一音频信号所对应的频道、所匹配的广告的时段及相匹配的广告所预设对应的广告扩展信息的对应关系,以及将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,并根据所述对应关系确定所述时间段内的相应频道的广告及广告扩展信息;通信单元对,用于所述网络设备与用户设备之间的通信。
优选地,其特征在于,所述获取单元包括:用于接收各电台频道的音频信号的电台接入模块;用于接收各电视频道的音频信号的电视接入模块;与所述电台接入模块和电视接入模块连接的音频采集卡,用于采集预设的电台频道及电视频道的第一音频信号。
优选地,所述第一音频特征提取单元用于按照预设的音频特征提取算法从所述获取单元所采集的各频道的每一帧第一音频信号中提取相应的第一音频特征信息。
优选地,所述第二音频特征提取单元位于所述用户设备中,并将所提取的第二音频特征信息通过所述通信单元对发送至所述音频特征处理单元。
优选地,所述音频特征处理单元包括:第一广告识别模块,用于将所提取的第一音频特征信息与预设的各广告的音频特征信息进行相似性计算,若满足预设的阈值,则认定所提取的第一音频特征信息属于预设的某一广告,并建立满足所述阈值的第一音频信号所在时段、所获取的第一音频信号所属频道以及相匹配的广告所对应的广告扩展信息的对应关系。
优选地,所述音频特征处理单元包括:第二广告识别模块,用于将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,在确定所述音频节段所在频道为多个时,将多个频道提供给所述用户设备,以供用户选择一个频道,并根据所述对应关系确定所述时间段内所选择的频道的广告及广告扩展信息。
优选地,所述预设时间段为所述音频特征处理单元接收到第二音频特征信息时之前的预设时间段。
基于上述目的,本发明还提供一种与电视、电台中的广告进行交互的方法,应用于相互通信的网络设备和用户设备构成的网络架构中,其包括:1)实时获取预设的电视/电台频道的第一音频信号,并提取各频道的第一音频信号的第一音频特征信息;2)提取所录制的电视/电台频道中的音频节段中的第二音频特征信息;3)将各第一音频特征信息分别与预设的多个广告的音频特征信息进行匹配,建立匹配成功的第一音频信号所对应的频道、所匹配的广告的时段及相匹配的广告所预设对应的广告扩展信息的对应关系,以及将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,并根据所述对应关系确定所述时间段内的广告及广告扩展信息。
优选地,所述提取各频道的第一音频信号的第一音频特征信息的步骤包括:按照预设的音频特征提取算法从各频道的每一帧第一音频信号中提取相应的第一音频特征信息。
优选地,所述将各第一音频特征信息分别与预设的多个广告的音频特征信息进行匹配的步骤包括:将所提取的第一音频特征信息与预设的各广告的音频特征信息进行相似性计算,若满足预设的阈值,则认定所提取的第一音频特征信息属于预设的某一广告,并建立满足所述阈值的第一音频信号所在时段、所获取的第一音频信号所属频道以及相匹配的广告所对应的广告扩展信息的对应关系。
优选地,所述将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配的步骤还包括:将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,在确定所述音频节段所在频道为多个时,将多个频道提供给所述用户设备,以供用户选择一个频道,并根据所述对应关系确定所述时间段内所选择的频道的广告及广告扩展信息。
优选地,所述预设时间段为所述网络设备接收到第二音频特征信息时之前的预设时间段。
如上所述,本发明的与电视/电台中的广告进行交互的方法及系统,具有以下有益效果:通过提取、匹配电视/电台的音频特征信息能够实时地、准确地确定所播放的广告,同时,通过提取、匹配用户所录制的音频特征信息能够确定所录制的广告是否为所要推广的广告,若是,则将相应的广告扩展信息提供给用户,以实现电视/电台广告的互动,使观众/听众不再是被动的受众,可以及时参与广告互动中。
附图说明
图1显示为本发明的与电视、电台中的广告进行交互的系统的结构示意图。
图2显示为本发明的与电视、电台中的广告进行交互的系统的一种优选方式的结构示意图。
图3显示为本发明的与电视、电台中的广告进行交互的方法的流程图。
图4显示为本发明的与电视、电台中的广告进行交互的方法的一种优选方式的流程图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。
实施例一
如图1所示,本发明提供一种与电视、电台中的广告进行交互的系统,应用于相互通信的网络设备2和用户设备3构成的网络架构中。其中,所述网络设备2为一种能够按照预设的程序进行大量数值及逻辑运算,且与用户设备3进行通信的电子设备,其包括但不限于:服务器、基于云架构的服务器、服务器集群等。所述用户设备3包括但不限于:手机、个人电脑、平板电脑等。
本实施例中,所述交互系统包括:位于网络设备2中的获取单元11、第一音频特征提取单元12、第二音频特征提取单元13、音频特征处理单元14、及第一通信单元15,以及位于用户设备3中的第二通信单元16。
所述获取单元11用于实时获取预设的电视/电台频道的第一音频信号。
具体地,所述获取单元11包括:电台接入模块、电视接入模块、音频采集卡。
所述电台接入模块用于接收各电台频道的音频信号。其中,所述电台接入模块包括:电台天线。
所述电视接入模块用于接收个电视频道的音频信号。其中,所述电视接入模块可以包括有线电视接口、电视天线中的至少一种。
所述音频采集卡与所述电台接入模块和电视接入模块连接,用于采集预设的电台频道及电视频道的第一音频信号。
具体地,所述音频采集卡根据预设的电台频道及电视频道的频段对所接收到的电视/电台各频道的模拟音频信号进行滤波,再将所接收的预设的电台频道及电视频道的模拟音频信号进行数字化处理,以得到所述音频特征处理单元14能够处理的第一音频信号。
所述第一音频特征提取单元12用于从所述获取单元11所获取的各第一音频信号中提取各自的第一音频特征信息。
具体地,所述音频特征提取单元12实时地将来自所述获取单元11的每个频道的第一音频信号进行缓存,当缓存的某个频道的第一音频信号的时长满足预设时长时,基于时-频域变换来得到所缓存的第一音频信号的第一音频特征信息。
优选地,所述第一音频特征提取单元12用于按照预设的音频特征提取算法从所述获取单元11所采集的各频道的每一帧第一音频信号中提取相应的第一音频特征信息。其中,所述音频特征提取算法包括但不限于:基于小波的音频特征提取算法、基于时-频域转换的音频特征提取算法等。
具体地,所述第一音频特征提取单元12实时地接收所述获取单元11所采集的各频道的每一帧第一音频信号,并按照预设的音频特征提取算法来提取每一帧第一音频信号中的第一音频特征信息,并将所提取的第一音频特征信息予以保存。
所述第二音频特征提取单元13用于提取所录制的电视/电台频道中的音频节段中的第二音频特征信息。
其中,所录制的电视/电台频道中的音频节段由所述用户设备3通过第二通信单元16提供给所述第二音频特征提取单元13。例如,所述用户设备3中包含录制单元,所述录制单元可以通过外录或内录方式录制电视/电台频道中的音频节段,并将所录制的音频节段发送给所述第二音频特征提取单元13。
所述第二音频特征提取单元13提取所述音频节段中的第二音频特征信息的方式与提取所述第一音频特征的方式相同或相似,在此不再详述。
所述音频特征处理单元14用于将各第一音频特征信息分别与预设的多个广告的音频特征信息进行匹配,建立匹配成功的第一音频信号所对应的频道、所匹配的广告的时段及相匹配的广告所预设对应的广告扩展信息的对应关系,以及将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元14所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,并根据所述对应关系确定所述时间段内的广告及广告扩展信息。
具体地,所述音频特征处理单元14包括第一广告识别模块、第二广告识别模块。
所述第一广告识别模块与第一音频特征提取单元12连接,用于将各第一音频特征信息分别与预设的多个广告的音频特征信息进行匹配,建立匹配成功的第一音频信号所对应的频道、所匹配的广告的时段及相匹配的广告所预设对应的广告扩展信息的对应关系。
具体地,所述第一广告识别模块将所述第一音频特征提取单元12所提取的第一音频特征信息与每个广告的音频特征信息进行有重复或无重复地毯式匹配,当匹配度大于预设阈值时,认定所提取的第一音频特征信息属于某个广告的音频特征信息,并根据所匹配的部分在所述广告中的时间位置、所述广告的时长、以及所提取的第一音频特征信息所对应的第一音频信号的时间戳来确定所述广告播出的时段,并建立所述时段、所述第一音频信号所属频道及所匹配的广告的广告扩展信息的对应关系,并予以保存。其中,所述第一音频信号所属频道可以是一个,也可以是多个。
优选地,所述第一广告识别模块还用于将所提取的第一音频特征信息与预设的各广告的音频特征信息进行相似性计算,若满足预设的阈值,则认定所提取的第一音频特征信息属于预设的某一广告,并建立满足所述阈值的第一音频信号所在时段、所获取的第一音频信号所属频道以及相匹配的广告所对应的广告扩展信息的对应关系。
具体地,所述第一广告识别模块将所提取的第一音频特征信息与预设的各广告的音频特征信息进行相似性计算,若连续的多个计算结果均大于预设的阈值,则认定匹配成功,并认为从第一个计算结果大于所述阈值的那一帧第一音频信号的时间为预设的某一个广告的起始时间,直至连续的多个比较结果均小于所述阈值,则认为从第一个计算结果小于所述阈值的那一帧第一音频信号的时间为该段广告的结束时间,并建立所述起始时间、结束时间、所获取的音频信号所属频道以及相应的广告扩展信息之间的对应关系,并予以保存。
所述第二广告识别模块与所述第二音频特征提取单元13连接,用于将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元14所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,并根据所述对应关系确定所述时间段内的广告及广告扩展信息。其中,所述预设时间段可以是预设的固定时间段,优选地,所述预设时间段为所述第二广告识别模块接收到第二音频特征信息时之前的预设时间段。
具体地,所述第二广告识别模块从所接收的第二音频特征信息的时间开始向前倒推预设时间段,来确定所要匹配的各频道的第一音频特征信息,并按照所述第一广告识别模块的匹配方式将所述第二音频特征信息分别与所确定的各频道的第一音频特征信息进行匹配,若匹配不成功,则提示重新录音或终止本模块运行,若匹配成功,则确定所述音频节段在所述时间段内播出以及所述音频节段所在频道,所述第二广告识别模块还根据所述时间段来搜索位于所述时间段的该频道的广告及广告扩展信息,并将所述广告及广告扩展信息提供给所述用户设备3。
优选地,所述第二广告识别模块在确定所述音频节段所在频道为多个时,将多个频道提供给所述用户设备3,以供用户选择。
具体地,若两个频道在所述时间段内都播放了同一广告,则所述第二广告识别模块将所确定的两个频道均发送给用户设备3,由使用该用户设备3的用户选择一个频道,并根据所述对应关系确定所述时间段内所选择的频道的广告及广告扩展信息,再将所确定的广告及所对应的广告扩展信息提供给用户设备3。
所述第一通信单元15与所述第二通信单元16为一对通信单元对,其用于将所确定的广告及广告扩展信息发送给所述用户设备3。
所述第二通信单元16用于将所录制的音频节段发送给所述第一通信单元15,以及接收所述第一通信单元15所提供的广告及广告扩展信息。
所述交互系统的工作过程如下:
位于网络设备2中的获取单元11中的电台接入模块及电视接入模块实时获取全部电台和电视频道中的第一音频信号,并由音频采集卡进行过滤以得到预设的频道的第一音频信号,并将所述第一音频信号送入第一音频提取单元,由所述第一音频特征提取单元12提取相应的第一音频特征信息,再由音频特征处理单元14中的第一广告识别模块将所提取的第一音频特征信息与预设的各广告的音频特征信息进行相似性计算,若满足预设的阈值,则认定所提取的第一音频特征信息属于预设的某一广告,并建立满足所述阈值的第一音频信号所在时段、所获取的第一音频信号所属频道以及相匹配的广告所对应的广告扩展信息的对应关系;
与此同时,用户使用用户设备3中的录音模块录制所收听的电视/电台频道的音频节段,并将其通过第二通信单元16发送至所述网络设备2的第一通信单元15,并由所述第一通信单元15将所述音频节段提供给所述第二音频提取单元,所述第二音频提取单元提取所述音频节段中的第二音频特征信息,再由所述音频特征处理单元14中的第二广告识别模块从所接收的第二音频特征信息的时间开始向前倒推预设时间段,以确定所要匹配的各频道的第一音频特征信息,并将所述第二音频特征信息分别与所确定的各频道的第一音频特征信息进行匹配,若匹配成功,则确定所述音频节段在所述时间段内播出以及所述音频节段所在频道,所述第二广告识别模块还根据所述时间段来搜索位于所述时间段的该频道的广告及广告扩展信息,并将所述广告及广告扩展信息通过所述通信单元对(第一通信单元15及第二通信单元16)提供给所述用户。
实施例二
与实施例一不同的是,如图2所示,本实施例中的第二音频提取单元位于用户设备3中。
具体地,用户在通过用户设备3中的录音模块录音后,由所述第二音频提取单元提取所录制的音频节段的第二音频特征信息,并通过所述通信单元对将所述第二音频特征信息提供给所述音频特征处理单元14,由此,所述音频特征处理单元14从接收到所述第二音频特征信息时开始向前倒推一预设时间段,以确定所要匹配的各频道的第一音频特征信息,并将所述第二音频特征信息分别于上述各第一音频特征信息进行匹配。
实施例三
如图3所示,本发明还提供一种与电视、电台中的广告进行交互的方法。所述交互方法主要有交互系统来执行。所述交互系统位于相互通信的网络设备和用户设备构成的网络架构中。
步骤S1,所述网络设备实时获取预设的电视/电台频道的第一音频信号,并提取各频道的第一音频信号的第一音频特征信息。
具体地,所述网络设备包括:电台接入模块、电视接入模块、音频采集卡。
所述电台接入模块接收各电台频道的音频信号。其中,所述电台接入模块包括:电台天线。
所述电视接入模块接收个电视频道的音频信号。其中,所述电视接入模块可以包括有线电视接口、电视天线中的至少一种。
所述音频采集卡从所述电台接入模块及电视接入模块所接收的音频信号中采集预设的电台频道及电视频道的第一音频信号。
具体地,所述音频采集卡根据预设的电台频道及电视频道的频段对所接收到的电视/电台各频道的模拟音频信号进行滤波,再将所接收的预设的电台频道及电视频道的模拟音频信号进行数字化处理,以得到所述音频特征处理单元能够处理的第一音频信号。
接着,所述网络设备预存储预设的多个广告的音频特征信息,以及每一个广告所对应的广告扩展信息,并实时地将每个频道的第一音频信号进行缓存,当缓存的某个频道的第一音频信号的时长满足预设时长时,基于时-频域变换来得到所缓存的第一音频信号的第一音频特征信息。
优选地,所述网络设备按照预设的音频特征提取算法从所述网络设备所采集的各频道的每一帧第一音频信号中提取相应的第一音频特征信息。其中,所述音频特征提取算法包括但不限于:基于小波的音频特征提取算法、基于时-频域转换的音频特征提取算法等。
具体地,所述网络设备实时地接收所述网络设备所采集的各频道的每一帧第一音频信号,并按照预设的音频特征提取算法来提取每一帧第一音频信号中的第一音频特征信息,并将所提取的第一音频特征信息予以保存。
步骤S2,所述网络设备提取所录制的电视/电台频道中的音频节段中的第二音频特征信息。
其中,所录制的电视/电台频道中的音频节段由所述用户设备提供给所述网络设备。例如,所述用户设备可以通过外录或内录方式录制电视/电台频道中的音频节段,并将所录制的音频节段发送给所述网络设备。
需要说明的是,本领域技术人员应该理解,所述网络设备提取所述音频节段中的第二音频特征信息的方式与提取所述第一音频特征的方式相同或相似,在此不再详述。
还需要说明的是,本领域技术人员应该理解,上述步骤S1和S2并非一定按顺序的连续执行,步骤S1和S2可以同时执行。
步骤S3,所述网络设备将各第一音频特征信息分别与预设的多个广告的音频特征信息进行匹配,建立匹配成功的第一音频信号所对应的频道、所匹配的广告的时段及相匹配的广告所预设对应的广告扩展信息的对应关系,以及将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,并根据所述对应关系确定所述时间段内的相应频道的广告及广告扩展信息。
具体地,所述网络设备将所述第一音频特征提取单元所提取的第一音频特征信息与每个广告的音频特征信息进行有重复或无重复地毯式匹配,当匹配度大于预设阈值时,认定所提取的第一音频特征信息属于某个广告的音频特征信息,并根据所匹配的部分在所述广告中的时间位置、所述广告的时长、以及所提取的第一音频特征信息所对应的第一音频信号的时间戳来确定所述广告播出的时段,并建立所述时段、所述第一音频信号所属频道及所匹配的广告的广告扩展信息的对应关系,并予以保存。其中,所述第一音频信号所属频道可以是一个,也可以是多个。
优选地,所述网络设备还将所提取的第一音频特征信息与预设的各广告的音频特征信息进行相似性计算,若满足预设的阈值,则认定所提取的第一音频特征信息属于预设的某一广告,并建立满足所述阈值的第一音频信号所在时段、所获取的第一音频信号所属频道以及相匹配的广告所对应的广告扩展信息的对应关系。
具体地,所述网络设备将所提取的第一音频特征信息与预设的各广告的音频特征信息进行相似性计算,若连续的多个计算结果均大于预设的阈值,则认定匹配成功,并认为从第一个计算结果大于所述阈值的那一帧第一音频信号的时间为预设的某一个广告的起始时间,直至连续的多个比较结果均小于所述阈值,则认为从第一个计算结果小于所述阈值的那一帧第一音频信号的时间为该段广告的结束时间,并建立所述起始时间、结束时间、所获取的音频信号所属频道以及相应的广告扩展信息之间的对应关系,并予以保存。
另外,所述网络设备还将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,并根据所述对应关系确定所述时间段内的广告及广告扩展信息。其中,所述预设时间段可以是预设的固定时间段,优选地,所述预设时间段为所述第二广告识别模块接收到第二音频特征信息时之前的预设时间段。
具体地,所述网络设备从所接收的第二音频特征信息的时间开始向前倒推预设时间段,来确定所要匹配的各频道的第一音频特征信息,并按照上述匹配方式将所述第二音频特征信息分别与所确定的各频道的第一音频特征信息进行匹配,若匹配不成功,则提示重新录音或终止本模块运行,若匹配成功,则确定所述音频节段在所述时间段内播出以及所述音频节段所在频道,所述网络设备还根据所述时间段来搜索位于所述时间段的该频道的广告及广告扩展信息,并将所述广告及广告扩展信息提供给所述用户设备。
优选地,所述网络设备在确定所述音频节段所在频道为多个时,将多个频道提供给所述用户设备,以供用户选择。
具体地,若两个频道在所述时间段内都播放了同一广告,则所述网络设备将所确定的两个频道均发送给用户设备,由使用该用户设备的用户选择一个频道,并根据所述对应关系确定所述时间段内所选择的频道的广告及广告扩展信息,再将所确定的广告及所对应的广告扩展信息提供给用户设备,以供所述用户设备予以展示。
实施例四
如图4所示,在步骤S10中,所述网络设备实时获取预设的电视/电台频道的第一音频信号,并提取各频道的第一音频信号的第一音频特征信息。
在步骤S20中,所述用户设备提取所录制的电视/电台频道中的音频节段中的第二音频特征信息,并将所述第二音频特征信息发送至所述网络设备。
在步骤S30中,所述网络设备将各第一音频特征信息分别与预设的多个广告的音频特征信息进行匹配,建立匹配成功的第一音频信号所对应的频道、所匹配的广告的时段及相匹配的广告所预设对应的广告扩展信息的对应关系,以及将所述第二音频特征信息分别与预设时间段内所述第一音频特征处理单元所提取的各频道的第一音频特征信息进行匹配,以确定所述音频节段在所述时间段内播出及所述音频节段所在频道,并根据所述对应关系确定所述时间段内的相应频道的广告及广告扩展信息,并将所述广告及广告扩展信息返回至所述用户设备。
在步骤S40中,所述用户设备将广告及广告扩展信息予以展示。
综上所述,本发明的一种与电视/电台中的广告进行交互的方法及系统,通过提取、匹配电视/电台的音频特征信息能够实时地、准确地确定所播放的广告,同时,通过提取、匹配用户所录制的音频特征信息能够确定所录制的广告是否为所要推广的广告,若是,则将相应的广告扩展信息提供给用户,以实现电视/电台广告的互动,使观众/听众不再是被动的受众,可以及时参与广告互动中。所以,本发明有效克服了现有技术中的种种缺点而具高度产业利用价值。
上述实施例仅例示性说明本发明的原理及其功效,而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下,对上述实施例进行修饰或改变。因此,举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变,仍应由本发明的权利要求所涵盖。