CN110446060A - 电视的媒体信息识别方法、交互方法及设备 - Google Patents

电视的媒体信息识别方法、交互方法及设备 Download PDF

Info

Publication number
CN110446060A
CN110446060A CN201810413921.9A CN201810413921A CN110446060A CN 110446060 A CN110446060 A CN 110446060A CN 201810413921 A CN201810413921 A CN 201810413921A CN 110446060 A CN110446060 A CN 110446060A
Authority
CN
China
Prior art keywords
setting
coding
acoustic coding
sound
audio stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810413921.9A
Other languages
English (en)
Inventor
张弘
王海宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nielsen CCdata Media Research Co Ltd
Original Assignee
Nielsen CCdata Media Research Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nielsen CCdata Media Research Co Ltd filed Critical Nielsen CCdata Media Research Co Ltd
Priority to CN201810413921.9A priority Critical patent/CN110446060A/zh
Publication of CN110446060A publication Critical patent/CN110446060A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark

Abstract

本发明提供了电视的媒体信息识别方法、电视交互操作方法、电视、计算机可读存储介质及计算机设备,该识别方法包括:捕获电视播放的音频流,并从所述音频流中提取声音编码;将所述声音编码与设定编码进行比对;在比对结果一致的情况下,输出所述声音编码,以根据所述声音编码得到设定媒体信息;所述设定编码预先与所述设定媒体信息关联。本发明能够自动识别电视中的媒体信息,并将广告所展示商品进行下上线下导流,让观众更方便的进行购买,提高用户观看购买体验。

Description

电视的媒体信息识别方法、交互方法及设备
技术领域
本发明涉及电视技术领域,尤其涉及一种电视的媒体信息识别方法、电视交互操作方法、电视、计算机可读存储介质及计算机设备。
背景技术
电视上播放的电视节目中可以插入广告,广告中可以展示商品或活动等内容。如果用户希望购买看到的商品或参与看到的活动,可以通过发短信、打电话的方式实现。随着技术的进步,用户还可以通过扫描电视上显示的包含商品信息或活动信息的二维码,并通过手机上的应用APP(应用程序)将商品添加到购物车中进行购买,或者在手机上参与相应活动。无论如何,由于目前电视播放视频时无法自动识别广告或活动,所以,与电视交互的方式,每次都需要用户使用手机进行一系列操作,打扰用户观看电视节目,从而降低了用户体验。
发明内容
本发明提供一种电视的媒体信息识别方法、电视交互操作方法、电视、计算机可读存储介质及计算机设备,以自动识别电视中的媒体信息,例如广告或活动,提高观看电视节目的用户体验。
本发明实施例提供一种电视的媒体信息识别方法,包括:捕获电视播放的音频流,并从所述音频流中提取声音编码;将所述声音编码与设定编码进行比对;在比对结果一致的情况下,输出所述声音编码,以根据所述声音编码得到设定媒体信息;所述设定编码预先与所述设定媒体信息关联。
一个实施例中,将所述声音编码与设定编码进行比对,包括:接收从编码样本库下载的所述设定编码,所述编码样本库设置于所述电视或一服务器;比对所述声音编码与所述设定编码。
一个实施例中,将所述声音编码与设定编码进行比对,包括:将所述声音编码发送至一服务器,以利用所述服务器比对所述声音编码与所述设定编码,所述设定编码存储在编码样本库中,所述编码样本库设置于所述服务器。
一个实施例中,从所述音频流中提取声音编码,包括:从所述音频流中提取声音水印;所述声音水印是根据所述声音编码预先生成并被预先植入所述音频流对应的媒体资源中;根据所述声音水印解读得到所述声音编码。
一个实施例中,从所述音频流中提取声音编码,包括:从所述音频流中提取声音特征;根据所述声音特征在预先建立的声音特征与声音编码的对应表中查找所述声音编码。
一个实施例中,该电视的媒体信息识别方法还包括:在媒体资源投产前,利用一服务器从所述媒体资源提取声音信息,将所述声音信息转换为设定编码,并将转换得到的设定编码存储至编码样本库中;所述媒体资源包含所述电视播放的音频流。
一个实施例中,该电视的媒体信息识别方法还包括:在媒体资源投产前,利用一服务器从所述媒体资源中截取至少一段设定时间长度的声音,对所述至少一段设定时间长度的声音进行特征提取,为特征提取的结果建立唯一编码,并根据所述特征提取的结果和所述唯一编码生成所述的声音特征与声音编码的对应表;所述媒体资源包含所述音频流。
本发明实施例还提供一种电视交互操作方法,包括:利用电视的SDK捕获所述电视播放的音频流,并从所述音频流中提取声音编码;利用所述SDK将所述声音编码与设定编码进行比对;在比对结果一致的情况下,所述SDK输出所述声音编码;所述电视根据输出的所述声音编码得到设定媒体信息,并显示与所述设定媒体信息对应的互动信息,以获取通过遥控器返回的针对所述互动信息的用户操作信息;所述设定编码预先与所述设定媒体信息关联。
本发明实施例还提供一种电视,包括SDK,所述SDK被执行时实现上述各实施例所述的方法的步骤。
本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述各实施例所述方法的步骤。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述各实施例所述方法的步骤。
本实施例的电视的媒体信息识别方法、电视交互操作方法、电视、计算机可读存储介质及计算机设备,通过捕获电视播放的音频流,从所述音频流中提取声音编码,将所述声音编码与设定编码进行比对,以及在比对结果一致的情况下输出所述声音编码,根据所述声音编码能够得到设定媒体信息,以此能够基于声音实现自动识别电视中的媒体信息,能够提高观看电视节目的用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1是本发明一实施例的电视的媒体信息识别方法的流程示意图;
图2是本发明一实施例中将声音编码与设定编码进行比对的方法流程示意图;
图3是本发明另一实施例中从音频流中提取声音编码的方法流程示意图;
图4是本发明又一实施例中从音频流中提取声音编码的方法流程示意图;
图5是本发明一实施例的电视交互操作方法的流程示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本发明实施例做进一步详细说明。在此,本发明的示意性实施例及其说明用于解释本发明,但并不作为对本发明的限定。
图1是本发明一实施例的电视的媒体信息识别方法的流程示意图。如图1所示,该电视的媒体信息识别方法,可包括:
步骤S110:捕获电视播放的音频流,并从所述音频流中提取声音编码;
步骤S120:将所述声音编码与设定编码进行比对;
步骤S130:在比对结果一致的情况下,输出所述声音编码,以根据所述声音编码得到设定媒体信息;所述设定编码预先与所述设定媒体信息关联。
该电视可以是智能电视。可以通过安装在电视上的软件(例如SDK)实时捕获电视播放的音频流。可以即时或延时从所述音频流中提取声音编码。该设定编码可以预先存放在编码样本库中,编码样本库可以存储有多个设定编码。该设定媒体信息可以是媒体资源的相关信息,例如特定媒体资源中设定好的商品SKU(库存量单位)或设定好的参数。该媒体资源可以是广告、活动等资源,可以用于在电视上展示。该媒体资源可以来自于电视台、视频网站等。所述设定编码预先与所述设定媒体信息可以在一服务器中进行关联,并存储在该服务器中,或者可以存储在电视中。实施例中,通过对比的结果,得到相似度值,如超过阈值,可以认为为同一声音编码,可进一步认为是同一媒体信息,例如广告。上述步骤S110至步骤S130利用电视安装上的SDK(Software Development Kit,软件开发工具包)实现。
本实施例中,通过捕获电视播放的音频流,从所述音频流中提取声音编码,将所述声音编码与设定编码进行比对,以及在比对结果一致的情况下输出所述声音编码,根据所述声音编码能够得到设定媒体信息,以此能够基于声音实现自动识别电视中的媒体信息。通过本方法可以识别电视中的广告,并将广告所展示商品进行下上线下导流,让观众更方便的进行购买。
图2是本发明一实施例中将声音编码与设定编码进行比对的方法流程示意图。如图2所示,在上述步骤S120中,将所述声音编码与设定编码进行比对的方法,可包括:
步骤1211:接收从编码样本库下载的所述设定编码,所述编码样本库设置于所述电视或一服务器;
步骤1212:比对所述声音编码与所述设定编码。
编码样本库可以存储在所述电视内的存储设备或该服务器的存储设备。可以将所述声音编码与所述编码样本库中的各个设定编码进行比对,若能够找到比对一致的设定编码,则可说明比对结果一致。
实施例中,在智能电视上进行比对,样本库中的声音编码下载到智能电视SDK中,SDK实时采集到电视中的声音,同步进行声音编码比对,得到比对结果。
一些实施例中,在上述步骤S120中,将所述声音编码与设定编码进行比对,可包括:将所述声音编码发送至一服务器,以利用所述服务器比对所述声音编码与所述设定编码,所述设定编码存储在编码样本库中,所述编码样本库设置于所述服务器。
实施例中,智能电视只采集声音并转换为声音编码,将声音编码转送到服务器端,由服务器端进行声音编码与样本声音编码的比对,得到比对结果。
图3是本发明另一实施例中从音频流中提取声音编码的方法流程示意图。如图3所示,在上述步骤S120中,从所述音频流中提取声音编码,可包括:
步骤S1221:从所述音频流中提取声音水印;所述声音水印是根据所述声音编码预先生成并被预先植入所述音频流对应的媒体资源中;
步骤S1222:根据所述声音水印解读得到所述声音编码。
声音水印可以通过利用水印嵌入算法将数字水印嵌入到音频文件中得到。所述声音水印可以根据设定频率规则编码生成。可以根据设定频率的特征解读出与植入时完全一致的编码ID。这种提取声音编码的方法,不需要频繁与服务器进行大量的数据交换,在SDK所在的电视端就可以实现解码,识别效率更高,可靠性一致性好。
图4是本发明又一实施例中从音频流中提取声音编码的方法流程示意图。如图4所示,在上述步骤S120中,从所述音频流中提取声音编码,可包括:
步骤S1231:从所述音频流中提取声音特征;
步骤S1232:根据所述声音特征在预先建立的声音特征与声音编码的对应表中查找所述声音编码。
上述步骤S1231和步骤S1232可以利用安装在电视中的SDK实现。具体地,上述步骤S1231可包括,从所述音频流中截取至少一段设定时间长度的声音,并对截取的声音进行特征提取。上述步骤S1232中,在预先建立的声音特征与声音编码的对应表中,声音特征和声音编码一一对应,查找到所述声音特征,即可得到所述声音编码。这种提取声音编码的方法,可以不需要提前对媒体资源(例如节目或广告视频)进行操作,直接利用原有音频进行特征转换达到交互目的,但识别有一定延时。
一些实施例中,在上述步骤S1231中,各实施例的电视的媒体信息识别方法中,生成所述的声音特征与声音编码的对应表的方法,可包括:在媒体资源投产前,利用一服务器从所述媒体资源中截取至少一段设定时间长度的声音,对所述至少一段设定时间长度的声音进行特征提取,为特征提取的结果建立唯一编码,并根据所述特征提取的结果和所述唯一编码生成所述的声音特征与声音编码的对应表;所述媒体资源包含所述音频流。
该设定时间长度例如为大于或等于3秒,3秒以上的提取结果比较可靠。上述对应表的方法是在一服务器中生成并存储,该服务器具有处理、存储等功能即可,所处位置不作限定。
一些实施例中,各实施例的电视的媒体信息识别方法中,编码样本库的生成方法,可包括:在媒体资源投产前,利用一服务器从所述媒体资源提取声音信息,将所述声音信息转换为设定编码,并将转换得到的设定编码存储至编码样本库中;所述媒体资源包含所述电视播放的音频流。媒体资源例如可以是广告或活动的视频、音频等。
基于与上述电视的媒体信息识别方法,本发明实施例还提供一种电视交互操作方法。
图5是本发明一实施例的电视交互操作方法的流程示意图,如图5所示,该电视交互操作方法,可包括:
步骤S210:利用电视的SDK捕获所述电视播放的音频流,并从所述音频流中提取声音编码;
步骤S220:利用所述SDK将所述声音编码与设定编码进行比对;
步骤S230:在比对结果一致的情况下,所述SDK输出所述声音编码;
步骤S240:所述电视根据输出的所述声音编码得到设定媒体信息,并显示与所述设定媒体信息对应的互动信息,以获取通过遥控器返回的针对所述互动信息的用户操作信息;所述设定编码预先与所述设定媒体信息关联。
上述步骤S210至步骤S230的具体实施方式可参照上述媒体信息识别方法得知,故再此不再赘述。上述步骤S240中,所述设定编码预先与所述设定媒体信息的关联信息可以在电视之外生成,可以存储在电视的存储设备上,或存储在一服务器上(需传至电视)。当该设定媒体信息为广告信息时,该互动信息可以是确认购物的按钮;当该设定媒体信息为参与电视活动的信息时,该互动信息可以是参与投票的按钮。针对所述互动信息的用户操作信息例如可以是通过遥控器按下确认键或取消键。
本发明实施例还提供一种电视,包括SDK(安装了SDK),所述SDK被执行时实现上述各实施例所述的电视的媒体信息识别方法的步骤。
本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述各实施例所述方法的步骤。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述各实施例所述方法的步骤。
一个实施例中,电视交互操作方法,可包括:
步骤S310:捕获电视播放的音频流;
步骤S320:从所述音频流中获取设定声音编码,并触发所述电视显示所述设定声音编码对应的互动信息的事件;所述设定声音编码预先与所述互动信息关联;
步骤S330:根据针对所述互动信息返回的操作信息发送包含所述电视的ID和所述设定声音编码相关信息的操作请求信息,以在所述设定声音编码对应的应用的用户账号上完成对应所述操作请求信息的操作;所述操作信息是用户通过所述电视的遥控器返回的。
在上述步骤S310中,可以是实时捕获电视播放的音频流,例如,利用智能电视中安装的SDK捕获该智能电视所播放视频中的音频流。
在上述步骤S320中,可以通过多种不同方式从所述音频流中获取设定声音编码。例如,通过预先植入视频的声音水印获取该设定声音编码,或者通过提取声音特征获取该设定声音编码。具体地,可以通过SDK侦听音频流,并通过声音分析提取得到设定声音编码。上述互动信息例如可以是购物信息、投票活动等。互动信息例如是广告信息、投票活动等。各种设定声音编码可以在广告或节目播出前预先与设定商品SKU或参数关联。一旦识别出关联的设定声音编码就可以触发相应的事件,触发的事件可以携带互动信息发送给电视设备,电视设备可以显示该互动信息,例如将商品加入购物车的按钮、投票按钮等。电视的ID例如可以是由MAC地址、Android Id、电视账号等编码组成的唯一识别ID。
步骤S330:操作信息例如是确认将商品加入购物车(可选数量)的信息、确认投票的信息等。该应用例如是购物APP、社交媒体等。设定声音编码相关信息可以是该设定声音编码或对应该设定声音编码的商品信息等。接收到该操作请求信息的服务器可以根据电视的ID和设定声音编码查找预先存储的电视ID(电视的标识)、设定声音编码及应用的对应表,查找到同时与所述电视的ID和所述设定声音编码对应的应用的ID,从而与应用的ID进行交互,将该操作信息通过该应用ID下发给用户账号,完成相应操作,例如加入购物车、商品下单、投票等操作。其他实施例中,可以先根据电视的ID查表找到多个应用,在根据设定声音编码从该多个应用中找到对应的应用。其他实施例中,可以在电视端完成查找同时与所述电视的ID和所述设定声音编码对应的应用的ID的过程。操作请求信息还可以包括其他可能需要的信息。
根据设定规则,显示所述设定声音编码对应的互动信息;所述互动信息为交互二维码或信息提示按钮。
一些实施例中,所述互动信息包括:二维码,携带所述电视ID和所述设定声音编码;所述二维码用于与用户交互并跳转为URL,以通过所述URL发送所述电视ID和所述设定声音编码,从而绑定所述电视ID和所述应用的ID。
一些实施例中,上述步骤S320中,从所述音频流中获取设定声音编码的具体实施方式,可包括:从所述音频流中识别声音水印,并通过所述声音水印获取设定声音编码;所述声音水印是根据设定频率规则编码预先生成并被预先植入所述音频流所对应的音频中。
一些实施例中,上述步骤S320中,从所述音频流中获取设定声音编码的方法,可包括:
步骤S321:从所述音频流中提取至少一个设定声音特征;
步骤S322:在声音特征与编码的对应表中查找所述至少一个设定声音特征对应的编码,并根据查找到的编码获取设定声音编码;所述声音特征与编码的对应表是预先建立的。
一些实施例中,该电视交互操作方法,可包括:
步骤S410:接收包含电视的ID和设定声音编码相关信息的操作请求信息;所述操作请求信息是根据操作信息发送的;所述操作信息是用户通过所述电视的遥控器并针对互动信息返回的;所述互动信息是由所述电视显示并与所述设定声音编码对应的;所述设定声音编码是从所述电视播放的音频流中获取的;所述设定声音编码预先与所述互动信息关联;
步骤S420:根据所述操作请求信息将所述设定声音编码相关信息发送至与所述设定声音编码对应的应用的用户账号;所述应用已与所述电视的ID绑定。
一些实施例中,在上述步骤S420之前,即,根据所述操作请求信息将所述设定声音编码相关信息发送至与所述设定声音编码对应的应用的用户账号之前,还可包括:步骤S430:与所述应用交互,以将所述电视的ID与所述应用的ID绑定。
本发明实施例还提供一种电视交互操作系统。该电视交互操作系统,可包括:
SDK 510,用于:捕获电视播放的音频流;从所述音频流中获取设定声音编码,并触发所述电视显示所述设定声音编码对应的互动信息的事件;所述设定声音编码预先与所述互动信息关联;根据针对所述互动信息返回的操作信息发送包含所述电视的ID和所述设定声音编码相关信息的操作请求信息;
所述电视520,用于:显示所述设定声音编码对应的互动信息,并接收用户通过所述电视的遥控器返回的所述操作信息;
服务器530,用于:接收所述操作请求信息,并根据所述操作请求信息将所述设定声音编码相关信息发送至与所述设定声音编码对应的应用的用户账号;所述应用的ID已与所述电视的ID绑定。
一些实施例中,所述互动信息可包括:二维码,携带所述电视的ID和所述设定声音编码,用于使用户移动终端跳转URL携带所述电视ID和所述设定声音编码;所述服务器530,还用于:接收所述URL携带的所述电视ID和所述设定声音编码,并与所述应用交互,以绑定所述电视ID和所述应用的ID。
实施例中,智能电视,可带有操作系统,可安装软件的电视或OTT(Over The Top,互联网电视)盒子。SDK,可安装在电视中,用户不可见的系统级软件,能够获取电视机的声音特征转为声音编码,即人耳听不到的声音水印特征,SDK自身可以解读水印编码。声音水印编码库,可存放媒体方广告或节目的水印编码,以及水印编码所对应的商品或活动的编码,以便视频交互时指定内容对应指定的商品或活动。编码库,存放媒体方广告本样声音编码,将广告主提供的广告提取声音声音,放入样本库中,用于调取。媒体方,可以是电视台或视频网站等,可以是提供广告展示的媒体资源方。智能电视升级SDK后,可根据SDK传递的参数,在屏幕上显示相应的提示。用户可根据电视上的提示进行相应的操作。
以在智能电视上识别广告或内容为例,用户与电视交互的方法的实施流程,可以包括以下一个或多个步骤;
1、智能电视上安装一个SDK,可实时的捕获电视音频流。
2、获取电视音频流后提取声音编码的实现方法,可以为主动模式或被动模式:
a)主动模式,广告或节目播出前在相应视频中,植入特定频率规则的声音水印。根据统一规则,一个编码生成的声音水印植入一段视频广告或内容后,在安装了本发明的SDK智能电视播出该段视频广告或内容时,SDK可以反向通过频率规则特征解读出与植入时完全一致的编码ID。这种做法的好处是,识别效率更高,可靠性一致性好,不需要频繁与服务进行大量的数据交换,在SDK所在的电视端就可以实现解码。
b)被动模式,在广告或节目播出端的视频中不进行任何特殊处理,在需要交互的视频中截取长度不少于3秒的声音,可以是一段或多段,将截取的声音进行特征提取并一对一建立唯一编码,提取的声音特征和对应编码表下发到智能电视中,此后电视机中的SDK实时侦听音频流,当电视机播放的节目或广告声音特征与预存的特征段一致时,SDK通过对应编码表查找到编码。这样做的好处是,可以不需要提前对节目或广告视频进行操作,直接利用原有音频进行特征转换达到交互目的,缺点是识别有一定延时,需要3秒以上才能比较可靠。
3、当获得相应编码后,通过事先设定好的触发规则,将电视机ID(可能是由MAC地址、Android Id、电视账号等编码组成的唯一识别ID)与识别出来的声音编发送给电视机,电视即根据预制好的规则,在电视屏幕上显示交互二维码或者其他提示按钮,提供用户进行下一步交互。
4、如果用户手机相应APP之前没有和这台智能电视ID绑定过,则电视显示二维码,二维码中会携带电视ID和音频编码,在交互时这些参数会通过二维码跳转URL携带,发送给服务器,服务器通过和其他第三方交互,将电视ID和第三方ID绑定,之后将音频编码发送给对应第三方账号接口系统。
5、如果用户手机已经和植入SDK的智能电视绑定,则电视直接显示电视机按键确认提示,不再需要与手机交互,电视所识别出来的音频编码,直接发送带有电视ID和音频编码的请求给服务器,服务器根据预设的规则,与第三方平台对接。比如在电视上看到一件商品的广告,电视上提示按遥控器确认件加入购物车,观众用电视遥控器按确认键,这件商品自动进入第三方电商app观众自己账号的购物车里。或者观众看到投票或交互提示,也只需要用电视遥控器操作,这个操作的反馈自动到用户对应app的账号中翻译,而不需要每次都用手机进行二维码交互。
智能电视中植入本发明的SDK,SDK会侦听声音流,通过声音分析提取声音编码,声音编码会与事先关联设定好的商品SKU或者参数关联,电视端播出视频时,一旦识别关联的声音编码就会触发相应的事件,事件会携带SKU或参数发送给电视设备,电视及设备显示相应的提示。观众看到提示,如果有购买或参与互动的需求,只需要按电视机遥控器确认按钮,之后请求会发到服务端进行比对,如果这台电视没有绑定观众的手机,则需要进行一次绑定,将智能电视ID(身份认证)和手机中某个app账号绑定,绑定后观众在电视上看到的商品订单或活动信息会自动下发到观众的手机上,在不打扰观众电视内容观看的同时将信息导流在手机侧完成,让观众更方便的进行购买电视广告中的商品,或参与电视互动活动。
本发明提供了在智能电视上精确识别广告或内容的方法,并将广告或内容所展示商品或活动,通过电视遥控器进行直接交互,而不需要每次都用手机与电视交互,交互本身可以是通过电视遥控器自动向观众手机APP购物车里加商品,也可以通过电视遥控器在观众手机社交媒体账号的活动里参与投票或互动。
综上所述,本实施例的电视的媒体信息识别方法、电视交互操作方法、电视、计算机可读存储介质及计算机设备,通过捕获电视播放的音频流,从所述音频流中提取声音编码,将所述声音编码与设定编码进行比对,以及在比对结果一致的情况下输出所述声音编码,根据所述声音编码能够得到设定媒体信息,以此能够基于声音实现自动识别电视中的媒体信息,能够提高观看电视节目的用户体验。
在本说明书的描述中,参考术语“一个实施例”、“一个具体实施例”、“一些实施例”、“例如”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。各实施例中涉及的步骤顺序用于示意性说明本发明的实施,其中的步骤顺序不作限定,可根据需要作适当调整。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (11)

1.一种电视的媒体信息识别方法,其特征在于,包括:
捕获电视播放的音频流,并从所述音频流中提取声音编码;
将所述声音编码与设定编码进行比对;
在比对结果一致的情况下,输出所述声音编码,以根据所述声音编码得到设定媒体信息;所述设定编码预先与所述设定媒体信息关联。
2.如权利要求1所述的电视的媒体信息识别方法,其特征在于,将所述声音编码与设定编码进行比对,包括:
接收从编码样本库下载的所述设定编码,所述编码样本库设置于所述电视或一服务器;
比对所述声音编码与所述设定编码。
3.如权利要求1所述的电视的媒体信息识别方法,其特征在于,将所述声音编码与设定编码进行比对,包括:
将所述声音编码发送至一服务器,以利用所述服务器比对所述声音编码与所述设定编码,所述设定编码存储在编码样本库中,所述编码样本库设置于所述服务器。
4.如权利要求1所述的电视的媒体信息识别方法,其特征在于,从所述音频流中提取声音编码,包括:
从所述音频流中提取声音水印;所述声音水印是根据所述声音编码预先生成并被预先植入所述音频流对应的媒体资源中;
根据所述声音水印解读得到所述声音编码。
5.如权利要求1所述的电视的媒体信息识别方法,其特征在于,从所述音频流中提取声音编码,包括:
从所述音频流中提取声音特征;
根据所述声音特征在预先建立的声音特征与声音编码的对应表中查找所述声音编码。
6.如权利要求2或3所述的电视的媒体信息识别方法,其特征在于,还包括:
在媒体资源投产前,利用一服务器从所述媒体资源提取声音信息,将所述声音信息转换为设定编码,并将转换得到的设定编码存储至编码样本库中;所述媒体资源包含所述电视播放的音频流。
7.如权利要求5所述的电视的媒体信息识别方法,其特征在于,还包括:
在媒体资源投产前,利用一服务器从所述媒体资源中截取至少一段设定时间长度的声音,对所述至少一段设定时间长度的声音进行特征提取,为特征提取的结果建立唯一编码,并根据所述特征提取的结果和所述唯一编码生成所述的声音特征与声音编码的对应表;所述媒体资源包含所述音频流。
8.一种电视交互操作方法,其特征在于,包括:
利用电视的SDK捕获所述电视播放的音频流,并从所述音频流中提取声音编码;
利用所述SDK将所述声音编码与设定编码进行比对;
在比对结果一致的情况下,所述SDK输出所述声音编码;
所述电视根据输出的所述声音编码得到设定媒体信息,并显示与所述设定媒体信息对应的互动信息,以获取通过遥控器返回的针对所述互动信息的用户操作信息;所述设定编码预先与所述设定媒体信息关联。
9.一种电视,其特征在于,包括SDK,所述SDK被执行时实现如权利要求1至5所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1至8所述方法的步骤。
11.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至8所述方法的步骤。
CN201810413921.9A 2018-05-03 2018-05-03 电视的媒体信息识别方法、交互方法及设备 Pending CN110446060A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810413921.9A CN110446060A (zh) 2018-05-03 2018-05-03 电视的媒体信息识别方法、交互方法及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810413921.9A CN110446060A (zh) 2018-05-03 2018-05-03 电视的媒体信息识别方法、交互方法及设备

Publications (1)

Publication Number Publication Date
CN110446060A true CN110446060A (zh) 2019-11-12

Family

ID=68428024

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810413921.9A Pending CN110446060A (zh) 2018-05-03 2018-05-03 电视的媒体信息识别方法、交互方法及设备

Country Status (1)

Country Link
CN (1) CN110446060A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110174137A1 (en) * 2010-01-15 2011-07-21 Yamaha Corporation Tone reproduction apparatus and method
CN103024581A (zh) * 2012-12-26 2013-04-03 Tcl集团股份有限公司 智能电视及其节目交互实现方法、系统
CN103402118A (zh) * 2013-07-05 2013-11-20 Tcl集团股份有限公司 一种媒体节目互动方法及系统
CN105392022A (zh) * 2015-11-04 2016-03-09 北京符景数据服务有限公司 基于音频水印的信息交互方法与装置
CN106162321A (zh) * 2016-08-31 2016-11-23 成都广电视讯文化传播有限公司 一种声纹特征和音频水印相结合的音频信号识别方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110174137A1 (en) * 2010-01-15 2011-07-21 Yamaha Corporation Tone reproduction apparatus and method
CN103024581A (zh) * 2012-12-26 2013-04-03 Tcl集团股份有限公司 智能电视及其节目交互实现方法、系统
CN103402118A (zh) * 2013-07-05 2013-11-20 Tcl集团股份有限公司 一种媒体节目互动方法及系统
CN105392022A (zh) * 2015-11-04 2016-03-09 北京符景数据服务有限公司 基于音频水印的信息交互方法与装置
CN106162321A (zh) * 2016-08-31 2016-11-23 成都广电视讯文化传播有限公司 一种声纹特征和音频水印相结合的音频信号识别方法

Similar Documents

Publication Publication Date Title
CN103369363B (zh) 一种应用程序的控制方法、系统及装置
CN105392022B (zh) 基于音频水印的信息交互方法与装置
CN103763626B (zh) 一种信息推送方法、设备和系统
CN112087655B (zh) 赠送虚拟礼物的方法、装置及电子设备
CN111246126A (zh) 基于直播平台的导播切换方法、系统、装置、设备及介质
US11233664B2 (en) Methods and apparatus to identify media
EP2918026A1 (en) Improvements relating to audio visual interfaces
US20090265022A1 (en) Playback of multimedia during multi-way communications
CN102176197A (zh) 一种使用虚拟化身和实时影像进行实时互动的方法
CN101606171A (zh) 存取与元媒体数据相关组合信息的装置与方法
CN113031836B (zh) 一种直播数据处理方法、装置以及可读存储介质
CN108171160B (zh) 一种任务结果识别方法、装置、存储介质及电子设备
CN105916044A (zh) 电视节目实现移动互联网互动抽奖的方法及系统
CN101179698B (zh) 一种互动电视播放装置及其系统和播放方法
CN106375784A (zh) 评论节目和提供节目的评论信息的方法和装置
CN105120319A (zh) 一种电视互动系统推送互动信息的方法
CN110446060A (zh) 电视的媒体信息识别方法、交互方法及设备
CN110446088A (zh) 电视的媒体信息识别方法、交互方法及设备
CN114885191A (zh) 基于直播间专属昵称的互动方法、系统、装置及设备
JP7289219B2 (ja) 動画配信システム
KR20130065774A (ko) 오버레이 스트리밍을 이용한 온라인 생방송 광고 시스템 및 방법
CN111199744A (zh) 广告识别方法、设备、媒体平台、终端、服务器、介质
AU2020226993B2 (en) Methods and apparatus to identify media
CN111190518B (zh) 第一屏和第二屏之间的交互方法、装置、终端及存储介质
CN101827241A (zh) 基于数字电视多媒体平台实现互动广告的制作方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191112

RJ01 Rejection of invention patent application after publication