CN103493476B - 广播具有用于在用户装置中触发适当动作的特殊内容的信息信号 - Google Patents

广播具有用于在用户装置中触发适当动作的特殊内容的信息信号 Download PDF

Info

Publication number
CN103493476B
CN103493476B CN201280020173.9A CN201280020173A CN103493476B CN 103493476 B CN103493476 B CN 103493476B CN 201280020173 A CN201280020173 A CN 201280020173A CN 103493476 B CN103493476 B CN 103493476B
Authority
CN
China
Prior art keywords
content
information signal
characteristic
watermark
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280020173.9A
Other languages
English (en)
Other versions
CN103493476A (zh
Inventor
A·D·特普斯特拉
J·A·海蒂斯玛
M·麦斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Teletrax Ltd
Original Assignee
Xi Wolu Stretches Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xi Wolu Stretches Co Ltd filed Critical Xi Wolu Stretches Co Ltd
Publication of CN103493476A publication Critical patent/CN103493476A/zh
Application granted granted Critical
Publication of CN103493476B publication Critical patent/CN103493476B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458—Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6175—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

通过用于广播广播信号的方法来解决问题，该方法包括生成信息信号，该信息信号在时间上具有到特定时刻为止的第一内容以及在此时刻之后的第二内容。将信息信号经由第一通信链路作为广播信号来广播。相对于例如为广告的第二内容提供至少一个第一特征。利用至少一个第一特征在信息信号中检测第二内容。在信息信号中检测到第二内容的情况下，从信息信号中在第二内容前的第一内容中提取至少一个第二特征。利用与第一通信链路不同的第二通信链路将至少一个第二特征发送到用户装置，所述第二通信链路比第一通信链路快。

Description

广播具有用于在用户装置中触发适当动作的特殊内容的信息信号
技术领域
本发明涉及一种对具有用于在用户装置中触发适当动作的特殊内容的信息信号进行广播的方法和系统。
背景技术
在诸如电视或者无线电广播等的广播环境中，消费者能够在诸如电视机或者收音机等的用户装置上呈现由广播机构所广播的广播内容。伴随着诸如机顶盒等的具有数据处理能力的附加用户装置的到来，使得用户能够参与内容。因此，基于广播内容在这样的装置中进行内容相关的动作变为可能。这样的动作例如可以是通过瞄准特定消费者群体、或者甚至是单个消费者的替代广告来替代瞄准一般观众的广播广告。可能已经由不同的通信链路获得了该替代广告。其它动作可以包括开启或者关闭消费者设备、在游戏中允许新级别或者作弊等。此外，允许与内容相关的用户输入。
能够通过在广播信号中检测到特殊内容的存在来触发如上所述的动作。将信息信号中特殊内容的起点称作触发点。适于此目的的用户装置可以具有用于接收允许装置检测到触发点并采取适当动作的特征的单独的输入。
广播机构能够将特殊内容添加至正在向大众广播的例如记录或者电影的内容，由此，从特殊内容中预先提取能够检测到相关联的触发点的特征。将这些特征通信至用户装置。这使得广播方能够在知道用户装置能够检测到该特殊内容的情况下，独立于在特殊内容之前的内容或者插入特殊内容的时刻并且不管诸如延迟或者节目改变等的任何临时问题而将特殊内容在任何时刻插入到内容中，并且使用户装置采取适当动作。
然而，用户装置对触发点的检测可能经历用户装置内检测电路的延迟。检测特殊内容可以耗费数秒、在某些情况下甚至是数分钟。作为结果，用户装置在接收到特殊内容时所应进行的适当动作被干扰、可能太迟、或者由于延迟导致要被替代的部分内容可能位于替代内容之前。此外，一般只有在正在广播时才知道在特殊内容之前的内容。
发明内容
因此，本发明目的在于克服上述不足。
通过一种用于广播广播信号的方法实现该目的，所述方法包括生成具有第一内容以及在第一内容后的第二内容的信息信号。经由第一通信链路将信息信号作为广播信号来广播。第二内容使得用户装置在接收到它的情况下进行适当动作。
相对于例如为广告的第二内容正在生成至少一个预先确定的第一特征。利用至少一个第一特征在信息信号中检测第二内容。在信息信号中检测到第二内容的情况下，针对信息信号中的在第二内容前的第一内容生成至少一个第二特征。利用与第一通信链路不同的第二通信链路将至少一个第二特征发送至用户装置，第二通信链路比第一通信链路快并且/或者具有更小的延迟。
利用此更快的速度，在仍在接收第一内容并且尚未接收第二内容的情况下，至少一个第二特征到达用户装置。利用至少一个第二特征，能够检测到在第二内容前的第一内容。这使得用户装置在第二内容到达之前检测到第二内容。用户装置能够在第二内容到达用户装置前或者在第二内容到达用户装置的时刻采取适当动作。因此，与检测延迟无关地进行诸如广告替代等的适当动作。
所说明的方法的另一优势在于不需要修改用户装置来减轻检测器延迟。可以根据相关技术在用户装置中进行对在第二内容之前的内容、即实际的触发点的检测。
在发明的实施例中，在信息信号中检测第二内容的步骤包括从信息信号中提取至少一个第三特征。将此特征与用于第二内容的至少一个第一特征相比较。在至少一个第三特征与至少一个第一特征相匹配的情况下生成检测信号。这使得能够完全基于在广播信号中第二内容的存在检测到第二内容。
在另一实施例中，至少一个第一特征包括第二内容的第一指纹，并且其中来自信息信号的至少一个第三特征包括第二指纹。在第一指纹和第二指纹相匹配的情况下检测到第二内容。这使得在信号指纹识别技术的基础上高效地进行对信息信号中第二内容的检测。
在另一实施例中，使用第一水印来识别第二内容。在这里，至少一个预定第一特征包括针对第二内容的第一水印的第一载荷，并且至少一个第三特征包括从信息信号所提取的第一水印的第二载荷。通过在信息信号中检测第一水印并且在检测到第一水印的情况下确定第二载荷来从信息信号提取第二载荷。在检测到第一水印并且预先确定的第一载荷与来自信息信号的第二载荷相匹配的情况下检测到第二内容。这允许基于加水印技术进行对第二内容的高度可靠的检测。
在实施例中，生成信息信号的第一内容的至少一个第二特征的步骤包括缓冲信息信号，并且在信息信号中检测到第二内容的情况下从所缓冲的信息信号提取至少一个第二特征。通过缓冲信息信号，在缓冲器中可得到在第二内容前的第一内容，从中能够提取至少一个第二特征以使得在第二内容实际到达之前在用户装置中进行对第二内容的检测。
至少一个第二特征可以是第三指纹，从而允许在用户装置中接收到第二内容前基于指纹识别技术容易地检测到第二内容。
作为指纹识别的代替，可以对广播期间的信息信号提供连续地嵌入的具有载荷的第二水印。在如上所述检测到第二内容的情况下，通过检测第二水印、确定载荷并且将第二水印的载荷用作至少一个第二特征，能够从所缓冲的具有水印的信息信号提取第二水印的载荷，其中作为缓冲的结果，至少一个第二特征与在第二内容前的第一内容相对应。这使得在信息信号中连续地嵌入的水印能够被用于在接收到第二内容前在用户装置中检测第二内容。
在另一实施例中，从信息信号的第一内容生成至少一个第二特征的步骤包括从信息信号提取至少一个第四特征、缓冲至少一个第四特征并且在如上所述检测到第二内容的情况下将所缓冲的至少一个第四特征选择作为至少一个第二特征。由于第四特征的缓冲，至少一个第二特征与信息信号中在第二内容前的第一内容相对应。
至少一个第四特征以及随后的要发送至用户装置的至少一个第二特征可以是信息信号中的内容的指纹。
作为指纹识别的代替，能够对广播期间的信息信号提供如上所述的具有载荷的连续地嵌入的第二水印。在生成信息信号前已预先插入第二水印的情况下，在检测到第二内容的情况下，通过检测第二水印并且确定载荷，能够从具有水印的信息信号提取第二水印的载荷作为至少一个第四特征。随后缓冲第二水印的载荷。在正在生成信息信号的情况下插入第二水印的情况下，不需要检测第二水印的载荷并且可以在嵌入具有该载荷的第二水印的同时缓冲第二水印的载荷。
在检测到第二内容的情况下将第二水印的所缓冲的载荷选择作为与在第二内容前的第一内容相对应的至少一个第二特征。这也使得在信息信号中连续地嵌入的水印能够被用于在接收到第二内容前在用户装置中检测第二内容。
在以上实施例的变形例中，至少一个第四特征等同于来自检测过程的至少一个第三特征，其中为了第二内容的检测，在检测过程中通过从信息信号的特征提取来获得至少一个第三特征。缓冲使得能够选择与在信息信号中的第二内容出现前的第一内容相关的至少一个第二特征。由于在缓冲器中有这样的特征，因此仅选择适当的特征就足以获得要发送至用户装置的至少一个第二特征。
使用检测器对第二内容的存在的特征提取便于容易地生成至少一个第二特征，其中至少一个第二特征与从信息信号所提取的至少一个第三特征为相同种类。
在另一实施例中，可以对信息信号提供具有载荷的第二水印。载荷可以具有连续地更新的第一时间戳，该时间戳表示生成信息信号的当前的时间以及/或者日期。生成至少一个第二特征的步骤包括在信息信号中检测到第二内容的情况下生成包括第二时间戳的至少一个第二特征，其中从第一时间戳的时间戳值求出第二时间戳值以使其对应于和在信息信号中的第二内容前的第一内容相关联的第一时间戳值。这允许在不需要缓冲信息信号或者第二水印载荷的情况下生成用户装置用以检测在第二内容前的第一内容的特征的有效方式。
在另一实施例中，生成至少一个第二特征的步骤包括在检测到第二内容的情况下生成针对第三水印的载荷。该方法还包括缓冲信息信号并且在所缓冲的信息信号的第二内容前的第一内容中嵌入第三水印。随后经由第一通信链路将具有水印的所缓冲的信息信号广播至用户装置。由生成器利用第二通信链路将第三水印的载荷作为至少一个第二特征发送至用户装置。
已预先对用户装置提供第三水印。这允许用户装置在具有经由第二通信链路所接收到的第三水印和载荷的所接收到的信息信号中进行第二内容的检测，从而能够在接收到第二内容前在第一内容中检测到水印和载荷。
在上述实施例中，至少一个第二特征能够包含信道标识以及触发点标识，信道标识以及触发点标识分别表示用户装置所要接收到的第二内容所在的信道、以及用户装置要对应于第二内容或与第二内容相关联地进行动作的第二内容的开始的识别。
本发明的目的还在用于广播广播信号的广播结构中实现，该系统包括用于生成在时间上具有到特定时刻为止的第一内容以及在此时刻后的第二内容的信息信号的第一生成器。该配置还包括用于经由第一通信链路将信息信号作为广播信号来广播的第一发送器。该配置还包括用于提供针对第二内容的至少一个第一特征的源、用于利用至少一个第一特征在信息信号中检测第二内容的检测器以及用于根据信息信号的在时间上在第二内容之前的第一内容来生成至少一个第二特征的第二生成器。该配置还包括用于经由第二通信链路将针对第一内容的至少一个第二特征发送至用户装置的第二发送器。该配置还适于执行以上描述的方法的步骤。
附图说明
图1a示出根据相关技术的用于广播广播信号的广播系统的框图。
图1b示出根据相关技术的具有触发点的广播信号的时序图。
图2a示出根据本发明的用于广播广播信号的广播系统的框图，从而提供触发点数据以及用于利用触发点数据在广播信号中检测触发点的用户装置。
图2b示出根据本发明的具有触发点的广播信号的时序图。
图3示出根据相关技术的用于在用户装置中使用的触发点检测器的框图。
图4示出根据本发明的用于广播配置的触发点检测器的框图。
图5a示出用于根据本发明的广播配置的特征生成器的框图。
图5b示出用于根据本发明的广播配置的作为代替的特征生成器的框图。
图5c示出用于根据本发明的广播配置的另一个作为代替的特征生成器的框图。
图6示出根据本发明的在连续加水印的情况下的广播配置的框图。
图7示出根据本发明的在检测到触发点的情况下对信息信号加水印的广播配置的框图。
具体实施方式
图1a中示出的根据相关技术的广播系统101、102a、102b、103、104被细分为广播配置101和用户装置103两个子系统，这两个子系统通过2个通信链路而相互连接，即作为广播链路的第一通信链路102a、102b以及使用例如互联网协议(IP)的作为数据网络连接的第二通信链路104。如图1a中所示，广播链路102a、102b通常为无线链路或无线电链路，然而也可以应用有线连接或部分有线连接以及并且部分无线连接。
广播配置101代表包括可以利用来自内容存储器的第一内容和第二内容来生成信息信号111的内容生成器110的典型广播基础设施，其中，通过第一通信链路113、102a、102b、138将信息信号111发送112至用户装置103。内容110包括可能适合于广播分发、基于帧的电视广播或者连续的无线电广播的诸如音乐唱片、电影、新闻节目、体育赛事报道等的任何第一内容。这些项可以包含特殊的第二内容或者能够以特殊的第二内容来扩展，其中，该第二内容使得用户装置103能够进行特定预编程的适当动作。这样的特殊的第二内容可以是广告或者在上述的任何内容项中的预先选择出的场景。
由于存在进行引入特殊的第二内容的各种方法，因而在图1a中未示出该过程。例如，可以在广播主内容的过程正在进行中的情况下即时(on the fly)添加这样的特殊内容。还可以预先准备并且存储包括第一内容和第二内容的用于广播的内容，其中例如将电影和其它内容与特殊的第二内容混合并且在更晚的时间广播。在使用时隙的脚本中，还可以在第一内容中指定特殊的第二内容。
将特殊第二内容的开始定义为触发点。可以在进行广播之前分析特殊第二内容以提取与触发点相关的特征，其中，该特征使得用户装置103在接收到102b、130广播信号的情况下能够检测到特殊内容并且采取适当的动作。这样的特征可以在特殊内容正在被插入到主内容中的情况下即时生成并且发送116至用户装置，或者，这样的特征可以存储在触发点特征存储库114中、在广播内容之前从该存储库将这些特征115经由第二通信链路117、104、139发送116至用户装置103。在实践中，信息信号的生成以及触发点特征存储库的维护可以由诸如广播组织和广告代理等的不同的组织分别来控制。
与触发点相关的附加信息可以是触发点标识、接收到触发点的用户装置103所要采取的诸如广告替代等的期望动作中的至少一个，并且该附加信息例如也可以涉及替代内容。附加触发点信息也可以存储在触发点特征存储库114中并且随后被通信至用户装置103，从而允许在检测到触发点特征的情况下适当地识别触发点并且采取所要的动作。附加信息还可以包括要出现触发点的信道标识，以防止用户装置103在与意图不同的信道上接收到触发点的、未预见到适当动作的情况下被假触发。
如今各种用户装置103都具有互联网连接，因此触发点特征115可以使用数据连接117、104、139经由使用例如但不限于互联网协议(IP)的互联网来发送116。
图1a的典型用户装置103具有用于接收广播内容的广播通信链路102a、102b的输入138。接收器130恢复从广播系统101所广播的具有第一内容和第二内容的信息信号132。将内容供给至呈现装置131，其中，装置131例如可以是图形显示单元、或者用于将信息信号变换成用于在例如电视机单元中进一步处理的调制信号的装置。
经由接收器135的输入139接收到与第二内容相关的包括特征和非强制的附加信息的触发点信息。将触发点的特征136发送至检测器133。在检测到相关联的触发点的情况下，使得诸如触发点标识或者其它附加信息等的附加信息137对呈现装置131可用以进行处理。
图1b示出具有第一内容118和第二内容119的信息信号的示例。第二内容从时刻T1持续到时刻T3。图1b中的信号在T1具有表示从第一内容118到第二内容119的改变的、具有从时刻T1持续到时刻T2的特征120的触发点，其中通过特征120可以检测到该触发点。在用户装置103接收到130此信息信号的情况下，可以利用已经从广播系统101的触发点存储库114接收到的与触发点相关的特征检测到133触发点。检测器133可能需要从时刻T1到时刻T2来接收特征并且从T2到T2+L来检测触发点，其中时刻T2到T2+L(121)为检测器延迟。因此，由用于接收触发点特征的时间和用于检测的时间确定了总延迟Ltot=T2-T1+L。
在例如指示呈现单元131利用针对用户装置103的个体用户的预先存储的广告来替代第二内容的情况下，在时刻T1至时刻T2+L期间仍对用户显示第二内容119。这是不期望的状况。
图3示出在用户装置103中用于在信息信号132中检测触发点的检测器133的示例。检测器133从接收器135接收到与触发点相关的特征136并且将其存储在缓冲器305中。提取器301从信息信号提取特征，该特征302被提供至匹配单元303。匹配单元303将特征302与缓冲器305中的特征304相匹配。可以通过将所提取的特征302与所缓冲的特征304进行逻辑比较来判断匹配，或者通过将所提取的特征302与所缓冲的特征进行数学比较来判断匹配。后者可以涉及相关函数。在发现匹配的情况下，将匹配信号134发送至可以接着采取适当的动作的呈现单元131。
图2a示出具有根据本发明的广播配置101和用户装置103的广播系统，将广播配置101配置为用于广播内容并且为用户装置103生成触发点特征。广播配置101包括触发点特征存储库114以及具有第一内容和第二内容的信息信号111用的生成器110。检测器201利用来自触发点存储库114的特征115来检测作为信息信号中第二内容的开始的触发点，并且在发现匹配的情况下产生匹配检测信号202。在广播配置101的检测器201中使用的用于判断在信息信号111的内容中的特征与来自触发点存储库114的特征115之间的匹配的匹配功能与用户装置103的检测器133中的匹配功能相似。
在信息信号111中检测到202触发点的情况下，特征生成器203从在第二内容119前的第一内容118提取特征204。接着这些特征204被供给至发送器116，在适用的情况下以诸如触发点标识或者信道标识等来自原始触发点115的附加触发点信息来完善特征204，并且经由第二通信链路117、104、139将特征204发送至用户装置103。
在发送中，假定经由第一通信链路113、102a、102b、138的广播信号相对于第二通信链路117、104、139容易发生延迟或者比第二通信链路117、104、139慢。因此，触发点信息204在与第二内容相关的触发点到达之前到达用户装置103。则用户装置103能够在触发点已实际到达用户装置之前，利用在触发点即在第二内容之前的第一内容中所接收到的(见图1a中136)新特征来检测触发点。
图2b示出具有第一内容118和第二内容119的信息信号111的时序图，其中示出了在根据图1a在第二内容119中检测到原始触发点的情况下，生成器203可以在信息信号111中从触发点前的、第一内容的从时刻T4起到T1的部分206提取特征，该特征204被发送116至用户装置103。此外，生成器203可以生成特征、将该特征嵌入(见图7)信息信号的在第二内容前的第一内容中，并且将该特征发送至用户装置103。用户装置103经由第一通信链路102a、102b、138接收到130具有特征的信息信号132，其中可以利用接收到的特征来检测133特征。通过相对于T1采用合适的时刻T4，能够补偿检测触发点的总延迟Ltot。
图4示出了用于在广播配置101中使用的检测器201。提取器401从信息信号111中提取特征402。在匹配单元403中将提取出的特征402与来自触发点特征存储库114的特征115匹配。在使用所述的匹配函数而发生匹配的情况下，将匹配检测信号202发送至提取器203。此外，特征存储库114可以包括与特征相关联的触发点标识。因此检测器201可以包括与匹配检测信号202中检测到的第二内容相关联的触发点标识。
特征提取可以基于诸如指纹识别和水印等的各种技术。
指纹识别在信号处理即视频和音频信号处理的领域中是一种众所周知的技术。指纹识别适用于基于以下中的至少一个从信息信号的内容所判断出的特征，其中对于连续信号为信号幅度水平、信号包络、频率内容等，并且对于基于帧的信号为形状的存在、运动、颜色构成等。相应地在检测器201的实施例中，可以将从信息信号111中所提取401的指纹402与预存的指纹115相匹配403。在匹配的情况下，检测器201随后输出检测到第二内容以及在适用的情况下的触发点标识值的匹配检测信号202。
水印也是信号处理领域中的一种众所周知的技术。水印涉及到使用例如伪随机码在信息信号中嵌入附加信息，以使得附加信息几乎不可见并且不会打扰观众。可以将水印和载荷一起嵌入。载荷是指添加至水印的附加数据。这些数据例如可以包含时间戳和信道标识。这可以通过添加表示当前时间和/或日期的时间戳、连续更新的计数器值或者与在信息信号中的内容项相关的标识数字以及这些的组合来进行。这样使得能够使用载荷来识别并且区分信息信号中不同部分的内容。
可以对第二内容设置水印，其中载荷是触发点的标识。这使得能够检测作为具有相同水印但是各自具有不同载荷的第二内容的例如各种广告。相应地在检测器201中，提取器401在信息信号111中检测针对第二内容的水印并且提取载荷。
在载荷包含触发点特征的情况下，检测器则可以输出对水印和触发点特征值的检测作为匹配检测信号202。这在图4中未示出。
在要基于一组触发点特征进行检测的情况下，随后能够将载荷与表示用户装置所要进行适当动作的触发点特征的预存载荷115相匹配403。在匹配的情况下，检测器201随后输出检测到第二内容以及触发点特征值所适用的位置的匹配检测信号202。
图5a示出特征生成器203的示例。将信息信号111存储在缓冲器501中以使得信息的某些历史可用于特征提取。换言之，所缓冲的信息信号502行为如同延迟的信息信号111那样。在检测到第二内容202的情况下，提取器503从所缓冲的信息信号502提取至少一个第二特征。缓冲器501的延迟使得能够在信息信号中的第二内容出现之前从信息信号提取出至少一个第二特征。接着，将所提取的至少一个第二特征转发至发送器116以发送117、104、139至用户装置103。
图5b示出用于特征生成器203的代替的结构。提取器单元510从信息信号111提取特征。将特征511存储在缓冲器504中，从而相对于信息信号111中的原始触发点，为选择器506在检测器201中检测到匹配202的情况下从缓冲器504选择与在触发点前的第一内容相对应的特征505提供了充分的延迟。接着，将所选择的特征作为至少一个第二特征204转发至发送器116以发送117、104、139至用户装置103。
图5c示出特征生成器203的另一个代替的结构，其中所要发送的至少一个第二特征与用于第二内容的检测的至少一个第三特征具有相同的类型。特征生成器203使用检测器201的提取单元401的输出402以从信息信号111获得特征。将特征402存储在缓冲器507中，从而相对于在信息信号111中的原始触发点、为选择器509在检测器201中检测到匹配202的情况下从缓冲器507选择与在触发点前的第一内容相对应的特征508提供了充足的延迟。接着，将所选择的特征作为至少一个第二特征204转发至发送器116以发送117、104、139至用户装置103。
在对图5a-5c的说明中提取器401、503和510可以与指纹识别相关。因此，特征402、511以及随后的至少一个第二特征204可以是通过指纹识别处理而获得的特征。
作为代替，在对图5a至5c的说明中，提取器401、503和510可以与水印相关。因此，特征402、511以及随后的至少一个第二特征204可以是通过水印提取处理而获得的载荷。在例如对第一内容设置具有载荷的水印的情况下，提取器401、503或者510能够检测到水印并且提取载荷，其中该载荷作为允许用户装置103在第二内容出现前检测到触发点、即第二内容的特征204而被转发。
由于例如广告可能同时存在于各种广播信道，因此不期望用户装置在出现在错误信道上的触发点采取行动。已经提到能够将附加触发点信息与至少一个第二特征一起经由第二通信链路117、104、139提供，其中要通过该至少一个第二特征来检测触发点。信道标识构成这样的附加信息。此外，为了确保能够在用户装置103中唯一地识别信道，可以对广播信号113设置具有作为载荷的信道标识的水印。图6中示出用于对广播信号加水印的示例。
图6示出根据本发明的连续加水印的广播配置的框图。嵌入器601在信息信号111中连续地嵌入具有载荷的水印“W”，其中载荷能够具有值随着当前时间和/或日期连续更新的时间戳以及可选的信道标识。
现在，对如上所述的加了水印的信息信号602进行第二内容的检测201以及至少一个第二特征204的生成203。图6中的检测201是在嵌入水印“W”之后。技术人员能够理解也可以在嵌入601水印“W”之前在信息信号111中进行对第二内容的检测201。水印的嵌入601是为了生成203用于用户装置103的至少一个第二特征的实施例。
在检测到202触发点的情况下，除了触发点的特征(指纹)以外，在至少一个第二特征204中可以包括当前的时间戳值和信道标识信息。在用户装置103处能够连续地检测到水印W。在例如通过指纹匹配来检测133触发点的情况下，载荷中的时间戳和信道标识能够辅助对信道和时间的检查，或者可以用于加速检测。
在检测到202触发点的时刻，特征生成器203可以可选地使用当前时间戳和/或信道标识以向用户装置103提供代替的至少一个第二特征。从载荷603所取得的时间戳值表示对第二内容的检测202时间。可以使用当前时间戳值来生成至少一个第二特征204，以通过例如用与第二内容的检测相关联的时间戳值减去与在第一内容的出现和第二内容的检测之间所经过的时间成比例的时间，来求出与同在触发点前的第一内容相关联的水印“W”载荷的时间戳值相对应的时间戳值。可以将所求出的时间戳值以及当适用时、诸如触发点标识和信道标识等的触发点的进一步细节发送至用户装置103。专业人士能够理解在载荷中使用以规律的间隔更新的计数器值能够实现相似的效果，其中，通过该值能够识别信息信号602中不同部分的内容。
连续地监视接收到的信息信号132中的水印W的用户装置103检测载荷，并且将载荷中的时间戳值与从广播配置101接收到的所求出的时间戳值相匹配，并且在接收到触发点前相应地进行其适当的动作131。
图7示出根据本发明的在检测到触发点的情况下对信息信号加水印的广播配置的框图。在缓冲器701中延迟信息信号111。在检测到201第二内容的情况下，特征生成器203生成载荷204。将该载荷添加至水印X并且在延迟的信息信号702中嵌入到触发点前的第一内容中。载荷可以包含由检测器201所检测到的触发点的特征，或者可以具有包括结合图6所述的时间戳和信道标识的一般形式。现在，代替指纹，至少一个第二特征204包括第一内容中的水印X中的载荷。在用户装置103中，代替指纹而对该载荷进行检测133。
作为代替，可以考虑在检测202到第二内容的情况下生成203唯一的水印并且将此水印嵌入703延迟的信息信号702中，并且将唯一的水印作为至少一个第二特征204发送至用户装置103。在这种情况下，用户装置103能够使用唯一的水印检测133触发点。
仅以示例给出以上所述的实施例。技术人员明显能够在不偏离如以下权利要求书所阐述的发明的范围的情况下对这些实施例进行变形。

Claims (14)

1.一种用于广播(112)广播信号(113)的方法，包括:
生成(110)具有第一内容(118)以及随后的第二内容(119)的信息信号(111)；
经由第一通信链路(113、102a)广播(112)所述信息信号(111)；
生成(114)针对所述第二内容的预定的至少一个第一特征(115)；
利用所述预定的至少一个第一特征(115)在所述信息信号(111)中检测(201)所述第二内容；
在所述信息信号中检测到(202)所述第二内容的情况下，生成(203)针对所述信息信号(111)中在所述第二内容前的所述第一内容的至少一个第二特征(204)；
经由第二通信链路(117，104，139)将针对所述第一内容的所述至少一个第二特征(204)发送至用户装置(103)。
2.根据权利要求1所述的方法，其中，所述检测(201)包括：
从所述信息信号(111)提取(401)至少一个第三特征(402)；
将所述至少一个第三特征(402)与针对所述第二内容的所述预定的至少一个第一特征(115)相比较；
在所述至少一个第三特征(402)与所述至少一个第一特征(115)相匹配的情况下生成检测信号(202)。
3.根据权利要求2所述的方法，其中，
所述预定的至少一个第一特征(115)包括针对所述第二内容的第一指纹；以及
其中，来自所述信息信号(111)的所述至少一个第三特征(402)包括第二指纹。
4.根据权利要求2所述的方法，其中，所述预定的至少一个第一特征(115)包括针对所述第二内容的第一水印的第一载荷，其中所述至少一个第三特征(402)包括来自所述信息信号(111)的所述第一水印的第二载荷；以及
其中，提取所述至少一个第三特征(402)包括检测所述第一水印；以及
在检测到所述第一水印的情况下确定所述第二载荷。
5.根据权利要求1至4中的任何一项所述的方法，其中，所述生成(203)针对所述信息信号(111)的在所述第二内容前的所述第一内容的所述至少一个第二特征(204)包括：
缓冲(501)所述信息信号(111)；以及
在所述信息信号(111)中检测到(202)所述至少一个第一特征(115)的情况下从所缓冲的信息信号(502)提取在所述第二内容前的所述第一内容的所述至少一个第二特征(204)。
6.根据权利要求5所述的方法，其中，
所述至少一个第二特征(204)是第三指纹。
7.根据权利要求5所述的方法，其中，还包括：
对所述信息信号(111)设置(601)具有载荷的第二水印(W)，其中，利用加水印的信息信号(602)执行所述方法；其中，
从所缓冲的信息信号(502)提取(503)所述至少一个第二特征(204)包括检测所述第二水印(W)并且确定所述第二水印(W)的载荷；
其中，所述至少一个第二特征包括所述第二水印(W)的载荷。
8.根据权利要求1至4中的任何一项所述的方法，其中，生成(203)针对所述信息信号(111)的所述第一内容的所述至少一个第二特征(204)包括：
从所述信息信号(111)提取(510)至少一个第四特征(511)；
缓冲(504)所述至少一个第四特征(511)；
在所述信息信号(111)中检测到(202)所述至少一个第一特征的情况下，从所缓冲的至少一个第四特征(505)中选择(506)所述至少一个第二特征(204)。
9.根据权利要求8所述的方法，其中，所述至少一个第四特征(511)是第四指纹。
10.根据权利要求8所述的方法，其中，还包括：
对所述信息信号(111)设置(601)具有载荷的第二水印(W)，其中，利用加水印的信息信号(602)来执行所述方法；其中，
提取(510)所述至少一个第四特征(204)包括在所述加水印的信息信号(602)中检测所述第二水印并且确定所述第二水印的载荷；以及
其中，所述至少一个第四特征是所确定的所述第二水印的载荷。
11.根据权利要求1至4中的任何一项所述的方法，其中，还包括：
对所述信息信号(111)设置(601)具有载荷的第二水印，其中，
生成(203)针对所述信息信号(111)的所述第一内容的所述至少一个第二特征(204)包括：
缓冲(504)所述第二水印(W)的载荷；
在所述信息信号(111)中检测到(202)所述至少一个第一特征的情况下，从所缓冲的所述第二水印(W)的载荷(502)选择至少一个所述第二水印(204)。
12.根据权利要求1至4中的任何一项所述的方法，其中，还包括：
对所述信息信号(111)设置(601)具有载荷的第二水印(W)，其中，所述第二水印的载荷包括第一时间戳；以及
其中，生成(203)针对所述信息信号(111)的所述第一内容的所述至少一个第二特征(204)包括：
在检测到(202)所述第二内容的情况下，生成具有根据来自所述载荷(603)的所述第一时间戳求出的第二时间戳的所述至少一个第二特征(204)，以使得所述第二时间戳对应于与所述信息信号中在所述第二内容前的所述第一内容相关联的所述第一时间戳的值。
13.根据权利要求1至4中的任何一项所述的方法，其中，生成所述至少一个第二特征(204)包括：
在检测到所述第二内容的情况下生成第三水印(X)的载荷；所述方法还包括：
缓冲(701)所述信息信号(111)；以及
将具有载荷(204)的所述第三水印(X)嵌入(703)到所缓冲的信息信号(702)中在所述第二内容前的所述第一内容中；以及
经由所述第一通信链路来广播(112)所缓冲的加水印的信息信号(704)。
14.一种用于广播(112)广播信号(113)的广播装置，包括：
第一生成器(110)，用于生成具有第一内容(118)以及随后的第二内容(119)的信息信号(111)；
第一发送器(112)，用于经由第一通信链路(102a)将所述信息信号(111)作为广播信号(113)来广播；
源(114)，用于生成针对所述第二内容的至少一个第一特征(115)；
检测器(201)，用于利用所述至少一个第一特征(115)在所述信息信号(111)中检测所述第二内容；
第二生成器(203)，用于在所述信息信号(111)中检测到所述第二内容的情况下，生成针对所述信息信号的在所述第二内容(119)前的所述第一内容(118)的至少一个第二特征(204)；
第二发送器，用于经由第二通信链路(117，104，139)将针对所述第一内容的所述至少一个第二特征(204)发送(116)至用户装置(103)，其中，所述广播装置还用于执行根据权利要求1至13中的任何一项所述的方法的步骤。
CN201280020173.9A 2011-02-24 2012-02-21 广播具有用于在用户装置中触发适当动作的特殊内容的信息信号 Active CN103493476B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161446161P 2011-02-24 2011-02-24
NL2006291 2011-02-24
US61/446,161 2011-02-24
NL2006291A NL2006291C2 (en) 2011-02-24 2011-02-24 Broadcasting an information signal having special content for triggering an appropriate action in user device.
PCT/NL2012/050102 WO2012115511A1 (en) 2011-02-24 2012-02-21 Broadcasting an information signal having special content for triggering an appropriate action in a user device.

Publications (2)

Publication Number Publication Date
CN103493476A CN103493476A (zh) 2014-01-01
CN103493476B true CN103493476B (zh) 2014-12-03

Family

ID=44558493

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280020173.9A Active CN103493476B (zh) 2011-02-24 2012-02-21 广播具有用于在用户装置中触发适当动作的特殊内容的信息信号

Country Status (6)

Country Link
US (2) US20140059591A1 (zh)
EP (1) EP2679002B1 (zh)
JP (1) JP5490337B1 (zh)
CN (1) CN103493476B (zh)
NL (1) NL2006291C2 (zh)
WO (1) WO2012115511A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9609278B2 (en) 2000-04-07 2017-03-28 Koplar Interactive Systems International, Llc Method and system for auxiliary data detection and delivery
US7330511B2 (en) 2003-08-18 2008-02-12 Koplar Interactive Systems International, L.L.C. Method and system for embedding device positional data in video signals
US20090111584A1 (en) 2007-10-31 2009-04-30 Koplar Interactive Systems International, L.L.C. Method and system for encoded information processing
US8582781B2 (en) 2009-01-20 2013-11-12 Koplar Interactive Systems International, L.L.C. Echo modulation methods and systems
US8715083B2 (en) 2009-06-18 2014-05-06 Koplar Interactive Systems International, L.L.C. Methods and systems for processing gaming data
US9292894B2 (en) 2012-03-14 2016-03-22 Digimarc Corporation Content recognition and synchronization using local caching
US9161079B1 (en) * 2013-02-26 2015-10-13 Ryan Justin Ekedal Television advertisement system and method
US10504200B2 (en) 2014-03-13 2019-12-10 Verance Corporation Metadata acquisition using embedded watermarks
CN106170988A (zh) 2014-03-13 2016-11-30 凡瑞斯公司 使用嵌入式代码的交互式内容获取
WO2016028936A1 (en) 2014-08-20 2016-02-25 Verance Corporation Watermark detection using a multiplicity of predicted patterns
US9942602B2 (en) 2014-11-25 2018-04-10 Verance Corporation Watermark detection and metadata delivery associated with a primary content
EP3225034A4 (en) 2014-11-25 2018-05-02 Verance Corporation Enhanced metadata and content delivery using watermarks
WO2016100916A1 (en) 2014-12-18 2016-06-23 Verance Corporation Service signaling recovery for multimedia content using embedded watermarks
US11356747B2 (en) * 2018-12-21 2022-06-07 The Nielsen Company (Us), Llc Apparatus and methods to associate different watermarks detected in media
US11095944B2 (en) * 2019-08-19 2021-08-17 Roku, Inc. Content-modification system with broadcast schedule utilization feature
US11722741B2 (en) 2021-02-08 2023-08-08 Verance Corporation System and method for tracking content timeline in the presence of playback rate changes

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007130681A2 (en) * 2006-05-05 2007-11-15 Sony Computer Entertainment America Inc. Advertisement rotation
CN102291607A (zh) * 2010-06-21 2011-12-21 埃森哲环球服务有限公司 精确到帧的内容插入系统

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7895076B2 (en) 1995-06-30 2011-02-22 Sony Computer Entertainment Inc. Advertisement insertion, profiling, impression, and feedback
US20020162118A1 (en) * 2001-01-30 2002-10-31 Levy Kenneth L. Efficient interactive TV
US9349411B2 (en) * 2002-07-16 2016-05-24 Digimarc Corporation Digital watermarking and fingerprinting applications for copy protection
US7694318B2 (en) * 2003-03-07 2010-04-06 Technology, Patents & Licensing, Inc. Video detection and insertion
US20040237102A1 (en) * 2003-03-07 2004-11-25 Richard Konig Advertisement substitution
EP1647144A1 (en) * 2003-07-11 2006-04-19 Koninklijke Philips Electronics N.V. Method and device for generating and detecting a fingerprint functioning as a trigger marker in a multimedia signal
JP4494821B2 (ja) * 2004-02-16 2010-06-30 株式会社リコー コンテンツ・メタデータ送受信システム、コンテンツ・メタデータ同期方法、その方法をコンピュータに実行させるプログラム、並びに受信端末
KR20070046846A (ko) * 2004-08-12 2007-05-03 코닌클리케 필립스 일렉트로닉스 엔.브이. 비디오 또는 오디오 데이터 스트림으로부터의 콘텐트 선택
US9591265B2 (en) * 2008-12-29 2017-03-07 Google Technology Holdings LLC System and method for interactive advertising via network generated overlays
US9015741B2 (en) * 2009-04-17 2015-04-21 Gracenote, Inc. Method and system for remotely controlling consumer electronic devices

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007130681A2 (en) * 2006-05-05 2007-11-15 Sony Computer Entertainment America Inc. Advertisement rotation
CN102291607A (zh) * 2010-06-21 2011-12-21 埃森哲环球服务有限公司 精确到帧的内容插入系统

Also Published As

Publication number Publication date
JP5490337B1 (ja) 2014-05-14
WO2012115511A1 (en) 2012-08-30
US20200336774A1 (en) 2020-10-22
CN103493476A (zh) 2014-01-01
NL2006291C2 (en) 2012-08-27
EP2679002B1 (en) 2017-02-01
US11223854B2 (en) 2022-01-11
US20140059591A1 (en) 2014-02-27
EP2679002A1 (en) 2014-01-01
JP2014511611A (ja) 2014-05-15

Similar Documents

Publication Publication Date Title
CN103493476B (zh) 广播具有用于在用户装置中触发适当动作的特殊内容的信息信号
US12010380B2 (en) Methods and apparatus to measure exposure to streaming media
US10616647B2 (en) Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
CN104429091B (zh) 用于识别媒体的方法和装置
KR100406122B1 (ko) 디지털 데이터 방송을 위한 동기화 데이터 삽입 장치 및그 방법
US7930714B2 (en) Video detection and insertion
KR101310943B1 (ko) 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법
CN103747298B (zh) 电视视频广告节目替换方法和装置
JP2019201415A (ja) 複数一致検出とロケーションに基づく曖昧性排除とを用いたメディアチャネル識別
EP2918026A1 (en) Improvements relating to audio visual interfaces
KR101358807B1 (ko) 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법 및 이를 구현하기 위한 시스템
CN108702543A (zh) 基于音频指纹的视频多匹配检测和对媒体频道识别消歧
GB2399975A (en) Charging for advertisement substitution
JP2013531937A (ja) 放送に含まれた広告に関連した情報をクライアント端末機側へネットワークを介して提供するシステム及び方法
WO2018229788A1 (en) System for low-latency detection of known audio-video content using audio fingerprinting and audio watermarking
CN102714709A (zh) 通过媒体内容的上下文对准目标的广告
TWI788701B (zh) 用於使用帶內元資料作為存取參考指紋的基礎來促進與內容相關的動作的方法及媒體客戶端
MX2015001908A (es) Aparato y metodo para procesar un servicio interactivo.
CN111405368A (zh) 在观众测量装置中执行音频传感器选择的方法和设备
CN105103566A (zh) 用于标识视频片段以便显示上下文相关内容的系统和方法
TW202249492A (zh) 使用隱寫編碼資料作為基礎來消歧基於指紋的頻道多匹配
KR101741747B1 (ko) 실시간 광고 삽입이 가능한 영상 광고 처리 장치 및 방법
CN105635841A (zh) 互动播出的控制方法和系统
CN107172451B (zh) 视频播放控制方法及装置
KR20120120369A (ko) 사용자에 의해 수신되는 비디오 프로그램을 검출하기 위한 방법 및 서버

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151124

Address after: The city of Eindhoven in Holland

Patentee after: Teletrax Ltd

Address before: The city of Eindhoven in Holland

Patentee before: Xi Wolu stretches Co., Ltd