CN114072789B - 具有基于地理区域的特征的内容修改系统 - Google Patents

具有基于地理区域的特征的内容修改系统 Download PDF

Info

Publication number
CN114072789B
CN114072789B CN202080049028.8A CN202080049028A CN114072789B CN 114072789 B CN114072789 B CN 114072789B CN 202080049028 A CN202080049028 A CN 202080049028A CN 114072789 B CN114072789 B CN 114072789B
Authority
CN
China
Prior art keywords
content
presentation device
fingerprint data
channel
identified
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080049028.8A
Other languages
English (en)
Other versions
CN114072789A (zh
Inventor
安德鲁·劳伦斯·阿什巴赫
史蒂文·迈克尔·科米
约珥·迈克尔·柯尔
约翰·L·海恩斯三世
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Liuke Co ltd
Original Assignee
Liuke Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Liuke Co ltd filed Critical Liuke Co ltd
Publication of CN114072789A publication Critical patent/CN114072789A/zh
Application granted granted Critical
Publication of CN114072789B publication Critical patent/CN114072789B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471Distributed queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • G06F16/436Filtering based on additional data, e.g. user or group profiles using biological or physiological data of a human being, e.g. blood pressure, facial expression, gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/907Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/909Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9537Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/24Character recognition characterised by the processing or recognition method
    • G06V30/242Division of the character sequences into groups prior to recognition; Selection of dictionaries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25841Management of client data involving the geographical location of the client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4524Management of client data or end-user data involving the geographical location of the client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8352Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10Recognition assisted with metadata

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Fuzzy Systems (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Physiology (AREA)
  • Biophysics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

在一方面,一种方法包括接收表示由内容呈现设备接收的内容的查询指纹数据。该方法还包括识别内容呈现设备的地理区域。该方法还包括至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集。该方法还包括检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配。该方法还包括响应于检测到匹配来执行动作。

Description

具有基于地理区域的特征的内容修改系统
相关申请的交叉引用
本公开要求于2020年3月31日提交的美国专利申请No.16/836,034和于2019年5月10日提交的美国临时专利申请No.62/846,396的优先权,所述申请在此通过引用全文并入本文中。
用法和术语
在本公开中,除非另有说明和/或特定上下文另有明确规定,否则术语“一”或“一个”表示至少一个,术语“该”表示所述至少一个。
发明内容
在一方面,一种方法包括接收表示由内容呈现设备接收的内容的查询指纹数据。该方法还包括识别内容呈现设备的地理区域。该方法还包括至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集。该方法还包括检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配。该方法还包括响应于检测到匹配来执行动作。
在另一方面,一种非暂时性计算机可读存储介质,在该非暂时性计算机存储介质上存储了程序指令,该程序指令在由处理器执行时使一组操作执行。该组操作包括接收表示由内容呈现设备接收的内容的查询指纹数据。该组操作还包括识别内容呈现设备的地理区域。该组操作还包括至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集。该组操作还包括检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配。该组操作还包括响应于检测到匹配来执行动作。
在另一方面,一种计算系统包括处理器和其上存储有程序指令的非暂时性计算机可读存储介质,该程序指令在由处理器执行时使一组操作执行。该组操作包括接收表示由内容呈现设备接收的内容的查询指纹数据。该组操作还包括识别内容呈现设备的地理区域。该组操作还包括至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集。该组操作还包括检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配。该组操作还包括响应于检测到匹配来执行动作。
附图说明
图1是可以在其中实现各种所描述的原理的示例内容修改系统的简化框图。
图2是可以在其中实现各种所描述的原理的示例计算系统的简化框图。
图3是内容和相关概念的示例线性序列的图。
图4A、4B、4C、4D、4E和4F共同构成了示出示例时间段和可以结合示例内容修改系统执行的对应操作的表格。
图5是示例方法的流程图。
具体实施方式
I.概述
为了向终端用户传送和呈现内容,内容提供商可以将内容发送到一个或更多个内容分发系统,该一个或更多个内容分发系统中的每个内容分发系统又可以将内容发送到一个或更多个相应的内容呈现设备,以输出内容,以呈现给相应的终端用户。这种分层布置可以有利于方便、广泛地分发内容。
举例来说,为了由视频内容提供商向美国各地的终端用户传送视频内容,视频内容提供商可以通过卫星或其他媒介将视频内容发送到服务于美国境内相应的指定市场区域(DMA)的内容分发系统。因此,每个这样的内容分发系统可以接收携带视频内容的国家卫星馈送,并且可以将视频内容发送到内容分发系统的DMA中的电视机和/或机顶盒,使得视频内容可以输出并用于呈现给该DMA中相应的终端用户。在实践中,这些内容分发系统及其向内容呈现设备的传输手段可以采取各种形式。例如,内容分发系统可以与有线电视提供商相关联,并且可以通过混合光纤/同轴电缆连接将视频内容发送到作为有线电视订阅者的终端用户的内容呈现设备。
这样,在各种场景中,内容分发系统可以将内容发送到内容呈现设备,该内容呈现设备可以接收并输出内容以呈现给终端用户。在某些情况下,即使内容呈现设备从内容分发系统接收到内容,也可能期望内容呈现设备执行内容修改操作,以便内容呈现设备可以输出替代内容以供呈现,而不是所接收到的内容的至少一部分。
例如,在内容呈现设备接收包括定位于序列内某处的给定广告段的内容段的线性序列的情况下,可能期望内容呈现设备利用可能更针对终端用户的(例如,更针对终端用户的兴趣、人口统计特征等)不同广告段替换给定广告段。作为另一示例,可能期望内容呈现设备在给定广告段上覆盖以同样是可能更针对终端用户的方式来增强给定广告段的覆盖内容。所描述的内容修改系统可以促进提供这些和其他相关特征。
为有助于为终端用户准备和提供修改的内容,所公开的内容修改系统的组件可以对在内容修改系统内不同点处访问的内容执行指纹识别,由此生成表示被访问的内容的指纹数据。例如,内容分发系统可以访问上游的内容(例如,内容分发系统正在或即将通过频道发送的内容)并对其进行指纹识别和/或内容呈现设备可以访问更下游的内容(例如,由内容呈现设备接收的内容)并对其进行指纹识别。内容修改系统可以比较指纹数据以检测它们之间的匹配,这可以帮助内容修改系统识别在内容段的线性序列中的何处进行修改,例如于何处放置目标内容。此外,在内容呈现设备正在接收内容的频道未知的场景中,可以使用指纹匹配来识别频道。一旦频道被识别,内容修改系统就可以在所识别的频道上的内容段的线性序列内识别即将出现的内容修改机会。
在一个示例中,指纹匹配可以由所公开的内容修改系统的指纹匹配服务器来执行。举例来说,指纹匹配服务器可以从一个或更多个内容分发系统接收表示正在所识别的频道(例如,通过与正在发送的内容相关联的元数据识别的频道)上发送的内容的参考指纹数据,并且还可以接收表示内容呈现设备正在未识别频道上接收的内容的查询指纹数据。这样,指纹匹配服务器就可以将参考指纹数据与查询指纹数据进行比较,以确定是否存在匹配。查询指纹数据与特定参考指纹数据之间的匹配可以使指纹匹配服务器能够对频道进行识别。
然而,当指纹匹配服务器不知道正在哪个频道上接收查询指纹数据所表示的内容时,指纹匹配服务器可能需要对与多个不同频道相关联的大量(例如,数百个)参考指纹数据集进行比较,直到检测到匹配并识别出频道。这可能是一个耗时的过程,并且在某些情况下,可能需要大量指纹匹配服务器的存储和处理能力来存储和处理参考指纹数据集。此外,当终端用户改变频道时,尤其是以高频率改变频道时,指纹匹配服务器往往需要针对新频道重复这个过程,从而导致指纹匹配服务器识别新频道时的处理能力要更大并且时间延迟更大。
本公开提供了改进指纹匹配过程的方法和系统,即通过减少指纹匹配服务器在匹配过程中存储和考虑的参考指纹数据集的数量来进行改进。特别地,所公开的方法和系统可以识别与内容呈现设备(例如,正在接收由查询指纹数据表示的内容的机顶盒和/或电视机的DMA)相关联的地理区域并且可以使用所识别的地理区域作为基础来从多个参考指纹数据集中选择对应于所识别的地理区域的特定参考指纹数据集。然后,指纹匹配服务器可以将查询指纹数据与来自所选择的参考指纹数据集的至少一部分参考指纹数据进行比较以检测匹配。并且响应于检测到匹配,指纹匹配服务器可以执行动作,例如促进内容呈现设备执行内容修改操作的动作。在某些情况下,该匹配还可以帮助指纹匹配服务器或内容修改系统的其他组件识别内容呈现设备正在其上呈现或接收查询指纹数据所表示的内容的频道。
通过使用与内容呈现设备相关联的地理区域作为基础来选择对应的参考指纹数据集,可以减少匹配过程中考虑的指纹数据集的数量,从而有利地加快匹配过程,进而使得能够更快地识别频道和/或内容修改机会并采取行动。这也有助于最小化指纹匹配服务器存储参考指纹数据集和执行比较以识别频道所需的存储和处理的量。相比之下,在不对在匹配过程中应该考虑哪些指纹数据集做进一步地选择的情况下,指纹匹配服务器可能需要存储和考虑大量(例如,数百或数千个)参考指纹数据集,由此需要大量存储和处理能力。
另外,当终端用户改变频道时,终端用户改变到的新频道通常是广播到与先前频道相同的地理区域的频道——即内容呈现设备的地理区域。因此,新频道可以是由已经基于内容呈现设备的地理区域选择的参考指纹数据集表示的多个频道之一。因此,如上所述地减少参考指纹数据集的数量还可以减少指纹匹配服务器在终端用户改变频道和/或正在以高频率改变频道的情况下识别频道所需的处理能力和时间,从而使指纹匹配服务器能够更快地识别当前频道上的内容修改机会。
II.架构
A.内容修改系统
图1是示例内容修改系统100的简化框图。内容修改系统100可以包括各种组件,例如内容分发系统102、内容呈现设备104、指纹匹配系统服务器106、内容管理系统108、数据管理系统110和/或补充内容传送系统112。
内容修改系统100还可以包括连接内容修改系统100内的各种组件的一个或更多个连接机制。例如,如图1所示,内容修改系统100可以包括由连接内容修改系统100的组件的线表示的连接机制。
在本公开中,术语“连接机制”是指连接并促进两个或更多个组件、设备、系统或其他实体之间的通信的机制。连接机制可以是或包括相对简单的机制,例如电缆或系统总线,和/或相对复杂的机制,例如基于分组的通信网络(例如,因特网)。在一些情况下,连接机制可以是或包括无形介质,例如在连接至少部分是无线的情况下。在本公开中,连接可以是直接连接或间接连接,后者是经过和/或穿越一个或更多个实体的连接,例如路由器、交换机或其他网络设备。同样,在本公开中,通信(例如,发送或接收数据)可以是直接通信或间接通信。
内容修改系统100和/或其组件可以采用计算系统的形式,下面描述其示例。
值得注意的是,在实践中,内容修改系统100可能包括所述组件中的至少一些组件的许多实例。例如,内容修改100可能包括许多内容分发系统和许多内容呈现设备。
B.计算系统
图2是示例计算系统200的简化框图。计算系统200可以被配置为执行和/或可以执行一个或更多个操作,例如本公开中描述的操作。计算系统200可以包括各种组件,例如处理器202、数据存储单元204、通信接口206和/或用户接口208。
处理器202可以是或包括通用处理器(例如,微处理器)和/或专用处理器(例如,数字信号处理器)。处理器202可以执行包括在如下所述的数据存储单元204中的程序指令。
数据存储单元204可以是或包括一个或更多个易失性、非易失性、可移动和/或不可移动存储组件,例如磁、光和/或闪存,和/或可以与处理器202整体或部分集成。此外,数据存储单元204可以是或包括非暂时性计算机可读存储介质,其上存储有程序指令(例如,编译的或非编译的程序逻辑和/或机器代码),程序指令在由处理器202执行时使计算系统200和/或另一计算系统执行一个或更多个操作,例如本公开中描述的操作。这些程序指令可以限定离散软件应用和/或为离散软件应用的一部分。
在一些情况下,计算系统200可以响应于接收输入来执行程序指令,例如经由通信接口206和/或用户接口208接收的输入。数据存储单元204还可以存储其他数据,例如本公开中描述的任何数据。
通信接口206可以允许计算系统200根据一个或更多个协议与另一实体连接和/或与另一实体通信。因此,计算系统200可以根据一个或更多个协议向一个或更多个其他实体发送数据和/或从一个或更多个其他实体接收数据。在一个示例中,通信接口206可以是或包括有线接口,例如以太网接口或高清晰度多媒体接口(HDMI)。在另一个示例中,通信接口206可以是或包括无线接口,例如蜂窝或WI-FI接口。
用户接口208可以允许计算系统200和计算系统200的用户之间的交互。因此,用户接口208可以是或包括诸如键盘、鼠标、遥控器、麦克风和/或触敏面板之类的输入组件。用户接口208还可以是或包括诸如显示设备(其例如可以与触敏面板组合)和/或扬声器之类的输出组件。
计算系统200还可以包括连接计算系统200内的各种组件的一个或更多个连接机制。例如,如图2所示,计算系统200可以包括由连接计算系统200的组件的线表示的连接机制。
计算系统200可以包括上述组件中的一个或更多个并且可以以各种方式配置或布置。例如,计算系统200可以被配置为例如在一个或更多个服务器-客户端类型布置中操作的服务器和/或客户端(或者可以是服务器集群和/或客户端集群)。
如上所述,内容修改系统100和/或其组件可以采用诸如计算系统200之类的计算系统的形式。在一些情况下,一些实体或所有这些实体可以采用更特定类型的计算系统的形式。例如,在内容呈现设备104的情况下,它可以采用台式计算机、膝上型计算机、平板电脑、移动电话、电视机、机顶盒、具有集成机顶盒的电视机、媒体加密狗(media dongle)或连接有媒体加密狗的电视机的形式,以及其他可能性。
III.示例操作
内容修改系统100和/或其组件可以被配置为执行和/或可以执行一个或更多个操作。现在将描述这些操作和相关特征的示例。
如上所述,在实践中,内容修改系统100可能包括所述组件中的至少一些组件的许多实例。同样地,在实践中,所描述的操作中的至少一些操作可能会被执行多次(可能基于例行程序和/或与所描述组件的附加实例相关)。
A.与内容分发系统发送内容以及内容呈现设备接收和输出内容有关的操作
就上下文而言,现在将描述与发送内容的内容分发系统102以及接收和输出内容的内容呈现设备104有关的一般操作和示例。
首先,内容分发系统102可以将内容(例如,其从内容提供商接收的内容)发送到诸如内容呈现设备104之类的一个或更多个实体。内容可以例如是或包括音频内容和/或视频内容。在一些示例中,内容可以采取内容段(例如,节目段和广告段)或其一部分的线性序列的形式。例如,在视频内容的情况下,视频内容的一部分可以是一帧或更多帧。
内容分发系统102可以在一个或更多个频道(有时称为站或馈送)上发送内容。因此,内容分发系统102可以与单频道内容分发器或诸如多频道视频节目分发器(MVPD)之类的多频道内容分发器相关联。
内容分发系统102及其在频道上将内容发送到内容呈现设备104的手段可以采用各种形式。举例来说,内容分发系统102可以是或包括与有线电视提供商相关联并通过混合光纤/同轴电缆连接将频道上的内容发送到内容呈现设备104的有线电视前端。作为另一个示例,内容分发系统102可以是或包括与卫星电视提供商相关联并且通过卫星传输将频道上的内容发送到内容呈现设备104的卫星电视前端。作为又一示例,内容分发系统102可以是或包括与电视广播提供商相关联并且通过地面空中接口将频道上的内容发送到内容呈现设备104的电视广播站。在这些和其他示例中,内容分发系统102可以以表示内容的模拟或数字广播流的形式发送内容。
内容呈现设备104可以从一个或更多个实体(例如内容分发系统102)接收内容。在一个示例中,内容呈现设备104可以从多个可用频道中选择(例如,通过调谐到)频道,可能基于经由用户接口接收的输入,使得内容呈现设备104可以在所选择的频道上接收内容。
在一些示例中,内容分发系统102可以向内容呈现设备104发送内容呈现设备104可以接收的内容,因此,所发送的内容和所接收的内容可以是相同的。然而,在其他示例中,它们可以是不同的,例如,内容分发系统102向内容呈现设备104发送内容,但内容呈现设备104不接收内容而是从不同的内容分发系统接收不同的内容。
内容呈现设备104还可以输出用于呈现的内容。如上所述,内容呈现设备104可以采取各种形式。在一个示例中,在内容呈现设备104是电视机(可能具有集成机顶盒和/或媒体加密狗)的情况下,输出用于呈现的内容可以涉及电视机经由用户接口(例如,显示设备和/或扬声器)输出内容,使得它可以呈现给终端用户。作为另一个示例,在内容呈现设备104是机顶盒或媒体加密狗的情况下,输出用于呈现的内容可以涉及机顶盒或媒体加密狗经由通信接口(例如,HDMI接口)输出内容,使得它可以被电视机接收,然后由电视机输出以呈现给终端用户。
这样,在各种场景中,内容分发系统102可以将内容发送到内容呈现设备104,该内容呈现设备可以接收和输出内容以呈现给终端用户。在某些情况下,即使内容呈现设备104从内容分发系统102接收了内容,也可能期望内容呈现设备104执行内容修改操作,以便内容呈现设备104可以输出替代内容以供呈现,而不是所接收到的内容的至少一部分。
例如,在内容呈现设备104接收包括定位于序列内某处的给定广告段的内容段的线性序列的情况下,可能期望内容呈现设备104利用可能更针对终端用户的(即,更针对终端用户的兴趣、人口统计特征等)不同广告段替换给定广告段。作为另一示例,可能期望内容呈现设备104在给定广告段上覆盖以同样是可能更针对终端用户的方式来增强给定广告段的覆盖内容。所描述的内容修改系统100可以促进提供这些和其他相关特征。
如上所述,在一个示例中,内容可以采取内容段的线性序列的形式。因此,在一个示例中,内容分发系统102可以发送内容段的线性序列。这在本文中被称为“发送序列”。同样,内容呈现设备104可以接收内容段的线性序列。这在本文中被称为“接收序列”。根据上面的讨论,发送序列和接收序列可以相同也可以不同。
图3示出了这些概念的一些示例。在一个示例中,发送序列是图3所示的发送序列302。如图所示,发送序列302包括节目段A,随后是广告段B,随后是广告段C。
同样地,在一个示例中,接收序列是图3所示的接收序列304。在该示例中,内容分发系统102将发送序列302发送到内容呈现设备104,内容呈现设备104将其作为接收序列304接收,因此发送序列302和接收序列304是相同的。因此,如图所示,接收序列304也包括节目段A,随后是广告段B,随后是广告段C。
在图3中,发送序列302的发送时间和接收序列304的接收时间通过它们与时间线350的关系示出。值得注意的是,发送时间和接收时间由于内容传输延迟而彼此偏移,这将在下面更详细地描述。
如上所述,在一些情况下,即使内容呈现设备104从内容分发系统102接收了内容,也可能期望内容呈现设备104执行内容修改操作,以便内容呈现设备104可以输出替代内容以供呈现,而不是所接收的内容的至少一部分。例如,在内容呈现设备104接收了接收序列而不输出该接收序列以供呈现的情况下,内容呈现设备104可以替代地输出接收序列的修改版本以供呈现。这在本文中称为“经修改的序列”。
例如,在接收序列包括定位于接收序列内某处的给定广告段的情况下,可能期望内容呈现设备104利用可能更针对终端用户的(即,更针对终端用户的兴趣、人口统计特征等)不同广告段替换给定广告段,从而产生内容呈现设备104可以输出以供呈现的经修改的序列。
为了说明这一点,在一个示例中,经修改的序列是图3所示的第一修改序列306。如图所示,第一修改序列306包括节目段A,随后是广告段D(其替换了广告段B),随后是广告段C。
作为另一示例,可能期望内容呈现设备104在给定广告段上覆盖以同样是可能更针对终端用户的方式增强给定广告段的覆盖内容,从而产生内容呈现设备104可以输出以供呈现的经修改的序列。
为了说明这一点,在另一个示例中,经修改的序列是图3所示的第二修改序列308。如图所示,第二修改序列308包括节目段A,随后是广告段B'(其是利用覆盖内容修改的广告段B),随后是广告段C。
图3的其他部分将随着相关概念的介绍和描述稍后在本公开中描述。
考虑到以上提供的上下文,图4A、4B、4C、4D、4E和4F共同构成了一个表格,其示出了示例时间段和可以结合内容修改系统100执行的对应操作。现在将描述这些和其他有关操作。
B.与内容分发系统在频道上发送第一内容有关的操作
在时间段Tl期间,内容分发系统102可以在频道上向内容呈现设备104发送内容。该内容在本文中被称为“第一内容”。在一个示例中,第一内容是图3所示的第一内容310。
在时间段T2期间,内容分发系统102可以生成表示第一内容的指纹数据。该指纹数据在本文中被称为“第一指纹数据”。内容分发系统102可以使用现在已知或以后开发的任何内容指纹识别过程来生成第一指纹数据。示例指纹生成技术在2016年11月15日发布的美国专利No.9,495,451中描述,其全部内容通过引用并入本文。内容分发系统102可以以给定的速率,例如以每帧第一内容一个指纹的速率生成第一指纹数据。第一指纹数据可以是或包括这些生成的指纹中的一些指纹或全部指纹。
内容分发系统102可以访问内容分发系统102内不同点处的第一内容。作为一个示例,内容分发系统102可以在第一内容通过内容分发系统102内的分发放大器输出之后对其进行访问。
同样在时间段T2期间,内容分发系统102可以生成与第一内容和/或第一指纹数据相关联的元数据。该元数据在本文中被称为“第一元数据”。在一个示例中,第一元数据可以是或包括发送时间戳,该发送时间戳表示内容分发系统102发送第一内容的时间点。内容分发系统102可以以各种方式确定发送时间戳,例如基于与参考时钟同步的时钟。
作为另一示例,第一元数据可以是或包括频道标识符,该频道标识符标识内容分发系统102正在其上发送第一内容的频道。内容分发系统102可以以各种方式确定频道标识符,例如基于将内容分发系统102和/或内容分发系统102内的物理输入和/或输出映射到相应的频道标识符的映射数据。在一个示例中,在内容分发系统102在频道A上发送内容A、在频道B上发送内容B和在频道C上发送内容C的情况下,映射数据可以指定三个不同输出(可能在三个不同的分发放大器上)中的哪一个输出映射到哪个频道标识符,使得内容分发系统102可以为给定频道的内容确定适当的频道标识符。
作为另一示例,第一元数据可以是或包括SCTE-104数据、水印或类似类型的元数据,其中任何一个本身都可以编码其他元数据,例如节目标识符、广告标识符(例如,工业标准编码识别(ISCI)密钥)、节目体裁或其他类型的文本或数字元数据。
内容分发系统102可以以各种方式将第一指纹数据与第一元数据相关联。例如,在第一指纹数据包括多个指纹且每个指纹表示第一内容的对应帧的情况下,内容分发系统102可以将每个指纹与对应的发送时间戳和/或其他对应的第一元数据相关联。
在时间段T3期间,内容分发系统102可以将第一指纹数据和第一元数据发送到指纹匹配服务器106。内容分发系统102可以以给定的间隔发送第一指纹数据和第一元数据。例如,内容分发系统102可以每两秒钟发送其在最近的两秒时间段内生成的第一指纹数据和第一元数据。
C.与内容呈现设备接收第二内容有关的操作
在时间段T4期间,内容呈现设备104可以从内容分发系统102接收内容。该内容在本文中被称为“第二内容”。在一个示例中,第二内容是图3所示的第二内容312。
在时间段T5期间,内容呈现设备104可以生成表示第二内容的指纹数据。该指纹数据在本文中被称为“第二指纹数据”。内容呈现设备104可以使用现在已知或以后开发的任何内容指纹识别过程来生成第二指纹数据。内容呈现设备104可以以各种速率,例如以每帧第二内容一个指纹的速率生成第二指纹数据。第二指纹数据可以是或包括这些生成的指纹中的一些指纹或全部指纹。
内容呈现设备104可以访问内容呈现设备104内不同点处的第二内容。作为一个示例,内容呈现设备104可以在第二内容正在通过内容呈现设备104的输入缓冲器(例如,HDMI缓冲器)接收时对其进行访问。在另一种配置中,内容呈现设备104可以在第二内容正在被内容呈现设备104的显示缓冲器接收时对其进行访问。因此,在这种配置中,第二内容可以不仅是内容呈现设备104接收的内容,并且可以是输出以供呈现的内容。
同样在时间段T5期间,内容呈现设备104可以生成与第二内容和/或第二指纹数据相关联的元数据。该元数据在本文中被称为“第二元数据”。作为一个示例,第二元数据可以是或包括接收时间戳,该接收时间戳表示内容呈现设备104接收到第二内容的时间点。内容呈现设备104可以以各种方式确定接收时间戳,例如基于与参考时钟同步的时钟。如上所述,内容呈现设备104可以访问内容呈现设备104内不同点处的第二内容。在一个示例中,为了确定接收时间戳,可以将访问第二内容的点视为“接收”点。
在实践中,当第一元数据很可能是或包括频道标识符时,第二元数据很可能既不是也不包括频道标识符。
内容呈现设备104可以以各种方式将第二指纹数据与第二元数据相关联。例如,在第二指纹数据包括多个指纹且每个指纹表示第二内容的对应帧的情况下,内容呈现设备104可以将每个第二指纹与对应的接收时间戳和/或其他对应的元数据相关联。
在时间段T6期间,内容呈现设备104可以向指纹匹配服务器106发送第二指纹数据和第二元数据。内容呈现设备104可以以给定的间隔发送第二指纹数据和第二元数据。例如,内容呈现设备104可以每两秒钟发送其在最近的两秒时间段内生成的第二指纹数据和第二元数据。
D.与识别内容呈现设备正在其上接收第二内容的频道有关的操作
在时间段T7期间,指纹匹配服务器106可以从内容分发系统102接收第一指纹数据和第一元数据。如上所述,第一指纹数据表示内容分发系统102在频道上发送的第一内容。如上所述,第一元数据可以(并且在该描述的示例中的目的是)识别频道。这样,第一内容可以被认为是在所识别的频道上发送的内容。
在时间段T8期间,指纹匹配服务器106可以从内容呈现设备104接收第二指纹数据和第二元数据。如上所述,第二指纹数据表示内容呈现设备104接收到的第二内容。然而,如上所述,相关联的元数据可能(并且在该描述的示例中的目的是)不识别频道。这样,第二内容可以被认为是在未识别的频道上接收到的内容。
在时间段T9期间,指纹匹配服务器106可以比较第一指纹数据和第二指纹数据以确定是否存在匹配。在本公开中,这种类型的匹配尝试,即在(i)表示正在所识别的频道上发送的内容的参考指纹数据和(ii)表示正在未识别的频道上接收的内容的查询指纹数据之间的匹配尝试,在本文中被称为“冷匹配尝试”。
在时间段T10期间,基于比较,指纹匹配服务器106可以检测第一指纹数据与第二指纹数据之间的匹配。指纹匹配服务器106可以使用现在已知或以后开发的任何内容指纹比较和匹配技术来比较和/或检测指纹数据之间的匹配。示例指纹比较和匹配技术在2015年9月29日发布的美国专利No.9,146,990中描述,其全部内容通过引用并入本文。
为了有效地比较第一指纹数据与第二指纹数据,指纹匹配服务器106可能需要考虑内容传输延迟。就上下文而言,在内容分发系统102在时间点A在给定频道上发送给定内容帧的情况下,由于各种原因,内容呈现设备104可能直到比时间点A晚(例如,晚10秒)的时间点B才接收到该帧。这种类型的延迟在本文中被称为“内容传输延迟”。
在一个示例中,如图3所示,时间点A、时间点B和内容传输延迟可以分别是时间点A314、时间点B 316和内容传输延迟318。需要注意的是,图3仅用于说明目的,不一定至少在时间方面按比例缩放。实际上,实际的内容传输延迟量可能与所示量不同。
为了帮助指纹匹配服务器106有效地将第一指纹数据与第二指纹数据进行比较,指纹匹配服务器106可能需要考虑这种内容传输延迟。在一个示例中,指纹匹配服务器106可以通过将它在接收时间点接收的第一指纹数据与它在由起始时间点和结束时间点定义的时间段内接收的第二指纹数据进行比较来实现这一点。起始时间点可以是接收时间点加上表示预期内容传输延迟(例如,十秒)的偏移量,减去时间段的容差(例如,两秒)。结束时间点可以是接收时间点加上偏移量(例如,十秒),加上时间段的容差(例如,两秒)。因此,在预期内容传输延迟为10秒的一个示例中,指纹匹配服务器106可以将其在接收时间点接收的第一指纹数据与其在(i)接收时间点加上八秒至(ii)接收时间点加上十二秒的时间段内接收的第二指纹数据进行比较。
在一些情况下,指纹匹配服务器106可以确定内容传输延迟,如上所述,它可以使用该延迟来选择适当的偏移量以用于确定起始时间点和结束时间点。指纹匹配服务器106可以通过各种方式确定内容传输延迟。例如,在指纹匹配服务器106基于冷匹配尝试检测到匹配之后,指纹匹配服务器106例如可以将内容传输延迟确定为(第一元数据的)对应的发送时间戳与(第二元数据的)对应的接收时间戳之间的差。值得注意的是,内容传输延迟可能因频道而异。
在时间段Tll期间,基于检测到的匹配,指纹匹配服务器106可以识别内容呈现设备104正在其上接收第二内容的频道。在一个示例中,指纹匹配服务器106可以基于与用于检测匹配的第一指纹数据相关联的频道标识符元数据来识别频道。
值得注意的是,在实践中,由于可能存在内容呈现设备104在其上接收第二内容的多个潜在频道,因此指纹匹配服务器106可能将第二指纹数据与第一指纹数据的多个实例(每个表示不同的相应频道上的第一内容的不同的相应实例)进行比较,以确定多个实例中的哪一个与第二指纹数据匹配。
此外,在一些情况下,指纹匹配服务器106可以检测第二指纹数据与第一指纹数据的多个实例中的每个实例之间的匹配(每个表示不同的相应频道上的第一内容的不同的相应实例)。这在本文中被称为“多匹配场景”并且可以由于各种原因而发生。例如,当内容分发系统102在多于一个频道上同时或大约同时发送相同或相似的内容时,可以发生该场景。在该场景中,指纹匹配服务器106可以执行附加操作以从与多匹配场景相关联的多个频道中识别内容呈现设备104正在哪个特定频道上接收第二内容。指纹匹配服务器106可以使用现在已知或以后开发的任何频道多匹配消歧技术来做到这一点。在2018年6月5日发布的美国专利No.9,992,533中描述了示例频道多匹配消歧技术,其全部内容通过引用并入本文。
E.与确定历史内容消费数据有关的操作
在时间段T12期间,指纹匹配服务器106可以生成与所识别的频道相关联的元数据。例如,元数据可以是或包括频道识别时间戳。指纹匹配服务器106可以以各种方式确定频道识别时间戳,例如基于与参考时钟同步的时钟。在另一示例中,元数据可以是或包括识别正在所识别的频道上接收内容的内容呈现设备104的设备标识符。指纹匹配服务器106可以以各种方式确定设备标识符,例如通过从内容呈现设备104接收设备标识符。在另一个示例中,指纹匹配服务器106可以从内容呈现设备104接收数据(例如,设备注册数据)并且可以使用映射数据来映射接收到的数据以确定设备标识符。
在时间段T13期间,指纹匹配服务器106可以向数据管理系统110发送所识别的频道和相关联的元数据的指示。
在时间段T14期间,数据管理系统110可以从指纹匹配服务器106接收所识别的频道和相关联的元数据的指示。
数据管理系统110可以使用接收到的所识别的频道和相关联的元数据的指示,或许还有其他数据,来确定内容呈现设备104何时在所识别的频道上接收到内容,内容呈现设备104已经接收到什么具体内容等。这种类型的数据在本文中被称为“历史内容消费数据”。
这样,在时间段T15期间,数据管理系统110可以确定与内容呈现设备104相关联的历史内容消费数据。
F.与内容分发系统发送第三内容有关的操作
如上所述,指纹匹配服务器106可以识别内容呈现设备104正在其上接收第二内容的频道。
在时间段T16期间,内容分发系统102可以在所识别的频道上向内容呈现设备104发送内容。该内容在本文中被称为“第三内容”。在一个示例中,第三内容是图3所示的第三内容320。实际上,内容分发系统102可能在发送第一内容之后不久(例如,紧接在其后或几秒钟或几分钟之后)发送第三内容。
在时间段T17期间,内容分发系统102可以生成表示第三内容的指纹数据。该指纹数据在本文中被称为“第三指纹数据”。
同样在时间段T17期间,内容分发系统102可以生成与第三内容和/或第三指纹数据相关联的元数据。该元数据在本文中被称为“第三元数据”。内容分发系统102还可以将第三指纹数据与第三元数据相关联。
在时间段T18期间,内容分发系统102可以将第三指纹数据和第三元数据发送到指纹匹配服务器106。
内容分发系统102可以以各种方式发送第三内容、生成第三指纹数据、生成第三元数据、将第三指纹数据与第三元数据相关联,以及发送第三指纹数据和第三元数据,例如以与上述结合发送第一内容、生成第一指纹数据、生成第一元数据、将第一指纹数据与第一元数据相关联,以及发送第一指纹数据和第一元数据描述的方式相同或相似的方式。
G.与内容管理系统接收可修改的内容段有关的操作
在时间段T19期间,内容管理系统108可以接收已经被识别为要进行修改的候选的内容段形式的内容。该内容在本文中被称为“可修改的内容段”或“第四内容”。在一个示例中,可修改的内容段是图3所示的可修改的内容段。
可修改的内容段可以采取各种形式。例如,可修改的内容段可以是广告段(例如,商业广告)或节目段。因此,在一个示例中,可修改的内容段可以是已被识别为要进行修改的候选的广告段,可能通过利用不同的广告段替换,和/或通过将内容覆盖在其上来进行修改。
在一个示例中,可能与内容分发系统102相关联的用户可以促进将可修改的内容段上传到内容管理系统108,使得内容管理系统108可以以这种方式接收可修改的内容段。
在时间段T20期间,内容管理系统108可以生成表示可修改的内容段的指纹数据。该指纹数据在本文中被称为“第四指纹数据”。内容管理系统108可以使用现在已知或以后开发的任何指纹生成技术来生成第四指纹数据。内容管理系统108可以以给定的速率,例如以每帧第四内容一个指纹的速率生成第四指纹数据。第四指纹数据可以是或包括这些生成的指纹中的一些指纹或全部指纹。
同样在时间段T20期间,内容管理系统108可以生成与可修改的内容段和/或第四指纹数据相关联的元数据。该元数据在本文中被称为“第四元数据”。作为一个示例,第四元数据可以是或包括可修改的内容段的持续时间。内容管理系统108可以以各种方式确定该持续时间,例如基于指纹生成过程。例如,在生成第四指纹数据的内容管理系统108涉及每帧生成一个指纹的情况下,其中可修改的内容段具有每秒30帧的帧速率,并且其中指纹识别过程导致生成了300个指纹,则内容管理系统108可以推断出可修改的内容段具有十秒的持续时间。元数据还可以是或包括关于可修改的内容段的其他信息,例如内容段标识符、标题,和/或关于可以对可修改的内容段进行修改的允许的方式的规范等。
在时间段T21期间,内容管理系统108可以将第四指纹数据和第四元数据发送到指纹匹配服务器106。
实际上,内容管理系统108可能接收许多可修改的内容段。在这种情况下,内容管理系统108可以酌情对许多接收到的可修改的内容段中的每个内容段执行一个或更多个上述操作。如此,内容管理系统108可以向指纹匹配服务器106发送第四指纹数据的许多实例,每个实例对应于不同的相应的可修改的内容段。
H.与指纹匹配服务器在所识别的频道上识别即将出现的内容修改机会有关的操作
在时间段T22期间,指纹匹配服务器106可以从内容分发系统102接收第三指纹数据和第三元数据。如上所述,第三指纹数据表示内容分发系统102在所识别的频道上发送的第三内容。
在时间段T23期间,指纹匹配服务器106可以从内容管理系统108接收第四指纹数据和第四元数据。如上所述,第四指纹数据表示可修改的内容段。
在时间段T24期间,指纹匹配服务器106可以将第三指纹数据的至少一部分与第四指纹数据的至少一部分进行比较以确定是否存在匹配。
在时间段T25期间,基于该比较,指纹匹配服务器106可以检测第三指纹数据的至少一部分与第四指纹数据的至少一部分之间的匹配。指纹匹配服务器106可以使用现在已知或以后开发的任何内容指纹比较和匹配过程来比较和/或检测指纹数据之间的匹配。
在时间段T26期间,基于检测到的匹配,指纹匹配服务器106可以确定可修改的内容段的至少一部分包括在第三内容内,因此可以识别所识别的频道上的即将出现的内容修改机会。例如,如图3所示,指纹匹配服务器106可以确定可修改的内容段的至少开始部分包括在第三内容320内,因此可以识别即将出现的内容修改机会。
如上所述,指纹匹配服务器106可以生成第三元数据,其可以与第一元数据相同或相似。因此,第三元数据可以是或包括例如发送时间戳和/或频道标识符。然而,第三元数据还可以是或包括可修改的内容段的至少一部分在第三内容内的位置。在一个示例中,元数据可以使用起始帧标记和结束帧标记来指定该位置,每个标记与第三内容的相应帧相对应。指纹匹配服务器106可以基于匹配确定起始帧标记和结束帧标记。
值得注意的是,在实践中,由于可能存在多个潜在的可修改的内容段,其中这些潜在的可修改的内容段的部分可能包括在第三内容内,因此指纹匹配服务器106可能将第三指纹数据的至少一部分与第四指纹数据的多个实例(每个实例表示可修改的内容段的不同的相应实例)的至少一部分进行比较,以确定第四指纹数据的多个实例中的哪个实例具有与第三指纹数据的至少一部分相匹配的部分。
I.与准备内容呈现设备以执行与所识别的即将出现的内容修改机会相关的内容修改操作有关的操作
在时间段T27期间,基于检测到的匹配,指纹匹配服务器106可以将第三指纹数据和第三元数据发送给内容呈现设备104,以促进对内容呈现设备104进行准备,以执行与所识别的即将出现的内容修改机会有关的内容修改操作。
在时间段T28期间,内容呈现设备104可以从指纹匹配服务器106接收第三指纹数据和第三元数据。
在时间段T29期间,内容呈现设备104可以在所识别的频道上接收内容。该内容在本文中被称为“第五内容”。在一个示例中,第五内容是图3所示的第五内容324。
由于各种原因(例如,由于与发送指纹数据和元数据相关联的传输延迟比内容传输延迟更短),内容呈现设备104可以在从内容分发系统102接收第五内容之前,从指纹匹配服务器106接收第三指纹数据和第三元数据。这样,内容呈现设备104可以接收表示内容呈现设备104期望在此之后不久接收的内容的指纹数据,并且除非发生中断事件(例如,频道改变事件),否则内容呈现设备实际上应该在此之后不久接收该内容。
在实践中,类似于内容分发系统102可能在发送第一内容之后不久(例如,紧接在其后或几秒钟或几分钟之后)发送第三内容,内容呈现设备104可能在接收第二内容之后不久(例如,紧接在其后或几秒钟或几分钟之后)接收第五内容。
在时间段T30期间,内容呈现设备104可以输出第五内容的至少一部分以供呈现。例如,参考图3,内容呈现设备可以输出作为节目段A的结束部分的第五内容324的一部分以供呈现。
如上所述,在一些情况下,即使内容呈现设备104从内容分发系统102接收了内容,也可能期望内容呈现设备104执行内容修改操作,以便内容呈现设备104可以输出替代内容以供呈现,而不是接收到的内容的至少一部分。
这样,即使内容呈现设备104接收第五内容并且输出第五内容的至少一部分以供呈现,也可能期望内容呈现设备104执行内容修改操作,以便内容呈现设备104还可以输出替代内容以供呈现,而不是第五内容的至少另一部分(例如,剩余部分)。例如,参考图3,可能期望内容呈现设备104利用可能更针对终端用户的不同广告段的至少一部分替换广告段B的至少一部分。作为另一示例,可能期望内容呈现设备104在广告段B的至少一部分上覆盖以同样是可能更加针对终端用户的方式增强广告段B的至少一部分的覆盖内容。
在时间段T31期间,内容呈现设备104可以生成表示第五内容的指纹数据。该指纹数据在本文中被称为“第五指纹数据”。内容分发系统102可以使用现在已知或以后开发的任何内容指纹识别过程来生成第五指纹数据。内容呈现设备104可以以各种速率,例如以每帧第五内容一个指纹的速率生成第五指纹数据。第五指纹数据可以是或包括这些生成的指纹中的一些指纹或全部指纹。
同样在时间段T31期间,内容呈现设备104可以生成与第五内容和/或第五指纹数据相关联的元数据。该元数据在本文中被称为“第五元数据”。
内容呈现设备104可以以各种方式接收第五内容、生成第五指纹数据、生成第五元数据、将第五指纹数据与第五元数据相关联,例如以与上述结合接收第二内容、生成第二指纹数据、生成第二元数据以及将第二指纹数据与第二元数据相关联描述的方式相同或相似的方式。
如上所述,内容呈现设备104可以从指纹匹配服务器106接收第三指纹数据并且可以生成第五指纹数据。
在时间段T32期间,内容呈现设备104可以比较第三指纹数据与第五指纹数据以确定是否存在匹配。
在时间段T33期间,基于该比较,内容呈现设备104可以检测第三指纹数据与第五指纹数据之间的匹配。在本公开中,这种类型的匹配尝试,即在(i)表示内容分发系统102在所识别的频道上(至少基于最近的频道识别分析)发送的内容的参考指纹数据与(ii)表示内容呈现设备104正在相同的识别的频道上接收的内容的查询指纹数据之间的匹配尝试,在本文中被称为“热匹配尝试”。指纹匹配服务器106可以使用现在已知或以后开发的任何内容指纹比较和匹配过程来比较和/或检测指纹数据之间的匹配。
在时间段T34期间,基于检测到的匹配,内容呈现设备104可以确定所识别的即将出现的修改机会开始的时间点。这在本文中称为“修改起始时间”。在一个示例中,修改起始时间是如图3所示的修改起始时间326。
在一个示例中,内容呈现设备104可以通过以与起始帧标记(如上所述,其可以是或包括在第三元数据中)相关联的发送时间戳作为开始并在该发送时间戳上加上内容传输延迟来确定修改起始时间,以得到修改起始时间。
作为另一示例,首先,内容呈现设备104可以通过在一方面的第三内容、第三指纹数据和/或第三元数据与另一方面的第五内容、第五指纹数据和/或第五元数据之间建立同步锁定来确定修改起始时间。内容呈现设备104可以使用现在已知或以后开发的任何同步锁定技术来建立同步锁定。在2019年12月10日发布的美国专利No.10,506,275中描述了示例同步锁定技术,其全部内容通过引用并入本文。在2020年1月23日公布的美国专利申请公开No.2020/0029108中描述了另一示例同步锁定技术,其全部内容通过引用并入本文。
然后,内容呈现设备104可以通过确定(i)与内容呈现设备104当前正在接收的第五内容的第一部分相关联的当前接收时间戳与(ii)基于同步锁定的与作为可修改的内容段的开始的第五内容的第二部分相关联的预期接收时间戳之间的时间段,然后通过将所确定的时间段添加到当前接收时间戳来确定修改起始时间,以得到修改起始时间。
同样在时间段T34期间,基于检测到的匹配,内容呈现设备104可以确定所识别的即将出现的修改机会结束的时间点。这在本文中称为“修改结束时间”。在一个示例中,修改结束时间是如图3所示的修改结束时间328。
在一个示例中,内容呈现设备104可以通过以修改起始时间作为开始并在该修改起始时间上可修改的内容段的持续时间(如上所述,其可以是或包括在第四元数据中)来确定修改结束时间,以得到修改结束时间。
值得注意的是,如果内容呈现设备104执行热匹配尝试并且没有检测到匹配,则内容呈现设备104可以确定内容呈现设备104不再接收最近识别的频道上的内容。作为响应,内容呈现设备104可以重复一个或更多个上述操作,使得指纹匹配服务器106可以执行另外的冷匹配尝试,以尝试再次识别频道。
在时间段T35期间,内容呈现设备104可以向内容管理系统108发送针对用于与执行内容修改操作相关的内容的请求。该内容在本文中被称为“补充内容”。在一个示例中,内容呈现设备104可以在修改起始时间之前(例如,之前十秒)发送该请求。在一些情况下,该请求可以包括补充内容的选择标准,例如,内容呈现设备104可以基于内容呈现设备104从指纹匹配服务器106接收的第三元数据来确定该选择标准。
例如,选择标准可以指定所请求的内容类型(例如,替换内容段或覆盖内容)、持续时间(例如,15秒、30秒或60秒)、宽高比(例如,4:3或16:9)和/或分辨率(例如,720p或1080p)。
在时间段T36期间,内容管理系统108可以接收该请求并将其用作从可供选择的多个补充内容项目中选择补充内容的基础。在一些情况下,内容管理系统108可以接收并考虑各种数据以帮助通知选择哪些补充内容。例如,内容管理系统108可以从数据管理系统110接收内容呈现设备104的历史内容消费数据,和/或内容管理系统108可以从人口统计数据提供商接收人口统计数据。然后,内容管理系统108可以至少使用所接收的历史内容消费数据和/或所接收的人口统计数据作为选择补充内容的基础。
内容管理系统108可以使所选择的补充内容被发送到内容呈现设备104。在一个示例中,内容管理系统108可以通过与可以托管补充内容的补充内容传送系统112通信来实现这一点。补充内容传送系统112可以采取各种形式并且可以包括诸如内容分发网络(CDN)之类的各种组件。
在时间段T37期间,内容管理系统108可以向补充内容传送系统112发送针对指向所托管的补充内容的链接(例如,统一资源标识符(URI)或统一资源定位符(URL))的请求。
在时间段T38期间,补充内容传送系统112可以通过将所请求的链接发送到内容管理系统108来接收并响应针对链接的请求。
在时间段T39期间,内容管理系统108然后可以再将链接发送到内容呈现设备104。
在时间段T40期间,内容呈现设备104可以接收链接,其可以使用该链接从补充内容传送系统112检索补充内容,使得内容呈现设备104可以使用检索到的与执行内容修改操作相关的补充内容。在一个示例中,内容呈现设备104可以检索补充内容并将补充内容存储在内容呈现设备104的数据存储单元中。
这样,在一些示例中,内容呈现设备104可以从一个源(例如,内容分发系统102)接收可修改的内容段,并且从另一个源(例如,补充内容传送系统112)接收补充内容。这些段可以以不同的方式被发送到内容呈现设备104并由其接收。例如,内容分发系统102可以发送作为广播流传输的可修改的内容段,并且内容呈现设备104可以对其进行接收,而补充内容传送系统112可以发送作为OTT(over-the-top)传输的补充内容,并且内容呈现设备104可以对其进行接收。在该背景下,在一个示例中,内容分发系统102可以经由一个通信接口(例如,HDMI接口)接收可修改的内容段,并且内容呈现设备104可以经由不同的通信接口(例如,以太网或WI-FI接口)接收补充内容。
J.与内容呈现设备执行内容修改操作有关的操作
在时间段T41,内容呈现设备104可以执行内容修改操作。内容呈现设备104可以以各种方式来做到这一点,这可能取决于要执行的内容修改操作的类型。
在一个示例中,内容呈现设备104执行内容修改操作可以涉及内容呈现设备104通过利用补充内容替换可修改的内容段来对可修改的内容段进行修改。这在本文中被称为“内容替换操作”。例如,在这种情况下,内容呈现设备104可以接收包括可修改的内容段和相关联的元数据的内容段的线性序列,并且如上所述,还可以接收补充内容段。内容呈现设备104可以输出并呈现直到修改起始时间(其对应于可修改的内容段的开始)的内容段的序列,此时内容呈现设备104可以切换到输出并呈现补充内容。然后,在修改结束时间(其对应于可修改的内容段的结束),内容呈现设备104可以切换回输出并呈现内容段的线性序列中后续的内容(或者可能是其他内容,例如正在替换另一个可修改的内容段的附加的补充内容)。
在一个示例中,内容呈现设备104从输出内容段的序列切换到输出补充内容的操作可以涉及使用内容呈现设备104的各种缓冲器。例如,这可能涉及内容呈现设备104从使用正在接收内容段的序列的第一输入缓冲器中的第一数据切换到使用正在接收补充内容的第二输入缓冲器中的第二数据,以将数据输入显示缓冲器。
因此,根据图3所示的一个示例,通过执行内容替换操作,内容呈现设备104可以将广告段B替换为广告段D。结果是,内容呈现设备可以替代地输出第一修改序列306以供呈现,而不是输出接收序列304以供呈现。
在另一示例中,内容呈现设备104执行内容修改操作可以涉及内容呈现设备104通过将覆盖内容覆盖在可修改的内容段上来修改可修改的内容段(在本文中称为“内容覆盖操作”)。例如,在这种情况下,内容呈现设备104可以同样地接收包括可修改的内容段和相关联的元数据的内容段的线性序列,并且内容呈现设备104也可以如上所述地接收补充内容。
然后,内容呈现设备104可以如在通常情况下地输出并呈现可修改的内容段,除了在修改起始时间处开始,内容呈现设备104可以开始将补充内容覆盖在可修改的内容段上。内容呈现设备104可以持续覆盖补充内容直到修改结束时间。以此方式,内容呈现设备104可以在可修改的内容段的至少一些时间部分期间覆盖补充内容。
在一个示例中,内容呈现设备104在可修改的内容段上覆盖补充内容的操作可以涉及使用内容呈现设备104的各种缓冲器。例如,出于将数据输入显示缓冲器的目的,这可能涉及内容呈现设备104使用正在接收内容段的序列的第一输入缓冲器中的第一数据的一部分连同正在接收补充内容的第二输入缓冲器中的第二数据。以这种方式,内容呈现设备可以将可修改的内容段的相关部分(即,除了表示要覆盖补充内容的区域的那些部分之外的所有部分)与要用作覆盖的补充内容组合在一起,以创建所需的可修改的内容段以及覆盖在其上的补充内容。
因此,根据如图3所示的一个示例,通过执行内容覆盖操作,内容呈现设备104可以将补充内容覆盖在广告段B上,从而将其修改为广告段B’。结果是,内容呈现设备可以替代地输出第二修改序列308以供呈现,而不是输出接受序列304以供呈现。
K.跟踪和报告与操作有关的数据
为了帮助促进各种操作的执行(例如内容呈现设备104执行内容修改操作),并且为了帮助允许跟踪和报告这些操作,内容修改系统100和/或其组件可以在不同时间以不同方式跟踪并报告各种与操作有关的数据。
作为几个说明性示例,响应于正在执行的某些操作,例如本文中描述的那些操作,指纹匹配服务器106、内容呈现设备104和/或另一实体可以生成、存储和/或发送(i)指示已识别可修改的内容段的消息、(ii)指示已识别/确认频道(可能基于作为冷匹配尝试或热匹配尝试的结果而检测到的匹配)的消息、(iii)指示已识别所识别频道上即将发生的内容修改机会的消息、(iv)指示已请求补充内容的消息、(v)指示已接收到补充内容的消息、(vi)指示已开始内容修改操作的消息、(vii)指示已结束内容修改操作的消息,和/或(viii)指示计划的内容修改操作因任何给定原因中止和/或未执行的消息。在某些情况下,这些消息可以包括与这些操作有关的其他元数据。例如,元数据可以指定相关的时间信息、设备标识符、频道标识符、内容段标识符等。
L.基于水印的技术
虽然本公开已经描述了使用基于指纹的技术来执行各种操作并提供各种特征的内容修改系统100,但是在一些示例中,内容修改系统100可以使用基于水印的技术来代替基于指纹的技术之外,或者除了基于指纹的技术之外,内容修改系统100还可以使用基于水印的技术,来执行这些和其他操作并提供这些和其他特征。
例如,作为上述基于指纹的技术的替代,其中指纹匹配服务器106识别内容呈现设备104正在其上接收第二内容的频道,内容分发系统102或者另一实体可以将以水印的形式的频道标识符插入到第二内容中,使得指纹匹配服务器106、内容呈现设备104或另一实体可以提取频道标识符并使用它来识别内容呈现设备104正在其上接收第二内容的频道。
在该背景下,内容修改系统100可以采用现在已知或以后开发的任何水印技术。
M.与使用基于地理区域的参考指纹数据集的选择有关的操作
如上所述,当内容呈现设备接收内容的频道未被识别时,指纹匹配服务器106可能需要在(i)表示此类内容的查询指纹数据和(ii)大量参考指纹数据集之间进行大量冷匹配尝试,以确定查询指纹数据是否与任何参考指纹数据集的至少一部分匹配。为了实现这一点,指纹匹配服务器106可能需要访问(例如,从内容分发系统102接收)许多不同的参考指纹数据集,并且在一些情况下将许多不同的参考指纹数据集存储在存储器中,每个参考指纹数据集表示内容分发系统在一个或更多个相应的频道上正在发送的内容的不同的一个或更多个相应的实例。这些大量的冷匹配尝试可能是耗时的,并且在一些情况下,在存储器和/或处理能力方面对于指纹匹配服务器106来说也是计算上昂贵的。在终端用户频繁改变频道的情况下,所花费的时间和计算费用甚至可能更庞大。
因此,为了改进指纹匹配过程,指纹匹配服务器106可以配置为执行和/或可以执行一个或更多个动作,以减少用于指纹匹配尝试的参考指纹数据集的数量。因此,可以减少指纹匹配尝试的次数,并且可以在更短的时间内完成指纹匹配过程。在一些情况下,也可以减少指纹匹配服务器106用于指纹匹配过程的所需的存储或处理能力。
指纹匹配服务器106可以接收表示内容呈现设备104在频道上所接收的内容的查询指纹数据(例如,上面提到的“第二指纹数据”)。
在接收查询指纹数据的动作之前、期间或之后,指纹匹配服务器106可以识别内容呈现设备104的地理区域。例如,该地理区域可以是美国境内或美国境外的DMA。作为另一示例,地理区域可以是具有限定的边界的一个或更多个建筑物、城镇、城市、县、国家和/或其他区域。地理区域也可以采用其他形式。
识别内容呈现设备104的地理区域的动作可以涉及识别与内容呈现设备104相关联的一种或更多种特定类型的信息并将所识别的信息映射到地理区域。为了实现这一点,指纹匹配服务器106可以存储和/或从存储映射数据的内容修改系统100的其他设备接收映射数据,该映射数据将与内容呈现设备104相关联的一种或更多种不同类型的信息与相应的地理区域进行映射。该映射数据在本文中被称为“第一映射数据”。
例如,指纹匹配服务器106可以识别内容呈现设备104的设备标识符,并且使用第一映射数据,将所识别的设备标识符映射到地理区域。如上所述,指纹匹配服务器106可以以各种方式确定设备标识符,例如通过从内容呈现设备104接收,和/或通过从内容呈现设备104接收其他数据并使用其他映射数据映射所接收的数据以确定设备标识符。
作为另一示例,指纹匹配服务器106可以识别内容呈现设备104的IP地址,并且使用第一映射数据将所识别的IP地址映射到地理区域。指纹匹配服务器106可以以各种方式确定IP地址,例如通过从内容呈现设备104或内容修改系统100内或外的其他设备接收,和/或通过从内容呈现设备104或其他设备接收其他数据并使用其他映射数据来映射所接收的数据以确定IP地址。
作为另一示例,指纹匹配服务器106可以识别当前正在、之前已经和/或计划在内容呈现设备104上呈现的内容,并且使用第一映射数据将所识别的内容映射到地理区域。指纹匹配服务器106可以以各种方式确定内容标识符,例如通过从内容呈现设备104或内容修改系统100内或外的其他设备接收,和/或通过从内容呈现设备104或其他设备接收其他数据并使用其他映射数据来映射所接收的数据以确定内容标识符。在一些示例中,内容标识符可以是指纹匹配服务器106可以从内容分发系统102、内容管理系统108和/或内容修改系统100内的其他设备接收的元数据或作为元数据的一部分而被包括。例如,内容标识符可以是或包括内容段标识符、节目标识符、广告标识符、频道标识符和/或与在内容呈现设备104上呈现的内容相关联的其他标识符,或作为这些标识符的一部分而被包括。
作为另一示例,指纹匹配服务器106可以识别内容分发系统102与内容呈现设备104之间的内容传输延迟,并且使用第一映射数据将所识别的内容传输延迟映射到地理区域。在实践中,从内容修改系统102发送到特定地理区域中的一个内容呈现设备的内容可能具有与从内容修改系统102发送到相同地理区域中的另一个内容呈现设备的内容相似或近似相同的内容传输延迟。
可以以各种方式生成第一映射数据。例如,可以手动输入上述信息和内容传输延迟之间的映射。附加地或替代地,指纹匹配服务器106可以收集和存储上述信息,然后随着时间的推移识别地理区域,并将每个识别的地理区域分配给相应的设备标识符、IP地址、内容标识符、内容传输延迟等。其他示例也是可行的。可以随着时间的推移创建、维护和更新第一映射数据以记录不同类型信息(包括但不限于上述信息)之间的关联。
在已经识别出内容呈现设备104的地理区域之后,指纹匹配服务器106可以至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集。
为了实现这一点,例如,指纹匹配服务器106可以在存储器中存储,和/或从内容修改系统100内或外的其他设备接收(存储在存储器中的)映射数据(例如,表),该映射数据将多个地理区域的每个地理区域映射到相应的参考指纹数据集。该映射数据在本文中被称为“第二映射数据”。在一些示例中,第一映射数据可以包括第二映射数据。在其他示例中,第一映射数据和第二映射数据可以存储在单独的位置(例如,单独存储在同一计算设备内或彼此远程存储在单独的计算设备中)。在任一情况下,包括在第一映射数据中的任何信息都可以映射到第二映射数据中的任何信息,反之亦然。
至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集的动作可以涉及参考第二映射数据以选择第二映射数据映射到所识别的地理区域的参考指纹数据集。第二映射数据可以包括所选择的参考指纹数据集,或者一旦所选择的参考指纹数据集被识别,指纹匹配服务器106就可以从存储所选择的参考指纹数据集的数据库或数据库分区中检索所选择的参考指纹数据集。数据库或数据库分区可以是通用数据库/分区,或者可以被分配用于存储与特定地理区域相关联的参考指纹数据集。
可以以各种方式生成第二映射数据。例如,可以手动输入地理区域和参考指纹数据集之间的映射。附加地或替代地,指纹匹配服务器106可以存储地理区域列表,然后随着时间的推移接收参考指纹数据集并将每个所接收的参考指纹数据集分配给至少一个地理区域。其他示例也是可行的。在一些实施方式中,不同于指纹匹配服务器106的内容修改系统100的另一个设备可以生成和/或存储第二映射数据。至少使用所识别的地理区域作为基础来选择与所识别的地理区域相对应的参考指纹数据集的动作也可以采用其他形式。
在一些实施例中,附加信息可以被存储在存储器中和/或也可以作为第二映射数据的一部分而被包括。例如,第二映射数据可以将每个参考指纹数据集映射到与参考指纹数据集相关联的特定频道标识符。作为另一示例,第二映射数据可以将内容呈现设备的多个设备标识符中的每个设备标识符映射到历史内容消费数据、人口统计数据和/或与该设备标识符相关联的其他数据。因此,可以随着时间的推移创建、维护和更新第二映射数据以记录不同类型信息之间的关联,不同类型信息包括但不限于参考指纹数据集、频道标识符、内容呈现设备的地理区域、用于内容呈现设备的设备标识符、历史内容消费数据和/或人口统计数据。
根据以上讨论,指纹匹配服务器106也可以使用附加信息作为选择参考指纹数据集的基础,例如历史内容消费数据、人口统计数据和/或与内容呈现设备104的设备标识符或其他识别信息相关联的其他数据。例如,在内容呈现设备104的设备标识符已经被识别的情况下,指纹匹配服务器106可以使用设备标识符来查找内容呈现设备104的历史内容消费数据、人口统计数据和/或其他数据。此外,在使用附加信息来选择参考指纹数据集的情况下,指纹匹配服务器106可以使用所识别的地理区域和附加信息作为基础,来识别哪个参考指纹数据集与所识别的地理区域和附加信息相关联,并选择所识别的参考指纹数据集。举例来说,第二映射数据可以将参考指纹数据集映射到特定DMA和由内容呈现设备104历史上消费的特定类型的内容。指纹匹配服务器106可以使用附加信息来通知哪个参考指纹数据集也可以以其他方式进行选择。
这样,诸如内容呈现设备104的历史内容消费数据之类的附加信息可以有利地用来对用于确定匹配和用于频道识别而考虑的参考指纹数据集的数量进行进一步细化(例如,减少)。
在选择了参考指纹数据集之后,指纹匹配服务器106可以检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配。可以以与上述针对冷匹配尝试描述的方式相同或相似的方式来检测匹配。响应于检测到匹配,指纹匹配服务器106可以执行动作。动作可以采取各种形式,包括但不限于与上述促进内容呈现设备104执行内容修改操作的其他操作有关的动作,例如指纹匹配服务器106识别频道上即将出现的内容修改机会的操作和/或指纹匹配服务器106准备内容呈现设备104以执行内容修改的操作。
如上所述,与查询指纹数据相关联的元数据可能无法识别内容呈现设备104正在其上接收内容的频道。因此,指纹匹配服务器106执行的动作可以涉及识别频道。例如,指纹匹配服务器106用来检测匹配的所选择的参考指纹数据集中的至少一部分参考指纹数据可以与频道相对应,并且该动作可以涉及将该频道识别为内容呈现设备104正在其上接收内容的频道。例如,指纹匹配服务器106可以基于与参考指纹数据相关联的频道标识符元数据(例如,与从内容分发系统102接收的第一指纹数据相关联的第一元数据)来识别频道。
如上所述,在指纹匹配服务器106识别出内容呈现设备104正在其上接收内容的频道之后,指纹匹配服务器106可以执行附加动作,例如(i)生成与内容呈现设备104正在其上接收内容的所识别的频道相关联的元数据、(ii)发送所识别的频道和相关联的元数据的指示、(iii)识别所识别频道上即将出现的内容修改机会,和/或(iv)生成数据并将数据发送到内容呈现设备104以促进内容呈现设备104执行与识别出的所识别的频道上的内容修改机会有关的内容修改操作。因此,响应于检测到匹配来执行动作的动作可以涉及这些动作中的任何一个动作或更多个动作的执行。其他动作也是可行的。
在实践中,内容呈现设备104可能发送并且指纹匹配服务器106可能接收具有查询指纹数据的许多查询。在这样的情况下,指纹匹配服务器106可以酌情针对许多查询中的每个查询执行上述操作中的一个操作或更多个操作,例如将每个这样的查询从内容呈现设备104引导到用于内容呈现设备104的地理区域的适当的参考指纹数据集。
图5是示例方法500的流程图。在块502处,方法500包括接收表示由内容呈现设备接收的内容的查询指纹数据。
在块504处,方法500包括识别内容呈现设备的地理区域。
在块506处,方法500包括至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集。
在块508处,方法500包括检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配。
在块510处,方法500包括响应于检测到匹配来执行动作。
方法500和相关动作可以至少部分地由指纹匹配服务器106执行。在一些实施方式中,方法500和相关动作可以至少部分地由内容修改系统100内的另一个设备执行。
如上所述,所公开的方法和系统的实施方式提供了特定于计算机网络和计算系统(例如,诸如内容修改系统100的内容修改系统)的技术改进。
在被配置为向终端用户产生和提供内容(例如,目标内容)的系统中可能存在各种技术问题,例如低效和计算复杂性。这些技术问题在内容修改系统中尤其明显,其中,当需要修改由这些内容呈现设备接收和呈现的许多内容段时,众多内容分发系统在很长一段时间内将大量视频内容发送到众多内容呈现设备。上述操作及其各种实施方式可以被集成到这些和其他内容修改系统环境中以全部或部分地解决这些和其他技术问题。
例如,如上所述,本公开的实施方式通过减少指纹匹配服务器在确定指纹之间的匹配中花费的时间来改进指纹匹配过程。在实践中,用于修改内容和向终端用户提供内容的操作通常发生在很短的持续时间内(例如,几秒或更短)。因此,所公开的操作有助于使内容修改的各个方面更有效,即指纹匹配和作为指纹匹配的结果而执行的动作,这有助于确保在期望的时间内可靠地执行这些操作,包括在大型内容修改系统中。
作为另一个示例,如上所述,因为本公开的实施方式可以限制考虑哪些参考指纹数据集,所以这些实施方式可以减少指纹匹配服务器和/或内容修改系统中的其他实体存储参考指纹数据集、执行指纹匹配和识别频道所需的存储数量和/或处理能力。通过以这种方式使指纹匹配过程和后续动作的计算成本更低,可以使内容修改的各个方面更加高效和可靠。
此外,如上所述,作为识别DMA或内容呈现设备的其他地理区域特定信息的结果而确定的指纹匹配可以帮助促进由指纹匹配服务器和/或内容修改系统内的其他实体执行的其他动作,例如,识别即将出现的内容修改机会和/或准备内容呈现设备104以执行与即将出现的内容修改机会有关的内容修改操作。
本文已经详细描述了这些和其他改进,尽管本文描述的操作是出于示例的目的,所公开的方法和系统的实施方式也可以提供其他改进。
IV.示例变型
尽管已经描述了关于特定实体和特定操作的上述示例和特征,但是在实践中,这些实体的许多实例以及这些操作的许多实例可能同期或同时大规模地被执行。实际上,在实践中,内容修改系统100可能包括许多内容分发系统(每个都可能在许多频道上发送内容)和许多内容呈现设备,其中在例行和重复的基础上执行的所期望的操作中的一些操作或全部操作与这些实体中的一些实体或全部实体相关。
此外,虽然本公开中描述的一些操作已经被描述为由特定实体执行,但是这些操作可以由任何实体执行,例如本公开中描述的其他实体。此外,尽管已经按照特定顺序和/或结合示例时间语言叙述了操作,但是不需要按照所叙述的顺序执行操作,也不需要根据任何特定的时间限制来执行操作。然而,在一些情况下,可能期望以所述顺序、以另一顺序和/或以同期/同时执行操作中的至少一些操作的方式来执行操作中的一个或更多个操作。同样,在一些情况下,可能需要根据一个或更多个或所列举的时间限制或其他时序限制来执行操作中的一个或更多个操作。此外,所描述的操作中的每一个操作可以响应于其他描述的操作中的一个或更多个操作的执行而被执行。此外,并非所有操作都需要执行以实现本公开提供的一个或更多个益处,因此并非所有操作都是必需的。
尽管已经结合本公开的一个或更多个示例描述了某些变化,但是这些变化也可以应用于本公开的其他示例中的一些或全部,因此本公开的各方面可以组合和/或以多种方式排列。选择本公开中描述的示例至少部分是因为它们有助于解释所描述的各种特征的实际应用。
此外,虽然已经描述了本公开的选择示例,但是这些示例的改变和排列对于本领域普通技术人员来说将是显而易见的。在不背离如所附权利要求所述的本发明的更宽泛的方面的情况下,其他变化、替换和/或变更也是可行的。

Claims (14)

1.一种方法,包括:
指纹匹配服务器接收查询指纹数据,所述查询指纹数据由内容呈现设备生成并且表示所述内容呈现设备在所述指纹匹配服务器未识别的频道上接收的内容;
指纹匹配服务器识别所述内容呈现设备的地理区域;
指纹匹配服务器至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集,其中,所述多个参考指纹数据集包括由至少一个内容分发系统生成并且表示在所述指纹匹配服务器所识别的频道上发送的内容的参考指纹数据,其中,至少使用所识别的地理区域作为基础来选择与所识别的地理区域相对应的参考指纹数据集包括:
访问映射数据,所述映射数据将多个地理区域的每个地理区域映射到所述多个参考指纹数据集的相应的参考指纹数据集,以及
使用所述映射数据作为基础来选择所述映射数据映射到所识别的地理区域的参考指纹数据集;
指纹匹配服务器检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配,其中,所选择的参考指纹数据集中的至少一部分参考指纹数据表示在所述指纹匹配服务器所识别的频道中的第一频道上发送的内容;
响应于检测到匹配,指纹匹配服务器将所述第一频道识别为所述内容呈现设备正在其上接收内容的频道;
响应于将所述第一频道识别为所述内容呈现设备正在其上接收内容的频道,在所述第一频道上的内容段的线性序列内识别即将出现的内容修改机会;以及
执行促进所述内容呈现设备执行内容修改操作的动作,所述内容修改操作与所述第一频道上的即将出现的内容修改机会相关。
2.根据权利要求1所述的方法,其中,识别所述内容呈现设备的地理区域包括:
识别所述内容呈现设备的设备标识符;以及
将所识别的设备标识符映射到所述地理区域。
3.根据权利要求1所述的方法,其中,识别所述内容呈现设备的地理区域包括:
识别所述内容呈现设备的IP地址;以及
将所识别的IP地址映射到所述地理区域。
4.根据权利要求1所述的方法,其中,识别所述内容呈现设备的地理区域包括:
识别在所述内容呈现设备上呈现的内容;以及
将所识别的内容映射到所述地理区域。
5.根据权利要求1所述的方法,其中,所述内容呈现设备的地理区域是所述内容呈现设备的指定市场区域(DMA)。
6.一种非暂时性计算机可读存储介质,其上存储有程序指令,所述程序指令在由处理器执行时使一组操作被执行,所述一组操作包括:
指纹匹配服务器接收查询指纹数据,所述查询指纹数据由内容呈现设备生成并且表示所述内容呈现设备在所述指纹匹配服务器未识别的频道上接收的内容;
指纹匹配服务器识别所述内容呈现设备的地理区域;
指纹匹配服务器至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集,其中,所述多个参考指纹数据集包括由至少一个内容分发系统生成并且表示在所述指纹匹配服务器所识别的频道上发送的内容的参考指纹数据,其中,至少使用所识别的地理区域作为基础来选择与所识别的地理区域相对应的参考指纹数据集包括:
访问映射数据,所述映射数据将多个地理区域的每个地理区域映射到所述多个参考指纹数据集的相应的参考指纹数据集,以及
使用所述映射数据作为基础来选择所述映射数据映射到所识别的地理区域的参考指纹数据集;
指纹匹配服务器检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配,其中,所选择的参考指纹数据集中的至少一部分参考指纹数据表示在所述指纹匹配服务器所识别的频道中的第一频道上发送的内容;以及
响应于检测到匹配,指纹匹配服务器将所述第一频道识别为所述内容呈现设备正在其上接收内容的频道;
响应于将所述第一频道识别为所述内容呈现设备正在其上接收内容的频道,在所述第一频道上的内容段的线性序列内识别即将出现的内容修改机会;以及
执行促进所述内容呈现设备执行内容修改操作的动作,所述内容修改操作与所述第一频道上的即将出现的内容修改机会相关。
7.根据权利要求6所述的非暂时性计算机可读存储介质,其中,识别所述内容呈现设备的地理区域包括:
识别所述内容呈现设备的设备标识符;以及
将所识别的设备标识符映射到所述地理区域。
8.根据权利要求6所述的非暂时性计算机可读存储介质,其中,识别所述内容呈现设备的地理区域包括:
识别所述内容呈现设备的IP地址;以及
将所识别的IP地址映射到所述地理区域。
9.根据权利要求6所述的非暂时性计算机可读存储介质,其中,识别所述内容呈现设备的地理区域包括:
识别在所述内容呈现设备上呈现的内容;以及
将所识别的内容映射到所述地理区域。
10.根据权利要求6所述的非暂时性计算机可读存储介质,其中,所述内容呈现设备的地理区域是所述内容呈现设备的指定市场区域(DMA)。
11.一种计算系统,包括:
处理器;以及
非暂时性计算机可读存储介质,其上存储有程序指令,所述程序指令在由处理器执行时使一组操作被执行,所述一组操作包括:
指纹匹配服务器接收查询指纹数据,所述查询指纹数据由内容呈现设备生成并且表示所述内容呈现设备在所述指纹匹配服务器未识别的频道上接收的内容;
指纹匹配服务器识别所述内容呈现设备的地理区域;
指纹匹配服务器至少使用所识别的地理区域作为基础来从多个参考指纹数据集中选择与所识别的地理区域相对应的参考指纹数据集,其中,所述多个参考指纹数据集包括由至少一个内容分发系统生成并且表示在所述指纹匹配服务器所识别的频道上发送的内容的参考指纹数据,其中,至少使用所识别的地理区域作为基础来选择与所识别的地理区域相对应的参考指纹数据集包括:
访问映射数据,所述映射数据将多个地理区域的每个地理区域映射到所述多个参考指纹数据集的相应的参考指纹数据集,以及
使用所述映射数据作为基础来选择所述映射数据映射到所识别的地理区域的参考指纹数据集;
指纹匹配服务器检测查询指纹数据与所选择的参考指纹数据集中的至少一部分参考指纹数据之间的匹配,其中,所选择的参考指纹数据集中的至少一部分参考指纹数据表示在所述指纹匹配服务器所识别的频道中的第一频道上发送的内容;以及
响应于检测到匹配,指纹匹配服务器将所述第一频道识别为所述内容呈现设备正在其上接收内容的频道;
响应于将所述第一频道识别为所述内容呈现设备正在其上接收内容的频道,在所述第一频道上的内容段的线性序列内识别即将出现的内容修改机会;以及
执行促进所述内容呈现设备执行内容修改操作的动作,所述内容修改操作与所述第一频道上的即将出现的内容修改机会相关。
12.根据权利要求11所述的计算系统,其中,识别所述内容呈现设备的地理区域包括:
识别所述内容呈现设备的设备标识符;以及
将所识别的设备标识符映射到所述地理区域。
13.根据权利要求11所述的计算系统,其中,识别所述内容呈现设备的地理区域包括:
识别所述内容呈现设备的IP地址;以及
将所识别的IP地址映射到所述地理区域。
14.根据权利要求11所述的计算系统,其中,识别所述内容呈现设备的地理区域包括:
识别在所述内容呈现设备上呈现的内容;以及
将所识别的内容映射到所述地理区域。
CN202080049028.8A 2019-05-10 2020-05-08 具有基于地理区域的特征的内容修改系统 Active CN114072789B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962846396P 2019-05-10 2019-05-10
US62/846,396 2019-05-10
US16/836,034 2020-03-31
US16/836,034 US10846506B1 (en) 2019-05-10 2020-03-31 Content-modification system with geographic area-based feature
PCT/US2020/032110 WO2020231814A1 (en) 2019-05-10 2020-05-08 Content-modification system with geographic area-based feature

Publications (2)

Publication Number Publication Date
CN114072789A CN114072789A (zh) 2022-02-18
CN114072789B true CN114072789B (zh) 2023-04-18

Family

ID=73047422

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080049028.8A Active CN114072789B (zh) 2019-05-10 2020-05-08 具有基于地理区域的特征的内容修改系统

Country Status (5)

Country Link
US (2) US10846506B1 (zh)
EP (1) EP3967050A4 (zh)
JP (1) JP7094462B1 (zh)
CN (1) CN114072789B (zh)
WO (1) WO2020231814A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10846506B1 (en) * 2019-05-10 2020-11-24 The Nielsen Company (Us), Llc Content-modification system with geographic area-based feature

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108702531A (zh) * 2016-02-29 2018-10-23 格雷斯诺特公司 利用基于参考流比较的多匹配检测的媒体频道识别和动作

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8863165B2 (en) * 2010-11-01 2014-10-14 Gracenote, Inc. Method and system for presenting additional content at a media system
US9160837B2 (en) * 2011-06-29 2015-10-13 Gracenote, Inc. Interactive streaming content apparatus, systems and methods
US8893167B2 (en) 2012-02-07 2014-11-18 Turner Broadcasting System, Inc. Method and system for automatic content recognition based on customized user preferences
US9495451B2 (en) 2013-01-07 2016-11-15 Gracenote, Inc. Identifying video content via fingerprint matching
US8997164B2 (en) 2013-01-07 2015-03-31 Gracenote, Inc. Authorizing devices based on identifying content distributor
US9146990B2 (en) 2013-01-07 2015-09-29 Gracenote, Inc. Search and identification of video content
US9009103B2 (en) 2013-03-15 2015-04-14 Microsoft Technology Licensing, Llc Fingerprint-based, intelligent, content pre-fetching
US9813781B2 (en) 2015-10-27 2017-11-07 Sorenson Media, Inc. Media content matching and indexing
KR102272768B1 (ko) * 2016-01-05 2021-07-06 로쿠, 인코퍼레이티드 컨텐츠 특성 기반 트리거 피처를 갖는 컴퓨팅 시스템
US10063917B2 (en) * 2016-03-16 2018-08-28 Sorenson Media Inc. Fingerprint layouts for content fingerprinting
US20180095615A1 (en) * 2016-10-03 2018-04-05 Gen 1 Media Group, Inc. Interactive Information Presentation System and Method
US10972203B2 (en) * 2017-06-12 2021-04-06 Gracenote, Inc. Detecting and responding to rendering of interactive video content
US10506275B1 (en) 2018-07-16 2019-12-10 Gracenote, Inc. Dynamic control of fingerprinting rate to facilitate time-accurate revision of media content
US10904587B2 (en) 2018-07-19 2021-01-26 Gracenote, Inc. Establishment and use of time mapping based on interpolation using low-rate fingerprinting, to help facilitate frame-accurate content revision
WO2020142426A1 (en) * 2019-01-04 2020-07-09 Gracenote, Inc. Generation of media station previews using a secondary tuner
US10846506B1 (en) * 2019-05-10 2020-11-24 The Nielsen Company (Us), Llc Content-modification system with geographic area-based feature

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108702531A (zh) * 2016-02-29 2018-10-23 格雷斯诺特公司 利用基于参考流比较的多匹配检测的媒体频道识别和动作
CN108885629A (zh) * 2016-02-29 2018-11-23 格雷斯诺特公司 利用基于与差分参考指纹特征匹配的多匹配检测和消歧的媒体信道标识和动作

Also Published As

Publication number Publication date
JP2022530275A (ja) 2022-06-28
EP3967050A1 (en) 2022-03-16
US20200356755A1 (en) 2020-11-12
JP7094462B1 (ja) 2022-07-01
WO2020231814A1 (en) 2020-11-19
CN114072789A (zh) 2022-02-18
US20210027042A1 (en) 2021-01-28
US10846506B1 (en) 2020-11-24
US11900719B2 (en) 2024-02-13
EP3967050A4 (en) 2023-02-15

Similar Documents

Publication Publication Date Title
CN113796087B (zh) 使用多种指纹数据类型特征的内容修改系统
TWI802797B (zh) 用於檢測和回應於在先前檢測到的指紋匹配之後檢測到的指紋不匹配的方法、非暫時性電腦可讀儲存介質及計算系統
CN113796089A (zh) 具有问题检测和响应动作特征的内容修改系统
CN113966618B (zh) 具有系统资源请求特征的内容修改系统
CN113796093B (zh) 具有确定输入缓冲区切换延迟特征的内容修改系统
TWI776165B (zh) 用於從內容呈現設備接收對補充內容的請求的方法、非暫時性電腦可讀儲存介質及計算系統
TWI752517B (zh) 用於促進內容呈現設備執行與頻道上即將發生的內容修改機會相關的內容修改操作的方法、計算系統及非暫時性電腦可讀儲存介質
WO2020231815A1 (en) Content-modification system with fingerprint data mismatch and responsive action feature
US11700423B2 (en) Content-modification system with transmission delay-based feature
WO2020257424A1 (en) Content-modification system with determination of input-buffer switching delay feature
CN114072789B (zh) 具有基于地理区域的特征的内容修改系统
WO2020247835A1 (en) Content-modification system with testing and reporting feature
US20200356757A1 (en) Content-Modification System With Geographic Area-Based Feature
US11354323B2 (en) Content-modification system with geographic area-based feature

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant