TW202102000A - 具有確定輸入緩衝區切換延遲特徵的內容修改系統 - Google Patents

具有確定輸入緩衝區切換延遲特徵的內容修改系統 Download PDF

Info

Publication number
TW202102000A
TW202102000A TW109115457A TW109115457A TW202102000A TW 202102000 A TW202102000 A TW 202102000A TW 109115457 A TW109115457 A TW 109115457A TW 109115457 A TW109115457 A TW 109115457A TW 202102000 A TW202102000 A TW 202102000A
Authority
TW
Taiwan
Prior art keywords
content
presentation device
buffer
output
input buffer
Prior art date
Application number
TW109115457A
Other languages
English (en)
Other versions
TWI751550B (zh
Inventor
安德魯 勞倫斯 阿什巴赫
約翰L 海恩斯
Original Assignee
美商尼爾森(美國)有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商尼爾森(美國)有限公司 filed Critical 美商尼爾森(美國)有限公司
Publication of TW202102000A publication Critical patent/TW202102000A/zh
Application granted granted Critical
Publication of TWI751550B publication Critical patent/TWI751550B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • H04N21/4415Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23602Multiplexing isochronously with the video sync, e.g. according to bit-parallel or bit-serial interface formats, as SDI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43074Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on the same device, e.g. of EPG data or interactive icon with a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4825End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本發明關於一種方法包括:(i)確定基準輸入至輸出延遲,表示內容輸入到第一輸入緩衝區至由輸出緩衝區輸出之間的時間段;(ii)在表示第一輸入緩衝區中的內容的第一指紋資料(a)與表示輸出緩衝區中的內容的第二指紋資料(b)之間建立同步鎖;(iii)確定指令時間點,指示內容呈現設備從第一輸入緩衝區中的內容以填充輸出緩衝區切換到第二輸入緩衝區中的內容以填充輸出緩衝區;(iv)確定失去同步鎖的時間點,在時間點失去已建立的同步鎖;(v)確定輸入緩衝區切換延遲;及(vi)執行內容修改操作的執行。

Description

具有確定輸入緩衝區切換延遲特徵的內容修改系統
[相關申請的交叉引用]
本申請要求於2019年5月10日提交的申請號為62/846,409的美國臨時專利申請的優先權,其全部內容通過引用結合在本申請中。 [用法和術語]
在本發明中,除非另有規定和/或除非特定上下文另有明確指出,否則術語“一”或“一個”指至少一個,並且術語“所述、該”指至少一個。
無。
一方面,公開了一種與包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區的內容呈現設備結合使用的方法,其中內容呈現設備被配置成使得來自第一輸入緩衝區或第二輸入緩衝區的內容能夠傳到輸出緩衝區。該方法包括:(i)確定基準輸入至輸出延遲,該基準輸入至輸出延遲表示內容輸入到第一輸入緩衝區至由輸出緩衝區輸出之間的時間段;(ii)在表示第一輸入緩衝區中的內容的第一指紋資料(a)與表示輸出緩衝區中的內容的第二指紋資料(b)之間建立同步鎖;(iii)確定指令時間點,在該指令時間點指示內容呈現設備從使用第一輸入緩衝區中的內容以填充輸出緩衝區切換到使用第二輸入緩衝區中的內容以填充輸出緩衝區;(iv)確定失去同步鎖的時間點,在該時間點失去已建立的同步鎖;(v)使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲;以及(vi)使用已確定的輸入緩衝區切換延遲來促進內容修改操作的執行。
另一方面,非暫時性電腦可讀儲存介質,其上儲存有程式指令,該程式指令在由處理器執行時,使得與內容呈現設備結合使用而執行一組操作,該內容呈現設備包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區,其中內容呈現設備被配置成使得來自第一輸入緩衝區或第二輸入緩衝區的內容能夠傳到輸出緩衝區。該組操作包括:(i)確定基準輸入至輸出延遲,該基準輸入至輸出延遲表示內容輸入到第一輸入緩衝區至由輸出緩衝區輸出之間的時間段;(ii)在表示第一輸入緩衝區中的內容的第一指紋資料(a)與表示輸出緩衝區中的內容的第二指紋資料(b)之間建立同步鎖;(iii)確定指令時間點,在該時間點指示內容呈現設備從使用第一輸入緩衝區中的內容以填充輸出緩衝區切換到使用第二輸入緩衝區中的內容以填充輸出緩衝區;(iv)確定失去同步鎖的時間點,在該時間點失去已建立的同步鎖;(v)使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲;以及(vi)使用已確定的輸入緩衝區切換延遲來促進內容修改操作的執行。
另一方面,計算系統包括處理器和其上儲存有程式指令的非暫時性電腦可讀儲存介質,該程式指令在由處理器執行時,使得與內容呈現設備結合使用而執行一組操作,該內容呈現設備包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區,其中內容呈現設備被配置成使得來自第一輸入緩衝區或第二輸入緩衝區的內容能夠傳到輸出緩衝區。該組操作包括:(i)確定基準輸入至輸出延遲,該基準輸入至輸出延遲表示內容輸入到第一輸入緩衝區至由輸出緩衝區輸出之間的時間段;(ii)在表示第一輸入緩衝區中的內容的第一指紋資料(a)與表示輸出緩衝區中的內容的第二指紋資料(b)之間建立同步鎖;(iii)確定指令時間點,在該時間點指示內容呈現設備從使用第一輸入緩衝區中的內容以填充輸出緩衝區切換到使用第二輸入緩衝區中的內容以填充輸出緩衝區;(iv)確定失去同步鎖的時間點,在該時間點失去已建立的同步鎖;(v)使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲;以及(vi)使用已確定的輸入緩衝區切換延遲來促進內容修改操作的執行。
[I、概述]
為了向最終使用者傳遞和呈現內容,內容提供者能夠將內容傳送到一個或更多個內容分發系統,內容分發系統中的每一個又能夠依次將內容傳送到一個或更多個相應的內容呈現設備以輸出,用於呈現給相應的最終使用者。這樣的分層結構能夠促進內容方便、廣泛的分發。
舉例來說,為了使視頻內容提供者將視頻內容傳遞給整個美國的最終使用者,視頻內容提供者能夠通過衛星或其他媒體將視頻內容傳送到服務於美國境內相應的指定市場區域(DMA)的內容分發系統。因此,每個這樣的內容分發系統能夠接收攜載視頻內容的國家衛星饋送,並且能夠將視頻內容傳送到內容分發系統的DMA中的電視機和/或機上盒,使得視頻內容能夠輸出以呈現給該DMA中的相應的最終使用者。在實踐中,這些內容分發系統及其向內容呈現設備的傳送方式能夠採用各種形式。例如,內容分發系統能夠與有線電視提供商相關聯,並且能夠通過混合光纖/同軸電纜連接將視頻內容傳送到作為有線電視訂戶的最終使用者的內容呈現設備。
這樣,在各種場景中,內容分發系統能夠將內容傳送到內容呈現設備,該內容呈現設備能夠接收並輸出內容以呈現給最終使用者。在一些情況下,即使內容呈現設備從內容分發系統接收內容,也期望內容呈現設備能夠執行內容修改操作,以便內容呈現設備能夠輸出用於呈現的替代內容而不是接收的內容的至少一部分。。
例如,在內容呈現設備接收到包含位於序列中某處的給定廣告片段的內容片段的線性序列的情況下,也期望內容呈現設備能夠將給定的原始廣告片段替換為可能更針對最終使用者的不同的替換廣告片段(例如,更針對最終使用者的興趣、人口統計資料等)。作為另一個示例,也期望內容呈現設備能夠在原始廣告片段上進行覆蓋,可能再次以更針對最終使用者的方式對增強原始廣告片段的內容進行覆蓋。所描述的內容修改系統能夠促進對於這些特徵和其他相關特徵的提供。
為了進一步詳細說明上述操作,就內容替換操作而言,內容呈現設備能夠輸出用於呈現的內容片段的序列,直到修改起始時間(其對應於原始廣告片段的開始)為止,此時內容呈現設備能夠切換到輸出以用於呈現替換廣告片段。然後,在修改結束時間(其對應於原始廣告片段的結束),內容呈現設備104能夠回切到輸出以用於呈現內容片段的線性序列中的後續內容(或者可能切換到其他內容)。
在一個示例中,這種切換能夠涉及使用內容呈現設備的各種緩衝區。例如,這能夠涉及內容呈現設備從在接收內容片段的序列(包括原始廣告片段)的第一輸入緩衝區中使用內容切換到在接收補充內容的第二輸入緩衝區中使用第二內容以填充輸出緩衝區。
然而,在一些情況下,當內容呈現設備提供啟動該切換的指令時,出於各種原因(例如,由於基於軟體和/或基於硬體的處理延遲)執行該輸入緩衝區切換可能需要一些時間(例如,200ms)。因此,在一些情況下,內容呈現設備可能在切換到替換廣告片段並呈現替換廣告片段之前呈現原始廣告片段的一小部分(例如,有幾百毫秒的時長)。類似的時序/對齊問題也能夠在修改結束時間附近發生。這些類型的問題能夠潛在地造成不期望的使用者體驗。
為了解決這些問題,在本發明的一個方面中,內容呈現設備能夠確定輸入緩衝區切換延遲,然後能夠在指示內容呈現設備執行內容替換操作時考慮該延遲。通過使用該技術,內容呈現設備能夠更準確地執行內容替換操作,從而限制或避免發生上述不期望的使用者體驗情況。這些特性和相關操作將在下面更詳細地描述。 [II、體系結構] [A、內容修改系統]
圖1是示例內容修改系統100的簡化框圖。內容修改系統100能夠包含各種部件,例如內容分發系統102、內容呈現設備104、指紋匹配伺服器106、內容管理系統108、資料管理系統110和/或補充內容傳遞系統112。
內容修改系統100還能夠包含連接內容修改系統100內的各種部件的一個或更多個連接機制。例如,如圖1所示,內容修改系統100能夠包含由線表示的、連接內容修改系統100的部件的連接機制。
在本發明中,術語“連接機制”是指在兩個或更多個部件、設備、系統或其他實體之間連接並且促進通訊的機制。連接機制能夠是或包含相對簡單的機制,例如電纜或系統匯流排,和/或相對複雜的機制,例如基於分組的通訊網路(例如網際網路)。在一些情況下,例如在連接至少部分是無線的情況下,連接機制能夠是或包含非有形介質。在本發明中,連接能夠是直接連接或間接連接,所述間接連接是穿過和/或遍歷一個或更多個實體(例如路由器、交換機或其他網路設備)的連接。同樣,在本發明中,通訊(例如,資料的傳送或接收)能夠是直接或間接通訊。
內容修改系統100和/或其部件能夠採用計算系統的形式,其示例如下所述。
值得注意的是,在實踐中,內容修改系統100可能包含所描述的部件中的至少一些的許多實例。例如,內容修改系統100可能包含許多內容分發系統和許多內容呈現設備。 [B、計算系統]
圖2是示例計算系統200的簡化框圖。計算系統200能夠被配置成執行和/或能夠執行一個或更多個操作,例如本發明中描述的操作。計算系統200能夠包含各種部件,例如處理器202、資料儲存單元204、通訊介面206和/或使用者介面208。
處理器202能夠是或包含通用處理器(例如,微處理器)和/或專用處理器(例如,數位訊號處理器)。如下所述,處理器202能夠執行包含在資料儲存單元204中的程式指令。
資料儲存單元204能夠是或包含一個或更多個易失性、非易失性、可移動和/或不卸除式存放裝置部件,例如磁性記憶體、光學和/或快閃記憶體,和/或能夠與處理器202整體或部分地集成。此外,資料儲存單元204能夠是或包含非暫時性電腦可讀儲存介質,該儲存介質上儲存有程式指令(例如,編譯或非編譯的程式邏輯和/或機器代碼),該程式指令在由處理器202運行時,使計算系統200和/或另一個計算系統執行一個或更多個操作,例如本發明中描述的操作。這些程式指令能夠定義離散軟體應用和/或作為離散軟體應用的一部分。
在一些情況下,計算系統200能夠回應於接收的輸入,例如經由通訊介面206和/或使用者介面208接收到的輸入,來執行程式指令。資料儲存單元204還能夠儲存其他資料,例如在本發明中描述的任何資料。
通訊介面206能夠允許計算系統200根據一個或更多個協定與另一個實體連接和/或通訊。因此,計算系統200能夠根據一個或更多個協定向一個或更多個其他實體傳送資料和/或從一個或更多個其他實體接收資料。在一個示例中,通訊介面206能夠是或包含有線介面,例如乙太網介面或高清晰度多媒體介面(HDMI)。在另一個示例中,通訊介面206能夠是或包含無線介面,例如蜂窩介面或WI-FI介面。
使用者介面208能夠允許計算系統200與計算系統200的使用者之間的交互。這樣,使用者介面208能夠是或包含輸入部件,例如鍵盤、滑鼠、遙控器、麥克風和/或觸敏面板。使用者介面208還能夠是或包含輸出部件,例如顯示裝置(例如,其能夠與觸敏面板組合)和/或聲音揚聲器。
計算系統200還能夠包含連接計算系統200內的各種部件的一個或更多個連接機制。例如,如圖2所示,計算系統200能夠包含由線表示的、連接計算系統200的部件的連接機制。
計算系統200能夠包含上述部件中的一個或更多個,並且能夠以各種方式配置或佈置。例如,計算系統200能夠被配置為例如在一個或更多個伺服器使用者端類型佈置中操作的伺服器和/或使用者端(或者可能是伺服器集群和/或使用者端集群)。
如上所述,內容修改系統100和/或其部件能夠採用例如計算系統200的計算系統的形式。在一些情況下,一些或所有這些實體能夠採用更特定類型的計算系統的形式。例如,就內容呈現設備104而言,它能夠採用台式電腦、膝上型電腦、平板電腦、行動電話、電視機、機上盒、具有集成機上盒的電視機、媒體加密狗或連接有媒體加密狗的電視機等可能性的形式。 [III、示例操作]
內容修改系統100和/或其部件能夠被配置成執行和/或能夠執行一個或更多個操作。現在將描述這些操作和相關特徵的示例。
如上所述,在實踐中,內容修改系統100可能包含所描述部件中的至少一些的許多實例。同樣地,在實踐中,可能會多次執行所描述的操作中的至少一部分(可能是在常規的基礎上和/或與所描述部件的附加實例有關)。 [A、 與傳送內容的內容分發系統以及接收且輸出內容的內容呈現設備相關的操作]
針對上下文,現在將描述與傳送內容的內容分發系統102以及接收且輸出內容的內容呈現設備104相關的一般操作和示例。
首先,內容分發系統102能夠將內容(例如,從內容提供者接收到的內容)傳送到一個或更多個實體,例如內容呈現設備104。內容例如能夠是或包含音頻內容和/或視頻內容。在一些示例中,內容能夠採用內容片段(例如,節目片段和廣告片段)或其一部分的線性序列形式。就視頻內容而言,視頻內容的一部分例如可以是一個或更多個幀。
內容分發系統102能夠在一個或更多個頻道(有時稱為站或饋送)上傳送內容。這樣,內容分發系統102能夠與單頻道內容分發器或多頻道內容分發器(例如多頻道視頻節目分發器(MVPD))相關聯。
內容分發系統102及其在頻道上向內容呈現設備104傳送內容的方式能夠採用各種形式。舉例來說,內容分發系統102能夠是或包含有線電視頭端,該有線電視頭端與有線電視提供商相關聯且通過混合光纖/同軸電纜連接將頻道上的內容傳送到內容呈現設備104。作為另一個示例,內容分發系統102能夠是或包含衛星電視頭端,該衛星電視頭端與衛星電視提供商相關聯且通過衛星傳送將頻道上的內容傳送到內容呈現設備104。作為又一示例,內容分發系統102能夠是或包含電視廣播站,該電視廣播站與電視廣播提供商相關聯且通過地面空中介面將頻道上的內容傳送到內容呈現設備104。在這些示例和其他示例中,內容分發系統102能夠以表示內容的類比或數位廣播流的形式傳送內容。
內容呈現設備104能夠從一個或更多個實體、例如內容分發系統102接收內容。在一個示例中,內容呈現設備104可能基於經由使用者介面接收的輸入,能夠從多個可用頻道中選擇(例如,通過調諧到)頻道,使得內容呈現設備104能夠接收所選頻道上的內容。
在一些示例中,內容分發系統102能夠將內容傳送到內容呈現設備104,該內容呈現設備104能夠接收該內容,因此傳送的內容和接收到的內容能夠相同。然而,在其他示例中,它們能夠是不同的,例如內容分發系統102將內容傳送到內容呈現設備104,但該內容呈現設備104不接收該內容,而是從不同的內容分發系統接收不同的內容。
內容呈現設備104還能夠輸出用於呈現的內容。如上所述,內容呈現設備104能夠採用各種形式。在一個示例中,在內容呈現設備104是電視機(可能具有集成的機上盒和/或媒體加密狗)的情況下,輸出用於呈現的內容能夠涉及電視機經由使用者介面(例如,顯示裝置和/或聲音揚聲器)輸出內容,使得能夠將該內容呈現給最終使用者。作為另一個示例,在內容呈現設備104是機上盒或媒體加密狗的情況下,輸出用於呈現的內容能夠涉及機上盒或媒體加密狗經由通訊介面(例如,HDMI介面)輸出內容,使得該內容能夠被電視機接收繼而由電視機輸出以呈現給最終使用者。
這樣,在各種場景中,內容分發系統102能夠將內容傳送到內容呈現設備104,該內容呈現設備能夠接收並且輸出內容以呈現給最終使用者。在一些情況下,即使內容呈現設備104從內容分發系統102接收內容,也期望內容呈現設備104能夠執行內容修改操作,使得內容呈現設備104能夠輸出用於呈現的替代內容而不是所接收到的內容的至少一部分。
例如,在內容呈現設備104接收包含位於序列內某處的給定廣告片段的內容片段的線性序列的情況下,期望內容呈現設備104能夠用可能更針對最終使用者(即,更針對最終使用者的興趣、人口統計資料等)的不同廣告片段替換給定廣告片段。作為另一個示例,期望內容呈現設備104能夠在給定的廣告片段上進行覆蓋,可能再次以更針對最終使用者的方式對增強給定廣告片段的內容進行覆蓋。所描述的內容修改系統100能夠促進對於這些特徵和其他相關特徵的提供。
如上所述,在一個示例中,內容能夠採用內容片段的線性序列的形式。  這樣,在一個示例中,內容分發系統102能夠傳送內容片段的線性序列。這在本文中被稱為“傳送序列”。同樣,內容呈現設備104能夠接收內容片段的線性序列。這在本文中被稱為“接收序列”。根據上面的討論,傳送序列和接收序列能夠相同,或者他們也能夠不同。
圖3示出了這些概念的一些示例。在一個示例中,傳送序列是圖3中所示的傳送序列302。如圖所示,傳送序列302包含:程式片段A,隨後是AD片段B,隨後是AD片段C。
同樣,在一個示例中,接收序列是圖3中所示的接收序列304。在該示例中,內容分發系統102將傳送序列302傳送到內容呈現設備104,該內容呈現設備104將其接收為接收序列304,因此傳送序列302和接收序列304相同。這樣,如圖所示,接收序列304也包含:程式片段A,隨後是AD片段B,隨後是AD片段C。
在圖3中,傳送序列302的傳送時間和接收序列304的接收時間通過它們與時間軸350的關係表示。特別地,傳送時間和接收時間由於內容傳送延遲而彼此偏移,這將在下面更詳細地描述。
如上所述,在一些情況下,即使內容呈現設備104從內容分發系統102接收內容,能夠期望內容呈現設備104執行內容修改操作,使得內容呈現設備104能夠輸出用於呈現的替代內容而不是所接收到的內容的至少一部分。例如,在內容呈現設備104接收到接收序列的情況下,相比於用於呈現的輸出接收序列,內容呈現設備104能夠代替地輸出用於呈現的接收序列的修改版本。這在本文中被稱為“修改序列”。
例如,在接收序列包含位於接收序列內某處的給定廣告片段的情況下,期望內容呈現設備104能夠用可能更針對最終使用者(即,更針對最終使用者的興趣、人口統計資料等)的不同廣告片段替換給定廣告片段,從而得到內容呈現設備104能夠輸出用於呈現的修改序列。
為了說明這一點,在一個示例中,修改後的序列是圖3中所示的第一修改序列306。如圖所示,第一修改序列306包含:程式片段A,隨後是A D片段D(其替換了AD片段B),隨後是AD片段C。
作為另一個示例,期望內容呈現設備104能夠在給定的廣告片段上進行覆蓋,可能再次以更針對最終使用者的方式對增強給定廣告片段的內容進行覆蓋,從而得到內容呈現設備104能夠輸出用於呈現的修改序列。
為了說明這一點,在另一個示例中,修改後的序列是圖3中所示的第二修改序列308。如圖所示,第二修改序列308包含:程式片段A,隨後是AD片段B’(其是用覆蓋內容修改的AD片段B),隨後是AD片段C。
當引入和描述相關概念時,圖3的其他部分將在本發明中稍後描述。
考慮到以上提供的上下文,圖4A、4B、4C、4D、4E和4F共同組成表格,該表格示出了示例時間段和與內容修改系統100有關的能夠執行的相應操作。現在將描述這些操作和其他相關操作。 [B、 與在頻道上傳送第一內容的內容分發系統相關的操作]
在時間段T1期間,內容分發系統102能夠在頻道上將內容傳送到內容呈現設備104。該內容在本文中被稱為“第一內容”。在一個示例中,第一內容是圖3中所示的第一內容310。
在時間段T2期間,內容分發系統102能夠生成表示第一內容的指紋資料。該指紋資料在本文中被稱為“第一指紋資料”。內容分發系統102能夠使用現在已知的或以後開發的任何內容指紋識別過程來生成第一指紋資料。於2016年11月15日發佈的美國專利申請號9,495,451中描述了示例指紋生成技術,其全部內容通過引用結合在本文中。內容分發系統102能夠以給定速率,例如以第一內容的每幀一個指紋的速率生成第一指紋資料。第一指紋資料能夠是或包含這些生成的指紋的一些或全部。
內容分發系統102能夠在內容分發系統102內的各個點訪問第一內容。作為一個示例,內容分發系統102能夠在第一內容由內容分發系統102內的分發放大器輸出之後訪問該第一內容。
同樣在時間段T2期間,內容分發系統102能夠生成與第一內容和/或第一指紋資料相關聯的元資料。該元資料在本文中被稱為“第一元資料”。在一個示例中,第一元資料能夠是或包含傳送時間戳記,該傳送時間戳記表示內容分發系統102傳送第一內容的時間點。內容分發系統102能夠以各種方式確定傳送時間戳記,例如基於與參考時鐘同步的時鐘。
作為另一個示例,第一元資料能夠是或包含頻道識別符,該頻道識別符標識內容分發系統102正在其上傳送第一內容的頻道。內容分發系統102能夠以各種方式確定頻道識別符,例如基於將內容分發系統102和/或內容分發系統102內的物理輸入和/或輸出映射到相應的頻道識別符的映射資料。在一個示例中,在內容分發系統102在頻道A上傳送內容A、在頻道B上傳送內容B和在頻道C上傳送內容C的情況下,映射資料能夠指定三個不同的輸出(可能在三個不同的分發放大器上)中的哪一個映射到哪一個頻道識別符,使得內容分發系統102能夠為給定頻道的內容確定適當的頻道識別符。
作為另一個示例,第一元資料能夠是或包含SCTE-104資料、浮水印或類似類型的元資料,其中任何一個元資料本身都能夠編碼其他元資料,例如程式識別符、廣告識別符(例如,行業標準編碼標識(ISCI)金鑰)、程式類型、或者其他類型的文本或數位元資料。
內容分發系統102能夠以各種方式將第一指紋資料與第一元資料相關聯。例如,在第一指紋資料包含多個指紋、其中每個指紋表示第一內容的對應幀的情況下,內容分發系統102能夠將每個指紋與對應的傳送時間戳記和/或與其他對應的第一元資料相關聯。
在時間段T3期間,內容分發系統102能夠將第一指紋資料和第一元資料傳送到指紋匹配伺服器106。內容分發系統102能夠以給定的間隔傳送第一指紋資料和第一元資料。例如,內容分發系統102能夠每兩秒傳送其在最近的兩秒時間段期間生成的第一指紋資料和第一元資料。 [C、 與接收第二內容的內容呈現設備相關的操作]
在時間段T4期間,內容呈現設備104能夠從內容分發系統102接收內容。該內容在本文中被稱為“第二內容”。在一個示例中,第二內容是圖3中所示的第二內容312。
在時間段T5期間,內容呈現設備104能夠生成表示第二內容的指紋資料。該指紋資料在本文中被稱為“第二指紋資料”。內容呈現設備104能夠使用現在已知的或以後開發的任何內容指紋識別過程來生成第二指紋資料。內容呈現設備104能夠以各種速率、例如以第二內容的每幀一個指紋的速率生成第二指紋資料。第二指紋資料能夠是或包含這些生成的指紋中的一些或全部。
內容呈現設備104能夠在內容呈現設備104內的各個點訪問第二內容。作為一個示例,內容呈現設備104能夠在內容呈現設備104的輸入緩衝器(例如,HDMI緩衝器)正在接收第二內容時訪問該第二內容。在另一個配置中,內容呈現設備104能夠在內容呈現設備104的顯示緩衝器正在接收第二內容時訪問該第二內容。因此,在該配置中,第二內容能夠是內容呈現設備104不僅接收而且還輸出以用於呈現的內容。
同樣在時間段T5期間,內容呈現設備104能夠生成與第二內容和/或第二指紋資料相關聯的元資料。該元資料在本文中被稱為“第二元資料”。作為一個示例,第二元資料能夠是或包含接收時間戳記,該接收時間戳記表示內容呈現設備104接收第二內容的時間點。內容呈現設備104能夠以各種方式確定接收時間戳記,例如基於與參考時鐘同步的時鐘。如上所述,內容呈現設備104能夠在內容呈現設備104內的各個點訪問第二內容。在一個示例中,出於確定接收時間戳記的目的,第二內容被訪問的點能夠被認為是“接收”點。
在實踐中,雖然第一元資料可能是或包含頻道識別符,但第二元資料可能不是或不包含頻道識別符。
內容呈現設備104能夠以各種方式將第二指紋資料與第二元資料相關聯。例如,在第二指紋資料包含多個指紋、其中每個指紋表示第二內容的對應幀的情況下,內容呈現設備104能夠將每個第二指紋與對應的接收時間戳記和/或其他對應的元資料相關聯。
在時間段T6期間,內容呈現設備104能夠將第二指紋資料和第二元資料傳送到指紋匹配伺服器106。內容呈現設備104能夠以給定的間隔傳送第二指紋資料和第二元資料。例如,內容呈現設備104能夠每兩秒傳送其在最近的兩秒時間段期間生成的第二指紋資料和第二元資料。 [D、 與對在其上內容呈現設備正在接收第二內容的頻道進行標識相關的操作]
在時間段T7期間,指紋匹配伺服器106能夠從內容分發系統102接收第一指紋資料和第一元資料。如上所述,第一指紋資料表示由內容分發系統102在頻道上傳送的第一內容。如上所述,第一元資料能夠標識頻道並且出於該所描述示例的目的標識頻道。以此方式,第一內容能夠被認為是在已標識的頻道上傳送的內容。
在時間段T8期間,指紋匹配伺服器106能夠從內容呈現設備104接收第二指紋資料和第二元資料。如上所述,第二指紋資料表示由內容呈現設備104接收的第二內容。然而,如上所述,相關聯的元資料可能不標識頻道,並且出於此描述示例的目的也沒有標識該頻道。以此方式,第二內容能夠被認為是在未標識的頻道上接收的內容。
在時間段T9期間,指紋匹配伺服器106能夠比較第一指紋資料和第二指紋資料以確定是否存在匹配。在本發明中,這種類型的匹配嘗試,即(i)表示在已標識的頻道上傳送的內容的參考指紋資料與(ii)表示在未標識的頻道上接收的內容的查詢指紋資料之間的匹配嘗試,在本文中被稱為“冷匹配嘗試”。
在時間段T10期間,基於該比較,指紋匹配伺服器106能夠檢測第一指紋資料與第二指紋資料之間的匹配。指紋匹配伺服器106能夠使用現在已知的或以後開發的任何內容指紋比較和匹配技術來比較和/或檢測指紋資料之間的匹配。於2015年9月29日發佈的美國專利申請號 9,146,990中描述了示例指紋比較和匹配技術,其全部內容通過引用結合在本文中。
為了有效地比較第一指紋資料和第二指紋資料,指紋匹配伺服器106可能需要考慮內容傳送延遲。針對上下文,在內容分發系統102在時間點A在給定頻道上傳送給定的內容幀的情況下,出於各種原因,內容呈現設備104可能直到比時間點A晚(例如,晚十秒)的時間點B才接收該幀。這種類型的延遲在本文中被稱為“內容傳送延遲”。
在一個示例中,時間點A、時間點B和內容傳送延遲能夠分別是時間點A 314、時間點B 316和內容傳送延遲318,如圖3所示。請注意,圖3是出於說明的目的,並且不必至少相對於時間按比例縮放。在實踐中,內容傳送延遲的實際量可以不同於所示的量。
為了幫助指紋匹配伺服器106有效地比較第一指紋資料和第二指紋資料,指紋匹配伺服器106可能需要考慮這樣的內容傳送延遲。在一個示例中,指紋匹配伺服器106能夠通過其在接收時間點接收到的第一指紋資料與其在由起始時間點與結束時間點定義的時間段期間接收到的第二指紋資料進行比較來完成該目的。起始時間點能夠是接收時間點加上表示預期的內容傳送延遲(例如,十秒)的偏移量,再減去時間段的公差(例如,兩秒)。結束時間點能夠是接收時間點加上偏移量(例如,十秒),再加上時間段的公差(例如,兩秒)。這樣,在預期的內容傳送延遲為10秒的一個示例中,指紋匹配伺服器106能夠將其在接收時間點接收的第一指紋資料與第二指紋資料進行比較,該第二指紋資料是該指紋匹配伺服器在(i)接收時間點加八秒與(ii)接收時間點加十二秒之間的時間段期間接收的。
在一些情況下,指紋匹配伺服器106能夠確定內容傳送延遲,如上文所述,它能夠使用該內容傳送延遲來選擇用於確定起始時間點和結束時間點的適當偏移量。指紋匹配伺服器106能夠以各種方式確定內容傳送延遲。例如,在指紋匹配伺服器106基於冷匹配嘗試檢測到匹配之後,指紋匹配伺服器106能夠將內容傳送延遲確定為例如(第一元資料的)相應的傳送時間戳記與(第二元資料的)相應的接收時間戳記之間的差。特別地,內容傳送延遲能夠因頻道而異。
在時間段T11期間,基於檢測到的匹配,指紋匹配伺服器106能夠標識頻道,在該頻道上內容呈現設備104正在接收第二內容。在一個示例中,指紋匹配伺服器106能夠基於與用於檢測匹配的第一指紋資料相關聯的頻道識別符元資料來標識頻道。
特別地,在實踐中,由於可能存在多個潛在頻道,在該多個潛在頻道上內容呈現設備104正在接收第二內容,因此指紋匹配伺服器106可以將第二指紋資料與第一指紋資料的多個實例(每個實例表示在不同的相應的通道上的不同的相應的第一內容的實例)進行比較,以確定這些多個實例中的哪一個與第二指紋資料匹配。
同樣,在一些情況下,指紋匹配伺服器106能夠檢測第二指紋資料與第一指紋資料的多個實例中的每一個實例(每個實例表示在不同的相應的頻道上的不同的相應的第一內容的實例)之間的匹配。這在本文中被稱為“多匹配場景”,並且能夠由於各種原因而發生。例如,當內容分發系統102同時或大約同時在一個以上的頻道上傳送相同或相似的內容時,能夠發生這種情況。在該場景中,指紋匹配伺服器106能夠執行附加操作以從與多匹配場景相關聯的多個頻道中進行標識,內容呈現設備104在該多個頻道上接收第二內容。指紋匹配伺服器106能夠使用現在已知的或以後開發的任何頻道多匹配消歧技術來實現這一點。於2018年6月5日發佈的美國專利申請號 9,992,533中描述了示例頻道多匹配消歧技術,其全部內容通過引用結合在本文中。 [E、 與確定歷史內容消耗資料相關的操作]
在時間段T12期間,指紋匹配伺服器106能夠生成與已標識的頻道相關聯的元資料。例如,元資料能夠是或包含頻道標識時間戳記。指紋匹配伺服器106能夠以各種方式確定頻道標識時間戳記,例如基於與參考時鐘同步的時鐘。在另一個示例中,元資料能夠是或包含設備識別符,該設備識別符標識正在已標識的頻道上接收內容的內容呈現設備104。指紋匹配伺服器106能夠以各種方式確定設備識別符,例如通過從內容呈現設備104接收該設備識別符。在另一個示例中,指紋匹配伺服器106能夠從內容呈現設備104接收資料(例如,設備註冊資料),並且能夠使用映射資料來映射所接收到的資料以確定設備識別符。
在時間段T13期間,指紋匹配伺服器106能夠將已標識的頻道和相關聯的元資料的指示傳送到資料管理系統110。
在時間段T14期間,資料管理系統110能夠從指紋匹配伺服器106接收已標識的頻道和相關聯的元資料的指示。
資料管理系統110能夠使用所接收到的已標識的頻道和相關聯的元資料(可能與其他資料一起)的指示,來確定內容呈現設備104何時在已標識的頻道上接收到了內容、內容呈現設備104接收到了什麼特定內容等。這種類型的資料在本文中被稱為“歷史內容消耗資料”。
這樣,在時間段T15期間,資料管理系統110能夠確定與內容呈現設備104相關聯的歷史內容消耗資料。 [F、 與傳送第三內容的內容分發系統相關的操作]
如上所述,指紋匹配伺服器106能夠標識頻道,在該頻道上內容呈現設備104正在接收第二內容。
在時間段T16期間,內容分發系統102能夠將已標識的頻道上的內容傳送到內容呈現設備104。該內容在本文中被稱為“第三內容”。在一個示例中,第三內容是圖3中所示的第三內容320。在實踐中,內容分發系統102可能在傳送第一內容之後不久(例如,緊接在傳送第一內容之後或幾秒或幾分鐘之後)傳送第三內容。
在時間段T17期間,內容分發系統102能夠生成表示第三內容的指紋資料。該指紋資料在本文中被稱為“第三指紋資料”。
同樣在時間段T17期間,內容分發系統102能夠生成與第三內容和/或第三指紋資料相關聯的元資料。該元資料在本文中被稱為“第三元資料”。內容分發系統102還能夠將第三指紋資料與第三元資料相關聯。
在時間段T18期間,內容分發系統102能夠將第三指紋資料和第三元資料傳送到指紋匹配伺服器106。
內容分發系統102能夠以各種方式傳送第三內容、生成第三指紋資料、生成第三元資料、將第三指紋資料與第三元資料相關聯,以及傳送第三指紋資料和第三元資料,例如與上述有關於傳送第一內容、生成第一指紋資料、生成第一元資料、將第一指紋資料與第一元資料相關聯、以及傳送第一指紋資料和第一元資料所述的那些方式相同或相似的方式。 [G、 與接收可修改內容片段的內容管理系統相關的操作]
在時間段T19期間,內容管理系統108能夠接收被標識為待修改候選的內容片段形式的內容。該內容在本文中被稱為“可修改內容片段”或“第四內容”。在一個示例中,可修改內容片段是圖3中所示的可修改內容片段。
可修改內容片段能夠採用多種形式。例如,可修改內容片段能夠是廣告片段(例如,商業廣告)或節目片段。這樣,在一個示例中,可修改內容片段能夠是已被標識為待修改候選的廣告片段,可能通過用不同的廣告片段替換,和/或通過在其上覆蓋內容的方式。
在一個示例中,可能與內容分發系統102相關聯的使用者能夠促進將可修改內容片段上傳到內容管理系統108,使得內容管理系統108能夠以這種方式接收該可修改內容片段。
在時間段T20期間,內容管理系統108能夠生成表示可修改內容片段的指紋資料。該指紋資料在本文中被稱為“第四指紋資料”。內容管理系統108能夠使用現在已知的或以後開發的任何指紋生成技術來生成第四指紋資料。內容管理系統108能夠以給定速率,例如以第四內容的每幀一個指紋的速率生成第四指紋資料。第四指紋資料能夠是或包含這些生成的指紋中的一些或全部。
同樣在時間段T20期間,內容管理系統108能夠生成與可修改內容片段和/或第四指紋資料相關聯的元資料。該元資料在本文中被稱為“第四元資料”。作為一個示例,第四元資料能夠是或包含可修改內容片段的持續時間。內容管理系統108能夠以各種方式確定持續時間,例如基於指紋生成過程。例如,在內容管理系統108生成第四指紋資料涉及每幀生成一個指紋、可修改內容片段具有每秒30幀的畫面播放速率,並且在指紋識別過程導致生成300個指紋的情況下,內容管理系統108能夠推斷出可修改內容片段的持續時間為十秒。元資料還能夠是或包含關於可修改內容片段的其他資訊,例如內容片段識別符、標題和/或關於可修改內容片段的能夠修改的允許方式的細節等。
在時間段T21期間,內容管理系統108能夠將第四指紋資料和第四元資料傳送到指紋匹配伺服器106。
在實踐中,內容管理系統108可能接收許多可修改內容片段。在這種情況下,內容管理系統108能夠執行上述操作中的一個或更多個,以適合於許多接收到的可修改內容片段中的每一個。這樣,內容管理系統108能夠將第四指紋資料的許多實例傳送到指紋匹配伺服器106,每個第四指紋資料實例對應於不同的相應的可修改內容片段。 [H、 與指紋匹配伺服器相關的操作,該伺服器在已標識的頻道上標識即將發生的內容修改機會]
在時間段T22期間,指紋匹配伺服器106能夠從內容分發系統102接收第三指紋資料和第三元資料。如上所述,第三指紋資料表示由內容分發系統102在已標識的頻道上傳送的第三內容。
在時間段T23中,指紋匹配伺服器106能夠從內容管理系統108接收第四指紋資料和第四元資料。如上所述,第四指紋資料表示可修改內容片段。
在時間段T24期間,指紋匹配伺服器106能夠將第三指紋資料的至少一部分與第四指紋資料的至少一部分進行比較,以確定是否存在匹配。
在時間段T25期間,基於該比較,指紋匹配伺服器106能夠檢測第三指紋資料的至少一部分與第四指紋資料的至少一部分之間的匹配。指紋匹配伺服器106能夠使用現在已知或以後開發的任何內容指紋比較和匹配過程來比較和/或檢測指紋資料之間的匹配。
在時間段T26期間,基於檢測到的匹配,指紋匹配伺服器106能夠確定可修改內容片段的至少一部分被包含在第三內容中,並且因此能夠在已標識的頻道上標識即將發生的內容修改機會。例如,指紋匹配伺服器106能夠至少確定可修改內容片段的開始部分包含在第三內容320中,如圖3所示,並且因此能夠標識即將發生的內容修改機會。
如上所述,指紋匹配伺服器106能夠生成第三元資料,該第三元資料能夠與第一元資料相同或相似。 這樣,第三元資料例如能夠是或包含傳送時間戳記和/或頻道識別符。然而,第三元資料也能夠是或包含第三內容內的可修改內容片段的至少一部分的位置。在一個示例中,元資料能夠使用起始幀標記和結束幀標記來指定這一點,每個起始幀標記和結束幀標記都對應於第三內容的相應幀。指紋匹配伺服器106能夠基於匹配來確定起始幀標記和結束幀標記。
特別地,在實踐中,由於可能存在多個潛在的可修改內容片段,其中部分內容能夠包含在第三內容中,指紋匹配伺服器106可能將第三指紋資料的至少一部分與第四指紋資料的多個實例的至少一部分(每個實例表示可修改內容片段的不同的相應實例)進行比較,以確定第四指紋資料的多個實例中的哪一個實例具有與第三指紋資料的至少一部分相匹配的部分。 [I、 與準備內容呈現設備以結合所標識的即將發生的內容修改機會執行內容修改操作相關的操作]
在時間段T27期間,基於檢測到的匹配,指紋匹配伺服器106能夠將第三指紋資料和第三元資料傳送到內容呈現設備104,以便於準備內容呈現設備104以結合所標識的即將發生的內容修改機會執行內容修改操作。
在時間段T28期間,內容呈現設備104能夠從指紋匹配伺服器106接收第三指紋資料和第三元資料。
在時間段T29期間,內容呈現設備104能夠在已標識的頻道上接收內容。該內容在本文中被稱為“第五內容”。在一個示例中,第五內容是圖3中所示的第五內容324。
出於各種原因(例如,由於與傳送指紋資料和元資料相關聯的傳送延遲短於內容傳送延遲),內容呈現設備104能夠在從內容分發系統102接收第五內容之前,從指紋匹配伺服器106接收第三指紋資料和第三元資料。以這種方式,內容呈現設備104能夠接收指紋資料,該指紋資料表示內容呈現設備104期望在此後不久接收的內容,並且內容呈現設備實際上應該在此後不久接收的內容,除非發生中斷事件(例如,頻道改變事件)。
在實踐中,與內容分發系統102在傳送第一內容之後不久(例如,緊接在傳送第一內容之後或之後幾秒或幾分鐘)可能傳送第三內容的方式相似,內容呈現設備104可能在接收第二內容之後不久(例如,緊接在接收第二內容之後或幾秒或幾分鐘之後)接收到第五內容。
在時間段T30期間,內容呈現設備104能夠輸出用於呈現的第五內容的至少一部分。例如,參考圖3,內容呈現設備能夠輸出用於呈現第五內容324的部分,該部分是程式片段A的末端部分。
如上所述,在一些情況下,即使內容呈現設備104從內容分發系統102接收內容,也期望內容呈現設備104能夠執行內容修改操作,使得內容呈現設備104能夠輸出用於呈現替代內容,而不是所接收的內容的至少一部分。
這樣,即使內容呈現設備104接收第五內容並且輸出用於呈現第五內容的至少一部分,也期望內容呈現設備104能夠執行內容修改操作,使得內容呈現設備104也能夠輸出用於呈現的替代內容,而不是第五內容的至少另一個部分(例如,剩餘部分)。例如,參考圖3,期望內容呈現設備104能夠用可能更針對最終使用者的不同廣告片段的至少一部分替換AD片段B的至少一部分。作為另一個示例,期望內容呈現設備104能夠在AD片段B的至少一部分上進行覆蓋,可能再次以更針對最終使用者的方式對增強AD片段B的至少一部分的內容進行覆蓋。
在時間段T31期間,內容呈現設備104能夠生成表示第五內容的指紋資料。該指紋資料在本文中被稱為“第五指紋資料”。內容分發系統102能夠使用現在已知的或以後開發的任何內容指紋識別過程來生成第五指紋資料。內容呈現設備104能夠以各種速率、例如以第五內容的每幀一個指紋的速率生成第五指紋資料。第五指紋資料能夠是或包含這些生成的指紋中的一些或全部。
同樣在時間段T31期間,內容呈現設備104能夠生成與第五內容和/或第五指紋資料相關聯的元資料。該元資料在本文中被稱為“第五元資料”。
內容呈現設備104能夠以各種方式接收第五內容、生成第五指紋資料、生成第五元資料、將第五指紋資料與第五元資料相關聯,例如與上述有關於接收第二內容、生成第二指紋資料、生成第二元資料以及將第二指紋資料與第二元資料相關聯的那些方式相同或相似的方式。
如上所述,內容呈現設備104能夠從指紋匹配伺服器106接收第三指紋資料,並且能夠生成第五指紋資料。
在時間段T32期間,內容呈現設備104能夠比較第三指紋資料和第五指紋資料以確定是否存在匹配。
在時間段T33期間,基於該比較,內容呈現設備104能夠檢測第三指紋資料與第五指紋資料之間的匹配。在本發明在一個示例中,修改起始時間是如圖3所示的修改起始時間326。
在一個示例中,內容呈現設備104能夠通過從與起始幀標記相關聯的傳送時間戳記(如上所述,該起始幀標記能夠是或包含在第三元資料中)開始並且將內容傳送延遲加到該傳送時間戳記來確定修改起始時間,以到達修改起始時間。
作為另一個示例,內容呈現設備104能夠通過首先在一方面的第三內容、第三指紋資料和/或第三元資料與另一方面的第五內容、第三第五指紋資料和/或第五元資料之間建立同步鎖來確定修改起始時間。內容呈現設備104能夠使用現在已知的或以後開發的任何同步鎖技術來建立同步鎖。於2019年12月10日發佈的美國專利申請號10,506,275中描述了示例同步鎖技術,其全部內容通過引用結合在本文中。於2020年1月23日公佈的美國專利申請公開號2020/0029108中描述了另一個示例同步鎖技術,其全部內容通過引用結合在本文中。
然後,內容呈現設備104能夠通過確定(i)與內容呈現設備104當前正在接收的第五內容的第一部分相關聯的當前接收時間戳記、與(ii)基於同步鎖與第五內容的第二部分(即可修改內容片段的開始)相關聯的預期接收時間戳記之間的時間段來確定修改起始時間,然後將確定的時間段加到當前接收時間戳記,以到達修改起始時間。
同樣,在時間段T34期間,基於檢測到的匹配,內容呈現設備104能夠確定所標識的即將發生的修改機會結束的時間點。這在本文中被稱為“修改結束時間”。在一個示例中,修改結束時間是如圖3所示的修改結束時間328。
在一個示例中,內容呈現設備104能夠通過從修改起始時間開始並且將可修改內容片段的持續時間(如上所述,該可修改內容片段能夠是第四元資料或包含在第四元資料中)加到修改起始時間來確定修改結束時間,以到達修改結束時間。
特別地,如果內容呈現設備104執行熱匹配嘗試並且沒有檢測到匹配,則內容呈現設備104能夠確定內容呈現設備104不再在最近已標識的頻道上接收內容。作為回應,內容呈現設備104能夠重複上述操作中的一個或更多個,使得指紋匹配伺服器106能夠執行另一個冷匹配嘗試,以嘗試再次對頻道進行標識。
在時間段T35期間,內容呈現設備104能夠將對與執行內容修改操作結合使用的內容的請求傳送到內容管理系統108。該內容在本文中被稱為“補充內容”。在一個示例中,內容呈現設備104能夠在修改起始時間之前(例如,十秒之前)傳送請求。在一些情況下,請求能夠包含用於補充內容的選擇標準,例如,內容呈現設備104能夠基於內容呈現設備104從指紋匹配伺服器106接收的第三元資料來確定補充內容。
例如,選擇標準能夠指定所請求的內容類別型(例如,替換內容片段或覆蓋內容)、持續時間(例如,15秒、30秒或60秒)、縱橫比(例如,4:3或16:9)和/或解析度(例如,720p或1080p)。
在時間段T36期間,內容管理系統108能夠接收請求,並且將其用作從可供選擇的多個補充內容項中選擇補充內容的基礎。在一些情況下,內容管理系統108能夠接收和考慮各種資料,以説明告知選擇哪個補充內容。例如,內容管理系統108能夠從資料管理系統110接收內容呈現設備104的歷史內容消耗資料,和/或內容管理系統108能夠從人口統計資料提供者接收人口統計資料。然後,內容管理系統108能夠至少使用接收到的歷史內容消耗資料和/或接收到的人口統計資料作為選擇補充內容的基礎。
內容管理系統108能夠使所選擇的補充內容被傳送到內容呈現設備104。在一個示例中,內容管理系統108能夠通過與能夠承載補充內容的補充內容傳遞系統112通訊來實現這一目的。補充內容傳遞系統112能夠採用各種形式,並且能夠包含各種部件,例如內容分發網路(CDN)。
在時間段T37期間,內容管理系統108能夠將針對指向承載的補充內容的連結的請求(例如,統一資源識別項(URI)或統一資源定位符(URL))傳送到補充內容傳遞系統112。
在時間段T38期間,補充內容傳遞系統112能夠通過將請求的連結傳送到內容管理系統108來接收和回應連結的請求。
在時間段T39期間,然後內容管理系統108繼而能夠將連結傳送到內容呈現設備104。
在時間段T40期間,內容呈現設備104能夠接收連結,該連結能夠用於從補充內容傳遞系統112檢索補充內容,使得內容呈現設備104能夠結合執行內容修改操作來使用檢索到的補充內容。在一個示例中,內容呈現設備104能夠檢索補充內容並且將補充內容儲存在內容呈現設備104的資料儲存單元中。
這樣,在一些示例中,內容呈現設備104能夠從一個源(例如,內容分發系統102)接收可修改內容片段,並且從另一個源(例如,補充內容傳遞系統112)接收補充內容。這些片段能夠以不同的方式被傳送到內容呈現設備104並且由該內容呈現設備接收。例如,內容分發系統102能夠將可修改內容片段作為廣播流傳送來傳送、且內容呈現設備104能夠將可修改內容片段作為廣播流傳送來接收,而補充內容傳遞系統112能夠將補充內容作為越頂(OTT)傳送來傳送、且內容呈現設備104能夠將補充內容作為越頂(OTT)傳送來接收。在這種情況下,在一個示例中,內容分發系統102能夠經由一個通訊介面(例如,HDMI介面)接收可修改內容片段,並且內容呈現設備104能夠經由不同的通訊介面(例如,乙太網或WI-FI介面)來接收補充內容。 [J、與執行內容修改操作的內容呈現設備相關的操作]
在時間段T41處,內容呈現設備104能夠執行內容修改操作。內容呈現設備104能夠以各種方式來執行,這可能取決於要執行的內容修改操作的類型。
在一個示例中,執行內容修改操作的內容呈現設備104能夠涉及內容呈現設備104通過將可修改內容片段替換為補充內容來修改該可修改內容片段。這在本文中被稱為“內容替換操作”。例如,在該場景中,內容呈現設備104能夠接收包含可修改內容片段和相關聯元資料的內容片段的線性序列,並且還能夠如上所述接收補充內容片段。內容呈現設備104能夠輸出用於呈現的內容片段的序列直到修改起始時間(該修改起始時間對應於可修改內容片段的開始)為止,此時內容呈現設備104能夠切換到輸出用於呈現的補充內容。然後,在修改結束時(該修改結束對應於可修改內容片段的結束),內容呈現設備104能夠切換回輸出用於呈現的內容片段的線性序列中的後續內容(或者可能切換到其他內容,例如,正在替換另一個可修改內容片段的附加補充內容)。
在一個示例中,內容呈現設備104從輸出內容片段的序列切換到輸出補充內容的操作能夠涉及使用內容呈現設備104的各種緩衝器。例如,這能夠涉及內容呈現設備104從在接收內容片段的序列的第一輸入緩衝器中使用第一資料切換到在接收補充內容的第二輸入緩衝器中使用第二資料來填充顯示緩衝器。
這樣,根據圖3中所示的一個示例,通過執行內容替換操作,內容呈現設備104能夠用AD片段D替換AD片段B。因此,內容呈現設備能夠代替地輸出用於呈現的第一修改序列306,而不是輸出用於呈現的接收序列304。
在另一個示例中,執行內容修改操作的內容呈現設備104能夠涉及內容呈現設備104通過在可修改內容片段上對覆蓋內容進行覆蓋來對可修改內容片段進行修改(在本文被稱為“內容覆蓋操作”)。例如,在該場景中,內容呈現設備104能夠再次接收包含可修改內容片段和相關聯的元資料的內容片段的線性序列,並且內容呈現設備104還能夠如上所述接收補充內容。
然後,內容呈現設備104能夠像其通常那樣輸出用於呈現的可修改內容片段,除了在修改起始時間開始之外,內容呈現設備104能夠開始將補充內容覆蓋在可修改內容片段上。內容呈現設備104能夠繼續覆蓋補充內容,直到修改結束時間為止。以這種方式,內容呈現設備104能夠在可修改內容片段的至少一些時間部分期間對補充內容行進覆蓋。
在一個示例中,內容呈現設備104在可修改內容片段上覆蓋補充內容的操作能夠涉及使用內容呈現設備104的各種緩衝器。例如,這能夠涉及內容呈現設備104使用在接收內容片段的序列的第一輸入緩衝器中的第一資料的一部分以及在接收補充內容的第二輸入緩衝器中的第二資料,以填充顯示緩衝器。以這種方式,內容呈現設備能夠將可修改內容片段的相關部分(即,除了那些表示要覆蓋補充內容的區域的部分之外的所有部分)與要被用作覆蓋的補充內容組合在一起,以創建所期望的可修改內容片段以及覆蓋在其上的補充內容。
這樣,根據圖3中所示的一個示例,通過執行內容覆蓋操作,內容呈現設備104能夠將補充內容覆蓋在AD片段B上,從而將其修改為AD片段B’。因此,內容呈現設備能夠輸出用於呈現的第二修改序列308,而不是輸出用於呈現的接收序列304。 [K、跟蹤和報告與操作有關的資料]
為了説明促進各種操作的執行,例如內容呈現設備104執行內容修改操作,並且為了幫助允許跟蹤和報告這些操作,內容修改系統100和/或其部件能夠在不同時間以各種方式跟蹤和報告各種與操作相關的資料。
僅作為幾個說明性示例,回應於正在執行的某些操作、例如本文描述的那些操作,指紋匹配伺服器106、內容呈現設備104和/或另一個實體能夠生成、儲存和/或傳送指示(i)已標識可修改內容片段的消息;(ii)已標識/確認頻道(可能基於冷匹配嘗試或熱匹配嘗試所檢測到的匹配)的消息;(iii)已標識在已標識的頻道上即將發生的內容修改機會的消息;(iv)已請求補充內容的消息;(v)已接收到補充內容的消息;(vi)已開始內容修改操作的消息;(vii)已結束內容修改操作的消息;和/或(viii)調度的內容修改操作由於任何給定的原因而中止和/或沒有執行的消息。在一些情況下,這些消息能夠包含與這些操作相關的其他元資料。例如,元資料能夠指定相關的定時資訊、設備識別符、頻道識別符、內容片段識別符等。 [L、基於浮水印的技術]
儘管本發明描述了使用基於指紋的技術來執行各種操作並且提供各種特徵的內容修改系統100,但在一些示例中,內容修改系統100能夠使用基於浮水印的技術來代替基於指紋的技術,或者除了基於指紋的技術之外還使用基於浮水印的技術來執行這些和其他操作並且提供這些和其他特徵。
例如,作為上述基於指紋的技術的替代,其中指紋匹配伺服器106標識內容呈現設備104正在其上接收第二內容的頻道,內容分發系統102或另一個實體能夠將浮水印形式的頻道識別符插入到第二內容中,使得指紋匹配伺服器106、內容呈現設備104或者另一個實體能夠提取頻道識別符,並且使用該頻道識別符來標識內容呈現設備104正在其上接收第二內容的頻道。
在這種情況下,內容修改系統100能夠採用現在已知的或以後開發的任何浮水印技術。 [M、 與確定輸入緩衝區切換延遲特徵相關的操作]
如上所述,關於執行內容修改操作的內容呈現設備104,內容呈現設備104能夠執行一個或更多個操作,可能與修改起始時間和/或修改結束時間有關。
例如,就內容替換操作而言,內容呈現設備104能夠輸出用於呈現的內容片段的序列,直到修改起始時間(其對應於可修改內容片段的開始)為止,在該修改起始時間,內容呈現設備104能夠切換到輸出以用於呈現補充內容。然後,在修改結束時間(其對應於可修改內容片段的結束),內容呈現設備104能夠回切到輸出以用於呈現內容片段的線性序列中的後續內容(或者可能切換到其他內容)。
在一個示例中,這種切換能夠涉及使用內容呈現設備104的各種緩衝區。例如,這能夠涉及內容呈現設備104從在接收內容片段的序列(包括可修改內容片段)的第一輸入緩衝區中使用內容切換到在接收補充內容的第二輸入緩衝區中使用第二內容以填充輸出緩衝區。
然而,在一些情況下,當內容呈現設備104提供啟動該切換的指令時,出於各種原因(例如,由於基於軟體和/或基於硬體的處理延遲)執行該輸入緩衝區切換可能需要一些時間(例如,200ms)。因此,在一些情況下,內容呈現設備104可能在切換到補充內容並呈現補充內容之前呈現可修改內容片段的一小部分(例如,有幾百毫秒的時長)。類似的時序/對齊問題也可能在修改結束時間附近發生。這些類型的問題能夠潛在地造成不期望的使用者體驗。
為了解決這些問題,在本發明的一個方面中,內容呈現設備104能夠確定輸入緩衝區切換延遲,然後能夠在指示內容呈現設備104執行內容替換操作時考慮該延遲。通過使用該技術,內容呈現設備104能夠更準確地執行內容替換操作,從而限制或避免發生上述不期望的使用者體驗情況。現在將描述這些特性和相關操作。
如上所述,內容呈現設備104能夠包括多個緩衝區。例如,內容呈現設備104能夠包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區(例如,顯示緩衝區)。內容呈現設備104能夠被配置成使得來自第一輸入緩衝區或第二輸入緩衝區的內容能夠被傳到輸出緩衝區。
首先,內容呈現設備104能夠確定基準輸入至輸出延遲,其表示內容被輸入到第一輸入緩衝區至由輸出緩衝區輸出之間的時間段。基準輸入至輸出延遲能夠基於內容呈現設備104的各種特性(例如,緩衝區大小、處理速度等)而變化。
在一個示例中,內容呈現設備104能夠通過從輸出緩衝區輸出內容的時間點減去將內容輸入到輸入緩衝區的時間點,以得出基準輸入至輸出延遲。內容分發系統102能夠以各種方式確定這樣的時間點,例如基於與參考時鐘同步的時鐘。
然後,內容呈現設備104能夠生成各種指紋資料,並且能夠至少使用生成的指紋資料來建立與第一輸入緩衝區和輸出緩衝區有關的同步鎖。例如,內容呈現設備104能夠生成表示輸入到第一輸入緩衝區中的內容的指紋資料。該指紋資料在本文中被稱為“第一輸入緩衝區指紋資料”。類似地,內容呈現設備104能夠生成表示由輸出緩衝區輸出的內容的指紋資料。該指紋資料在本文中被稱為“輸出緩衝區指紋資料”。
內容分發系統102能夠使用現在已知的或以後開發的任何內容指紋處理來生成第一輸入緩衝區指紋資料和/或輸出緩衝指紋資料。內容分發系統102能夠以給定速率、例如以所表示內容的每幀一個指紋的速率生成這樣的指紋資料。指紋資料能夠是或包括這些生成的指紋的一些或全部。
內容呈現設備104還能夠生成與所表示的內容或指紋資料相關聯的元資料。該元資料在本文中根據情況而被稱為“輸入緩衝區指紋元資料”或“輸出緩衝區指紋元資料”。
然後,內容呈現設備104能夠在第一輸入緩衝區指紋資料與輸出緩衝區指紋資料之間建立同步鎖。內容呈現設備104能夠使用現在已知的或以後開發的任何同步鎖技術來建立同步鎖。以這種方式,內容呈現設備104能夠將第一輸入緩衝區指紋資料與輸出緩衝區指紋資料(也可能考慮相應的元資料)相關聯,以便使內容呈現設備104能夠在隨後檢測何時失去同步鎖。這能夠指示內容修改操作的開始(即,補充內容替換可修改內容片段的起始點)。
接著,內容呈現設備104能夠確定第一指令時間點,在該第一指示時間點,指示內容呈現設備104從使用第一輸入緩衝區中的內容以填充輸出緩衝區切換到使用第二輸入緩衝區中的內容以填充輸出緩衝區。例如,內容呈現設備104能夠基於元資料或從另一實體、例如指紋匹配伺服器106接收的指令來生成這樣的指令。
如上所述,在內容呈現設備104建立同步鎖之後,隨後能夠失去該同步鎖(這能夠指示內容修改操作的開始)。與這種情況發生有關的內容呈現設備104能夠確定失去同步鎖的時間點,在該時間點失去已建立的同步鎖。內容分發系統102能夠以各種方式確定失去同步鎖的時間點,例如基於與參考時鐘同步的時鐘。
然後,內容呈現設備104能夠使用已確定的基準輸入至輸出延遲、已確定的第一指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲。在一個示例中,內容呈現設備104能夠通過從已確定的失去同步鎖的時間點中減去已確定的基準輸入至輸出延遲和已確定的第一指令時間點,以得出輸入緩衝區切換延遲。
然後,內容呈現設備104能夠使用已確定的輸入緩衝區切換延遲來促進內容替換操作的執行。在一個示例中,這能夠涉及確定修改起始時間,該確定修改起始時間對應於可修改內容片段的開始。這還能夠涉及在第二指令時間點,即已確定的修改起始時間減去已確定的輸入緩衝區切換延遲,指示內容呈現設備104從使用第一輸入緩衝區中的內容以填充輸出緩衝區切換到使用第二輸入緩衝區中的內容以填充輸出緩衝區。
這樣,內容呈現設備104能夠更精確地執行內容替換操作,並且限制或潛在地避免上述不期望的使用者體驗,例如在切換到補充內容並且呈現補充內容之前,內容呈現設備104可能呈現可修改內容片段的一小部分(例如,有幾百毫秒的時長)。
上述技術還能夠結合其他類型的內容修改操作來應用,例如,例如結合內容覆蓋操作。
特別地,儘管輸入緩衝區切換延遲可能因內容呈現設備的不同而變化,但是相同類型的內容呈現設備(例如,相同型號的內容呈現設備等)可能具有相同或相似的輸入緩衝區切換延遲。這樣,在一個示例中,內容呈現設備104能夠將已確定的輸入緩衝區切換延遲連同與內容呈現設備104相關聯的資料(例如,型號)的指示一起傳送到指紋匹配伺服器106。這能夠允許指紋匹配伺服器106維護和更新將這些資料映射到輸入緩衝區切換延遲的資料庫。然後,結合另一個內容呈現設備,指紋匹配伺服器106能夠獲得與內容呈現設備相關聯的資料(例如,型號),其能夠用來查找相應的輸入緩衝區切換延遲。通過這樣做,指紋匹配伺服器106能夠向內容呈現設備發送輸入緩衝區切換延遲的指示,使得內容呈現設備不需要自己確定該輸入緩衝區切換延遲。
圖5是與包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區的內容呈現設備結合使用的示例方法500的流程圖,其中內容呈現設備被配置成使得來自第一輸入緩衝區或第二輸入緩衝區的內容能夠傳到輸出緩衝區。
在框502處,方法500包括確定基準輸入至輸出延遲,該基準輸入至輸出延遲表示內容輸入到第一輸入緩衝區至由輸出緩衝區輸出之間的時間段。
在框504處,方法500包括在(i)表示第一輸入緩衝區中的內容的第一指紋資料與(ii)表示輸出緩衝區中的內容的第二指紋資料之間建立同步鎖。
在框506處,方法500包括確定指令時間點,在該指令時間點指示內容呈現設備從使用第一輸入緩衝區中的內容以填充輸出緩衝區切換到使用第二輸入緩衝區中的內容以填充輸出緩衝區。
在框508處,方法500包括確定失去同步鎖的時間點,在該時間點失去已建立的同步鎖。
在框510處,方法500包括使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲。
在框512處,方法500包括使用已確定的輸入緩衝區切換延遲來促進內容修改操作的執行。 [IV、示例變體]
儘管已經描述了與特定實體和特定操作相關的上述示例和特徵,但在實踐中,可能存在這些實體的許多實例,並且這些操作的許多實例可能大規模的基礎上同時或同步地執行。實際上,在實踐中,內容修改系統100可能包含許多內容分發系統(每一個潛在地在許多個頻道上傳送內容)和許多內容呈現設備,所述的操作中的一些或全部是在與這些實體中的一些或全部相關的常規基礎和重複基礎上執行的。
另外,儘管本發明中描述的操作中的一些已經被描述為由特定實體執行,但是這些操作能夠由任何實體執行,例如本發明中描述的其他實體。此外,儘管已經以特定順序和/或與示例時態語言相關地敘述了這些操作,但是不需要按照所述的順序來執行操作,也不需要根據任何特定時態限制來執行操作。然而,在一些情況下,期望能夠以所述的順序、以另一個順序和/或以操作中的至少一些同時/同步執行的方式來執行操作中的一個或更多個。同樣地,在一些情況下,期望能夠根據一個或更多個所述的時態限制或根據其他時序限制來執行一個或更多個操作。此外,能夠回應於其他所述操作中的一個或更多個的執行來執行所描述的操作中的每一個。另外,不需要執行操作中的全部來實現本發明提供的一個或更多個益處,因此不需要執行操作中的全部。
儘管已經描述了與本發明的一個或更多個示例相關的某些變體,但是這些變體也能夠應用於本發明的其他示例中的一些或全部中,因此能夠以許多種方式組合和/或佈置本發明的各個方面。選擇本發明中描述的示例至少部分上是因為它們有助於解釋各種所描述的特徵的實際應用。
此外,儘管已經描述了本發明的選擇示例,但是這些示例的變更和組合對於本領域的普通技術人員來說將是顯而易見的。在不脫離如所附申請專利範圍所闡述的本發明的更廣泛方面的情況下,其他改變、替換和/或變更也是可能的。
100:內容修改系統 102:內容分發系統 104:內容呈現設備 106:指紋匹配伺服器 108:內容管理系統 110:資料管理系統 112:補充內容傳遞系統 200:計算系統 202:處理器 204:資料儲存單元 206:通訊介面 208:使用者介面 302:傳送序列 304:接收序列 306:第一修改序列 308:第二修改序列 310:第一內容 312:第二內容 314:時間點A 316:時間點B 318:內容傳送延遲 320:第三內容 324:第五內容 326:修改起始時間 328:修改結束時間 350:時間軸 500:方法 502:框 504:框 506:框 508:框 510:框 512:框
圖1是示例內容修改系統的簡化框圖,該系統中能夠實現各種所描述的原理。
圖2是示例計算系統的簡化框圖,該系統中能夠實現各種所描述的原理。
圖3是內容和相關概念的示例線性序列的圖。
圖4A、4B、4C、4D、4E和4F共同組成一個表格,該表格中示出了示例時間段和結合示例內容修改系統能夠執行的相應操作。
圖5是示例方法的流程圖。
500:方法
502:框
504:框
506:框
508:框
510:框
512:框

Claims (20)

  1. 一種方法,其與包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區的內容呈現設備結合使用,其中,所述內容呈現設備被配置成使得來自所述第一輸入緩衝區或所述第二輸入緩衝區的內容能夠傳到所述輸出緩衝區,所述方法包括以下步驟: 確定基準輸入至輸出延遲,所述基準輸入至輸出延遲表示內容輸入到所述第一輸入緩衝區至由所述輸出緩衝區輸出之間的時間段; 在表示所述第一輸入緩衝區中的內容的第一指紋資料(i)與表示所述輸出緩衝區中的內容的第二指紋資料(ii)之間建立同步鎖; 確定指令時間點,在所述指令時間點指示所述內容呈現設備從使用所述第一輸入緩衝區中的內容以填充所述輸出緩衝區切換到使用所述第二輸入緩衝區中的內容以填充所述輸出緩衝區; 確定失去同步鎖的時間點,在所述時間點失去已建立的同步鎖; 使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲;以及 使用已確定的輸入緩衝區切換延遲來促進內容修改操作的執行。
  2. 如請求項1所述之方法,其中,所述內容呈現設備是電視機,並且所述輸出緩衝區是顯示緩衝區。
  3. 如請求項1所述之方法,其中,確定所述基準輸入至輸出延遲包括:通過從所述輸出緩衝區輸出內容的時間點減去將所述內容輸入到所述第一輸入緩衝區的時間點,以得出所述基準輸入至輸出延遲。
  4. 如請求項1所述之方法,其還包括生成所述第一指紋資料和所述第二指紋資料。
  5. 如請求項1所述之方法,其中,使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲包括:通過從所述已確定的失去同步鎖的時間點中減去所述已確定的基準輸入至輸出延遲和所述已確定的指令時間點來得出所述輸入緩衝區切換延遲。
  6. 如請求項1所述之方法,其中,所述指令時間點是第一指令時間點,並且其中,使用所述已確定的輸入緩衝區切換延遲以促進所述內容修改操作的執行包括: 確定修改起始時間,其對應於可修改內容片段的開始; 在第二指令時間點,指示內容呈現設備從使用所述第一輸入緩衝區中的內容以填充所述輸出緩衝區切換到使用所述第二輸入緩衝區中的內容以填充所述輸出緩衝區,所述第二指令時間點是已確定的修改起始時間減去已確定的輸入緩衝區切換延遲。
  7. 如請求項6所述之方法,其中,所述第一輸入緩衝區中的內容是與所述內容修改操作相關聯的可修改內容片段,並且所述第二輸入緩衝區中的內容是與所述內容修改操作相關聯的補充內容。
  8. 如請求項1所述之方法,其還包括傳送所述已確定的輸入緩衝區切換延遲以及與所述內容呈現設備相關聯的資料的指示。
  9. 如請求項8所述之方法,其中,與所述內容呈現設備相關聯的資料包括內容呈現設備的型號。
  10. 一種非暫時性電腦可讀儲存介質,其上儲存有程式指令,所述程式指令在由處理器執行時,使得與內容呈現設備結合使用而執行一組操作,所述內容呈現設備包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區,其中,所述內容呈現設備被配置成使得來自所述第一輸入緩衝區或所述第二輸入緩衝區的內容能夠傳到所述輸出緩衝區,所述一組操作包括: 確定基準輸入至輸出延遲,所述基準輸入至輸出延遲表示內容輸入到所述第一輸入緩衝區至由所述輸出緩衝區輸出之間的時間段; 在表示所述第一輸入緩衝區中的內容的第一指紋資料(i)與表示所述輸出緩衝區中的內容的第二指紋資料(ii)之間建立同步鎖; 確定指令時間點,在所述指令時間點指示所述內容呈現設備從使用所述第一輸入緩衝區中的內容以填充所述輸出緩衝區切換到使用所述第二輸入緩衝區中的內容以填充所述輸出緩衝區; 確定失去同步鎖的時間點,在所述時間點失去已建立的同步鎖; 使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲;以及 使用已確定的輸入緩衝區切換延遲來促進內容修改操作的執行。
  11. 如請求項10所述之非暫時性電腦可讀儲存介質,其中,所述內容呈現設備是電視機,並且所述輸出緩衝區是顯示緩衝區。
  12. 如請求項10所述之非暫時性電腦可讀儲存介質,其中,確定所述基準輸入至輸出延遲包括:通過從所述輸出緩衝區輸出內容的時間點減去將所述內容輸入到所述第一輸入緩衝區的時間點,以得出所述基準輸入至輸出延遲。
  13. 如請求項10所述之非暫時性電腦可讀儲存介質,其還包括生成所述第一指紋資料和所述第二指紋資料。
  14. 如請求項10所述之非暫時性電腦可讀儲存介質,其中,使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲包括:通過從所述已確定的失去同步鎖的時間點中減去所述已確定的基準輸入至輸出延遲和所述已確定的指令時間點來得出所述輸入緩衝區切換延遲。
  15. 如請求項10所述之非暫時性電腦可讀儲存介質,其中,所述指令時間點是第一指令時間點,並且其中,使用所述已確定的輸入緩衝區切換延遲以促進所述內容修改操作的執行包括: 確定修改起始時間,其對應於可修改內容片段的開始; 在第二指令時間點,指示所述內容呈現設備從使用所述第一輸入緩衝區中的內容以填充所述輸出緩衝區切換到使用所述第二輸入緩衝區中的內容以填充所述輸出緩衝區,所述第二指令時間點是已確定的修改起始時間減去已確定的輸入緩衝區切換延遲。
  16. 如請求項15所述之非暫時性電腦可讀儲存介質,其中,所述第一輸入緩衝區中的內容是與所述內容修改操作相關聯的可修改內容片段,並且所述第二輸入緩衝區中的內容是與所述內容修改操作相關聯的補充內容。
  17. 如請求項10所述之非暫時性電腦可讀儲存介質,其還包括傳送所述已確定的輸入緩衝區切換延遲以及與所述內容呈現設備相關聯的資料的指示。
  18. 如請求項10所述之非暫時性電腦可讀儲存介質,其中,與所述內容呈現設備相關聯的資料包括內容呈現設備的型號。
  19. 一種計算系統,包括: 處理器;以及 非暫時性電腦可讀儲存介質,其上儲存有程式指令,所述程式指令在由所述處理器執行時,使得與內容呈現設備結合使用而執行一組操作,所述內容呈現設備包括第一輸入緩衝區、第二輸入緩衝區和輸出緩衝區,其中,所述內容呈現設備被配置成使得來自所述第一輸入緩衝區或所述第二輸入緩衝區的內容能夠傳到所述輸出緩衝區,所述一組操作包括: 確定基準輸入至輸出延遲,所述基準輸入至輸出延遲表示內容輸入到所述第一輸入緩衝區至由所述輸出緩衝區輸出之間的時間段; 在表示所述第一輸入緩衝區中的內容的第一指紋資料(i)與表示所述輸出緩衝區中的內容的第二指紋資料(ii)之間建立同步鎖; 確定指令時間點,在所述時間點指示所述內容呈現設備從使用所述第一輸入緩衝區中的內容以填充所述輸出緩衝區切換到使用所述第二輸入緩衝區中的內容以填充所述輸出緩衝區; 確定失去同步鎖的時間點,在所述時間點失去已建立的同步鎖; 使用已確定的基準輸入至輸出延遲、已確定的指令時間點和已確定的失去同步鎖的時間點來確定輸入緩衝區切換延遲;以及 使用已確定的輸入緩衝區切換延遲來促進內容修改操作的執行。
  20. 如請求項19所述之計算系統,其中,所述指令時間點是第一指令時間點,並且其中,使用所述已確定的輸入緩衝區切換延遲以促進所述內容修改操作的執行包括: 確定修改起始時間,其對應於可修改內容片段的開始; 在第二指令時間點,指示所述內容呈現設備從使用所述第一輸入緩衝區中的內容以填充所述輸出緩衝區切換到使用所述第二輸入緩衝區中的內容以填充所述輸出緩衝區,所述第二指令時間點是已確定的修改起始時間減去已確定的輸入緩衝區切換延遲。
TW109115457A 2019-05-10 2020-05-08 用於與內容呈現設備結合使用之方法、非暫時性電腦可讀儲存介質和計算系統 TWI751550B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201962846409P 2019-05-10 2019-05-10
US62/846,409 2019-05-10

Publications (2)

Publication Number Publication Date
TW202102000A true TW202102000A (zh) 2021-01-01
TWI751550B TWI751550B (zh) 2022-01-01

Family

ID=73046720

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109115457A TWI751550B (zh) 2019-05-10 2020-05-08 用於與內容呈現設備結合使用之方法、非暫時性電腦可讀儲存介質和計算系統

Country Status (5)

Country Link
US (2) US11395037B2 (zh)
EP (1) EP3967044A4 (zh)
CN (1) CN113796093B (zh)
TW (1) TWI751550B (zh)
WO (1) WO2020231817A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020231817A1 (en) 2019-05-10 2020-11-19 The Nielsen Company (Us), Llc Content-modification system with determination of input-buffer switching delay feature
US11245870B2 (en) * 2019-06-18 2022-02-08 Roku, Inc. Content-modification system with determination of input-buffer switching delay feature
US11381855B2 (en) 2020-11-18 2022-07-05 Roku, Inc. Content-modification system with multiple video buffers feature

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001507553A (ja) * 1997-10-29 2001-06-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ バッファを介してテレビ画像を受信、表示及び同時に録画するための装置
GB2347812A (en) * 1999-03-08 2000-09-13 Nds Ltd Real time splicing of video signals
US20100118941A1 (en) * 2008-04-28 2010-05-13 Nds Limited Frame accurate switching
US8781003B2 (en) * 2008-07-17 2014-07-15 Cisco Technology, Inc. Splicing of encrypted video/audio content
US9009066B2 (en) * 2009-02-12 2015-04-14 Echostar Technologies L.L.C. Advertisement management for live internet multimedia content
AU2010247117B2 (en) * 2009-05-13 2013-08-15 Nds Limited Splicing system
US20100329355A1 (en) * 2009-06-30 2010-12-30 Nxp B.V System and method for configurable packet streaming
CA2782562A1 (en) * 2009-12-04 2011-06-09 Bob Poniatowski Multifunction multimedia device
US8910202B2 (en) * 2009-12-08 2014-12-09 Harmonic, Inc. Modification and distribution of video content
US9066121B2 (en) * 2011-08-09 2015-06-23 Google Technology Holdings LLC Addressable advertising switch by decoupling decoding from service acquisitions
JP6071184B2 (ja) * 2011-10-26 2017-02-01 サターン ライセンシング エルエルシーSaturn Licensing LLC 受信装置、受信方法、プログラム、及び情報処理システム
US8732745B2 (en) 2012-10-22 2014-05-20 Sony Corporation Method and system for inserting an advertisement in a media stream
US8997164B2 (en) * 2013-01-07 2015-03-31 Gracenote, Inc. Authorizing devices based on identifying content distributor
US9146990B2 (en) 2013-01-07 2015-09-29 Gracenote, Inc. Search and identification of video content
US9495451B2 (en) 2013-01-07 2016-11-15 Gracenote, Inc. Identifying video content via fingerprint matching
US9654531B2 (en) * 2013-08-01 2017-05-16 Spotify Ab System and method for transitioning between receiving different compressed media streams
US9846532B2 (en) * 2013-09-06 2017-12-19 Seespace Ltd. Method and apparatus for controlling video content on a display
US10075771B1 (en) * 2013-12-30 2018-09-11 Google Llc Methods, systems, and media for presenting media content in response to a channel change request
US20160381436A1 (en) * 2014-05-08 2016-12-29 Lei Yu System and method for auto content recognition
US9924222B2 (en) 2016-02-29 2018-03-20 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on location
US9788024B1 (en) * 2016-06-29 2017-10-10 Rovi Guides, Inc. Systems and methods for achieving ad avoidance by selectively switching media streams
US10652594B2 (en) * 2016-07-07 2020-05-12 Time Warner Cable Enterprises Llc Apparatus and methods for presentation of key frames in encrypted content
US20180063013A1 (en) * 2016-08-24 2018-03-01 Machine Zone, Inc. Systems and methods for network connection buffer sizing
GB2553125B (en) * 2016-08-24 2022-03-09 Grass Valley Ltd Comparing video sequences using fingerprints
KR20180083132A (ko) * 2017-01-12 2018-07-20 삼성전자주식회사 전자 장치 및 그 동작방법
EP3571848A1 (en) * 2017-01-17 2019-11-27 Labs.FM (Pty) Ltd Content streaming system and method
KR20180093702A (ko) * 2017-02-14 2018-08-22 삼성전자주식회사 대체 광고를 재생하는 디스플레이 장치 및 그 디스플레이 장치의 제어 방법
EP3410618B1 (en) * 2017-05-31 2021-11-03 Nxp B.V. Received path delay mechanism
US10462536B2 (en) * 2017-06-16 2019-10-29 M/S. Amagi Media Labs Pvt. Ltd System for low-latency detection of known audio video content using audio fingerprinting and audio watermarking
US10623800B2 (en) 2018-07-16 2020-04-14 Gracenote, Inc. Dynamic control of fingerprinting rate to facilitate time-accurate revision of media content
US10904587B2 (en) 2018-07-19 2021-01-26 Gracenote, Inc. Establishment and use of time mapping based on interpolation using low-rate fingerprinting, to help facilitate frame-accurate content revision
US10820020B2 (en) * 2018-07-19 2020-10-27 Gracenote, Inc. Advanced preparation for content revision based on expected latency in obtaining new content
US11317143B2 (en) * 2018-08-17 2022-04-26 Roku, Inc. Dynamic reduction in playout of replacement content to help align end of replacement content with end of replaced content
US11178451B2 (en) * 2018-08-17 2021-11-16 Roku, Inc. Dynamic playout of transition frames while transitioning between playout of media streams
US10771865B2 (en) * 2019-02-11 2020-09-08 Netflix, Inc. Techniques for advancing playback of interactive media titles in response to user selections
WO2020231817A1 (en) 2019-05-10 2020-11-19 The Nielsen Company (Us), Llc Content-modification system with determination of input-buffer switching delay feature

Also Published As

Publication number Publication date
US11711574B2 (en) 2023-07-25
EP3967044A4 (en) 2023-04-05
CN113796093B (zh) 2023-09-29
TWI751550B (zh) 2022-01-01
CN113796093A (zh) 2021-12-14
EP3967044A1 (en) 2022-03-16
US11395037B2 (en) 2022-07-19
WO2020231817A1 (en) 2020-11-19
US20200359089A1 (en) 2020-11-12
US20220312068A1 (en) 2022-09-29

Similar Documents

Publication Publication Date Title
TWI738326B (zh) 用於與內容呈現設備一起使用的方法、非暫時性電腦可讀儲存介質及計算系統
TWI773990B (zh) 用於針對不同目的使用多種不同指紋資料類型的方法、非暫時性電腦可讀儲存介質及計算系統
TWI802797B (zh) 用於檢測和回應於在先前檢測到的指紋匹配之後檢測到的指紋不匹配的方法、非暫時性電腦可讀儲存介質及計算系統
TWI751550B (zh) 用於與內容呈現設備結合使用之方法、非暫時性電腦可讀儲存介質和計算系統
TWI758729B (zh) 與內容修改系統結合使用之方法、非暫時性電腦可讀儲存媒體及計算系統
TWI776165B (zh) 用於從內容呈現設備接收對補充內容的請求的方法、非暫時性電腦可讀儲存介質及計算系統
TWI767228B (zh) 結合內容修改執行音量調節之方法、內容呈現設備和非暫時性電腦可讀存儲介質
TWI752517B (zh) 用於促進內容呈現設備執行與頻道上即將發生的內容修改機會相關的內容修改操作的方法、計算系統及非暫時性電腦可讀儲存介質
TWI758741B (zh) 用於促進內容呈現設備執行內容修改操作的方法、非暫時性電腦可讀儲存介質及計算系統
TW202119822A (zh) 具有延遲緩衝器特徵的內容修改系統
WO2020257424A1 (en) Content-modification system with determination of input-buffer switching delay feature
WO2020231927A1 (en) Content-modification system with responsive transmission of reference fingerprint data feature
US20220256222A1 (en) Content modification system with prioritized content delivery feature
TWI744936B (zh) 提供補充內容拼接特徵的方法、計算系統和電腦可讀儲存介質
EP3967048A1 (en) Content-modification system with transmission delay-based feature
TWI739464B (zh) 不調度內容修改操作的方法、內容呈現設備及非暫時性電腦可讀儲存介質
TWI778387B (zh) 使用廣播調度資料來促進執行內容修改操作之方法、非暫時性電腦可讀儲存介質及計算系統
TW202106038A (zh) 具有廣播調度利用特徵的內容修改系統