TWI788744B - 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束 - Google Patents

動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束 Download PDF

Info

Publication number
TWI788744B
TWI788744B TW109145507A TW109145507A TWI788744B TW I788744 B TWI788744 B TW I788744B TW 109145507 A TW109145507 A TW 109145507A TW 109145507 A TW109145507 A TW 109145507A TW I788744 B TWI788744 B TW I788744B
Authority
TW
Taiwan
Prior art keywords
client
playing
content
replacement
media
Prior art date
Application number
TW109145507A
Other languages
English (en)
Other versions
TW202123718A (zh
Inventor
徐忠源
李承炯
Original Assignee
美商六科股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商六科股份有限公司 filed Critical 美商六科股份有限公司
Publication of TW202123718A publication Critical patent/TW202123718A/zh
Application granted granted Critical
Publication of TWI788744B publication Critical patent/TWI788744B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8352—Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed

Abstract

當一裝置正播放一媒體串流時，該裝置判定該裝置即將開始播放替換內容代替該媒體串流之一部分的一目標時間。然而，該裝置隨後偵測到該裝置開始播放該替換內容之一開始時間在該目標時間之後經延遲持續時間為P的一延遲週期。作為回應，該裝置隨後將其對該替換內容之播放縮減持續時間P，以幫助使該替換內容之播放在一所要時間處結束。舉例而言，該裝置可在該替換內容之播放中向前搜尋持續時間P及/或可移除該替換內容之一或多個其他部分直至總計縮減持續時間P。

Description

動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束
本申請案涉及用於動態縮減替換內容之播放的方法及媒體客戶端。
典型的媒體客戶端操作以接收及播放(例如，輸出以供播放)表示例如視訊及/或音訊內容等媒體內容之類比或數位媒體串流，且輸出媒體內容及/或轉發串流以供將內容在例如顯示螢幕及/或音訊揚聲器等使用者介面上呈現。此等客戶端之實例包括電視、電腦監視器、投影系統、擴音器、頭戴受話器、機上盒(例如電纜或衛星TV接收器)、數位視訊記錄器、無線電裝置、個人電腦、遊戲控制台、串流媒體播放器等。
舉例而言，媒體客戶端可為電視，其可接收媒體串流(例如，空中廣播串流、自機上盒輸出之媒體串流、自數位儲存媒體播放之媒體串流、網際網路串流，或另一此串流)，且可向使用者呈現彼串流之媒體內容。作為另一實例，媒體客戶端可為機上盒或數位視訊或音訊記錄器，其可自多頻道視訊節目分派器及/或自資料儲存裝置接收廣播串流，且可經由高清多媒體介面(HDMI)電纜或其他介面將彼串流之媒體內容輸出至電視及/或音訊/視訊接收器以供播放。且作為又一實例，媒體客戶端可為擴音器或頭戴受話器，其可自無線電裝置、電腦或其他接收器或音訊儲存裝置接收音訊串流，且可向使用者呈現彼串流之音訊內容。大量其他實例亦係可能的。
當媒體客戶端正播放媒體串流時，在特定情形中媒體客戶端替換串流之媒體內容的一部分可能係有用的。舉例而言，如此可能係有用的：客戶端用替換廣告或用其他替換內容動態地替換媒體內容之廣告或其他片段，使得當正向使用者呈現內容時，使用者將接收到替換廣告而非最初包括之廣告。
此外，可能需要客戶端在媒體串流內之特定時間點執行此內容替換。舉例而言，若客戶端將要用替換廣告動態地替換現有廣告，則可能需要客戶端在媒體串流中現有廣告原本將已開始之時間定位替換廣告。
更確切而言，討論中之媒體串流可限定訊框序列，例如視訊訊框及/或音訊訊框之序列，且可能需要客戶端在媒體串流之特定訊框處開始執行內容替換。舉例而言，對於廣告替換，可能需要客戶端在現有廣告之第一訊框處開始插入替換廣告代替現有廣告。
為促進此內容替換，客戶端可習得媒體串流中客戶端應開始內容替換之特定時間點，且客戶端可習得客戶端應在所指示時間點處開始播放何替換內容。在所要內容切換時間點處，客戶端可隨後自播放現有媒體串流轉換為播放作為替換媒體串流之替換內容。此外，當客戶端完成播放替換媒體串流時，客戶端可隨後轉換回至原始媒體串流之播放(例如，在進行中)。
此過程之一個技術難點在於，客戶端自播放第一串流轉換為播放第二串流(例如，開始內容替換，或在內容替換結束時切換回至原始串流)可能花費一些時間。如此情況係因為，客戶端在其可開始播放第二串流之前可能需要參與若干處理及記憶體密集之步驟。舉例而言，客戶端可能需要清除快取記憶體，接收及解碼第二串流之內容的至少初始部分，且用經解碼內容填充記憶體緩衝器以供再現。
在實踐中，此串流轉換過程可能花費一訊框以上的時間。舉例而言，若討論中之媒體為每秒30訊框之訊框速率的視訊，則每個訊框將橫跨1/30秒，亦即，約33.3毫秒(ms)。但自一個視訊串流轉換至另一視訊串流之動作可能花費大約數百毫秒，因此橫跨大量視訊訊框之時間。
儘管客戶端可藉由在所要內容切換時間點之前足夠遠開始其串流轉換過程來致力於考慮此時序，但轉換過程將花費之實際時間量出於各種原因可能係不可預測的。因此，不能精確地清楚客戶端應多早開始轉換過程。
令人遺憾的為，若客戶端太遲開始轉換過程，則客戶端可能至所要內容切換時間點仍未完成該過程，此可能引起使用者體驗問題，因為第二串流之播放可能太遲開始且因此可能太遲結束。
舉例而言，在其中客戶端即將在線性廣播饋送中用替換廣告替換具有相同持續時間之原始廣告的廣告替換情境中，若客戶端太遲開始播放替換廣告，則客戶端可能終止於播放一些原始廣告且接著突然切換至播放替換廣告。此外，若客戶端播放替換廣告持續其完全持續時間，則替換廣告可能持續超出原始廣告之結束，從而可能切掉原始廣告之後的基本廣播饋送之一些內容。
為了幫助解決此問題，依據本揭示，客戶端可偵測到客戶端將開始播放替換內容之時間點太遲，且客戶端可判定該延遲距所要開始點有多長時間。客戶端可隨後以將致使替換內容之播放準時結束之方式戰略上縮減其替換內容之播放。
舉例而言，客戶端可在替換內容中自動向前搜尋所判定延遲持續時間，且在此處開始播放替換內容。替代地，客戶端可自動截斷替換內容之末尾以自該末尾移除所判定延遲持續時間，或客戶端可選擇性地自替換內容內移除一或多個訊框(例如，重複之訊框及/或中間訊框，若適用時)。此外，客戶端可實行此等及/或其他此等操作之組合。舉例而言，客戶端可自開始、中間及末尾移除替換內容之一些部分，總計縮減所判定延遲持續時間。
此外，為了幫助應對在待替換之基本內容的開始之後開始的替換內容之播放，客戶端還可戰略上播放一些轉換訊框代替該基本內容，直至客戶端準備好開始播放替換內容為止。
一般熟習此項技術者藉由適當地參考附圖閱讀以下詳細描述將明白此等以及其他態樣、優點及替代例。此外，應理解，本發明內容及下文中提供之描述意欲僅藉助於實例說明本發明，但不作為限制。
相關申請案之參考
本申請案主張2018年11月7日申請的第16/183,266號美國專利申請案以及2018年8月17日申請的第62/765,276號美國臨時專利申請案之優先權，該等專利申請案中之每一者的全文特此以引用之方式併入本文中。
本申請案還與2018年11月7日申請的第16/183,185號美國專利申請案相關，該專利申請案之全文特此以引用之方式併入本文中。
參看圖式，圖1為其中可應用各種所揭示原理之實例系統的簡化方塊圖。然而，將理解，本文中所描述之此配置及過程以及其他配置及過程可採取各種其他形式。舉例而言，元件及操作可重新排序、分派、複製、組合、省略、添加或以其他方式修改。此外，應理解，本文中描述為由一或多個實體實行之操作可由彼等實體及/或代表彼等實體經由硬體、韌體及/或軟體實施，例如藉由一或多個處理單元執行程式指令等來實施。
如圖1所示，實例系統包括被組態成自媒體源14即時接收媒體串流之媒體客戶端12。
媒體客戶端12可被組態成如上文描述而操作，以自媒體源14接收表示例如視訊及/或音訊內容等媒體內容之類比或數位媒體串流，且輸出媒體內容及/或轉發串流以供將內容呈現在例如顯示螢幕及/或音訊揚聲器等使用者介面上。媒體客戶端可採取上文描述之形式中之任一者，且存在其他可能性。
媒體源14還可採用各種形式，可能取決於媒體客戶端12之形式。舉例而言，若媒體客戶端12為電視，則媒體源14可為本端機上盒(例如，電纜或衛星接收器)或串流媒體伺服器，其被組態成輸出選定媒體串流以供由電視呈現，或媒體源14可為廣播電視站點等，以及存在其他可能性。且若媒體客戶端為電腦，則媒體源可包含網際網路串流媒體伺服器或其他媒體提供商。替代地，媒體源14可為與媒體客戶端12整合及/或可由媒體客戶端12本端存取之資料儲存裝置，其中媒體客戶端自資料儲存裝置接收(例如，擷取)媒體串流用於播放，例如當客戶端正播放媒體串流或正轉發媒體串流用於播放時。其他實例亦係可能的。
如圖1中進一步展示，媒體客戶端12可具有與網路(例如，網際網路或專用網路)16之通信介面，媒體客戶端可經由通信介面參與與一或多個伺服器18之通信。伺服器18可包括檔案伺服器、媒體伺服器及/或其他類型之內容伺服器等。此外，儘管媒體源14與伺服器18分開展示，但媒體源14替代地可與伺服器18中之一或多者一起包括或整合，且可經由網路16存取。
如上所述，當例如客戶端12等媒體客戶端正接收及播放(例如，輸出以供播放)媒體串流時，客戶端用限定替換串流之替換內容替換串流之一部分可能係有用的。此外，如上所述，可能需要客戶端在媒體串流內之特定時間點如此操做。舉例而言，若串流限定訊框序列，例如視訊訊框及/或音訊訊框之序列，則可能需要客戶端在序列之特定訊框處開始執行內容替換。
在實踐中，客戶端可以各種方式習得(判定)媒體串流中客戶端應開始內容替換之特定目標時間點。
舉例而言，客戶端可被提供有，或沿著媒體串流或與媒體串流相關聯而接收識別媒體串流內之每個訊框或為每個訊框加時戳(例如，內嵌於媒體串流中或以其他方式經由串流中傳信提供之時戳)的資料集，以及指定內容替換即將開始之訊框的標識或時戳之資料。基於彼資料，客戶端可因此判定媒體串流中即將開始內容替換之特定時間點。
替代地，當客戶端接收及播放媒體串流時，客戶端可與網路伺服器一起工作以習得媒體串流中即將開始內容替換之點，作為所要內容切換時間點。舉例而言，伺服器可首先識別正由客戶端播放之媒體串流。且在識別媒體串流後，伺服器可隨後判定媒體串流中客戶端應開始內容替換之特定時間點，且可告知客戶端所判定之時間點。
為了促進伺服器識別正由客戶端播放之媒體串流，客戶端(或可能輔助裝置)可隨著客戶端接收串流而即時產生表示媒體內容之數位指紋資料，且伺服器可將指紋資料與表示已知媒體串流之媒體內容的參考指紋資料進行比較，其中指紋匹配指示正由客戶端播放之媒體串流為已知媒體串流。
伺服器可建立或以其他方式能夠存取表示已知媒體串流之參考指紋資料。舉例而言，伺服器或相關聯觀測站點或其他實體可接收已知媒體串流之廣播，且在接收廣播之同時可產生表示已知媒體串流之訊框的參考數位指紋序列。伺服器或另一實體可藉由以下方式建立此等參考指紋：以程式化方式分析已知媒體串流之訊框，接收已知媒體串流之複本作為輸入，以及應用現在已知或以後開發之任何媒體指紋識別過程或演算法來產生參考指紋。或伺服器可以其他方式建立或被提供表示已知媒體串流之此參考指紋序列。伺服器可隨後儲存參考指紋將其與已知媒體串流之標識相關聯。
此外，客戶端可在客戶端播放媒體串流時即時地產生表示串流之訊框的查詢指紋，且可將查詢指紋傳輸至伺服器以供分析。為促進指紋比較，客戶端可使用應用於建立參考指紋之相同指紋識別過程或演算法來產生此等查詢指紋。此外，客戶端可以特定訊框速率產生查詢指紋且可以群組形式將指紋傳輸至伺服器。舉例而言，對於包含每秒30訊框視訊之媒體串流，客戶端可能以大約每秒2訊框的縮減之訊框速率產生查詢指紋以幫助節省資源，且客戶端可能每隔1.5秒左右將最新查詢指紋群組傳輸至伺服器。其他實例亦係可能的。
當伺服器自客戶端接收查詢指紋資料時，伺服器可將查詢指紋資料與已知媒體串流之參考指紋資料進行比較。且若伺服器藉此以足夠信賴等級判定查詢指紋資料與參考指紋資料匹配，則伺服器可得出結論，正由客戶端播放之媒體串流為已知媒體串流。
伺服器可以每訊框為基礎進行此指紋比較。考慮視訊內容，舉例而言，伺服器可以每視訊訊框為基礎進行分析，將訊框之查詢指紋對照訊框之參考指紋進行比較。比較過程可採取多種形式中之任一種，此取決於指紋之結構。舉例而言，比較可涉及計算指紋之間的最大偏差，並判定最大偏差是否在預定義容限內。此外，若指紋為二進位的，則此可為布爾判定，且可涉及計算漢明距離(作為指紋中之各別位元位置之間的失配之計數)。且若指紋為更複雜之值，例如小數值或向量(例如，每視訊訊框區之灰度值)，則此可涉及判定值或向量之間的距離。大量其他實例亦係可能的。
此外，伺服器可以所要容限水平進行此指紋比較過程。舉例而言，比較可以為粗略的，對於指紋之間的差異具有相對高容限，例如具有對於較大數目差異之容限及/或對於較大尺寸差異之容限。舉例而言，當將兩個32位元指紋彼此比較時，粗略比較可認為指紋彼此大體匹配，亦即使兩個位元或另一指定數目之位元並不匹配。或比較可為更加精細的，對於此差異具有較低容限，及/或比較聚焦於可能表示基本媒體之特定部分的特定指紋分量。
經由客戶端產生之查詢指紋與已知媒體串流之參考指紋的此比較，伺服器可藉此找到一或多個匹配。舉例而言，伺服器可找到其中正由客戶端播放之媒體串流的訊框之查詢指紋與已知媒體串流之訊框的各別參考指紋匹配之一或多個例項。此匹配可因此達成或支援此結論：正由客戶端播放之媒體串流為已知媒體串流。
替代地，伺服器可以其他方式識別討論中之媒體串流。舉例而言，若媒體串流含有與媒體串流之標識對應的水印資料，則客戶端可讀取或以其他方式提取水印資料且向伺服器報告水印資料。且伺服器可隨後使用所報告之水印資料作為基礎來識別正由客戶端接收之媒體串流。舉例而言，伺服器可查閱使各種水印資料與特定已知媒體串流相關之參考資料，以判定由客戶端報告之水印資料與特定已知媒體串流對應。
已經識別正由客戶端播放之媒體串流，伺服器可隨後判定媒體串流中即將發生內容替換之時間點。舉例而言，伺服器可查閱指定已知媒體串流內內容替換即將開始之時間點的參考資料。且伺服器可隨後將指示時間點之指令傳輸至客戶端。
由伺服器之參考資料指定的替換時間點可以客戶端可理解之方式限定。舉例而言，若沿著媒體串流內限定之「真實時間」時間線向客戶端提供為媒體串流之每個訊框加時戳的資料，則伺服器具有之替換時間點可能為媒體串流之即將來臨的訊框之真實時間時戳。伺服器可因此向客戶端提供真實時間時戳作為客戶端應開始內容替換之時間的指示。
此外，客戶端可將真實時間時戳映射至根據客戶端之內部時脈限定的「客戶端時間」，使得客戶端可在其自身之時脈上判定其應開始內容替換之時間。舉例而言，客戶端可(i)計算當前訊框之真實時間時戳及客戶端之時脈上的當前時間之間的差，且(ii)將所判定之差施加至即將發生替換的即將來臨之訊框的所指示真實時間時戳，以判定客戶端應開始內容替換之客戶端時間點。
替代地，由伺服器之參考資料指定的替換時間點可能以客戶端不可理解之方式限定。舉例而言，伺服器具有之替換時間點可能為根據已知媒體串流內之真實時間時間線限定之時戳，但客戶端可能對於真實時間沒有概念或瞭解。在此情況下，伺服器可參與在真實時間與客戶端時間之間建立映射或「同步鎖」之過程，且伺服器隨後將即將發生內容替換之真實時間時間點映射至對應的客戶端時間時間點且將客戶端時間時間點提供至客戶端。
作為此情況之非限制性實例，考慮限定可能出現於電視廣播內之廣告莢(ad pod)的媒體串流。廣告莢包含廣告序列，例如電視商業廣告之序列。藉由此實例，客戶端可能為接收及播放特定電視頻道之線性廣播饋送的電視，且廣告莢可能出現於饋送內之任何時刻。舉例而言，尤其在例如體育賽事等直播之情況下，廣告莢在此饋送中出現之時間可能為不可預測的。替代地，廣告莢可出現於特定排程之時間。
在此實例中，所要內容替換可為廣告莢內特定廣告之替換(例如，為廣告替換不同的廣告或其他替換內容)。舉例而言，若廣告莢為廣告序列A1、A2、A3、A4，則所要內容替換可為廣告A3之替換。
在此情形下，廣告莢可限定真實時間時間線，其開始於時間T=0且繼續至廣告莢之末尾，且廣告A3可開始於時間線上之時間TA3 。然而，客戶端可能對時間線沒有概念。客戶端可具有其自身之內部時脈，該內部時脈具有限定客戶端時間之時間線(例如，當日時間或其他內部時間參考)。但在未提前知曉廣告莢時間線存在於客戶端時間內何處之情況下，僅給出值TA3 作為所要內容修正時間點將不能使客戶端能夠在需要時開始廣告替換。
在該情形中為了使伺服器在真實時間與客戶端時間之間建立同步鎖，客戶端可為客戶端發送至伺服器之查詢指紋加時戳。確切而言，當客戶端播放媒體串流並產生查詢指紋時，客戶端可用當前客戶端時間值為每一查詢指紋加時戳。當伺服器偵測到查詢指紋與已知媒體串流之帶時戳參考指紋之間的一或多個匹配時，伺服器可隨後使用彼等匹配點作為基礎將真實時間映射至客戶端時間。舉例而言，基於至少一個此等偵測到之匹配點，伺服器可限定(i)匹配之參考指紋的真實時間時戳與(ii)匹配之查詢指紋的客戶端時間時戳之間的映射。
一旦伺服器已經建立同步鎖，伺服器可隨後使用所建立之同步鎖將即將發生內容替換之真實時間時間點轉譯為即將發生內容替換之對應客戶端時間時間點。且伺服器可將所判定之客戶端時間時間點傳輸至客戶端，以使客戶端能夠在客戶端正播放之媒體串流中的所要時間點開始內容替換。
此外，在替換實施中，客戶端而非伺服器可實行建立過程並應用同步鎖以便判定即將發生內容替換之客戶端時間點。
舉例而言，一旦伺服器已經將媒體串流識別為由客戶端接收，則伺服器可向客戶端傳輸限定參考指紋之一些參考資料及已知媒體串流之即將來臨部分的真實時間時戳。客戶端可隨後進行查詢指紋與參考指紋之間的指紋匹配以找到一或多個匹配點，且客戶端可藉由使至少一個匹配點之時戳類似地相關來建立真實時間與客戶端時間之間的同步鎖。一旦客戶端已經建立同步鎖，則客戶端可隨後使用同步鎖作為基礎將即將發生內容替換之所提供真實時間時間點轉譯為即將發生內容替換的對應客戶端時間時間點。
除判定媒體串流中客戶端應開始內容替換之目標時間點外，客戶端還可以各種方式習得客戶端應在該時間點開始執行何內容替換。
舉例而言，客戶端可事先被預先提供內容替換在所指示時間點處開始之說明，例如客戶端應用特定內容替換媒體串流之現有內容的指示。替代地，客戶端可自伺服器或另一實體接收執行內容替換之說明。舉例而言，當伺服器向客戶端傳輸告知客戶端媒體串流中客戶端即將開始內容修正之時間點的指令時，伺服器可在到達客戶端之指令中包括(或單獨地提供)執行內容替換之說明。
在實踐中，執行內容替換之說明可包含至客戶端即將獲得且即將插入以代替媒體串流之現有內容或作為媒體串流之現有內容的補充的替換內容之指針。舉例而言，如上所述，該說明可包含限定客戶端可自其請求及接收替換內容之串流媒體伺服器、檔案伺服器等之網路位址或與網路位址相關之統一資源定位符(URL)。替代地，該說明可以另一方式指示客戶端即將在何處及/或如何獲得替換內容，以促進在媒體串流中所指示時間點處開始執行內容替換。此外，該說明可指示替換內容之持續時間，以告知客戶端該客戶端應播放替換內容代替原始內容多長時間。
在即將開始內容替換之所指示時間點，客戶端可因此自播放現有媒體串流切換為播放替換內容作為替換媒體串流。此外，在內容替換之末尾，客戶端可隨後切換回至播放原始媒體串流(例如，在進行中)。
作為非限制性實例，再次考慮上文所論述之廣告莢。在實踐中，可向伺服器提供表示及對應於廣告莢之訊框的帶時戳之參考指紋。此外，可向伺服器提供應替換廣告莢中之廣告中之一個特定廣告的指示，以及用以促進廣告替換之資訊。舉例而言，可向伺服器提供現有廣告之第一訊框的真實時間點之指示、替換廣告之URL，及替換之持續時間的指示。
當客戶端接收及播放可含有此廣告莢之線性廣播饋送在進行中，或回應於一或多個其他觸發，客戶端可正產生廣播饋送之帶時戳之查詢指紋且可正向伺服器報告彼等帶時戳之查詢指紋以供分析。將此等查詢指紋與表示廣告莢序列之訊框的參考指紋進行比較，伺服器可藉此偵測到客戶端正播放廣告莢序列。
已經判定客戶端正播放廣告莢序列，伺服器可隨後例如以上文所論述之方式將廣告替換即將開始之訊框的真實時間點轉譯為對應的客戶端時間點，且可向客戶端傳輸指令，該指令指定客戶端時間點，包括至客戶端即將在該客戶端時間處開始用來替換媒體串流之訊框的替換廣告之指針，且引導客戶端執行所指示之內容替換。相應地，客戶端可獲得所指示之替換廣告，且可在所指示之客戶端時間點處開始用彼廣告替換媒體串流之訊框。
此外，伺服器可告知客戶端廣告替換之持續時間或廣告替換即將結束之客戶端時間點，或持續時間可為標準或預設之持續時間。且在廣告替換結束時，客戶端可隨後在進行中自播放替換廣告切換回至播放廣播饋送(例如，廣告莢序列之其餘部分)。
如上文所解釋，在此過程中可能產生之技術問題為，客戶端可能花費一些時間自播放一個串流轉換至播放另一串流，例如自在線性廣播串流中播放廣告莢序列轉換至播放替換廣告串流。確切而言，如上所述，客戶端可能需要參與各種過程，例如清除快取記憶體、接收及解碼內容，以及填充記憶體緩衝器，以促進開始播放替換串流。
此串流轉換過程之開始點可以各種方式限定。舉例而言，若客戶端將自串流媒體伺服器接收第二串流之內容，則串流轉換過程之開始可以在客戶端發送初始傳送控制協定(TCP)訊號交換訊息以起始設置與伺服器之TCP會話時，或在客戶端發送實時串流協定(RTSP)設置請求等以起始設置與伺服器之即時傳送協定(RTP)會話時，以及存在其他可能性。替代地，若客戶端將以另一方式或自另一源接收第二串流之內容，則過程之開始點可以其他方式限定。過程之結束可隨後限定為在考慮抖動及/或其他問題之同時客戶端已經緩衝足夠之第二媒體串流以開始播放該串流之時間點。其他實例亦係可能的。
如上所述，串流轉換過程自開始至結束可花費大約數百毫秒。此外，因為資源約束及其他因素不時地改變，在任何給定例項中客戶端自一個串流轉換至另一串流將花費之實際時間量可能為不可預測的。
經驗可建立客戶端(或代表性客戶端)之最小及最大預期串流轉換持續時間。舉例而言，測試可能展示，客戶端自播放第一串流轉換至播放第二串流(例如，至客戶端準備好開始播放第二串流之點)將花費300 ms至500 ms之間的任何時間。因此，客戶端可具有300 ms之最小預期切換持續時間及500 ms之最大預期轉換持續時間，從而限定200 ms不確定範圍，以及存在其他可能性。
客戶端可藉由隨著時間之過去追蹤串流轉換持續時間且向上滾動所追蹤持續時間以建立最小值及最大值之統計量度，來判定此等最小及最大預期串流轉換持續時間，及/或可以其他方式向客戶端提供預期轉換持續時間之代表性值。
給定此不確定範圍，客戶端可將其切換過程組態為在所要內容切換時間點之前某一時間量開始，該時間量等於最大預期切換持續時間。如此，客戶端應理論上終止於在不確定範圍內之某一時間、在所要內容切換開始時間處或之前開始播放第二串流。
然而，令人遺憾的為，一旦客戶端已完成其播放第二串流之準備，客戶端就可能不再處於播放第一串流之位置中，因為客戶端現可能正緩衝第二串流內容用於播放而非緩衝第一串流內容用於播放。因此，若客戶端在最大預期切換持續時間之結束已過去之前完成其用於播放第二串流之準備，則客戶端可比所要更早地開始播放第二串流，此可能導致使用者體驗問題。此外，對於例如廣告替換等內容替換，第二串流之播放的此過早開始可能在替換持續時間結束時當客戶端即將自播放第二串流切換回至播放第一串流時產生相關聯的使用者體驗問題。
幫助避免使客戶端比所要更早地開始播放第二串流之一種方式為，客戶端改為將其切換過程組態為在所要內容切換時間點之前某一時間量開始，該時間量小於最大預期切換持續時間。舉例而言，客戶端可在所要內容切換時間點之前某一時間量開始其切換過程，該時間量小於最大預期切換持續時間但大於或等於最小預期切換持續時間。
舉例而言，客戶端可在所要內容切換時間點之前某一時間量開始其切換過程，該時間量為平均預期切換持續時間，例如最小預期切換持續時間與最大預期切換持續時間之間的約略中間處。使用上文之實例值，在最小預期切換持續時間為300 ms且最大預期切換持續時間為500 ms之情況下，舉例而言，客戶端可因此在所要內容切換時間點之前400 ms開始其切換過程。
但此解決方案仍非最佳的，因為其可能最終使客戶端花費比平均預期切換持續時間長之時間來準備替換內容之播放。因此，客戶端可能直至所要內容切換時間點已經過去之後才完成其內容切換準備。且因此，如上所述，客戶端可能事與願違地播放應該被替換之一些基本內容，接著突然切換為播放替換內容，此可能提供較差之使用者體驗。此外，如上所述，若客戶端太遲開始播放替換內容且播放替換內容持續其完全持續時間，則替換內容之播放可持續超出應該被替換之內容的末尾，且可能切掉基本媒體串流之後續內容的開頭。
本揭示提供一種機制以幫助解決替換內容之播放太遲開始且因此太遲結束之技術問題。
依據本揭示，當客戶端在所要內容切換時間點已經過去之後某一延遲之情況下已經開始或將開始播放替換內容，則客戶端將判定延遲為多長時間。舉例而言，客戶端可判定自所要內容切換時間點至替換內容之播放開始或將開始之時間已經過去或將已經過去多長時間。且如上所述，客戶端將隨後以將致使其替換內容之播放準時結束之方式戰略上縮減其替換內容之播放。此外，為了幫助應對在待替換之基本內容的開始之後開始的替換內容之播放，如上所述，客戶端還可戰略上播放一些轉換訊框代替基本內容，直至客戶端準備好開始播放替換內容為止。
此過程假定，待替換之內容(原始內容)及替換內容具有彼此相同之持續時間D，且在無任何延遲之情況下，目標將為精確地在原始內容原本已開始之時間開始播放替換內容，且精確地在原始內容原本已結束之時間結束播放替換內容。舉例而言，在廣告替換情境中，原始廣告及替換廣告可各自為30秒或另一典型之廣告持續時間，且目標可為精確地在原始廣告之播放原本已開始時開始播放替換廣告，且精確地在原始廣告之播放原本已結束時結束播放替換廣告。
此外，過程假定，客戶端播放替換內容之開始時間在原始內容原本已開始之時間之後(亦即，在所要內容切換時間點之後)被、曾經被或將被延遲持續時間為P秒(可能僅跨幾十毫秒之若干訊框、可能小於一秒)之延遲週期。客戶端可藉由偵測到至所要內容切換時間點客戶端尚未開始或將不開始播放替換內容來偵測此延遲之存在。且客戶端可藉由以程式化方式自所要內容切換時間點到達時直至客戶端開始播放替換內容之時間運行秒錶來計算延遲之長度。
因為期望客戶端隨後精確地在原始內容原本已結束時完成其替換內容之播放，所以客戶端將隨後被留下在其中播放替換內容的縮減之D-P週期(亦即，完全廣告持續時間D與延遲週期P之間的差)。
在替換內容具有持續時間D之條件下，客戶端可藉由自替換內容移除P秒(亦即，藉由放棄播放P秒之替換內容)而促進在縮減之D-P週期中播放替換內容。根據本揭示，客戶端可藉由以下操作來實現此目的：移除替換內容之開頭的P秒，移除替換內容之末尾的P秒，或移除替換內容之一或多個部分總計P秒。
作為此過程之一個實例，在判定替換內容之播放延遲P秒後，客戶端可回應性地在替換內容內向前搜尋(亦即，在替換內容串流中向前跳躍)P秒，且在P秒時間點處開始播放替換內容。如此，客戶端播放替換內容之其餘部分應花費僅D-P秒，使得播放將準時結束。利用此實例，因為客戶端將在比替換內容之實際開始遲之點開始播放替換內容，所以客戶端還可向替換內容之播放添加淡入(例如，漸隱)，使得替換內容之播放的開始不會看上去如此突然。
客戶端可精確地在替換內容開始時開始實行此搜尋操作。替代地，客戶端可能在替換內容開始之後(可能稍後)某一點處開始其向前搜尋，且可仍在替換內容之播放中向前跳躍P秒。
作為此過程之另一實例，在判定替換內容之播放延遲P秒後，客戶端可回應性地早P秒結束播放替換內容。換言之，客戶端可在替換內容開始處開始播放替換內容，但並非播放替換內容持續完全持續時間D秒，而是一旦客戶端已經播放D-P秒之替換內容就可停止播放替換內容(且切換回至基本媒體串流)。因為替換內容之播放將因此僅花費D-P秒，所以播放將同樣準時結束。此外，利用此實例，因為客戶端將終止於較早結束播放替換內容，所以客戶端還可添加自替換內容回到基本媒體串流之淡出，使得替換內容之播放的結束將不會看上去如此突然。
作為此過程之又一實例，在判定替換內容之播放延遲P秒後，客戶端可回應性地參與選擇性地自替換內容內移除訊框之過程，以試圖將替換內容之播放的總持續時間縮減至D-P秒。
舉例而言，當客戶端播放替換內容時，客戶端可檢查其已經緩衝用於播放之替換內容的即將來臨之訊框，以搜尋客戶端可合理地移除且因此不播放之訊框。
舉例而言，若討論中之媒體包含視訊，則客戶端可搜尋其中兩個或兩個以上連續訊框之影像相同或充分類似之例項，最佳在不存在隨附音訊時。客戶端可藉由產生及比較連續訊框之指紋，藉由圖案匹配及/或以某一其他方式進行此分析。每當客戶端找到此等重複訊框時，客戶端可隨後丟棄一或多個重複訊框。替代地或另外，客戶端可尋找視訊之中間訊框(例如，P訊框或B訊框)(同樣最佳在不存在隨附音訊時)，且可類似地移除彼等訊框。此外，若討論中之媒體包含音訊，則客戶端可搜尋靜默訊框(可能為重複之靜默訊框)，且可同樣丟棄彼等訊框。
替代地，客戶端可應用一或多個其他過程選擇性地自替換內容移除訊框，以幫助將替換內容之持續時間縮減延遲週期P。
藉由選擇性地在替換內容內可能多個不同時間處實行此訊框移除過程，客戶端可能能夠更精妙地移除總共P秒之訊框，使得替換內容之播放的所得持續時間將僅為D-P秒且因此將準時結束。替代地，若當在客戶端接近替換內容之播放的D-P秒時客戶端尚未能夠移除替換內容之足夠數目個訊框，則客戶端可足夠早地結束播放替換內容以使替換內容之播放的總持續時間降至D-P秒，使得其將同樣準時結束。
如上文進一步提到，當客戶端將要以P秒之延遲開始播放替換內容時，客戶端還可在延遲週期期間播放一些轉換訊框代替原始內容。為促進此操作，當客戶端偵測到所要內容切換時間點已經到達時，客戶端可判定其尚未準備好開始播放替換內容。作為回應，客戶端可隨後開始產生及播放轉換訊框代替原始內容，直至客戶端準備好開始播放替換內容為止。且當客戶端準備好開始播放替換內容時，客戶端可隨後自播放轉換訊框切換為播放替換內容。此外，客戶端可添加自播放轉換訊框至播放替換內容之淡變(例如，漸隱)，以幫助使轉換平穩。
在實踐中，轉換訊框可基於討論中之媒體的類型而採用各種形式。舉例而言，若媒體包含視訊(可能連同音訊)，則轉換訊框可包含黑訊框及/或緊接在轉換前之訊框的複本。舉例而言，客戶端可播放黑訊框持續轉換週期之持續時間(直至轉換為播放替換內容)。替代地，針對轉換週期內之某段時間，客戶端可播放作為第一串流之最新訊框的複本之訊框，且可隨後針對轉換週期之其餘部分自該影像淡變至黑訊框。而若媒體包含音訊(可能連同視訊)，則轉換訊框可為靜默訊框。確切而言，客戶端可呈現靜默訊框持續轉換週期之持續時間。其他實例亦係可能的。
圖2-6示出尤其在廣告替換情境中上文所論述之一些過程的實例。此等圖中之每一者描繪隨時間自左向右推移沿著時間線之內容播放。
圖2描繪問題情境：客戶端正在線性串流20內播放廣告莢，且客戶端即將用替換廣告22之播放替換線性串流之廣告AD2，但替換廣告22之播放延遲開始。如所展示，AD2具有持續時間D，且替換廣告22亦具有持續時間D。此外，如沿著時間線所示，最終目標原本為精確地在AD2開始處在時間TDESIRED-START 處開始播放替換廣告，且精確地在AD2結束處在時間TDESIRED-END 處結束播放替換廣告。但如所展示，客戶端延遲P秒開始其替換廣告之播放，因為客戶端準備好在時間TREADY 處開始播放替換內容，該時間TREADY 為時間TDESIRED-START 之後P秒。因此，在此情境下，客戶端可播放AD2之P秒且接著突然切換為播放替換廣告。此外，客戶端播放替換廣告可自下一廣告AD3之開始後延長P秒，因此可能切掉下一廣告之開頭。
圖3描繪用於客戶端以幫助克服此等技術問題之一種機制。確切而言，圖3示出客戶端可在替換廣告22中向前搜尋P秒且在該點處開始播放替換廣告。為了在實踐中促進此操作，客戶端可應用固有搜尋功能在替換廣告串流中向前跳躍，或可以其他方式丟棄替換廣告之訊框的前P秒。因此，客戶端將在替換廣告之P秒處開始其替換廣告之播放，使得客戶端將僅播放替換廣告的最後D-P秒。
接下來，圖4示出此搜尋過程之實例結果。如圖4中所展示，客戶端播放替換廣告之最後D-P秒將在時間TREADY 處開始且將在時間TDESIRED-END 處結束，使得客戶端播放替換廣告之結束應按需要最佳地與基本線性串流20中AD2之結束對齊。(儘管未圖示，客戶端還可能需要在此替換廣告播放結束時或接近結束時採取動作，以考慮自播放替換廣告串流22切換回至播放基本線性串流20之過程中的延遲。舉例而言，客戶端可藉由播放轉換訊框且可能藉由在AD3之播放中向前搜尋適當持續時間來處理該情形。)
如圖4中進一步示出，依據上文之論述，客戶端還可向轉換訊框24添加淡變週期以幫助考慮播放替換廣告之開始的延遲。在實例實施中，客戶端可產生及播放此等轉換訊框持續至少延遲週期(自TDESIRED-START 至TREADY )，以避免播放應該被替換廣告替換之AD2的開頭。此外，客戶端可在延遲週期之後將轉換訊框之播放延長淡變週期26，且經由淡變週期26，自播放轉換訊框淡變為播放替換廣告，以幫助使轉換平穩。
圖5示出用於客戶端以幫助克服與播放替換廣告之開始的延遲相關聯之問題的替換機制。確切而言，圖5示出客戶端可早P秒結束播放替換廣告以避免使替換廣告之播放延長超出時間TDESIRED-END 。為了在實踐中促進此操作，客戶端可僅播放替換廣告之前D-P秒，且客戶端可丟棄替換廣告之最後P秒。舉例而言，一旦客戶端以P秒延遲開始播放替換廣告，則客戶端可隨後繼續播放替換廣告持續D-P秒。
接下來，圖6示出此替換過程之實例結果。如圖6中所展示，客戶端播放替換廣告之前D-P秒將在時間TREADY 處開始且將在時間TDESIRED-END 處結束，使得客戶端播放替換廣告之結束應按需要最佳地與基本線性串流20中AD2之結束對齊。(此處再次，客戶端可能類似地需要在此替換廣告播放結束時或接近結束時採取動作，以考慮自播放替換廣告串流切換回至播放線性串流之過程中的延遲。)
接下來，圖7為描繪可根據本揭示實行之方法的流程圖。此方法可由例如媒體客戶端或其他重放裝置等裝置實行，以促進播放替換內容代替基本媒體串流之一部分，其中替換內容及基本媒體串流之該部分具有相等持續時間D。如上文所論述，在實例實施中，基本媒體串流之該部分可為廣告莢中之廣告，且替換內容可為替換廣告。替代地，內容可採取其他形式。
如圖7中所展示，在區塊70處，當裝置正播放基本媒體串流時，裝置判定開始播放替換內容之目標時間。舉例而言，客戶端可藉由自伺服器或其他實體接收指定目標時間之指令及/或自身評估以判定目標時間來判定此目標時間。
在區塊72處，裝置隨後偵測到裝置開始播放替換內容之開始時間在所判定目標時間之後某一延遲週期(持續時間為P)。舉例而言，裝置可量測自所要開始時間至裝置將開始、正開始或將開始播放替換內容之時間已經過去多長時間。
且在區塊74處，回應於偵測到此延遲，裝置將隨後將其替換內容之播放縮減持續時間P以幫助對齊替換內容之播放的結束與基本媒體串流之該部分的結束。如上文所論述，此縮減操作可涉及在替換內容中向前搜尋持續時間P到達替換內容中之新時間點，且在新時間點處開始播放替換內容。替代地或另外，該縮減可涉及早持續時間P結束播放替換內容。又替代地或另外，該縮減可涉及自替換內容移除一或多個中間訊框，以幫助使替換內容之播放的總持續時間降至D-P。
如上文進一步論述，裝置可在延遲週期P期間額外播放轉換訊框，代替播放基本媒體串流之該部分的初始部分。且裝置可自播放轉換訊框淡變為播放替換內容。
此外，如上文所論述，若討論中之媒體包含視訊，則轉換訊框可包含黑訊框及/或作為第一媒體串流之上一個所播放訊框的複本之訊框。且若討論中之媒體包含音訊，則轉換訊框可包含靜默訊框。
圖8為描繪可根據本揭示實行之方法的另一流程圖。如圖8中所展示，在區塊80處，當裝置正播放媒體串流時，裝置判定裝置即將開始播放替換內容代替媒體串流之一部分的目標時間。在區塊82處，裝置偵測到裝置開始播放替換內容之開始時間在所判定目標時間之後某一延遲週期(具有持續時間P)。且在區塊84處，回應於該偵測，裝置在替換內容中向前搜尋持續時間P以使替換內容之播放縮減持續時間P。 可在此方法之上下文中應用上文描述之各種特徵且反之亦然。舉例而言，媒體串流可為廣告莢，且替換內容可為替換廣告。此外，裝置可額外在延遲週期P期間播放轉換訊框(例如，黑訊框、靜默訊框等)，且可添加淡變以使轉換平穩。
最後，圖9為實例媒體客戶端之簡化方塊圖，其展示可包括在此裝置中以促進實行例如上文提到之操作的一些組件。依據上文之論述，此客戶端可採用各種形式。舉例而言，其可為電視、電腦監視器或操作以接收及再現視訊內容之其他裝置，及/或其可為擴音器、一對頭戴受話器或操作以接收及再現音訊內容之其他裝置。大量其他實例亦係可能的。
如圖9所示，實例客戶端包括媒體輸入介面90、網路通信介面92、媒體呈現介面94、處理單元96及非暫時性資料儲存裝置98，其中之任一者或全部可整合在一起或如所展示以通信方式藉由系統匯流排、網路或其他連接機構100鏈接在一起。
客戶端可使用媒體輸入介面90及/或網路通信介面92來接收媒體串流以供呈現。此等介面中之任一者可包括一或多個有線及/或無線介面，其用於建立與接收器、伺服器或其他裝置或系統之通信且以類比或數位形式自接收器、伺服器或其他裝置或系統接收媒體內容。舉例而言，媒體輸入介面可包括符合例如DVI、HDMI、VGA、USB、藍芽、WIFI及許多其他協定等協定之一或多個介面，且網路通信介面可包含有線或無線乙太網路介面，用於參與基於本端或廣域封包之通信以便與一或多個伺服器及/或其他裝置或系統交互。
媒體呈現介面94可隨後包含一或多個組件以促進媒體內容之呈現。舉例而言，媒體呈現介面可包含例如顯示螢幕及/或擴音器等使用者介面，以及一或多個驅動器或其他組件用於處理所接收媒體內容以促進內容在使用者介面上的呈現。
處理單元96可包含一或多個通用處理器(例如，微處理器)及/或一或多個專用處理器(例如，特殊應用積體電路)。且非暫時性資料儲存裝置98可包含一或多個揮發性及/或非揮發性儲存組件，例如光學、磁性或快閃儲存裝置。
此外，如所展示，資料儲存裝置98可儲存程式指令102，該等程式指令可由處理單元96執行以致使客戶端實行本文中所描述之各種操作。舉例而言，操作可包括：在客戶端正播放基本媒體串流時，判定客戶端即將開始播放替換內容代替基本媒體串流之一部分的目標時間。此外，操作可包括偵測到客戶端開始(例如，已經開始、正開始或將開始)播放替換內容之開始時間在所判定目標時間之後某一延遲週期(具有持續時間P)。且操作可包括回應於該偵測將替換內容之播放縮減持續時間P。此處同樣，可在此上下文中應用上文描述之各種操作且反之亦然。
上文已經描述例示性實施例。然而，熟習此項技術者將理解，可在不脫離本發明之真實範疇及精神的情況下對此等實施例作出改變及修改。
12:媒體客戶端 14:媒體源 16:網路 18:伺服器 20:線性串流 22:替換廣告 24:轉換訊框 26:淡變週期 70:區塊 72:區塊 74:區塊 80:區塊 82:區塊 84:區塊 90:媒體輸入介面 92:網路通信介面 94:媒體呈現介面 96:處理單元 98:非暫時性資料儲存裝置 100:系統匯流排、網路或其他連接機構 102:程式指令
圖1為其中可實施所揭示特徵之系統的簡化方塊圖。 圖2為示出其中替換廣告之播放較遲開始的廣告替換情境之圖式。 圖3為示出在圖2之替換廣告中向前搜尋以將播放時間縮減延遲持續時間之圖式。 圖4為示出圖3中所示出之機制的結果之圖式。 圖5為示出使替換廣告之播放早延遲持續時間結束之圖式。 圖6為示出圖5中所示出之機制的結果之圖式。 圖7為描繪可根據本揭示實行之方法的流程圖。 圖8為描繪可根據本揭示實行之方法的另一流程圖。 圖9為描繪可根據本揭示操作之實例媒體客戶端的組件之簡化方塊圖。
70:區塊
72:區塊
74:區塊

Claims (20)

  1. 一種用於一裝置播放替換內容代替一基本媒體串流之一部分的方法，其中該替換內容及該基本媒體串流之該部分具有相等持續時間D，該方法包含： 在該裝置正播放該基本媒體串流時，由該裝置判定開始播放該替換內容之一目標時間； 由該裝置偵測到該裝置開始播放該替換內容之一開始時間在或將在所判定目標時間之後某一延遲週期，該延遲週期具有持續時間P；以及 回應於該偵測，由該裝置將該替換內容之播放縮減持續時間P以幫助對齊該替換內容之播放的一結束與該基本媒體串流之該部分的一結束，其中將該替換內容之播放縮減包含(i)在該替換內容中偵測一重複訊框及(ii)回應於在該替換內容中偵測該重複訊框，在播放該替換內容時跳過該重複訊框之播放。
  2. 如請求項1之方法，其中該基本媒體串流之該部分為一廣告莢中之一廣告，且其中該替換內容為一替換廣告。
  3. 如請求項1之方法，其進一步包含由該裝置在該延遲週期期間播放轉換訊框，代替播放該基本媒體串流之該部分的一初始部分。
  4. 如請求項3之方法，其進一步包含由該裝置自播放該等轉換訊框淡變為播放該替換內容。
  5. 如請求項3之方法，其中該基本媒體串流包含視訊，且其中該等轉換訊框包含黑訊框。
  6. 如請求項3之方法，其中該基本媒體串流包含音訊，且其中該等轉換訊框包含靜默訊框。
  7. 如請求項1之方法，其中該裝置為一電視。
  8. 如請求項7之方法，其中該裝置為一機上盒。
  9. 一種媒體客戶端，其包含： 一處理單元； 非暫時性資料儲存裝置；以及 程式指令，其儲存在該非暫時性資料儲存裝置中且可由該處理單元執行以致使該媒體客戶端實行包括以下之操作： 在該媒體客戶端正播放一基本媒體串流時，判定該媒體客戶端即將開始播放替換內容代替該基本媒體串流之一部分的一目標時間， 偵測到該媒體客戶端開始播放該替換內容之一開始時間在或將在所判定目標時間之後某一延遲週期，該延遲週期具有持續時間P，及 回應於該偵測，將該替換內容之播放縮減持續時間P，其中將該替換內容之播放縮減包含(i)在該替換內容中偵測一重複訊框及(ii)回應於在該替換內容中偵測該重複訊框，在播放該替換內容時跳過該重複訊框之播放。
  10. 如請求項9之媒體客戶端，其中該基本媒體串流之該部分為一廣告莢中之一廣告，且其中該替換內容為一替換廣告。
  11. 如請求項9之媒體客戶端，其中該等操作進一步包含在該延遲週期期間播放轉換訊框，代替播放該基本媒體串流之該部分的一初始部分。
  12. 如請求項11之媒體客戶端，其中該等操作進一步包含由該裝置自播放該等轉換訊框淡變為播放該替換內容。
  13. 如請求項11之媒體客戶端，其中該基本媒體串流包含視訊，且其中該等轉換訊框包含黑訊框。
  14. 如請求項11之媒體客戶端， 其中該基本媒體串流包含音訊，且其中該等轉換訊框包含靜默訊框。
  15. 如請求項9之媒體客戶端，其中該媒體客戶端為一電視。
  16. 如請求項9之媒體客戶端，其中該媒體客戶端為一機上盒。
  17. 一種非暫時性資料儲存裝置，其儲存可由一處理單元執行之程式指令以致使該媒體客戶端實行操作，該等操作包含： 在該媒體客戶端正播放一基本媒體串流時，判定該媒體客戶端開始播放代替該基本媒體串流之一部分之替換內容之一目標時間； 偵測到該媒體客戶端開始播放該替換內容之一開始時間在或將在所判定目標時間之後某一延遲週期，該延遲週期具有持續時間P；以及 回應於該偵測，將該替換內容之播放縮減持續時間P，其中將該替換內容之播放縮減包含(i)在該替換內容中偵測一重複訊框及(ii)回應於在該替換內容中偵測該重複訊框，在播放該替換內容時跳過該重複訊框之播放。
  18. 如請求項17之非暫時性資料儲存裝置，其中該基本媒體串流之該部分為一廣告莢中之一廣告，且其中該替換內容為一替換廣告。
  19. 如請求項17之非暫時性資料儲存裝置，其中該等操作進一步包括在該延遲週期期間播放轉換訊框代替播放該基本媒體串流之該部分的一初始部分。
  20. 如請求項17之非暫時性資料儲存裝置，其中該媒體客戶端為一電視。
TW109145507A 2018-08-17 2019-06-27 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束 TWI788744B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201862765276P 2018-08-17 2018-08-17
US62/765,276 2018-08-17
US16/183,266 US11317143B2 (en) 2018-08-17 2018-11-07 Dynamic reduction in playout of replacement content to help align end of replacement content with end of replaced content
US16/183,266 2018-11-07

Publications (2)

Publication Number Publication Date
TW202123718A TW202123718A (zh) 2021-06-16
TWI788744B true TWI788744B (zh) 2023-01-01

Family

ID=69523667

Family Applications (2)

Application Number Title Priority Date Filing Date
TW109145507A TWI788744B (zh) 2018-08-17 2019-06-27 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束
TW108122595A TWI716018B (zh) 2018-08-17 2019-06-27 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW108122595A TWI716018B (zh) 2018-08-17 2019-06-27 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束

Country Status (7)

Country Link
US (1) US11317143B2 (zh)
EP (1) EP3837849A4 (zh)
JP (2) JP7313445B2 (zh)
KR (1) KR102536652B1 (zh)
CN (1) CN111316659B (zh)
TW (2) TWI788744B (zh)
WO (1) WO2020036668A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11178451B2 (en) 2018-08-17 2021-11-16 Roku, Inc. Dynamic playout of transition frames while transitioning between playout of media streams
EP3967044A4 (en) * 2019-05-10 2023-04-05 Roku, Inc. CONTENT MODIFICATION SYSTEM WITH INPUT BUFFER SWITCHING DELAY DETERMINATION FUNCTION
WO2020231927A1 (en) * 2019-05-10 2020-11-19 The Nielsen Company (Us), Llc Content-modification system with responsive transmission of reference fingerprint data feature
WO2020231821A1 (en) 2019-05-10 2020-11-19 The Nielsen Company (Us), Llc Content-modification system with fingerprint data match and mismatch detection feature
US11736742B2 (en) * 2019-05-10 2023-08-22 Roku, Inc. Content-modification system with responsive transmission of reference fingerprint data feature
AU2021249036A1 (en) * 2020-03-31 2022-11-17 Arris Enterprises Llc Advertisement preparation systems
US11343565B2 (en) * 2020-04-08 2022-05-24 Roku, Inc. Content-modification system with feature for detecting and responding to a content modification by a tuner device
WO2022094108A1 (en) * 2020-10-29 2022-05-05 Roku, Inc. Alignment of supplemental content segment duration with modifiable content segment duration, to facilitate dynamic content modification
US11917231B2 (en) 2020-10-29 2024-02-27 Roku, Inc. Real-time altering of supplemental content duration in view of duration of modifiable content segment, to facilitate dynamic content modification
US20220264171A1 (en) * 2021-02-12 2022-08-18 Roku, Inc. Use of In-Band Data to Facilitate Ad Harvesting for Dynamic Ad Replacement
WO2023278959A1 (en) 2021-07-01 2023-01-05 Boston Scientific Neuromodulation Corporation 3d antenna structure for directional independent wireless power transfer for implantable medical devices

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104581396A (zh) * 2014-12-12 2015-04-29 北京百度网讯科技有限公司 一种推广信息的处理方法及装置
CN105847888A (zh) * 2016-03-28 2016-08-10 乐视控股（北京）有限公司 一种广告投放方法、终端及系统
CN106170103A (zh) * 2016-06-07 2016-11-30 腾讯科技（北京）有限公司 视频播放方法和装置

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4029487B2 (ja) * 1998-08-17 2008-01-09 ソニー株式会社 記録装置および記録方法、再生装置および再生方法、ならびに、記録媒体
US7203758B2 (en) 2000-10-19 2007-04-10 Loudeye Technologies, Inc. System and method for selective insertion of content into streaming media
US20030001977A1 (en) * 2001-06-28 2003-01-02 Xiaoling Wang Apparatus and a method for preventing automated detection of television commercials
US20070033633A1 (en) 2005-08-08 2007-02-08 Princeton Server Group, Inc. Method and apparatus for providing a transition between multimedia content
BRPI0712894A2 (pt) 2006-06-13 2012-10-09 Koninkl Philips Electronics Nv impressão digital para um fluxo de vìdeo, aparelho operável para gera uma impressão digital, métodos para gerar uma impressão digital e para sincronizar uma mìdia secundária com um fluxo de vìdeo em um aparelho, software, estrutura de dados para um script ambilight, uso de uma impressão digital de um fluxo de vìdeo, sinal para comunicar a identidade de um fluxo de vìdeo
JP5087872B2 (ja) * 2006-07-25 2012-12-05 日本電気株式会社 ストリーミング配信システム及びストリーミング配信方法
US10356366B2 (en) * 2007-05-31 2019-07-16 Sony Interactive Entertainment America Llc System and method for taking control of a system during a commercial break
US8949886B2 (en) * 2007-06-18 2015-02-03 Alcatel Lucent Targeted advertisement insertion with interface device assisted switching
US9009066B2 (en) * 2009-02-12 2015-04-14 Echostar Technologies L.L.C. Advertisement management for live internet multimedia content
US20100218208A1 (en) * 2009-02-26 2010-08-26 Comcast Cable Communications, Llc Method and Apparatus for Generating Alternative Commercials
US10410222B2 (en) 2009-07-23 2019-09-10 DISH Technologies L.L.C. Messaging service for providing updates for multimedia content of a live event delivered over the internet
KR101786051B1 (ko) 2009-11-13 2017-10-16 삼성전자 주식회사 데이터 제공 방법 및 장치와 데이터 수신 방법 및 장치
KR101737084B1 (ko) * 2009-12-07 2017-05-17 삼성전자주식회사 메인 콘텐트에 다른 콘텐트를 삽입하여 스트리밍하는 방법 및 장치
US8752085B1 (en) 2012-02-14 2014-06-10 Verizon Patent And Licensing Inc. Advertisement insertion into media content for streaming
TWI482494B (zh) 2012-07-09 2015-04-21 Wistron Corp 頻道資訊提示方法及系統以及電腦可讀取儲存媒體
US8928678B2 (en) * 2012-08-02 2015-01-06 Intel Corporation Media workload scheduler
US8732745B2 (en) * 2012-10-22 2014-05-20 Sony Corporation Method and system for inserting an advertisement in a media stream
US8913882B2 (en) * 2012-12-31 2014-12-16 Eldon Technology Limited Auto catch-up
US9351023B2 (en) 2013-03-15 2016-05-24 Echostar Technologies L.L.C. Output of broadcast content with portions skipped
US9369506B2 (en) 2013-06-05 2016-06-14 Adobe Systems Incorporated Insertion of supplementary content into a segmented content stream
US10110649B2 (en) 2013-08-01 2018-10-23 Spotify Ab System and method for transitioning from decompressing one compressed media stream to decompressing another media stream
US9723377B2 (en) * 2014-04-28 2017-08-01 Comcast Cable Communications, Llc Video management
US20160316261A1 (en) 2015-04-23 2016-10-27 Sorenson Media, Inc. Automatic content recognition fingerprint sequence matching
JP2017041289A (ja) 2015-08-20 2017-02-23 三菱電機株式会社 メディア再生装置
US9813781B2 (en) * 2015-10-27 2017-11-07 Sorenson Media, Inc. Media content matching and indexing
US10248378B2 (en) * 2015-11-11 2019-04-02 AdsWizz Inc. Dynamically inserting additional content items targeting a variable duration for a real-time content stream
KR102494584B1 (ko) * 2016-08-18 2023-02-02 삼성전자주식회사 디스플레이 장치 및 그 컨텐츠 디스플레이 방법
US9972360B2 (en) * 2016-08-30 2018-05-15 Oath Inc. Computerized system and method for automatically generating high-quality digital content thumbnails from digital video
US10560730B2 (en) 2016-11-09 2020-02-11 Samsung Electronics Co., Ltd. Electronic apparatus and operating method thereof
KR101919014B1 (ko) * 2016-11-09 2018-11-15 삼성전자주식회사 전자 장치 및 그 동작방법
KR20180083132A (ko) * 2017-01-12 2018-07-20 삼성전자주식회사 전자 장치 및 그 동작방법
KR101899576B1 (ko) 2017-02-02 2018-09-17 네이버 주식회사 멀티미디어 컨텐츠의 원격 운영을 위한 시간 동기화 방법 및 그 시스템
CN107277554B (zh) 2017-05-05 2019-06-21 中广热点云科技有限公司 一种时移节目单播转换组播的方法
US10674199B2 (en) * 2017-08-28 2020-06-02 Otis Elevator Company Media content selection for passengers
CN107707969A (zh) 2017-09-04 2018-02-16 深圳市屯奇尔科技有限公司 视频播放方法、装置及终端设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104581396A (zh) * 2014-12-12 2015-04-29 北京百度网讯科技有限公司 一种推广信息的处理方法及装置
CN105847888A (zh) * 2016-03-28 2016-08-10 乐视控股（北京）有限公司 一种广告投放方法、终端及系统
CN106170103A (zh) * 2016-06-07 2016-11-30 腾讯科技（北京）有限公司 视频播放方法和装置

Also Published As

Publication number Publication date
JP2021534699A (ja) 2021-12-09
KR20210030478A (ko) 2021-03-17
KR102536652B1 (ko) 2023-05-26
US20200059692A1 (en) 2020-02-20
EP3837849A1 (en) 2021-06-23
US11317143B2 (en) 2022-04-26
WO2020036668A1 (en) 2020-02-20
TW202123718A (zh) 2021-06-16
TW202010314A (zh) 2020-03-01
EP3837849A4 (en) 2022-06-22
CN111316659B (zh) 2023-06-06
CN111316659A (zh) 2020-06-19
JP2023138511A (ja) 2023-10-02
JP7313445B2 (ja) 2023-07-24
TWI716018B (zh) 2021-01-11

Similar Documents

Publication Publication Date Title
TWI788744B (zh) 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束
TWI762117B (zh) 動態控制指紋辨識速率以促進媒體內容的時間準確性修訂
KR102486777B1 (ko) 프레임적으로 정확한 컨텐츠 수정을 용이하게 하기 위해, 낮은 레이트 핑거프린팅을 사용하는 보간을 기반으로 하는 시간 맵핑의 확립 및 사용
US11812103B2 (en) Dynamic playout of transition frames while transitioning between playout of media streams
US10638180B1 (en) Media timeline management
JP7181989B2 (ja) 新規コンテンツを取得する際の予想待ち時間に基づくコンテンツ修正の事前準備