TWI778330B - 基於傳輸流元資料對媒體內容動態加浮水印的方法、計算系統及非暫時電腦可讀介質 - Google Patents

基於傳輸流元資料對媒體內容動態加浮水印的方法、計算系統及非暫時電腦可讀介質 Download PDF

Info

Publication number
TWI778330B
TWI778330B TW109105761A TW109105761A TWI778330B TW I778330 B TWI778330 B TW I778330B TW 109105761 A TW109105761 A TW 109105761A TW 109105761 A TW109105761 A TW 109105761A TW I778330 B TWI778330 B TW I778330B
Authority
TW
Taiwan
Prior art keywords
media
content
metadata
stream
media stream
Prior art date
Application number
TW109105761A
Other languages
English (en)
Other versions
TW202038631A (zh
Inventor
沙尚克C 麥錢特
本傑明J 羅普克
約翰S 斯塔夫勞波洛斯
Original Assignee
美商尼爾森(美國)有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商尼爾森(美國)有限公司 filed Critical 美商尼爾森(美國)有限公司
Publication of TW202038631A publication Critical patent/TW202038631A/zh
Application granted granted Critical
Publication of TWI778330B publication Critical patent/TWI778330B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H04N21/4385Multiplex stream processing, e.g. multiplex stream decrypting
    • H04N21/43853Multiplex stream processing, e.g. multiplex stream decrypting involving multiplex stream decryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8545Content authoring for generating interactive applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content

Abstract

一種基於傳輸流元資料對媒體內容動態加浮水印以促進下游實體的動作的方法和系統。媒體分發路徑中的中間設備能夠接收傳輸流,該傳輸流攜帶媒體內容並且攜帶未在媒體內容中加浮水印的元資料。然後,中間設備能夠從傳輸流中獲取未在媒體內容中加浮水印的元資料,並且能夠至少藉由將表示所獲取的元資料的浮水印編碼到媒體內容中來修改媒體內容。然後,中間設備能夠至少將修改後的媒體內容輸出以向下游實體傳送。因此,下游實體能夠從媒體內容中的浮水印獲取元資料,並且能夠使用元資料來促進執行一個或更多個有用動作。

Description

基於傳輸流元資料對媒體內容動態加浮水印的方法、計算 系統及非暫時電腦可讀介質
[相關申請的交叉引用]
本申請要求2019年2月22日提交的美國臨時專利申請案第62/809,360號、2019年8月2日提交的美國臨時專利申請案第62/882,202號以及2020年2月6日提交的美國專利申請案第15/929,218號的優先權,所述專利申請案中的每一個藉由引用整體併入本文。
本發係關於一種基於傳輸流元資料對媒體動態加浮水印以促進下游實體的動作的方法和系統以及非暫時電腦可讀介質。
在典型的媒體分發系統中,音頻和/或視頻媒體內容的製作者或其他提供商將表示該媒體內容的數位媒體流發送到一個或更多個媒體分發點,並且每一個媒體分發點進而將媒體流發送到各種終端使用者媒體用戶端進行呈現。舉例來說,美國的國家電視(TV)廣播公司可以將表示視頻節目內容的數位電視廣播流提供給服務於全國各地的各個市場區域的各種多頻道視頻節目分發器(MVPD),例如有線電視或衛星電視前端,並且每一個MVPD可以進而將廣播流發送到MVPD市場區域中的各種終端使用者電視接收設備。
在這樣的媒體分發系統中,當媒體流被直接或間接地從一個實體向 另一個實體發送時,將元資料與媒體流一起傳送以供下游實體接收和使用該元資料可能是有用的。
例如,但不受限地,當國家電視廣播公司將廣播流傳遞到MVPD以藉由MVPD向各種終端使用者電視接收設備發送時,對於國家廣播公司而言可能有用的是將能夠促進MVPD的動作的某些元資料與廣播流一起傳送。作為另一個示例,當國家電視廣播公司和/或MVPD將媒體流直接或間接地向例如服務於終端使用者電視的機上盒或類似設備的客戶駐地接收器傳遞時,對於廣播公司或MVPD而言可能是有用的是在媒體流中包含能夠促進客戶駐地接收器的動作的某些元資料。
將元資料與從一個實體傳遞到另一實體的媒體流一起傳送能夠促進下游實體的各種類型的動作。
例如,但不受限地,媒體流中與即將到來的內容修改機會有關的元資料能夠促進下游實體對媒體流進行動態修訂。
舉例來說,用替換廣告或其他替換內容動態替換廣告或媒體流的其他片段可能是有用的,從而當向用戶播放媒體流時,用戶將收到代替了最初包含的內容的替換內容。這樣的修訂能夠有助於為特定的市場、消費者等訂製內容。此外,可以期望的是在媒體流內的特定時間點處執行這種內容修訂。例如,如果將要用替換廣告來替換現有廣告,則可以期望的是在現有廣告本該開始之時,將替換廣告定位在媒體流中的特定時間。
為了促進這一點,傳遞媒體流的實體能夠將與即將到來的內容修改機會有關的某些資訊與媒體流包含在一起,與即將到來的內容修改機會有關的這些資訊除其它可能性之外例如是指定即將到來的內容修改機會的時間的資訊和/或表徵要執行的內容修改的類型等的資訊。當下游實體與這樣的元資料一起接收媒體流時,下游實體能夠因此以元資料作為基礎來執行動態內容修訂,或引發其被執行。
作為另一個示例,標識諸如媒體流內的頻道、節目或廣告之類的媒體流的內容的元資料,可以促進下游實體的媒體消費(例如,收視率)報告。當諸如客戶駐地接收器或電視的下游實體接收到要處理和/或輸出以呈現給用戶的媒體流時,下游實體能夠與媒體流一起接收該元資料,並且基於由元資料指定的媒體標識能夠向資料管理伺服器(例如,收視率伺服器)報告媒體標識作為能夠促進目標廣告決策等的計量資料。
其他示例也能夠是可能的。
一種將元資料與媒體流一起傳送的方式是在攜帶媒體流的傳輸流中帶內包含元資料。即,傳輸流能夠分別攜帶(i)媒體流和(ii)元資料。
例如,如果媒體流作為有效載荷在傳輸資料包序列(例如,互聯網協定(IP)資料包等)內傳送,則元資料能夠在的一個或更多個傳輸資料包中的每一個的報頭內傳送。在接收到每一個這樣的傳輸資料包時,下游實體不僅能夠隨後接收表示媒體流的部分的有效載荷,而且還能夠從資料包報頭中接收元資料。可替代地,傳輸流中的一個或更多個特定資料包能夠在報頭或有效載荷部分中攜帶元資料。當下游實體接收提供媒體流的傳輸資料包序列時,下游實體能夠隨後從每一個特定資料包接收元資料。在任何一種情況下,下游實體都能夠隨後使用接收到的元資料作為基礎來執行有用的操作,例如針對媒體流的操作。
能夠用來攜帶元資料的示例傳輸流協定包括由諸如有線電視工程師協會(SCTE)和高級電視系統委員會(ATSC)的標準組織所定義的那些協定。
例如,SCTE已經創建了定義用於將數位內容的不同片段無縫地拼接到諸如廣播節目流的基於資料包的傳輸流中的方法的標準。這些標準規定在傳輸流中包括特定的SCTE觸發器,該觸發器指定媒體流中要發生拼接的時間點,並且規定在媒體分發路徑中使實體檢測到這種SCTE觸發器的存在並回應地在指示的時間點執行拼接。
更具體地,SCTE的數位節目插入(DPI)標準規定在基於資料包的傳輸流中包括特定的“拼接資訊”資料包,該拼接資訊資料包指定流中要發生拼接的時間點。此外,該標準規定,這樣的資料包能夠指定實體要從傳輸流拼接到其他內容的“出”時間點,或實體要從其他內容拼接回傳輸流的“入”時間點(或可替代地,定義內容替換應持續多長時間的插播持續時間)。拼接資訊資料包能夠以XML(完全解析地或作為二進位表示)的形式攜帶此資訊和其他資訊。
因此,為了能夠時間準確地替換由基於資料包的傳輸流攜帶的媒體流的片段,傳輸流的提供商能夠插入指定媒體片段起點處的出時間點的SCTE拼接資訊資料包,並且能夠插入指定媒體片段結尾處的入時間點的拼接資訊資料包。然後,媒體分發路徑中的下游實體能夠檢測到這些拼接資訊資料包的存在,並且能夠回應地從出點開始在入點結束拼接入替換內容。
在該過程的表示性實現方式中,國家廣播公司能夠提供基於資料包的傳輸流,其攜帶包括核心節目內容的媒體流,並且還包括定義國家廣告的商業廣告插播。此外,根據與MVPD達成的協議,國家廣播公司能夠允許每一個MVPD用專用於MVPD市場區域的本地廣告替換所包含的國家廣告。為促進這一點,國家廣播公司能夠在傳輸流中插入一個或更多個拼接資訊資料包,所述一個或更多個拼接資訊資料包指定本地廣告替換何時開始和結束。
因此,當接收到國家傳輸流回饋時,MVPD能夠檢測並讀取拼接資訊資料包,從而能夠確定媒體流中何時MVPD要插入替換本地廣告的特定時間。然後,在確定的時間,MVPD能夠將替換的本地廣告拼接到媒體流中,以產生修改後的媒體流。並且MVPD能夠將修改後的媒體流發送到一個或更多個終端使用者電視接收設備以進行播放。
ATSC還開發了一個或更多個標準,所述一個或更多個標準能夠在攜帶媒體流的傳輸流內帶內將元資料從一個實體傳送到另一個實體。這種標準的最新示例是ATSC 3.0。
儘管在還攜帶媒體流的傳輸流內帶內傳送元資料的過程在實踐中能夠很好的工作,但是該過程可能會有一些缺點。
該過程的一個技術問題是,當媒體流位於前往下游實體的途中時,傳輸流中攜帶的元資料可以被丟棄,或者不與媒體流一起被傳送到下游實體。這能夠以多種方式發生。
舉例來說,當媒體流沿媒體分發路徑(例如,從一個實體到另一實體)通信時,媒體分發路徑內的實體可以接收攜帶媒體流和元資料兩者的傳輸流,並且該實體可以從傳輸流中提取媒體流,並將媒體流轉發到下游實體(例如,媒體分發路徑中的下一個或者之後的實體),而無需還將元資料轉發到下游實體。
例如,機上盒或其他客戶駐地接收器可以從MVPD或其他實體接收傳輸流,該傳輸流攜帶表示內容頻道的媒體流並且還攜帶元資料。當接收器接收到該傳輸流時,接收器可以從傳輸流中提取媒體流(例如,對媒體流進行解包),並藉由HDMI或另一介面將提取的媒體流輸出到電視以進行呈現。但是在此過程中,接收器可以不將還包含在傳輸流中的元資料轉發給電視。因此,電視可能沒有接收到包含在傳輸流中的元資料,並且因此可能無法基於該元資料執行有用的動作。
該示例問題能夠在動態內容修改方面發生。儘管在將拼接資訊在攜帶國家廣播的傳輸流內帶內傳送到MVPD,使MVPD在將媒體流分發到各客戶駐地設備之前能夠對媒體流進行時間精確的內容修訂,也可以期望允許終端使用者電視進行動態內容修改。允許終端使用者電視進行諸如動態廣告插入的動態內容修改可以允許專門針對終端使用者的興趣、人口統計等訂製內容修改。但是,如果用戶的機上盒對媒體流進行解包並僅將解包的媒體流傳遞至電視進行播放,則電視可能沒有接收到傳輸流中攜帶的元資料,並且因此可能無法使用該元資料作為基礎來執行動態內容修改。
作為另一個示例,媒體分發路徑內的實體可以接收攜帶媒體流和元 資料的傳輸流,並且可以在沿媒體分發路徑轉發傳輸流之前從傳輸流中剝離元資料,從而接收媒體流的下游實體將同樣不會接收由傳輸流攜帶的元資料。
例如,根據SCTE標準的行業實踐建議媒體分發器在將傳輸流傳遞至終端使用者用戶端之前應從傳輸流中剝離任何拼接資訊資料包,以便防止未經授權的“商業廣告殺手”等。特別地,業界關注的是,未經授權的一方能夠檢測到拼接資訊資料包的存在,並且可能不期望地移除(例如,跳過)或替換媒體流中所包含的廣告。儘管能夠藉由加擾和/或加密來保護拼接資訊資料包,但是仍可以在傳輸流內單獨發送資料包,並且存在未經授權的情況下就能夠檢測和使用資料包的風險。因此,在前往終端使用者媒體用戶端途中的傳輸流中維護拼接資訊資料包可能是不可行的或不實際的,因此,再一次的,終端使用者媒體用戶端可能無法使用拼接資訊的元資料作為基礎以執行動態內容修改。
考慮到該技術問題,隨後所討論的是如何將前往下游實體途中的攜帶媒體流的傳輸流帶內包含的元資料傳送到下游實體。
本發明揭露了一種有助於解決該問題的機制。
根據本發明,媒體分發路徑中的中間設備能夠接收攜帶媒體流和元資料兩者的傳輸流,並且中間設備能夠從傳輸流中讀取元資料,然後將明確地或藉由參考表達元資料的浮水印(例如,一個或更多個浮水印)編碼到媒體流中。當下游實體接收到媒體流時,下游實體能夠方便地從媒體流中解碼浮水印以獲取元資料,並且下游實體能夠使用元資料作為基礎來執行有用的動作。
藉由閱讀以下詳細描述並在適當之處參考圖式,這些以及其他方面、優點和替代方案將對於本領域普通技術人員來說變得顯而易見。此外,應當理解的是,在該發明內容及以下部分中提供的描述旨在僅以示例的方式而非限制性的方式來說明本發明。
100:媒體內容源
102:媒體內容分發器
104:接收器
106:內容呈現設備
200:內容源
202:中間設備
204:下游實體
206:(代碼映射)伺服器
208:內容伺服器
210:(ACR)伺服器
212:資料管理伺服器
214:計量設備
300~306:框
400:通信接口
402:處理單元
404:資料記憶體
406:網路或其他連接機制
408:程式指令
500:內容輸入接口
502:內容呈現介面
504:網路通信接口
506:處理單元
508:資料記憶體
510:網路或其他連接機制
512:程式指令
圖1是其中能夠應用各種揭露的原理的示例系統的簡化框圖。
圖2是其中能夠應用各種揭露的原理的示例系統的另一簡化框圖。
圖3是描繪根據本發明能夠執行的方法的流程圖。
圖4是能夠根據本發明進行操作的示例計算系統的簡化框圖。
圖5是能夠根據本發明進行操作的示例內容呈現設備的簡化框圖。
參照圖式,如上所述,圖1是其中能夠應用各種揭露的原理的示例系統的簡化框圖。然而,將理解,本文描述的這種以及其他佈置和過程能夠採取各種其他形式。例如,元件和操作能夠被重新排序、分佈、複製、組合、省略、添加或修改。此外,將理解,本文描述為由一個或更多個實體執行的功能能夠由這些實體和/或代表這些實體藉由硬體、固件和/或軟體來實現,例如藉由執行程式指令的一個或更多個處理單元等。
如圖1所示,示例系統包括:一個或更多個媒體內容源100(例如,廣播公司、Web伺服器等),一個或更多個媒體內容分發器102(例如,諸如有線電視提供商、衛星提供商、空中廣播提供商、網路聚合器之類的MVPD),一個或更多個媒體內容接收器104(例如,有線電視接收器、衛星接收器、空中廣播接收器、電腦或其他流媒體接收器等),以及一個或更多個用戶端或內容呈現設備106(例如,電視或其他顯示裝置、揚聲器或其他音頻輸出設備等)。
在示例實現方式中,媒體內容源100能夠是諸如ABC、NBC、CBS、FOX、HBO和CNN之類的國家廣播公司,媒體內容分發器102能夠是在指定市場區域(DMA)中的本地子公司和/或其他本地內容分發器,然後接收器104和內容呈現設備18能夠位於諸如房屋或商業場所之類的客戶駐地處。利用這種或其他佈置,內容源100能夠將媒體內容傳遞到內容分發器102以分發給客戶駐地處的接收器104,並且內容分發器能夠在離散的頻道(例如,特定頻率或其他定義的頻道)上將媒體內容分發給接收器104。然後,每一個接收器能夠藉由調諧到所選頻道並將到達所選頻道的媒體內容輸出到內容呈現設備106的方式來回應使用者輸 入或一個或更多個其他觸發。並且內容呈現設備106能夠接收和呈現媒體內容(例如,顯示或以其他方式呈現內容)。
利用該示例佈置,所討論的媒體分發路徑能夠從代表性媒體內容源100延伸到例如代表性接收器104或內容呈現設備106的下游實體。並且諸如MVPD的媒體內容分發器102能夠是中間設備,該中間設備接收攜帶媒體流和元資料的傳輸流、並且從傳輸流中讀取元資料並將元資料編碼在媒體流中的浮水印中以供下游實體接收、解碼和使用。其他示例媒體分發路徑、下游實體和中間設備同樣是可能的。
圖2還示出了其中能夠實現當前揭露的特徵的示例系統。
圖2在其頂部示出了示例媒體分佈路徑,其經由中間設備202從內容源200延伸到下游實體204。例如,但不受限地,內容源200能夠是例如上述那些之一的國家廣播公司,中間設備202能夠是例如國家廣播公司的本地子公司的MVPD,並且下游實體204能夠是例如電視等的內容呈現設備或例如機上盒等的接收器等。
利用這種佈置,示例媒體流在媒體分發路徑上從內容源200流到中間設備202,然後從中間設備202流到下游實體204。不受限地,該媒體流能夠包括並因此定義了例如視頻內容和/或音頻內容的媒體內容的數位幀序列,還可能表示內容的頻道。內容源200能夠藉由將傳輸流資料包的有效載荷中的媒體流的片段傳送到中間設備202,從而在基於資料包的傳輸流中將該媒體流傳送到中間設備202。然後,中間設備202可能同樣在基於資料包的傳輸流中或可能以剝離和/或轉碼的方式最終(出於當前目的)將媒體流轉發到下游實體。
如圖2所示,內容源200將媒體流與未在媒體內容中加浮水印的元資料一起傳送到中間設備202。如上所述,例如,如果內容源200在基於資料包的傳輸流中將媒體流傳送到中間設備202,則內容源能夠藉由除其它可能性之外將元資料分別在傳輸流的一個或更多個資料包中的每一個的報頭中傳送或能夠將 元資料作為傳輸流的一個或更多個特定資料包的有效載荷來傳送的方式將媒體流與未加浮水印的元資料一起傳送。
此外,如圖所示,中間設備202然後將利用元資料加浮水印的媒體流傳送到下游實體204。如上所述,例如,中間設備202能夠從該中間設備202從內容源200所接收的傳輸流中讀取元資料,然後中間設備202能夠將元資料的表示隱寫地編碼為媒體流自身中的一個或更多個浮水印。然後,中間設備202能夠輸出具有元資料的這樣加浮水印的媒體流,然後,加浮水印的媒體流能夠直接或間接地流向下游實體204。然後,下游實體204能夠從媒體中檢測和解碼浮水印以獲取元資料,並能夠使用元資料作為基礎來執行更多有用的動作。
如本領域中已知的,加浮水印涉及將資訊永久地嵌入或編碼到媒體內容中,使得媒體內容的接收器能夠從媒體內容中解碼和提取資訊。將資訊加浮水印到媒體內容中與將資訊與媒體內容一起攜帶(例如攜帶在傳輸流報頭中或其他資料包中)不同,在將資訊與媒體內容一起攜帶的方式中,資訊不編碼在媒體內容自身中。加浮水印永久地更改媒體內容,並且可能無法移除。
將資訊加浮水印到媒體內容中能夠涉及將資訊的資料表示編碼到媒體內容中,可能直接編碼資訊本身,或者編碼能夠映射到所述資訊的代碼。在示例實現方式中,浮水印能夠是大約24比特的,並且加浮水印能夠在媒體內容的音頻分量和/或媒體內容的視頻分量中完成。
現有的音頻加浮水印技術包括但不限於將音頻能量插入音頻信號或以其他方式調整音頻信號的一個或更多個特性,使得音頻信號能夠藉由適當配置的浮水印檢測演算法檢測到,但在聽覺上被遮罩(例如,足以掩蓋浮水印以免被人檢測到的音頻特性和/或編碼),也稱為隱寫編碼或心理聲學編碼。
音頻浮水印技術和相應的浮水印檢測技術的示例在美國專利第8,359,205號(於2013年1月22日發佈的題為“Methods and Apparatus to Perform Audio Watermarking and Watermark Detection and Extraction”)、美國專利第 8,369,972號(於2013年2月5日發佈的題為“Methods and Apparatus to Perform Audio Watermarking Detection and Extraction”)、美國專利第2010/0223062號(於2010年9月2日發佈的題為“Methods and Apparatus to Perform Audio Watermarking and Watermark Detection and Extraction”)、美國專利第6,871,180號(於2005年3月22日發佈的題為“Decoding of Information in Audio Signals”)、美國專利第5,764,763號(於1998年6月9日發佈的題為“Apparatus and Methods for Including Codes in Audio Signals and Decoding”)、美國專利第5,574,962號(於1996年11月12日發佈的題為“Method and Apparatus for Automatically Identifying a Program Including a Sound Signal”)、美國專利第5,581,800號(於1996年12月3日發佈的題為“Method and Apparatus for Automatically Identifying a Program Including a Sound Signal”)、美國專利第5,787,334號(於1998年7月28日發佈的題為“Method and Apparatus for Automatically Identifying a Program Including a Sound Signal”)以及美國專利第5,450,490號(於1995年9月12日發佈的題為“Apparatus and Methods for Including Codes in Audio Signals and Decoding”)中有所描述,上述專利全部藉由引用整體併入本文。
另一方面,現有的視頻加浮水印技術涉及在媒體內容的視頻分量中嵌入代碼或其他資料表示,使得媒體內容的視頻分量能夠藉由適當配置的浮水印檢測演算法檢測到,但被人類視覺檢測遮罩。
視頻加浮水印技術的示例包括:各種空間域技術,例如翻轉像素、將浮水印嵌入到最低有效位中和將偽隨機雜訊模式添加到視頻;以及各種頻域技術,例如SVD域加浮水印、離散傅立葉變換加浮水印、離散餘弦變換加浮水印、離散小波變換加浮水印和主成分分析加浮水印。其他示例也是可能的。
如上所述,當前揭露的機制能夠促進向下游實體傳送與動態內容修訂有關的各種資訊,諸如與下游實體針對所傳送的媒體流應執行的動態內容修訂的時間和/或類型有關的資訊。
舉例來說,所揭露的機制能夠促進傳送拼接資訊,以使下游實體能夠在媒體流中執行動態廣告插入。
例如,作為中間設備202的MVPD能夠從作為內容源200的國家電視廣播公司接收傳輸流,該傳輸流攜帶媒體流,所述媒體流表示包括電視節目內容(例如,各種電視節目)和一個或更多個商業廣告插播(例如,定義商業廣告序列的廣告播客)的電視頻道,並且傳輸流能夠包括一個或更多個SCTE拼接資訊資料包,所述一個或更多個SCTE拼接資訊資料包攜帶諸如指定作為商業廣告插播開始或商業廣告插播內的特定商業廣告開始的拼接點的拼接資訊拼接資訊。
當MVPD從內容提供者接收到傳輸流時,MVPD可能基於指示其為拼接資訊資料包的報頭資訊和/或基於一個或更多個其他標記,能夠監視並檢測拼接資訊資料包的存在拼接資訊。然後,MVPD能夠讀取拼接資訊資料包的XML內容,以確定並因此從資料包中提取或以其他方式獲取拼接資訊,例如有關指定的即將到來的拼接點的資訊以及可能的其他這種元資料。
回應於檢測到攜帶例如指定拼接點的拼接資訊的拼接資訊資料包,並且在從資料包中獲取拼接資訊後,MVPD隨後能夠將表示所獲取的拼接資訊的浮水印編碼到媒體流中,以便下游實體204能夠從浮水印中獲取拼接資訊,並且能夠使用該拼接資訊作為基礎來執行動態廣告插入。此外,根據行業慣例,如果MVPD將傳輸流轉發到下游實體204,則MVPD也能夠在轉發傳輸流之前從傳輸流中回應地剝離拼接資訊資料包,從而下游實體204將不接收拼接資訊資料包。
在該示例過程中,接收攜帶了前往下游實體204途中的媒體流並且包括了指定拼接點和/或其他拼接相關資訊的帶內拼接資訊資料包的傳輸流的MVPD或其他中間設備202拼接資訊能夠從資料包中讀取拼接相關的資訊,並因此能夠確定相關聯的拼接點的一個或更多個特性。考慮到例如SCTE拼接資訊資料包,中間設備202能夠讀取資料包以確定同樣由傳輸流攜帶的媒體流中發生拼 接的特定時間點,其中時間點是即時的(意味著拼接應該在最接近的可能時間發生)或表示為時間偏移值,例如從拼接資訊資料包的時間開始的90kHz時鐘的時鐘節拍數量。此外,中間設備202能夠如上所述讀取資料包以確定拼接點的類型,例如拼接點是拼接入點還是拼接出點。
在已從資料包中讀取該帶內拼接資訊元資料後,中間設備202隨後能夠將浮水印編碼到媒體流的媒體內容中,該浮水印將由下游實體204解釋以啟用(例如,引發)下游實體根據拼接資訊來執行內容修訂。
例如,中間設備202在下游實體204應該執行內容修訂時可以將時間的二進位表示明確編碼到媒體流的媒體內容中並且可能除其它可能性之外進一步指示內容修訂的類型,例如拼接出或拼接入。可替代地,中間設備能夠將二進位碼編碼到流的媒體內容中,該二進位碼藉由參考來指定該拼接資訊。例如,中間設備202可以在網路服務器(例如,代碼映射伺服器)206處記錄二進位碼與拼接資訊之間的映射,以便當下游實體204從媒體流中提取加浮水印的二進位碼時,下游實體204隨後能夠查詢伺服器206,以基於所提取的二進位碼來確定拼接資訊。
關於內容修訂的時間點,如果傳輸流中的帶內拼接資訊藉由指定與拼接資訊定位在傳輸流中的時間的時間偏移來指定拼接點的時間(例如,與由傳輸流攜帶的媒體流中的時間點相關),則中間設備202能夠在浮水印中明確地或藉由參考將該時間偏移編碼,假設中間設備202將浮水印定位在媒體流中的由傳輸流中的拼接資訊所指定的同一時間點。
例如,中間設備202能夠在浮水印中編碼實際偏移值,或者中間設備202能夠在浮水印中編碼一值,下游實體204如上所述藉由查詢伺服器206或者藉由使用下游實體204處設置的或者媒體流或傳輸流中提供的映射表或其他映射資料(如果適用)將所述值映射到實際偏移值。例如,藉由二進位浮水印,中間設備202能夠使用二進位值對偏移進行編碼,例如,具有除其它可能性之外的對 應於2秒偏移的值00、對應於3秒偏移的值01以及對應於4秒偏移的值10。因此,在解碼浮水印並讀取該值時,下游實體204能夠在根據浮水印確定的時間偏移處執行內容修訂。
可替代地,基於中間設備202從傳輸資料包讀取的帶內拼接資訊所指示的時間點,中間設備能夠計算媒體流中應該發生內容修訂的絕對時間,並且中間設備隨後能夠在媒體流中的浮水印中對計算出的絕對時間進行編碼。
這裡,絕對時間能夠是媒體流的時間線內的時間點。如果媒體流定義了以下游實體204可理解的方式對幀序列加上時間戳或以其他方式編號,下游實體將讀取浮水印並採取行動,所述時間點能夠是幀號。
可替代地,如果媒體流以另一種方式定義時間線,則時間點能夠是該時間線內的時間。舉例來說,如果中間設備202在媒體流內的特定時間點對浮水印進行編碼,則中間設備202能夠在浮水印中包括該特定時間點的時間戳,該時間戳根據媒體流內的時間線或根據中間設備的時鐘所生成。以這樣的方式,當下游實體204解碼浮水印並讀取時間戳時,下游實體204能夠建立時間映射(即,同步時鐘),例如根據下游實體自己的時鐘的當前時間與由浮水印指示的時間之間的時間偏移。此外,中間設備202能夠在將由下游實體204接收的所述浮水印中或者單獨的浮水印或其他消息中包括內容修訂應發生的絕對時間的指示,其中所指示的絕對時間也是根據於中間設備的時鐘。並且,在接收到該絕對時間值時,下游實體204能夠隨後應用其建立的時間映射,將指示的絕對時間轉換為根據下游實體自己的時鐘的時間值,從而使下游實體204能夠隨後基於下游實體的時鐘在正確的時間點執行指示的內容修訂。
在任一種情況下,中間設備202能夠在浮水印中編碼絕對時間的實際值,或者中間設備202能夠在浮水印中編碼一值,下游實體204能夠藉由查詢伺服器206和/或藉由使用下游實體處設置的或者媒體流中或與媒體流一起提供的映射資料將所述值映射到絕對時間。因此,在解碼浮水印並讀取該值時,下 游實體204能夠在所指示的絕對時間執行內容修訂。
關於內容修訂的類型,如果傳輸流中的帶內元資料明確地或藉由參考指示了針對媒體流應用的內容修訂的類型,則中間設備202能夠在浮水印中明確地或藉由參考編碼內容修訂的同一類型。例如,如果帶內元資料指示了內容修訂將為拼接出(從媒體流切換到其他內容),則中間設備202能夠隨後在浮水印中編碼內容修訂為拼接出的指示。反之,如果帶內元資料指示了內容修訂將為拼接入(從其他內容切換回媒體流),則中間設備202隨後能夠在浮水印中編碼內容修訂為拼接入的指示。例如,藉由二進位浮水印,中間設備能夠藉由單個比特來指定這一點,例如,用值“1”指示拼接出事件,用值“0”指示拼接入事件。因此,在解碼浮水印並讀取該值時,下游實體204能夠執行所指示的內容修訂的類型。
還要注意,中間設備202能夠在浮水印中編碼與下游實體204將要執行的內容修訂有關的附加或其他資訊,可能類似地使用一代碼,下游實體204能夠使用下游實體204處配置的或媒體流中提供的伺服器查詢和/或映射資料將所述代碼映射到特定動作或內容修訂特性。舉例來說,中間設備202能夠在浮水印中編碼下游實體204在指定時間點拼接到媒體流中的其他內容的或其它內容相關的指示。
例如,中間設備202能夠在浮水印中編碼一代碼,所述代碼指示下游實體204向內容伺服器208請求諸如來自廣告伺服器的替換廣告的替換內容。此外,所述代碼能夠例如藉由映射到特定內容伺服器的統一資源定位符(URL)來映射到特定內容伺服器208,並且可能進一步映射到下游實體204要向內容伺服器208請求的特定的替換內容。在解碼浮水印並讀取該代碼時,下游實體204能夠因此向內容伺服器208發送對替換內容的請求,並且能夠接收所回應的替換內容,然後在指示的時間點將該替換內容拼接到媒體流中。
可替代地,中間設備202能夠在浮水印中編碼一代碼,所述代碼指 示下游實體204從下游實體處的本地儲存區中選擇諸如各種預先緩存的替換廣告之一的替換內容,並且所述代碼還能夠進一步映射到下游實體204要從本地儲存區中檢索的特定替換內容。因此,在解碼浮水印並讀取該代碼時,下游實體204能夠從其本地儲存區中檢索替換內容,並且能夠在指示的時間點將替換內容拼接到媒體流中。
此外,如果帶內元資料指示拼接出點並指定將在指定的時間點開始的內容修訂的持續時間,例如將要發生動態廣告替換的商業廣告插播的持續時間,則中間設備202能夠在浮水印中對該持續時間進行編碼。例如,藉由二進位浮水印,中間設備202能夠使用多個比特以秒為單位來指定持續時間。或者,中間設備202能夠將持續時間編碼為二進位值,下游實體204能夠使用映射資料將所述二進位值映射到持續時間。例如,值00能夠對應15秒、值01能夠對應30秒、值10能夠對應60秒,依此類推。因此,在解碼浮水印並讀取該值時,下游實體204能夠在指示的持續時間內執行內容修訂。
此外,中間設備202編碼到媒體內容中的浮水印能夠包括一代碼,下游實體204將所述代碼解釋為用於進行內容修訂的觸發,並且中間設備202能夠使用到下游實體204的另一種消息傳遞形式來為下游實體204提供所指示的內容修訂的時間點、持續時間和/或其他特性。例如,中間設備202能夠在浮水印中編碼一值,下游實體204將所述值解釋為意味著應該發生內容修訂,並且中間設備202能夠在浮水印中編碼參考代碼,所述參考代碼將映射到內容修訂特性資料。並且中間設備202能夠單獨地向下游實體發送消息(例如,藉由帶外IP消息傳遞),該消息將所述參考代碼與一個或更多個內容修訂特性相關聯。因此,在解碼浮水印並讀取所述參考代碼時,下游實體204能夠將所述參考代碼映射到所指示的內容修訂特性,並且能夠相應地執行內容修訂。
此外,作為另一種實現方式,中間設備202編碼到媒體內容中的浮水印能夠包括一代碼,下游實體204將所述代碼解釋為在媒體流中下一個適當的 進行內容修訂的觸發,例如,下一個適當的內容修訂機會處。
例如,對於視頻內容(例如,純視頻流或也包括音頻分量的媒體流的視頻分量),所述代碼能夠指示下游實體204在媒體流轉換為一個或更多個黑幀(可能表示節目內容可以轉換為商業廣告插播的點或一個商業廣告可以轉換為另一商業廣告的點)的下一個實例處進行內容修訂。在解碼浮水印並讀取該代碼時,下游實體204能夠隨後回應地監視視頻流以檢測何時出現黑幀,並且一旦檢測到黑幀,就能夠回應地執行內容修訂。
下游實體204檢測黑幀的存在的一種方式是進行指紋分析和自動內容識別(ACR)。例如,回應於檢測到浮水印,下游實體204能夠開始以下過程:生成視頻流各幀中的每一個幀的數字指紋,並且將所生成的數位指紋發送至自動內容識別(ACR)伺服器210以進行分析或自行分析指紋。藉由指紋分析,視頻流的各個幀能夠被視為黑幀。可替代地,下游實體204能夠以另一種方式檢測黑幀的存在。在任何事件下,一旦因此檢測到黑幀的存在,則下游實體204能夠回應地執行內容修訂。
同樣,對於音頻內容(例如,純音頻流或也包括視頻分量的媒體流的音頻分量),該代碼能夠指示下游實體204在媒體流轉換為閾值長靜默持續時間(可能類似地表示節目內容可以轉換為商業廣告插播的點或一個商業廣告可以轉換為另一商業廣告的點)的下一個實例處進行內容修訂。在解碼浮水印並讀取該代碼時,下游實體204能夠隨後回應地監視音頻流以檢測何時出現閾值長靜默持續時間,並且一旦檢測到靜默持續時間,就能夠回應地執行內容修訂。
在非限制性示例實現方式中,如上所述,下游實體204能夠是機上盒,該機上盒操作為接收傳輸流並向電視或其他這種內容呈現設備發送流的媒體內容(例如,藉由HDMI或另一連接機制),並且可能儲存媒體內容以供以後輸出。這樣的機上盒能夠預配置有如上所述的映射資料並且配置有替換廣告內容或從網路服務器等獲取替換廣告內容的能力。因此,當機上盒接收到傳輸流並 解碼由中間設備202插入的浮水印時,機上盒能夠適當地解釋浮水印並且能夠藉由執行動態廣告插入來做出回應。
替代地,下游實體204能夠是電視或其他內容呈現設備,其可以藉由接收傳輸流或藉由從機上盒或其他實體接收媒體內容來接收媒體流的媒體內容,並且可以向使用者呈現媒體內容。這樣的內容呈現設備同樣能夠預先配置有如上所述的映射資料並且配置有替換廣告內容或從網路服務器等獲取替換廣告內容的能力。因此,當內容呈現設備接收到媒體內容並解碼浮水印時,內容呈現設備能夠適當地解釋浮水印並藉由執行期望的動態廣告插入來做出回應。
此外,能夠分別對各個下游實體中的每一個執行該過程,從而在不將SCTE拼接資訊資料包傳遞到每一個下游實體的情況下提供更具針對性的動態廣告插入在技術上是可行的。例如,一個家庭中的下游電視接收器可以從MVPD接收攜帶帶有由MVPD添加的浮水印的媒體流的傳輸流,並且接收器可以回應地將基於該家庭的人口統計或偏好而選擇的廣告拼接到媒體流中,而另一個家庭中的下游電視接收器可以從MVPD接收攜帶帶有相同的添加浮水印的相同的媒體流的相同傳輸流,並且可以回應地將基於該另一個家庭的人口統計或偏好而選擇的廣告拼接到基礎媒體流中。
作為另一非限制性示例,當前揭露的機制能夠用於促進媒體消費報告。
這裡,例如,與媒體流一起流入中間設備202的但未在媒體流中加浮水印的元資料能夠包括標識媒體流內容的資訊,例如,標識由媒體流表示的頻道、節目或廣告。例如,這能夠是唯一標識廣告的廣告ID或唯一標識頻道的源ID。並且,如果所述資訊標識了媒體流的特定部分,例如媒體流中包括的特定廣告,則能夠與媒體流的該部分同時提供所述資訊,例如提供在攜帶媒體流該部分的至少一個片段的傳輸資料包中。
與以上討論一致,中間設備202能夠讀取該帶內元資料,然後能夠 將明確地或藉由參考指定識別資訊的浮水印隱寫地編碼到媒體流本身中,以使下游實體204能夠將標識資訊用於媒體消費報告。此外,如果與媒體流的特定部分同時提供識別資訊,則中間設備202能夠將浮水印嵌入到媒體流中的相同部分處或相同部分附近,以便將加浮水印的識別資訊與該部分相關聯。
當下游實體204(例如,客戶駐地接收器或電視)接收到要被處理和/或輸出以呈現給用戶的媒體流時,下游實體204因此能夠檢測並解碼該浮水印並由此獲取識別資訊。並且下游實體204能夠使用獲取的標識資訊來執行媒體消費報告。例如,回應於檢測到並獲取加浮水印的標識資訊進行,下游實體能夠將標識資訊作為計量資料包告給資料管理伺服器212,所述計量資料能夠說明促進針對目標廣告等目的的媒體消費的追蹤。
可替代地,與示例下游實體204進行媒體通信的計量設備214能夠操作為檢測媒體流中的加浮水印的標識資訊,並將標識資訊報告給資料管理伺服器212。例如,如果下游實體204是電視或其他內容呈現設備,該內容呈現設備附近的計量設備214能夠監視由內容呈現設備正播出的媒體內容,並且能夠在該媒體內容中檢測到編碼標識資訊的浮水印的存在。然後,計量設備214能夠回應地將檢測到的標識資訊報告給資料管理伺服器212。
圖3是描繪根據本發明能夠執行的方法的流程圖。
如圖3所示,在框300處,該方法包括將攜帶媒體內容並攜帶未在媒體內容中加浮水印的元資料的傳輸流接收到計算系統中。然後在框302處,該方法包括計算系統從傳輸流獲取未在媒體內容中加浮水印的元資料。並且在框304處,該方法包括計算系統至少藉由將表示所獲取的元資料的浮水印編碼到媒體內容中來修改媒體內容。然後在框306處,該方法包括至少將修改後的媒體內容從計算系統輸出以向下游實體發送。
與以上討論一致,該方法中的傳輸流能夠將媒體內容攜帶在資料包序列中,並且能夠將元資料攜帶在資料包中的至少一個的報頭部分中。可替代 地或附加地,該資料包序列能夠包括攜帶媒體內容的資料包,並且還能夠包括攜帶元資料的至少一個資料包,例如,在資料包的有效載荷部分中攜帶所述元資料。
此外,如上所述,元資料能夠包括針對媒體內容中拼接點的拼接資訊。例如,媒體內容能夠是定義媒體流的內容序列,並且元資料能夠包括指示何時應當在媒體流中執行諸如動態廣告插入之類的動態內容修訂的定時資訊。
此外,如上所述,元資料能夠包括除其他可能性之外的以下資訊:(i)針對媒體內容應執行的動態內容修訂的持續時間,(ii)可被下游實體使用以建立同步時鐘的時間戳,(iii)應用於媒體內容的內容修訂的類型的指示,(iv)用於獲取替換內容以替換媒體內容的部分的資訊,(v)用於下游實體進行媒體內容的修訂的觸發,和/或(vi)用於促進媒體消費報告的媒體內容標識資訊。
接下來,圖4是能夠根據本發明進行操作的計算系統的簡化框圖。例如該計算系統能夠表示除其他可能性之外的上述中間設備202。
如圖4所示,該計算系統包括一個或更多個通信接口400、處理單元402和非暫時資料記憶體404,它們中的任何一些或全部能夠集成在一起,或者如圖所示藉由系統匯流排、網路或其他連接機制406可通信地連結在一起。
一個或更多個通信接口400能夠包括一個或更多個網路連接機制以促進如上所述的通信,從而促進與未在媒體內容中加浮水印的元資料一起接收媒體流,並促進輸出利用元資料加浮水印的媒體流。每一個這樣的網路通信接口能夠包括無線或有線乙太網介面或其他類型的網路介面,用於進行IP通信和/或其他類型的網路通信。
處理單元402能夠包括一個或更多個通用處理器(例如,微處理器)和/或一個或更多個專用處理器(例如,專用積體電路)。並且非暫時資料記憶體404能夠包括一個或更多個易失性和/或非易失性記憶體組件,例如光記憶體、磁記憶體或快閃記憶體。
如圖所示,示例計算系統的資料記憶體404儲存程式指令408。這些程式指令能夠由處理單元402執行,以執行(例如,引發計算系統來執行)本文所述的各種操作,例如(i)從傳輸流中讀取由傳輸流攜帶的並且未在媒體流中加浮水印的元資料,(ii)回應於從傳輸流中讀取元資料,藉由至少將可由下游實體解釋的浮水印編碼到媒體流中來修改媒體流以傳送元資料,從而生成媒體流的修改後的版本,以及(iii)將媒體流的修改後的版本輸出以沿媒體分發路徑向下游實體發送。
上文討論的各種特徵也能夠在這種情況下實現,反之亦然。
最後,圖5是示例內容呈現設備的簡化框圖,該示例內容呈現設備可根據本發明作為下游實體204的非限制性示例進行操作。該內容呈現設備能夠採取各種形式。例如,內容呈現設備能夠是電視機、電腦顯示器或操作為接收和呈現視頻內容的其他設備,和/或能夠是揚聲器、耳機對或操作為接收和呈現音頻內容的其他設備。許多其他示例也是可能的。
如圖5所示,示例內容呈現設備包括內容輸入接口500、內容呈現介面502、網路通信接口504、處理單元506和非暫時資料記憶體508,其中的任何一些或全部能夠集成在一起,或如圖所示藉由系統匯流排、網路或其他連接機制510通信地連結在一起。
內容輸入接口500能夠包括物理通信接口,所述物理通信接口用於接收要由內容呈現設備呈現的諸如媒體流的媒體內容。這樣,媒體輸入介面能夠包括一個或更多個有線和/或無線介面,所述一個或更多個有線和/或無線介面用於以類比或數位形式建立與接收器或其他設備或系統的通信並從所述接收器或其他設備或系統接收類比或數位形式的媒體內容。例如,媒體輸入介面能夠包括與諸如眾多協議中的DVI、HDMI、VGA、USB、BLUETOOTH、WIFI匹配的一個或更多個介面,和/或用於更直接地從內容分發器等接收內容的調諧器和/或接收器。
然後,內容呈現介面502能夠包括一個或更多個組件,以促進呈現接收到的媒體內容。舉例來說,內容呈現介面502能夠包括諸如顯示器屏和/或揚聲器的使用者介面,以及用於處理接收到的媒體內容以促進內容在使用者介面上的呈現的一個或更多個驅動器或其他組件。
網路通信接口504能夠包括網路連接機制以促進網路上的通信,和/或用於與一個或更多個其他本地或遠端實體進行直接的或聯網的通信。這樣,網路通信接口能夠包括用於進行IP通信和/或其他類型的網路通信的無線網路介面或有線乙太網介面或其他類型的網路介面。
然後,處理單元506能夠包括一個或更多個通用處理器(例如,微處理器)和/或一個或更多個專用處理器(例如,專用積體電路)。並且非暫時資料記憶體508能夠包括一個或更多個易失性和/或非易失性記憶體組件,諸如光記憶體、磁記憶體或快閃記憶體。此外,資料記憶體508儲存程式指令512,能夠由處理單元506執行該程式指令,以執行(例如,引發內容呈現設備執行)本文描述的各種操作。
上述各種特徵也能夠在這種情況下應用,反之亦然。
此外,本發明還考慮了至少一種非暫時電腦可讀介質,該非暫時電腦可讀介質利用可由至少一個處理單元執行的程式指令編碼或包含可由至少一個處理單元執行的程式指令,以執行本文所述的各種操作。
上面已經描述了示例性實施例。然而,本領域技術人員將理解,可以在不脫離本發明的真實範圍和精神的情況下對這些實施例進行改變和修改。例如,上面討論的原理也能夠適用於促進其他類型的元資料的傳送。其他示例也是可能的。
100:媒體內容源
102:媒體內容分發器
104:接收器
106:內容呈現設備

Claims (20)

  1. 一種基於傳輸流元資料對媒體內容動態加浮水印的方法,包括以下步驟:將攜帶媒體內容並且攜帶未在所述媒體內容中加浮水印的元資料的傳輸流接收到計算系統中;藉由所述計算系統從所述傳輸流獲取未在所述媒體內容中加浮水印的所述元資料;所述計算系統藉由至少將表示所獲取的元資料的浮水印編碼到所述媒體內容中來修改所述媒體內容;以及至少將修改後的媒體內容從所述計算系統輸出以向下游實體發送。
  2. 如請求項1所述之方法,其中,所述傳輸流將所述媒體內容攜帶在資料包序列中,並且將所述元資料攜帶在所述資料包中的至少一個的報頭中。
  3. 如請求項1所述之方法,其中,所述傳輸流定義了資料包序列,所述資料包序列包括攜帶所述媒體內容的資料包,並且還包括攜帶所述元資料的至少一個資料包。
  4. 如請求項1所述之方法,其中,所述元資料包括針對所述媒體內容中拼接點的拼接資訊。
  5. 如請求項1所述之方法,其中,所述媒體內容是媒體流,並且其中,所述元資料包括指示何時應在所述媒體流中執行動態內容修訂的定時資訊。
  6. 如請求項5所述之方法,其中,所述動態內容修訂包括動態廣告插入。
  7. 如請求項1所述之方法,其中,所述元資料包括針對所述媒 體內容應執行的動態內容修訂的持續時間。
  8. 如請求項1所述之方法,其中,所述元資料包括可被所述下游實體使用以建立同步時鐘的時間戳。
  9. 如請求項1所述之方法,其中,所述元資料包括應用於所述媒體內容的內容修訂的類型的指示。
  10. 如請求項1所述之方法,其中,所述元資料包括用於獲取替換內容以替換所述媒體內容的部分的資訊。
  11. 如請求項1所述之方法,其中,所述元資料包括用於所述下游實體進行所述媒體內容的修訂的觸發。
  12. 如請求項1所述之方法,其中,所述元資料包括用於促進媒體消費報告的媒體內容標識資訊。
  13. 一種計算系統,包括:一個或更多個通信接口,藉由所述一個或更多個通信接口接收攜帶媒體流的傳輸流,並且藉由所述一個或更多個通信接口將所述媒體流的至少一個修改後的版本沿媒體分發路徑輸出以向下游實體發送;處理單元;非暫時資料記憶體;以及程式指令,其儲存在所述非暫時資料記憶體中,並且可由所述處理單元執行,以執行包括以下的操作:從所述傳輸流中讀取由所述傳輸流攜帶並且未在所述媒體流中加浮水印的元資料;回應於從所述傳輸流中讀取所述元資料,藉由至少將可由所述下游實體解釋的浮水印編碼到所述媒體流中來修改所述媒體流以傳送所述元資料,從而生成所述媒體流 的所述修改後的版本;以及輸出所述媒體流的所述修改後的版本以沿所述媒體分發路徑向所述下游實體發送。
  14. 如請求項13所述之計算系統,其中,所述媒體分發路徑至少從內容源延伸到所述下游實體,並且其中,所述計算系統是所述媒體分發路徑中的中間設備。
  15. 如請求項13所述之計算系統,其中,所述傳輸流將所述媒體流攜帶在資料包序列中,並且將所述元資料攜帶在以下部分之一中:(i)所述資料包中的至少一個的報頭部分;及(ii)所述資料包中的至少一個的有效載荷部分。
  16. 如請求項13所述之計算系統,其中,所述元資料包括指示何時應在所述媒體流中執行動態內容修訂的定時資訊。
  17. 如請求項16所述之計算系統,其中,所述動態內容修訂包括動態廣告插入。
  18. 如請求項13所述之計算系統,其中,所述元資料包括針對所述媒體流應執行的動態內容修訂的持續時間。
  19. 如請求項13所述之計算系統,其中,所述元資料包括選自由以下項組成的組中的至少一項:(i)可被所述下游實體使用以建立同步時鐘的時間戳;(ii)應用於所述媒體流的內容修訂的類型的指示;(iii)用於獲取替換內容以替換媒體內容的部分的資訊;(iv)用於所述下游實體動態修訂所述媒體流的觸發;以及(v)用於促進媒體消費報告的媒體內容標識資訊。
  20. 一種非暫時電腦可讀介質,其包含可由處理單元執行以執行以下操作的指令:接收攜帶媒體流並且攜帶未在所述媒體流中加浮水印 的元資料的傳輸流;從所述傳輸流中獲取未在所述媒體流中加浮水印的所述元資料;藉由至少將表示所獲取的元資料的浮水印編碼到所述媒體流中來修改所述媒體流;以及至少將修改後的媒體流輸出以向下游實體發送。
TW109105761A 2019-02-22 2020-02-21 基於傳輸流元資料對媒體內容動態加浮水印的方法、計算系統及非暫時電腦可讀介質 TWI778330B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201962809360P 2019-02-22 2019-02-22
US62/809,360 2019-02-22
US201962882202P 2019-08-02 2019-08-02
US62/882,202 2019-08-02
US15/929,218 2020-02-06
US15/929,218 US11095927B2 (en) 2019-02-22 2020-02-06 Dynamic watermarking of media based on transport-stream metadata, to facilitate action by downstream entity

Publications (2)

Publication Number Publication Date
TW202038631A TW202038631A (zh) 2020-10-16
TWI778330B true TWI778330B (zh) 2022-09-21

Family

ID=72142449

Family Applications (2)

Application Number Title Priority Date Filing Date
TW111131576A TW202249495A (zh) 2019-02-22 2020-02-21 基於傳輸流元資料對媒體動態加浮水印以促進下游實體的動作
TW109105761A TWI778330B (zh) 2019-02-22 2020-02-21 基於傳輸流元資料對媒體內容動態加浮水印的方法、計算系統及非暫時電腦可讀介質

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW111131576A TW202249495A (zh) 2019-02-22 2020-02-21 基於傳輸流元資料對媒體動態加浮水印以促進下游實體的動作

Country Status (4)

Country Link
US (4) US11095927B2 (zh)
KR (2) KR20240006075A (zh)
TW (2) TW202249495A (zh)
WO (1) WO2020172004A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11095927B2 (en) * 2019-02-22 2021-08-17 The Nielsen Company (Us), Llc Dynamic watermarking of media based on transport-stream metadata, to facilitate action by downstream entity
US11234049B2 (en) * 2019-06-24 2022-01-25 The Nielsen Company (Us), Llc Use of steganographically-encoded time information as basis to control implementation of dynamic content modification
US11212560B2 (en) * 2019-06-24 2021-12-28 The Nielsen Company (Us), Llc Use of steganographically-encoded time information as basis to establish a time offset, to facilitate taking content-related action
CN112995759A (zh) * 2019-12-13 2021-06-18 腾讯科技(北京)有限公司 互动业务处理方法、系统、装置、设备及存储介质
US11012757B1 (en) * 2020-03-03 2021-05-18 The Nielsen Company (Us), Llc Timely addition of human-perceptible audio to mask an audio watermark
TWI784594B (zh) 2021-06-22 2022-11-21 宏碁股份有限公司 會議終端及聲音浮水印的嵌入方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100100742A1 (en) * 2008-02-18 2010-04-22 Courington Jeffrey M Transport Stream Watermarking
US20140075466A1 (en) * 2012-09-13 2014-03-13 Verance Corporation Enhanced content distribution using advertisements

Family Cites Families (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6721440B2 (en) * 1995-05-08 2004-04-13 Digimarc Corporation Low visibility watermarks using an out-of-phase color
GB0225339D0 (en) * 2002-10-31 2002-12-11 Trevor Burke Technology Ltd Method and apparatus for programme generation and classification
US7373513B2 (en) * 1998-09-25 2008-05-13 Digimarc Corporation Transmarking of multimedia signals
US9788058B2 (en) * 2000-04-24 2017-10-10 Comcast Cable Communications Management, Llc Method and system for automatic insertion of interactive TV triggers into a broadcast data stream
US20020104090A1 (en) * 2000-08-10 2002-08-01 Stettner Armando Paul System and method for interactive advertising
US20030192060A1 (en) * 2001-01-30 2003-10-09 Levy Kenneth L. Digital watermarking and television services
DE602004017993D1 (de) * 2003-06-19 2009-01-08 Koninkl Philips Electronics Nv Erhöhung der detektierungswahrscheinlichkeit von zusätzlichen daten in einem mediasignal mit wenigen frequenzkomponenten
US10032192B2 (en) * 2003-12-23 2018-07-24 Roku, Inc. Automatic localization of advertisements
US7623673B2 (en) 2005-03-30 2009-11-24 Dolby Laboratories Licensing Corporation Versatile watermark transport system
GB2431837A (en) * 2005-10-28 2007-05-02 Sony Uk Ltd Audio processing
JP2009521170A (ja) * 2005-12-22 2009-05-28 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 透かしによるスクリプト同期化方法
US8402503B2 (en) * 2006-02-08 2013-03-19 At& T Intellectual Property I, L.P. Interactive program manager and methods for presenting program content
DE102008014409A1 (de) * 2008-03-14 2009-09-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Einbetter zum Einbetten eines Wasserzeichens in eine Informationsdarstellung, Detektor zum Detektieren eines Wasserzeichens in einer Informationsdarstellung, Verfahren und Computerprogramm
DE102008014311A1 (de) * 2008-03-14 2009-09-17 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Einbetter zum Einbetten eines Wasserzeichens in eine Informationsdarstellung, Detektor zum Detektieren eines Wasserzeichens in einer Informationsdarstellung, Verfahren, Computerprogramm und Informationssignal
US8805689B2 (en) * 2008-04-11 2014-08-12 The Nielsen Company (Us), Llc Methods and apparatus to generate and use content-aware watermarks
US8170401B2 (en) * 2008-11-25 2012-05-01 Cisco Technology, Inc. Optimizing ad insertion by removing low information frames
US20100253847A1 (en) * 2009-04-01 2010-10-07 Rgb Networks, Inc. Two-stage digital program insertion system
US9094714B2 (en) * 2009-05-29 2015-07-28 Cognitive Networks, Inc. Systems and methods for on-screen graphics detection
US20110185179A1 (en) * 2009-08-26 2011-07-28 Viswanathan Swaminathan System And Method For Digital Rights Management With A Lightweight Digital Watermarking Component
US8525839B2 (en) * 2010-01-06 2013-09-03 Apple Inc. Device, method, and graphical user interface for providing digital content products
US8355910B2 (en) * 2010-03-30 2013-01-15 The Nielsen Company (Us), Llc Methods and apparatus for audio watermarking a substantially silent media content presentation
KR101654439B1 (ko) * 2011-09-23 2016-09-12 엘지전자 주식회사 방송 서비스 수신 방법 및 그 수신 장치
CN104011678A (zh) * 2011-10-19 2014-08-27 汤姆逊许可公司 自动内容节目发现设备及方法
US20140074570A1 (en) * 2012-09-10 2014-03-13 Super Transcon Ip, Llc Commerce System and Method of Controlling the Commerce System by Presenting Contextual Advertisements on a Computer System
US20140074566A1 (en) * 2012-09-11 2014-03-13 James K. McCoy Remote Sensing of Vehicle Occupancy
MX343885B (es) * 2012-09-12 2016-11-25 Lg Electronics Inc Aparato y metodo para procesar un servicio interactivo.
JP6247309B2 (ja) * 2012-11-28 2017-12-13 エルジー エレクトロニクス インコーポレイティド 双方向サービスを処理する装置及び方法
JP5641090B2 (ja) * 2013-03-14 2014-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
EP2797333A1 (en) 2013-04-26 2014-10-29 Nagravision S.A. Method for watermarking media content and system for implementing this method
EP2843963A1 (en) 2013-08-30 2015-03-04 Thomson Licensing Method for watermarking a content
US20170070790A1 (en) * 2014-05-13 2017-03-09 Sharp Kabushiki Kaisha A method of decoding a content bitstream
US10091263B2 (en) * 2014-05-21 2018-10-02 Audible Magic Corporation Media stream cue point creation with automated content recognition
JP6187698B2 (ja) * 2014-07-14 2017-08-30 富士通株式会社 電子透かし情報検出装置および電子透かし情報検出方法
US20170213567A1 (en) * 2014-07-31 2017-07-27 Koninklijke Kpn N.V. Noise suppression system and method
US9805434B2 (en) * 2014-08-20 2017-10-31 Verance Corporation Content management based on dither-like watermark embedding
WO2016028052A2 (ko) * 2014-08-20 2016-02-25 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US10231033B1 (en) * 2014-09-30 2019-03-12 Apple Inc. Synchronizing out-of-band content with a media stream
US9602891B2 (en) * 2014-12-18 2017-03-21 Verance Corporation Service signaling recovery for multimedia content using embedded watermarks
US10477285B2 (en) * 2015-07-20 2019-11-12 Verance Corporation Watermark-based data recovery for content with multiple alternative components
US10805626B2 (en) * 2015-12-11 2020-10-13 Sharp Kabushiki Kaisha Broadcast system with a watermark payload
KR102161734B1 (ko) * 2017-04-11 2020-10-05 돌비 레버러토리즈 라이쎈싱 코오포레이션 계층화된 증강 엔터테인먼트 경험
US10242680B2 (en) * 2017-06-02 2019-03-26 The Nielsen Company (Us), Llc Methods and apparatus to inspect characteristics of multichannel audio
US10575063B2 (en) * 2017-11-03 2020-02-25 Dish Network L.L.C. Message tunneling over closed captioning
KR102454002B1 (ko) * 2018-04-02 2022-10-14 한국전자통신연구원 미디어의 시청률을 조사하기 위한 신호 처리 방법 및 그 방법을 수행하는 부가정보 삽입장치, 미디어 재생 장치, 시청률 조사 장치
US11095927B2 (en) * 2019-02-22 2021-08-17 The Nielsen Company (Us), Llc Dynamic watermarking of media based on transport-stream metadata, to facilitate action by downstream entity
US11039160B2 (en) * 2019-03-21 2021-06-15 The Nielsen Company (Us), Llc Methods and apparatus for delivering extended payloads with composite watermarks
US11689303B2 (en) * 2019-11-01 2023-06-27 Turner Broadcasting System, Inc. Generating unified metadata for a plurality of distribution platforms

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100100742A1 (en) * 2008-02-18 2010-04-22 Courington Jeffrey M Transport Stream Watermarking
US20140075466A1 (en) * 2012-09-13 2014-03-13 Verance Corporation Enhanced content distribution using advertisements

Also Published As

Publication number Publication date
WO2020172004A1 (en) 2020-08-27
TW202038631A (zh) 2020-10-16
US20220417572A1 (en) 2022-12-29
US20230247240A1 (en) 2023-08-03
US20210344981A1 (en) 2021-11-04
US11653044B2 (en) 2023-05-16
KR20210104924A (ko) 2021-08-25
KR102618316B1 (ko) 2023-12-28
US20200275141A1 (en) 2020-08-27
KR20240006075A (ko) 2024-01-12
US11463751B2 (en) 2022-10-04
TW202249495A (zh) 2022-12-16
US11095927B2 (en) 2021-08-17

Similar Documents

Publication Publication Date Title
TWI778330B (zh) 基於傳輸流元資料對媒體內容動態加浮水印的方法、計算系統及非暫時電腦可讀介質
US20220150601A1 (en) Use of Watermarking to Trigger Fingerprint-Related Action
KR101805538B1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US11736746B2 (en) Use of steganographically-encoded time information as basis to establish a time offset, to facilitate taking content-related action
TWI788701B (zh) 用於使用帶內元資料作為存取參考指紋的基礎來促進與內容相關的動作的方法及媒體客戶端
CN113892272A (zh) 使用隐写编码数据作为基础来消歧基于指纹的频道多匹配
US11863817B2 (en) Use of steganographically-encoded time information as basis to control implementation of dynamic content modification
JP2022542523A (ja) ウォーターマーキングを用いた動的コンテンツ修正中止の制御
TWI782322B (zh) 在媒體客戶端重新整合元資料與媒體流內容,以促進媒體客戶端的動作的方法和系統
TWI744947B (zh) 使用浮水印技術來觸發指紋相關動作的方法、媒體客戶端和電腦可讀介質

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent