TWI399973B - 用於區別源自於本地裝置的信號與廣播信號之方法、裝置及儲存其指令之機器可讀取媒體 - Google Patents

用於區別源自於本地裝置的信號與廣播信號之方法、裝置及儲存其指令之機器可讀取媒體 Download PDF

Info

Publication number
TWI399973B
TWI399973B TW093138737A TW93138737A TWI399973B TW I399973 B TWI399973 B TW I399973B TW 093138737 A TW093138737 A TW 093138737A TW 93138737 A TW93138737 A TW 93138737A TW I399973 B TWI399973 B TW I399973B
Authority
TW
Taiwan
Prior art keywords
audio
video
signal
component
analyzer
Prior art date
Application number
TW093138737A
Other languages
English (en)
Other versions
TW200526023A (en
Inventor
Arun Ramaswamy
Dan Nelson
Original Assignee
Nielsen Media Res Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nielsen Media Res Inc filed Critical Nielsen Media Res Inc
Publication of TW200526023A publication Critical patent/TW200526023A/zh
Application granted granted Critical
Publication of TWI399973B publication Critical patent/TWI399973B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/29—Arrangements for monitoring broadcast services or broadcast-related services
    • H04H60/31—Arrangements for monitoring the use made of the broadcast services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/56—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
    • H04H60/58—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 of audio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/56—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
    • H04H60/59—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 of video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Systems (AREA)

Description

用於區別源自於本地裝置的信號與廣播信號之方法、裝置及儲存其指令之機器可讀取媒體 相關申請案
此申請案係主張2003年12月30日之美國臨時專利申請案序號60/533,190之優先權。
本案的揭露內容係關於觀眾測量，並且特別是有關用於區別源自於本地裝置的信號與廣播信號之方法及裝置。
判斷出觀看電視節目的觀眾人數與人口統計資料以及節目的來源(例如，電視廣播、按次付費的節目、例如是在錄影帶中之電影的錄影的節目、等等)係有助於電視節目製作者改善電視節目的品質並且決定在此節目期間播送廣告所要收取的價格。此外，正確的觀看電視的人口統計資料可讓廣告主針對所要的觀眾人數以及/或是針對包含有一組共同之所要的特徵(例如，收入水準、生活方式、興趣、等等)的成員之觀眾。
為了收集收視的統計資料及人口統計資料，觀眾測量公司可能招幕一些電視收視者(例如，一組調查對象)，以在一項觀眾測量調查中合作一段預定的時間長度。這些招幕的收視者或是小組參加者的收視習慣以及有關這些招募的收視者之人口統計學的資料係利用自動化以及/或是人工的收集方法來加以收集。收集到的收視資料係接著被利用以產生相關於觀看電視的觀眾之各種的資訊統計資料，其例如是包含觀眾人數、觀眾人口統計資料、觀眾的喜愛、 每個家庭以及/或是每個區域觀看電視的總小時數、等等。
自動化的資料收集系統之配置係依據每個被監視的家庭中之用以接收、處理與顯示電視信號的設備而有所改變。例如，接收有線電視信號以及/或是衛星電視信號的家庭典型地係包含機上盒(STB)，以從有線電視以及/或是衛星電視提供者接收電視信號。以此種方式配置的電視系統典型地係利用硬體、韌體以及/或是軟體以和STB介面連接來加以監視，以從STB取出或是產生信號資訊。此種硬體、韌體以及/或是軟體可被調整以適合於執行各種的監視工作，其包含例如是偵測被設置在STB中的調諧裝置之頻道調諧狀態、抽取出內嵌在STB處所收到的電視信號中之節目識別碼、產生在STB處所收到的電視信號之簽名特性、等等。
在一個實施例中，一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之方法，該方法係包括：藉由分析像素資料的一個直方圖、分析一個品質因數、或是嘗試偵測在該視訊成分中之內嵌的資料中之至少一種，以分類該音訊-視訊信號的一個視訊成分；藉由嘗試偵測內嵌的音訊資料或是分析與該音訊成分相關的波形能量中之至少一種方式，以分類該音訊-視訊信號的一個音訊成分；以及根據該視訊分類或是該音訊分類中之至少一種來判斷該音訊-視訊信號的一個來源。
在一個實施例中，一種用於區別一個源自於一本地的 裝置之音訊-視訊信號與一個廣播信號之裝置，該裝置係包括：以下的至少兩個：(a)一個主動式視訊分析器，其係用以藉由分析像素資料的一個直方圖或是分析一個品質因數中的至少一種來分類該音訊-視訊信號的一個視訊成分；(b)一個垂直遮沒間隔分析器，其係用以藉由嘗試偵測內嵌的視訊資料來分類該音訊-視訊信號的視訊成分；(c)一個文字抽取器，其係用於偵測在該音訊-視訊信號的視訊成分中之文字或是取出在該音訊-視訊信號的視訊成分中之文字中的至少一種；以及(d)一個音訊分析器，其係用以藉由偵測內嵌的音訊資料或是分析一個音訊波形的能量中的至少一種來分類該音訊-視訊信號的一個音訊成分；以及一個決策模組，其係用以根據該主動式視訊分析器、垂直遮沒間隔分析器、文字抽取器以及音訊分析器中的至少兩個之輸出來判斷該音訊-視訊信號的一個來源。
在一個實施例中，一種用於儲存指令之機器可讀取的媒體，該些指令係被建構以使得一個機器：藉由分析像素資料的一個直方圖、分析一個品質因數、或是嘗試偵測在該視訊成分中之內嵌的資料中之至少一種來分類該音訊-視訊信號的一個視訊成分；藉由嘗試偵測內嵌的音訊資料或是分析與該音訊成分相關的波形能量之至少一種來分類該音訊-視訊信號的一個音訊成分；以及根據該視訊分類或是該音訊分類中之至少一個來判斷該音訊-視訊信號的一個來源。
在一個實施例中，一種用於確認觀眾測量資料之方法， 其係包括：捕捉視訊幀；從該捕捉到的視訊幀識別一個狀態序列；以及比較該狀態序列與已知的狀態序列。
在一個實施例中，一種用於識別一音訊-視訊信號的一個來源之方法，其係包括：分析該音訊-視訊信號的一個視訊成分之一個第一預設的特徵，以產生該音訊-視訊信號的來源之一個第一指示；分析該音訊-視訊信號的一個音訊成分之一個第二預設的特徵，以產生該音訊-視訊信號的來源之一個第二指示；以及根據該第一與第二指示來判斷該音訊-視訊信號是否由一個本地的裝置所產生。
在一個實施例中，一種用於分類一個音訊-視訊信號之裝置，其係包括：一個視訊/音訊分類器，其係用以識別該音訊-視訊信號為一個本地產生的信號或是一個廣播信號；一個視訊編解碼器，其係響應於一項該音訊-視訊信號是一個本地產生的信號之判斷，用以從事捕捉一個視訊幀或是壓縮一個視訊幀中之至少一種；以及一個光學字元識別引擎，其係響應於該項該音訊-視訊信號是一個本地產生的信號之判斷，以嘗試從藉由該視訊編解碼器所捕捉到的視訊幀取出螢幕上的文字。
在一個實施例中，一種用於識別一音訊-視訊信號的一個來源之方法，其係包括：分析該音訊-視訊信號的一個第一成分之一個第一預設的特徵，以產生該音訊-視訊信號的來源之一個第一指示；分析該音訊-視訊信號的第一成分之一個第二預設的特徵，以產生該音訊-視訊信號的來源之一個第二指示；以及根據該第一與第二指示來判斷該音訊-視 訊信號是否由一個本地的裝置所產生。
第1圖是用以區別藉由一個例如是STB之本地的裝置102所產生的信號與該本地的裝置所接收及/或處理的廣播信號之範例的系統100的概要圖示。該範例的系統100係包括視訊/音訊分類器104、視訊編解碼器106、光學字元識別引擎108以及收集單元110。儘管該舉例的系統係利用STB作為本地的裝置102，但是該項技術中具有通常技能者將會體認到該範例的系統100可以和其它類型的裝置一起使用，例如，錄放影機(VCR)、數位多用途碟片(DVD)播放機、個人視訊錄影機(PVR)以及電視遊樂器。此外，整合電視遊樂器、DVD播放機、VCR、STB以及/或是PVR的功能之裝置亦可被利用。因此，將會瞭解到的是，儘管是為了便於討論，以下的說明之本地的裝置102係指STB，但是STB 102可以用任何可以產生將被顯示電視上之電視信號的裝置來加以取代。
所舉例的STB 102之例子係被配置以調諧及處理電視廣播信號，並且輸出音訊-視訊信號。由STB 102輸出的音訊-視訊信號可以是一個調諧後的電視廣播信號且/或可以是由STB 102所產生的(例如，螢幕上的功能表、互動電視(iTV)、等等)。在電視廣播信號被輸出到一個被配置以顯示音訊-視訊信號之例如是電視112的裝置之前，STB 102可以處理以及/或是解碼該電視廣播信號。在所舉的例子中，被輸出至電視112的信號係亦被輸出至視訊/音訊分類 器104。
該視訊/音訊分類器104係被配置以接收該被輸出至電視112的音訊-視訊信號，並且判斷該音訊-視訊信號的來源(例如，判斷其係為電視廣播信號或是由STB 102所產生之本地的信號)。該視訊/音訊分類器104可分離所收到的電視信號成為一個音訊信號以及一個視訊信號，或是STB 102可輸出包含音訊與視訊兩者的單一信號。無論如何，該音訊信號之波形可被該視訊/音訊分類器104分析，以判斷出該所收到的音訊信號的來源。該視訊信號可藉由STB 102或是視訊/音訊分類器104而被數位化並且分離成視訊幀。該些視訊幀接著可被視訊/音訊分類器104分析，其係藉由：(a)產生一個直方圖(histogram)以及/或是多個直方圖以判斷出不同的視訊特徵(例如，像素值分布、場景變換的數目、等等)，(b)藉由判斷在該視訊信號的垂直遮沒間隔之內是否有被嵌入的資料，(c)藉由抽取出文字，以及/或是(d)藉由標識(logo)偵測。該些音訊分析與視訊分析的結果係被結合並且被利用以判斷出該音訊-視訊信號的來源。該結合的結果以及音訊-視訊信號係從視訊/音訊分類器104輸出至視訊編解碼器106以及OCR引擎108。
該視訊編解碼器106係被配置以從視訊/音訊分類器104接收該音訊-視訊信號。該視訊編解碼器106可以解碼以及/或是處理該所收到的音訊-視訊信號，使得該音訊-視訊信號可在電視以及/或是其它顯示器上觀看。該視訊編解碼器106亦可被配置以從該所收到的音訊-視訊信號捕捉螢 幕快照、壓縮該捕捉到的螢幕快照以及/或是傳送該捕捉到的螢幕快照至收集單元110。該視訊編解碼器106是該項技術中具有通常技能者所熟知的，因而並未在此進一步加以描述。
該OCR引擎108係被配置以接收該音訊-視訊信號以及來自視訊/音訊分類器104之結合的結果。若該音訊-視訊信號被識別為已藉由STB 102產生的，則OCR引擎108係被配置以從該音訊-視訊信號取出螢幕上的文字。該抽取出的螢幕上的文字可以透過收集單元110而被傳送至一個後端伺服器以用於進一步的分析。
該收集單元110係被配置以從視訊編解碼器106接收捕捉到的螢幕快照並且從該OCR引擎108接收抽取出的螢幕上的文字。該收集單元110亦可以將時間戳記資料與該捕捉到的螢幕快照以及/或是該抽取出的螢幕上的文字關聯在一起。該收集單元110可以儲存該捕捉到的螢幕快照以及/或是該螢幕上的文字以供稍後使用或傳送，或是其可以立即傳送該捕捉到的螢幕快照以及/或是螢幕上的文字至一個中央資料收集設備或是後端伺服器。
第2圖是一個範例的視訊/音訊分類器104之方塊圖。第2圖之範例的視訊/音訊分類器104係包含視訊數位化器202、音訊數位化器204、幀緩衝器206、音訊分析器208、主動式視訊分析器210、垂直遮沒間隔分析器212、文字抽取器213以及決策模組214。實際上，該範例的視訊/音訊分類器104可被實施為數個硬體組件(每個組件係被配置 以執行一或多個功能)、可以用軟體或是韌體而被實施(其中一或多個程式係被用來執行該些不同的功能)、或是可藉由硬體、韌體以及/或是軟體的一個組合而被實施。
視訊數位化器202係被配置以從本地的裝置/STB 102接收一個類比視訊信號，並且捕捉該視訊信號的一個視訊幀或是多個視訊幀。當一個類比視訊信號被視訊數位化器202接收到時，該視訊數位化器202係轉換視訊幀成為數位的表示。視訊幀可利用例如是該項技術中具有通常技能者已知的習知幀捕捉裝置而被轉換成為數位的表示。視訊幀係被儲存在幀緩衝器206中。若接收到數位視訊信號時，其係直接被傳送至幀緩衝器206而未經由視訊數位化器202加以轉換，這是因為沒有轉變是必要的。若該數位視訊信號是一個壓縮的數位視訊信號，則視訊數位化器202可以在該數位視訊信號被傳送至幀緩衝器206之前，解壓縮該數位視訊信號。
該幀緩衝器206係被配置以從視訊數位化器202接收該數位化後的類比視訊信號以及/或是直接從本地的裝置/STB 102接收一個數位視訊信號。該幀緩衝器206可以是任何類型的被配置以儲存資料之記憶體以及/或是儲存裝置。例如，該幀緩衝器206可以藉由任何類型的隨機存取記憶體(RAM)、硬碟機以及/或是快閃記憶體而被實施。幀緩衝器206是該項技術中具有通常技能者已知的，因而將不會在此進一步加以描述。
該主動式視訊分析器210係被配置以從幀緩衝器206 接收視訊幀並且產生像素資料的直方圖。為此目的，視訊幀可以首先被分割成多個巨集區塊(macroblock)。一個範例的巨集區塊陣列係被展示在第3圖中。
第3圖係描繪一個範例的N×N 巨集區塊陣列。在該陣列中的每個巨集區塊(例如，巨集區塊(0，1)或是一般被稱為巨集區塊(i，j))是一個M×M 像素(例如，16×16)的群組、或者可以是一個別的像素。該N×N 巨集區塊陣列可以涵蓋整個數位視訊幀或是可以涵蓋數位視訊幀的區域，例如(但不限於)數位視訊幀的角落(以偵測子母畫面(PiP))以及/或是涵蓋橫跨數位視訊幀的一部份之條帶(例如，下半部、下方的四分之一、上方的三分之一、等等，用以偵測螢幕上的標題導引)。藉由將數位視訊幀分割成巨集區塊，對於只影響顯示畫面的一部份之STB所產生的視訊之偵測將變得容易。
此外，巨集區塊陣列可具有與其相關之不同的等級值。等級值可根據判斷來自巨集區塊所涵蓋的區域之電視信號的來源的重要性或可能性而被指定。例如，若巨集區塊陣列涵蓋螢幕中可能出現標題導引的下半部時，該等級值可能是一個大的值，但是若巨集區塊陣列涵蓋螢幕中間的一小部分時，則該等級值可能是一個較小的數目。藉由在數位視訊幀的不同區域中利用各種等級值，標題的類型以及標題的位置可被判斷出。
回到主動式視訊分析器210，在每個巨集區塊(i，j)中的像素資料都可被利用以產生一個直方圖。該主動式視訊 分析器210可檢查該直方圖的像素資料之分布，並且判斷該所收到的視訊幀是否由STB 102本地所產生或是來自廣播信號。該主動式視訊分析器210可利用照度以及/或是色彩域特徵值來產生該直方圖。
除判斷像素資料的分布之外，該主動式視訊分析器210亦可以使用直方圖來偵測每單位時間之場景變換的數目，並且偵測每單位時間之空白幀的數目。該主動式視訊分析器210可以比較兩個連續的視訊幀之直方圖，並且計算出在該等直方圖之間的差異。該差異係和一個預設的閾值做比較，並且若該差異大於該預設的閾值，則主動式視訊分析器210係判斷為發生了一場景變換。該主動式視訊分析器210可以替代或是另外地藉由分析在直方圖中的像素值來偵測一個空白幀。若直方圖主要包含代表黑的顯示畫面的像素值，則主動式視訊分析器210可以判斷該視訊幀是一個空白幀。用於場景變換的偵測與空白幀的偵測之方法是該項技術中具有通常技能者所熟知的，因而將不會在此進一步加以描述。
該主動式視訊分析器210亦可被配置以判斷視訊幀的品質因素(例如，影像品質的程度)。範例的品質因素係包含(但不限於)在視訊幀中之模糊(blur)量、在視訊幀中之方塊效應(blockiness)的程度以及/或是短暫的抖動量。該品質因素可以利用例如是美國國家標準學會(ANSI)之標準的各種方法來加以判定，例如，T1.801.01-1995“用於電信-電傳視訊會議/視訊電話信號的數位傳輸-用於主觀與客觀的效 能評估的視訊測試場景之美國國家標準”，其係藉此而被納入作為參考。判定品質因素的方法是該項技術中具有通常技能者所熟知的，因而不在此進一步加以描述。
該主動式視訊分析器210亦可被配置以分析數位視訊幀之預設的部份，並且偵測預設的影像之存在與否。為此目的，若在數位視訊幀之預設的部份中找到一個影像，則該影像係和一個影像的資料庫做比較。例如，該主動式視訊分析器210可以檢查視訊幀的右下或是左邊部份是否有一個預設的影像。該預設的影像可以是一個例如為NBC之識別廣播網的標識或是某種其它的識別影像。該影像係接著和一個標識以及/或是識別影像的資料庫做比較。
該垂直遮沒間隔分析器212係被配置以從幀緩衛器206接收視訊幀，並且判斷是否有額外的資訊被嵌入在該些幀的垂直遮沒間隔中。範例的內嵌的資料可以是隱藏字幕資料、V-晶片資料、iTV資料、以及/或是尼爾森(Nielsen)媒體調查的線路系統之自動監視(AMOL)的資料。
該文字抽取器213係被配置以處理該數位視訊幀並且從數位視訊幀抽取出文字。該文字抽取器213可以在數位視訊幀上執行水平及垂直的濾波，以搜尋通常在文字中會發現的特徵(例如，水平、對角線以及垂直的邊緣)。該項技術中具有通常技能者將輕易體認到有數種不同的方法用以從數位視訊幀取出文字，例如，利用一種邊緣偵測的演算法以產生邊緣的直方圖。該文字抽取器213亦可被配置以儲存該抽取出的文字在一個檔案中(例如，位元圖 (bitmap))，並且比較該位元圖與儲存在文字抽取器213中的樣版(template)來判斷該視訊信號的來源。該些樣版可包含已知是由本地的裝置/STB 102所本地產生的文字以及可被預先儲存在文字抽取器中並且可藉由軟體來加以更新。
該音訊數位化器204係被配置以從本地的裝置/STB 102接收類比或數位音訊信號。若一個類比音訊信號被接收到時，該音訊數位化器204係轉換該類比信號成為一個數位信號。該音訊數位化器204可以利用類比至數位轉換器來轉換該類比音訊信號成為該信號之一數位的表示。該音訊數位化器204亦可被配置以提供信號處理功能以成形(shape)以及/或是濾波該所收到的音訊信號。該音訊數位化器204可以在執行例如是該數位信號的成形或濾波之信號處理之後，傳送數位音訊信號至音訊分析器208。若該數位音訊信號是一個壓縮的數位音訊信號，則其可以在音訊數位化器204執行該數位信號的任何成形或是濾波之前被解壓縮。
該音訊分析器208係被配置以從音訊數位化器204接收數位化後的類比音訊信號以及/或是直接從本地的裝置/STB 102接收數位音訊信號。該音訊分析器208亦被配置以分析該音訊信號(例如，波形)的能量並且根據此分析以判斷該所收到的音訊信號是來自電視廣播信號或是來自本地的裝置/STB 102。該音訊分析器208係根據廣播音訊-視訊信號的波形以及本地的裝置/STB 102所產生的音訊-視訊信號的波形之能量上的特徵差異，以區別廣播音訊信號 與本地的裝置/STB 102所產生的音訊信號。該音訊分析器208亦可以藉由利用一個音訊碼偵測器來偵測可能內含在廣播音訊信號中、但未內含在本地的裝置/STB 102所產生的音訊信號中之音訊碼(例如，內嵌在音訊信號中的碼)，以區別廣播音訊信號與本地的裝置/STB 102所產生的音訊信號。該音訊分析器208亦可被配置以偵測在音訊信號中沒有音訊成分的部分(例如，音訊信號的無聲以及/或是靜音)。該項技術中具有通常技能者將會輕易地體認到該無聲以及/或是靜音的偵測可以利用各種的技術，例如，分析在音訊信號中的零交越、分析音訊信號的頻譜能量、等等而被實施。
該決策模組214係被配置以接收主動式視訊分析器210、垂直遮沒間隔分析器212、文字抽取器213以及音訊分析器208的輸出，並且判斷所收到的電視信號的來源(例如，廣播信號或是本地產生的信號)。該決策模組214可以提供不同的加權值給每個所收到的結果，並且結合該些加權後的結果。該結合之加權後的結果可以和一個閾值做比較，以判斷該音訊-視訊信號的來源。該些加權值可被選成使得來源可以從單一結果就被判斷出。例如，該決策模組214可被配置成使得來源可以從音訊分析器208的結果就被判斷出。在此例子中，與音訊分析器208的結果相關之加權值係被選成使得音訊分析器208之加權後的結果是大於該閾值。在一個其中視訊/音訊分類器是被用來偵測PiP模式之範例的系統中，該決策模組214可被配置成使得在 判斷所收到的電視信號之來源時，音訊分析器208的結果並未被使用。
第4與8圖是代表可被第1與2圖的裝置執行來識別一個音訊-視訊信號的來源之範例的機器可讀取的指令之流程圖。第4與8圖的程序400與450可利用一或多個軟體程式而被實施，該些軟體程式係以眾所週知的方式被儲存在一或多個記憶體中(例如，快閃記憶體512以及/或是硬碟520)並且藉由一或多個處理器(例如，處理器506)來加以執行。然而，該所舉例的程序400與450之某些或是所有的方塊可用人工操作地以及/或是藉由某些其它裝置來加以執行。儘管程序400與450是參考第4與8圖中所描繪的流程圖而被描述，但是該項技術中具有通常技能者將會輕易體認到許多其它執行程序400與450的方法都可被利用。例如，其中的許多方塊之順序可被改變，一或多個方塊的動作可被改變，多個方塊可被結合，以及/或是方塊可被刪去。
一般而言，第4圖之範例的程序400係開始在接收到一個音訊-視訊信號之際。視訊信號與音訊信號係被數位化並且以一種數位資料格式來表示。一個直方圖係從該視訊信號的一個視訊幀而被產生並且分析，以收集有關視訊信號之不同的特點之資訊，例如，像素值的分布、品質因素、場景變換以及空白幀。該視訊信號亦被分析以判斷在視訊信號中是否有嵌入的資料，例如，隱藏字幕以及/或是V-晶片資訊，並且判斷在該視訊幀中是否有文字。該音訊信 號亦被分析。該直方圖、視訊信號分析以及音訊信號分析的結果係被結合，並且該範例的裝置200係判斷該電視信號是否從本地的裝置/STB 102被產生、或者該電視信號是否為一個電視廣播信號。
現在回來詳細地敘述第4圖，該範例的程序400開始在接收到一個音訊-視訊信號之際(方塊402)。該音訊-視訊信號可能是一個廣播信號或是一個已經藉由例如是本地的裝置/STB 102而被本地產生的信號。若尚未分離時，該音訊-視訊信號係被分成視訊信號與音訊信號。
視訊信號係被視訊數位化器202所接收，而音訊信號係被音訊數位化器204所接收(方塊404)。若該視訊信號是一個類比信號，則其係被轉換成為一個數位的表示(方塊404)。該視訊數位化器202可轉換單一類比視訊幀以及/或是多個類比視訊幀成為視訊幀之數位的表示(例如，數位視訊幀)。該視訊數位化器202可使用一個幀抓取器以及/或是一個類比至數位轉換器以數位化視訊幀。該些數位視訊幀係被儲存在一個幀緩衝器206中。若該視訊數位化器202接收到一個數位視訊信號，則該數位視訊信號係被傳送至幀緩衝器206，而不需要轉換該數位視訊信號。
若該音訊信號是一個類比信號，則其係被轉換成為一個數位音訊信號(方塊404)。該音訊數位化器204可使用一個類比至數位轉換器以轉換一個類比音訊信號成為一個數位音訊信號。該音訊信號之數位的表示係被傳送至音訊分析器208。
在視訊幀之數位的表示被儲存在幀緩衝器206中之後，該主動式視訊分析器210係分割一個數位視訊幀成為多個巨集區塊(方塊406)。在該數位視訊幀被分割成巨集區塊(方塊406)之後，該些巨集區塊的直方圖係被計算出(方塊408)。該直方圖可以藉由利用例如是色彩(紅色-綠色-藍色(RGB))域或是照度(色調-飽和值(HSV))域中的每個巨集區塊之像素值的平均值而被計算出。廣播視訊信號典型地具有比本地產生的視訊信號更多的色彩數目。因此，廣播信號的直方圖典型地將會類似如同在第5(a)圖中所示的高斯雜訊分布，並且具有廣泛分布的值。在另一方面，從例如是STB 102之本地的裝置所產生的視訊典型地具有一個有限的色彩查看表(CLUT)。因此，本地產生的視訊信號之直方圖典型地將會類似於如同在第5(b)圖中所示的階躍(step)函數。本地產生的視訊信號之直方圖典型並不具有和廣播信號的直方圖之分布值一樣寬的分布值。
該主動式視訊分析器210係使用幀的直方圖表示以嘗試判斷音訊-視訊信號的來源(例如，其係藉由STB 102本地產生的視訊或是廣播信號)(方塊408)。該計算出的直方圖可以和一個包含STB 102產生的螢幕快照之直方圖的直方圖資料庫做比較。為了促進該比較，由主動式視訊分析器210所產生的直方圖之一個例如是簽名的代表(proxy)可以和在該資料庫中的直方圖之代表(例如，簽名)做比較。藉由檢查直方圖的特徵與差異，該主動式視訊分析器210係能夠判斷該音訊-視訊信號的來源。
另外或是取代比較該計算出的直方圖與一個直方圖資料庫，該計算出的直方圖可以如上所述地被分析以判斷每單位時間的場景變換數目以及每單位時間的空白視訊幀數目(方塊408)。本地產生的視訊信號典型並不包含許多場景變換以及/或是空白幀。而另一方面，電視廣播信號典型會包含場景變換以及/或是空白幀。因此，該主動式視訊分析器210係能夠藉由計數每單位時間的場景變換數目以及/或是每單位時間的空白視訊幀數目來判斷該音訊-視訊信號的來源。每單位時間的場景變換數目以及每單位時間的空白視訊幀數目係和預設的閾值相比較，以判斷該音訊-視訊信號是否為一個廣播信號。若每單位時間的場景變換以及/或是空白幀數目超出預設的閾值，則該主動式視訊分析器可以判斷該視訊信號的來源是一個廣播信號。該預設的閾值可以動態地加以改變或者可以由使用者輸入。
在直方圖已被計算且分析(方塊408)之後，視訊幀的品質因素係被判斷出(方塊409)。該主動式視訊分析器210可以判斷在視訊幀中的模糊量、視訊幀的方塊效應之程度以及/或是在視訊幀中的暫時抖動量。計算品質因素的方法是該項技術中具有通常技能者所熟知的，因而不在此加以描述。典型地，本地產生的視訊信號並不包含大量的模糊、方塊效應以及/或是暫時的抖動，因而該主動式視訊分析器210可以藉由比較品質因素的值與預設的閾值來判斷一個視訊信號並非是本地產生的視訊信號。
該主動式視訊分析器210亦檢查視訊幀是否有已知的 影像，例如，標識以及/或是識別符(方塊410)。該主動式視訊分析器210可檢查視訊幀之特定的部份/區域(例如，視訊幀的角落部份)是否有已知的影像。一個影像的資料庫可被儲存且用作為一個用於比較的樣版。若在視訊幀中找到一個標識以及/或是識別符，則該主動式視訊分析器210可以比較該標識及/或識別符與該影像的資料庫，以判斷該標識及/或識別符是否與本地產生的視訊信號或是廣播信號相關。例如，一個與例如是TiVo® 的PVR相關之標識可能會被發現並且和該影像的資料庫做比較。該主動式視訊分析器210可以判定該標識是與PVR相關的，並且接著判斷該音訊-視訊信號是一個本地產生的信號。
該主動式視訊分析器210可以傳送該直方圖分析的結果、品質因數分析以及標識分析的結果作為來自主動式視訊分析器210之個別的輸出至決策模組214。替代或是另外地，該主動式視訊分析器210可以輸出單一結果，其係藉由加權該些結果並且將其結合，而類似於決策模組214以從主動式視訊分析器210決定單一輸出。
當該主動式視訊分析器210分析視訊幀(方塊406-410)時，垂直遮沒間隔分析器212係分析該些數位視訊幀(方塊411)。該垂直遮沒間隔分析器212係嘗試偵測在垂直遮沒間隔中以及數位視訊幀之有效的視訊之開始處的資料(例如，隱藏字幕資料、V-晶片、iTV觸發事項、AMOL資料、等等)。第6圖係描繪可能內含在垂直遮沒間隔中以及有效的視訊之開始處的資料之兩個例子。第6(a)圖是可能在廣 播信號的垂直遮沒間隔中被偵測到的資料之一個例子。第6(a)圖可以代表數位資料或是一個波形。第6(b)圖係描繪在電視信號中沒有內嵌的資料之情形。藉由例如是STB 102之本地的裝置所產生之音訊-視訊信號將不會有內嵌在其垂直遮沒間隔中的資料。因此，儘管例如是在第6(b)圖中所示的波形可能是表示一個本地產生的視訊信號或是一個廣播信號，但是例如在第6(a)圖中所示的波形是非常可能表示一個廣播信號。
當主動式視訊分析器201檢查數位幀在垂直遮沒間隔中是否有資料(方塊411)時，該文字抽取器213係檢查數位視訊幀是否有文字(方塊412)。該文字抽取器213係處理數位視訊幀並且嘗試從數位視訊幀取出文字。從數位視訊幀取出文字的方法是該項技術中具有通常技能者所熟知的，因而不在此加以描述。該些文字可被儲存在一個檔案中，並且和儲存在文字抽取器213中的樣版做比較。該些樣版可包含已知是由本地的裝置/STB 102所產生的文字。若抽取出的文字與一個樣版相同，則文字抽取器213可以判斷該視訊信號的來源很可能是一個本地產生的視訊信號。
當視訊信號被分析(區塊406-412)時，音訊分析器208係檢查數位音訊信號的波形之能量(方塊413)。第7圖係描繪典型的音訊信號之數位的表示之能量波形。如同在第7(a)圖中所示，電視廣播信號典型地具有一個變化的波峰與波谷的波形。相對地，如同在第7(b)圖中所示，由例如 是STB 102之本地的裝置所產生之音訊信號典型地具有一個平坦的波形(例如，其係表示無聲或是一個音調)或者可能是雜訊。藉由檢查音訊信號的波形，該主動式視訊分析器210係能夠判斷該電視信號的來源。
該音訊分析器208可以替代或是額外地檢查數位音訊信號是否具有可能內嵌在該數位音訊信號中的音訊碼。一個本地產生的音訊信號典型地並不包含音訊碼。因此，若音訊分析器208在數位音訊信號中偵測到音訊碼時，則該音訊分析器208可以判斷該數位音訊信號是一個廣播信號。
該主動式視訊分析器210、垂直遮沒間隔分析器212、文字抽取器213以及音訊分析器208的輸出係接著被傳送到決策模組214來加以分析(方塊414)。該決策模組214可提供不同的加權值給每個所收到的結果，並且接著結合該所收到的結果以判斷該音訊-視訊信號是藉由例如是本地的裝置/STB 102而本地所產生的、或是該音訊-視訊信號是一個廣播信號。該音訊-視訊信號的來源可以藉由加總該些加權後的結果並且比較總和與一個預設的閾值而被判斷出。該些加權值與預設的閾值可以由使用者輸入以及/或是藉由適應性的軟體程式來加以決定。
若決策模組214判斷該音訊-視訊信號是本地產生的(方塊416)，則該決策模組214係將該結果以及音訊-視訊信號傳送至收集單元110、OCR引擎108(若存在的話)以及/或是視訊編解碼器106(方塊418)。該結果可利用任何已知 的通訊協定而被傳送。若決策模組214判斷該音訊-視訊信號是一個廣播信號，則此結果以及任何有關該廣播來源的細節可被傳送至收集單元110以及/或是可直接被傳送至一個中央資料收集伺服器設備以及/或是後端伺服器。
第8圖是代表可被第1圖的裝置執行之範例的機器可讀取的指令之流程圖。該程序450係開始在視訊/音訊分類器104的輸出被傳回之際(方塊451)。由本地的裝置/STB 102所產生之視訊信號係藉由視訊編解碼器106來加以處理。該視訊編解碼器106可捕捉螢幕快照並且利用已知的壓縮演算法/格式來壓縮該捕捉到的螢幕快照(方塊452)。例如，該捕捉到的螢幕快照可以利用JPG標準來加以壓縮。該壓縮的螢幕快照接著被傳送至收集單元110。該收集單元110係接收該壓縮的螢幕快照，將時間戳記關連到該壓縮的視訊(方塊452)，並且接著傳送該帶有時間戳記之壓縮的螢幕快照(以及其它資料以識別該資料是從何家庭收集到的以及/或是觀眾之人口統計學的構成)至一個中央資料收集伺服器以及/或是後端伺服器。
該中央資料收集伺服器可以解壓縮螢幕快照，相關於時間戳記來分析螢幕快照並且產生iTV點選流資料(方塊454)。一個狀態機(state machine)可以從該iTV點選流資料以及/或是從該解壓縮的螢幕快照與所附的時間戳記而被產生(方塊456)。例如，若該中央資料收集伺服器接收到三個帶有指出螢幕快照的流程或順序(例如，螢幕畫面1接著是螢幕畫面2，而接著是螢幕畫面3)之時間戳記的螢幕快 照，一個狀態機可被產生(例如，狀態1->狀態2->狀態3)。該中央伺服器可以另外包含一個預設的狀態機，其係相符在家庭中的裝置之狀態機。從該iTV點選流資料所產生的狀態機可以和該預設的狀態機相比較，以驗證該產生的狀態機的轉變是否相符該預設的狀態機之轉變。
一個範例的狀態機係被描繪在第9圖中。該範例的狀態機具有四個狀態，其帶有連接每個狀態之各種的狀態轉變。該範例的狀態機係指出使用者可以移動在狀態1與狀態2之間以及/或是從狀態1移動至狀態3而至狀態4，並且返回到狀態1。例如，狀態1可以代表數位視訊錄影機的家庭螢幕畫面。狀態2可以代表天氣預報的顯示畫面。根據該狀態機，使用者可以從該家庭螢幕畫面前往觀看天氣畫面，並且接著回到家庭畫面。再者，狀態3可以代表一個可利用的錄影的媒體內容之表列，並且狀態4可以代表一個從該表列所選出的媒體節目。因此，使用者可以觀看可利用的錄影的媒體內容之表列，可以選擇及觀看一個媒體節目，並且當它們完成後，接著可以返回該家庭畫面功能表。若可能的狀態轉變是中央伺服器已知的，則該所收集到的資料可藉由比較所收集到的狀態轉變與可能的狀態轉變而被檢視其正確性。
若OCR引擎108存在時(方塊458)，則由本地的裝置/STB 102所產生之視訊係被傳送至該OCR引擎108(方塊460)。該OCR引擎108係接收由本地的裝置/STB 102所產生之視訊，並且從該視訊抽取出螢幕上的文字(方塊460)。 該抽取出的螢幕上的文字係接著傳送到收集單元110(方塊462)。該收集單元110可以將一個時間戳記關連到該所接收到的文字，並且接著可以將該時間戳記後的文字(以及其它識別該資料是從何家庭收集到的以及/或是觀眾之人口統計學的構成之資料)傳送到中央資料收集伺服器。
第10圖是一個範例的電腦系統之方塊圖，其可以執行由第4及/或8圖的流程圖所代表之所有的指令中之某些指令，以實施在第1及/或2圖中所示之所有的裝置中之某些裝置。該電腦系統500可以是個人電腦(PC)或是任何其它計算裝置。在所舉的例子中，電腦系統500係包含一個由電源504所供電的主處理單元502。該主處理單元502可以包含一個處理器506，該處理器506係藉由系統互連線508而電氣耦接至主記憶體裝置510、快閃記憶體裝置512、以及一或多個介面電路514。在一個例子中，該系統互連線508是位址/資料匯流排。當然，該項技術中具有通常技能者將輕易體認到，除了匯流排之外的互連線亦可被利用以連接該處理器506至其它裝置510-514。例如，一或多條專用的線以及/或是交叉開關(crossbar)可被利用以連接該處理器506至其它裝置510-514。
該處理器506可以是任何類型之眾所週知的處理器，例如，來自Intel Pentium® 系列的微處理器、Intel Itanium® 系列的微處理器、Intel Centrino® 系列的微處理器以及/或是Intel XScale® 系列的微處理器之處理器。該處理器506亦可以是數位信號處理器(DSP)或是其它為了信號處理功 能及/或應用最佳化的處理器。此外，該處理器506可包含任何類型之眾所週知的快取記憶體，例如，靜態隨機存取記憶體(SRAM)。該主記憶體裝置510可包含動態隨機存取記憶體(DRAM)以及/或是任何其它形式的隨機存取記憶體。例如，該主記憶體裝置510可包含雙倍資料速率的隨機存取記憶體(DDRAM)。該主記憶體裝置510亦可包含非依電性記憶體。在一個例子中，該主記憶體裝置510係儲存一個軟體程式，該軟體程式係以一種眾所週知的方式藉由該處理器506而被執行。該快閃記憶體裝置512可以是任何類型的快閃記憶體裝置。該快閃記憶體裝置512可儲存被利用來開機該電腦系統500的韌體。
該介面電路514可利用任何類型之眾所週知的介面標準而被實施，例如，乙太網路介面以及/或是萬用串列匯流排(USB)介面。一或多個輸入裝置516可連接至該介面電路514以用於將資料及命令輸入到主處理單元502中。例如，輸入裝置516可以是鍵盤、滑鼠、觸控螢幕、軌跡板、軌跡球、isopoint、以及/或是語音識別系統。
一或多個顯示器、印表機、揚聲器以及/或是其它輸出裝置518亦可以經由一或多個介面電路514連接至主處理單元502。顯示器518可以是陰極射線管(CRT)、液晶顯示器(LCD)或是任何其它類型的顯示器。顯示器518可產生在主處理單元502的動作期間所產生之資料的可見的指示。
該電腦系統500亦可以包含一或多個儲存裝置520。 例如，該電腦系統500可以包含一或多個硬碟機、光碟(CD)機、數位多用途光碟機(DVD)、以及/或是其它的電腦媒體輸入/輸出(I/O)裝置。
該電腦系統500亦可以經由到網路524的連線來和其它裝置522交換資料。該網路連線可以是任何類型的網路連線，例如，乙太網路連線、數位用戶迴路(DSL)、電話線、同軸電纜線、等等。該網路524可以是任何類型的網路，例如，網際網路、電話網路、有線電視網路以及/或是無線網路。該網路裝置522可以是任何類型的網路裝置522。例如，該網路裝置522可以是用戶、伺服器、硬碟機、等等。
該項技術中具有通常技能者從上文將會體認到，除了監視被廣播至例如是STB之本地的裝置且被本地的裝置所處理之節目外，該些所揭露的例子亦使得監視由本地的裝置(例如，功能表、iTV、等等)所產生之視訊成為可行的。由本地的裝置所產生之視訊可被監視以偵測PiP模式、偵測變換頻道、測量個人視訊錄影機(PVR)的使用與否、測量iTV的使用與否、以及產生點選流資料(例如，使用者選擇或是點選之螢幕上的項目)。
儘管上文係揭示範例的系統，且該系統尤其包含執行於硬體上之軟體，但應注意的是，此種系統係僅為例示性的且不應被視為限制性的。舉例而言，可以思及的是，所揭示之任何或全部的硬體及軟體構件都能夠專屬地實施於專用的硬體、軟體、韌體、或於硬體、韌體及/或軟體之某 種組合中。
此外，儘管某些製造方法、裝置及物件係已經在此作敘述，但是本專利之涵蓋範圍不受限於此。相反地，本專利係涵蓋不論在字義上或者在均等論之下落入後附的申請專利範圍之範疇之內的所有製造裝置、方法及物件。
100‧‧‧系統
102‧‧‧本地的裝置/機上盒(STB)
104‧‧‧視訊/音訊分類器
106‧‧‧視訊編解碼器
108‧‧‧光學字元識別引擎
110‧‧‧收集單元
112‧‧‧電視
202‧‧‧視訊數位化器
204‧‧‧音訊數位化器
206‧‧‧幀緩衝器
208‧‧‧音訊分析器
210‧‧‧主動式視訊分析器
212‧‧‧垂直遮沒間隔分析器
213‧‧‧文字抽取器
214‧‧‧決策模組
400、450‧‧‧程序
500‧‧‧電腦系統
502‧‧‧主處理單元
506‧‧‧處理器
508‧‧‧系統互連線
510‧‧‧主記憶體裝置
512‧‧‧快閃記憶體
514‧‧‧介面電路
516‧‧‧輸入裝置
518‧‧‧輸出裝置
520‧‧‧硬碟
522‧‧‧網路裝置
524‧‧‧網路
第1圖是一個監視機上盒的信號之範例的系統的概要圖示。
第2圖是一個用於偵測來自於STB的視訊之範例的視訊/音訊分類器的方塊圖。
第3圖是一個範例的巨集區塊陣列之圖示。
第4圖是代表可被執行以實施第2圖的裝置之範例的機器可讀取的指令之流程圖。
第5(a)圖是對於一個電視廣播信號之範例的直方圖之圖示，並且第5(b)圖是對於一個由STB所產生的電視信號之範例的直方圖之圖示。
第6(a)圖是內含在電視廣播信號的一個垂直遮沒間隔中之範例的資料之圖示，並且第6(b)圖是內含在一個由STB所產生的電視信號之垂直遮沒間隔中之範例的資料之圖示。
第7(a)圖是一個電視廣播信號之範例的音訊信號能量特性之圖示，並且第7(b)圖是一個由STB所產生的電視信號之範例的音訊信號能量特性之圖示。
第8圖是代表可被執行以實施第1圖的系統之範例的 機器可讀取的指令之流程圖。
第9圖是範例的狀態機之圖示。
第10圖是一個可被利用以實施第1圖及/或第2圖的裝置之範例的電腦系統之方塊圖。
100‧‧‧系統
102‧‧‧本地的裝置
104‧‧‧視訊/音訊分類器
106‧‧‧視訊編解碼器
108‧‧‧光學字元識別引擎
110‧‧‧收集單元
112‧‧‧電視

Claims (20)

  1. 一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之方法，該方法係包括：分類該音訊-視訊信號的一個視訊成分，其係藉由分析像素資料的一個直方圖、分析一個品質因數、或是嘗試偵測在該視訊成分中之內嵌的資料中之至少一種方式；分類該音訊-視訊信號的一個音訊成分，其係藉由嘗試偵測內嵌的音訊資料或是分析與該音訊成分相關的波形能量中之至少一種方式；以及根據該視訊分類或是該音訊分類中之至少一種來判斷該音訊-視訊信號是源自於本地的裝置或者是廣播信號。
  2. 如申請專利範圍第1項之方法，其中該視訊成分以及音訊成分中之至少一個係在分類之前被數位化。
  3. 如申請專利範圍第1項之方法，其中該直方圖係藉由分割一個視訊幀的一部份成為複數個區塊而被計算出的。
  4. 如申請專利範圍第1項之方法，其中分析該直方圖係包括以下的至少一個：(a)比較該直方圖與一個直方圖的資料庫、(b)判斷像素資料的一個分布、(c)比較該直方圖的值與一個預設的值、或是(d)比較該直方圖與一個先前的視訊幀之直方圖。
  5. 如申請專利範圍第1項之方法，其中該品質因數係包括對於模糊、方塊效應或是抖動中的至少一個做量測。
  6. 如申請專利範圍第1項之方法，其中嘗試偵測內嵌的 資料係包括分析一個垂直遮沒間隔是否有內嵌的視訊資料。
  7. 如申請專利範圍第1項之方法，其中嘗試偵測內嵌的音訊資料係包括分析該音訊信號是否有一個音訊碼。
  8. 如申請專利範圍第1項之方法，其更包括：藉由以下的至少一個以分類該音訊-視訊信號的視訊成分：(a)檢查該視訊幀之一個預設的部份之影像資料、或是(b)比較被抽取出的文字與一個樣版。
  9. 一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之方法，該方法係包括：分類該音訊-視訊信號的一個視訊成分，其係藉由分析像素資料的一個直方圖、分析一個品質因數、或是嘗試偵測在該視訊成分中之內嵌的資料中之至少一種方式；分類該音訊-視訊信號的一個音訊成分，其係藉由嘗試偵測內嵌的音訊資料或是分析與該音訊成分相關的波形能量中之至少一種方式；以及根據該視訊分類或是該音訊分類中之至少一種來判斷該音訊-視訊信號的一個來源，其中判斷該音訊-視訊成分的來源係包括結合與該視訊分類相關的值以及與該音訊分類相關的值。
  10. 一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之方法，該方法係包括：分類該音訊-視訊信號的一個視訊成分，其係藉由分析像素資料的一個直方圖、分析一個品質因數、或是嘗試偵 測在該視訊成分中之內嵌的資料中之至少一種方式；分類該音訊-視訊信號的一個音訊成分，其係藉由嘗試偵測內嵌的音訊資料或是分析與該音訊成分相關的波形能量中之至少一種方式；以及根據該視訊分類或是該音訊分類中之至少一種來判斷該音訊-視訊信號的一個來源，其中判斷該音訊-視訊信號的來源係包括：施加加權值至該視訊分類以及該音訊分類；結合該加權後的視訊分類以及該加權後的音訊分類以產生一個結合的結果；以及比較該結合的結果與一個預設的閾值。
  11. 一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之裝置，該裝置係包括：以下的至少兩個：(a)一個主動式視訊分析器，其係用以藉由分析像素資料的一個直方圖或是分析一個品質因數中的至少一種來分類該音訊-視訊信號的一個視訊成分；(b)一個垂直遮沒間隔分析器，其係用以藉由嘗試偵測內嵌的視訊資料來分類該音訊-視訊信號的視訊成分；(c)一個文字抽取器，其係用於偵測在該音訊-視訊信號的視訊成分中之文字或是取出在該音訊-視訊信號的視訊成分中之文字中的至少一種；以及(d)一個音訊分析器，其係用以藉由偵測內嵌的音訊資料或是分析一個音訊波形的能量中的至少一種來分類該音 訊-視訊信號的一個音訊成分；以及一個決策模組，其係用以根據該主動式視訊分析器、垂直遮沒間隔分析器、文字抽取器以及音訊分析器中的至少兩個之輸出來判斷該音訊-視訊信號是源自於本地的裝置或者是廣播信號。
  12. 如申請專利範圍第11項之裝置，其更包括：一個數位化器，其係被配置以轉換該音訊-視訊信號成為一個數位的表示；以及一個幀緩衝器，其係被配置以儲存一個數位視訊幀。
  13. 如申請專利範圍第11項之裝置，其中該主動式視訊分析器係被配置來藉由以下的至少一個以分析該直方圖：(a)比較該直方圖與一個直方圖的資料庫、(b)判斷像素資料的一個分布、(c)比較該直方圖的值與一個預設的值、或是(d)比較該直方圖與一個先前的視訊幀之直方圖。
  14. 如申請專利範圍第11項之裝置，其中該主動式視訊分析器係被配置以判斷該品質因數。
  15. 如申請專利範圍第11項之裝置，其中該主動式視訊分析器係被配置以檢查一個視訊幀的一部份是否有一個已知的影像。
  16. 一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之裝置，該裝置係包括：以下的至少兩個：(a)一個主動式視訊分析器，其係用以藉由分析像素資料的一個直方圖或是分析一個品質因數中的至少一種來分 類該音訊-視訊信號的一個視訊成分；(b)一個垂直遮沒間隔分析器，其係用以藉由嘗試偵測內嵌的視訊資料來分類該音訊-視訊信號的視訊成分；(c)一個文字抽取器，其係用於偵測在該音訊-視訊信號的視訊成分中之文字或是取出在該音訊-視訊信號的視訊成分中之文字中的至少一種；以及(d)一個音訊分析器，其係用以藉由偵測內嵌的音訊資料或是分析一個音訊波形的能量中的至少一種來分類該音訊-視訊信號的一個音訊成分；以及一個決策模組，其係用以根據該主動式視訊分析器、垂直遮沒間隔分析器、文字抽取器以及音訊分析器中的至少兩個之輸出來判斷該音訊-視訊信號的一個來源，其中該垂直遮沒間隔分析器係被配置以偵測隱藏字幕資料、互動電視觸發事項、或是計量資料中之至少一個。
  17. 一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之裝置，該裝置係包括：以下的至少兩個：(a)一個主動式視訊分析器，其係用以藉由分析像素資料的一個直方圖或是分析一個品質因數中的至少一種來分類該音訊-視訊信號的一個視訊成分；(b)一個垂直遮沒間隔分析器，其係用以藉由嘗試偵測內嵌的視訊資料來分類該音訊-視訊信號的視訊成分；(c)一個文字抽取器，其係用於偵測在該音訊-視訊信號的視訊成分中之文字或是取出在該音訊-視訊信號的視訊成 分中之文字中的至少一種；以及(d)一個音訊分析器，其係用以藉由偵測內嵌的音訊資料或是分析一個音訊波形的能量中的至少一種來分類該音訊-視訊信號的一個音訊成分；以及一個決策模組，其係用以根據該主動式視訊分析器、垂直遮沒間隔分析器、文字抽取器以及音訊分析器中的至少兩個之輸出來判斷該音訊-視訊信號的一個來源，其中該文字抽取器係被配置以比較被抽取出的文字與已知的文字。
  18. 一種用於區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號之裝置，該裝置係包括：以下的至少兩個：(a)一個主動式視訊分析器，其係用以藉由分析像素資料的一個直方圖或是分析一個品質因數中的至少一種來分類該音訊-視訊信號的一個視訊成分；(b)一個垂直遮沒間隔分析器，其係用以藉由嘗試偵測內嵌的視訊資料來分類該音訊-視訊信號的視訊成分；(c)一個文字抽取器，其係用於偵測在該音訊-視訊信號的視訊成分中之文字或是取出在該音訊-視訊信號的視訊成分中之文字中的至少一種；以及(d)一個音訊分析器，其係用以藉由偵測內嵌的音訊資料或是分析一個音訊波形的能量中的至少一種來分類該音訊-視訊信號的一個音訊成分；以及一個決策模組，其係用以根據該主動式視訊分析器、 垂直遮沒間隔分析器、文字抽取器以及音訊分析器中的至少兩個之輸出來判斷該音訊-視訊信號的一個來源，其中該決策模組係被配置以：指定一個加權值給每個接收到的輸出；結合該些加權後的輸出值以形成一個結合的值；以及比較該結合的值與一個預設的閾值以判斷該信號的來源。
  19. 一種用於儲存區別一個源自於一本地的裝置之音訊-視訊信號與一個廣播信號的指令之機器可讀取的媒體，該些指令係被建構以使得一個機器：藉由分析像素資料的一個直方圖、分析一個品質因數、或是嘗試偵測在該視訊成分中之內嵌的資料中之至少一種來分類該音訊-視訊信號的一個視訊成分；藉由嘗試偵測內嵌的音訊資料或是分析與該音訊成分相關的波形能量之至少一種來分類該音訊-視訊信號的一個音訊成分；以及根據該視訊分類或是該音訊分類中之至少一個來判斷該音訊-視訊信號是源自於本地的裝置或者是廣播信號。
  20. 如申請專利範圍第19項之機器可讀取的媒體，其係儲存指令為被建構以使得該機器藉由以下的至少一種方式來分析該直方圖：(a)比較該直方圖與一個直方圖的資料庫、(b)判斷像素資料的一個分布、(c)比較該直方圖的值與一個預設的值、或是(d)比較該直方圖與一個先前的視訊幀之直方圖。
TW093138737A 2003-12-30 2004-12-14 用於區別源自於本地裝置的信號與廣播信號之方法、裝置及儲存其指令之機器可讀取媒體 TWI399973B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US53319003P 2003-12-30 2003-12-30

Publications (2)

Publication Number Publication Date
TW200526023A TW200526023A (en) 2005-08-01
TWI399973B true TWI399973B (zh) 2013-06-21

Family

ID=34748869

Family Applications (1)

Application Number Title Priority Date Filing Date
TW093138737A TWI399973B (zh) 2003-12-30 2004-12-14 用於區別源自於本地裝置的信號與廣播信號之方法、裝置及儲存其指令之機器可讀取媒體

Country Status (5)

Country Link
US (2) US7643090B2 (zh)
CA (2) CA2551998C (zh)
MY (1) MY138161A (zh)
TW (1) TWI399973B (zh)
WO (1) WO2005065159A2 (zh)

Families Citing this family (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7827312B2 (en) 2002-12-27 2010-11-02 The Nielsen Company (Us), Llc Methods and apparatus for transcoding metadata
US9027043B2 (en) 2003-09-25 2015-05-05 The Nielsen Company (Us), Llc Methods and apparatus to detect an operating state of a display
US7786987B2 (en) 2003-09-25 2010-08-31 The Nielsen Company (Us), Llc Methods and apparatus to detect an operating state of a display based on visible light
WO2006020560A2 (en) 2004-08-09 2006-02-23 Nielsen Media Research, Inc Methods and apparatus to monitor audio/visual content from various sources
AU2006279518B2 (en) 2005-08-16 2010-06-10 Nielsen Media Research, Inc. Display device on/off detection methods and apparatus
US8582729B2 (en) * 2006-02-24 2013-11-12 Qualcomm Incorporated System and method of controlling a graphical user interface at a wireless device
EP3010167B1 (en) 2006-03-27 2017-07-05 Nielsen Media Research, Inc. Methods and systems to meter media content presented on a wireless communication device
CA2654869C (en) * 2006-06-12 2016-08-30 Invidi Technologies Corporation System and method for inserting media based on keyword search
US8019162B2 (en) * 2006-06-20 2011-09-13 The Nielsen Company (Us), Llc Methods and apparatus for detecting on-screen media sources
CN101536513B (zh) * 2006-06-20 2012-01-11 尼尔森（美国）有限公司 用于检测屏上媒体源的方法和设备
US8117541B2 (en) 2007-03-06 2012-02-14 Wildtangent, Inc. Rendering of two-dimensional markup messages
WO2009026803A1 (en) * 2007-08-27 2009-03-05 Yuvad Technologies Co., Ltd. A method for identifying motion video content
US8503991B2 (en) 2008-04-03 2013-08-06 The Nielsen Company (Us), Llc Methods and apparatus to monitor mobile devices
US8090822B2 (en) 2008-04-11 2012-01-03 The Nielsen Company (Us), Llc Methods and apparatus for nonintrusive monitoring of web browser usage
WO2009140818A1 (en) * 2008-05-21 2009-11-26 Yuvad Technologies Co., Ltd. A system for facilitating the archiving of video content
US20100215210A1 (en) * 2008-05-21 2010-08-26 Ji Zhang Method for Facilitating the Archiving of Video Content
WO2009140817A1 (en) 2008-05-21 2009-11-26 Yuvad Technologies Co., Ltd. A method for facilitating the search of video content
WO2009140819A1 (en) * 2008-05-21 2009-11-26 Yuvad Technologies Co., Ltd. A system for facilitating the search of video content
WO2009140820A1 (en) * 2008-05-21 2009-11-26 Yuvad Technologies Co., Ltd. A system for extracting a finger print data from video/audio signals
WO2009140824A1 (en) * 2008-05-22 2009-11-26 Yuvad Technologies Co., Ltd. A system for identifying motion video/audio content
US8548192B2 (en) * 2008-05-22 2013-10-01 Yuvad Technologies Co., Ltd. Method for extracting a fingerprint data from video/audio signals
US20100169911A1 (en) * 2008-05-26 2010-07-01 Ji Zhang System for Automatically Monitoring Viewing Activities of Television Signals
CN101685591B (zh) * 2008-09-26 2011-06-22 鸿富锦精密工业（深圳）有限公司 自动检测显示装置所支持图片格式的检测装置及方法
US8180712B2 (en) 2008-09-30 2012-05-15 The Nielsen Company (Us), Llc Methods and apparatus for determining whether a media presentation device is in an on state or an off state
US8793717B2 (en) 2008-10-31 2014-07-29 The Nielsen Company (Us), Llc Probabilistic methods and apparatus to determine the state of a media device
FR2939265A1 (fr) * 2008-12-03 2010-06-04 Thomson Licensing Procede de detection de mode film ou mode camera
US8156517B2 (en) 2008-12-30 2012-04-10 The Nielsen Company (U.S.), Llc Methods and apparatus to enforce a power off state of an audience measurement device during shipping
US8375404B2 (en) 2008-12-30 2013-02-12 The Nielsen Company (Us), Llc Methods and apparatus to enforce a power off state of an audience measurement device during shipping
US20110234900A1 (en) * 2010-03-29 2011-09-29 Rovi Technologies Corporation Method and apparatus for identifying video program material or content via closed caption data
US20110288931A1 (en) * 2010-05-20 2011-11-24 Google Inc. Microsite models
US8527268B2 (en) 2010-06-30 2013-09-03 Rovi Technologies Corporation Method and apparatus for improving speech recognition and identifying video program material or content
US8761545B2 (en) 2010-11-19 2014-06-24 Rovi Technologies Corporation Method and apparatus for identifying video program material or content via differential signals
US9129258B2 (en) * 2010-12-23 2015-09-08 Citrix Systems, Inc. Systems, methods, and devices for communicating during an ongoing online meeting
US8918802B2 (en) 2011-02-28 2014-12-23 The Nielsen Company (Us), Llc Methods and apparatus to monitor media exposure
US9380356B2 (en) 2011-04-12 2016-06-28 The Nielsen Company (Us), Llc Methods and apparatus to generate a tag for media content
US9209978B2 (en) 2012-05-15 2015-12-08 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9515904B2 (en) 2011-06-21 2016-12-06 The Nielsen Company (Us), Llc Monitoring streaming media content
US9001223B2 (en) * 2011-09-28 2015-04-07 Advanced Micro Devices, Inc. Method and apparatus for applying camera shake compensation to video content
CN104137557A (zh) 2011-12-19 2014-11-05 尼尔森（美国）有限公司 用于对媒体呈现装置进行归属的方法和设备
US9210467B2 (en) 2012-02-07 2015-12-08 Turner Broadcasting System, Inc. Method and system for a universal remote control
US9692535B2 (en) 2012-02-20 2017-06-27 The Nielsen Company (Us), Llc Methods and apparatus for automatic TV on/off detection
US8917745B2 (en) * 2012-03-11 2014-12-23 Broadcom Corporation Channel bonding with orbital angular momentum
US9240956B2 (en) 2012-03-11 2016-01-19 Broadcom Corporation Communication system using orbital angular momentum
US9282366B2 (en) 2012-08-13 2016-03-08 The Nielsen Company (Us), Llc Methods and apparatus to communicate audience measurement information
US9232337B2 (en) * 2012-12-20 2016-01-05 A-Volute Method for visualizing the directional sound activity of a multichannel audio signal
US9167276B2 (en) 2012-12-28 2015-10-20 Turner Broadcasting System, Inc. Method and system for providing and handling product and service discounts, and location based services (LBS) in an automatic content recognition based system
US9313544B2 (en) 2013-02-14 2016-04-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9294815B2 (en) 2013-03-15 2016-03-22 The Nielsen Company (Us), Llc Methods and apparatus to discriminate between linear and non-linear media
WO2014144589A1 (en) 2013-03-15 2014-09-18 The Nielsen Company (Us), Llc Systems, methods, and apparatus to identify linear and non-linear media presentations
CN103957405B (zh) * 2014-04-24 2016-04-27 深圳创维数字技术有限公司 一种机顶盒测试方法、装置及系统
US9699499B2 (en) 2014-04-30 2017-07-04 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9747906B2 (en) 2014-11-14 2017-08-29 The Nielson Company (Us), Llc Determining media device activation based on frequency response analysis
US9924224B2 (en) 2015-04-03 2018-03-20 The Nielsen Company (Us), Llc Methods and apparatus to determine a state of a media presentation device
US9762965B2 (en) 2015-05-29 2017-09-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
WO2017050594A1 (en) 2015-09-10 2017-03-30 Koninklijke Philips N.V. Automatic image feature removal
US9894412B2 (en) * 2016-03-09 2018-02-13 Silveredge Technologies Pvt. Ltd. Method and system for detection of television advertisements using broadcasting channel characteristics
EP3297298B1 (en) 2016-09-19 2020-05-06 A-Volute Method for reproducing spatially distributed sounds
US10701438B2 (en) 2016-12-31 2020-06-30 Turner Broadcasting System, Inc. Automatic content recognition and verification in a broadcast chain
US10726852B2 (en) 2018-02-19 2020-07-28 The Nielsen Company (Us), Llc Methods and apparatus to perform windowed sliding transforms
US11049507B2 (en) 2017-10-25 2021-06-29 Gracenote, Inc. Methods, apparatus, and articles of manufacture to identify sources of network streaming services
US10629213B2 (en) 2017-10-25 2020-04-21 The Nielsen Company (Us), Llc Methods and apparatus to perform windowed sliding transforms
US10733998B2 (en) 2017-10-25 2020-08-04 The Nielsen Company (Us), Llc Methods, apparatus and articles of manufacture to identify sources of network streaming services
US10839225B2 (en) * 2018-07-11 2020-11-17 The Nielsen Company (Us), Llc Methods and apparatus to monitor a split screen media presentation
US11405674B2 (en) 2019-11-12 2022-08-02 The Nielsen Company (Us), Llc Methods and apparatus to identify media for ahead of time watermark encoding

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5548346A (en) * 1993-11-05 1996-08-20 Hitachi, Ltd. Apparatus for integrally controlling audio and video signals in real time and multi-site communication control method
US5880788A (en) * 1996-03-25 1999-03-09 Interval Research Corporation Automated synchronization of video image sequences to new soundtracks
US6067126A (en) * 1998-01-05 2000-05-23 Intel Corporation Method and apparatus for editing a video recording with audio selections

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6819863B2 (en) 1998-01-13 2004-11-16 Koninklijke Philips Electronics N.V. System and method for locating program boundaries and commercial boundaries using audio categories
US6523175B1 (en) * 1999-08-02 2003-02-18 Nielsen Media Research, Inc. Methods and apparatus for identifying the source of a user selected signal via an intermediate frequency probe
JP2002044572A (ja) * 2000-07-21 2002-02-08 Sony Corp 情報信号処理装置及び情報信号処理方法および情報信号記録装置
US6766523B2 (en) * 2002-05-31 2004-07-20 Microsoft Corporation System and method for identifying and segmenting repeating media objects embedded in a stream

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5548346A (en) * 1993-11-05 1996-08-20 Hitachi, Ltd. Apparatus for integrally controlling audio and video signals in real time and multi-site communication control method
US5880788A (en) * 1996-03-25 1999-03-09 Interval Research Corporation Automated synchronization of video image sequences to new soundtracks
US6067126A (en) * 1998-01-05 2000-05-23 Intel Corporation Method and apparatus for editing a video recording with audio selections

Also Published As

Publication number Publication date
WO2005065159A2 (en) 2005-07-21
MY138161A (en) 2009-04-30
US8553148B2 (en) 2013-10-08
CA2551998C (en) 2015-11-17
TW200526023A (en) 2005-08-01
US20100077424A1 (en) 2010-03-25
CA2551998A1 (en) 2005-07-21
US7643090B2 (en) 2010-01-05
CA2899107C (en) 2017-12-05
US20070211170A1 (en) 2007-09-13
CA2899107A1 (en) 2005-07-21
WO2005065159A3 (en) 2006-05-26

Similar Documents

Publication Publication Date Title
TWI399973B (zh) 用於區別源自於本地裝置的信號與廣播信號之方法、裝置及儲存其指令之機器可讀取媒體
US9301007B2 (en) Methods and apparatus to monitor audio/visual content from various sources
US8917937B2 (en) Methods and apparatus for identifying primary media content in a post-production media content presentation
JP5086393B2 (ja) 複数のコンテンツ・ウィンドウを含むマルチメディア・プレゼンテーションを監視する方法および装置
JP2005513663A (ja) コマーシャル及び他のビデオ内容の検出用のファミリーヒストグラムに基づく技術
US20230119783A1 (en) Methods and apparatus to monitor a split screen media presentation
JP2005534248A (ja) ビデオ・システムの動作を制御する方法とシステム
JP2010015588A (ja) 動画像データの分類装置
KR101436908B1 (ko) 화상 처리 장치 및 화상 처리 방법
MXPA06007503A (es) Metodos y aparatos para distinguir una señal que se origina desde un dispositivo local de una señal de difusion
MX2007001734A (es) Métodos y aparatos para monitorear contenidos audio/visuales de varias fuentes

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees