TW202021370A - 顯示器、播放內容監控方法及播放內容監控系統 - Google Patents

顯示器、播放內容監控方法及播放內容監控系統 Download PDF

Info

Publication number
TW202021370A
TW202021370A TW107142364A TW107142364A TW202021370A TW 202021370 A TW202021370 A TW 202021370A TW 107142364 A TW107142364 A TW 107142364A TW 107142364 A TW107142364 A TW 107142364A TW 202021370 A TW202021370 A TW 202021370A
Authority
TW
Taiwan
Prior art keywords
sub
playback
feature sequence
content
multimedia
Prior art date
Application number
TW107142364A
Other languages
English (en)
Other versions
TWI743418B (zh
Inventor
陳仲軒
Original Assignee
緯創資通股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 緯創資通股份有限公司 filed Critical 緯創資通股份有限公司
Priority to TW107142364A priority Critical patent/TWI743418B/zh
Priority to CN201811532863.8A priority patent/CN111246269B/zh
Priority to US16/285,164 priority patent/US10984837B2/en
Publication of TW202021370A publication Critical patent/TW202021370A/zh
Application granted granted Critical
Publication of TWI743418B publication Critical patent/TWI743418B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/36Monitoring, i.e. supervising the progress of recording or reproducing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/48Matching video sequences
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer

Abstract

本發明提供一種顯示器、播放內容監控方法及播放內容監控系統。所述方法包括:在指定時間點擷取多媒體內容的播放畫面;以第一特徵擷取模型將播放畫面轉換為播放畫面特徵序列;判斷對應於指定時間點的參考畫面特徵序列是否匹配於播放畫面特徵序列;若是,判定前述多媒體內容正確播放,反之則判定前述多媒體內容未正確播放。

Description

顯示器、播放內容監控方法及播放內容監控系統
本發明是有關於一種顯示器、播放內容監控方法及播放內容監控系統,且特別是有關於一種可判斷特定影片是否有被正確播放的顯示器、播放內容監控方法及播放內容監控系統。
數位看板的內容管理系統為常用來提供廣告商播放廣告、管理顯示器或是廣告節目製播的一套服務系統。為了增加廣告資訊的含量,或是加強廣告呈現的顯示效果,一個數位看板的螢幕常常會被切割成多個子畫面,而每個子畫面則可播放各種多媒體,例如影片、圖片、文字等內容。藉此,廣告商可以透過播放多個子畫面而組合出富有變化及具有內容相依性的廣告,以達到對觀看者行銷商品的效果。
然而,若每個時間點的播放畫面或子畫面之間具有關聯性,則在播放每個時間點的播放畫面或子畫面時的同步即為一項至關重要的事情。若畫面出現不同步的情形,很可能令廣告無法正確地表達原意,進而影響廣告的效果。在此情況下,對於數位看板的內容管理系統而言,判斷每個數位看板上播放的內容是否與原本的安排同步,則成為上述系統在進行監控服務時的主要任務。
在習知技術中,各個數位看板上的播放內容將會被回傳至內容管理系統,並透過列表的方式呈現。之後,可再透過人為判斷的方式來監控廣告內容是否正確地播放。具體而言,數位看板將會在某個時間點所顯示的畫面回傳至內容管理系統,以供內容管理系統判斷數位看板所回傳的畫面是否與預期的相同,藉以判斷廣告內容是否已正確地播放。
然而,在上述作法中,由於每個數位看板皆需多次地回傳在不同時間點所顯示的畫面,因此將可能因需傳輸的畫面資料過多而過度耗費網路頻寬。並且,數位看板所回傳的畫面資料也需要大量的人力進行逐一檢視,其不僅將花費較多時間,且人眼亦難以精準地確認各畫面或子畫面是否同步播放。
另一方面,從播放中的影片擷取畫面需要考慮FPS(Frame per Second)。在此情況下,在相同的時間點(例如,同一秒)上每次截取出來的影格(Frame)也不盡相同,因此畫面像素數值也無法完全相同,所以無法使用像素比對的方式做為是否同步的判斷依據。
有鑑於此,本發明提供一種顯示器、播放內容監控方法及播放內容監控系統,其可用於解決以上技術問題。
本發明提供一種播放內容監控方法,包括:由顯示器在一指定時間點擷取一多媒體內容的一播放畫面;由顯示器以一第一特徵擷取模型將播放畫面轉換為一播放畫面特徵序列,並發送播放畫面特徵序列至一播放管理裝置;由播放管理裝置判斷一原始多媒體內容中對應於該指定時間點的一參考畫面特徵序列是否匹配於播放畫面特徵序列;反應於判定參考畫面特徵序列匹配於播放畫面特徵序列,判定前述多媒體內容正確播放;反應於判定參考畫面特徵序列不匹配於播放畫面特徵序列,判定前述多媒體內容未正確播放。
本發明提供一種播放內容監控系統,包括顯示器及播放管理裝置。顯示器經配置以:在一指定時間點擷取一多媒體內容的一播放畫面;以一第一特徵擷取模型將播放畫面轉換為一播放畫面特徵序列,並發送播放畫面特徵序列。播放管理裝置經配置以:接收播放畫面特徵序列,並在判斷一原始多媒體內容中對應於該指定時間點的一參考畫面特徵序列是否匹配於播放畫面特徵序列;反應於判定參考畫面特徵序列匹配於播放畫面特徵序列,判定前述多媒體內容正確播放;反應於判定參考畫面特徵序列不匹配於播放畫面特徵序列,判定前述多媒體內容未正確播放。
本發明提供一種顯示器,包括顯示模組、儲存電路及處理器。儲存電路儲存多個模組。處理器耦接顯示模組及儲存電路,存取前述模組以執行下列步驟:顯示模組在一指定時間點擷取多媒體內容的一播放畫面;以一第一特徵擷取模型將播放畫面轉換為一播放畫面特徵序列,並發送播放畫面特徵序列。
基於上述,本發明實施例的顯示器可回傳從播放畫面擷取的播放畫面特徵序列至播放管理裝置,而播放管理裝置可在獲得播放畫面特徵序列及參考畫面特徵序列之間的差異度之後,據以判定顯示器是否已正確地同步播放多媒體內容,因此可提升播放管理裝置監控顯示器的效率及精確性。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
請參照圖1,其是依據本發明之一實施例繪示的播放管理系統示意圖。在圖1中,播放管理系統100包括顯示器110及播放管理裝置120,其中顯示器110例如是可用於播放廣告或其他多媒體內容的數位看板或類似的顯示裝置,而播放管理裝置120可用於監控顯示器110播放前述廣告或多媒體內容的播放情形。在本發明的實施例中,當顯示器110所顯示的畫面包括多個子畫面時,播放管理裝置120例如可藉由判斷顯示器110是否同步地播放前述子畫面來監控顯示器110是否正確地播放前述子畫面,相關細節將在之後詳述。
如圖1所示,顯示器110包括顯示模組112、儲存電路114及處理器116。顯示模組112可用於播放包括多個子畫面的多媒體內容,並可實現為液晶顯示模組(liquid crystal display,LCD)、薄膜電晶體(TFT)-LCD、有機發光二極體(organic light-emitting diode,OLED)、柔性顯示模組、三維(3D)顯示模組等,但可不限於此。儲存電路114例如是記憶體、硬碟或是其他任何可用於儲存資料的元件,而可用以記錄多個程式碼或模組。處理器116耦接於顯示模組112及儲存電路114,並可為一般用途處理器、特殊用途處理器、傳統的處理器、數位訊號處理器、多個微處理器(microprocessor)、一個或多個結合數位訊號處理器核心的微處理器、控制器、微控制器、特殊應用集成電路(Application Specific Integrated Circuit,ASIC)、場可程式閘陣列電路(Field Programmable Gate Array,FPGA)、任何其他種類的積體電路、狀態機、基於進階精簡指令集機器(Advanced RISC Machine,ARM)的處理器以及類似品。
播放管理裝置120包括彼此耦接的儲存電路122及處理器124,而其個別可能的實施方式可參考顯示器110的儲存電路114及處理器116的相關說明,於此不再贅述。
請參照圖2及圖3,其中圖2是依據本發明之一實施例繪示的播放內容監控方法流程圖,圖3是依據本發明之一實施例繪示的應用情境圖。圖2的方法可由圖1的顯示器110及播放管理裝置120協同執行而實現,以下即搭配圖1及圖3所示的內容來說明圖2中各步驟的細節。
首先,在步驟S210中,在顯示器110播放多媒體內容310的過程中,由顯示器110在指定時間點擷取多媒體內容310的播放畫面。如圖3所示,多媒體內容310包括多個多媒體子內容311、312及313,其中各多媒體子內容311~313例如是各自播放的影片、圖片、文字。
在本實施例中,顯示器110的處理器116可在多個指定時間點T0 、T1 、…、Ti 、…、Tn (i介於0及n之間,i為整數,n為正整數)個別擷取多媒體內容310的播放畫面,其中指定時間點T0 ~Tn 可由設計者依需求而設定為任意的時間點(例如為每一秒鐘)。為便於理解,以下將僅基於處理器116在指定時間點Ti 擷取的播放畫面IMi進行說明,而本領域具通常知識者應可相應推得處理器116基於在其他指定時間點所擷取的播放畫面(未另標示)所進行的操作。
在圖3中,播放畫面IMi包括對應於多媒體子內容311~313的多個子播放畫面IMi1、IMi2、IMi3,而其分別為多媒體子內容311~313在指定時間點Ti 所顯示的內容。
在步驟S220中,可由顯示器110以第一特徵擷取模型118將播放畫面IMi轉換為播放畫面特徵序列Hi ,並發送播放畫面特徵序列Hi 至播放管理裝置120。在本實施例中,顯示器110的處理器116可將播放畫面IMi輸入至第一特徵擷取模型118,並以第一特徵擷取模型118從播放畫面IMi擷取的特徵序列作為播放畫面特徵序列Hi
在一實施例中,第一特徵擷取模型118例如是一類神經網路模型,而處理器116可將播放畫面IMi輸入至此類神經網路模型,並以此類神經網路模型從播放畫面IMi擷取的特徵序列作為播放畫面特徵序列Hi 。舉例而言,上述類神經網路可採用GoogleNet來實現,其可將所接收到的播放畫面IMi轉換為對應於1000種類型物件的機率分布序列,而此機率分布序列即可作為播放畫面特徵序列Hi 而輸出。在其他實施例中,設計者亦可採用SoftNet或其他類似的模型來實現第一特徵擷取模型118,但可不限於此。
在步驟S230中,可由播放管理裝置120在參考時間點擷取原始多媒體內容350的參考畫面。在本實施例中,原始多媒體內容350包括多個原始子內容351、352及353,其中各原始子內容351~353可一對一地對應於多媒體子內容311~313。亦即,原始子內容351可相同於多媒體子內容311,原始子內容352可相同於多媒體子內容312,原始子內容353可相同於多媒體子內容313。
在本實施例中,播放管理裝置120的處理器124可在多個參考時間點T0 ’、T1 ’、…、Ti ’、…、Tn ’個別擷取原始多媒體內容350的畫面作為參考畫面,其中參考時間點T0 ’~Tn ’可一對一地對應於指定時間點T0 ~Tn 。換言之,參考時間點Ti ’及指定時間點Ti 可為同一個播放時間點。舉例而言,若指定時間點Ti 為多媒體內容310開始播放後的第10ms,則參考時間點Ti ’即為原始多媒體內容350開始播放後的第10ms。
為對應先前實施例中的教示,以下僅基於處理器124在參考時間點Ti ’(其對應於指定時間點Ti )所擷取的參考畫面IMi’進行討論。在圖3中,參考畫面IMi’包括對應於原始子內容351~353的多個子參考畫面IMi1’、IMi2’、IMi3’,而其分別即為原始子內容351~353在參考時間點Ti ’所顯示的內容。
在步驟S240中,可由播放管理裝置120以第二特徵擷取模型126將參考畫面IMi’轉換為參考畫面特徵序列Pi 。在本實施例中,第二特徵擷取模型126可相同於第一特徵擷取模型118。舉例而言,處理器116及處理器124可採用同一個類神經網路來建構第一特徵擷取模型118及第二特徵擷取模型126。
在一實施例中,若顯示器110能夠正確地同步播放多媒體子內容311~313,則在同一個播放時間點被擷取的播放畫面IMi及參考畫面IMi’應會彼此相同。並且,由於處理器116及處理器124係採用同一個類神經網路來建構第一特徵擷取模型116及第二特徵擷取模型126,因此播放畫面特徵序列Hi 應亦會相同於參考畫面特徵序列Pi 。相反地,若顯示器110因故障或其他原因而未能同步地播放多媒體子內容311~313,則播放畫面IMi將不同於參考畫面IMi’。相應地,播放畫面特徵序列Hi 亦會不同於參考畫面特徵序列Pi
換言之,若播放畫面特徵序列Hi 相同於參考畫面特徵序列Pi ,則播放管理裝置120即可得知顯示器110在指定時間點Ti 已正確地同步播放多媒體子內容311~313。
因此,在步驟S250中,可由播放管理裝置120判斷參考畫面特徵序列Pi 是否匹配於播放畫面特徵序列Hi 。在一實施例中,播放管理裝置120的處理器124可計算參考畫面特徵序列Pi 與播放畫面特徵序列Hi 之間的差異度,並判斷差異度是否小於等於一閾值。若是,則處理器124可判定參考畫面特徵序列Pi 匹配於播放畫面特徵序列Hi ,反之則可判定參考畫面特徵序列Pi 不匹配於播放畫面特徵序列Hi 。在不同的實施例中,上述閾值可以是趨近於0的數值,但可不限於此。
在一實施例中,處理器124可計算參考畫面特徵序列Pi 與播放畫面特徵序列Hi 之間的KL散度(KL divergence)來作為上述差異度。上述KL散度可表示為
Figure 02_image001
。舉例而言,假設播放畫面特徵序列Hi 為[0.1, 0.2, 0.7],而參考畫面特徵序列Pi 為[0.1, 0.2, 0.7],則上述KL散度即為:
Figure 02_image003
在此情況下,處理器124即可判定參考畫面特徵序列Pi 匹配於播放畫面特徵序列Hi
然而,假設播放畫面特徵序列Hi 為[0.01, 0.6, 0.39],而參考畫面特徵序列Pi 為[0.1, 0.2, 0.7],則上述KL散度即為:
Figure 02_image005
在此情況下,處理器124即可判定參考畫面特徵序列Pi 未匹配於播放畫面特徵序列Hi
在其他實施例中,設計者亦可依需求而採用任意方式來表徵參考畫面特徵序列Pi 與播放畫面特徵序列Hi 之間的差異度,例如JS散度(JS divergence),並不限於以上實施方式。
請再次參照圖2,反應於判定參考畫面特徵序列Pi 匹配於該播放畫面特徵序列Hi ,則播放管理裝置120可在步驟S260中判定多媒體內容310正確播放,例如多媒體子內容311~313已正確地被播放。相反地,反應於判定參考畫面特徵序列Pi 不匹配於該播放畫面特徵序列Hi ,則播放管理裝置120可在步驟S270中判定多媒體內容310未正確播放,例如多媒體子內容311~313未正確地被播放。
由上可知,本發明提出的播放內容監控方法可讓顯示器僅需回傳從播放畫面轉換的播放畫面特徵序列至播放管理裝置,因而可有效地節省網路頻寬。並且,由於播放管理裝置僅需經由簡單計算即可得出播放畫面特徵序列及參考畫面特徵序列之間的差異度,進而判定顯示器是否已正確地同步播放多媒體內容,因此可提升播放管理裝置監控顯示器的效率及精確性。
在其他實施例中,本發明更提出以下機制來具體找出是哪個子畫面出現不同步的情形,以下將輔以圖4進行說明。
請參照圖4,其是依據圖3繪示的另一應用情境示意圖。在本實施例中,顯示器110可藉由第一特徵擷取模型118來將子播放畫面IMi1、IMi2、IMi3轉換為對應的子播放畫面特徵序列Hi1 、Hi2 、Hi3 ,並將子播放畫面特徵序列Hi1 ~Hi3 發送至播放管理裝置120。
相應地,播放管理裝置120亦可藉由第二特徵擷取模型126來將子參考畫面IMi1’、IMi2’、IMi3’轉換為對應的子參考畫面特徵序列Pi1 、Pi2 、Pi3
在一實施例中,反應於判定多媒體子內容311~313未正確播放,播放管理裝置120可進一步計算各子播放畫面特徵序列Hi1 、Hi2 、Hi3 與對應的子參考畫面特徵序列Pi1 、Pi2 、Pi3 之間的差異度,藉以具體找出是多媒體子內容311~313中的何者未正確地被播放。舉例而言,假設只有子播放畫面特徵序列Hi1 與子參考畫面特徵序列Pi1 之間的差異度不為0,即代表是對應於子播放畫面特徵序列Hi1 的多媒體子內容311未被正確地播放。舉例而言,假設子播放畫面特徵序列Hi2 與子參考畫面特徵序列Pi2 之間的差異度,以及子播放畫面特徵序列Hi3 與子參考畫面特徵序列Pi3 之間的差異度皆不為0,即代表對應於子播放畫面特徵序列Hi2 及Hi3 的多媒體子內容312及313未被正確地播放。
藉此,可令相關人員(例如,廣告商)能夠更為精準地掌握播放器110的顯示情形,進而據以採取相應的維護或調校措施,比如重新啟動顯示器110,或者快轉顯示器110的播放畫面。
綜上所述,本發明實施例可讓顯示器僅需回傳從播放畫面擷取的播放畫面特徵序列至播放管理裝置,因而可有效地節省網路頻寬。並且,由於播放管理裝置僅需經由簡單計算即可得出播放畫面特徵序列及參考畫面特徵序列之間的差異度,進而判定顯示器是否正確地同步播放多媒體內容。藉此,可在不需考慮FPS的情況下,提升播放管理裝置監控顯示器的效率及精確性。
此外,顯示器還可將播放畫面中各個子播放畫面對應的子播放畫面特徵序列發送至播放管理裝置,以供播放管理裝置在判定顯示器未正確顯示多媒體內容之後,進一步找出是哪個多媒體子內容未被正確地播放。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
100:播放管理系統110:顯示器112:顯示模組114:儲存電路116:處理器118:第一特徵擷取模型120:播放管理裝置122:儲存電路124:處理器126:第二特徵擷取模型310:多媒體內容311、312、313:多媒體子內容350:原始多媒體內容351、352、353:原始子內容Hi:播放畫面特徵序列Hi1、Hi2、Hi3:子播放畫面特徵序列IMi:播放畫面IMi1、IMi2、IMi3:子播放畫面IMi’:參考畫面IMi1’、IMi2’、IMi3’:子參考畫面Pi:參考畫面特徵序列Pi1、Pi2、Pi3:子參考畫面特徵序列S210~S270:步驟T0、T1、…、Ti、…、Tn:指定時間點T0’、T1’、…、Ti’、…、Tn’:參考時間點
圖1是依據本發明之一實施例繪示的播放管理系統示意圖。 圖2是依據本發明之一實施例繪示的播放內容監控方法流程圖。 圖3是依據本發明之一實施例繪示的應用情境圖。 圖4是依據圖3繪示的另一應用情境示意圖。
S210~S270:步驟

Claims (18)

  1. 一種播放內容監控方法,包括: 由一顯示器在一指定時間點擷取一多媒體內容的一播放畫面; 由該顯示器以一第一特徵擷取模型將該播放畫面轉換為一播放畫面特徵序列,並發送該播放畫面特徵序列至一播放管理裝置; 由該播放管理裝置判斷一原始多媒體內容中對應於該指定時間點的一參考畫面特徵序列是否匹配於該播放畫面特徵序列; 反應於判定該參考畫面特徵序列匹配於該播放畫面特徵序列,判定該多媒體內容正確播放; 反應於判定該參考畫面特徵序列不匹配於該播放畫面特徵序列,判定該多媒體內容未正確播放。
  2. 如申請專利範圍第1項所述的方法,包括: 由該顯示器將該播放畫面輸入至該第一特徵擷取模型,並以該第一特徵擷取模型從該播放畫面擷取的一第一特徵序列作為該播放畫面特徵序列; 由該播放管理裝置在一參考時間點擷取該原始多媒體內容的一參考畫面,且該參考時間點對應於該指定時間點;以及 由該播放管理裝置將該參考畫面輸入至一第二特徵擷取模型,並以該第二特徵擷取模型從該參考畫面擷取的一第二特徵序列作為該參考畫面特徵序列。
  3. 如申請專利範圍第2項所述的方法,其中該第一特徵擷取模型及該第二特徵擷取模型為相同的類神經網路。
  4. 如申請專利範圍第1項所述的方法,其中判斷該參考畫面特徵序列是否匹配於該播放畫面特徵序列的步驟包括: 計算該參考畫面特徵序列與該播放畫面特徵序列之間的一差異度,並判斷該差異度是否小於等於一閾值; 反應於該差異度小於等於該閾值,判定該參考畫面特徵序列匹配於該播放畫面特徵序列; 反應於該差異度不小於等於該閾值,判定該參考畫面特徵序列不匹配於該播放畫面特徵序列。
  5. 如申請專利範圍第4項所述的方法,其中該差異度為該參考畫面特徵序列與該播放畫面特徵序列之間的一KL散度或一JS散度。
  6. 如申請專利範圍第2項所述的方法,其中該多媒體內容包括多個多媒體子內容,該播放畫面包括對應於該些多媒體子內容的多個子播放畫面,其中該原始多媒體內容包括對應於該些多媒體子內容的多個原始子內容,該參考畫面包括對應於該些原始子內容的多個子參考畫面。
  7. 如申請專利範圍第6項所述的方法,其中該些多媒體子內容的一第一多媒體子內容對應於該些原始子內容的一第一原始子內容,該些子播放畫面包括對應於該第一多媒體子內容的一第一子播放畫面,該些子參考畫面包括對應於該第一原始子內容的一第一子參考畫面,且所述方法更包括: 由該顯示器以該第一特徵擷取模組將該第一子播放畫面轉換為一第一子播放畫面特徵序列,並發送該第一子播放畫面特徵序列至該播放管理裝置; 由該播放管理裝置以該第二特徵擷取模組將該第一子參考畫面轉換為一第一子參考畫面特徵序列; 反應於判斷該第一子播放畫面特徵序列匹配於該第一子參考畫面特徵序列,判定該第一多媒體子內容正確播放;以及 反應於判斷該第一子播放畫面特徵序列未匹配於該第一子參考畫面特徵序列,判定該第一多媒體子內容未正確播放。
  8. 一種播放內容監控系統,包括: 一顯示器,其經配置以: 在一指定時間點擷取一多媒體內容的一播放畫面; 以一第一特徵擷取模型將該播放畫面轉換為一播放畫面特徵序列,並發送該播放畫面特徵序列;以及 一播放管理裝置,其經配置以: 接收該播放畫面特徵序列,並判斷一原始多媒體內容中對應於該指定時間點的一參考畫面特徵序列是否匹配於該播放畫面特徵序列; 反應於判定該參考畫面特徵序列匹配於該播放畫面特徵序列,判定該些多媒體內容正確播放; 反應於判定該參考畫面特徵序列不匹配於該播放畫面特徵序列,判定該些多媒體內容未正確播放。
  9. 如申請專利範圍第8項所述的系統,其中該顯示器將該播放畫面輸入至該第一特徵擷取模型,並以該第一特徵擷取模型從該播放畫面擷取的一第一特徵序列作為該播放畫面特徵序列;以及 該播放管理裝置在一參考時間點擷取該原始多媒體內容的一參考畫面,且該參考時間點對應於該指定時間點; 該播放管理裝置將該參考畫面輸入至一第二特徵擷取模型,並以該第二特徵擷取模型從該參考畫面擷取的一第二特徵序列作為該參考畫面特徵序列。
  10. 如申請專利範圍第9項所述的系統,其中該第一特徵擷取模型及該第二特徵擷取模型為相同的類神經網路。
  11. 如申請專利範圍第8項所述的系統,其中該播放管理裝置經配置以: 計算該參考畫面特徵序列與該播放畫面特徵序列之間的一差異度,並判斷該差異度是否小於等於一閾值; 反應於該差異度小於等於該閾值,判定該參考畫面特徵序列匹配於該播放畫面特徵序列; 反應於該差異度不小於等於該閾值,判定該參考畫面特徵序列不匹配於該播放畫面特徵序列。
  12. 如申請專利範圍第11項所述的系統,其中該差異度為該參考畫面特徵序列與該播放畫面特徵序列之間的一KL散度或一JS散度。
  13. 如申請專利範圍第9項所述的方法,其中該多媒體內容包括多個多媒體子內容,該播放畫面包括對應於該些多媒體子內容的多個子播放畫面,其中該原始多媒體內容包括對應於該些多媒體子內容的多個原始子內容,該參考畫面包括對應於該些原始子內容的多個子參考畫面。
  14. 如申請專利範圍第13項所述的系統,其中該些多媒體子內容的一第一多媒體子內容對應於該些原始子內容的一第一原始子內容,該些子播放畫面包括對應於該第一多媒體子內容的一第一子播放畫面,該些子參考畫面包括對應於該第一原始子內容的一第一子參考畫面,且該顯示器更以該第一特徵擷取模組將該第一子播放畫面轉換為一第一子播放畫面特徵序列,並發送該第一子播放畫面特徵序列至該播放管理裝置,而該播放管理裝置更經配置以: 以該第二特徵擷取模組將該第一子參考畫面轉換為一第一子參考畫面特徵序列; 反應於判斷該第一子播放畫面特徵序列匹配於該第一子參考畫面特徵序列,判定該第一多媒體子內容正確播放,;以及 反應於判斷該第一子播放畫面特徵序列未匹配於該第一子參考畫面特徵序列,判定該第一多媒體子內容未正確播放。
  15. 一種顯示器,包括: 一顯示模組; 一儲存電路,儲存多個模組;以及 一處理器,耦接該顯示模組及該儲存電路,存取該些模組以執行下列步驟: 該顯示模組在一指定時間點擷取該多媒體內容的一播放畫面; 以一第一特徵擷取模型將該播放畫面轉換為一播放畫面特徵序列,並發送該播放畫面特徵序列。
  16. 如申請專利範圍第15項所述的顯示器,其中該播放畫面特徵序列被發送至一播放管理裝置,以供該播放管理裝置判斷該顯示器是否同步地播放該多媒體內容。
  17. 如申請專利範圍第15項所述的顯示器,其中該多媒體內容包括多個多媒體子內容,該播放畫面包括對應於該些多媒體子內容的多個子播放畫面。
  18. 如申請專利範圍第17項所述的顯示器,其中該些多媒體子內容包括一第一多媒體子內容,該些子播放畫面包括對應於該第一多媒體子內容的一第一子播放畫面,且該處理器更以該第一特徵擷取模組將該第一子播放畫面轉換為一第一子播放畫面特徵序列,並發送該第一子播放畫面特徵序列至一播放管理裝置,以供該播放管理裝置判斷該顯示器是否正確地播放該第一多媒體子內容。
TW107142364A 2018-11-28 2018-11-28 顯示器、播放內容監控方法及播放內容監控系統 TWI743418B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW107142364A TWI743418B (zh) 2018-11-28 2018-11-28 顯示器、播放內容監控方法及播放內容監控系統
CN201811532863.8A CN111246269B (zh) 2018-11-28 2018-12-14 显示器、播放内容监控方法及播放内容监控系统
US16/285,164 US10984837B2 (en) 2018-11-28 2019-02-25 Display, method for monitoring played content and system using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW107142364A TWI743418B (zh) 2018-11-28 2018-11-28 顯示器、播放內容監控方法及播放內容監控系統

Publications (2)

Publication Number Publication Date
TW202021370A true TW202021370A (zh) 2020-06-01
TWI743418B TWI743418B (zh) 2021-10-21

Family

ID=70770911

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107142364A TWI743418B (zh) 2018-11-28 2018-11-28 顯示器、播放內容監控方法及播放內容監控系統

Country Status (3)

Country Link
US (1) US10984837B2 (zh)
CN (1) CN111246269B (zh)
TW (1) TWI743418B (zh)

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8291340B1 (en) * 1999-10-14 2012-10-16 Hoshiko Llc Method and apparatus for providing content to users
JP4692999B2 (ja) * 2006-04-26 2011-06-01 パイオニア株式会社 コンテンツ表示システム及び方法
CN101969460B (zh) * 2010-09-28 2013-07-03 同辉佳视(北京)信息技术有限公司 一种多屏幕视频同步播放的方法和系统
CN101969579B (zh) * 2010-10-28 2013-03-06 冠捷显示科技(厦门)有限公司 联网电视动态监控装置
CN102122471B (zh) * 2010-12-20 2013-04-24 上海仙视电子有限公司 远程监控实施广告内容同步播放功能的广告机系统
EP2692142A1 (en) * 2011-03-30 2014-02-05 Thomson Licensing Method for image playback verification
CN103024464B (zh) * 2011-12-31 2016-03-30 中国科学院计算技术研究所 提供与视频播放内容相关信息的系统和方法
US20140089815A1 (en) * 2012-09-21 2014-03-27 Google Inc. Sharing Content-Synchronized Ratings
CN203645711U (zh) * 2013-10-31 2014-06-11 上海灵信信息科技有限公司 一种远程监播异步控制系统
EP3024236A1 (en) * 2014-11-20 2016-05-25 Alcatel Lucent Method and device for transmission of a video
US10067988B2 (en) * 2015-07-21 2018-09-04 Uber Technologies, Inc. User-based content filtering and ranking to facilitate on-demand services
CN105187266B (zh) * 2015-07-28 2018-09-21 小米科技有限责任公司 信息监控方法和装置
US11010595B2 (en) * 2017-03-23 2021-05-18 Samsung Electronics Co., Ltd. Facial verification method and apparatus
CN107909119B (zh) * 2017-12-11 2020-05-19 深圳先进技术研究院 集合间相似度的确定方法和装置

Also Published As

Publication number Publication date
US10984837B2 (en) 2021-04-20
CN111246269A (zh) 2020-06-05
US20200168254A1 (en) 2020-05-28
CN111246269B (zh) 2022-03-04
TWI743418B (zh) 2021-10-21

Similar Documents

Publication Publication Date Title
US20240056628A1 (en) Synchronizing media content tag data
US9609373B2 (en) Presentation timeline synchronization across audio-video (AV) streams
CN102714708B (zh) 用于同步内容播放的方法
CN104168466B (zh) 一种多屏视频同步播放方法及装置
JP5687041B2 (ja) 情報表示装置および情報表示方法
CN108495152B (zh) 一种视频直播方法、装置、电子设备及介质
WO2018128240A1 (en) Context based augmented advertisement
TWI505698B (zh) 多視角畫面之同步顯示系統以及多視角畫面之同步顯示方法
US20110175992A1 (en) File selection system and method
TW202019149A (zh) 影像控制裝置以及使用該裝置之電視牆系統與輸出影像至電視牆的控制方法
TWI478579B (zh) 3d影像顯示方法及介面單元
TWI743418B (zh) 顯示器、播放內容監控方法及播放內容監控系統
US9842572B2 (en) Methods and apparatus for displaying video including variable frame rates
CN103888808A (zh) 视频显示方法、显示设备、辅助设备及系统
WO2016123909A1 (zh) 播放媒体内容的方法、服务器和显示装置
JP2016004064A (ja) コンテンツ配信装置及びコンテンツ配信システム
US7890651B2 (en) Sending content from multiple content servers to clients at time reference points
TWI520577B (zh) 立體影像輸出裝置與相關的立體影像輸出方法
TWI556635B (zh) 媒體播放方法
KR102131741B1 (ko) 다수의 사이니지의 영상 동기화 방법
US11736662B1 (en) Systems and methods for precision downstream synchronization of content
TWI804144B (zh) 運動賽事影片處理方法及系統
CN207354501U (zh) 一种3d显示视频处理拼接器
CN107809652B (zh) 一种隐式信息传输方法、装置及系统
CN104735532A (zh) 一种基于统计信息的海报屏播放方法