TW201817245A - 適應多元觀眾的多媒體呈現方法與系統 - Google Patents

Abstract

一種適應多元觀眾的多媒體呈現方法與系統，方法包括由系統串流播送一多媒體至使用者端裝置，並於串流播送多媒體時，以系統提供的至少一個自動辨識模組即時辨識出多媒體中符合觸發某個服務的的事件，其中事件觸發的服務為依據使用者的喜好設定出事件與對應的服務。當系統在播送多媒體時，於辨識得出有一特定事件時，將形成一註釋，註釋記載事件的時間戳記或幀序列號，以及對應事件的服務，於使用者端裝置播放多媒體時，其中軟體手段根據註釋記載內容，於事件發生的時間觸發對應的服務，藉此呈現適應多元觀眾的多媒體內容。

Description

適應多元觀眾的多媒體呈現方法與系統

所揭露之實施例關於一種多媒體呈現方法與系統，特別是在播送多媒體時可以根據觀眾的屬性而呈現適應多元觀眾的多媒體內容的一種多媒體呈現方法與系統。

在傳統收看無線電視台節目的方式中，全部的觀眾從同一個電視台收看的內容是一樣的。另收看有線電視台提供視頻的方式中，雖然不同有線電視台業者可能會提供不同的廣告資訊，卻僅是依據某個區域的觀眾屬性，但同一區域觀眾看到的同一電視台內容也都是一樣的。

傳統以衛星、無線與有線播送電視均為單向廣播方式，觀眾只能被動接受內容提供者提供的內容。在現在透過網路播送內容的方式日趨成熟，因此有網路電台的成立，所播送的內容雖是不變的，但可以根據數據分析的結果播送其他與播送對象有關或有興趣的資訊，例如關聯式廣告，或是問卷、投票等動作；另更衍生出一種直播內容的技術，就是內容提供者透過網路播送即時內容，使用者使用電腦裝置接收，而同樣地，這些播送到使用者的內容都是一樣的。

至於以上所述與播送內容相關資訊都是透過內容特徵而定，內容特徵可以從內容中的詮釋資料(metadata)得到資訊，如地理 位置資訊、時間資訊，或是透過人工註記標籤的方式，使得建立相關資訊的程式識別得到標籤所表示的資訊，以產出播送內容的關聯資訊。例如，當播送內容是美食，所述詮釋資料可以提供相關的地點、影片標籤，讓內容提供者可以同時播送與美食相關的廣告內容。

然而，同一個多媒體內容對不同的觀看對象來說，會需要不同的資訊，包括對多媒體內容的註解、廣告以及互動的項目。舉例來說，若以一教學影片來說，每個學生都有不同的需求，需要不同的說明、註釋與參考內容，但是以現行的技術而言，即便能夠加入以上所述的關聯式資訊，仍無法提供準確而符合個人需求的個人化的影音服務。

有鑑於習知技術以傳統廣播方式，或透過網路播送多媒體的方式僅能提供一樣的內容以及部分關聯式資訊，尚未能準確提供符合觀看者需要的內容，所揭露之實施例係提供一種適應多元觀眾的視頻播放方法與系統，能夠在播送同一個多媒體內容到各使用者端裝置的同時，再以數據網路同步傳遞符合個別差異的附加內容，最後到使用者端裝置時，兩種內容可合併播出，甚至可以在特定事件發生時，觸發由使用者設定的動作行為。

該適應多元觀眾的視頻播放方法包括由系統串流播送一多媒體至使用者端裝置，於串流播送多媒體時，以系統提供的至少一個自動辨識模組根據一觸發事件表，以及辨識得出多媒體中的事件，其中觸發事件表包括至少一多媒體、對應於多媒體的事件以及對應的服務。當辨識得出有一事件時，形成一註釋，註釋記載事件的時間戳記或幀序列號，以及對應事件的服務，於是傳送註釋至使用者端裝置，並於使用者端裝置播放多媒體時，其中軟體手段根據註釋記載內容，對照觸發事件表，於事件發生的時間觸 發對應的服務。

進一步地，當事件發生的時間觸發對應的服務包括插入關聯多媒體的資訊、於多媒體上疊合文字或影像、切換多媒體中的畫面，或連結第三方資訊。而使用者喜好設定為使用者操作終端裝置，設定每個事件與對應的服務，建立所述的觸發事件表。

該適應多元觀眾的視頻播放系統包括有一多媒體來源，包括儲存多筆多媒體的資料庫，或是提供即時內容的提供者；一多媒體播放模組，用以對使用者端裝置即時串流播送多媒體；至少一個自動辨識模組，於串流播送多媒體時，用以辨識出多媒體中符合觸發事件表的事件；一多媒體註釋模組，引入使用者喜好設定，當辨識得出有事件時，形成註釋。當系統於即時串流播放多媒體時，也傳送對應某個事件形成的註釋，使得使用者端裝置播放多媒體時，於事件發生的時間觸發對應的服務。

為了能更進一步瞭解本發明為達成既定目的所採取之技術、方法及功效，請參閱以下有關本發明之詳細說明、圖式，相信本發明之目的、特徵與特點，當可由此得以深入且具體之瞭解，然而所附圖式僅提供參考與說明用，並非用來對本發明加以限制者。

10‧‧‧多媒體資料庫

101‧‧‧自動辨識模組

103‧‧‧多媒體播放模組

105‧‧‧多媒體註釋模組

107‧‧‧使用者喜好處理模組

111,112,113‧‧‧終端裝置

115‧‧‧使用者端播放裝置

114‧‧‧使用者端電腦裝置

20‧‧‧多媒體資料庫

201‧‧‧自動辨識模組庫

211,212,213,214,215‧‧‧自動辨識模組

207‧‧‧使用者喜好選擇

271,272,273,274‧‧‧使用者喜好設定

281,282,283,284‧‧‧觸發事件表

80‧‧‧使用者端裝置

801‧‧‧遮蔽圖案

90‧‧‧使用者端裝置

901‧‧‧多媒體顯示畫面

903‧‧‧服務執行畫面

100‧‧‧使用者端播放裝置

120‧‧‧影像物件

140‧‧‧使用者端電腦裝置

142‧‧‧物件解說

步驟S301~S305‧‧‧多媒體呈現方法流程

步驟S401~S405‧‧‧多媒體呈現方法流程

步驟S501~S511‧‧‧多媒體呈現方法流程

步驟S601~S611‧‧‧多媒體呈現方法流程

步驟S701~S709‧‧‧多媒體呈現方法流程

圖1顯示為本發明系統架構實施例示意圖；圖2顯示為本發明系統運作實施例示意圖；圖3所示為描述本發明適應多元觀眾的多媒體呈現方法中播送前準備程序實施例流程；圖4所示為描述本發明適應多元觀眾的多媒體呈現方法中提供使用者喜好設定的實施例流程；圖5所示為描述本發明適應多元觀眾的多媒體呈現方法的實施例流程；圖6所示為描述本發明適應多元觀眾的多媒體呈現方法中觸 發服務的實施例流程；圖7所示為描述本發明適應多元觀眾的多媒體呈現方法的實施例流程；圖8顯示為實現本發明適應多元觀眾的多媒體呈現方法的情境示意圖之一；圖9顯示為實現本發明適應多元觀眾的多媒體呈現方法的情境示意圖之二；圖10顯示為實現本發明適應多元觀眾的多媒體呈現方法的情境示意圖之三。

本揭露書描述的發明涉及一種適應多元觀眾的多媒體呈現方法與系統，可以讓內容提供者對觀眾播放多媒體內容的同時，更同步提供與多媒體有關的資訊而適應多元觀眾。

其中所播送的多媒體內容可為視頻或音頻內容，在系統端可以透過影音辨識的技術得到影像中的特徵，或是聲音中的特徵，如採用一種自動內容辨識(Automatic Content Recognition，ACR)技術，其運用了機器視覺系統(Machine Vision)，這是運用成像系統擷取並分析多媒體內容中可見的資訊(Visual Information)，進而透過電腦運算辨識出其中的影像；自動內容辨識亦採用了模式辨識(pattern recognition)技術，這是一種通過電腦技術以數學技術方法自動處理和判讀影像中資訊的技術，可以判斷多媒體內容中的場景；自動內容辨識可採用語音辨識(speech recognition)，係以電腦技術將人類的語音內容轉換為相應的文字，進而識別出其中內容與對應的資訊；自動內容辨識更可使用文字辨識(text recognition)技術，可以擷取得出影像中的文字，如影片中的歌詞、對白，或是聲音中的對話，進而辨識得出內容。自動內容辨識另可配合其他各種影音識別技術達成自動內容辨識的目的，例如人 臉辨識、行為辨識、形狀辨識、色彩辨識等。

於是，實現適應多元觀眾的多媒體呈現方法的系統可以根據自動內容辨識得到的內容提供對應的服務，配合使用者喜好設定後，可以隨著多媒體內容同步處理根據多媒體內容中設定的事件而觸發產生的動作。根據實施例，當事件發生的時間觸發對應的服務包括：插入關聯多媒體的資訊、於多媒體上疊合一文字或一影像、切換多媒體中的畫面、連結其他第三方資訊，或可起始社群軟體與朋友分享此一事件等。

舉例來說，針對多元觀眾不同的需求，本發明提出的視頻播送方法，特別是針對同時使用網路的收視的終端使用者，使用者可以一方面觀看傳統電視或是網路電視上的視頻，一方面使用另一連接網路的裝置接收同步視頻的資訊。另不排除使用者使用網路電視或是電腦裝置收看視頻，也以相同的裝置接收同步視頻的資訊，例如在收看視頻的同時以分割畫面、跳出視窗或是特定顯示區域上顯示同步的資訊。

圖1顯示本發明系統架構實施例示意圖，系統可以一個雲端服務實現，其中的雲端伺服器將可提供多個使用者執行適應多元觀眾的多媒體呈現方法的服務，每個註冊使用者可以儲存依照自己喜好的一或多個喜好設定檔，並不排除可以藉此雲端服務分享自己的喜好設定檔，提供別的使用者參考設定。

根據圖示，系統設有一多媒體來源，可為一儲存多筆多媒體的資料庫，如此圖顯示的多媒體資料庫10，或一提供即時內容的內容提供者。多媒體可泛指透過系統播送的視頻或音頻。系統主要服務之一為對多個終端使用者播送多媒體，系統端設有多媒體播放模組103，終端如圖示的使用者端裝置(使用者端播放裝置115、使用者端電腦裝置114)，多媒體播放模組103對使用者端裝置播送的方式較佳為即時串流的服務，如經傳統有線或無線方式播送的即時電視內容、或經網路播送內容的現場直播，亦不排除 可以串流播送的隨選視訊(VOD/MOD)等。

系統設有多個自動辨識模組101，自動辨識模組101可以上述自動內容辨識(ACR)實現，在一實施例中，系統預備一個自動辨識模組庫，包括多個自動辨識模組101，依照類別存放，並供系統使用者選擇與安排，自動辨識模組101為一種軟體或搭配硬體的技術，系統可以根據播送的多媒體屬性配置至少一個自動辨識模組101，以此辨識多媒體內容中的特定事件，實施例可以一個自動辨識模組101或是多個互相搭配的自動辨識模組101決定一個事件，每個自動辨識模組101從視頻或音頻中辨識一種事件。辨識的方法如以上所述，可以機器視覺系統、模式辨識、語音辨識、文字辨識等，更能利用多媒體內容中的詮釋資料(metadata)取得初步資訊，如時間、地理位置等，作為設定自動辨識模組101的依據。

系統可以針對多樣屬性的多媒體內容分類設計多樣的自動辨識模組101，提供對特定屬性的多媒體提供辨識此類型多媒體中的多種事件，以提供對應的多種服務，一個事件可以對比一或多個服務，或是多個事件符合後，才執行一個服務，這些選項成為提供給使用者設定事件與服務喜好的依據。

系統設有使用者喜好處理模組107，在開始服務前，提供使用者於各種終端裝置(111,112,113)上設定事件與對應的服務。舉例來說，使用者以終端裝置(111,112,113)接收系統提供的至少一個自動辨識模組對應的一或多個事件，以及系統提供對應各事件之服務，使用者透過網頁瀏覽器或專屬軟體程式選擇系統對某種屬性的多媒體，選擇以至少一個自動辨識模組101可以辨識得到的事件，以及系統對此事件提供的服務。之後，經選擇事件與對應服務，可建立使用者喜好設定，並傳送使用者喜好設定至系統，由使用者喜好處理模組107管理。

系統設有多媒體註釋模組105，當系統以多媒體播放模組103 對使用者端裝置串流播送多媒體時，自動辨識模組101即時辨識其中內容，當辨識出有某一事件時，同時查詢使用者喜好設定，可以得出對應的服務，於是系統透過多媒體註釋模組105形成一註釋，註釋記載事件的時間戳記或幀序列號(表示事件發生的時間點)，以及對應事件的服務。

之後，根據此實施例，在系統經多媒體播放模組103串流播送多媒體到使用者端播放裝置115的時候，系統更即時辨識得到某個事件時，形成註釋，多媒體註釋模組105將註釋同步傳送到使用者端電腦裝置114，於是使用者端電腦裝置114可以根據註釋，對照先前使用者設定之觸發事件表，根據註釋的時間戳記或幀序列號觸發對應該事件的服務。

因為每個使用者會有不同喜好，因此即便系統播送同一多媒體內容，但不同的使用者可以有不同的喜好設定，使得得到事件與對應的服務都會有差異，通過本發明適應多元觀眾的視頻播放方法，可以在不同的使用者端裝置上呈現不同的多媒體內容。藉此可以達到根據使用者喜好設定產生差異化服務的目的。

需要一提的是，由於系統在播送多媒體時，需要即時辨識當中的事件，以及根據使用者喜好設定產生對應服務的觸發事件表，並形成註釋，每個動作都需要處理時間，因此在實際運作時，系統設有暫存多媒體串流內容的記憶體，使得可能會影響播送多媒體一個極短的時間差。其中觸發事件表依據使用者喜好設定而包括有至少一多媒體、對應於多媒體的事件以及對應的服務。

更者，使用者端裝置，可以為單一有連網播放以及多媒體能力的電腦裝置，由此電腦裝置負責接受與播放多媒體，並同時擔負接收註釋與執行事件對應服務的工作。另不排除在使用者端以用於播放多媒體的顯示器(如電視等的使用者端播放裝置115)接收多媒體串流，再以使用者端電腦裝置114同步接收資訊，並執行服務。其中，使用者端播放裝置115如電視、顯示器等；使用 者端電腦裝置114如一般個人電腦、手持的平板裝置或智慧型手機。

圖2顯示為本發明系統運作實施例示意圖，配合圖3與圖4所示為描述本發明適應多元觀眾的多媒體呈現方法中，播送前準備程序實施例流程。

此例顯示系統端有一多媒體資料庫20，系統提供自動辨識模組庫201，如圖3所示在播送多媒體前步驟S301，其中預備有多個自動辨識模組211,212,213,214,215(實施例使用至少一個自動辨識模組)，分別擔負辨識多媒體內容的某一事件的服務，可以上述自動內容辨識(ACR)實現各個自動辨識模組211,212,213,214,215，並能配合其他各種影音識別技術達成自動內容辨識的目的，例如人臉辨識、行為辨識、形狀辨識、色彩辨識等。

在一實施例中，實務上，在內容提供者播送多媒體內容以及取得所述自動內容辨識(ACR)模組時，系統可以先得知多媒體的類別，比如是棒球比賽、音樂表演等，讓自動辨識模組可以限縮到特定範圍，簡化系統運作的負擔，並能增加內容判斷的效率。

系統使用自動內容辨識(ACR)技術辨識多媒體中的特徵，可以針對視頻特徵與音頻特徵，以視頻為例，自動內容辨識針對單一多媒體中的幀(frame)偵測特定影像特徵，例如辨識其中某個人、車輛、物品等；更者，自動內容辨識亦可針對複數個多媒體的幀(frames)偵測當中的連續影像特徵，例如辨識一個人的行為、一個場景的變化，並能計算發生某個事件的次數。

再如步驟S303，系統向使用者端的終端裝置傳送系統藉由自動辨識模組提供事件辨識對應的服務項目，如圖示系統通過使用者喜好選擇207提供多個使用者設定自己對於某個事件觸發某個服務的喜好，形成使用者喜好設定271,272,273,274。如步驟S305所述，使用者選擇多媒體中有興趣的事件，舉例來說，系統提供使用者針對一種運動項目的事件，如棒球比賽的全壘打、三振等 事件，接著設定對應這些項目執行的服務，如辨識出有全壘打時，即進入相關討論區加入討論、開啟社群軟體與朋友分享此一事件，並可以選擇執行慈善捐款的頁面，如此，可以建立包括至少一多媒體、對應多媒體的事件以及對應多媒體的服務的個人化觸發事件表。

接著如圖4描述多媒體呈現方法中提供使用者喜好設定的實施例流程。當如步驟S401，系統提供使用者設定對應事件的服務，經使用者選擇後形成包括至少一多媒體、對應多媒體的事件與服務的觸發事件表281,282,283以及284，於是如步驟S403，傳送喜好設定至系統，使得系統取得使用者喜好設定中對應的自動辨識事件的服務，並如步驟S405，在系統端建立個人化觸發事件表281,282,283以及284。另外，觸發事件表281,282,283以及284之後可以儲存在其各別相對應之使用者端裝置，由使用者操作編輯事件與對照的服務，如步驟S305，使用者選擇對應項目以建立個人化觸發事件表。

根據一實施例，系統提供多種多媒體的分類(category)，每個分類可以包括至少一個自動辨識模組，用以偵測多媒體中的事件，此時提供使用者設定這些事件的單一或組合與對應的服務，系統端設定的觸發事件表即記載事件與服務之間AND,OR,NOT等運算子產生的對照表。若事件為多個狀況的組合，事件可以為一種數值(如，次數)，相關的運算子為大於、小於、等於(>,<,=,>=,<=,！=)。更者，事件也可為空值(NULL)，可以表示不管任何情況都要執行某個服務，如加入某個討論區。若事件有連續性，表示有一連串事件的組合才會觸發某個服務，此時事件相關的運算需要判斷一連續事件，或可為多個事件的組合。

其中連續事件例如先發生事件A，之後發生事件B，接著有事件C，當系統自動辨識模組在一時間內連續辨識事件A,B,C，即符合觸發事件表，觸發一對應的服務。多個事件的組合也就是事 件之間並非連續，也不論順序，當符合使用者設定的事件組合的多個事件發生後，即觸發對應的服務，例如喜好設定包括事件A,B,C的組合，不一定要按照事件A,B,C的順序，事件組合內的全部事件A,B,C都被偵測到，可能是事件B先被辨識到，接著是事件C，接著系統又識別到事件A，即符合此事件組合的條件，於是系統即通知使用者端裝置執行對應的服務。

於是，實現適應多元觀眾的多媒體呈現方法的系統可以根據自動內容辨識得到的內容提供對應的服務，配合使用者喜好設定後，可以隨著多媒體內容同步處理根據多媒體內容中設定的事件而觸發產生的動作。

系統開始對使用者播送多媒體，如圖5所示的流程。開始時，如步驟S501，系統預備多媒體內容，根據實施例，其中播送多媒體內容的方式可如傳統播送視頻的方式，如衛星電視(satellite TV)、數位視訊廣播(Digital Video Broadcasting，DVB)、有線電視(cable TV)，以及網路盛行後常見的網路電視(IP TV)或直播(Live webcast)，可以為即時播送的電視內容、新聞，或是隨著使用者從網路接收的直播內容，亦可為隨選視訊的內容，如步驟S503，系統對使用者端裝置播送多媒體，即時播送多媒體的同時，如步驟S505，系統另以自動內容辨識技術根據個別的個人化觸發事件表以及多媒體決定一事件，透過辨識取得多媒體內的特定事件，特別是根據使用者喜好設定的事件得出對應的服務，如步驟S507，根據多媒體的事件決定註釋(Annotation)，也就是當系統利用自動內容辨識技術即時辨識出播送的多媒體中有某個事件，對照使用者喜好與觸發事件的條件(criteria)，根據事件的時間或幀序列號(frame sequence number)加入註釋，如步驟S509所述，註釋標明播放或處理時間點的時間戳記(timestamp)或幀序列號(frame sequence number)。當中需要一提的是，當系統即時播送多媒體內容，但是需要通過自動內容辨識、事件判斷等步驟，因 此會在播送前以系統記憶體暫存多媒體內容，處理之後才播送到使用者端。

之後傳送註釋到使用者端裝置執行註釋程序，如步驟S511，在使用者端裝置上呈現多媒體，特別是一種適應多元觀眾的多媒體呈現方法，在使用者端裝置播放多媒體時，執行於使用者端裝置的軟體程式將根據註釋的時間戳記或幀序列號觸發對應事件的服務。

所述適應多元觀眾的多媒體呈現方法包括一方面以傳統或網路方式(non-IP或IP網路)對使用者端裝置播送即時內容，如棒球類、節慶類、教學類多媒體，若經網路播送多媒體的方式，可以多播(multicast)或單播(unicast)方式播送多媒體，特別是同時可以播送到多個使用者端裝置上，使用者端裝置中播放多媒體的裝置如傳統電視、網路電視，亦可以為手持或穿戴式電腦裝置。另一方面播送同步於多媒體的註釋內容，這些註釋記載著對應事件發生時間或幀序列號，以及對應服務的資訊，使得終端使用者觀看或收聽多媒體內容時，可以取得個人化的服務。如每個使用者關注棒球比賽中支持隊伍會有不同關注的事件，也會伴隨不同的畫面切換、討論區等服務；如對於節慶節目，每個使用者想要看的細節也不同；針對教學節目，每個使用者可以用自己選擇的服務(如同步接收題目、答案)產生不同的互動教學的效果。

舉例來說，當系統的自動辨識模組識別出節目產生一個歡呼聲，符合某個使用者的觸發事件表記載的事件，包含對應的服務，產生註釋，由使用者端裝置依照註釋內容執行服務，如畫面依照使用者喜好設定可切換到某個人的特寫上，看他的表情，或是提供有關這個事件的解說，可以影像、文字或聲音呈現在使用者端播放裝置上。

再以一例說明，系統事先得到使用者針對棒球比賽的喜好設定與產生的觸發事件表，當系統播送棒球比賽時，這一般是多機 作業，辨識出打出全壘打的事件，此時對照使用者喜好設定，對照服務為切換畫面到拍一段牛棚現況以及慢速重播揮棒瞬間。當服務涉及一個額外影片片段，相關請求可以回傳給系統，由系統透過網路播送相關的影片片段。

當系統執行本發明適應多元觀眾的多媒體呈現方法時，除了提供多媒體播送服務外，更提供如上述實施例所述的個人化多媒體呈現的加值服務，系統此時可以根據使用者設定的喜好設定進行統計，作為識別使用者喜好與建議的基礎，甚至提供其他類似需求的使用者設定建議。所述對應某事件的服務可以由起始一個影片/聲音/文字片段、程式(觸發使用者端裝置執行某一軟體程式)、連結(連結第三方資訊)等，亦可為當有另一次事件發生時，而關閉某項進行中的服務。

圖6接著顯示本發明適應多元觀眾的多媒體呈現方法中觸發服務的實施例流程。

在系統播送多媒體時，如步驟S601，透過自動辨識模組解析多媒體中影像特徵(或聲音特徵)，此例顯示可在視頻中取得各幀畫素色彩分佈，或從音頻中採樣聲音波形，如步驟S603，接著系統以軟體或搭配硬體的手段比對比對特徵模型，如場景模型或聲音模型，如步驟S605，並接著判斷是否有符合模型的事件，如步驟S607，當有符合其中之一特徵模型的事件時，即辨識得到某個事件，此時，如步驟S609，系統比對觸發事件表，以取得符合使用者喜好的事件，於是可以通知使用者端裝置，如步驟S611，可於使用者端裝置上觸發對應的服務。

圖7顯示另一實施例流程。系統在即時播送多媒體時，如步驟S701，同時以另一自動內容辨識的程序偵測事件。接著如步驟S703，系統利用自動辨識程序判斷是否偵測到事件？若無，則繼續步驟S701，持續偵測事件；若有，如步驟S705，將此事件記錄起來，包括記錄事件的時間點與暫存判斷結果，或是可對各事件 計數，並繼續如步驟S707，判斷是否符合使用者個人化的觸發事件。

舉例來說，根據以上幾種型態的事件，當單一事件符合使用者的喜好設定，即得出對應的服務，如此如步驟S709，通知(如註釋)使用者端裝置執行服務，否則繼續步驟S701，繼續辨識下一個事件。當根據事件紀錄(如次數、連續事件)判斷已經有符合使用者喜好的連續事件發生，同樣通知使用者端裝置，如步驟S709，由其中軟體程式執行對應的服務，否則表示尚未符合使用者的喜好設定，即回到步驟S701。

對應上述辨識得到的事件，系統提供對應事件的服務，系統可提供多種服務，例如對某個多媒體片段提供特寫、廣告、聲音片段、影片片段、文字、影像或特定指令，指令如可在某個影像上標註內容、馬賽克、特徵凸顯等，另可包括一些互動行為，如執行轉帳扣款、社群推薦(按”讚”)、留言、加入特定討論區等。

圖8顯示為實現本發明適應多元觀眾的多媒體呈現方法的情境示意圖。

圖中顯示有一使用者端裝置80播放著系統播送出來的多媒體內容，此例顯示畫面中有人持有兇器刺傷另一人，因此有血腥畫面，若根據使用者喜好以執行系統提供的馬賽克服務，可以根據自動內容辨識(採用辨識相關畫面的自動辨識模組)出畫面中有大片紅色血跡的位置，位置可由一個特定區域的畫素位置組成，此資訊連同執行的服務形成一個註釋，傳送到使用者端播放裝置上(電視或特定裝置)，執行於使用者端播放裝置上的軟體程式將取得要遮蔽的區域的資訊，因此以遮蔽圖案801覆蓋相關區域。

在圖9所示的情境示意圖顯示有使用者端裝置90，此較佳為可連結網路的顯示設備，可以分割畫面同步顯示系統播送出來的多媒體，內容顯示在多媒體顯示畫面901中，另一畫面則是同步顯示對應播放中的多媒體的服務，也就是當系統辨識出多媒體內 容中有符合的事件，即傳送表示事件發生時間(或幀序列號)與對應的服務，同樣由使用者端裝置90接收，此例顯示對應的服務以服務執行畫面903顯示在畫面的一側。舉例來說，在籃球比賽中，若有產生新的紀錄，系統提供的服務包括使用者可立即提供慈善捐款，如圖示提供信用卡或金融卡扣款的方式。

圖10顯示使用者端裝置，包括播放多媒體的使用者端播放裝置100，以及執行服務的使用者端電腦裝置140。當使用者端播放裝置100即時播放著系統播送的多媒體，系統端同時也執行自動辨識程序，比對記錄使用者的喜好設定的觸發事件表。當有符合的事件時，如圖示的畫面，其中有個影像物件120(一個皮包)，此為符合使用者喜好設定的事件，即將相關資訊傳送給使用者端電腦裝置140，此例的服務為在使用者端電腦裝置140顯示此影像物件120的物件解說142，包括價格，如此可起始後續的商業行為。

是以，根據揭露書所記載的適應多元觀眾的視頻播放方法，以及實現此方法的系統，在系統播放即時內容時，即時以自動內容辨識的技術偵測多媒體內容中的事件，並能根據使用者的喜好提供各端使用者不同的同步資訊，提供具有差異而具個人化呈現多媒體的服務。

惟以上所述僅為本發明之較佳可行實施例，非因此即侷限本發明之專利範圍，故舉凡運用本發明說明書及圖示內容所為之等效結構變化，均同理包含於本發明之範圍內，合予陳明。

Claims (10)

1. 一種適應多元觀眾的視頻播放方法，包括：執行適應多元觀眾的視頻播放的一系統串流播送一多媒體至一使用者端裝置，其中該系統包括一多媒體來源以及至少一自動辨識模組；於串流播送該多媒體時，該自動辨識模組根據一觸發事件表以及該多媒體決定一事件，其中該觸發事件表包括至少一多媒體、對應於該多媒體的事件以及對應的服務；根據該多媒體的該事件決定一註釋，該註釋記載該事件的一時間戳記或一幀序列號，以及一對應該事件的服務；傳送該註釋至該使用者端裝置；以及於該使用者端裝置播放該多媒體時，根據該註釋的該時間戳記或該幀序列號觸發該對應該事件的服務。
2. 如請求項1所述的適應多元觀眾的視頻播放方法，更包括：於一終端裝置中，接收該系統提供的該自動辨識模組對應的一或多個事件；接收該系統提供對應各事件之服務；以及根據事件與服務之選擇，建立該觸發事件表，並傳送該觸發事件表至該系統。
3. 如請求項1所述的適應多元觀眾的視頻播放方法，其中係由該使用者端裝置執行之一軟體程式執行該註釋記載之服務。
4. 如請求項1所述的適應多元觀眾的視頻播放方法，其中，於即時辨識該多媒體中的事件的步驟更包括：即時解析該多媒體中影像或聲音特徵；比對特徵模型；以及當有符合其中之一特徵模型的事件時，得出該事件。
5. 如請求項1所述的適應多元觀眾的視頻播放方法，其中，於該使用者端裝置中，當該事件發生的時間觸發對應的服務包括：插入關聯該多媒體的資訊、於該多媒體上疊合一文字或一影像、切換該多媒體中的畫面，或連結一第三方資訊。
6. 如請求項1所述的適應多元觀眾的視頻播放方法，其中該多媒體為一視頻或一音頻。
7. 如請求項1至6其中之一所述的適應多元觀眾的視頻播放方法，其中該使用者端裝置為單一而連網的播放裝置；或是包括一使用者端電腦裝置以及一使用者端播放裝置。
8. 一種系統，執行一適應多元觀眾的視頻播放方法，該系統包括：一多媒體來源，用以儲存多筆多媒體的資料庫或提供即時內容的內容提供者；一多媒體播放模組，用以對一使用者端裝置串流播送一多媒體；至少一個自動辨識模組，於串流播送該多媒體時，以該至少一個自動辨識模組根據一觸發事件表以及該多媒體決定一事件，其中該觸發事件表包括至少一多媒體、對應於該多媒體的事件以及對應的服務；以及一多媒體註釋模組，引入該使用者喜好設定，當辨識得出有該事件時，根據該多媒體的該事件決定一註釋，該註釋記載該事件的一時間戳記或一幀序列號，以及對應該事件的服務；其中，當該多媒體播放模組串流播送該多媒體時，根據該註釋的該時間戳記或該幀序列號觸發該對應該事件的服務。
9. 如請求項8所述的系統，其中係由該使用者端裝置執行之一軟體程式執行該註釋記載之服務，當該事件發生的時間觸發對應 的服務包括：插入關聯該多媒體的資訊、於該多媒體上疊合一文字或一影像、切換該多媒體中的畫面，或連結一第三方資訊。
10. 如請求項8或9所述的系統，其中該使用者端裝置包括一使用者端電腦裝置以及一使用者端播放裝置，以該使用者端電腦裝置接收該註釋，以該使用者端播放裝置接收該串流播送的多媒體。