TW201330602A - 跨平台之多媒體互動系統及其互動方法 - Google Patents

Abstract

一種跨平台之多媒體互動系統及其互動方法，其係利用一連線至雲端伺服器之個人電腦接收一聲音訊號。在此個人電腦接收聲音訊號後，雲端伺服器係對上述之聲音訊號執行一辨識程序，以將一辨識結果回傳至個人電腦，令個人電腦根據辨識結果顯示至少一訊息。利用此種跨平台之多媒體互動系統及其互動方法，可使得傳統的電視機與現代化的個人可攜式電子裝置作結合，滿足互動電視之多樣化需求。

Description

跨平台之多媒體互動系統及其互動方法

本發明係有關於一種跨平台之多媒體互動系統及其互動方法，特別是一種藉由辨識聲音訊號，以執行多媒體影音互動的跨平台互動系統及其互動方法。

打從一開始，看電視即是一件被動的事，觀眾多半只能坐著觀賞，或者透過其手中的遙控器，來取得導演的若干權力，例如：決定出現在螢幕上的節目、畫面、或音量大小等等。然而，事實上，現今的有線電視公司及衛星廣播業者提供的新型視訊解碼器，已經逐漸地開始具備有最起碼的互動功能，諸如：在節目播出中隨時可顯現的電子節目指南(Electronic program guides，EPG)，觀眾可訂播自己想看的電影，並且在觀賞中可以隨時進行暫停、倒帶、快轉或重放的動作，與習見觀看錄影帶時相同，這即是互動電視的基礎。

一般而言，由於電視對觀眾的吸引力仍然遠高於網際網路，因此隨著互動電視的日漸沿革，互動電視不再強調電腦與電視功能的結合，而仍以電視內容為主，網路功能為輔。

事實上，不管在任何文化的社會，負責研究把網際網變成付費娛樂媒體的專業人員，大多不再費心思考如何透過網路傳輸影像，而是會把焦點放在網路的現有功能，諸如簡單動畫、容易下載的音樂、互動遊戲及其他內容。這類研究推出的產物是遠比上網瀏覽更被動、更輕鬆的媒體，不過此媒體給予觀眾的控制權，還是明顯高於只能切換頻道的傳統遙控器。

除此之外，現代人在看電視時，相較於過去兩眼只盯著自己希望的電視節目之外，取而代之的是，現在許多電視觀眾都是『多執行思緒』者，例如：一會看看電視，一會通過電腦上網，甚至一邊看電視、一邊把玩手機或其他個人化的電子產品。只是，如何能夠準確地將傳統的電視與現代化的個人可攜式電子裝置作結合？實為現今各大廠商為滿足現代人多樣化之需求而亟需思考的問題。

因此，本發明係在針對上述之問題，提出一種跨平台之多媒體互動系統及其互動方法，藉以解決習知技術存在的問題。

本發明之主要目的，在於提供一種跨平台之多媒體互動系統及其互動方法，其係利用一連線至雲端伺服器之個人電腦接收一聲音訊號。並在此個人電腦接收聲音訊號後，利用雲端伺服器對上述之聲音訊號執行一辨識程序，以將一辨識結果回傳至個人電腦，令個人電腦根據辨識結果顯示至少一訊息，藉此流程以結合傳統的電視機與現代化的個人可攜式電子裝置，進一步實現不同裝置間多媒體影音互動之目的。

為達上述目的，本發明提供一種跨平台之多媒體互動系統，包含一個人電腦以及一與該個人電腦連線之雲端伺服器。個人電腦係用以接收一聲音訊號。在此一個人電腦接收聲音訊號後，雲端伺服器係可針對上述之聲音訊號執行一辨識程序，以將辨識結果回傳至個人電腦。之後，個人電腦即可根據聲音訊號的辨識結果，而在其屏幕上顯示至少一訊息。

根據本發明之實施例，其中該至少一訊息可以是一多媒體訊息、一文字訊息、一超連結網頁訊息、或是一動態廣告訊息。在一實施例中，上述之文字訊息可為一靜態文字訊息或一動態跑馬燈文字訊息。

另一方面，本發明再關於一種跨平台之多媒體互動方法，包括以下步驟：提供一個人電腦，並利用此一個人電腦接收一聲音訊號；將上述之聲音訊號傳至一雲端伺服器，並利用此一雲端伺服器對上述之聲音訊號執行一辨識程序，以獲得一辨識結果；以及利用個人電腦根據辨識結果，在其屏幕上顯示至少一訊息。

根據本發明之實施例，其中個人電腦係透過一網際網路與雲端伺服器連線。

根據本發明之實施例，其中個人電腦可以是一平板電腦。

底下藉由具體實施例配合所附的圖式詳加說明，當更容易瞭解本發明之目的、技術內容、特點及其所達成之功效。

請參閱第1圖，其係為根據本發明實施例之跨平台之多媒體互動系統之裝置方塊圖。此種跨平台之多媒體互動系統主要包含有一個人電腦10，其係與一雲端伺服器(cloud server)12連線。其中，個人電腦10可透過一網際網路或一電信網路與雲端伺服器12進行連線。在本實施例中，此一個人電腦10可以是一個人平板電腦(tablet PC)。在其他實施例中，個人電腦10亦可以用其他可上網之智慧型手機(smart phone)取代，唯本發明為解釋其技術思想係以一個人平板電腦作為較佳實施例來說明，但並非用以限定本發明之發明範圍。熟習此項技術領域者，當可根據本發明所揭示之技術思想而自行設計應用之，皆應隸屬於本發明之發明範圍。

請參閱第2圖，其係為根據本發明實施例跨平台之多媒體互動系統之雲端伺服器接收資料來源的裝置方塊圖。如第2圖所示，雲端伺服器12更可與一系統資料庫30及一網路資料庫32相連結。其中，系統資料庫30可透過例如：網際網路、通用串列匯流排(Universal Serial Bus，USB)、或其他通訊傳輸協定與雲端伺服器12進行連線。網路資料庫32與雲端伺服器12之間可藉由一網際網路或一衛星定位訊號(GPS訊號22)與雲端伺服器12進行連線。

系統資料庫30中包括一廣告資料34、一節目資料36、及一標籤旗幟(PGM flag)38。網路資料庫32中包括一前端製作(master room)40與一操作指示表(cue sheet)42。一般而言，網路資料庫32可透過GPS訊號22而將即時(in time)的音訊資料傳遞至雲端伺服器12。而系統資料庫30則可用來提供事先已預錄好的音訊資料。

雲端伺服器12包含一主機伺服器(host server)14及一語音辨識模組(audio recognition)16。本發明即是利用此一語音辨識模組16之辨識結果來完成跨平台之多媒體互動的功效(以下詳述)。

請同時參閱第3圖，其係為根據本發明實施例之跨平台之多媒體互動方法之步驟流程圖。此種跨平台之多媒體互動方法主要包括有步驟S302至步驟S306。關於本發明揭示之多媒體互動方法的說明，請一併參照第1至2圖所示，茲詳細說明如下。

如步驟S302所示，本發明首先提供一個人電腦10，並利用個人電腦10接收一聲音訊號。一般而言，此一聲音訊號可以來自一例如為電視機之顯示裝置20。舉例來說，當使用者一邊觀看電視機、一邊使用個人電腦10時，個人電腦10係可利用其內建(或外部配置)之麥克風，同時接收來自電視機之聲音訊號。

接著，如步驟S304所示，由於個人電腦10係與一雲端伺服器12連線，因此，在個人電腦10接收到上述之聲音訊號後，即可將聲音訊號上傳(upload)至雲端伺服器12。

第4圖係為根據本發明實施例跨平台之多媒體互動系統之雲端伺服器進行語音辨識的系統示意圖。如第4圖所示，本發明所揭示之雲端伺服器12除了前述之語音辨識模組16外，更包含一互動系統資料庫17及一音訊系統資料庫18。上述之互動系統資料庫17及音訊系統資料庫18即可用以儲存來自系統資料庫30與網路資料庫32其中之任一的音訊資料，以作為語音辨識模組16進行辨識之參考資料庫。並且，這些音訊資料可以是即時(in time)的音訊資料，亦可以是事先已預錄好的音訊資料，並非用以限定本發明之發明範圍。

根據本發明之實施例，由於個人電腦10可以是透過一網際網路(Internet)與雲端伺服器12連線。因此，雲端伺服器12內之語音辨識模組16，其係針對收到之聲音訊號而與參考資料庫17、18比較，並執行一辨識程序(recognition process)，以獲得聲音訊號之辨識結果。

最後，如步驟S306所示，雲端伺服器12係將上述之辨識結果回傳至個人電腦10，使得個人電腦10可根據辨識結果顯示至少一訊息。

其中，此一訊息可以是包含有聲音(audio)與影像(video)之音訊資料，當然也可以是僅具其中之一的訊息資料。舉例來說，本發明所指之訊息可以是但不限定於：一多媒體訊息(multi-media message)、一文字訊息(text message)、一超連結網頁訊息(web-link message)、或是一動態廣告訊息(advertising message)。更進一步而言，上述之文字訊息可包含：一靜態文字訊息(例如：文字短訊)或一動態跑馬燈訊息(例如：新聞頭條)、抑或是二者其中之一。

根據本發明之一實施例，當雲端伺服器12辨識聲音訊號係來自電視機所播放之一電視節目時，個人電腦10係顯示出與該電視節目有關之訊息。

舉例來說，當使用者當下正在收看一電影頻道所播放之電影時，雲端伺服器12藉由使用者同時操作之個人電腦10辨識出其聲音訊號來源。之後，個人電腦10係可在其屏幕上顯示出與使用者正在觀賞之電影有關之多媒體訊息。此一多媒體訊息例如可以是：電影劇本、演員介紹、甚至、拍攝電影之幕後花絮的動態影音資料等。

又例如，使用者當下正在收看一特定之新聞頻道時，雲端伺服器12係藉由使用者同時操作之個人電腦10辨識出其聲音訊號來源。之後，個人電腦10係可在其屏幕上顯示出與使用者正在觀賞之新聞有關之訊息，例如：新聞事件之發生地點、與關鍵字有關之其他新聞、甚至下一新聞之動態跑馬燈訊息等等。

值得注意的是，另一方面而言，本發明並不以個人電腦10僅能顯示與使用者正在觀賞之節目有關的訊息為限。換句話說，根據本發明之其他實施例，個人電腦10亦可以用以顯示與使用者當下正在觀賞之電視節目競爭之多媒體訊息。

承以上例而言，若使用者當下正在收看一特定之新聞頻道，則個人電腦10可根據雲端伺服器12的辨識結果，在其屏幕上顯示出該新聞頻道之競爭者的訊息，例如：另一新聞頻道之廣告、同時段其他新聞頻道所播放之新聞、甚至提醒使用者轉台至另一新聞頻道之動態廣告訊息等等，皆可用以實施本發明之發明目的。

在一實施例中，若使用者當下正在收看一首播新聞，意即雲端伺服器12上可能還未存有對應該則首播新聞之關鍵字的音訊資料。在此情況之下，此一雲端伺服器12可先連結至播放該首播新聞之新聞台的內部新聞編輯資料庫進行關鍵字搜索。之後，再連結至其他外部的公開資料庫，藉此使得雲端伺服器12內之語音辨識模組16可進行語音比對之工作，以順利將辨識結果回傳至個人電腦10。

請參閱第5圖，其係為根據本發明實施例之跨平台之多媒體互動系統應用於辨識廣告資料時之系統示意圖。請同時參閱第2及第5圖所示，其中，廣告資料34之音訊內容係可藉由廣告提供者50提供音檔，之後再透過廣告上架模組52而存入模型庫54中製作而成。

本實施例中的雲端伺服器12’包含搜尋比對核心模組70及系統管理模組64，其中搜尋比對核心模組70更包含一廣告音訊比對模組60與一前處理模組62。此時，搜尋比對核心模組70係對應於第1圖中之語音辨識模組16，其係針對廣告資料34中之音檔進行語音辨識。系統管理模組64係對應於第1圖中之主機伺服器14，其係提供音檔至前處理模組62，以供廣告音訊比對模組60進行語音辨識之參考。

當廣告音訊比對模組60比對完成，產生辨識結果後，再將此一辨識結果回傳至系統管理模組64，之後，方使得個人電腦10可根據辨識結果顯示至少一訊息。

換言之，根據本發明之又一實施例，當雲端伺服器12辨識聲音訊號係來自一電視廣告時，個人電腦10更可顯示出與該電視廣告之廣告商品有關之訊息。

舉例來說，當使用者當下正在收看一飲料廣告時，雲端伺服器12係藉由使用者同時操作之個人電腦10辨識出其聲音訊號來源。之後，個人電腦10係可在其屏幕上顯示出與該飲料廣告所廣告之商品有關的訊息。此一訊息例如可以是：針對該飲料之銷售定價、折扣訊息、販售地點、甚至團購優惠等之多媒體或文字訊息。

更進一步而言，在個人電腦10顯示出上述與廣告商品有關之資訊後，使用者更可藉由個人電腦10之執行功能，將其儲存為電腦書籤(bookmark)或我的最愛(my favorite)，以便於日後參閱、分享給親友、或電子存檔等等。

除此之外，為避免雲端伺服器12過於頻繁的進行辨識程序，將對整個系統造成太大的運算負荷量，本發明所揭示之雲端伺服器可每隔一預定時間，方對聲音訊號執行辨識程序。並且，此一預定時間可由使用者自訂之。在一實施例中，使用者可透過在雲端伺服器12的檔案資料中標籤旗幟(flag)的方式，來完成上述預定時間之設定。如此一來，不僅可控制雲端伺服器12辨識聲音訊號的頻率，在雲端伺服器12同時連線至多台個人電腦時，更可進一步地控制連線上的每一台個人電腦皆可在同一時間(即標籤旗幟時)接收到相同的多媒體訊息。

綜上所述，本發明係揭示一種跨平台之多媒體互動系統及其互動方法，其係結合習見之電視機與現代化之個人平板電腦，在觀賞者觀看電視的同時，同步完成跨平台之多媒體互動。利用此一多媒體互動系統，不僅無須在電視機上加裝任何數位裝置(例如：機上盒)，亦無需針對影音資料作編/解碼的步驟，兼具複雜度低且操作簡易之功效，進而達到跨平台之多媒體互動，滿足現代人多樣化之生活需求。

以上所述之實施例僅係為說明本發明之技術思想及特點，其目的在使熟習此項技藝之人士能夠瞭解本發明之內容並據以實施，當不能以之限定本發明之專利範圍，即大凡依本發明所揭示之精神所作之均等變化或修飾，仍應涵蓋在本發明之專利範圍內。

10．．．個人電腦

12．．．雲端伺服器

12’．．．雲端伺服器

14．．．主機伺服器

16．．．語音辨識模組

17．．．互動系統資料庫

18．．．音訊系統資料庫

20．．．顯示裝置

22．．．衛星定位訊號

30．．．系統資料庫

32．．．網路資料庫

34．．．廣告資料

36．．．節目資料

38．．．標籤旗幟

40．．．前端製作

42．．．操作指示表

50．．．廣告提供者

52．．．廣告上架模組

54．．．模型庫

60．．．廣告音訊比對模組

62．．．前處理模組

64．．．系統管理模組

70．．．搜尋比對核心模組

第1圖係為根據本發明實施例之跨平台之多媒體互動系統之裝置方塊圖。

第2圖係為根據本發明實施例跨平台之多媒體互動系統之雲端伺服器接收資料來源的裝置方塊圖。

第3圖係為根據本發明實施例之跨平台之多媒體互動方法之步驟流程圖。

第4圖係為根據本發明實施例跨平台之多媒體互動系統之雲端伺服器進行語音辨識的系統示意圖。

第5圖係為根據本發明實施例之跨平台之多媒體互動系統應用於辨識廣告資料時之系統示意圖。

10．．．個人電腦

12．．．雲端伺服器

14．．．主機伺服器

16．．．語音辨識模組

22．．．衛星定位訊號

30．．．系統資料庫

32．．．網路資料庫

34．．．廣告資料

36．．．節目資料

38．．．標籤旗幟

40．．．前端製作

42．．．操作指示表

Claims (20)

1. 一種跨平台之多媒體互動系統，包含：一個人電腦，其係接收一聲音訊號；以及一雲端伺服器，其係與該個人電腦連線，在該個人電腦接收該聲音訊號後，該雲端伺服器對該聲音訊號執行一辨識程序，以將一辨識結果回傳至該個人電腦，令該個人電腦根據該辨識結果顯示至少一訊息。
2. 如請求項1所述之跨平台之多媒體互動系統，其中該個人電腦係為一平板電腦。
3. 如請求項1所述之跨平台之多媒體互動系統，其中該至少一訊息係為一多媒體訊息、一文字訊息、一超連結網頁訊息、或是一動態廣告訊息。
4. 如請求項3所述之跨平台之多媒體互動系統，其中該文字訊息係為一靜態文字訊息或一動態跑馬燈文字訊息。
5. 如請求項1所述之跨平台之多媒體互動系統，其中該雲端伺服器辨識該聲音訊號係來自一電視節目時，該個人電腦係顯示與該電視節目有關之該訊息。
6. 如請求項1所述之跨平台之多媒體互動系統，其中該雲端伺服器辨識該聲音訊號係來自一電視節目時，該個人電腦係顯示與該電視節目之競爭者有關之該訊息。
7. 如請求項1所述之跨平台之多媒體互動系統，其中當該聲音訊號係來自一首播新聞時，該雲端伺服器係先連結至播放該首播新聞之新聞台的內部新聞編輯資料庫進行關鍵字搜索，之後再連結至其他外部的公開資料庫，以使得該雲端伺服器完成該辨識程序。
8. 如請求項1所述之跨平台之多媒體互動系統，其中該雲端伺服器辨識該聲音訊號係來自一電視廣告時，該個人電腦係顯示與該電視廣告之廣告商品有關之該訊息。
9. 如請求項8所述之跨平台之多媒體互動系統，其中該訊息包括針對該廣告商品之銷售定價、折扣訊息、販售地點、以及團購優惠。
10. 如請求項1所述之跨平台之多媒體互動系統，其中該個人電腦係透過一網際網路與該雲端伺服器連線。
11. 如請求項1所述之跨平台之多媒體互動系統，其中該雲端伺服器係每隔一預定時間對該聲音訊號執行該辨識程序，且該預定時間係由一使用者自訂之。
12. 如請求項1所述之跨平台之多媒體互動系統，其中該雲端伺服器係與一系統資料庫與一網路資料庫其中之至少一者相連結，該系統資料庫係提供該雲端伺服器事先已預錄好的音訊資料，該網路資料庫係提供該雲端伺服器即時的音訊資料。
13. 如請求項12所述之跨平台之多媒體互動系統，其中該雲端伺服器包含一主機伺服器、一語音辨識模組、一互動系統資料庫與一音訊系統資料庫其中之至少一者，該互動系統資料庫與該音訊系統資料庫係用以儲存來自該系統資料庫與該網路資料庫其中之至少一者之事先預錄或即時的音訊資料，以作為該語音辨識模組進行辨識之參考資料庫。
14. 如請求項1所述之跨平台之多媒體互動系統，其中該雲端伺服器包含一搜尋比對核心模組與一系統管理模組，該搜尋比對核心模組包含一廣告音訊比對模組與一前處理模組，其中該系統管理模組係提供該聲音訊號至該前處理模組，以供該廣告音訊比對模組進行語音辨識之參考，當該廣告音訊比對模組完成比對，該辨識結果係藉由該系統管理模組回傳至該個人電腦，令該個人電腦根據該辨識結果顯示該至少一訊息。
15. 一種跨平台之多媒體互動方法，包括以下步驟：提供一個人電腦，並利用該個人電腦接收一聲音訊號；將該聲音訊號傳至一雲端伺服器，並利用該雲端伺服器對該聲音訊號執行一辨識程序，以獲得一辨識結果；以及根據該辨識結果，在該個人電腦上顯示至少一訊息。
16. 如請求項15所述之跨平台之多媒體互動方法，其中當該聲音訊號係來自一電視節目時，該至少一訊息係與該電視節目及/或該電視節目之競爭者有關。
17. 如請求項15所述之跨平台之多媒體互動方法，其中當該聲音訊號係來自一電視廣告時，該至少一訊息係與該電視廣告之廣告商品有關。
18. 如請求項15所述之跨平台之多媒體互動方法，其中該至少一訊息係為一多媒體訊息、一文字訊息、一超連結網頁訊息、或是一動態廣告訊息。
19. 如請求項15所述之跨平台之多媒體互動方法，其中該辨識程序係每隔一預定時間而執行，且該預定時間係由一使用者自訂之。
20. 如請求項15所述之跨平台之多媒體互動方法，其中當該聲音訊號係來自一首播新聞時，該雲端伺服器係先連結至播放該首播新聞之新聞台的內部新聞編輯資料庫進行關鍵字搜索，之後再連結至其他外部的公開資料庫，以使得該雲端伺服器完成該辨識程序。