TWI574256B - 互動節拍特效系統及互動節拍特效處理方法 - Google Patents
互動節拍特效系統及互動節拍特效處理方法 Download PDFInfo
- Publication number
- TWI574256B TWI574256B TW104106115A TW104106115A TWI574256B TW I574256 B TWI574256 B TW I574256B TW 104106115 A TW104106115 A TW 104106115A TW 104106115 A TW104106115 A TW 104106115A TW I574256 B TWI574256 B TW I574256B
- Authority
- TW
- Taiwan
- Prior art keywords
- beat
- special effect
- effect
- prompt
- signal
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25816—Management of client data involving client authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42221—Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- Computer Security & Cryptography (AREA)
- Computer Graphics (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本發明涉及多媒體特效技術領域,特別涉及一種互動節拍特效系統及一種互動節拍特效處理方法。
卡拉OK係一種多媒體伴奏演唱系統,演唱者可以於預先錄製之音樂伴奏下參與歌唱。卡拉OK能透過聲音處理使演唱者之聲音得到美化與潤飾,當再與音樂伴奏有機結合時,就變成渾然一體之身歷聲歌曲。這種伴奏方式,給歌唱愛好者們帶來極大方便和愉悅,成為人們休閒娛樂之一種方式,而現於多稱為KTV。
普通KTV系統中,使用者之歌聲和伴奏音樂可以混合於一起播放,但用戶無法改變包房內燈光特效以及視頻特效。亦即,現有KTV系統之互動性很弱。
有鑑於此,有必要提供一種互動節拍特效系統及一種互動節拍特效處理方法,其能提供豐富之節拍特效,特別是鼓勵並引導用戶做出節拍動作。
本發明實施方式提供一種互動節拍特效系統,其包括:控制主機、節拍感應裝置及特效輸出設備; 所述控制主機於播放多媒體檔時獲取與所述多媒體檔對應之節拍特效資料集,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間節點; 所述控制主機同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點生成提示特效訊號; 所述特效輸出設備輸出所述提示特效訊號以提示使用者及時做出節拍動作; 所述節拍感應裝置感應到使用者回應於所述提示特效訊號所做出之節拍動作後生成節拍觸發訊號; 如果所述控制主機及時接收到正確之節拍觸發訊號,則生成節拍特效訊號; 所述特效輸出設備還輸出所述節拍特效訊號。
於一實施方式中,所述節拍特效標籤內還包括特效設定資料,所述特效設定資料設定一或多個節拍特效訊號。
於一實施方式中,所述節拍特效標籤內還包括與所述特效設定資料對應之提示設定資料,所述提示設定資料設定所述提示特效訊號,所述提示特效訊號提示使用者及時做出預設之節拍動作。
於一實施方式中,所述節拍特效標籤內還包括節拍觸發訊號設定資料和對應之提示設定資料,設定一或多個節拍觸發訊號,並提示使用者及時做出對應之節拍動作,所述節拍動作包括:發出特定聲音、做出特定動作、操作特定節拍設備以及如何操作節拍設備中之一種或多種。
於一實施方式中,所述控制主機接收到節拍觸發訊號後,如果所述節拍觸發訊號符合對應之所述節拍特效標籤中之節拍觸發訊號設定資料,且當前時間與對應之所述節拍特效標籤中之時間節點之差值小於指定值,則所述控制主機判斷所述節拍觸發訊號是及時且正確之節拍觸發訊號,並生成節拍特效訊號; 所述控制主機還根據節拍觸發訊號之正確與否及時間準確性進行評分,於所述多媒體檔結束播放後所述控制主機對所述評分進行匯總得出總體評價,每次之評分和所述總體評分透過所述特效輸出設備輸出。
於一實施方式中,所述提示設定資料設定如何向使用者發出視覺提示,所述提示設定資料包括設備設定資料和提示內容; 所述設備設定資料設定節拍設備、特效輸出設備和多媒體視頻輸出設備中之一或多個; 所述提示內容是文字、圖形或動畫中之一種或多種; 所述控制主機於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處根據提示設定資料生成提示特效訊號以提示使用者做出節拍動作。
於一實施方式中,所述控制主機接收到節拍觸發訊號後,如果當前時間與對應之所述節拍特效標籤中之時間節點之差值小於指定值,則所述控制主機判斷所述節拍觸發訊號是及時且正確之節拍觸發訊號,並生成節拍特效訊號;
所述控制主機還根據節拍觸發訊號之時間準確性進行評分,於所述多媒體檔結束播放後所述控制主機對所述評分進行匯總得出總體評價,每次之評分和所述總體評分透過所述特效輸出設備輸出。
於一實施方式中,所述提示特效訊號還提示使用者及時做出正確之節拍動作後會呈現何種節拍特效。
於一實施方式中,所述系統還包括:節拍設備,用於根據使用者之操作發出所述節拍觸發訊號至所述控制主機、所述特效輸出設備或者所述節拍感應裝置,所述節拍設備內置燈光部件以閃爍顯示所接收到之燈光或燈光陣列圖案,和/或內置視頻顯示部件以閃爍顯示接收到之提示圖案或播放提示動畫。
於一實施方式中,所述控制主機於播放多媒體檔時獲取與所述多媒體檔對應之節拍特效資料集包括: 所述控制主機根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之節拍特效資料集之請求;以及 接收所述雲端伺服器系統返回之所述節拍特效資料集。
於一實施方式中,所述控制主機於播放多媒體檔時獲取與所述多媒體檔對應之節拍特效資料集還包括: 所述控制主機將身份認證資訊發送給所述雲端伺服器系統,以使所述雲端伺服器系統驗證所述控制主機是否具有獲取節拍特效資料集之許可權; 所述雲端伺服器系統於所述控制主機具有獲取節拍特效資料集之許可權時才返回所述控制主機請求之節拍特效資料集。
於一實施方式中,所述系統還包括與所述控制主機相連之外部設備;所述外部設備於播放多媒體檔時或者多媒體檔被加入播放清單時將對應之多媒體檔之標識發送給所述控制主機; 所述控制主機於接收到所述多媒體檔之標識後執行所述控制主機根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之節拍特效資料集之請求之步驟。
於一實施方式中,所述控制主機於播放多媒體檔時獲取與所述多媒體檔對應之節拍特效資料集包括:從所述多媒體檔內解析出內嵌於所述多媒體檔內之所述節拍特效資料集。
於一實施方式中,所述特效輸出設備包括:音訊輸出裝置、視頻輸出裝置以及燈光特效裝置; 所述特效設定資料包括音訊特效資料、燈光特效資料以及視頻特效資料,所述音訊特效資料設定所述音訊輸出裝置發出之聲音特效,所述燈光特效資料設定所述燈光特效裝置燈光之變化方式,所述視頻特效資料設定所述視頻輸出裝置之圖像變化方式包括圖案、顏色、位置、角度、大小等變化中之一種或多種。
於一實施方式中,所述節拍感應裝置包括錄音模組以及音訊分析模組,所述錄音模組用於採集外部之聲音,所述音訊分析模組用於根據所述錄音模組採集之聲音分析其音訊特徵是否符合預設之節拍音訊特徵,若是,則所述音訊分析模組生成所述節拍觸發訊號。
於一實施方式中,所述節拍感應裝置包括視頻捕捉模組以及視頻分析模組,所述視頻捕捉模組用於拍攝使用者之視頻,所述視頻分析模組用於分析所述視頻捕捉模組拍攝之使用者視頻,以識別出使用者之動作是否符合預定之特徵,若是,則所述視頻分析模組生成所述節拍觸發訊號。
於一實施方式中,所述節拍設備為用於發出特定音訊訊號之無源發聲設備。
於一實施方式中,所述節拍設備為電子裝置,所述電子裝置於使用者按鈕、拍打、觸摸、旋轉、移動時發出特定之訊號給所述控制主機、所述特效輸出設備或者所述節拍感應裝置。
本發明實施方式還提供一種互動節拍特效處理方法,所述方法包括: 於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之節拍特效資料集,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間節點; 於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處生成提示特效訊號; 輸出所述提示特效訊號以提示使用者及時做出節拍動作; 當感應到用戶之節拍動作後生成節拍觸發訊號; 如果及時接收到正確之節拍觸發訊號,則生成節拍特效訊號;以及 根據所述節拍特效訊號輸出對應之節拍特效。
於一實施方式中,所述節拍特效標籤內還包括特效設定資料,所述特效設定資料設定一或多個節拍特效訊號。
於一實施方式中,所述節拍特效標籤內還包括與所述特效設定資料對應之提示設定資料,所述提示設定資料設定所述提示特效訊號,所述提示特效訊號提示使用者及時做出預設之節拍動作。
於一實施方式中,所述節拍特效標籤內還包括節拍觸發訊號設定資料和對應之提示設定資料,設定一或多個節拍觸發訊號,並提示使用者及時做出對應之節拍動作,所述節拍動作包括:發出特定聲音、做出特定動作、操作特定節拍設備以及如何操作節拍設備中之一種或多種。
於一實施方式中,於接收到節拍觸發訊號後,如果所述節拍觸發訊號符合對應之所述節拍特效標籤中之節拍觸發訊號設定資料,且當前時間與對應之所述節拍特效標籤中之時間節點之差值小於指定值,則判斷所述節拍觸發訊號是及時且正確之節拍觸發訊號,並生成節拍特效訊號; 所述方法還包括:根據節拍觸發訊號之正確與否及時間準確性進行評分,於所述多媒體檔結束播放後對所述評分進行匯總得出總體評價,每次之評分和所述總體評分透過特效輸出設備輸出。
於一實施方式中,所述提示設定資料設定如何向使用者發出視覺提示,所述提示設定資料包括設備設定資料和提示內容; 所述設備設定資料設定節拍設備、特效輸出設備和多媒體視頻輸出設備中之一或多個; 所述提示內容是文字、圖形或動畫中之一種或多種; 於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處根據提示設定資料生成提示特效訊號以提示使用者做出節拍動作。
於一實施方式中,於接收到節拍觸發訊號後,如果當前時間與對應之所述節拍特效標籤中之時間節點之差值小於指定值,則判斷所述節拍觸發訊號是及時且正確之節拍觸發訊號,並生成節拍特效訊號; 所述方法還包括:根據節拍觸發訊號之時間準確性進行評分,於所述多媒體檔結束播放後對所述評分進行匯總得出總體評價,每次之評分和所述總體評分透過所述特效輸出設備輸出。
於一實施方式中,所述方法還包括:根據使用者之操作發出所述節拍觸發訊號至控制主機、特效輸出設備或者節拍感應裝置,所述節拍設備內置燈光部件以閃爍顯示所接收到之燈光或燈光陣列圖案,和/或內置視頻顯示部件以閃爍顯示接收到之提示圖案或播放提示動畫。
於一實施方式中,所述提示特效訊號還提示使用者及時做出正確之節拍動作後會呈現何種節拍特效。
於一實施方式中,所述獲取與所述多媒體檔對應之節拍特效資料集包括: 根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之節拍特效資料集之請求;以及 接收所述雲端伺服器系統返回之所述節拍特效資料集。
於一實施方式中,所述獲取與所述多媒體檔對應之節拍特效資料集還包括: 將身份認證資訊發送給所述雲端伺服器系統,以使所述雲端伺服器系統驗證是否具有獲取節拍特效資料集之許可權 ; 所述雲端伺服器系統於控制主機具有獲取節拍特效資料集之許可權時才返回所述節拍特效資料集。
於一實施方式中,所述方法還包括: 於所述外部設備播放多媒體檔時,接收所述外部設備發送之所述多媒體檔之標識;所述獲取與所述多媒體檔對應之節拍特效資料集之步驟於接收到所述多媒體檔之標識後進行。
於一實施方式中,所述獲取與所述多媒體檔對應之節拍特效資料集包括:從所述多媒體檔內解析出內嵌於所述多媒體檔內之所述節拍特效資料集。
於一實施方式中,所述特效設定資料包括音訊特效資料、燈光特效資料、以及視頻特效資料,所述音訊特效資料設定所述音訊輸出裝置發出之聲音特效,所述燈光特效資料設定所述燈光特效裝置燈光之變化方式,所述視頻特效資料設定所述視頻輸出裝置之圖像變化方式包括圖案、顏色、位置、角度、大小等變化中之一種或多種。
於一實施方式中,所述方法還包括:採集外部之聲音,並根據採集之聲音分析其音訊特徵是否符合預設之節拍音訊特徵,若是,則生成所述節拍觸發訊號。
於一實施方式中,所述方法還包括:拍攝使用者之視頻,並根據拍攝之使用者視頻識別出使用者之動作是否符合預定之特徵,若是,則生成所述節拍觸發訊號。
於一實施方式中,所述方法還包括:接收節拍設備根據使用者之操作發出之所述節拍觸發訊號。
上述技術方案之有益效果為:上述互動節拍特效系統及方法於播放多媒體檔時還獲取與多媒體檔對應之節拍特效資料集,節拍特效資料集中包括分別針對不同時間節點之節拍特效標籤,於播放音樂之過程中顯示提示資訊,讓使用者於指定之時間節點做出對應之節拍動作,當於播放音樂之過程中感應到用戶之節拍動作時且用戶之節拍動作與節拍特效標籤之設定相匹配,控制主機透過音訊、視頻或者燈光等方式輸出一明顯之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能,尤其適用於KTV等場合。而且節拍訊號除由專門之電子設備觸發外,使用者於KTV裡之常見操作例如搖動鈴鼓都可以觸發節拍動作,因此可以讓用戶無需學習就能自然之啟動節拍特效,提升用戶於KTV房間裡之使用感受。
為讓本發明之上述和其他目的、特徵和優點能更明顯易懂,下文特舉較佳實施方式,並配合所附圖式,作詳細說明如下。
為更進一步闡述本發明為實現預定發明目的所採取之技術手段及功效,以下結合附圖及較佳實施方式,對依據本發明之具體實施方式、結構、特徵及其功效,詳細說明如後。
第一實施方式
參閱圖1,其為本發明第一實施方式提供之互動節拍特效系統之架構示意圖。如圖1所示,互動節拍特效系統100包括控制主機10、點歌終端11、節拍感應裝置12、音訊輸出裝置13、多媒體視頻輸出裝置14、燈光特效裝置15以及視頻輸出裝置16。可以理解,圖1之架構僅為示意,互動節拍特效系統100還可包括更多之設備,例如功放、麥克風等等。
點歌終端11提供點歌之介面,使用者例如可以透過點歌介面進行點歌,選擇之歌曲被提交給控制主機10,控制主機10根據待播放之清單播放與被點歌曲對應之伴唱音及伴唱視頻,即將音訊與視頻分別傳輸給音訊輸出裝置13以及多媒體視頻輸出裝置14輸出。
點歌終端11具體地可以是與控制主機10相連之輸入/輸出裝置,例如與控制主機10相連之觸控面板,此時,點歌終端11之應用程式介面實質上是由控制主機10控制,點歌終端11僅作為輸入/輸出裝置。用戶透過觸控面板點播之歌曲直接被控制主機10獲取到。
點歌終端11還可以是單獨之電子裝置,例如安裝有特定之應用程式之電子裝置如手機、平板電腦等等。使用者可以透過該應用程式進行點歌,而所點歌曲之資訊由該應用程式傳輸給控制主機10。其具體之傳輸方式例如可包括以下幾種:當控制主機10與點歌終端11處於同一局域網內時,點歌終端11可以透過預定之網路埠直接將使用者所點歌曲之資訊經由該網路埠發送給控制主機10。可以理解,此種方式需要控制主機10開放相應之埠與網路服務。當控制主機10與點歌終端11不處於同一局域網內時,可以透過伺服器中轉以傳輸使用者所點歌曲之資訊。即,應用程式先將使用者所點歌曲之資訊提交至伺服器,然後,當同一使用者於控制主機10中登陸時,控制主機10就可以從伺服器處獲取或由伺服器主動推送當前登陸用戶點播之歌曲。
節拍感應裝置12用在於控制主機10播放所述多媒體檔時感應到使用者之節拍動作後生成節拍觸發訊號。此處之節拍動作係指使用者回應於提示特效訊號所做出之動作。使用者回應於提示特效訊號所做出之動作之具體實施包括但並不限於:歡呼、搖動鈴鼓、搖動手臂、操控手機、按鍵遙控器、跳舞等等。
總體上來說,節拍動作可以分為兩類:聲音與動作。
因此,於一具體之實施方式中,參閱圖2,節拍感應裝置12是基於音訊分析實現,其包括錄音模組122以及音訊分析模組124,錄音模組122用於採集外部之聲音,音訊分析模組124用於根據錄音模組122採集之聲音分析其音訊特徵是否符合預設之節拍音訊特徵,若是,則音訊分析模組124生成節拍觸發訊號。
例如,於KTV設施中最為常見之鈴鼓被晃動時,除發出清脆之聲音外,還會發出超聲波。因此,當音訊分析模組124檢測到預定頻率之超聲波後,則生成節拍觸發訊號。
音訊分析模組124還可透過音訊識別之方式,識別錄取之音訊是否是預定之內容,例如當使用者歡呼“我愛你”時,則生成節拍觸發訊號。
參閱圖3,於另一具體之實施方式中,節拍感應裝置12是基於視頻分析使用者之動作實現,其包括視頻捕捉模組126以及視頻分析模組128,視頻捕捉模組126用於拍攝使用者之視頻,視頻分析模組128用於分析視頻捕捉模組126拍攝之使用者視頻,以識別出使用者之動作是否符合預定之特徵,若是,則視頻分析模組128生成節拍觸發訊號。
例如,透過視頻分析,獲取到使用者雙手同時晃動手臂之操作,則視頻分析模組128生成節拍觸發訊號。
於另一具體之實施方式中,節拍感應裝置12是基於節拍設備發送之節拍訊號實現之。例如,節拍感應裝置12包括藍牙模組、紅外模組或者WIFI模組。
節拍設備例如可為一遙控器,其上設有多個按鍵,當使用者按下某個按鍵時,遙控器發射對應之紅外訊號給所述節拍感應裝置12。亦即,遙控器發送之紅外訊號即為上述之節拍訊號。
節拍設備例如還可為一專用之電子設備,其內也設有藍牙模組,從而可與節拍感應裝置12之藍牙模組配對,配對成功後,當檢測到使用者按下某個按鍵,或者晃動該節拍設備時,節拍設備向節拍感應裝置12發送對應之藍牙訊號。亦即,節拍設備發送之藍牙訊號即為上述之節拍訊號。
節拍設備例如還可為一手機,手機透過WIFI與節拍感應裝置12相連,手機內安裝有特定之應用程式,該應用程式透過手機內置之加速度計獲取節拍設備之運動參數,並進一步計算節拍設備之運動軌跡,當節拍設備之運動軌跡符合預設之特徵時,手機透過WIFI網路向節拍感應裝置12發送預定之網路訊號。亦即,上述手機發送之網路訊號即為上述之節拍訊號。
此外,可以理解,節拍設備並不限於僅為上述之某一種類型,各種類型之節拍設備還可以組合使用。亦即,節拍感應裝置12會接收不同節拍設備發出之節拍訊號;或者控制主機10檢測多個使用者之動作或者音訊。
音訊輸出裝置13例如可為音箱,而多媒體視頻輸出裝置14和視頻輸出裝置16例如可為電視機、顯示器、投影儀等任意輸出視頻圖像之設備。燈光特效裝置15包括至少一燈具,其可根據控制訊號輸出燈光訊號。優選地,燈光特效裝置15可以包括LED燈陣列以及對應之驅動裝置,該LED燈陣列可以佈滿房間之所有牆壁、屋頂甚至地面。當LED燈陣列中每個LED燈被單獨驅動時,整個LED燈陣列實質上也構成一顯示器,可用於顯示複雜之圖像訊號,此時,燈光特效裝置15與視頻輸出裝置16之不同之處在於顯示尺度之不同。
多媒體視頻輸出裝置14例如是用於顯示多媒體伴唱檔之視頻主畫面以及疊加於視頻主畫面上之視頻特效,而視頻輸出裝置16例如是用於顯示視頻特效。
可以理解,互動節拍特效系統100中還可以包括多個多媒體視頻輸出裝置14和多個視頻輸出裝置16。
本實施方式之互動節拍特效系統100於播放歌曲或者其他多媒體檔時,控制主機10除獲取歌曲之原始檔案外,還獲取與當前歌曲對應之節拍特效資料集。
於一具體之實施方式中,上述之節拍特效資料集是嵌入歌曲之原始檔案內。因此,控制主機10要從歌曲之原始檔案中解析出對應之節拍特效資料集。可以理解,歌曲之原始檔案既可以是存儲於本地之記憶體(指透過資料匯流排與控制主機相連之記憶體),也可以是存儲於網路記憶體內。此處之網路記憶體,既可以包括局域網、企業內部網,也可以包括互聯網。
於另一具體之實施方式,上述之節拍特效資料集是與歌曲之原始檔案相互獨立存儲之檔。與歌曲之原始檔案相似,節拍特效資料集,既可以是存儲於本地之記憶體,也可以是存儲於網路記憶體內。
上述之節拍特效資料集是採用預定義之協定或者語言描述之節拍特效資料集。例如,於一具體之實施方式中,節拍特效資料集可包括多個有序之節拍特效標籤,每個節拍特效標籤包括時間設定資料以及特效設定資料。時間設定資料用於設定節拍特效有效之時間。特效設定資料既可以直接為音訊、視頻或者向量動畫,也可以是用於描述、生成或者獲取節拍特效之其他格式之資料。
於一具體之實施方式中,節拍特效資料集例如可如下: [00:00.00] [00:24.88] [01:27.05] [02:30.39] … …
於此種情形下,節拍特效標籤內只有時間節點,控制主機10會於每一節拍特效標籤之時間節點發出預設之提示特效訊號提示使用者及時做出預設之節拍動作,當控制主機10於允許之時間誤差內接收到任意一節拍觸發訊號時,就生成預設之節拍特效。例如,無論是用戶透過晃動鈴鼓還是歡呼“我愛你”,都會觸發同一節拍特效。上述預設之提示特效訊號例如是文字、圖示或者動畫。
於一具體之實施方式中,節拍特效資料集例如可如下: [00:00.00] 特效設定數據1 [00:24.88] 特效設定數據2 [01:27.05] 特效設定數據3 [02:30.39] 特效設定數據4 … …
於此種情形下,節拍特效標籤內包括特效設定資料。例如:控制主機10會於每一節拍特效標籤之時間節點發出預設之提示特效訊號提示使用者及時做出預設之節拍動作,但用戶於此時之4個時間節點及時做出節拍動作會觸發對應之節拍特效。
於一具體之實施方式中,節拍特效資料集例如可如下: [00:00.00] 提示設定數據1 特效設定數據1 [00:24.88] 提示設定數據2 特效設定數據2 [01:27.05] 提示設定數據3 特效設定數據3 [02:30.39] 提示設定數據4 特效設定數據4 … …
於此種情形下,節拍特效標籤內包括特效設定資料和對應之提示設定資料。提示設定資料設定提示特效訊號之內容,例如文字、圖示、動畫或者其組合。例如:若提示設定資料包括之提示特效訊號之內容是一蠟燭之小圖示,則控制主機10會於某一時間節點於視頻特效顯示裝置上顯示一蠟燭之小圖示。優選地,上述之對應之提示設定資料係指提示設定資料和特效設定資料所設定之節拍特效之內容相關聯。例如,當特效設定資料1所設定之節拍特效為一蠟燭點燃之動畫時,提示設定資料1所設定之提示特效訊號就可為一蠟燭之小圖示,表示使用者及時做出默認之節拍動作會啟動蠟燭點燃之特效動畫。亦即,提示設定資料所設定之提示特效訊號提示使用者及時做出正確之節拍動作後會呈現何種節拍特效。
於一具體之實施方式中,節拍特效資料集例如可如下: [00:00.00] 提示設定資料1 節拍觸發訊號設定資料1 [00:24.00] 提示設定資料2 節拍觸發訊號設定資料2 [01:28.00] 提示設定資料3 節拍觸發訊號設定資料3 [04:30.00] 提示設定資料4 節拍觸發訊號設定資料4
於此種情形下,節拍特效標籤內包括節拍觸發訊號設定資料和對應之提示設定資料。上述之對應之提示設定資料例如係指提示設定資料所設定之提示特效訊號是與節拍觸發訊號設定資料所設定之節拍觸發訊號之具體種類相關聯之。此時之提示特效訊號用於提示使用者及時做出什麼樣之節拍動作(即對應之節拍觸發訊號設定資料所設定之節拍動作),一般來說,是提示文字如“雙手高舉”、“鈴鼓”、“我愛你”,或圖示或動畫以代表要做之動作或者要操作之設備。上述之節拍動作之具體實例可包括:發出特定聲音、做出特定動作、操作特定節拍設備以及如何操作節拍設備中之一種或多種。
當控制主機10於允許之時間誤差內接收到正確之節拍觸發訊號時,就生成預設之節拍特效。例如,於[00:24.00]前後使用者需要晃動鈴鼓才能啟動節拍特效,而於[01:28.00]前後則需要歡呼“我愛你”,才能觸發同一節拍特效。
可以理解,節拍特效標籤內還可能包括節拍觸發訊號設定資料和對應之提示設定資料,同時還有對應之特效設定資料。此時,提示設定資料所設定之提示特效訊號可以同時提示使用者要做出之節拍動作以及及時做出正確之節拍動作後會顯示什麼樣之節拍特效,即提示特效訊號內可同時包括用於提示節拍動作之資訊以及提示節拍特效之資訊。例如,提示特效訊號內可包括兩個圖示,分別提示節拍動作以及節拍特效。
於以上所列舉之各個實施方式中,時間之表徵方式為時:分:秒,然而,本發明並不限於採用這種方式,例如,可以直接採用秒數、毫秒數、分鐘數等任意之單位來表徵。以開始時間00:24.00為例,換算成秒數則為1440,換算成毫秒數為1440000,直接以分鐘數表示即為24。時間設定資料中所記錄之時間資料還可以是對時間值進行各種可逆運算之結果,甚至可以進行加密運算。以上述之秒數1440為例,例如可以將其除以2得到720。亦即於時間設定資料中存儲之720,但實際上其表達之1440秒。可以理解,經過此運算後,若要計算某個節拍特效標籤之實際時間節點,需要進行逆向運算。
可以理解,無論經過何種處理,以上這些方式其本質仍然是透過於節拍特效標籤中定義一時間節點,並比較當前時間與定義之時間節點以獲取對應之節拍特效標籤之方式,因此,所有這些方式均應被包括於上述時間設定資料之範圍內。
例如,於一具體之實施方式中,特效設定資料是採用預定義之協定或者語言對要實現之節拍特效之一種描述資料。此描述資料可以定義節拍特效之類型及參數。上述之類型例如可包括音訊、視頻、燈光或者其任意組合。上述之參數可包括具體之特效變化參數,例如要輸出之聲音、燈光之顏色、圖案及亮度之變化參數如速度、比例及範圍。
例如,於另一具體之實施方式中,特效設定資料是用於獲取節拍特效之其他格式之資料,例如,某個視頻特效檔之識別符。而此處之視頻特效檔可以是預存儲於與控制主機10相連之記憶體內,或者存儲於雲端伺服器內。控制主機10可以於記憶體內讀取該視頻檔,或者發起網路請求,從雲端伺服器處下載該視頻檔。
可以理解,節拍特效資料集可以由專門之系統根據對每首歌曲之音訊資料分析結果自動生成,也可以由人工根據歌曲之內容編輯生成。但總體上,無論節拍特效資料集是如何製作,其目的在於提示使用者按照歌曲之節拍做出互動節拍動作,如果動作及時且正確,則透過音訊、視頻、燈光等方式來回應並於輸出一明顯,能夠被用戶感知之變化。
控制主機10於播放多媒體檔時,或者於外部設備播放多媒體檔時同步從節拍特效資料集中根據時間節點獲取對應之節拍特效標籤,如從中解析出提示設定資料,則根據提示設定資料生成提示特效訊號並將提示特效訊號發送給提示特效輸出設備進行輸出,否則輸出預設之提示特效訊號。此處之提示特效輸出設備例如可為上述之多媒體視頻輸出裝置14、燈光特效裝置15以及視頻輸出裝置16中之一或多個。
使用者於看到提示特效訊號後,可以根據提示特效訊號之提示做出對應之節拍動作,例如擺動手臂、說出特定之語音內容、晃動鈴鼓等等。
相應地,節拍感應裝置12會感應到使用者之節拍動作。於感應到用戶之節拍動作之後,節拍感應裝置12生成節拍觸發訊號,並將節拍觸發訊號發送給控制主機10。
控制主機10於接收到節拍觸發訊號後計算當前時間是否與對應之節拍特效標籤內之時間節點相符,和節拍觸發訊號本身是否與上述之節拍特效標籤內之節拍觸發訊號設定資料一致,若是,則生成節拍特效訊號發送給特效輸出裝置進行輸出。
具體地,控制主機10計算接收到節拍觸發訊號之時間與節拍特效標籤中之時間節點之差值,如果差值小於指定值則為及時。當節拍特效標籤內不包括節拍觸發訊號設定資料時,任意及時之節拍觸發訊號就被視為是正確之節拍觸發訊號;而當節拍特效標籤中包括節拍觸發訊號設定資料時,只有節拍觸發訊號設定資料所設定之節拍觸發訊號才是正確之節拍觸發訊號。
於一具體之實施方式中,節拍特效為音訊特效。如此,當感應到用戶之節拍動作及時又正確,即及時接收到正確之節拍觸發訊號時,可透過音訊輸出裝置13播放預設之或者當前之節拍特效標籤內特效設定資料所對應之音訊。
於一具體之實施方式中,節拍特效為視頻特效。如此,當感應到用戶之節拍動作及時又正確,即及時接收到正確之節拍觸發訊號時,可透過視頻輸出裝置16播放預設之或者當前之節拍特效標籤內特效設定資料所對應之視頻特效。
於一具體之實施方式中,節拍特效為燈光特效。如此,當感應到用戶之節拍動作及時又正確,即及時接收到正確之節拍觸發訊號時,可透過燈光特效裝置15播放預設之或者當前之節拍特效標籤內特效設定資料所對應之燈光特效。
進一步地,以上各種類型之特效還可以組合使用。亦即,一節拍特效標籤內可包括多種類型之特效,例如,可以包括聲音特效、視頻特效或者燈光特效之任意組合。
進一步地,當接收到節拍觸發訊號且節拍特效標籤內包含節拍觸發訊號設定資料,則控制主機10還根據節拍觸發訊號之正確與否及時間準確性進行評分,於所述多媒體檔結束播放後所述控制主機對所述評分進行匯總得出總體評價,每次之評分和所述總體評分透過所述特效輸出設備輸出。具體地,控制主機10可採用一函數,將接收節拍觸發訊號之時間與發出提示之時間節點之間之差值作為輸入,累計計算對應之評分,錯誤之節拍動作加一大之分數作為懲罰。可以理解,時間差值越小,累計之積分越少,成績越好。而具體之評分規則並不受任何限制。
本實施方式之互動節拍特效系統於播放多媒體檔時還獲取與多媒體檔對應之節拍特效資料集,節拍特效資料集中包括分別針對不同時間節點之節拍特效標籤,於播放音樂之過程中顯示提示資訊,讓使用者於指定之時間節點做出對應之節拍動作,當於播放音樂之過程中感應到用戶之節拍動作時且用戶之節拍動作與節拍特效標籤之設定相匹配,控制主機透過音訊、視頻或者燈光等方式輸出一明顯之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能,尤其適用於KTV等場合。而且節拍訊號除由專門之電子設備觸發外,使用者於KTV裡之常見操作例如搖動鈴鼓都可以觸發節拍動作,因此可以讓用戶無需學習就能自然之啟動節拍特效,提升用戶於KTV房間裡之使用感受。
第二實施方式
參閱圖4,其為本發明第二實施方式提供之互動節拍特效系統200之示意圖。本實施方式之互動節拍特效系統200與圖1之互動節拍特效系統相似,其不同之處在於還包括:外部設備20。
外部設備20例如可為安裝有點歌應用程式之電腦。點歌面板11、音訊輸出裝置13及多媒體視頻輸出裝置14是與外部設備20相連。從而,點歌面板11、音訊輸出裝置13及多媒體視頻輸出裝置14與外部設備20自身構成一常見之可用於KTV等場合之多媒體點播系統。節拍感應裝置12、視頻輸出裝置16與燈光特效裝置15仍然與控制主機10相連。
本實施方式中,外部設備20例如為傳統之點歌系統主機,其實現點歌以及歌曲之播放控制功能。但相比于傳統之點歌系統主機,其進一步與控制主機10相連。每當外部設備20播放一首歌曲或者一首歌曲被添加至播放清單中時,外部設備20會將歌曲之標識發送給控制主機10。
可以理解,為讓外部設備20可以向控制主機10發送特定之資訊,可以於控制主機10中公開特定之應用程式設計發展介面(API),從而可讓外部設備20進行調用,而向控制主機10發送上述之資訊。每當外部設備20播放一首歌曲時外部設備20可將歌曲之標識以及開始播放之時間透過上述之API提交給控制主機10。當然,外部設備20要實現API之調用,需要對現有點歌播放程式稍做修改,使得於需要時透過API與控制主機10同步資訊。
控制主機10於接收到外部設備20同步之歌曲資訊後,獲取與歌曲對應之節拍特效資料集,並開始監測來自節拍感應裝置12之節拍觸發訊號,當接收到來自節拍感應裝置12之及時且正確之節拍觸發訊號後控制主機10根據當前之節拍特效標籤生成節拍特效,並進一步透過燈光特效裝置15輸出節拍特效。
於本實施方式中,音訊輸出裝置13、以及多媒體視頻輸出裝置14還可以同時輸出來自外部設備20之音視頻和來自控制主機10之節拍特效。以音訊為例,此時需要另外設置音訊疊加設備,其包括兩個輸入端,分別與外部設備20以及控制主機10之音訊輸出埠相連,音訊疊加設備之輸出埠與音訊輸出裝置13之音訊輸入口相連。音訊疊加設備透過音訊處理技術將外部設備20以及控制主機10輸出之音訊疊加至一起,然後傳輸給音訊輸出裝置13進行輸出。與音訊類似,如果要實現視頻疊加,此時需要另外設置視頻疊加設備。
根據本實施方式之互動節拍特效系統,透過對現有之點歌系統軟體稍加改進,就可以實現節拍特效功能,最大程度之相容現有設備,避免設備升級帶來之成本增加。
特別地,當控制主機10是一智慧電子設備時,安裝於所述智慧電子設備中之軟體,可以透過無線控制音訊輸出裝置13、燈光特效裝置15和視頻輸出裝置16以輸出節拍特效,也可以透過無線訪問網路上之節拍特效資料集,同時,透過內置麥克風錄取透過外部設備20播放出來之歌曲聲音,再透過特徵採樣及特徵匹配,直接識別出外部設備20所放之歌曲,從而無需與外部設備20通信就能夠獲得歌曲之標識,然後下載對應之節拍特效資料集。
第三實施方式
參閱圖5,其為本發明第三實施方式提供之互動節拍特效系統300之示意圖。本實施方式之互動節拍特效系統300與圖1之互動節拍特效系統100相似,其不同之處在於,還包括雲端伺服器系統20。
具體地,雲端伺服器系統20包括資料庫22以及伺服器24。其中,資料庫22用於存儲不同歌曲之節拍特效資料集。伺服器24用於根據用戶端(如控制主機10)之請求返回節拍特效資料集給用戶端。
圖6示出上述之伺服器24之一實施方式之結構框圖。如圖6所示,伺服器包括記憶體102、存儲控制器104,一或多個(圖中僅示出一)處理器106、外設介面108、以及網路模組110。這些元件透過一條或多條通訊匯流排/訊號線相互通訊。
可以理解,圖6所示之結構僅為示意,上述伺服器還可包括比圖6中所示更多或者更少之元件,或者具有與圖6所示不同之配置。圖6中所示之各元件可以採用硬體、軟體或其組合實現。
記憶體102可用於存儲軟體程式以及模組,如本發明實施方式中之各方法及裝置對應之程式指令/模組,處理器106透過運行存儲於記憶體102內之軟體程式以及模組,從而執行各種功能應用以及資料處理,即實現上述之方法。
記憶體102可包括高速隨機記憶體,還可包括非易失性記憶體,如一或者多個磁性存儲裝置、快閃記憶體、或者其他非易失性固態記憶體。於一些實例中,記憶體102可進一步包括相對於處理器106遠端設置之記憶體,這些遠端存放器可以透過網路連接至上述伺服器。上述網路之實例包括但不限於互聯網、企業內部網、局域網、移動通信網及其組合。處理器106以及其他可能之元件對記憶體102之訪問可於存儲控制器104之控制下進行。
外設介面108將各種輸入/輸出裝置耦合至處理器106。處理器106運行記憶體102內之各種軟體、指令上述伺服器執行各種功能以及進行資料處理。於一些實施方式中,外設介面108、處理器106以及存儲控制器104可以於單個晶片中實現。於其他一些實例中,他們可以分別由獨立之晶片實現。
網路模組110用於接收以及發送網路訊號。上述網路訊號可包括無線訊號或者有線訊號。於一實例中,上述網路訊號為有線網路訊號。此時,網路模組110可包括處理器、隨機記憶體、轉換器、晶體振盪器等元件。於一實施方式中,上述之網路訊號為無線訊號(例如射頻訊號)。此時網路模組110實質是射頻模組,接收以及發送電磁波,實現電磁波與電訊號之相互轉換,從而與通訊網路或者其他設備進行通訊。射頻模組可包括各種現有之用於執行這些功能之電路元件,例如,天線、射頻收發器、數位訊號處理器、加密/解密晶片、使用者身份模組(SIM)卡、記憶體等等。射頻模組可與各種網路如互聯網、企業內部網、無線網路進行通訊或者透過無線網路與其他設備進行通訊。上述之無線網路可包括蜂窩式電話網、無線局域網或者都會區網路。上述之無線網路可以使用各種通信標準、協定及技術,包括但並不限於全球移動通信系統(Global System for Mobile Communication, GSM)、增強型移動通信技術(Enhanced Data GSM Environment, EDGE),寬頻碼分多址技術(wideband code division multiple access, W-CDMA),碼分多址技術(Code division access, CDMA)、時分多址技術(time division multiple access, TDMA),無線保真技術(Wireless, Fidelity, WiFi)(如美國電氣和電子工程師協會標準 IEEE 802.11a, IEEE 802.11b, IEEE802.11g 和/或 IEEE 802.11n)、網路電話(Voice over internet protocal, VoIP)、全球微波互聯接入(Worldwide Interoperability for Microwave Access, Wi-Max)、其他用於郵件、即時通訊及短消息之協定,以及任何其他合適之通訊協定,甚至可包括那些當前仍未被開發出來之協定。
上述之軟體程式以及模組包括:作業系統112、以及服務模組114。作業系統112其可包括各種用於管理系統任務(例如記憶體管理、存放裝置控制、電源管理等)之軟體元件和/或驅動,並可與各種硬體或軟體元件相互通訊,從而提供其他軟體元件之運行環境。服務模組114運行於作業系統112之基礎上,用於實現對互動節拍特效系統之節拍特效資料集之傳輸控制功能,具體描述如下。
服務模組114包括身份校驗模組116、特效傳輸模組118以及資訊傳輸模組130。
身份校驗模組116用於用戶端進行身份校驗。於一具體之實施方式中,每個控制主機10內存儲有身份認證資訊,例如,主機ID之加密字串。於向服務模組114發起節拍特效資料集獲取請求前,控制主機10可以發起登陸請求,將身份認證資訊發送給伺服器24。相應地,伺服器24之身份校驗模組116根據預定之加密演算法及金鑰對身份認證資訊進行解密,並驗證該主機ID是否具有獲取節拍特效資料集之許可權。例如,檢索該主機ID對應之繳費標記,若該主機ID並未繳納節拍特效資料集之使用費,則該主機ID不具有獲取節拍特效資料集之許可權,控制主機10之身份認證不透過。相應地,特效傳輸模組128會拒絕控制主機10之獲取節拍特效資料集之請求。
如果某個主機ID具有獲取節拍特效資料集之許可權時,特效傳輸模組128就會根據控制主機10之請求返回對應之節拍特效資料集。可以理解,控制主機10可以於開始播放某首歌曲或者其他多媒體檔之時候,或者歌曲進入播放清單後即發起上述之登陸校驗請求以及節拍特效資料集獲取請求,並將要播放之歌曲之識別符包括於上述之節拍特效資料集之獲取請求內。
可以理解,從伺服器24下載節拍特效資料集需要耗費一定之時間,因此如果歌曲開始播放時才開始下載上述之節拍特效資料集,則於節拍特效資料集下載完成後進行節拍特效播放時需要考慮去除下載時間對時間線之影響。具體地,如果歌曲播放後時間T時完成節拍特效資料集之下載並開始播放,則節拍特效之時間線會從時間T處開始,而不是從頭開始以實現與多媒體檔之時間線之同步。這要求控制主機10記錄多媒體檔開始播放之時間以及節拍特效資料集下載完成之時間,兩者之時間差即為上述之時間T。
當每首多媒體檔一旦被添加至待播放清單裡時,控制主機10就可以開始下載對應之節拍特效資料集。採用這種方式,只有播放清單裡之第一首多媒體檔之節拍特效資料集需要調整時間線,而後續所有歌曲之節拍特效資料集可以是於其他歌曲播放之同時於後臺進行下載,因此,於要播放時其節拍特效資料集一般已經下載完成,節拍特效可以與視頻、音訊同步播放,無須再調整時間線。
可以理解,當歌曲暫停時,控制主機10同步會將節拍特效也暫停。
根據本實施方式之互動節拍特效系統,節拍特效資料集存儲於雲端伺服器系統20中,可以保證節拍特效資料集僅供授權之用戶訪問,提升節拍特效資料集之安全性。
第四實施方式
參閱圖7,其為本發明第四實施方式提供之獲取節拍特效資料集之方法流程圖。如圖7所示,本實施之方法包括以下步驟:
步驟S101,播放多媒體檔;
多媒體檔例如可由控制主機10播放,或者由外部設備20進行播放。
步驟S102,獲取與所述多媒體檔對應之節拍特效資料集。
節拍特效資料集例如可包括上述之節拍特效標籤,每個節拍特效標籤包括時間設定資料以及特效設定資料。當然,無論節拍特效資料集之內容為何,其獲取過程是相似之。
具體地,步驟S102可包括:步驟S1022,從所述多媒體檔內解析出內嵌於所述多媒體檔內之所述節拍特效資料集。
根據這種方式,節拍特效資料集是內嵌於多媒體檔內,可以與多媒體檔一併保存,降低系統之複雜性。
另外,步驟S102還可包括:步驟S1024,從雲端伺服器處下載節拍特效資料集。
進一步參閱圖8,步驟S1024具體可包括以下步驟:
步驟S201,將身份認證資訊發送給所述雲端伺服器系統,以使所述雲端伺服器系統統驗證是否具有獲取節拍特效資料集之許可權;
步驟S202,根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之節拍特效資料集之請求;以及
步驟S203,接收所述雲端伺服器系統返回之所述節拍特效資料集;
根據這種方式,節拍特效資料集存儲於雲端伺服器系統20中,可以保證只有授權之用戶才能夠訪問節拍特效資料集,提升節拍特效資料集之安全性。
根據本實施方式之方法,於播放多媒體檔時,還獲取與多媒體檔對應之節拍特效資料集,所述節拍特效資料集可用于生成節拍特效訊號,進而可以輸出節拍特效。
第五實施方式
參閱圖9,本實施方式提供一種互動節拍特效處理方法,其可用於圖1、圖4或圖5所示之互動節拍特效系統中。如圖9所示,本實施方式之方法包括以下步驟:
步驟S401,於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之節拍特效資料集,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間節點;
步驟S402,於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處生成系統預設之提示特效訊號;
步驟S403,輸出所述提示特效訊號以提示使用者及時做出節拍動作;
步驟S404,當感應到用戶節拍動作後生成節拍觸發訊號;
步驟S405,如果及時接收到節拍觸發訊號,則生成節拍特效訊號;以及
步驟S406,根據所述節拍特效訊號輸出對應之節拍特效。
根據本實施方式之方法,於播放多媒體檔時,根據節拍特效資料集內之節拍特效標籤生成預設之提示特效訊號提示使用者及時做出節拍動作,當用戶及時完成節拍動作時,就輸出對應之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能。
第六實施方式
參閱圖10,本實施方式提供一種互動節拍特效處理方法,其可用於圖1、圖4或圖5所示之互動節拍特效系統中。如圖10所示,本實施方式之方法包括以下步驟:
步驟S401a,於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之節拍特效資料集,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間節點、特效設定資料以及對應之提示設定資料;
步驟S402a,於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處根據與特效設定資料對應之提示設定資料生成對應之提示特效訊號;
步驟S403a,輸出所述提示特效訊號以提示使用者及時做出節拍動作以及用戶做出節拍動作後會有何種節拍特效;
步驟S404,當感應到用戶節拍動作後生成節拍觸發訊號;
步驟S405,如果及時接收到節拍觸發訊號,則生成節拍特效訊號;以及
步驟S406,根據所述節拍特效訊號輸出對應之節拍特效。
根據本實施方式之方法,於播放多媒體檔時,根據節拍特效資料集內之節拍特效標籤生成與其中特效設定資料對應之提示特效訊號提示使用者及時做出節拍動作以及用戶做出節拍動作後會有何種節拍特效,當用戶及時完成節拍動作時,就輸出對應之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能,更讓用戶及時瞭解會有何種節拍特效,從而可選擇性之做不做節拍動作。
第七實施方式
參閱圖11,本實施方式提供一種互動節拍特效處理方法,其可用於圖1、圖4或圖5所示之互動節拍特效系統中。如圖11所示,本實施方式之方法包括以下步驟:
步驟S401b,於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之節拍特效資料集,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間節點、節拍觸發訊號設定資料以及對應之提示設定資料;
步驟S402b,於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處根據與節拍觸發訊號設定資料對應之提示設定資料生成對應之提示特效訊號;
步驟S403b,輸出所述提示特效訊號以提示使用者及時做出正確之節拍動作;
步驟S404,當感應到用戶節拍動作後生成節拍觸發訊號;
步驟S405b,如果及時接收到正確之節拍觸發訊號,則生成節拍特效訊號;以及
步驟S406,根據所述節拍特效訊號輸出對應之節拍特效。
根據本實施方式之方法,於播放多媒體檔時,根據節拍特效資料集內之節拍特效標籤生成與其中節拍觸發設定資料對應之提示特效訊號提示使用者及時做出節拍動作以及用戶應做出何種節拍動作,當用戶及時完成正確之節拍動作時,就輸出對應之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能。
第八實施方式
參閱圖12,本實施方式提供一種互動節拍特效處理方法中生成並輸出提示特效訊號之方法流程圖。如圖12所示,本實施方式之方法包括以下步驟:
步驟S501,根據當前時間獲取一節拍特效標籤。
如上所述,於播放多媒體檔時,會首先獲取節拍特效資料集。於步驟S501中,若當前時間與某一節拍特效標籤內之時間節點相等之時候就獲取該節拍特效標籤,然後對該節拍特效標籤內包含之資料進行解析。
步驟S502,判斷獲取之節拍特效標籤內是否包括提示設定資料,若是,則執行步驟S503,否則執行步驟S504。
步驟S503,根據提示設定資料生成並輸出對應之提示特效訊號。
步驟S504,生成並輸出預設之提示特效訊號。
於步驟S503中,依據提示設定資料生成對應之提示特效訊號。具體地,步驟S503例如可包括:
步驟S5032,提示使用者要做何種節拍動作;
步驟S5034,提示使用者及時做出正確之節拍動作後會出現何種節拍特效。
參閱圖13,於步驟S5032中,例如可顯示文字601,提示使用者喊出對應之內容“我愛你”,而於步驟S5034中,例如可顯示圖示602,提示使用者若及時喊出與文字601對應之內容,會出現何種節拍特效,例如一心形之動畫。可以理解,圖13所示之介面例如是多媒體視頻輸出裝置14所輸出之視頻主畫面,而提示特效訊號是被疊加於視頻主畫面上。
於步驟S503中,也可僅包括步驟S5032或者僅包括步驟S5034。而且,文字601或者圖示602也可以採用其他形式進行替換,例如顯示其他文字、圖示或者動畫。
根據本實施方式之方法,會自動根據節拍特效標籤內是否包括提示設定資料生成不同之提示特效訊號,提示使用者及時做出節拍動作以及用戶做出何種節拍動作,當用戶及時完成正確之節拍動作時,就輸出對應之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能。
本發明實施方式之互動節拍特效系統於播放多媒體檔時還獲取與多媒體檔對應之節拍特效資料集,節拍特效資料集中包括分別針對不同時間節點之節拍特效標籤,於播放音樂之過程中顯示提示資訊,讓使用者於指定之時間節點做出對應之節拍動作,當於播放音樂之過程中感應到用戶之節拍動作時且用戶之節拍動作與節拍特效標籤之設定相匹配,控制主機透過音訊、視頻或者燈光等方式輸出一明顯之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能,尤其適用於KTV等場合。而且節拍訊號除由專門之電子設備觸發外,使用者於KTV裡之常見操作例如搖動鈴鼓都可以觸發節拍動作,因此可以讓用戶無需學習就能自然之啟動節拍特效,提升用戶於KTV房間裡之使用感受。
此外,本發明實施方式還提供一種電腦可讀存儲介質,其內存儲有電腦可執行指令,上述之電腦可讀存儲介質例如為非易失性記憶體例如光碟、硬碟、或者快閃記憶體。上述之電腦可執行指令用於讓電腦或者類似之運算裝置完成上述實施方式中之方法。
以上所述,僅是本發明之較佳實施方式而已,並非對本發明作任何形式上之限制,雖然本發明已以較佳實施方式揭示如上,然而並非用以限定本發明,任何本領域技術人員,於不脫離本發明技術方案範圍內,當可利用上述揭示之技術內容做出些許更動或修飾為等同變化之等效實施方式,但凡是未脫離本發明技術方案內容,依據本發明之技術實質對以上實施方式所作之任何簡介修改、等同變化與修飾,均仍屬於本發明技術方案之範圍內。
100、200、300‧‧‧互動節拍特效系統
10‧‧‧控制主機
11‧‧‧點歌終端
12‧‧‧節拍感應裝置
13‧‧‧音訊輸出裝置
14‧‧‧多媒體視頻輸出裝置
15‧‧‧燈光特效裝置
16‧‧‧視頻輸出裝置
20‧‧‧外部設備
102‧‧‧記憶體
104‧‧‧存儲控制器
106‧‧‧處理器
108‧‧‧外設介面
110‧‧‧網路模組
112‧‧‧作業系統
114‧‧‧視覺特效服務模組
116‧‧‧身份校驗模組
118‧‧‧特效傳輸模組
130‧‧‧資訊傳輸模組
122‧‧‧錄音模組
124‧‧‧音訊分析模組
126‧‧‧視頻捕捉模組
128‧‧‧視頻分析模組
10‧‧‧控制主機
11‧‧‧點歌終端
12‧‧‧節拍感應裝置
13‧‧‧音訊輸出裝置
14‧‧‧多媒體視頻輸出裝置
15‧‧‧燈光特效裝置
16‧‧‧視頻輸出裝置
20‧‧‧外部設備
102‧‧‧記憶體
104‧‧‧存儲控制器
106‧‧‧處理器
108‧‧‧外設介面
110‧‧‧網路模組
112‧‧‧作業系統
114‧‧‧視覺特效服務模組
116‧‧‧身份校驗模組
118‧‧‧特效傳輸模組
130‧‧‧資訊傳輸模組
122‧‧‧錄音模組
124‧‧‧音訊分析模組
126‧‧‧視頻捕捉模組
128‧‧‧視頻分析模組
[圖1]係本發明第一實施方式提供之同步視覺特效系統之架構示意圖; [圖2]係第一實施方式提供之互動節拍特效系統之節拍感應裝置之模組圖; [圖3]係第一實施方式提供之互動節拍特效系統之節拍感應裝置之另一模組圖; [圖4]係本發明第二實施方式提供之互動節拍特效系統之架構示意圖; [圖5]係本發明第三實施方式提供之互動節拍特效系統之架構示意圖; [圖6]係第三實施方式之互動節拍特效系統中雲端伺服器之模組圖; [圖7]係本發明第四實施方式提供之獲取節拍特效資料集之方法之流程圖; [圖8]係圖7之方法中部分步驟之流程圖; [圖9]係本發明第五實施方式提供之互動節拍特效處理方法流程圖; [圖10]係本發明第六實施方式提供之互動節拍特效處理方法流程圖; [圖11]係本發明第七實施方式提供之互動節拍特效處理方法流程圖; [圖12]係本發明第七實施方式提供之互動節拍特效處理方法中生成提示特效訊號之步驟流程圖; [圖13]係圖12之方法之介面示意圖。
100‧‧‧同步節拍特效系統
10‧‧‧控制主機
11‧‧‧點歌終端
12‧‧‧節拍感應裝置
13‧‧‧音訊輸出裝置
14‧‧‧多媒體視頻輸出裝置
15‧‧‧燈光特效裝置
16‧‧‧視頻輸出裝置
Claims (10)
- 一種互動節拍動作特效系統,其包括:控制主機、節拍感應裝置及特效輸出設備;所述控制主機於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之節拍特效資料集,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間節點;所述控制主機同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點生成提示特效訊號;所述特效輸出設備輸出所述提示特效訊號以提示使用者及時做出節拍動作;所述節拍感應裝置感應到使用者回應於所述提示特效訊號所做出之節拍動作後生成節拍觸發訊號;如果所述控制主機及時接收到正確之節拍觸發訊號,則生成節拍特效訊號;所述特效輸出設備還輸出所述節拍特效訊號,所述節拍特效訊號包括視訊和/或聲音。
- 如申請專利範圍第1項所述之互動節拍動作特效系統,其中,所述節拍特效標籤內還包括特效設定資料,所述特效設定資料設定一或多個節拍特效訊號。
- 如申請專利範圍第2項所述之互動節拍動作特效系統,其中,所述節拍特效標籤內還包括與所述特效設定資料對應之提示設定資料,所述提示設 定資料設定所述提示特效訊號,所述提示特效訊號提示使用者及時做出預設之節拍動作。
- 如申請專利範圍第1項所述之互動節拍動作特效系統,其中,所述節拍特效標籤內還包括節拍觸發訊號設定資料和對應之提示設定資料,設定一或多個節拍觸發訊號,並提示使用者及時做出對應之節拍動作,所述節拍動作包括:發出特定聲音、做出特定動作、操作特定節拍設備以及如何操作節拍設備中之一種或多種。
- 如申請專利範圍第4項所述之互動節拍動作特效系統,其中,所述控制主機接收到節拍觸發訊號後,如果所述節拍觸發訊號符合對應之所述節拍特效標籤中之節拍觸發訊號設定資料,且當前時間與對應之所述節拍特效標籤中之時間節點之差值小於指定值,則所述控制主機判斷所述節拍觸發訊號是及時且正確之節拍觸發訊號,並生成節拍特效訊號;所述控制主機還根據節拍觸發訊號之正確與否及時間準確性進行評分,於所述多媒體檔結束播放後所述控制主機對所述評分進行匯總得出總體評價,每次之評分和所述總體評分透過所述特效輸出設備輸出。
- 如申請專利範圍第3或4項所述之互動節拍動作特效系統,其中,所述提示設定資料設定如何向使用者發出視覺提示,所述提示設定資料包括設備設定資料和提示內容;所述設備設定資料設定節拍設備、特效輸出設備和多媒體視頻輸出設備中之一或多個;所述提示內容是文字、圖形或動畫中之一種或多種; 所述控制主機於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處根據提示設定資料生成提示特效訊號以提示使用者做出節拍動作。
- 如申請專利範圍第1-3項任一項所述之互動節拍動作特效系統,其中,所述控制主機接收到節拍觸發訊號後,如果當前時間與對應之所述節拍特效標籤中之時間節點之差值小於指定值,則所述控制主機判斷所述節拍觸發訊號是及時且正確之節拍觸發訊號,並生成節拍特效訊號;所述控制主機還根據節拍觸發訊號之時間準確性進行評分,於所述多媒體檔結束播放後所述控制主機對所述評分進行匯總得出總體評價,每次之評分和所述總體評分透過所述特效輸出設備輸出。
- 如申請專利範圍第1-5項任一項所述之互動節拍動作特效系統,其中,還包括:節拍設備,用於根據使用者之操作發出所述節拍觸發訊號至所述控制主機、所述特效輸出設備或者所述節拍感應裝置,所述節拍設備內置燈光部件以閃爍顯示所接收到之燈光或燈光陣列圖案,和/或內置視頻顯示部件以閃爍顯示接收到之提示圖案或播放提示動畫。
- 如申請專利範圍第1-5項任一項所述之互動節拍動作特效系統,其中,所述提示特效訊號還提示使用者及時做出正確之節拍動作後會呈現何種節拍特效。
- 一種互動節拍動作特效處理方法,所述方法包括: 於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之節拍特效資料集,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間節點;於播放多媒體檔時同步從節拍特效資料集中獲取對應之節拍特效標籤,於所述時間節點處生成提示特效訊號;輸出所述提示特效訊號以提示使用者及時做出節拍動作;當感應到用戶之節拍動作後生成節拍觸發訊號;如果及時接收到正確之節拍觸發訊號,則生成節拍特效訊號;以及根據所述節拍特效訊號輸出對應之節拍特效,所述節拍特效包括視訊和/或聲音。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410065209 | 2014-02-26 | ||
CN201510056266.2A CN104754421A (zh) | 2014-02-26 | 2015-02-02 | 互动节拍特效系统及互动节拍特效处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201535358A TW201535358A (zh) | 2015-09-16 |
TWI574256B true TWI574256B (zh) | 2017-03-11 |
Family
ID=53593417
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW104106115A TWI574256B (zh) | 2014-02-26 | 2015-02-25 | 互動節拍特效系統及互動節拍特效處理方法 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN104754421A (zh) |
TW (1) | TWI574256B (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017093803A (ja) * | 2015-11-24 | 2017-06-01 | 富士通株式会社 | 評価プログラム、評価方法及び評価装置 |
CN105996305A (zh) * | 2016-05-03 | 2016-10-12 | 苏州乐聚堂电子科技有限公司 | 智能鞋扣和智能鞋扣灯光同步显示方法 |
CN107464548A (zh) * | 2017-08-03 | 2017-12-12 | 京东方科技集团股份有限公司 | 非接触式音乐传感装置及音乐演奏方法 |
CN107682642A (zh) * | 2017-09-19 | 2018-02-09 | 广州艾美网络科技有限公司 | 识别视频特效触发时间点的方法、装置和终端设备 |
CN108877838B (zh) * | 2018-07-17 | 2021-04-02 | 黑盒子科技(北京)有限公司 | 音乐特效匹配方法及装置 |
CN110801626A (zh) * | 2018-08-06 | 2020-02-18 | 南京芝兰人工智能技术研究院有限公司 | 一种基于儿童智能交互的led灯阵游戏方法和系统 |
CN111857482B (zh) * | 2020-07-24 | 2022-05-17 | 北京字节跳动网络技术有限公司 | 一种互动方法、装置、设备和可读介质 |
CN112333473B (zh) * | 2020-10-30 | 2022-08-23 | 北京字跳网络技术有限公司 | 一种交互方法、装置以及计算机存储介质 |
CN112333464B (zh) * | 2020-10-30 | 2022-08-02 | 北京字跳网络技术有限公司 | 一种交互数据生成方法、装置以及计算机存储介质 |
CN114845145B (zh) * | 2021-01-30 | 2024-04-12 | 华为技术有限公司 | 动作提示图标序列生成方法、电子设备和可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1259721A (zh) * | 1996-10-31 | 2000-07-12 | 传感电子公司 | 视频信息智能管理系统 |
US20070081694A1 (en) * | 2005-10-06 | 2007-04-12 | Pitney Bowes Incorporated | Method for detecting fraud in a printed image |
TW201022982A (en) * | 2008-12-02 | 2010-06-16 | Univ Nat Changhua Education | A personalized rhythm authentication system |
TW201322051A (zh) * | 2011-11-18 | 2013-06-01 | Asustek Comp Inc | 螢幕鎖定解除方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000237455A (ja) * | 1999-02-16 | 2000-09-05 | Konami Co Ltd | 音楽演出ゲーム装置、音楽演出ゲーム方法および可読記録媒体 |
JP2001013964A (ja) * | 1999-06-25 | 2001-01-19 | Yamaha Corp | 演奏装置及びその記録媒体 |
CN100361051C (zh) * | 2004-12-30 | 2008-01-09 | 集嘉通讯股份有限公司 | 移动产品的动作分析装置及方法 |
CN101483012B (zh) * | 2008-01-10 | 2011-03-30 | 肖伟 | 一种舞蹈教学机及其检测方法 |
JP2009189569A (ja) * | 2008-02-14 | 2009-08-27 | Namco Bandai Games Inc | 音楽ゲーム装置 |
CN101306249B (zh) * | 2008-05-30 | 2011-09-14 | 北京中星微电子有限公司 | 动作分析装置和方法 |
-
2015
- 2015-02-02 CN CN201510056266.2A patent/CN104754421A/zh active Pending
- 2015-02-25 TW TW104106115A patent/TWI574256B/zh not_active IP Right Cessation
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1259721A (zh) * | 1996-10-31 | 2000-07-12 | 传感电子公司 | 视频信息智能管理系统 |
US20070081694A1 (en) * | 2005-10-06 | 2007-04-12 | Pitney Bowes Incorporated | Method for detecting fraud in a printed image |
TW201022982A (en) * | 2008-12-02 | 2010-06-16 | Univ Nat Changhua Education | A personalized rhythm authentication system |
TW201322051A (zh) * | 2011-11-18 | 2013-06-01 | Asustek Comp Inc | 螢幕鎖定解除方法 |
Also Published As
Publication number | Publication date |
---|---|
TW201535358A (zh) | 2015-09-16 |
CN104754421A (zh) | 2015-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI574256B (zh) | 互動節拍特效系統及互動節拍特效處理方法 | |
TWI574252B (zh) | 同步節拍特效系統及同步節拍特效處理方法 | |
US20190304448A1 (en) | Audio playback device and voice control method thereof | |
WO2019101015A1 (zh) | 音频信号处理方法、装置和存储介质 | |
WO2016177296A1 (zh) | 一种生成视频的方法和装置 | |
CN112511850B (zh) | 连麦方法、直播显示方法、装置、设备及存储介质 | |
TW201627988A (zh) | 同步視覺特效系統及同步視覺特效處理方法 | |
TW201627987A (zh) | 演唱視覺特效系統及演唱視覺特效處理方法 | |
TWI585614B (zh) | 複合節拍特效系統及複合節拍特效處理方法 | |
CN104822095A (zh) | 复合节拍特效系统及复合节拍特效处理方法 | |
TWI555013B (zh) | 聲感視覺特效系統及聲感視覺特效處理方法 | |
TWI545452B (zh) | 伴唱視覺特效系統及伴唱視覺特效處理方法 | |
CN105657510B (zh) | 图像显示装置及其信息提供方法 | |
CN112188226B (zh) | 直播处理方法、装置、设备及计算机可读存储介质 | |
US10951951B2 (en) | Haptics metadata in a spectating stream | |
JP7078743B2 (ja) | 情報処理システム、情報処理装置およびコンテンツファイルの生成方法 | |
JP6422286B2 (ja) | カラオケ管理システム | |
JP6139214B2 (ja) | 情報端末、情報端末用プログラム及びカラオケ装置 | |
TW201619953A (zh) | 複合節拍特效系統及複合節拍特效處理方法 | |
TW201627982A (zh) | 壓感視覺特效系統及壓感視覺特效處理方法 | |
TW201619954A (zh) | 複合節拍特效系統及複合節拍特效處理方法 | |
CN107073331A (zh) | 互动游戏系统 | |
JP5728120B1 (ja) | 音響システム、通信機器及びプログラム | |
JP2015219320A (ja) | プログラム、カラオケ装置及びカラオケシステム | |
JP2022551241A (ja) | メディアデータを再生する方法、装置、システム、デバイス、および記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |