TWI585614B - 複合節拍特效系統及複合節拍特效處理方法 - Google Patents

複合節拍特效系統及複合節拍特效處理方法 Download PDF

Info

Publication number
TWI585614B
TWI585614B TW104107146A TW104107146A TWI585614B TW I585614 B TWI585614 B TW I585614B TW 104107146 A TW104107146 A TW 104107146A TW 104107146 A TW104107146 A TW 104107146A TW I585614 B TWI585614 B TW I585614B
Authority
TW
Taiwan
Prior art keywords
beat
special effect
effect
signal
synchronous
Prior art date
Application number
TW104107146A
Other languages
English (en)
Other versions
TW201619757A (zh
Inventor
胡俊峰
Original Assignee
蘇州樂聚一堂電子科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from CN201410719685.5A external-priority patent/CN104378696A/zh
Application filed by 蘇州樂聚一堂電子科技有限公司 filed Critical 蘇州樂聚一堂電子科技有限公司
Publication of TW201619757A publication Critical patent/TW201619757A/zh
Application granted granted Critical
Publication of TWI585614B publication Critical patent/TWI585614B/zh

Links

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)

Description

複合節拍特效系統及複合節拍特效處理方法
本發明涉及多媒體特效領域,特別涉及一種複合節拍特效系統及一種複合節拍特效處理方法。
卡拉OK是一種多媒體伴奏演唱系統,演唱者可於預先錄製之多媒體音樂伴奏下參與歌唱。卡拉OK能透過聲音處理使演唱者之聲音得到美化與潤飾,當再與音樂伴奏有機結合時,就變成渾然一體之身歷聲歌曲。這種伴奏方式,給歌唱愛好者們帶來極大之方便和愉悅,成為人們休閒娛樂之一種方式,而現於多稱為KTV。
普通之KTV系統中,使用者之歌聲和伴奏音樂可混合於一起播放,但用戶無法改變包房內之燈光特效以及視頻特效。亦即,現有之KTV系統之互動性很弱。
有鑑於此,有必要提供一種複合節拍特效系統及一種複合節拍特效處理方法,其既可為用戶帶來富有節拍感之視覺特效,又能回應用戶自己之節拍動作。
本發明實施方式提供一種複合節拍特效系統,其包括:控制主機、節拍感應裝置及特效輸出設備;所述控制主機於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之同步視覺特效資料集與節拍特效資料集,所述同步視覺特效資料集內包括多個同步視覺特效標籤,每個同步視覺特效標籤包括時間設定資料以及同步視覺特效設定資料,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間設定資料和節拍特效設定資料;所述控制主機同步從所述同步視覺特效資料集中獲得與當前時間匹配之同步視覺特效標籤並生成與所述多媒體檔同步播放之同步視覺特效訊號;當使用者做出節拍動作,所述節拍感應裝置感應到使用者之節拍動作後生成節拍觸發訊號,並將所述節拍觸發訊號發送給所述控制主機;於所述多媒體檔之播放過程中,若接收到所述節拍觸發訊號,則所述控制主機根據當前時間從所述節拍特效資料集中獲取匹配之節拍特效標籤,並根據獲取之節拍特效標籤生成節拍特效訊號;所述特效輸出設備將所述同步視覺特效訊號或者節拍特效訊號輸出。
於一實施方式中,若接收所述節拍觸發訊號,且當前時間具有所述同步特效訊號時,所述控制主機還控制所述特效輸出設備暫停輸出所述同步視覺特效訊號,或者淡化所述同步視覺特效訊號,或者突出所述節拍特效訊號,所述控制主機於與所述節拍觸發訊號對應之節拍特效訊號輸出完畢後恢復所述同步視覺特效訊號之輸出狀態。
於一實施方式中,所述節拍特效標籤內還包括節拍觸發訊號設定資料;所述匹配之節拍特效標籤係指同時滿足所述時間設定資料和所述節拍觸發訊號設定資料之節拍特效標籤。
於一實施方式中,所述節拍特效設定資料設定多種節拍特效,所述節拍觸發訊號設定資料設定分別對應於所述多種節拍特效之節拍觸發訊號,所述多個節拍觸發訊號分別對應於不同之節拍設備或者使用者;所述控制主機接收所述節拍感應裝置發送之多種節拍觸發訊號後,為每個匹配之節拍觸發訊號生成對應之節拍特效訊號;所述特效輸出設備輸出節拍特效訊號。
於一實施方式中,上述系統還包括外部設備,所述外部設備於播放多媒體檔時或者多媒體檔被加入播放清單時將對應之多媒體檔之標識發送給所述控制主機;所述控制主機於接收到所述多媒體檔之標識後根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之同步視覺特效資料集與節拍特效資料集之請求。
於一實施方式中,所述控制主機獲取與所述多媒體檔對應之同步視覺特效資料集或節拍特效資料集包括:所述控制主機根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之同步視覺特效資料集或節拍特效資料集之請求;以及接收所述雲端伺服器系統返回之所述同步視覺特效資料集或節拍特效資料集。
於一實施方式中,所述控制主機獲取與所述多媒體檔對應之同步視覺特效資料集或節拍特效資料集還包括:所述控制主機將身份認證資訊發送給所述雲端伺服器系統,以使所述雲端伺服器系統驗證所述控制主機是否具有獲取同步視覺特效資料集或節拍特效資料集之許可權;所述雲端伺服器系統於所述控制主機具有獲取同步視覺特效資料集或節拍特效資料集之許可權時才返回所述控制主機請求之同步視覺特效資料集或節拍特效資料集。
於一實施方式中,所述控制主機獲取與所述多媒體檔對應之同步視覺特效資料集或節拍特效資料集包括:從所述多媒體檔內解析出內嵌於所述多媒體檔內之所述同步視覺特效資料集或節拍特效資料集。
於一實施方式中,所述特效輸出設備包括:音訊輸出裝置、視頻輸出裝置以及燈光特效裝置;所述同步視覺特效設定資料及節拍特效設定資料均包括音訊特效資料、燈光特效資料以及視頻特效資料中之一種或多種,所述音訊特效資料設定所述音訊輸出裝置發出之聲音特效,所述燈光特效資料設定所述燈光特效裝置燈光之變化方式,所述視頻特效資料設定所述視頻輸出裝置之圖像變化方式包括圖案、顏色、位置、角度、大小等變化中之一種或多種。
於一實施方式中,所述節拍感應裝置包括錄音模組以及音訊分析模組,所述錄音模組用於採集外部之聲音,所述音訊分析模組用於根據所述錄音模組採集之聲音分析其音訊特徵是否符合預設之節拍音訊特徵,若是,則所述音訊分析模組生成所述節拍觸發訊號。
於一實施方式中,所述節拍感應裝置包括視頻捕捉模組以及視頻分析模組,所述視頻捕捉模組用於拍攝使用者之視頻,所述視頻分析模組用於分析所述視頻捕捉模組拍攝之使用者視頻,以識別出使用者之動作是否符合預定之特徵,若是,則所述視頻分析模組生成所述節拍觸發訊號。
於一實施方式中,所述系統還包括:節拍設備,用於根據使用者之操作發出所述節拍觸發訊號至所述控制主機、所述特效輸出設備或者所述節拍感應裝置。
於一實施方式中,所述節拍設備為用於發出特定音訊訊號之無源發聲設備。
於一實施方式中,所述節拍設備為電子裝置,所述電子裝置於使用者按鈕、拍打、觸摸、旋轉、移動時發出特定之訊號給所述控制主機、所述特效輸出設備或者所述節拍感應裝置。
本發明實施方式還提供一種複合節拍特效處理方法,所述方法包括:於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之同步視覺特效資料集與節拍特效資料集,所述同步視覺特效資料集內包括多個同步視覺特效標籤,每個同步視覺特效標籤包括時間設定資料以及同步視覺特效設定資料,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間設定資料和節拍特效設定資料;同步從所述同步視覺特效資料集中獲得與當前時間匹配之同步視覺特效標籤並生成與所述多媒體檔同步播放之同步視覺特效訊號;當用戶做出節拍動作,感應到用戶之節拍動作後生成節拍觸發訊號;於所述多媒體檔之播放過程中,若接收到所述節拍觸發訊號,則根據當前時間從所述節拍特效資料集中獲取匹配之節拍特效標籤,並根據獲取之節拍特效標籤生成節拍特效訊號;以及輸出所述同步視覺特效訊號或者節拍特效訊號。
於一實施方式中,若接收所述節拍觸發訊號,且當前時間具有所述同步特效訊號時,還暫停輸出所述同步視覺特效訊號,或者淡化所述同步視覺特效訊號,或者突出所述節拍特效訊號,於與所述節拍觸發訊號對應之節拍特效訊號輸出完畢後恢復所述同步視覺特效訊號之輸出狀態。
於一實施方式中,所述節拍特效標籤內還包括節拍觸發訊號設定資料;所述匹配之節拍特效標籤係指同時滿足所述時間設定資料和所述節拍觸發訊號設定資料之節拍特效標籤。
於一實施方式中,所述節拍特效設定資料設定多種節拍特效,所述節拍觸發訊號設定資料設定分別對應於所述多種節拍特效之節拍觸發訊號,所述多個節拍觸發訊號分別對應於不同之節拍設備或者使用者;所述控制主機接收所述節拍感應裝置發送之多種節拍觸發訊號後,為每個匹配之節拍觸發訊號生成對應之節拍特效訊號;所述特效輸出設備輸出節拍特效訊號。
於一實施方式中,所述獲取與所述多媒體檔對應之同步視覺特效資料集或節拍特效資料集包括:根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之同步視覺特效資料集或節拍特效資料集之請求;以及接收所述雲端伺服器系統返回之所述同步視覺特效資料集或節拍特效資料集。
於一實施方式中,所述獲取與所述多媒體檔對應之同步視覺特效資料集或節拍特效資料集還包括:將身份認證資訊發送給所述雲端伺服器系統,以使所述雲端伺服器系統驗證是否具有獲取同步視覺特效資料集或節拍特效資料集之許可權;所述雲端伺服器系統於所述控制主機具有獲取同步視覺特效資料集或節拍特效資料集之許可權時才返回所述同步視覺特效資料集或節拍特效資料集。
於一實施方式中,所述方法還包括: 於外部設備播放多媒體檔時,接收所述外部設備發送之所述多媒體檔之標識;所述獲取與所述多媒體檔對應之同步視覺特效資料集或節拍特效資料集之步驟於接收到所述多媒體檔之標識後進行。
於一實施方式中,所述獲取與所述多媒體檔對應之同步視覺特效資料集或節拍特效資料集包括:從所述多媒體檔內解析出內嵌於所述多媒體檔內之所述同步視覺特效資料集或節拍特效資料集。
於一實施方式中,所述同步視覺特效設定資料與節拍特效設定資料包括音訊特效資料、燈光特效資料、以及視頻特效資料中之一種或多種,所述音訊特效資料設定所述音訊輸出裝置發出之聲音特效,所述燈光特效資料設定所述燈光特效裝置燈光之變化方式,所述視頻特效資料設定所述視頻輸出裝置之圖像變化方式包括圖案、顏色、位置、角度、大小等變化中之一種或多種。
於一實施方式中,所述方法還包括:採集外部之聲音,並根據採集之聲音分析其音訊特徵是否符合預設之節拍音訊特徵,若是,則生成所述節拍觸發訊號。
於一實施方式中,所述方法還包括:拍攝使用者之視頻,並根據拍攝之使用者視頻識別出使用者之動作是否符合預定之特徵,若是,則生成所述節拍觸發訊號。
於一實施方式中,所述方法還包括:接收節拍設備根據使用者之操作發出之所述節拍觸發訊號。
上述技術方案之有益效果是:上述之複合節拍特效系統與方法於播放多媒體檔時還獲取與多媒體檔對應之同步視覺特效資料集與節拍特效資料集,於播放音樂之過程中控制主機根據同步視覺特效資料集生成並輸出與多媒體檔同步播放之同步視覺特效,增加多媒體播放系統之特效種類。而且,當感應到用戶之節拍動作後,根據節拍特效資料集輸出對應之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能,尤其適用於KTV等場合。而且節拍訊號除由專門之電子節拍設備觸發外,使用者於KTV裡之常見操作例如搖動鈴鼓都可觸發節拍動作,因此可讓用戶無需學習就能自然之啟動節拍特效,提升用戶於KTV房間裡之使用感受。
為讓本發明之上述和其他目的、特徵和優點能更明顯易懂,下文特舉較佳實施方式,並配合所附圖式,作詳細說明如下。
為更進一步闡述本發明為實現預定發明目的所採取之技術手段及功效,以下結合附圖及較佳實施方式,對依據本發明之具體實施方式、結構、特徵及其功效,詳細說明如後。
第一實施方式
參閱圖1,其為本發明第一實施方式提供之複合節拍特效系統之架構示意圖。如圖1所示,複合節拍特效系統100包括控制主機10、點歌終端11、節拍感應裝置12、音訊輸出裝置13、多媒體視頻輸出裝置14、燈光特效裝置15以及視頻輸出裝置16。可以理解,圖1之架構僅為示意,複合節拍特效系統100還可包括更多之設備,例如功放、麥克風等等。
點歌終端11提供點歌之介面,使用者例如可透過點歌介面進行點歌,選擇之歌曲被提交給控制主機10,控制主機10根據待播放之清單播放與被點歌曲對應之伴唱音及伴唱視頻,即將音訊與視頻分別傳輸給音訊輸出裝置13以及多媒體視頻輸出裝置14輸出。
點歌終端11具體地可是與控制主機10相連之輸入/輸出裝置,例如與控制主機10相連之觸控面板,此時,點歌終端11之應用程式介面實質上是由控制主機10控制,點歌終端11僅作為輸入/輸出裝置。用戶透過觸控面板點播之歌曲直接被控制主機10獲取到。
點歌終端11還可是單獨之電子裝置,例如安裝有特定之應用程式之電子裝置如手機、平板電腦等等。使用者可透過該應用程式進行點歌,而所點歌曲之資訊由該應用程式傳輸給控制主機10。其具體之傳輸方式例如可包括以下幾種:當控制主機10與點歌終端11處於同一局域網內時,點歌終端11可透過預定之網路埠直接將使用者所點歌曲之資訊經由該網路埠發送給控制主機10。可以理解,此種方式需要控制主機10開放相應之埠與網路服務。當控制主機10與點歌終端11不處於同一局域網內時,可透過伺服器中轉以傳輸使用者所點歌曲之資訊。即,應用程式先將使用者所點歌曲之資訊提交至伺服器,然後,當同一使用者於控制主機10中登陸時,控制主機10就可從伺服器處獲取或由伺服器主動推送當前登陸用戶點播之歌曲。
節拍感應裝置12用在於控制主機10播放所述多媒體檔時感應到使用者之節拍動作後生成節拍觸發訊號。此處之節拍動作係指使用者回應音樂節奏所做出之動作,其具體實施包括但並不限於:歡呼、搖動鈴鼓、搖動手臂、操控手機、按鍵遙控器、跳舞等等。
總體上來說,節拍動作可分為兩類:聲音與動作。
因此,於一具體之實施方式中,參閱圖2,節拍感應裝置12是基於音訊分析實現之,其包括錄音模組122以及音訊分析模組124,錄音模組122用於採集外部之聲音,音訊分析模組124用於根據錄音模組122採集之聲音分析其音訊特徵是否符合預設之節拍音訊特徵,若是,則音訊分析模組124生成節拍觸發訊號。
例如,於KTV設施中最為常見之鈴鼓被晃動時,除發出清脆之聲音外,還會發出超聲波。因此,當音訊分析模組124檢測到預定頻率之超聲波後,則生成節拍觸發訊號。
音訊分析模組124還可透過音訊識別之方式,識別錄取之音訊是否是預定之內容,例如當使用者歡呼“我愛你”時,則生成節拍觸發訊號。
參閱圖3,於另一具體之實施方式中,節拍感應裝置12是基於視頻分析使用者之動作實現之,其包括視頻捕捉模組126以及視頻分析模組128,視頻捕捉模組126用於拍攝使用者之視頻,視頻分析模組128用於分析視頻捕捉模組126拍攝之使用者視頻,以識別出使用者之動作是否符合預定之特徵,若是,則視頻分析模組128生成節拍觸發訊號。
例如,透過視頻分析,獲取到使用者雙手同時晃動手臂之操作,則視頻分析模組128生成節拍觸發訊號。
於另一具體之實施方式中,節拍感應裝置12是基於節拍設備發送之節拍訊號實現之。例如,節拍感應裝置12包括藍牙模組、紅外模組或者WIFI模組。
節拍設備例如可為一遙控器,其上設有多個按鍵,當使用者按下某個按鍵時,遙控器發射對應之紅外訊號給所述節拍感應裝置12。亦即,遙控器發送之紅外訊號即為上述之節拍訊號。
節拍設備例如還可為一專用之電子設備,其內也設有藍牙模組,從而可與節拍感應裝置12之藍牙模組配對,配對成功後,當檢測到使用者按下某個按鍵,或者晃動該節拍設備時,節拍設備向節拍感應裝置12發送對應之藍牙訊號。亦即,節拍設備發送之藍牙訊號即為上述之節拍訊號。
節拍設備例如還可為一手機,手機透過WIFI與節拍感應裝置12相連,手機內安裝有特定之應用程式,該應用程式透過手機內置之加速度計獲取節拍設備之運動參數,並進一步計算節拍設備之運動軌跡,當節拍設備之運動軌跡符合預設之特徵時,手機透過WIFI網路向節拍感應裝置12發送預定之網路訊號。亦即,上述手機發送之網路訊號即為上述之節拍訊號。
此外,可以理解,節拍設備並不限於僅為上述之某一種類型,各種類型之節拍設備還可組合使用。亦即,節拍感應裝置12會接收不同節拍設備發出之節拍訊號;或者控制主機10檢測多個使用者之動作或者音訊。
音訊輸出裝置13例如可為音箱,而多媒體視頻輸出裝置14和視頻輸出裝置16例如可為電視機、顯示器、投影儀等任意輸出視頻圖像之設備。燈光特效裝置15包括至少一燈具,其可根據控制訊號輸出燈光訊號。優選地,燈光特效裝置15可包括LED燈陣列以及對應之驅動裝置,該LED燈陣列可佈滿房間之所有牆壁、屋頂甚至地面。當LED燈陣列中每個LED燈被單獨驅動時,整個LED燈陣列實質上也構成一顯示器,可用於顯示複雜之圖像訊號,此時,燈光特效裝置15與視頻輸出裝置16之不同之處在於顯示尺度之不同。
多媒體視頻輸出裝置14例如是用於顯示多媒體伴唱檔之視頻主畫面以及疊加於視頻主畫面上之視頻特效,而視頻輸出裝置16例如是用於顯示視頻特效。
可以理解,複合節拍特效系統100中還可包括多個多媒體視頻輸出裝置14和多個視頻輸出裝置16。
本實施方式之複合節拍特效系統100於播放歌曲或者其他多媒體檔時,控制主機10除獲取歌曲之原始檔案外,還獲取與當前歌曲對應之同步視覺特效資料集與節拍特效資料集。
於一具體之實施方式中,上述之同步視覺特效資料集與節拍特效資料集是嵌入歌曲之原始檔案內。因此,控制主機10要從歌曲之原始檔案中解析出對應之同步視覺特效資料集與節拍特效資料集。可以理解,歌曲之原始檔案既可是存儲於本地之記憶體(指透過資料匯流排與控制主機相連之記憶體),也可是存儲於網路記憶體內。此處之網路記憶體,既可包括局域網、企業內部網,也可包括互聯網。
於另一具體之實施方式,上述之同步視覺特效資料集與節拍特效資料集是與歌曲之原始檔案相互獨立存儲之檔。與歌曲之原始檔案相似,同步視覺特效資料集與節拍特效資料集,既可是存儲於本地之記憶體,也可是存儲於網路記憶體內。
上述之同步視覺特效資料集與節拍特效資料集是採用預定義之協定或者語言描述。
於一具體之實施方式中,同步視覺特效資料集可如下所示,其中每一行表示一同步視覺特效標籤: [00:00.00] 同步視覺特效設定資料1 [00:24.88] 同步視覺特效設定資料2 [01:27.05] 同步視覺特效設定資料3 [02:30.39] 同步視覺特效設定資料4 … …
其中,每一時間設定資料,例如[00:24.88],是一同步視覺特效之起點時間,所述同步視覺特效於播放完畢後自然結束。而具體之同步視覺特效是由對應之同步視覺特效設定資料所定義之。
同步視覺特效設定資料可是視頻、動畫、圖片、文字之原始檔案。
同步視覺特效設定資料可是用於設定生成同步視覺特效之方式及其他參數。此處之同步視覺特效可包括靜態特效以及動態特效。靜態特效例如可包括燈光顏色、燈光亮度、顯示圖案、顯示文字等內容不變之特效。動態特效例如包括各種動畫,例如顏色變換、亮度變化、圖案變換、文字變化、動畫或其組合。動態特效可對應一節拍,也可對應一系列連續之節拍。上述之動畫效果,例如可包括於伴唱多媒體視頻主畫面上疊加動畫特效,比如顯示全屏之鮮花、下雨、下雪、心形蛋糕等等。同步視覺特效設定資料還可是用於獲取同步視覺特效之其他格式之資料,例如,同步視覺特效資源檔之識別符。而此處之同步視覺特效資源檔可是預存儲於與控制主機10相連之記憶體內,或者存儲於雲端伺服器內。控制主機10可於記憶體內讀取與同步視覺特效資源檔之識別符對應之同步視覺特效資源檔,或者發起網路請求,從雲端伺服器處下載同步視覺特效資源檔。
優選地,同步視覺特效設定資料所設定之同步視覺特效,是與音樂之節拍相關之,節拍之時間節點是透過上述之時間設定資料來控制。總體上來說,同步視覺特效設定資料所設定之同步視覺特效,針對音樂當中之每一節拍,於同步視覺特效上最好能夠輸出一明顯之視覺特效變化,而且同步視覺特效變化之幅度、速度、範圍等等參數可是與節拍之力度(透過對音訊參數如音量、頻率進行分析得到)相關之。因此,透過同步視覺特效就能夠反應出音樂之變化,使得音樂除聲音外,還能夠透過同步視覺特效之方式給人們以更豐富之刺激。換言之,本實施方式中之同步視覺特效之目將音樂之節拍視覺化,強化音樂之節拍感。
如果一同步視覺特效標籤中包含多個節拍之同步視覺特效或者包含靜態之視覺特效,則上述之同步視覺特效標籤所定義之時間設定資料還可被解釋為時間區間,例如,由兩個相鄰之時間起點構成一時間區間,例如,[00:00.00]- [00:24.88]構成之時間區間為同步視覺特效設定資料1之有效時間區間。於此時間區間內,會持續輸出同步視覺特效設定資料1所設定之同步視覺特效。
可以理解,同步視覺特效標籤之資料格式並不限於此,時間設定資料也可包括更多之資訊,例如直接指定出時間區間,如下: [00:00.00-00:23.86] 同步視覺特效設定資料1 [00:24.88-01:00.90] 同步視覺特效設定資料2 [01:27.05-03:29.00] 同步視覺特效設定資料3 [03:30.39-05:38.86] 同步視覺特效設定資料4
方括號內第一時間為開始時間,而後一時間為結束時間。透過此種方式,可定義出不連續之時間區間,其適應性比只包括開始時間之方式更加靈活。於此情況下,於所有時間區間外(例如於01:10.00時)都不會觸發任何同步視覺特效。
此外,還可是採用開始時間加上時間長度來定義每個同步視覺特效標籤之有效時間區間,可如下: [00:00.00, 00:55.00] 同步視覺特效設定資料1 [00:24.00, 01:03.00] 同步視覺特效設定資料2 [01:28.00, 03:02.00] 同步視覺特效設定資料3 [04:30.00, 08:08.00] 同步視覺特效設定資料4
從上述之資料定義可看出,同步視覺特效設定資料1與同步視覺特效設定資料2對應之同步視覺特效之有效時間區間有重疊,因此,於本實施方式中,兩個不同之同步視覺特效是可於同一時間區間內並存。
進一步地,對應同一時間區間,還可有多個同步視覺特效,此多個同步視覺特效可是相同類型之同步視覺特效,例如多個燈光特效,或者多個視頻疊加特效,也可是多個不同類型之視覺特效,例如,既包括燈光特效,也包括視頻特效。此時,同步視覺特效設定資料集可如下: [00:00.00, 00:55.00] 同步視覺特效設定資料1-1,同步視覺特效設定資料1-2 [00:24.00, 01:03.00] 同步視覺特效設定資料2 [01:28.00, 03:02.00] 同步視覺特效設定資料3 [04:30.00, 01:08.00] 同步視覺特效設定資料4-1,同步視覺特效設定資料4-2。
可以理解,上述第一同步視覺特效標籤之設定方式等效於以下方式: [00:00.00, 00:55.00] 同步視覺特效設定資料1-1 [00:00.00, 00:55.00] 同步視覺特效設定資料1-2
即,將包括多個同步視覺特效之同步視覺特效標籤拆分成多個有效時間區間相同之同步視覺特效標籤。
於以上所列舉之同步視覺特效資料集之實例中,時間之表徵方式為時:分:秒,惟,本發明並不限於採用這種方式,例如,可直接採用秒數、毫秒數、分鐘數等任意之單位來表徵。以開始時間00:24.00為例,換算成秒數則為1440,換算成毫秒數為1440000,直接以分鐘數表示即為24。時間設定資料中所記錄之時間資料還可是對時間值進行各種可逆運算之結果,甚至可進行加密運算。以上述之秒數1440為例,例如可將其除以2得到720。亦即於時間設定資料中存儲720,但實際上其表達1440秒。可以理解,經過此運算後,若要計算某個節拍特效標籤之有效時間,需要進行逆向運算得到實際之時間。
可以理解,無論經過何種處理,其本質仍然是透過於同步視覺特效標籤中定義一時間節點或者時間區間,並比較當前時間與定義之時間節點或時間區間以獲取匹配之同步特效標籤之方式,因此,所有這些方式均應被包括於上述時間設定資料之範圍內。
於一具體之實施方式中,節拍特效資料集可如下所示,其中每行表示一節拍特效標籤。 [00:00.00] 節拍特效設定數據1 [00:24.88] 節拍特效設定數據2 [01:27.05] 節拍特效設定數據3 [02:30.39] 節拍特效設定數據4 … …
於此種情形下,節拍特效標籤內僅包括節拍特效標籤生效之時間節點與節拍特效設定資料,並未對節拍觸發訊號做出定義,因此,可將所有支援之節拍觸發訊號都視為同一節拍觸發訊號。亦即,當檢測到任意一種節拍觸發訊號時,只要時間與節拍特效標籤所定義之時間節點匹配,就生成對應之節拍特效。例如,無論是用戶透過晃動鈴鼓還是歡呼“我愛你”,只要時間匹配,都可觸發同一節拍特效。
根據這種格式之資料,每個節拍特效標籤內僅包括時間起點,不直接包括每個節拍特效標籤之時間長度,這表示此時間長度需要根據上下兩個節拍特效標籤計算。例如,[00:00.00]- [00:24.88]構成之時間區間為節拍特效設定資料1之有效時間區間。當然,節拍特效設定資料1之有效時間區間並不限於是這種方式。例如,給定一時間差範圍,距離開始時間之前或者之後小於上述之時間差範圍之時間都可作為對應之特效設定資料之有效時間區間。以上述之[00:24.88]節拍特效設定資料2為例,若允許之時間差範圍為2秒,則節拍特效設定資料2之生效時間區間為[00:22.88]- [00:26.88]。
於一具體之實施方式中,節拍特效資料集可如下: [00:00.00] 節拍觸發訊號設定資料1 節拍特效設定資料1 [00:24.88] 節拍觸發訊號設定資料2 節拍特效設定資料2 [01:27.05] 節拍觸發訊號設定資料1 節拍特效設定資料3 [02:30.39] 節拍觸發訊號設定資料3 節拍特效設定資料4 … …
其中,方括號內時間設定資料,其表達距離檔開始播放之時間,跟於方括號後對應之節拍觸發訊號設定資料和特效設定資料。節拍觸發訊號設定資料用於設定於此時間區間內有效之節拍觸發訊號,特效設定資料用於設定節拍特效之生成方式以及參數。根據此種格式,節拍特效標籤內除定義節拍特效資料,還定義對應之節拍觸發訊號,例如,具體之定義,是語音指令、肢體動作、或者鈴鼓之聲音。只有被定義之節拍觸發訊號才能觸發對應之節拍特效,其餘節拍觸發訊號,即使於正確之時間區間內被檢測到,也會被忽略。
根據這種格式之資料,每個節拍特效標籤內僅包括時間起點,不直接包括每個節拍特效標籤之時間長度,這表示此時間長度需要根據上下兩個節拍特效標籤計算。例如節拍特效設定資料1之時間區間就是00:00.00至00:24.88,其時間長度為00:24.88,即24秒88毫秒。
可以理解,節拍特效標籤之資料格式並不限於此,時間設定資料也可包括更多之資訊,例如直接指定出時間區間,如下: [00:00.00-00:23.86] 節拍觸發訊號設定資料1 節拍特效設定資料1 [00:24.88-01:00.90] 節拍觸發訊號設定資料1 節拍特效設定資料2 [01:27.05-03:29.00] 節拍觸發訊號設定資料1 節拍特效設定資料3 [03:30.39-05:38.86] 節拍觸發訊號設定資料1 節拍特效設定資料4
方括號內第一時間為開始時間,而後一時間為結束時間。透過此種方式,可定義出不連續之時間區間,其適應性比只包括開始時間之方式更加靈活。於此情況下,根據一種實施方式,於所有時間區間外(例如於01:10.00時)接收到之任何節拍觸發訊號都不會觸發任何節拍特效。根據另一種實施方式,還可給時間區間定義一允許之誤差範圍,若當前時間距離一時間區間之兩個端點中之任一端點之時間差小於項所述之允許之誤差範圍,則所述當前時間之節拍觸發訊號雖然不處於一時間區間內,仍然會觸發對應之節拍特效。亦即,時間設定資料所設定之時間區間被向兩端各延長允許之誤差範圍。例如,若允許之誤差範圍為2秒,則00:23.88時之節拍觸發訊號1仍然會觸發特效設定資料2所設定之節拍特效。
此外,還可是採用開始時間加上時間長度來定義每個節拍特效標籤之有效時間區間,可如下: [00:00.00, 00:55.00] 節拍觸發訊號設定資料1 節拍特效設定資料1 [00:24.00, 01:03.00] 節拍觸發訊號設定資料2 節拍特效設定資料2 [01:28.00, 03:02.00] 節拍觸發訊號設定資料1 節拍特效設定資料3 [04:30.00, 01:08.00] 節拍觸發訊號設定資料1 節拍特效設定資料4
從上述之資料定義可看出,節拍特效設定資料1與節拍特效設定資料2對應之節拍特效之有效時間區間有重疊,但這兩個節拍特效所對應之節拍觸發訊號是不同之,因此,於本實施方式中,兩個不同之節拍特效是可於同一時間區間內並存。
進一步地,對應同一節拍觸發訊號,還可有多個節拍特效,此多個節拍特效可是相同類型之視覺特效,例如多個燈光特效,或者多個視頻疊加特效,也可是多個不同類型之視覺特效,例如,既包括燈光特效,也包括視頻特效。此時,節拍特效標籤例如可如下: [00:00.00, 00:55.00] 節拍觸發訊號設定資料1 節拍特效設定資料1-1,節拍特效設定數據1-2 [00:24.00, 01:03.00] 節拍觸發訊號設定資料2 節拍特效設定資料2 [01:28.00, 03:02.00] 節拍觸發訊號設定資料1 節拍特效設定資料3 [04:30.00, 08:08.00] 節拍觸發訊號設定資料1 節拍特效設定資料4-1,節拍特效設定數據4-2。
進一步地,對應於每一節拍特效,還可具有一或者多個對應之節拍觸發訊號。亦即,一或者多個節拍觸發訊號觸發同一節拍特效。而且,當一節拍特效標籤中設定多個節拍特效時,還可為每個節拍特效分別設定對應之節拍觸發訊號。如下: [00:00.00, 00:55.00] 節拍觸發訊號設定資料1-1,節拍觸發訊號設定資料1-2,節拍特效設定數據1-1,節拍特效設定數據1-2
其中,節拍觸發訊號設定資料1-1與節拍特效設定資料1-1對應,節拍觸發訊號設定資料1-2與節拍特效設定資料1-2對應。於同一時間區間內,當檢測到節拍觸發訊號1(對應於節拍觸發訊號設定資料1-1)時,生成並輸出節拍特效1(對應於節拍特效設定資料1-1);當檢測到節拍觸發訊號2(對應於節拍觸發訊號設定資料1-2)時,生成並輸出節拍特效2(對應於節拍特效設定資料1-2)。
根據這種方式,不同使用者透過不同之節拍設備可分別觸發不同之節拍特效。而多個節拍特效可透過設計使得相互匹配,從而讓節拍特效系統支援多個使用者同時進行互動,提升整體之參與感。
可以理解,上述節拍特效標籤之設定方式等效於以下方式: [00:00.00, 00:55.00] 節拍觸發訊號設定資料1-1,節拍特效設定數據1-1 [00:00.00, 00:55.00] 節拍觸發訊號設定資料1-2,節拍特效設定數據1-2
即,將包括多個特效之節拍特效標籤拆分成多個有效時間區間相同之,但節拍觸發訊號與節拍特效設定資料都不相同之節拍特效標籤。
可以理解,同步視覺特效標籤還可與節拍特效標籤混合於一起存儲。
於本實施方式中,一方面,控制主機10根據同步視覺特效資料集生成並輸出與多媒體檔同步播放之同步視覺特效,同步視覺特效相當於背景特效。
而另一方面,控制主機10於接收到節拍感應裝置12發送之節拍觸發訊號後,根據當前時間從節拍特效資料集中獲取匹配之節拍特效標籤,並根據獲取之節拍特效標籤生成節拍特效訊號。此處之匹配之節拍特效標籤例如係指滿足時間設定資料之節拍特效標籤,或者同時滿足時間設定資料以及節拍觸發訊號設定資料之節拍特效標籤。
於獲取到匹配之節拍特效標籤後,根據匹配之節拍特效標籤內之節拍特效設定資料生成對應之節拍特效訊號,並將節拍特效訊號發送給特效輸出設備進行輸出。
於一具體之實施方式中,節拍特效為音訊特效。如此,當感應到用戶之節拍動作(如檢測到用戶手搖鈴鼓發出之超聲波)時,從節拍特效資料集中找到匹配之節拍特效標籤例如係指時間區間包含當前時間且節拍觸發訊號是超聲波之節拍特效標籤。於獲取到匹配之節拍特效標籤後,可透過音訊輸出裝置13播放匹配之節拍特效標籤內特效設定資料所對應之音訊。透過此種方式,當使用者之節拍動作與節拍特效資料集中之某個節拍特效標籤匹配成功後,系統自動輸出所對應之音訊作為對用戶之節拍動作之回應,使得本實施方式之同步節拍特效系統透過互動獲得更加豐富之表達。
於一具體之實施方式中,節拍特效為視頻特效。如此,當感應到用戶之節拍動作(如檢測到用戶手搖鈴鼓發出之超聲波)時,從節拍特效資料集中找到匹配之節拍特效標籤。於獲取到匹配之節拍特效標籤後,可透過視頻輸出裝置16播放匹配之節拍特效標籤內特效設定資料所對應之視頻特效。透過此種方式,當使用者之節拍動作與節拍特效資料集中之某個節拍特效標籤匹配成功後,系統自動輸出對應之視頻作為對使用者之節拍動作之回應,使得本實施方式之同步節拍特效系統具有更豐富之互動性能。
於一具體之實施方式中,節拍特效為燈光特效。如此,當感應到用戶之節拍動作(如檢測到用戶手搖鈴鼓發出之超聲波時)時,從節拍特效資料集中找到匹配之節拍特效標籤。於獲取到匹配之節拍特效標籤後,可透過燈光特效裝置15播放匹配之節拍特效標籤內特效設定資料所對應之燈光特效。透過此種方式,每當使用者之節拍動作與節拍特效資料集中之某個節拍特效標籤匹配成功後,系統自動輸出對應之燈光特效作為對用戶之節拍動作之回應,使得本實施方式之同步節拍特效系統具有更豐富之互動性能。
進一步地,以上各種類型之特效還可組合使用。亦即,一節拍特效標籤內可包括多種類型之特效,例如,可包括聲音特效、視頻特效或者燈光特效之任意組合。
於一具體之實施方式中,同步視覺特效訊號與節拍特效訊號同時輸出,兩者不相互幹擾,即可透過不同之特效輸出設備進行輸出;兩者也可疊加輸出,例如當同步視覺特效訊號與節拍特效訊號均為視頻特效時,將節拍特效訊號疊加於同步視覺特效訊號上進行輸出。
於一具體之實施方式中,節拍特效訊號具有更高之優先順序,即,當接收到節拍觸發訊號且獲取到匹配之節拍特效標籤後,暫停輸出同步視覺特效訊號,轉而輸出節拍特效訊號,而於節拍特效訊號輸出結束一段時間後,再恢復輸出同步視覺特效訊號。
本實施方式之複合節拍特效系統於播放多媒體檔時還獲取與多媒體檔對應之同步視覺特效資料集與節拍特效資料集,於播放音樂之過程中控制主機根據同步視覺特效資料集生成並輸出與多媒體檔同步播放之同步視覺特效,增加多媒體播放系統物特效種類。而且,當感應到用戶之節拍動作後,根據節拍特效資料集輸出對應之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能,尤其適用於KTV等場合。而且節拍訊號除由專門之電子節拍設備觸發外,使用者於KTV裡之常見操作例如搖動鈴鼓都可觸發節拍動作,因此可讓用戶無需學習就能自然之啟動節拍特效,提升用戶於KTV房間裡之使用感受。
第二實施方式
參閱圖4,其為本發明第二實施方式提供之複合節拍特效系統200之示意圖。本實施方式之複合節拍特效系統200與圖1之複合節拍特效系統相似,其不同之處在於還包括:外部設備20。
外部設備20例如可為安裝有點歌應用程式之電腦。點歌面板11、音訊輸出裝置13及多媒體視頻輸出裝置14是與外部設備20相連。從而,點歌面板11、音訊輸出裝置13及多媒體視頻輸出裝置14與外部設備20自身構成一常見之可用於KTV等場合之多媒體點播系統。節拍感應裝置12、視頻輸出裝置16與燈光特效裝置15仍然與控制主機10相連。
本實施方式中,外部設備20例如為傳統之點歌系統主機,其實現點歌以及歌曲之播放控制功能。但相比於傳統之點歌系統主機,其進一步與控制主機10相連,用於向控制主機10發送使用者選擇或者編輯之互動節拍特效設定資料。
可以理解,為讓外部設備20可向控制主機10發送特定之資訊,可於控制主機10中公開特定之應用程式設計發展介面(API),從而可讓外部設備20進行調用,而向控制主機10發送上述之資訊。每當外部設備20播放一首歌曲時外部設備20可將歌曲之標識以及開始播放之時間透過上述之API提交給控制主機10。當然,外部設備20要實現API之調用,需要對現有點歌播放程式稍做修改,使得於需要時透過API與控制主機10同步資訊。
控制主機10於接收到外部設備20同步之歌曲資訊後,獲取與歌曲對應之同步視覺特效資料集與節拍特效資料集,並開始監測來自節拍感應裝置12之節拍觸發訊號,當接收到節拍感應裝置12之節拍觸發訊號後控制主機10根據當前時間從節拍特效資料集中獲取匹配之節拍特效標籤,並進一步透過燈光特效裝置15輸出節拍特效。
於本實施方式中,音訊輸出裝置13、以及多媒體視頻輸出裝置14還可同時輸出來自外部設備20之音視頻和來自控制主機10之節拍特效。以音訊為例,此時需要另外設置音訊疊加設備,其包括兩個輸入端,分別與外部設備20以及控制主機10之音訊輸出埠相連,音訊疊加設備之輸出埠與音訊輸出裝置13之音訊輸入口相連。音訊疊加設備透過音訊處理技術將外部設備20以及控制主機10輸出之音訊疊加至一起,然後傳輸給音訊輸出裝置13進行輸出。與音訊類似,如果要實現視頻疊加,此時需要另外設置視頻疊加設備。
特別之,當控制主機10是一智慧電子設備(如智慧手機)時,安裝於所述智慧電子設備中之軟體,可透過無線控制音訊輸出裝置13、燈光特效裝置15和視頻輸出裝置16以輸出節拍特效,也可透過無線訪問網路上之同步視覺特效資料集與節拍特效資料集,同時,透過內置麥克風錄取透過外部設備20播放出來之歌曲聲音,再透過特徵採樣及特徵匹配,直接識別出外部設備20所放之歌曲,從而無需與外部設備20通信就能夠獲得歌曲之標識,然後下載對應之同步視覺特效資料集與節拍特效資料集。
此外,外部設備20也不限於為點歌系統之主機,還可為其他智慧電子裝置例如智慧手機、平板電腦等。如此,使用者還可利用自己之設備點播歌曲。
進一步地,控制主機10、外部設備20以及節拍感應設備12可由同一智慧電子裝置擔任,既可點播歌曲,又能夠晃動用來啟動節拍觸發訊號,還能夠控制特效輸出設備。
根據本實施方式之複合節拍特效系統,透過對現有之點歌系統軟體稍加改進,就可實現節拍特效功能,最大程度之相容現有設備,避免設備升級帶來之成本增加。
第三實施方式
參閱圖6,本實施方式提供一種複合節拍特效處理方法,其可用於圖1或圖4所示之複合節拍特效系統中。如圖6所示,本實施方式之方法包括以下步驟:
步驟S101,於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之同步視覺特效資料集與節拍特效資料集。
同步視覺特效資料集內包括多個同步視覺特效標籤,每個同步視覺特效標籤包括時間設定資料以及同步視覺特效設定資料,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間設定資料和節拍特效設定資料。
步驟S102,同步從所述視覺特效資料集中獲得與當前時間匹配之同步視覺特效標籤並生成與所述多媒體檔同步播放之同步視覺特效訊號。
上述之匹配之同步視覺特效標籤例如係指時間設定資料與當前時間相匹配之同步視覺特效標籤。
步驟S103,當使用者做出節拍動作,感應到用戶之節拍動作後生成節拍觸發訊號。
步驟S104,於所述多媒體檔之播放過程中,若接收到所述節拍觸發訊號,則根據當前時間從所述節拍特效資料集中獲取匹配之節拍特效標籤,並根據獲取之節拍特效標籤生成節拍特效訊號。
上述之匹配之節拍特效標籤例如係指時間設定資料與當前時間相匹配之節拍特效標籤。
步驟S105,輸出所述同步視覺特效訊號或者節拍特效訊號。
本實施方式之複合節拍特效處理方法於播放多媒體檔時還獲取與多媒體檔對應之同步視覺特效資料集與節拍特效資料集,於播放音樂之過程中控制主機根據同步視覺特效資料集生成並輸出與多媒體檔同步播放之同步視覺特效,增加多媒體播放系統物特效種類。而且,當感應到用戶之節拍動作後,根據節拍特效資料集輸出對應之節拍特效,從而將用戶之節拍動作視覺化,提升多媒體檔播放系統之互動功能,尤其適用於KTV等場合。而且節拍訊號除由專門之電子節拍設備觸發外,使用者於KTV裡之常見操作例如搖動鈴鼓都可觸發節拍動作,因此可讓用戶無需學習就能自然之啟動節拍特效,提升用戶於KTV房間裡之使用感受。
第四實施方式
參閱圖7,本實施方式提供一種複合節拍特效處理方法,其可用於圖1或圖4所示之複合節拍特效系統中。如圖7所示,本實施方式之方法包括以下步驟:
步驟S101,於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之同步視覺特效資料集與節拍特效資料集。
同步視覺特效資料集內包括多個同步視覺特效標籤,每個同步視覺特效標籤包括時間設定資料以及同步視覺特效設定資料,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間設定資料和節拍特效設定資料。
於步驟S101之後,分別進行兩個迴圈子流程,其中,第一子流程包括:
步驟S201,監測節拍觸發訊號。此處之節拍觸發訊號例如是由節拍感應裝置12發送之,或者由控制主機10透過分析感測器之感測之資料得到。
步驟S202,於接收到節拍觸發訊號後生成節拍特效訊號。
步驟S203,輸出節拍特效訊號。
於步驟S203之後,第一子流程重新回到步驟S201,亦即,監測節拍觸發訊號之過程是於多媒體檔之播放或者演唱過程中持續迴圈進行之。
另一方面,於步驟S101之後還進行第二子流程,其包括:
步驟S204,同步從所述視覺特效資料集中獲得與當前時間匹配之同步視覺特效標籤。
步驟S205,根據匹配之同步視覺特效標籤生成對應之同步視覺特效訊號。
步驟S206,輸出生成之同步視覺特效訊號。
於步驟S206之後,流程重新回到步驟S204。亦即,第二子流程也是於多媒體檔之播放或者演唱過程中持續迴圈進行之。
第一子流程與第二子流程分別獨立進行,相互之間互不影響。
根據本實施方式之方法,於播放多媒體檔之過程中,於預設狀態下輸出同步視覺特效標籤所定義之同步視覺特效,而每當接收到一節拍觸發訊號,就輸出一對應之互動節拍特效,既可為用戶帶來富有節拍感之視覺特效,又能回應用戶自己之節拍動作。
第五實施方式
參閱圖8,本實施方式提供一種複合節拍特效處理方法,其可用於圖1或圖4所示之複合節拍特效系統中。如圖8所示,本實施方式之方法與圖7所示之方法相似,其不同之處在於第一子流程包括以下步驟:
步驟S201,監測節拍觸發訊號。此處之節拍觸發訊號例如是由節拍感應裝置12發送之,或者由控制主機10透過分析感測器之感測之資料得到。
步驟S202,於接收到節拍觸發訊號後生成節拍特效訊號。
步驟S203a,輸出節拍特效訊號並暫停輸出同步視覺特效訊號。
具體地,當第一子流程與第二子流程分別於兩個不同之進程中執行時,透過進程間消息之方式將一暫停訊號發送給第二子流程所於之進程,例第二子流程暫停執行。
於上述之進程間消息內還可包括當前節拍特效訊號之時間長度,從而可使第一子流程於該時間過後自動恢復輸出同步視覺特效訊號。
當然,也可是於完成節拍特效訊號之一段時間之後,再通進程間消息之方式兩隻第二子流程所於之進程再發送一條用於恢復輸出同步特效訊號之消息。如此,則暫停訊號內可不包括節拍特效訊號之時間長度。
此外,於步驟S203a中,也可不暫停同步視覺特效訊號之輸出,還可採用淡化同步視覺特效訊號或者強化節拍特效訊號之方式。
根據本實施方式之方法,節拍特效訊號比同步視覺特效訊號具有更高之優先順序,亦即,當於一時間點同時具有同步視覺特效訊號與節拍特效訊號時,會優先保證節拍特效訊號之輸出以強化使用者之節拍感,提升用戶之使用體驗。
此外,本發明實施方式還提供一種電腦可讀存儲介質,其內存儲有電腦可執行指令,上述電腦可讀存儲介質例如為非易失性記憶體例如光碟、硬碟、或者快閃記憶體。上述電腦可執行指令用於讓電腦或者類似之運算裝置完成上述實施方式中之方法。
以上所述,僅是本發明之較佳實施方式而已,並非對本發明作任何形式上之限制,雖然本發明已以較佳實施方式揭示如上,惟並非用以限定本發明,任何本領域技術人員,於不脫離本發明技術方案範圍內,當可利用上述揭示之技術內容做出些許更動或修飾為等同變化之等效實施方式,但凡是未脫離本發明技術方案內容,依據本發明之技術實質對以上實施方式所作之任何簡介修改、等同變化與修飾,均仍屬於本發明技術方案之範圍內。
100、200‧‧‧同步節拍特效系統
10‧‧‧控制主機
11‧‧‧點歌終端
12‧‧‧節拍感應裝置
13‧‧‧音訊輸出裝置
14‧‧‧多媒體視頻輸出裝置
15‧‧‧燈光特效裝置
16‧‧‧視頻輸出裝置
20‧‧‧外部設備
122‧‧‧錄音模組
124‧‧‧音訊分析模組
126‧‧‧視頻捕捉模組
128‧‧‧視頻分析模組
210‧‧‧介面
220‧‧‧按鈕
[圖1]係本發明第一實施方式提供之複合節拍特效系統之架構示意圖; [圖2]係第一實施方式提供之複合節拍特效系統之節拍感應裝置之模組圖; [圖3]係第一實施方式提供之複合節拍特效系統之節拍感應裝置之另一模組圖; [圖4]係本發明第二實施方式提供之複合節拍特效系統之架構示意圖; [圖5]係本發明第二實施方式之複合節拍特效系統之外部設備之介面示意圖; [圖6]係本發明第三實施方式提供之複合節拍特效處理方法流程圖; [圖7]係本發明第四實施方式提供之複合節拍特效處理方法流程圖; [圖8]係本發明第五實施方式提供之複合節拍特效處理方法流程圖。
100‧‧‧複合節拍特效系統
10‧‧‧控制主機
11‧‧‧點歌終端
12‧‧‧節拍感應裝置
13‧‧‧音訊輸出裝置
14‧‧‧多媒體視頻輸出裝置
15‧‧‧燈光特效裝置
16‧‧‧視頻輸出裝置

Claims (9)

  1. 一種複合節拍特效系統,其中,包括:控制主機、節拍感應裝置及特效輸出設備;所述控制主機於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之同步視覺特效資料集與節拍特效資料集,所述同步視覺特效資料集內包括多個同步視覺特效標籤,每個同步視覺特效標籤包括時間設定資料以及同步視覺特效設定資料,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間設定資料和節拍特效設定資料;所述控制主機同步從所述同步視覺特效資料集中獲得與當前時間匹配之同步視覺特效標籤並生成與所述多媒體檔同步播放之同步視覺特效訊號;當使用者做出節拍動作,所述節拍感應裝置感應到使用者之節拍動作後生成節拍觸發訊號,並將所述節拍觸發訊號發送給所述控制主機;於所述多媒體檔之播放過程中,若接收到所述節拍觸發訊號,則所述控制主機根據當前時間從所述節拍特效資料集中獲取匹配之節拍特效標籤,並根據獲取之節拍特效標籤生成節拍特效訊號;所述特效輸出設備將所述同步視覺特效訊號或者節拍特效訊號輸出;若接收所述節拍觸發訊號,且當前時間具有所述同步特效訊號時,所述控制主機還控制所述特效輸出設備暫停輸出所述同步視覺特效訊號,或者淡化所述同步視覺特效訊號,或者突出所述節拍特效訊號,所述控制主機於與所述節拍觸發訊號對應之節拍特效訊號輸出完畢後恢復所述同步視覺特效訊號之輸出狀態。
  2. 如申請專利範圍第1項所述之複合節拍特效系統,其中,所述節拍特效標籤內還包括節拍觸發訊號設定資料;所述匹配之節拍特效標籤係指同時滿足所述時間設定資料和所述節拍觸發訊號設定資料之節拍特效標籤。
  3. 如申請專利範圍第2項所述之複合節拍特效系統,其中,所述節拍特效設定資料設定多種節拍特效,所述節拍觸發訊號設定資料設定分別對應於所述多種節拍特效之節拍觸發訊號,所述多個節拍觸發訊號分別對應於不同之節拍設備或者使用者;所述控制主機接收所述節拍感應裝置發送之多種節拍觸發訊號後,為每個匹配之節拍觸發訊號生成對應之節拍特效訊號;所述特效輸出設備輸出節拍特效訊號。
  4. 如申請專利範圍第1項所述之複合節拍特效系統,其中,還包括:外部設備,所述外部設備於播放多媒體檔時或者多媒體檔被加入播放清單時將對應之多媒體檔之標識發送給所述控制主機;所述控制主機於接收到所述多媒體檔之標識後根據所述多媒體檔之標識向雲端伺服器系統發送獲取所述對應之同步視覺特效資料集與節拍特效資料集之請求。
  5. 如申請專利範圍第1項所述之複合節拍特效系統,所述節拍感應裝置包括錄音模組以及音訊分析模組,所述錄音模組用於採集外部之聲音,所述音訊分析模組用於根據所述錄音模組採集之聲音分析其音訊特徵是否符合預設之節拍音訊特徵,若是,則所述音訊分析模組生成所述節拍觸發訊號。
  6. 如申請專利範圍第1項所述之複合節拍特效系統,所述節拍感應裝置包括視頻捕捉模組以及視頻分析模組,所述視頻捕捉模組用於拍攝使用者之視頻,所述視頻分析模組用於分析所述視頻捕捉模組拍攝之使用者視頻,以識別出使用者之動作是否符合預定之特徵,若是,則所述視頻分析模組生成所述節拍觸發訊號。
  7. 如申請專利範圍第1-7項任一項所述之同步節拍特效系統,其中,還包括:節拍設備,用於根據使用者之操作發出所述節拍觸發訊號至所述控制主機、所述特效輸出設備或者所述節拍感應裝置。
  8. 一種複合節拍特效處理方法,所述方法包括:於播放多媒體檔時,或者於外部設備播放多媒體檔時,獲取與所述多媒體檔對應之同步視覺特效資料集與節拍特效資料集,所述同步視覺特效資料集內包括多個同步視覺特效標籤,每個同步視覺特效標籤包括時間設定資料以及同步視覺特效設定資料,所述節拍特效資料集內包括多個節拍特效標籤,每個節拍特效標籤包括時間設定資料和節拍特效設定資料;同步從所述同步視覺特效資料集中獲得與當前時間匹配之同步視覺特效標籤並生成與所述多媒體檔同步播放之同步視覺特效訊號;當用戶做出節拍動作,感應到用戶之節拍動作後生成節拍觸發訊號;於所述多媒體檔之播放過程中,若接收到所述節拍觸發訊號,則根據當前時間從所述節拍特效資料集中獲取匹配之節拍特效標籤,並根據獲取之節拍特效標籤生成節拍特效訊號;以及輸出所述同步視覺特效訊號或者節拍特效訊號。
  9. 如申請專利範圍第8項所述之方法,其中,若接收所述節拍觸發訊號,且當前時間具有所述同步特效訊號時,還暫停輸出所述同步視覺特效訊號,或者淡化所述同步視覺特效訊號,或者突出所述節拍特效訊號,於與所述節拍觸發訊號對應之節拍特效訊號輸出完畢後恢復所述同步視覺特效訊號之輸出狀態。
TW104107146A 2014-11-25 2015-03-06 複合節拍特效系統及複合節拍特效處理方法 TWI585614B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN201410691278 2014-11-25
CN201410691276 2014-11-25
CN201410719685.5A CN104378696A (zh) 2014-11-28 2014-11-28 卡拉ok复合特效系统
CN201510067616.5A CN104853238A (zh) 2014-11-25 2015-02-08 复合节拍特效系统及复合节拍特效处理方法

Publications (2)

Publication Number Publication Date
TW201619757A TW201619757A (zh) 2016-06-01
TWI585614B true TWI585614B (zh) 2017-06-01

Family

ID=53852533

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104107146A TWI585614B (zh) 2014-11-25 2015-03-06 複合節拍特效系統及複合節拍特效處理方法

Country Status (2)

Country Link
CN (1) CN104853238A (zh)
TW (1) TWI585614B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109120875A (zh) * 2018-09-27 2019-01-01 乐蜜有限公司 视频渲染方法及装置
CN109343770B (zh) * 2018-09-27 2021-07-20 腾讯科技(深圳)有限公司 交互反馈方法、设备和记录介质
CN111258415B (zh) * 2018-11-30 2021-05-07 北京字节跳动网络技术有限公司 基于视频的肢体动作检测方法、装置、终端和介质
CN115220625A (zh) * 2022-07-19 2022-10-21 广州酷狗计算机科技有限公司 音频播放方法及装置、电子设备、计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6230047B1 (en) * 1998-10-15 2001-05-08 Mchugh David Musical listening apparatus with pulse-triggered rhythm
TW200526016A (en) * 2004-01-20 2005-08-01 Ulead Systems Inc A method and system for effect addition in video
CN201788384U (zh) * 2010-09-17 2011-04-06 无锡硅动力微电子股份有限公司 多媒体电子设备声光色振动控制电路
TW201336565A (zh) * 2012-03-06 2013-09-16 Main Technology Co Ltd 應用於伴唱之節奏遊戲系統及其裝置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090118019A1 (en) * 2002-12-10 2009-05-07 Onlive, Inc. System for streaming databases serving real-time applications used through streaming interactive video
CN200997108Y (zh) * 2007-01-11 2007-12-26 北京盛开交互娱乐科技有限公司 红外互动影像系统
CN201586394U (zh) * 2010-01-07 2010-09-22 财团法人工业技术研究院 交互式舞台效果系统
JP4856262B2 (ja) * 2010-05-31 2012-01-18 株式会社東芝 動き検出装置及び動き検出方法
CN103985379A (zh) * 2014-05-04 2014-08-13 苏州乐聚一堂电子科技有限公司 灯光特效卡拉ok手机点歌系统
CN103986698A (zh) * 2014-05-04 2014-08-13 苏州乐聚一堂电子科技有限公司 语音特效卡拉ok手机点歌系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6230047B1 (en) * 1998-10-15 2001-05-08 Mchugh David Musical listening apparatus with pulse-triggered rhythm
TW200526016A (en) * 2004-01-20 2005-08-01 Ulead Systems Inc A method and system for effect addition in video
CN201788384U (zh) * 2010-09-17 2011-04-06 无锡硅动力微电子股份有限公司 多媒体电子设备声光色振动控制电路
TW201336565A (zh) * 2012-03-06 2013-09-16 Main Technology Co Ltd 應用於伴唱之節奏遊戲系統及其裝置

Also Published As

Publication number Publication date
CN104853238A (zh) 2015-08-19
TW201619757A (zh) 2016-06-01

Similar Documents

Publication Publication Date Title
TWI574252B (zh) 同步節拍特效系統及同步節拍特效處理方法
TWI574256B (zh) 互動節拍特效系統及互動節拍特效處理方法
CN104049721B (zh) 信息处理方法及电子设备
TWI470473B (zh) 電子娛樂系統中之相關姿勢反饋
EP2376207B1 (en) Method and system for generating data for controlling a system for rendering at least one signal
US9986364B2 (en) Endpoint mixing system and playing method thereof
TWI585614B (zh) 複合節拍特效系統及複合節拍特效處理方法
CN104811829A (zh) 卡拉ok互动多功能特效系统
JP2014087064A (ja) ディスプレイ装置、ディスプレイ装置を制御する遠隔制御装置、ディスプレイ装置の制御方法、サーバーの制御方法、及び遠隔制御装置の制御方法
US10235898B1 (en) Computer implemented method for providing feedback of harmonic content relating to music track
US20230319965A1 (en) Systems and methods for a music feature file and coordinated light show
TW201627988A (zh) 同步視覺特效系統及同步視覺特效處理方法
CN104822095A (zh) 复合节拍特效系统及复合节拍特效处理方法
CN105766001A (zh) 用于使用任意触发的音频处理的系统和方法
TW201629952A (zh) 同步節拍特效系統及同步節拍特效處理方法
JP6268287B2 (ja) 動画像生成装置、動画像生成方法、プログラム
TW201627987A (zh) 演唱視覺特效系統及演唱視覺特效處理方法
TWI545452B (zh) 伴唱視覺特效系統及伴唱視覺特效處理方法
JP2023534975A (ja) ユーザーインタラクションに基づく音楽再生方法、装置、機器及び記憶媒体
TW201340694A (zh) 情境指令系統以及其運作方法
CN104822094A (zh) 复合节拍特效系统及复合节拍特效处理方法
JP2014150383A (ja) 歌唱音声データ生成装置、及び、歌唱動画データ生成装置
TW201626366A (zh) 演唱視覺特效系統及演唱視覺特效處理方法
US20190070517A1 (en) Digitally-Interactive Toy System and Method
TW201619953A (zh) 複合節拍特效系統及複合節拍特效處理方法

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees