TWI263156B - Automatic program production system and method thereof - Google Patents

Automatic program production system and method thereof Download PDF

Info

Publication number
TWI263156B
TWI263156B TW93139284A TW93139284A TWI263156B TW I263156 B TWI263156 B TW I263156B TW 93139284 A TW93139284 A TW 93139284A TW 93139284 A TW93139284 A TW 93139284A TW I263156 B TWI263156 B TW I263156B
Authority
TW
Taiwan
Prior art keywords
control
performer
content
sound
program
Prior art date
Application number
TW93139284A
Other languages
English (en)
Other versions
TW200625133A (en
Inventor
Shiau-Ming Wang
Original Assignee
Shiau-Ming Wang
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shiau-Ming Wang filed Critical Shiau-Ming Wang
Priority to TW93139284A priority Critical patent/TWI263156B/zh
Publication of TW200625133A publication Critical patent/TW200625133A/zh
Application granted granted Critical
Publication of TWI263156B publication Critical patent/TWI263156B/zh

Links

Description

1263156 欢、發明說明: 【發明所屬之技術領域】 本發明係關於一種節目製 可藉由使用者本身之聲音、統及方法,特別指—種 ^ ^ ^ 移動專仃為主動控制節目攝錄 效果之即目自動化製作系統及方法。 【先前技術】 傳統節目攝影棚作業,除主持人、來賓 者外,通常尚包含莫媸 Λ ^ Λ 、、寺次出 播、攝衫師、燈光師、 務、樂隊、合音、舞群ν % 砰化妝師專,以及後製作階段如動 —^ 吳工師、剪接師、音 ^ ,#,日曰效師荨人貝,而可謂編制龐大 使即目製作成本往往因可觀之人力勞務費用而無法有效 控制縮減,即使較為簡單之訪談性節目,至少亦需要若 名攝影^燈光師及導播,始可使拍攝作業順利進行’故 :口何精間節目攝製人力以降低製作成本,遂成為 激烈之大眾傳播業者一重要課題。 兄^ 另-方面·,隨電腦運算能力之迅速提升,虛擬實境 Virtual Real! ty)攝影棚技術已普遍應用於新聞或# 目之製播上。舉—簡例而言’電視氣象預報中常見播^ 站立於大型動怨氣象圖前,配合圖内容解說以形成生動 丨董之效果。然其實際之攝影棚拍攝作業中,播報員背後 為一通稱藍板(或稱key板)之藍色布幕,電視畫面 動態氣象圖則由電腦動畫產生,於攝影棚中拍攝播 同f後之藍板影像後,再利用嵌景技術(Chr⑽a〜key)進行 去月σ成亦即將藍板部分去除而嵌入電腦動晝氣象圖, ίο 15 20 1263156 而成為觀幕於電視晝面所見之合成晝面。至於其他常見之 虛擬實境攝影棚應甩中,演出者則更能進一步與場景產生 互動。 上述之虛擬實境攝影棚技術,主要優點之一為能省去 設置佈景之搭棚及道具費用,而改以電腦動晝代替,且針 對某些難以搭設之場景,如外太空或史前蠻荒時代等,藉 由電腦動畫產生之虛擬實境效果尤具價值。惟即使利用虛 擬實境攝影棚進行節目製作,前述傳統攝影棚作業人員過 多之現象仍難改善,而與傳統攝影棚同樣面臨如何精簡人 力之問題。 有鑑於此,如我國已㈣專利之第9li2i9i9號發明專 利申请案,即揭示-種自動化影音製作供應系統,包括一 2音收錄單元、-影音合成單元、_影音剪輯單元及一^ “共應單元。影音收錄單元係自動收錄-使用者之一. 影音資料,影音合成單元將第—影音資料與 ;; 影音資料合成形成一第二 之第一 資·⑶一 影音剪輯單元將第三 心曰貝枓依一預定男輯模式 經勢輯之m次 订^ ’衫音供應單元則將 4之第二#音資料提供複數接收者觀賞,藉 似無人攝影棚之自動化影音節目製作效果。 是故,本發明即基於如 作牲洛、仓止 述寻利别案之自動化節目製 、色’進-步提供更豐富之攝錄效 虛擬實境攝影棚節目製作上。 將"推廣應用至 【發明内容】 因此,本發明之首一目的, 促1,、種可由使用者 1263156 本身之行為主動控制節目攝錄效果之節目自動化製作系统 及方法 ” 5 10 15 …本發明之次一目的,在提供一種依據演出者之聲音控 ^目攝錄效果之節目自動化製作系、統及方法。 本^明之另一目的,在提供一種依據演出者之移動位 置控制節目攝錄效果之節目自動化製作系統及方法。 本發明之又-目的,在提供一種可應用於虛擬實境攝 影棚之節目自動化製作系統及方法。 本I明之再-目的,在提供一種攝錄過程基本上係依 腳本規劃之模式進行,然亦提供演出者自主表演發揮空間 之節目自動化製作系統及方法。 本發明之另-目的,在提供一種可採模組式設計之節 目自動化製作系統及方法。 於是,本發明之節目自動化製作方法,用以製作一、、寅 出者之-影音節目,該方法包括τ述步驟:預先儲存複數 控制規則,各該控制規則訂出該演出者之_行為及_對應 之控制内容;攝取該演出者之影像;^㈣演出者之行為 ;依據該演出#之該行為及該控制規則,$生一對應之該 控制内容;依據該控制指令產生對應之_節目攝錄效二" 本發明並揭示-種節目自動化製作方法,用以製作一 :寅出者之-影音節目,該方法包括τ述步驟··預先儲存複 數控制規則’各該控制規則訂出該演出者之一聲音及—對 應之控制内容’·攝取該演出者之影像;接收該演=者之聲 音;辨識該演出者之聲音;依據辨識獲得之該演出者之聲 20 1263156 音及該控制規則’產生一對應之 指令產生對應之一節目攝錄效果。依據该控制 本發明並揭示-種節目自動化製作 演出去夕—3J Vr 用以製作一 、出者之一衫a卽目,該方法包括下述步 數控制規則,各該杵制# ''預先儲存複 合忑控制規則訂出該演出 表演區内之移動位置及—對(、其表次之 芝丁應之控制内容;攝取 之影像;追蹤該演出者於該表演區之移動位攄 獲得之該演出者之移動 &據追蹤 有之移動位置及該控制規則,產生一 該控制时;依㈣_ 〜之 。 屋生對應之一節目攝錄效果 本發明並揭示一種卢;f链媒旦/纟n々斤 虛擬攝衫棚郎目自動化製作方法, I作一演出者之一影音節目,該方法包括下述步驟. 預先儲存複數控制規則,t 驟. 關各該控制規則訂出該演出者之一 仃為及一對應之控制内容; ,、宙屮去夕/-友, 爾取这肩出者之影像;監测該 二一 ’依據該演出者之該行為及該控制規則,產 一對應之該控㈣容;依據難㈣令產生對 擬場景影像:合成該演出者之影像及該虛擬場景影像。 本發明亚揭示一種虛擬攝影棚之虛擬場景影像產生方 1 ’包括下述步驟··預切存複數控制規則,各該 則訂出-演出者之—行為及—對應之控制内容;攝取該= 出者之影像’監剛該演出者之行為;依據該演出者之于 為及該控制規則,產决一 Μ订 指Α產生對庫之 一對應之該控制内容;依據該控制 4產生對應之一虛擬場景影像。 本發明並揭示一種虛擬攝影棚之虛擬場景音效產生方 5 ^63156 ::訂出包二預先儲存複數控制規則,各該控制規 出:《订為及-對應之控制内容;攝取該演 為監測該演出者之行為;依據該演出者之該行 馬及该控制規則,產生—對靡玲 指令產生對應之-虛擬場景纽/工1 依據該控制 述步示,目效果產生方法,該方法包括下 儲存複數控制規則,各該控制規則訂出一演 ;一對應之控制内容;攝取該演出者之影像 10 規則,產生-對應之=;==:為*該㈣ 應之-節目效果。 ㈣合’依據該控制内容產生對 拍攝揭示一種攝影機取景鏡頭運作方法,應用於 ㊉出者影像之複數攝影機,該方法包括下述㈣. 15 預^儲存複數㈣❹卜各該控賴料出該演出者之一 一對應之控制内容;攝取該演出者之影像;監謂該 生一對^丁為’依據該演出者之該行為及該控制規則,產 取景鏡頭之運作。,、據該控制内容控制該等攝影機 20 以製Γ:並揭示一種虛擬實境節目自動化製作系統,用 /作1出者之一影音節目,該系統包括:一 早儿,用以接收該演出者立一 收 辨識該聲音接收單元所Μ 辨識單S,用以 應之-控制内容:::演Τ聲音,生* 影像虛擬實境單=像:取早儿’用以攝取該演出者之 用以依據該控制内容產生虛擬實 8 1263156 出者之影像及該虛擬場 境影像;一後製作單元,合成該演 景影像。 本發明並揭示-種節目自動化製作方法,用以製作一 =者之—影音節目,該方法包括下述步驟:依-節目腳 》控制該節目之攝錄;監測該演出者之行為;依據該演出 ;:行為及一控制規則,產生-對應之控制内容;依據該 :控制該節目之攝錄,且當由該節目腳本及該演出 =丁為所產生控制該節目之攝錄效果不同時,係以該演 出者之行為為準。 【實施方式】 本發明之前述及其他技術内容、特點與功效,於以下 配合參考圖式之各較佳實施例詳細說明中,將可清楚明白 〇 如圖1至3所示,本發明節目自動化製作系統i之較 佳實施例’主要包括—聲音接收單元^聲音辨識單元 、-影像攝取單& 13、一追縱單元14、—現場效果單元 15、-虛,實境單元16、—後製作單纟17、—控制單元μ 及-發送單元19,而用以製作位於一表演區2之一演出者 3之影音節目’並將該影音節目經由-通訊網路4傳送至分 屬不同影音平台之複數内容供應健器5後,由各伺服器$ 進一歩供應其所屬之複數用戶端終端裝置6。 本實施例中演出纟3係以一類似電視購物節目主持人 之產品推銷者為例,其透過不同型式之終端裝置6,向不同 用戶族群介紹其攜帶之一皮包產品31,演出者3身後並設 5 10 15 20 1263156 有一藍板21(又稱kpv 、 μ “ 以供後製作階段去背合成之用 贺置F Μ "亦可仏個人、公司或其他團體錄 L、失樂、商業或其他用途之影音節目。 &早U主要包含—無線微型麥克風U1(俗稱 /、 接收麥克風111聲音訊號之接收器112。麥克 風^1用以供附著設置於演出者3衣著上收音效果較佳之 適田處’如衣領刖方’以接收演出者3於演出過程以口述 、歌唱或其他形式所發出之聲音。該聲音由麥克風⑴内 建之-發射^§(圖未示)發射而由接收器112接收後,再由 接收器112將該聲音訊號以有線方式傳送至聲音辨識單元 12° 聲音辨識單元12主要包含一電腦m、一安裝健存於 自121 Θ儲存裝置(如硬碟,圖未示)之語音辨識程式 122,及一儲存有複數各含特定意義之預設控制指令之控制 4曰7貝料庫123。電腦121藉由一習知聲音訊號接收介面( 圖未示)而自聲音接收單元11之接收器112接收演出者3 之聲音訊號後,利用習知技術將該聲音訊號經數位轉換,_ 以供語音辨識程式122進行語音辨識。語音辨識程式'122 係運用習知之語音辨識技術所撰寫,而可就演出者3發出 之所有聲音訊號中,分離並辨識出控制指令資料庫123中 含特定意義之控制指令,如「來個特寫」、「輕音樂」、「給 個燈光」、「放乾冰」等,產生一對應之控制指令訊號而由 控制單元18接收,其作用容後詳述。同時,聲音辨識單元 12亦將完整之演出者3聲音訊號傳送至後製作單元17,以 10 1263156 供進行影音合成等後製程序。 此外,本實施例中亦提供演出 f d於實降^_ 對上述各控制指令預先進行若干次菸 、/、、别 裎弋1 ??古太籴々μ—山& X 以训練語音辨識 私式122热悉圮憶演出者3之個人 5 辨螂τ湓择 ,^ L ,. x 9挺式,使提高後續 辨識正確度。由於上述語音辨識 久相關訓練方法p屬 成熟之習知技術,故於此不另就其 程序詳述。 丨原理、元件及實施 影像攝取單元13主要包含葙| 3禝數間隔設置於表演區2周 圍之數位攝影機131、132、133,用以 10 备q > &你^^ 自不冋角度拍攝演出 者3之衫像。本實施例中同一時間内由何一攝影機⑶取 景及其拍攝鏡頭之伸縮遠近,係由控制單元18依—預定腳 本所規劃之演出者3走位方式所控制,同時並配合演出者3 臨場隨興之聲音、移動位置等行為修正調整,其細節容後 15 詳述。本實施例中共有分別配置於表演區2前、左、右方 之二台數位攝影機131、132、133,然非以此為限。 追蹤單元14主要包含複數設置於表演區2旁以感測演 出者3移動位置之感測器141(圖3中僅示出一者),及一將 各感測器141觸發(trigger)後產生之訊號予以放大、進行 類比/數位(A/D)轉換及其他處理之訊號處理電路142。本實 20 施例中感測器141係以被動式紅外線偵測器(passive infrared detectors)為例,當其測得演出者3人體發出之 紅外線,即產生一觸發訊號輸出至訊號處理電路142,由訊 號處理電路142適當處理後輸出至控制單元18。如圖4所 示,本實施例中共設有141a、141b、141c、141d、141e五 11 1263156 組編度不同之感測器14卜分別用以偵測表演區2對應 2a、2b、2c、2d、2e内存在之紅外線光源。由 ^上述感測益⑷及訊號處理電路142皆屬習知技術,於 此就其構造及操作細節不另詳述。 5 果單a 15主要包含與控制單元18連接之複數 4又射燈151、一乾;太;生她1 c 〇 12 水^機152及一現場音效模組153。各 投射燈151分別設置於表演區2周圍,以於控制單元u控 制下自不同位置及角度產生投射燈光效果。乾冰製造機Η:? 10 亦叹置於表演區2旁’可於控制單元18控制下於表演區2 2生:冰效果。現場音效模組153包括一設置於表演區2 = 54,及·'建置於電腦⑵内錯存裝置而儲存有 複數效果音樂之音樂資料庫155,而受控制單元18之控制 自音樂資料庫155擷取出適當之效果音樂由揚聲器⑸播 出。 15 虛擬實境單元16亦受控制單元18之控制,用以製造 棚效果,而主要包括—電腦16卜複數分別附 20 '〜131、132、133之執跡追蹤器162(圖3僅示出 者)以文裝儲存於電腦161内一適當儲存裝置(如硬 碟三圖未π)之程式為例之虛擬場景產生模組⑽、一同樣 乂女裝儲存於電腦161内之程式為例之虛擬音效產生模組 執跡追縱器162係用以確保拍攝演出者3之攝影機 =132、133及用以拍攝虛擬場景影像之虛擬攝影機(亦 时質並不存在)兩者之運鏡執跡、速度完全相同,藉此使 々出者3及虛擬場景於合成後可吻合視覺透視法而顯合理 12 1263156 精確。虛擬場景產生模組163則用以產生虛擬場景之動畫 2藉執跡追蹤器162之輔助,使演出者3之表演與虛擬. 场景產生互動。虛擬音效產生模組164則用以產生配合虛 擬場景而不在表演區2現場播放之虛擬音效,如大自:聲 5 、動物聲、演奏聲等。由於虛擬實境攝影棚已屬應用廣泛 之習知技術,於此不另詳述。 另須指出者,由於虛擬實境攝影棚技術運作所需之電 腦硬體儲存及運算性能要求較高,本實施例中將其以電腦 161單獨處理而未一併由電腦121執行。惟於實際運作中,# 1〇 自然、可視電腦實際性能而將本發明各相目單元設置於單一 或多台電腦中,且各電腦亦可視場地大小或其他考量設置 於不同地點,相互間藉適當之網路連接,而非以本實施例 所舉態樣為限。 後製作單元17包含一初步合成模組m、—預視模组 15 172及一最終合成模組⑽,且本實施例中皆各以一安裝儲 存於電腦121内儲存裝置之程式為例。初步合成模组i7i 具有-影像合成部174及一聲音合成部175,影像合成部· 174於控制單元18控制下,將影像攝取單元13拍攝之影像 與虛擬場景產生模組163產生之虛擬場景動晝,予以合成 20 而獲得一合成影像。尤須指出者,影像合成部m產:合 成影像之-原理’係、將如圖5所示演出者3置身之虛擬^ 景7中,白雲7卜高樓72、汽車73等不同元素(仏嶋t) 配置於不同圖層(layer),而後再與演出者3或其他拍攝所 得影像所屬圖層共同疊合。 13 1263156 預視模組172將影像合成部174獲得之合成影像 傳送至與電腦121連接之—顯示@ 124顯示,供演出者3 於演出過程中自顯示器124觀覽參考其在合成後虛擬場景? 中之對應位置,藉此使其在與虛擬場景7互動時能更精確 5 掌握其適當位置及動作。聲音合成部m則在控制單元18 控制下’將聲音接收單元n接收之演出者3聲音、音效模 、·且153產生之現場效果音樂及虛擬音效產生模組Μι產生 之虛擬音效予以混音(mixing),且演出者3聲音、現場效 果音樂及虛擬音效係儲存於不同聲軌(s〇und ^&以),在聲 1〇 音合成部175處理下將各聲執混合獲得-合成聲音。最終 合成換組m騎初步合成模組171獲得之合成影像及合 成聲音合成為單一影音檔案輸出至發送單元19。 本實施例控制單元18係以一安裝儲存於電腦121内儲 存裝置之程式為例,主要包含一腳本模組181、一選擇介面 15 模組182、一聲控規則資料庫183、一運鏡規則資料庫184 及一操作控制模組185。腳本模組181儲存有複數節目之預 設腳本,各腳本包括演出者3之走位、各攝影機131至133 鏡頭之切換,以及投射燈15卜乾冰製造機152、現場音效 ,〇 杈組I53等現場聲音效果及虛擬場景、虛擬音效之變換等 0 運作規則’腳本漁181並將預設之演出者3走位規則透 過與電腦121連接之-顯示器125,卩文字方式顯示供演出 者3於演出過程中參考,提示其於特定時間走動至表演區2 之特定位置。選擇介面模組182則透過顯示器125於演出 别顯不一選擇介面(圖未示),於其中顯示可供演出者3選 14 I263156 擇而儲存於腳本模組181之各種腳本,演出者3透過電腦 21之鍵盤(圖未示)或其他適當输入介面選擇其中一腳本後- ,該腳本選項即為選擇介面模組182接收並輸出至操作控 制模組18 5。 .、於此一併指出者,本實施例中腳本模組〗8丨係以文字 T式提示腳本規劃之走位規則供演出者3參考,然於其他 麦化例中,δ亥走位規則亦可藉預錄之語音透過一揚聲器播 放’或預先錄製他人依該走位規則於表演^ 2 f地走位或 二擬動旦方式if過一顯示器而以影像示範,或以電子圖鲁 1〇 卡形式透過一顯示器播放,或上述各種提示方式之適當組 合,皆可適用而非以本實施例所舉為限。 聲控規則資料庫183針對前述聲音辨識單元12所辨識 之各預設控制指令訊號,分別儲存一供操作控制模組185 參考之對應控制内容,藉此供操作控制模組185控制該控 15 制内容所述之對應元件以產生一對應動作。舉例而言,本 實施例中聲控規則資料庫183儲存之部分規則如下: 控制指令 控制内交 · 3號鏡頭 鏡頭切換至攝影機133 來個特寫攝影機131、132、133採近景拍攝 20 _音樂 現場音效模組153自音樂庫155棟取-輕 音樂而由揚聲器154播出 給個燈光 投射燈151打燈 放乾冰 乾冰製造機152放出乾冰 一朵雲 虛擬場景疊入含有雲圖案之一圖層 15 5 10 15 20 1263156 打田了 虛擬音效加入含有雷聲之一聲執 運鏡規則資料庫184則係針對 抑 演出者3 述追蹤早凡14所感測 $ ^於表演區2之各移動位置,钟十士# 機131至1qq 儲存有其對應之攝影 王133取景鏡頭編號。舉例 & 一 1J而s,本實施例中運鏡 如下: 取景鏡頭編號 攝影機131 攝影機131 攝影機133 攝影機133 ^ 攝影機132 當然,上述規則僅為簡單例示以供了解,而不必然符 己實際運作狀況,且於豆他蠻 八他釔化例中,更可進一步依據演 者3之精確位置設定其對應之取景攝影機i3i至⑶,以 獲得更佳拍攝效果。 當演出者3透過前述電腦121鍵盤或其他適當輸入介 面’選擇-節目腳本並啟動節目錄製程序後,操作控制模 、、且185即依據演出者3選擇之節目腳本,自腳本模組⑻ 取得A述孩腳本所包括之各攝影機131至133、投射燈I。 、乾冰製造機152、現場音效模組153及虛擬場景、虛擬音 效之運作規則後,依據該運作規則切換操作對應之設備, 例如廣出者3選擇之節目腳本中部分規則如下: 1 -ίο秒·由攝影機131取景、投射燈151投光,現場 音效核組15 3播放一古典音半· 規則貝料庫184儲存之部分對應規則 /寅出者3所在次區域 2a 2b 2c2d 2e
16 5 10 15 20 1263156 10-15秒:改由攝影機ι32取景; 10-20秒:由虛擬實境單元16提供一高樓、汽車虛擬 晝面及虛擬車輛經過音效; 15一22秒··改由攝影機133取景; 20秒:放乾冰 操作控制模組185即依據上述規則於對應時間内啟動 對應設備,以產生對應之拍攝及虛擬場景、音效等效果, 並控制後製作單元17產生對應之合成影像及合成音效。同 時如前所述,腳本模組181並將該腳本中演出者3之走位 規則透過顯不1 125顯示’供演出者3於演出過程中參考 使其於表/寅區2之走位移動方式吻合腳本中規劃之攝影 機131、132、133鏡頭切換規則。 同時,操作控制模組185配合前述聲控規則資料庫 ,亦可供演出者3藉其聲音產生互動之節目效果,且由演 出者3聲音產生之節目效果與腳本規劃之效果不同時,係 以演出者3之聲音所控制者為準。舉例言之,當演出者3 於演出中發聲··「請給我3號鏡頭!」,由於句中包含「3號 鏡頭」此一預設控制指令,故經聲音辨識單元Μ自整句中 將難制指令分離辨識後,控制單元18將依據上述ί控規 則:料庫183儲存之對應規則而獲得一對應之控制内容, PTO鏡頭切換至攝影機133」,而依據該控制内容控制後製 作單元17依攝影機133之鏡頭取景,亦即以攝影機⑶鏡 頌「拍太攝所得影像層予以合成。而當演出者3於演出中發聲 •「請變一朵雲給我丨
17 5 10 15 20 1263156 指令,故經聲音辨識單元12自整句中分離辨識後, :早^ 18將依據上料控規則料庫183儲存之對應規 圖:獲:另一對應之控制内容,_「虛擬場景疊入含有雲 回”之一圖層」,並依據該控制内容控制後製作單元17之 :步合成模組171將含有雲之圖層疊合至虛擬場景中,即 如圖5所示。 =外’由於演出者3於表演中可能臨時隨興或因疏忽 二:全按顯示器125顯示之走位規則於表演區2移動 古稭别述追縱單元14追縱演出者3於表演區2之移動位 ⑻i將感敎號輸出至操作㈣模組185,操作控制模組 依f測訊遽對應之次區域編號,比對運鏡規則資料庫 控剖于其。對應之取景攝影機131幻33鏡頭編號,依此 二/ ’作早疋17依該對應攝影機131至133之鏡頭取景 二’且當自運鏡規則資料庫184獲得之取景攝影機i3i 133朗、錢與自腳本模組181獲得之驗編號不同時 係以運鏡規則資料庫184為準。 易5之’當演出者3完全按顯示ϋ 125顯示之預設走 、則於表演區2移動過程,各攝影機131 i 133之取景 Γ頭切㈣依據演出者3先前選定之節目腳本所規劃者進 :於#出者3未按走位規則之即興移動演出部份,則 則:ί 板組185配合追縱單元14運作並參考運鏡規 以枓庫184’而仍可獲得最適當之取景效果,不致發生演 出者3移動至鏡頭外或取景遠衫當等問題。 、 於此特予指出者,本實施例中可用以主動控制攝錄效 18 1263156 5 10 15 20 果之演出者3行為,在^ , i :然於其他變化例中’:可二之二音=位置㈣ 直接或先透過-接收裝置而間接α㈣ 於表演區2地面料位置設置複數感應器,運乍移= 至該位置而壓抵感應器時,感應器即發出訊號至=: 應皁元,以產生對應之攝 °又之對 m τ双果,或其他可作為一令來源之制者行為,皆可適料本發明。 3 本貫施例中發送單元19主要包含—發送模組 傳輸介面發送模組191係以一安裝儲存於電腦121内 儲存裝置之程式為例,值^八 ’傳輸介面192則主要包括 腦⑵之一網路卡及相關驅動程式,用以使電腦121得與 通訊網路4連結。演出者3演出過程中,最終合成模組⑺ 獲得之單-影音㈣,將由發送额191控龍透過傳輸 介面192及相連接之通訊網路4傳送至各伺服器5,再由各 飼服器5轉換為適當之影音格式後,下傳至不同形式之終 端裝置6播放,供各終端裝置6之使用者觀覽該影音標案 對應之節目’而達到透過不同影音平台進行商品行銷宣傳 之目的。本實施例中通訊_ 4係以網際網路為例,各終 端裝置6則包括電腦、數位電視及行動電話,然皆非以此 為限。 配合圖6之流程圖所示,對應上述節目自動化製作系 統1 ’本發明揭示一種節目自動化製作方法,主要實施步驟 如下: 首先如步驟901所示,預先儲存複數控制規則,各該 19 5 10 15 20 1263156 控制規則訂出由演出者3之一行為產生之控制指令及一對 應之控制内容;本實施例中該演出者之行為包含該該演出 T之聲音及演出者3於表演區2内之移動位置,控制規則 包含複數聲控規則及複數運鏡規則,聲控規則之控制内容 士括控制各攝影機131 i 133拍攝鏡頭間之切換、各投射 =51 ::動、乾冰製造機152之啟動、現場音效模組153 啟動以播放現場音效、各摄 旦土 各攝衫機131至133拍攝鏡頭之取 不运近、後製作單元17用 _ 場旦fi ^與Μ者3之影像合成之虛擬 ::6之圖層内容及後製作單元Π用以與演出者6之聲音 口成之虛擬音效之聲執内容, 針對演出去W、一 運鏡規則之控制内容則包括 至133、拍心;次區2之各移動位置而控制各攝影機131 至133拍攝鏡頭間之切換。 所不,透過顯示器125於演出前顯 =㈣㈣本供演出者3選擇,選擇完成後並寅= 啟動節目之錄製作業。/ 如步驟904至qfifl 自動攝取演出者3於表不’啟目錄製作業後,開始 聲音,π眭# ~ 、£ 2内之衫像並接收演出者3之 二之腳本規劃之走”式,透過 /貝出者3於演出中參考。 如步驟907、qns於- 為.本竇8所不’監測演出者3於表演區2之行 為,本貫施例中包括由聲- 灸仃 音及追縱單元14 ;二:2辨識演出者3之聲 測動作。 /貝出者3於表演區2之移動位置兩監 如步驟 909、91 f) % - 不,依據步驟907、908所監測獲 20 1263156 付々出者3之行為,亦即其聲音及於表演區2之移動位置· 亚參考步驟901儲存之控制規則,而分別獲得對應之控 制内容; ~ 1 如步驟911所示,依據步驟909、910獲得之控制内容 5 '產生對應之節目攝錄效果,且節目攝錄效果包含拍攝影 像及錄製聲音效果之5/|、本 士 — ^丄 - 又果之至J 一者。本貫施例中攝錄效果包含 將演出者3之聲音依據控制内容而產生對應之一合成聲音 ’及將演出者3之影像依據控制内容而產生對應之一合成 〜像且用以與演出I 3之聲音合成之聲音來源包含現場籲 10 音效模組153播放之現場音效及虛擬音效產生模組164產 虛擬曰效用以與演出者3之影像合成之影像來源則 包含虛擬場景產生模組163產生之虛擬場景。 士最後如步驟912 i 915所示,將獲得之合成影像及合 成弇音合成為單一影音檔案後,經由通訊網路4傳送至各 15 伺服器5,再由各伺服器5轉換為適當之影音格式後,下傳 至不同形式之終端裝置6播放。 絲上所述,本發明揭示一種節目自動化製作系統1及 隹 方法,其除滿足節目製作自動化而類似無人攝影棚之降低 製作成本訴求外,尤其重要者,演出者3可藉其聲音、 ,〇 “ 動或其他行為,主動控制拍攝現場如燈光、乾冰、音效、 2景鏡頭、鏡頭遠近等動作,且與虛擬實境攝影棚技術結 合後,更可由演出者3主動控制虛擬場景及音效之變化, 藉此使節目攝錄效果更具生動張力而更具個性特色;同時 ,藉由將節目傳送至不同系統平台之内容供應伺服器5,以 21 5 10 15 20 1263156 ====果6:更_跨_、國界 ;父隹實施例中,尽發明更提供可由演β. ^料之節目腳本,使節目攝錄過程基本上係依該腳才 、狀杈式進行’而可使相關設備運用及製作流程標準介 ,然當演出者3隨興演出或未完全按腳本規劃走位時,亦 可形成獨具個人風格且精確合理之攝錄效果,以提供演出 者3自主表演隨興創作之發揮空間,符合數位時代多媒體 影音產品個人化個性化之潮流。 ★同時由於本系統1所需空間不大,亦可採模組式設 計’將所有單元設計為易於依預定位置組合拆卸,於一地 使用後可以車_運送至另—使用場地,現場快速組合後可 即刻=用’而可節省於各地建置攝影棚之昂貴攝影器材及 -、X備之費用’並具有因應臨時節目製作需求之機動化 應用彈性。 惟以上所述者,僅為本發明之較佳實施例而已,當不 能以此限定本發明實施之範圍,即大凡依本發明申請專利 摩巳圍及發明說明書内容所作之簡單等效變化與修飾,皆應 仍屬本發明專利涵蓋之範圍内。 【圖式簡單說明】 圖1係本發明節目自動化製作系統之較佳實施例與一 通訊網路、複數内容供應伺服器及複數用戶端終端裝置之 關聯示意圖。 圖2係該較佳實施例之現場配置示意圖。
22 1263156 圖3係該較佳實施例之主要方塊示意圖。· 圖4係一平面示意圖,說明該較佳實施例之複數偵測 角度不同之感測器及複數表演區間之對應關係。 圖5係一立面示意圖,說明該較佳實施例產生之虛擬 場景中’白雲、高樓、汽車等不同圖層元素配置關係。 圖6係本發明節目自動化製作方法較佳實施例之
實施步驟流程圖。 I 【圖式之主要元件代表符號說明】 1節目自動化製作系統 11聲音接收單元 12聲音辨識單元 13影像攝取單元 14追蹤單元 15現场效果單元 16虛擬實境單元 17後製作單元 18控制單元 19發送單元 · 2表演區 3演出者 4通訊網路 5内容供應伺服器 6用戶端終端裝置 901-915實施步驟 23

Claims (1)

  1. X X 1263156 拾、申請專利範圍: 93 139284號案第二次庐 •種節目自動化製作方法,用以製作—演出者之—影Μ 目,该方法包括下述步驟: Ρ …儲存複數控制規則,各該控制規則訂出由該演 饤為產生之一控制指令及一對應之控制内容纟中該 内容係用以控制至少—針庫亓# Λ 對應兀件以產生一對應動作; 控制至少一攝影機自動攝取該演出者之影像; 控制-辨識該演出者語音之聲音辨識單元及—追料 :出者移動位置之追蹤單元其中至少—者自動監測該演出 者之為, 依據該演出者之行為及該控制規則,自動獲 之該控制内容; 了應 節目攝錄效果。 其中,該演出者之 其中,該等控制内 依據該控制内容自動產生對應之一 、如申請專利範圍第1項所述之方法, 行為包含該演出者之聲音。 、如申請專利範圍第2項所述之方法, 谷包含控制複數拍攝鏡頭間之切換。 該等控制内 該等控制内 該等控制内 該等控制内 、如申請專利範圍第2項所述之方法,其中 容包含控制一投射燈之啟動。 、如申請專利範圍第2項所述之方法,其中 容包含控制一乾冰製造機之啟動。 6、 如申請專利範圍第2項所述之方法,其中 容包含控制一現場音效之播放。 7、 如申請專利範圍第2項所述之方法,其中 24 1263156 容包含控制至少-攝影機拍攝鏡頭之取景遠近。 8、如申請專利範圍第2 容&入#^ 、逑之方法,其中,該等控制内 奋已3控制一用以與該演ψ去 層内容。。 、 衫像合成之虛擬場景之圖 9、如申請專利範圍第2頊所,+ _ ^ ^ 、斤述之方法,其中,該節目攝錄 放果包含拍攝影像及錄製聲音效果之至少一者。 Ϊ0、如申請專利範圍第2頊所+ ^ i/r 斤逑之方法,更包括控制一聲音 之1=1出者之聲音及依據該控制内容產生對應 與==曰,兩步驟,該等控制内容則包含控制一用以 t聲音合成之虛擬音效之聲軌内容。 U、如申請專利範圍第2項所 出者之行為後控制該聲音辨識單更包括於監測該演 獲得對應之該控制内容之步辨驟識早㈣識該演出者之聲音以 12去如中請專利範圍第1或2項所述之方法,其中,該演出 13 含該演出者於—供其表演之表演區内之移動。 13、如申咱專利範圍第12項所述 内容包含控制複數拍攝鏡頭間之切換。中,該等控制 ':者申:為專:Γ?3項所述之方法,其中,該監測該 置,兮等# fl#驟包3追㈣演出者於該表演區之移動位 各該;:===獲得之該_之移動位置* 罝卜對應之各該拍攝鏡頭。 15、如申請專利範圍帛14項所述之 : = 依-規劃該演出者於該表演區之= 仃,且當依該腳本及該等控制規則獲得之該等拍 25 1263156 攝鏡頭間之切換方式不同時係以由該等控制規則獲得者為 ip. 〇 16、 如中請專利範圍第15項所述之方法,更包括將該腳本 規劃之走位方式顯示供該演出者於演出中參考之步驟。 17、 如中請專利範圍第1項所述之方法,更包括控制-聲音 接收單元接收該演出者之磬咅 之-合成聲音之兩步驟。““控制指令產生對應 18、 如中請專利範圍第i項所述之方法,更 實境場景以合成-合成影像之步驟。 1虛擬 19、 如中請專利範圍第18項所述之方法,更包括 成影像顯示供該演出者於演出中參考之步驟。 … 2〇吐如中請專利㈣第1或18項所述之方法,更包括 效該合成影像前產生—供合成於該合成聲音之虛擬實境音 21.-種節目自動化製作方法用 節目,該方法包括下述步驟: ㊉出者之-影音 :存:數控制規則,各該控制規則訂出該演出者之一 少二::ΓΓ内容,其中該控制内容係用以控制至 夕對應讀以產生—對應動作; 『制至 控制至少-攝影機自動攝取該 控制-聲音接收單—ά ^ {之衫像, 押制以 疋自動接收該演出者之聲音; 依據辨識= :: :辨識該演出者之聲音; 產生—對應之該控制内容 〇及該控制規則’自動 26 1263156 依據該控制内容自動產 郎目攝錄效果 22、 如申請專利範圍第21項所述之方法 内容包含控制複數拍攝鏡頭間之切換。 23、 如申請專利範圍第21項所述之方法 内容包含控制一投射燈之啟動。 24、 如申請專利範圍第21項所述之方法 内容包含控制一乾冰製造機之啟動。 2 5、如申請專利範圍第21項所述之方法 内容包含控制一現場音效之播放。 26、如申請專利範圍第22項所述之方法 一 丁,内容包含控制至少一攝影機拍攝鏡頭之取景遠近。 21項所述之方法,合G 3控制-用以與該演出者之影 圖層内容。 4之虛擬场景之M、如中請專利範圍帛21項所述之方法,錄效果包含拍攝影像及錄製聲音效果之至少、—者Γ卽目攝音ΤΙ:專:耗圍第21項所述之方法’更包括控制-聲 應之-人㈣立 “Μ曰及依據該控制指令產生對 :°成曰之兩步驟’該等控制内容則包含控制_用 以與為出者之聲音合成之虛擬音效之聲軌内容。 r 一目種:目自動化製作方法,用以製作-演出者之1立 卽目,該方法包括下述步驟: 、曰則’各該控制規則訂出該演出者該一 m貞區内之移動位置及1應之控制内容,其 其中,該等控制 其中,該等控制 其中,該等控制 其中’該等控制 其中,該等控制 27 1263156 中該控制内容係用以控制至少一對應元件以產生—對 作; " 控制至少一攝影機自動攝取該演出者之影像; 控制一追縱單元自動追蹤該演出者於該表演區之移動 位置; 依據追蹤獲得之該5雷屮去夕勒1 ~ _ -仟d貝出者之移動位置及該控制規則, 自動產生一對應之該控制内容; 依據該控制指令自動產生對應之—節目攝錄效果。 3卜如中請專利範圍第3Q項所述之方法,其中,該等控制 指令包含控制複數拍攝鏡頭間之切換。 32、如中請專利範圍第31項所述之方法,其中,該等 鏡頭間之切換係依-規劃該演出者於該表演區之走位 = = ::I當依該腳本及該等控制規則獲得之該等拍 ^頭間之㈣方式列時仙由料_規職得者為 % 33·-種虛擬攝影棚節目自動化製作方法,用以製作一演出 者之一影音節目,該方法包括下述步驟: 預先儲存複數控制規則,各該控制規則訂出該演出者 為Si對應之控制内容,其中該控制内容係用以控 制至V對應元件以產生一對應動作; 控制至4 -攝影機自動攝取該演出者之影像; 控制一辨識該演出去今五立 緣* —… 出者°° θ之聲音_單元及-追蹤兮 冷出者移動位置之追蹤單元其中 ^ 者之行為; 者自動監測該演出 28 1263156 队爆该次出者之 、项彳丁馮及該控制規則 應之該控制内容; 據“控制内谷自動產生對應之-虛擬場景影像; 自動合成該演出者之影像及該虛擬場景影像。 、如申請專利範圍帛33項所述之方法,其中,該演出者 之仃為包含該演出者之聲音。 ^ W專利_第%項所述之方法,其中,該等控制 谷包含控制該虛擬場景影像之圖層内容。 ^如中請專利範圍第34項所述之方法,更包括控制一聲 2接收單元接收該演出者之聲音、依據該控制内容產生對 虛擬場景音效及合成該演出者之聲音及該虛擬場景 乂驟Μ等控制内容則包含控制該虛擬場景音效之 聲軌内容。 巾請專利範圍第34項所述之方法,更包括於監測該 ,幾者之行為後控制—聲音辨識單元辨識該演出者之聲音 父產生對應之該控制内容之步驟。 8如申请專利範圍帛33或34項所述之方法,其中,該演 。者之行為包含該演出者於—供其表演之表演區内之=動 請專㈣_ 33項所述之方法,更包括於將該合 〜像顯不供該演出者於演出中參考之步驟。 4〇驟:種虛擬攝影棚之虛擬場景影像產生方法,包括下述步 ~演出者 預先儲存複數控制規則, 29 1263156 之一行為及-對應之控制内容,纟中該控制内容係用以控 制至少一對應元件以產生一對應動作; 控制至少一攝影機自動攝取該演出者之影像; 控制一辨識該演出者語音之聲音辨識單元及一追蹤該 演出者移動位置之追蹤I元其中至少—者自誠測該演出 者之行為; 依據該演出者之該行為及該控制規則,自動產生_對 應之該控制内容; 依據該控制内容自動產生對應之一虛擬場景影像。 41、 如申請專利範圍第40項所述之方法,其中,該演出者 之行為包含該演出者之聲音。 42、 如申請專利範圍第4〇或41項所述之方法,其中,該演 出者之行為包含該演出者之於一供其表演之表演區内之移 動。 43·種虛擬攝影棚之虛擬場景音效產生方法,包括下述牛 驟: ’L V 預先儲存複數控制規則,各該控制規則訂出一演出者 之一行為及一對應之控制内容,其中該控制内容係用以控 制至少一對應元件以產生一對應動作; 控制至少一攝影機自動攝取該演出者之影像; 控制一辨識該演出者語音之聲音辨識單元及一追縱該 演出者移動位置之追蹤單元其中至少一者自動監測該演出Λ 者之行為; /' 依據該演出者之該行為及該控制規則,自動產 30 1263156 應之該控制内容; 依據該控制内容自動產生對應之一虛擬場景立上 44、如中請專利範圍第43項所述之方法,其中。 之行為包含該演出者之聲音。 4次出者 45、如申請專利範圍第43或44項所述之方法,其 出者之行為包含該演出者之於一供其表演之::’該淨 動。 衣,幾區内之毛 恍-種節目攝錄效果產生方法,該方法包括下述步驟: 儲存複數控制規則,各該控制規則訂出—
    ,為及-對應之控制内容,其中該控制内容係用= 少一對應元件以產生一對應動作; ^控制 者之影像; 識單元及一追蹤該 者自動監測該演出 控制至少一攝影機自動攝取該演出 控制一辨識該演出者語音之聲音辨 演出者移動位置之追蹤單元其中至少一 者之行為; 應之該控制内容
    47 :摄據二控制内容自動產生對應之-節目攝錄效果 像I:::取景鏡頭運作方法’應用於拍攝-演出 像之複數攝衫機,該方法包括下述步驟. 預先^複數控制規則,各該控制規則訂出該演t 之一仃為及一對應之控制 制至少-對應元件以產生一對應動作: 控制該等攝影機自動攝取該演出者之影 少-n….其^亥控制内容係心 像 31 1263156 控制一辨識該演出去士五立蔽 ” 、出者〜曰之聲曰辨識單元及一追蹤該 ^之行Z位置之追縱單元其中Μ —者自動監測該演出 依據該演出者之該行為及該控制規則自動產生 應之該控制内容; 對 。依據該控制内容自動控制該等攝影機取景鏡頭之運作 48· -種節目自動化製作方法,用以製作—演出者之―立 節目,該方法包括下述步驟·· 心曰 依一節目腳本控制該節目之攝錄; :制-辨識該演出者語音之聲音辨識單元 演出者移動位置之追赌 … 之追蹤早70其中至少-者監測該演出者之 依據該演出者之行為及一控制規則,產生-對庫之控 Π:該控制内容係用以控制至少-對應元件以產: 太及^據中該Γ制内容控制該節目之攝錄,且當由該節目腳 ==行為所產生控制該節目之攝錄效果不同時 ,係以该冷出者之行為為準。 32
TW93139284A 2004-12-17 2004-12-17 Automatic program production system and method thereof TWI263156B (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW93139284A TWI263156B (en) 2004-12-17 2004-12-17 Automatic program production system and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW93139284A TWI263156B (en) 2004-12-17 2004-12-17 Automatic program production system and method thereof

Publications (2)

Publication Number Publication Date
TW200625133A TW200625133A (en) 2006-07-16
TWI263156B true TWI263156B (en) 2006-10-01

Family

ID=37966279

Family Applications (1)

Application Number Title Priority Date Filing Date
TW93139284A TWI263156B (en) 2004-12-17 2004-12-17 Automatic program production system and method thereof

Country Status (1)

Country Link
TW (1) TWI263156B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI807860B (zh) * 2022-06-14 2023-07-01 啟雲科技股份有限公司 虛擬實境網路表演者系統及電腦程式產品

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4725936B1 (ja) 2011-02-01 2011-07-13 有限会社Bond 入力支援装置、入力支援方法及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI807860B (zh) * 2022-06-14 2023-07-01 啟雲科技股份有限公司 虛擬實境網路表演者系統及電腦程式產品

Also Published As

Publication number Publication date
TW200625133A (en) 2006-07-16

Similar Documents

Publication Publication Date Title
US11862198B2 (en) Synthesizing a presentation from multiple media clips
US8824861B2 (en) Interactive systems and methods for video compositing
US20070122786A1 (en) Video karaoke system
TW544615B (en) Secure uniform resource locator system
US8990842B2 (en) Presenting content and augmenting a broadcast
US20160078853A1 (en) Facilitating Online Access To and Participation In Televised Events
CN113473159A (zh) 数字人直播方法、装置、直播管理设备及可读存储介质
US20110304735A1 (en) Method for Producing a Live Interactive Visual Immersion Entertainment Show
WO2015151766A1 (ja) 投影撮影システム、カラオケ装置及びシミュレーション装置
JP2018011850A (ja) 動画記録装置、動画生成方法、及びプログラム
JP2012209856A (ja) 動画情報配信システム
CN113395540A (zh) 虚拟演播系统、虚拟演播实现方法、装置及设备、介质
CN109361954A (zh) 视频资源的录制方法、装置、存储介质及电子装置
TWI263156B (en) Automatic program production system and method thereof
KR20200028830A (ko) 실시간 cg 영상 방송 서비스 시스템
KR20200025285A (ko) 컨텐츠 체험관
JP2009059015A (ja) 合成画像出力装置および合成画像出力処理プログラム
JP7469977B2 (ja) コンピュータプログラム、情報処理方法及び情報処理装置
JP7442979B2 (ja) カラオケシステム
JP2012068419A (ja) カラオケ装置
JP2009059014A (ja) 合成画像出力装置および合成画像出力処理プログラム
JP2008236708A (ja) バーチャル撮影スタジオの媒体制作装置
WO2023120691A1 (ja) 動画作成システム、動画作成装置、及び動画作成用プログラム
WO2023130715A1 (zh) 一种数据处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品
WO2022176633A1 (ja) 映像編集装置、映像編集方法、及びコンピュータプログラム