TWI807860B - 虛擬實境網路表演者系統及電腦程式產品 - Google Patents
虛擬實境網路表演者系統及電腦程式產品 Download PDFInfo
- Publication number
- TWI807860B TWI807860B TW111122253A TW111122253A TWI807860B TW I807860 B TWI807860 B TW I807860B TW 111122253 A TW111122253 A TW 111122253A TW 111122253 A TW111122253 A TW 111122253A TW I807860 B TWI807860 B TW I807860B
- Authority
- TW
- Taiwan
- Prior art keywords
- data
- module
- performer
- program
- voice
- Prior art date
Links
- 238000004590 computer program Methods 0.000 title claims description 16
- 230000033001 locomotion Effects 0.000 claims abstract description 62
- 230000008921 facial expression Effects 0.000 claims abstract description 37
- 238000012545 processing Methods 0.000 claims abstract description 34
- 230000007613 environmental effect Effects 0.000 claims abstract description 32
- 238000003860 storage Methods 0.000 claims abstract description 26
- 230000004048 modification Effects 0.000 claims abstract description 22
- 238000012986 modification Methods 0.000 claims abstract description 22
- 230000001815 facial effect Effects 0.000 claims abstract description 18
- 230000000694 effects Effects 0.000 claims description 49
- 230000000007 visual effect Effects 0.000 claims description 32
- 238000000034 method Methods 0.000 claims description 16
- 230000008859 change Effects 0.000 claims description 15
- 230000003993 interaction Effects 0.000 claims description 12
- 239000011521 glass Substances 0.000 description 12
- 230000003190 augmentative effect Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000007246 mechanism Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/024—Multi-user, collaborative environment
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
一種虛擬實境網路表演者系統,其包含背景設定模組、記錄模組及處理模組。背景設定模組接收表演者輸入的背景設定指令以設定複數個環境參數。記錄模組接收表演者的聲音資料、動作資料及臉部資料。處理模組對聲音資料進行變音處理以產生變音結果,並分析動作資料及臉部資料以產生身體動作及臉部表情,再將該些環境參數、變音結果、身體動作及臉部表情儲存至雲端儲存模組以形成雲端資料。
Description
本發明係有關於一種網路表演者系統,特別是一種虛擬實境網路表演者系統。本發明還涉及此虛擬實境網路表演者系統的電腦程式產品。
由於網路的普及,網路表演者(如YouTuber)及自媒體工作者也成為了熱門的行業。然而,隨著元宇宙的概念提出,虛擬實境網路表演者也可能成為未來的發展趨勢。不同於傳統的網路表演者,虛擬實境網路表演者能以虛擬人物(如動物、卡通人物等)的外形呈現在觀賞者的面前,以提供不同的表演方式。而觀賞者則可透過虛擬實境裝置,如虛擬實境眼鏡(Virtual reality headset)等,觀看虛擬實境網路表演者的表演。然而,目前並沒有一個有效的系統以供虛擬實境網路表演者能有效率的製作節目以供觀賞者觀看。
以下在實施方式中詳細敘述本發明之詳細特徵以及優點,其內容足以使任何熟習相關技藝者瞭解本發明之技術內容並據以實施,且根據本說明書所揭露之內容、申請專利範圍及圖式,任何熟習相關技藝者可輕易地理解本發明相關之目的及優點。
根據本發明之一實施例,本發明提出一種虛擬實境網路表演者系統,其包含背景設定模組、記錄模組及處理模組。背景設定模組接收表演者輸入的背景設定指令以設定複數個環境參數。記錄模組接收表演者的聲音資料、動作資料及臉部資料。處理模組對聲音資料進行變音處理以產生變音結果,並分析動作資料及臉部資料以產生身體動作及臉部表情,再將該些環境參數、變音結果、身體動作及臉部表情儲存至雲端儲存模組以形成雲端資料。
在一實施例中,該些環境參數包含背景、角色造型、音樂、配樂、音效、特效、觀眾位置、觀眾視角及互動方式中之一或以上。
在一實施例中,當處理模組判斷變音結果、身體動作及臉部表情中的任一個符合角色造型的特效觸發條件時,處理模組產生對應特效觸發條件的視覺特效。
在一實施例中,虛擬實境網路表演者系統更包含節目設定模組、資料接收模組及三維模型重映射模組,節目設定模組用於接收節目設定指令,資料接收模組接收節目設定指令,並根據節目設定指令由雲端儲存模組接收雲端資料,而三維模型重映射模組將三維模型與雲端資料整合以產生第一節目資料。
在一實施例中,虛擬實境網路表演者系統更包含節目選擇模組及影片接收模組,節目選擇模組用於接收節目選擇指令,影片接收模組根據節目選擇指令由雲端儲存模組接收雲端資料以產生第二節目資料。
根據本發明之另一實施例,本發明提出一種電腦程式產品,
經由電腦載入後執行下列步驟:接收表演者輸入的背景設定指令以設定複數個環境參數;接收表演者的聲音資料、動作資料及臉部資料;對聲音資料進行變音處理以產生變音結果;分析動作資料及臉部資料以產生身體動作及臉部表情;以及將該些環境參數、變音結果、身體動作及臉部表情儲存至雲端儲存模組以形成雲端資料。
在一實施例中,該些環境參數包含背景、角色造型、音樂、配樂、音效、特效、觀眾位置、觀眾視角及互動方式中之一或以上。
在一實施例中,此電腦程式產品經由該電腦載入後更執行下列步驟:在變音結果、身體動作及臉部表情中的任一個符合角色造型的特效觸發條件時產生對應特效觸發條件的視覺特效。
在一實施例中,此電腦程式產品經由該電腦載入後更執行下列步驟:接收節目設定指令;以及根據節目設定指令由雲端儲存模組接收雲端資料;以及將三維模型與雲端資料整合以產生第一節目資料。
在一實施例中,此電腦程式產品經由該電腦載入後更執行下列步驟:接收節目選擇指令;以及根據節目選擇指令由雲端儲存模組接收雲端資料以產生第二節目資料。
承上所述,依本發明之虛擬實境網路表演者系統及電腦程式產品,其可具有一或多個下述優點:
(1)本發明之一實施例中,虛擬實境網路表演者系統可接收表演者輸入的背景設定指令以設定複數個環境參數,並接收表演者的聲音資料、動作資料及臉部資料,且根據聲音資料、動作資料及臉部資料產生變音結果、身體動作及臉部表情。然後,虛擬實境網路表演者系統將該些
環境參數、變音結果、身體動作及臉部表情儲存至雲端儲存模組以形成雲端資料,以做為節目資料。透過上述的機制,虛擬實境網路表演者系統可供表演者快速且有效率的製作節目,以符合實際應用上的需求。
(2)本發明之一實施例中,虛擬實境網路表演者系統的各個功能模組可供表演者自由設計節目的內容,以符合製作不同類型節目的需求,故使用上極為方便,應用上也更為廣泛。
(3)本發明之一實施例中,虛擬實境網路表演者系統具有三維模型重映射模組,其可將三維模型與雲端資料整合以產生節目資料,使此表演者的聲音、身體動作及臉部表情均可以與三維模型有效地整合,以提供極佳的視覺效果,以提升貴賓觀賞者的觀賞體驗。
(4)本發明之一實施例中,虛擬實境網路表演者系統具有節目設定模組,其可供貴賓觀賞者設定表演者、贊助模式、觀呼、拍照、截圖、文字輸出、語音輸出、虛擬手部互動、觀賞者位置、音效及音量等,故可提供貴賓觀賞者更豐富的功能,以提升貴賓觀賞者的觀賞體驗。
(5)本發明之一實施例中,虛擬實境網路表演者系統可根據表演者設定的角色造型提供額外的視覺特效,故表演者可在節目中的適當時機執行符合其選擇的角色造型的特效觸發條件的動作,以觸發對應的視覺特效,使節目的娛樂性增加。
(6)本發明之一實施例中,虛擬實境網路表演者系統可透過特殊的處理機制供表演者快速且有效率的製作節目,故更能符合未來的發展趨勢及產業的需求,極具商業價值。
1:虛擬實境網路表演者系統
11:背景設定模組
12:記錄模組
13:處理模組
14:節目設定模組
15:資料接收模組
16:三維模型重映射模組
17:節目選擇模組
18:影片接收模組
DB:雲端儲存模組
Bs:背景設定指令
P1:環境參數
P2:變音結果
P3:身體動作
P4:臉部表情
CD:雲端資料
Vs:節目設定指令
Ns:節目選擇指令
S1:第一節目資料
S2:第二節目資料
S31~S39:步驟流程
第1圖 係為本發明之一實施例之虛擬實境網路表演者系統之方塊圖。
第2圖 係為本發明之另一實施例之虛擬實境網路表演者系統之方塊圖。
第3圖係為本發明之一實施例之虛擬實境網路表演者系統控制方法之流程圖。
以下將參照相關圖式,說明依本發明之虛擬實境網路表演者系統及電腦程式產品之實施例,為了清楚與方便圖式說明之故,圖式中的各部件在尺寸與比例上可能會被誇大或縮小地呈現。在以下描述及/或申請專利範圍中,當提及元件「連接」或「耦合」至另一元件時,其可直接連接或耦合至該另一元件或可存在介入元件;而當提及元件「直接連接」或「直接耦合」至另一元件時,不存在介入元件,用於描述元件或層之間之關係之其他字詞應以相同方式解釋。為使便於理解,下述實施例中之相同元件係以相同之符號標示來說明。
請參閱第1圖,其係為本發明之一實施例之虛擬實境網路表演者系統之方塊圖。如圖所示,虛擬實境網路表演者系統1包含背景設定模組11、記錄模組12、處理模組13、節目設定模組14、資料接收模組15及三維模型重映射模組16。上述該些模組可整合為一個硬體或一個軟體,或由二個或以上的硬體或軟體實現,或各個模組可為一個獨立的硬體或軟體。
背景設定模組11接收表演者透過其電子裝置(如智慧型手機、平板電腦、筆記型電腦、個人電腦、虛擬實境眼鏡、擴增實境眼鏡等)
輸入的背景設定指令Bs以設定複數個環境參數P1。在一實施例中,該些環境參數包含背景、角色造型、音樂、配樂、音效、特效、觀眾位置、觀眾視角及互動方式中之一或以上。
記錄模組12接收表演者的聲音資料、動作資料及臉部資料。表演者可透過其電子裝置(如智慧型手機、平板電腦、筆記型電腦、個人電腦、虛擬實境眼鏡、擴增實境眼鏡等)將其影片傳送至記錄模組12,使記錄模組12可以取得表演者的聲音資料、動作資料及臉部資料。
處理模組13對聲音資料進行變音處理以產生變音結果P2,並分析動作資料及臉部資料以產生身體動作P3及臉部表情P4,再將該些環境參數P1、變音結果P2、身體動作P3及臉部表情P4儲存至雲端儲存模組DB以形成雲端資料CD。
此外,處理模組13還可根據表演者設定的角色造型(其中一個環境參數P1)提供額外的視覺特效。在本實施例中,處理模組13可在判斷變音結果P2、身體動作P3及臉部表情P4中的任一個符合前述角色造型的特效觸發條件時,產生對應特效觸發條件的視覺特效;此視覺特效可為環境的視覺特效及/或角色造型的視覺特效。例如,表演者將角色造型設定為超人,此角色造型(超人)的特效觸發條件為手插腰的動作,而對應的視覺特效為直射超人的舞台燈光(環境的視覺特效)。在此情況下,當處理模組13判斷身體動作P3包含手插腰的動作,處理模組13則會產生直射超人的舞台燈光的視覺特效。例如,表演者將角色造型設定為財神爺,此角色造型(財神爺)的特效觸發條件為雙手攤開的動作,而對應的視覺特效為下紅包雨(環境的視覺特效)。在此情況下,當處理模組13判斷身體動作P3包含雙手攤開的動
作,處理模組13則會產生下紅包雨的視覺特效。例如,表演者將角色造型設定為熊,此角色造型(財神爺)的特效觸發條件為嘴張開的表情,而對應的視覺特效為嘴巴噴火(角色的視覺特效)及岩漿噴發(環境的視覺特效)。在此情況下,當處理模組13判斷臉部表情P4包含嘴張開的表情,處理模組13則會產生嘴巴噴火及岩漿噴發的視覺特效。上述的視覺特效也可做為雲端資料CD的一部份。
節目設定模組14接收貴賓觀賞者(如透過付費取得VIP資格的用戶)透過其電子裝置(如智慧型手機、平板電腦、筆記型電腦、個人電腦、虛擬實境眼鏡、擴增實境眼鏡等)輸入的節目設定指令Vs。在一實施例中,節目設定指令Vs用於設定表演者、贊助模式、觀呼、拍照、截圖、文字輸出、語音輸出、虛擬手部互動、觀賞者位置、音效及音量中之一或以上。其中,觀賞者位置指的是觀賞者位於虛擬表演現場的位置及視角等。虛擬手部互動指的是觀賞者位於虛擬表演現場與表演者的互動方式。
資料接收模組15接收節目設定指令Vs,並根據節目設定指令Vs由雲端儲存模組DB接收節目設定指令Vs所指定的表演者的雲端資料CD。
三維模型重映射模組16將三維模型與雲端資料CD整合以產生第一節目資料S1,並傳送至貴賓觀賞者的電子裝置(如虛擬實境眼鏡、擴增實境眼鏡等),以播放第一節目資料S1。如此,貴賓觀賞者則可透過其電子裝置觀賞第一節目資料S1;第一節目資料S1可以為即時播放的節目或錄製的節目。其中,前述的三維模型可以是動物、卡通人物、電影人物或其它各種虛擬角色,三維模型重映射模組16透過三維映射技術將三維模型與
雲端資料CD中表演者的身體動作P3及臉部表情P4整合,使產生的虛擬人物能有栩栩如生的感覺,故可達到更佳的視覺效果。
另外,如前述,貴賓觀賞者可透過其電子裝置設定表演者、贊助模式、觀呼、拍照、截圖、文字輸出、語音輸出、虛擬手部互動、觀賞者位置、音效及音量中之一或以上。因此,虛擬實境網路表演者系統1可提供貴賓觀賞者客製化的功能,使貴賓觀賞者能自由客製化第一節目資料S1及其與表演者的互動方式,故可以提升貴賓觀賞者的觀賞體驗。
由上述可知,本實施例的虛擬實境網路表演者系統1可接收表演者輸入的背景設定指令Bs以設定複數個環境參數P1,並接收表演者的聲音資料、動作資料及臉部資料,且根據聲音資料、動作資料及臉部資料產生變音結果P2、身體動作P3及臉部表情P4。然後,虛擬實境網路表演者系統1將該些環境參數P1、變音結果P2、身體動作P3及臉部表情P4儲存至雲端儲存模組DB以形成雲端資料CD,以做為節目資料。如此一來,虛擬實境網路表演者系統1可供表演者快速且有效率的製作節目,以符合實際應用上的需求。
此外,虛擬實境網路表演者系統1的各個功能模組可供表演者自由設計節目的內容,以符合製作不同類型節目的需求,故使用上極為方便,應用上也更為廣泛。另外,如前述,虛擬實境網路表演者系統1可根據表演者設定的角色造型提供額外的視覺特效。因此,表演者可在節目中的適當時機執行符合其選擇的角色造型的特效觸發條件的動作,以觸發對應的視覺特效,使節目的娛樂性增加。
當然,本實施例僅用於舉例說明而非限制本發明的範圍,根
據本實施例的虛擬實境網路表演者系統1而進行的等效修改或變更仍應包含在本發明的專利範圍內。
請參閱第2圖,其係為本發明之另一實施例之虛擬實境網路表演者系統之方塊圖。如圖所示,虛擬實境網路表演者系統1包含背景設定模組11、記錄模組12、處理模組13、節目設定模組14、資料接收模組15及三維模型重映射模組16。
上述元件與前述實施例相似,故不在此多加贅述。與前述實施例不同的是,本實施例的虛擬實境網路表演者系統1更包含節目選擇模組17及影片接收模組18。
節目選擇模組17用於接收非貴賓觀賞者(如未付費的用戶)透過其電子裝置(如智慧型手機、平板電腦、筆記型電腦、個人電腦、虛擬實境眼鏡、擴增實境眼鏡等)輸入的節目選擇指令Ns。
影片接收模組18接收節目選擇指令Ns,並根據節目選擇指令Ns接收節目選擇指令Ns所指定的表演者的雲端資料CD,以產生第二節目資料S2。然後,影片接收模組18將第二節目資料S2傳送至非貴賓觀賞者的電子裝置(如虛擬實境眼鏡、擴增實境眼鏡等)。如此,非貴賓觀賞者則可透過其電子裝置觀賞第二節目資料S2。
由上述可知,非貴賓觀賞者雖無法使用其它進階的功能,但仍可以透過虛擬實境網路表演者系統1觀賞表演者製作的節目。
當然,本實施例僅用於舉例說明而非限制本發明的範圍,根據本實施例的虛擬實境網路表演者系統1而進行的等效修改或變更仍應包含在本發明的專利範圍內。
值得一提的是,目前並沒有一個有效的系統以供虛擬實境網路表演者能有效率的製作節目以供觀賞者觀看。相反的,根據本發明之實施例,虛擬實境網路表演者系統可接收表演者輸入的背景設定指令以設定複數個環境參數,並接收表演者的聲音資料、動作資料及臉部資料,且根據聲音資料、動作資料及臉部資料產生變音結果、身體動作及臉部表情。然後,虛擬實境網路表演者系統將該些環境參數、變音結果、身體動作及臉部表情儲存至雲端儲存模組以形成雲端資料,以做為節目資料。透過上述的機制,虛擬實境網路表演者系統可供表演者快速且有效率的製作節目,以符合實際應用上的需求。
又,根據本發明之實施例,虛擬實境網路表演者系統的各個功能模組可供表演者自由設計節目的內容,以符合製作不同類型節目的需求,故使用上極為方便,應用上也更為廣泛。
此外,根據本發明之實施例,虛擬實境網路表演者系統具有三維模型重映射模組,其可將三維模型與雲端資料整合以產生節目資料,使此表演者的聲音、身體動作及臉部表情均可以與三維模型有效地整合,以提供極佳的視覺效果,以提升貴賓觀賞者的觀賞體驗。
另外,根據本發明之實施例,虛擬實境網路表演者系統具有節目設定模組,其可供貴賓觀賞者設定表演者、贊助模式、觀呼、拍照、截圖、文字輸出、語音輸出、虛擬手部互動、觀賞者位置、音效及音量等,故可提供貴賓觀賞者更豐富的功能,以提升貴賓觀賞者的觀賞體驗。
再者,根據本發明之實施例,虛擬實境網路表演者系統可透過特殊的處理機制供表演者快速且有效率的製作節目,故更能符合未來的
發展趨勢及產業的需求,極具商業價值。由上述可知,本發明確實可以達到極佳的技術效果。
請參閱第3圖,其係為本發明之另一實施例之虛擬實境網路表演者系統控制方法之流程圖。上述方法也可經由電腦載入一個電腦程式產品後執行,此電腦程式產品包含一個或多個對應的指令,此方法包含下列步驟:
步驟S31:接收表演者輸入的背景設定指令以設定複數個環境參數。
步驟S32:接收表演者的聲音資料、動作資料及臉部資料。
步驟S33:對聲音資料進行變音處理以產生變音結果。
步驟S34:分析動作資料及臉部資料以產生身體動作及臉部表情。
步驟S35:在變音結果、身體動作及臉部表情中的任一個符合角色造型的特效觸發條件時產生對應特效觸發條件的視覺特效。
步驟S36:將該些環境參數、變音結果、身體動作、臉部表情及視覺特效儲存至雲端儲存模組以形成雲端資料。
步驟S37:接收節目設定指令。
步驟S38:根據節目設定指令由雲端儲存模組接收雲端資料。
步驟S39:將三維模型與雲端資料整合以產生第一節目資料。
當然,本實施例僅用於舉例說明而非限制本發明的範圍,根
據本實施例的方法而進行的等效修改或變更仍應包含在本發明的專利範圍內。
儘管本發明描述的方法的步驟以特定順序示出和描述,但是每個方法的操作順序可以改變,也可以相反的順序執行某些步驟,或者某些步驟也與其他步驟同時執行。在另一個實施例中,不同步驟可以間歇和/或交替的方式實施。
上述方法可由處理器執行儲存在非暫態的電腦可讀取媒體中的一個或多個指令來實現。上述方法也可經由電腦載入一個電腦程式產品後執行,此電腦程式產品包含一個或多個對應的指令。
電腦可用儲存媒體或電腦可讀取儲存媒體可以是電子、磁、光、電磁、紅外光或半導體系統(或裝置、設備等)。非暫態電腦可用和電腦可讀取儲存媒體的示例包括半導體或固態記憶體、磁帶、可攜式軟碟、隨機存取記憶體(RAM)、唯讀記憶體(ROM)、硬碟及光碟等。光碟的示例包含具有唯讀記憶體的光碟(CD-ROM)、可重複覆寫的光碟(CD-R/W)和數位多功能光碟(DVD)等。
另外,本揭露的各實施例(或系統的各個模組)可以完全以硬體、完全以軟體或以包含硬體和軟體元件的實施方式來實現。關於軟體的實施例,軟體可以包括但不限於韌體、常駐軟體、微碼等。關於硬體的實施例,硬體可以在一個或多個特殊應用積體電路晶片(ASIC)、數位訊號處理器(DSP)、數位訊號處理裝置(DSPD)、可程式化邏輯裝置(PLD)、現場可程式化邏輯閘陣列(FPGA)、中央處理單元(CPU)、控制器、微控制器、微處理器、電子設備、其他電子單元設計用於執行此處描述的功能或其組合。
綜上所述,根據本發明之實施例,虛擬實境網路表演者系統可接收表演者輸入的背景設定指令以設定複數個環境參數,並接收表演者的聲音資料、動作資料及臉部資料,且根據聲音資料、動作資料及臉部資料產生變音結果、身體動作及臉部表情。然後,虛擬實境網路表演者系統將該些環境參數、變音結果、身體動作及臉部表情儲存至雲端儲存模組以形成雲端資料,以做為節目資料。透過上述的機制,虛擬實境網路表演者系統可供表演者快速且有效率的製作節目,以符合實際應用上的需求。
根據本發明之實施例,虛擬實境網路表演者系統的各個功能模組可供表演者自由設計節目的內容,以符合製作不同類型節目的需求,故使用上極為方便,應用上也更為廣泛。
又,根據本發明之實施例,虛擬實境網路表演者系統具有三維模型重映射模組,其可將三維模型與雲端資料整合以產生節目資料,使此表演者的聲音、身體動作及臉部表情均可以與三維模型有效地整合,以提供極佳的視覺效果,以提升貴賓觀賞者的觀賞體驗。
此外,根據本發明之實施例,虛擬實境網路表演者系統具有節目設定模組,其可供貴賓觀賞者設定表演者、贊助模式、觀呼、拍照、截圖、文字輸出、語音輸出、虛擬手部互動、觀賞者位置、音效及音量等,故可提供貴賓觀賞者更豐富的功能,以提升貴賓觀賞者的觀賞體驗。
另外,根據本發明之實施例,虛擬實境網路表演者系統可根據表演者設定的角色造型提供額外的視覺特效,故表演者可在節目中的適當時機執行符合其選擇的角色造型的特效觸發條件的動作,以觸發對應的視覺特效,使節目的娛樂性增加。
再者,根據本發明之實施例,虛擬實境網路表演者系統可透過特殊的處理機制供表演者快速且有效率的製作節目,故更能符合未來的發展趨勢及產業的需求,極具商業價值。
可見本發明在突破先前之技術下,確實已達到所欲增進之功效,且也非熟悉該項技藝者所易於思及,其所具之進步性、實用性,顯已符合專利之申請要件,爰依法提出專利申請,懇請 貴局核准本件發明專利申請案,以勵創作,至感德便。
以上所述僅為舉例性,而非為限制性者。其它任何未脫離本發明之精神與範疇,而對其進行之等效修改或變更,均應該包含於後附之申請專利範圍中。
1:虛擬實境網路表演者系統
11:背景設定模組
12:記錄模組
13:處理模組
14:節目設定模組
15:資料接收模組
16:三維模型重映射模組
DB:雲端儲存模組
Bs:背景設定指令
P1:環境參數
P2:變音結果
P3:身體動作
P4:臉部表情
CD:雲端資料
Vs:節目設定指令
S1:第一節目資料
Claims (8)
- 一種虛擬實境網路表演者系統,係包含:一背景設定模組,係用於接收一表演者輸入的一背景設定指令以設定複數個環境參數;一記錄模組,係接收該表演者的一聲音資料、一動作資料及一臉部資料;一處理模組,係對該聲音資料進行變音處理以產生一變音結果,並分析該動作資料及該臉部資料以產生一身體動作及一臉部表情,再將該些環境參數、該變音結果、該身體動作及該臉部表情儲存至一雲端儲存模組以形成一雲端資料;一節目設定模組,用於接收一節目設定指令;一資料接收模組,用於接收該節目設定指令,並根據該節目設定指令由該雲端儲存模組接收該雲端資料;以及一三維模型重映射模組,用於將一三維模型與該雲端資料的該身體動作及該臉部表情整合並結合該雲端資料的該環境參數以產生一第一節目資料。
- 如請求項1所述之虛擬實境網路表演者系統,其中該些環境參數包含背景、角色造型、音樂、配樂、音效、特效、觀眾位置、觀眾視角及互動方式中之一或以上。
- 如請求項2所述之虛擬實境網路表演者系統,其中當該處理模組判斷該變音結果、該身體動作及該臉部表情中的任一個符合該角色造型的一特效觸發條件時,該處理模組產生對應該特效觸發條件的一視覺特效。
- 如請求項1所述之虛擬實境網路表演者系統,更包含一節目選擇模組及一影片接收模組,該節目選擇模組用於接收一節目選擇指令,該影片接收模組根據該節目選擇指令由該雲端儲存模組接收該雲端資料以產生一第二節目資料。
- 一種電腦程式產品,經由一電腦載入後執行下列步驟:接收一表演者輸入的一背景設定指令以設定複數個環境參數;接收該表演者的一聲音資料、一動作資料及一臉部資料;對該聲音資料進行變音處理以產生一變音結果;分析該動作資料及該臉部資料以產生一身體動作及一臉部表情;將該些環境參數、該變音結果、該身體動作及該臉部表情儲存至一雲端儲存模組以形成一雲端資料;接收一節目設定指令;根據該節目設定指令由該雲端儲存模組接收該雲端資料;以及將一三維模型與該雲端資料的該身體動作及該臉部表情整合並結合該雲端資料的該環境參數以產生一第一節目資料。
- 如請求項5所述之電腦程式產品,其中該些環境參數包含背景、角色造型、音樂、配樂、音效、特效、觀眾位置、觀眾視角及互動方式中之一或以上。
- 如請求項6所述之電腦程式產品,經由該電腦載入後更執行下列步驟:在該變音結果、該身體動作及該臉部表情中的任一個符合該角色造型的一特效觸發條件時產生對應該特效觸發條件的一視覺特效。
- 如請求項5所述之電腦程式產品,經由該電腦載入後更執行下列步驟:接收一節目選擇指令;以及根據該節目選擇指令由該雲端儲存模組接收該雲端資料以產生一第二節目資料。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111122253A TWI807860B (zh) | 2022-06-14 | 2022-06-14 | 虛擬實境網路表演者系統及電腦程式產品 |
US17/882,625 US20230401794A1 (en) | 2022-06-14 | 2022-08-08 | Virtual reality network performer system and control method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111122253A TWI807860B (zh) | 2022-06-14 | 2022-06-14 | 虛擬實境網路表演者系統及電腦程式產品 |
Publications (2)
Publication Number | Publication Date |
---|---|
TWI807860B true TWI807860B (zh) | 2023-07-01 |
TW202349349A TW202349349A (zh) | 2023-12-16 |
Family
ID=88149308
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111122253A TWI807860B (zh) | 2022-06-14 | 2022-06-14 | 虛擬實境網路表演者系統及電腦程式產品 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20230401794A1 (zh) |
TW (1) | TWI807860B (zh) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI263156B (en) * | 2004-12-17 | 2006-10-01 | Shiau-Ming Wang | Automatic program production system and method thereof |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11232532B2 (en) * | 2018-05-30 | 2022-01-25 | Sony Interactive Entertainment LLC | Multi-server cloud virtual reality (VR) streaming |
JP6724110B2 (ja) * | 2018-10-31 | 2020-07-15 | 株式会社ドワンゴ | 仮想空間中のアバター表示システム、仮想空間中のアバター表示方法、コンピュータプログラム |
CN110045817A (zh) * | 2019-01-14 | 2019-07-23 | 启云科技股份有限公司 | 采用虚拟实境技术的交互式摄影系统 |
US11348315B2 (en) * | 2019-03-19 | 2022-05-31 | Obsess, Inc. | Generating and presenting a 3D virtual shopping environment |
-
2022
- 2022-06-14 TW TW111122253A patent/TWI807860B/zh active
- 2022-08-08 US US17/882,625 patent/US20230401794A1/en not_active Abandoned
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI263156B (en) * | 2004-12-17 | 2006-10-01 | Shiau-Ming Wang | Automatic program production system and method thereof |
Also Published As
Publication number | Publication date |
---|---|
TW202349349A (zh) | 2023-12-16 |
US20230401794A1 (en) | 2023-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10203838B2 (en) | Avatar personalization in a virtual environment | |
US20120272162A1 (en) | Methods and systems for virtual experiences | |
US11653072B2 (en) | Method and system for generating interactive media content | |
US11423629B2 (en) | Automatic rendering of 3D sound | |
US12100374B2 (en) | Artificial intelligence models for composing audio scores | |
Dani | Impact of virtual reality on gaming | |
Bauer et al. | First steps towards augmented reality interactive electronic music production | |
TWI807860B (zh) | 虛擬實境網路表演者系統及電腦程式產品 | |
TWI826764B (zh) | 基於虛擬實境的課程製作及重現的方法及其系統 | |
Golding | The memory of perfection: Digital faces and nostalgic franchise cinema | |
WO2018049682A1 (zh) | 一种虚拟3d场景制作方法及相关设备 | |
WO2024077498A1 (zh) | 一种播放界面的显示方法、装置、设备及可读存储介质 | |
Bolter et al. | Liveness, presence, and performance in contemporary digital media | |
CN105094823B (zh) | 一种用于生成输入法界面的方法和装置 | |
CN116017082A (zh) | 一种信息处理方法和电子设备 | |
Peverini | The aesthetics of music videos: An open debate | |
Chang | Catching the ghost: the digital gaze of motion capture | |
Tajtáková | Theatre in the Digital Age: When Technology Meets the Arts | |
Plans | Composer in Your Pocket: Procedural Music in Mobile Devices | |
MERlINI | The Second Death of Concept Albums World-Building and Unification Strategies in the Age of Streaming | |
Riley | Touching Light: a Framework for the Facilitation of Music-Making in Mixed Reality | |
Merlini | Lost in the Stream: Concept Album in the Age of Streaming | |
Wang et al. | Narrative controllability in visual reality interactive film | |
WO2024077492A1 (zh) | 播放界面的显示方法、装置、设备、介质及程序产品 | |
US20240013488A1 (en) | Groups and Social In Artificial Reality |