TW202111481A

TW202111481A - 擴增實境拍錄互動系統

Info

Publication number: TW202111481A
Application number: TW108132151A
Authority: TW
Inventors: 丘立全; 鍾瑞君; 陳暉鈞; 鄭以屏
Original assignee: 啟雲科技股份有限公司
Priority date: 2019-09-06
Filing date: 2019-09-06
Publication date: 2021-03-16

Abstract

本發明為一種擴增實境拍錄互動系統，包含管理模組、操作模組、顯示模組及攝錄模組。管理模組包含控制單元及儲存單元，儲存單元存載有虛擬情境資料及虛擬物件資料；操作模組可調取虛擬情境資料及虛擬物件；攝錄模組包含感測單元，攝錄模組攝錄使用人的動態影像，感測單元感測使用者的立體動態資訊，並傳送至管理模組。其中管理模組接收立體動態資訊，同步匹配使用者所調取的虛擬情境資料及虛擬物件穿搭或對應在使用者的動態影像上，建構動態虛擬影像，並令顯示模組顯示虛擬動態影像，管理模組還儲存動態虛擬影像。

Description

擴增實境拍錄互動系統

一種虛擬擴增實境拍錄互動系統，尤指一種具虛擬情境以及虛擬物件可供使用者搭配使用而建構影像的互動式拍錄系統。

影像拍錄機台自從上市以來，受到人們的喜愛，最受歡迎的莫過於大頭貼機台。類似的機台因具有許多繪圖功能及濾鏡效果，讓使用者的貼圖更具美觀，因此深受年輕人的愛戴。相關專利請參閱中華民國專利號M521215、M513425以及M434274等專利。

然而上述中的拍貼或是互動式拍錄機台，所提供的大多為平面式的圖像效果，即使另有3D影像，仍以固定、靜態式的圖像呈現，無法真正滿足使用者欲建構的影像，無法與機台互動因而缺乏彈性，影像的攝錄效果相當有限。

因此，如何設計一種操作簡便，且能與使用者相互動、提升拍攝樂趣，滿足使用者所需的拍錄系統，是相關領域的專業人員極需研究的課題。

有鑑於此，本發明一實施例提出一種擴增實境拍錄互動系統，包含管理模組、操作模組、顯示模組以及攝錄模組。

管理模組包含控制單元及儲存單元，該儲存單元存載有至少一虛擬情境資料及至少一虛擬物件資料中至少一者；操作模組電性連接該管理模組，供該使用者操作使用，調取該至少一虛擬情境資料以及該至少一虛擬物件；顯示模組電性連接該管理模組；攝錄模組電性連接該管理模組，包含一感測單元，該攝錄模組攝錄該使用人的動態影像，該感測單元感測該使用者的一立體動態資訊，並傳送至該管理模組。

其中，該管理模組接收該立體動態資訊，同步匹配該使用者所調取的該至少一虛擬情境資料及該至少一虛擬物件穿搭或對應在該使用者的動態影像上，建構一動態虛擬影像，並令該顯示模組顯示該虛擬動態影像，該管理模組還進一步儲存該動態虛擬影像。

如上所述的擴增實境拍錄互動系統，在一實施例中，還包含一圖像輸出模組，電性連接該管理模組，該使用者操作該操作模組，傳送輸出指令至該管理模組，以令該圖像輸出模組輸出該動態虛擬影像。

如上所述的擴增實境拍錄互動系統，在一實施例中，如上所述的擴增實境拍錄互動系統，在一實施例中，該圖像輸出模組係以照片、拼圖、明信片及貼紙中至少一者的方式列印輸出。

如上所述的擴增實境拍錄互動系統，在一實施例中，進一步包含一燈光模組，電性連接管理模組，以調整該使用者於拍攝時的燈效

如上所述的擴增實境拍錄互動系統，在一實施例中，進一步包含一傳送模組，俾供該使用者的一儲存裝置訊號連接以接收該動態虛擬影像。

如上所述的擴增實境拍錄互動系統，在一實施例中，進一步包含一雲端伺服器，接收該管理模組傳送的該動態虛擬影像。

如上所述的擴增實境拍錄互動系統，在一實施例中，該管理模組還令顯示模組顯示一連結條碼(例如：QR Code)，供該使用者的一掃描裝置掃描該連結條碼後自該雲端伺服器下載該動態虛擬影像。

如上所述的擴增實境拍錄互動系統，在一實施例中，進一步包含一收費模組，電性連接該管理模組，該收費模組用以收取金錢，以使該使用人操作該操作模組，其中該收費模組係以實體錢幣或以虛擬錢幣的方式收取金錢。

如上所述的擴增實境拍錄互動系統，在一實施例中，其中該管理模組還儲存有複數媒體影像，於一未使用狀態時，該管理模組令該顯示模組顯示該些複數媒體影像。

如上所述的擴增實境拍錄互動系統，在一實施例中，進一步包含一影像調整模組，電性連接該管理模組，其中該使用者藉由操作該操作模組，以使該管理模組令該影像調整模組調整該至少一虛擬情境及該至少一虛擬物件的影像效果。

如上所述的擴增實境拍錄互動系統，在一實施例中，進一步包含一運算模組，電性連接該管理模組，該運算模組以統計該使用者的生理資訊、該至少一虛擬情境及該至少一虛擬物件的使用率中至少一者，對應生成一統計資料，且傳送至該管理模組。

經由上述多個或一個實施例所提供的擴增實境拍錄互動系統，提供給使用者更多的視覺享受以及互動樂趣，使用者可視其喜好，穿搭虛擬物件或與虛擬物件互動，並且輸出所拍錄的影像。相較於以往單一靜態且呆板的拍照系統，本發明的擴增實境拍錄互動系統有廣泛的運用空間且極具商業價值。

1‧‧‧擴增實境拍錄互動系統

11‧‧‧管理模組

111‧‧‧控制單元

112‧‧‧儲存單元

12‧‧‧操作模組

13‧‧‧顯示模組

14‧‧‧攝錄模組

141‧‧‧感測單元

15‧‧‧圖像輸出模組

16‧‧‧燈光模組

17‧‧‧傳送模組

18‧‧‧雲端伺服器

19‧‧‧收費模組

20‧‧‧影像調整模組

21‧‧‧運算模組

2‧‧‧使用者

A1‧‧‧虛擬情境

A2‧‧‧虛擬物件

[圖1]係本發明擴增實境拍錄互動系統之一實施例之外觀示意圖。

[圖2]係本發明擴增實境拍錄互動系統之一實施例之架構示意圖(一)。

[圖3]係本發明擴增實境拍錄互動系統之一實施例之架構示意圖(二)。

[圖4]係本發明擴增實境拍錄互動系統之一實施例之架構示意圖(三)。

[圖5]係本發明擴增實境拍錄互動系統之使用狀態示意圖。

[圖6]係本發明擴增實境拍錄互動系統之使用狀態示意圖。

[圖7]係本發明擴增實境拍錄互動系統之使用狀態示意圖。

[圖8]係本發明擴增實境拍錄互動系統之使用狀態示意圖。

[圖9]係本發明擴增實境拍錄互動系統之使用狀態示意圖。

請參閱圖1、圖2、圖3及圖4，分別為本發明擴增實境拍錄互動系統1一實施例之外觀示意圖及架構示意圖。請併同參閱圖5至圖9，分別本發明擴增實境拍錄互動系統1之使用狀態示意圖。

擴增實境拍錄互動系統1包含管理模組11、操作模組12、顯示模組13以及攝錄模組14。擴增實境拍錄互動系統1可以一機台的形式呈現，設置於展場、機場或是各種人群往來的場地。機台具有展示畫面的螢幕、列印照片的設備。

管理模組11包含控制單元111及儲存單元112，儲存單元112存載有至少一虛擬情境A1資料及至少一虛擬物件A2資料中至少一者。

所述的虛擬情境A1資料例如場景、濾鏡效果等，如海洋、外太空或草原、復古相框、遊樂園等等。

所述的虛擬物件A2例如裝備，如墨鏡、假髮、盔甲或是寵物等等，可與使用者2搭配互動，此外，擴增實境拍錄互動系統1還包含影像調整模組20，以調整至少一虛擬情境A1及至少一虛擬物件A2的影像效果，使畫面更為美觀。

操作模組12電性連接管理模組11，供使用者2操作使用，調取至少一虛擬情境A1資料以及至少一虛擬物件A2；顯示模組13電性連接管理模組11；在此實施例中，顯示模組13與操作模組12相結合，例如為觸控式螢幕。

攝錄模組14電性連接管理模組11，其包含感測單元141，攝錄模組14攝錄使用人的動態影像，感測單元141感測使用者2的立體動態資訊，並傳送至管理模組11。

在一些實施例中，攝錄模組14進行使用者2的姿態估計演算，並進一步提供3D骨架資訊至管理模組11，管理模組11將3D骨架資訊與虛擬情境A1資料、虛擬物件A2同步結合，將虛擬情境A1資料、虛擬物件A2對應在使用者2的動態影像上，建構一動態虛擬影像，一方面顯示模組13顯示虛擬動態影像。在一實施例中，管理模組11還進一步儲存虛擬影像。

在一些實施例中，攝錄模組14進行使用者2的姿態估計演算，例如平面頭像時，可以依據演算法或軟體程式辨識平面頭像內的臉部特徵，以形成一臉部特徵資料。具體來說，處理模組可以依據與影像辨識有關的演算法或軟體程式辨識平面頭像，以區別其中例如但不限於眉毛、五官以及臉型等具臉部特徵代表性的特定區域，再以複數個點排列出該些區域的輪廓。

接著，管理模組11擷取該些點為臉部特徵點，再將該些臉部特徵點組成或再與其他內容共同組成臉部特徵資料，便取得了臉部的特徵。臉部特徵點包括複數個臉部對位點。臉部對位點係預設於各臉部模型資料中，且實質上臉部對位點的排列會形成臉部模型的輪廓。

管理模組11存有一素體資料。素體係指具有部分人體形框或輪廓的模型，例如頭部模型，或本實施例之全身模型，素體資料可以包括完整的頭部、軀幹與四肢，頭部正面為臉部，臉部上具有眉毛、眼耳鼻口等五官。素體資料之建立可以由管理模組11取得包括臉部數據之人體數據資料，透過三維建模的方式來達成。

管理模組11可以主動外觀模型演算法(Active Appearance Model，簡稱AAM)分析平面頭像，並取得總共八十七個臉部特徵點。此八十七個臉部特徵點也具有註冊編號，且是與一組素體資料之特徵區特徵點相對應，以供將來進行調整素體臉部特徵使用。

為提升主動外觀模型演算法的功效，在使用之前亦可以先經過一組或一組以上的參考影像進行訓練。此外，為更進一步改善主動外觀模型演算法，在擷取臉部特徵點的過程中，亦可以同時搭配模型預測，以及YCbCr色彩空間中膚色範圍差異化之處理。

管理模組11可以在三維頭像產生之後，另外對三維頭像進行貼圖處理，以使三維頭像的資料內容增加頭髮、眼鏡、鬍子或甚至其他服飾配件。貼圖處理同樣可以透過對位點輔助的方式來達成。具體來說，三維頭像可以具有頭髮的對位點，而被選擇的頭髮模組上也具有對位點，管理模組11將前者與後者的各點建立對應關係，並儲存為一筆更新的三維頭像資料。當然，其他如眼鏡、鬍子等部分的貼圖處理亦可以照此方式進行。

擴增實境拍錄互動系統提供給使用者更多的拍攝、互動趣味，使用者可視其喜好，可以選擇與穿搭虛擬物件或與虛擬物件互動的三維構件。

管理模組11可預先儲存多數個三維構件資料，包括法官帽、法官服、鋼鐵服裝、小丑帽、小丑服裝、飛行帽、皇冠帽。

互動作用在於，使用者的手部撥開飛行帽的面罩鏡片時，螢幕畫面中的面罩鏡片跟著開啟。

互動作用在於，使用者的嘴打開時，可以有吐出彩虹海的造型。

如圖7及圖8所示，使用者2在操控完畢後，可經由操作模組12傳送輸出指令至管理模組11，以令圖像輸出模組15輸出動態虛擬影像，圖像輸出模組15係以照片、拼圖、明信片及貼紙中至少一者的方式列印輸出。本發明並無限定。

在一些實施例中，擴增實境拍錄互動系統1包含傳送模組17，例如USB，俾供使用者2的儲存裝置，如隨身碟插接於USB上，訊號連接以接收動態虛擬影像。使用者2的裝置亦可有線或無線接收擴增實境拍錄互動系統1的資料，使用者2的裝置例如但不限於智慧型手機、平板電腦、行動數位助理、具聯網功能之照相機或錄影機、穿戴式裝置、智慧家電或筆記型電腦。此外，擴增實境拍錄互動系統1的資料亦可傳輸至雲端伺服器18，使用者2的裝置均為可以下載並安裝行動應用程式(Mobile application，簡稱APP)的裝置，再從應用程式去下載擴增實境拍錄互動系統1的拍攝資料。

使用者2的裝置以智慧型手機為例說明，並以3G或4G行動通訊技術，或Wi-Fi等無線通訊的方式，透過網路與伺服器3通訊連接。

此外，在一實施例中，擴增實境拍錄互動系統1進一步包含一雲端伺服器18，接收管理模組11傳送的該動態虛擬影像，可作為動態虛擬影像的備份使用或是使用者2經由網際網路下載使用。

另外，在一實施例中，管理模組11還令顯示模組13顯示連結條碼(例如：QR Code)，供使用者2的掃描裝置，如手機，掃描連結條碼後自上述的雲端伺服器18下載動態虛擬影像。

擴增實境拍錄互動系統1還包含收費模組19，電性連接管理模組11，收費模組19用以收取金錢，以使使用人操作操作模組12，其中收費模組19是以實體錢幣，如紙鈔或硬幣，或以虛擬錢幣的方式收取金錢，例如以悠遊卡、信用卡等方式消費使用。

此外，在一實施例中，其中管理模組11還儲存有複數媒體影像，於未使用狀態時，管理模組11令顯示模組13顯示複數媒體影像。例如系統設置於機場上，在無人操作的情況下，顯示模組13顯示數則廣告，作為商業行銷使用。在一些實施例中，顯示模組13亦可顯示系統的使用說明影像。

在一實施例中，擴增實境拍錄互動系統1進一步包含運算模組21，運算模組21以統計使用者2的生理資訊、至少一虛擬情境A1及至少一虛擬物件A2的使用率中至少一者，對應生成統計資料，且傳送至管理模組11儲存。對於業者而言，上述統計資料有助於系統內部資料的更新以及促進商業交流。統計資料記載著如使用者2的性別，使用哪一個虛擬情境A1的機率高，或是使用哪一個虛擬物件A2的機率高等等資訊。