TWM552222U - 全景音效系統 - Google Patents

Description

全景音效系統

本創作係關於一種全景音效系統，尤指利用於適配全景影片中部分影像來產生播放聲音的全景音效系統。

全景影片近年開始盛行，無論是影片分享網站YouTube或是社群網站臉書Facebook上，常看到標記360度的全景影片，初映入眼簾只有人類視角範圍的影像，觀看者只要以手指撥動智慧手機的畫面，或是以滑鼠游標觸動電腦的畫面，即可改變視線方向，朝向全景中另一個視線方向來顯示影像，讓觀看者從畫面中逐步看到攝影機周圍的影像，這個畫面中的影像，即為全景影片中部分影像。

人類單眼的水平視角範圍大約可達156度，雙眼的水平視角範圍大約可達188度，因此，前述部分影像的範圍也大約就是全景360度中的188度，以目前的全景影片來說，雖然已具移動部分影像畫面來逐步瀏覽全景的功能，但是無論轉到哪一個視角範圍，觀看者透過智慧手機或是電腦所收到的聲音，都是一樣的，並不具有方向性，因此，對於身歷其境的感受，就還差那麼一點點。

因此，本創作的主要目的在於提供一種全景音效系統，能提高身歷其境的感受以解決上述問題。

本創作之目的在提供一種全景音效系統，能夠利用於全景影片中，針對部分影像來適配產生播放聲音，使觀看者如轉頭般移動全景影片中的部分影像時，環境聲音也會有方向性的改變大小，藉以提升身歷其境的感受。

本創作係關於一種全景音效系統，用於適配全景影片之部分影像，產生播放聲音。全景音效系統包含全景多媒體擷取裝置、伺服裝置、以及終端裝置。

全景多媒體擷取裝置，包含全景攝影機、及複數個收音裝置。全景攝影機擷取全景影片以產生全景影片資料，其中全景影片資料對應全景影片的複數個位置，具有複數個位置資訊。

該等收音裝置固定於全景攝影機，該等收音裝置對應全景影片的該等位置亦對應有位置資訊，該等收音裝置並收集該等位置所對應的聲音以產生複數個聲音資料。

伺服裝置透過網路耦接全景多媒體擷取裝置，用於接收來自全景攝影機的全景影片資料，以及接收來自該等收音裝置的該等聲音資料。伺服裝置更包含音訊協調模組，音訊協調模組用於比對方向訊息與方向訊息所相鄰之至少一收音裝置的位置資訊間的距離，進而匹配該等收音裝置的該等聲音資料以產生播放聲音資訊。

終端裝置係通訊連接於伺服裝置，包含輸入裝置、顯示裝置、及揚聲裝置，顯示裝置係接收全景影片資料以顯示全景影片之部分影像，輸入裝置用於移動顯示裝置所顯示之全景影片以改變所述之部分影像，所述之部分影像係對應該等位置資訊以產生方向訊息，其中方向訊息傳送至伺服裝置後，將音訊協調模組所對應產生的播放聲音資訊傳回終端裝置，並由揚聲裝置對應播放聲音資訊產生播放聲音。

如前述之全景音效系統，所述之部分影像對應該等位置資訊以產生方向訊息，係以部分影像中心位置的位置資訊為依據，朝左向以及右向分別延伸85度~125度視角，並以其範圍所對應的該等位置資訊做為方向訊息。

所述方向訊息所相鄰之至少一收音裝置，係為方向訊息涵蓋範圍中的至少一收音裝置。所述音訊協調模組比對方向訊息與方向訊息所相鄰之至少一收音裝置的位置資訊間的距離，係以方向訊息中心位置的位置資訊與方向訊息涵蓋範圍內收音裝置的位置資訊，以其差值作為距離。

所述匹配該等收音裝置的該等聲音資料，係根據所述的距離，以反比調整其音量值。此外，超過方向訊息範圍所在的收音裝置，皆以最低音量值來揚升。

因此，利用本創作所提供一種全景音效系統，藉由具有複數個收音裝置的全景多媒體擷取裝置，以及藉由音訊協調模組來產生播放聲音資訊，使全景音效系統能夠利用於全景影片中，針對部分影像來適配產生播放聲音，使觀看者如轉頭般移動全景影片中的部分影像時，環境聲音也會有方向性的改變大小，藉以提升身歷其境的感受。

關於本創作之優點與精神可以藉由以下的創作詳述及所附圖式得到進一步的瞭解。

10‧‧‧全景音效系統

30‧‧‧全景多媒體擷取裝置

3002‧‧‧全景攝影機

3004‧‧‧收音裝置

32‧‧‧伺服裝置

3202‧‧‧音訊協調模組

34‧‧‧終端裝置

3402‧‧‧輸入裝置

3404‧‧‧顯示裝置

3406‧‧‧揚聲裝置

40‧‧‧全景影片

42‧‧‧部分影像

50‧‧‧位置資訊

圖1係本創作全景音效系統之關係示意圖；以及圖2係本創作全景影片、部分影像、收音裝置、及相關位置資訊之示意圖。

請參閱圖1，圖1係本創作全景音效系統10之關係示意圖。本創作係關於一種全景音效系統10，用於適配全景影片之部分影像，產生與部分影像具有相同方向感受的播放聲音。全景音效系統10包含全景多媒體擷取裝置30、伺服裝置32、以及終端裝置34。

全景多媒體擷取裝置30包含全景攝影機3002、及複數個收音裝置3004。伺服裝置32透過網路耦接全景多媒體擷取裝置30，包含音訊協調模組3202。終端裝置34通訊連接於伺服裝置32，包含輸入裝置3402、顯示裝置3404、及揚聲裝置3406。

全景攝影機3002擷取全景影片以產生全景影片資料，其中全景影片資料對應全景影片的複數個位置，具有複數個位置資訊。

複數個收音裝置3004固定於全景攝影機3002，以全景的範圍均佈該等收音裝置3004為佳，收音裝置3004可例如為麥克風。該等收音裝置3004 對應全景影片的該等位置亦對應有位置資訊，該等收音裝置3004並收集該等位置所對應的聲音以產生複數個聲音資料。

伺服裝置32透過網路與全景多媒體擷取裝置30的耦接，接收來自全景攝影機3002的全景影片資料，以及接收來自該等收音裝置3004的該等聲音資料。

終端裝置34顯示裝置3404接收全景影片資料以顯示全景影片之部分影像，這裡的部分影像就如同人類視角範圍的影像，只是360度全景影片中大約180度視角範圍的部分影像。輸入裝置3402用於移動顯示裝置3404所顯示之全景影片以改變所述之部分影像，使顯示裝置3404中部分影像的改變猶如人轉動頭部改變視角的效果一般。所述之部分影像會對應該等位置資訊以產生方向訊息，這個方向訊息就代表部分影像在全景影片中的朝向。

其中，方向訊息傳送至伺服裝置32後，音訊協調模組3202會比對方向訊息與方向訊息所相鄰之至少一收音裝置3004的位置資訊間的距離，進而匹配該等收音裝置3004的該等聲音資料以產生播放聲音資訊。後續，將音訊協調模組3202所對應產生的播放聲音資訊傳回終端裝置34，並由揚聲裝置3406對應播放聲音資訊產生播放聲音，此播放聲音即可使終端裝置34的觀看者觀看全景影片的同時，聽到與視角相同方向的聲音，而提高身歷其境的感受。

如前述之全景音效系統10，所述之部分影像對應該等位置資訊以產生方向訊息，係可以以部分影像中心位置的位置資訊為依據，朝左向以及右向分別延伸85度~125度視角，並以其範圍所對應的該等位置資訊做為方向訊息。

所述方向訊息所相鄰之至少一收音裝置3004，係為方向訊息涵蓋範圍中的至少一收音裝置3004。所述音訊協調模組3202比對方向訊息與方向訊息所相鄰之至少一收音裝置3004的位置資訊間的距離，係以方向訊息中心位置的位置資訊與方向訊息涵蓋範圍內收音裝置3004的位置資訊，以其差值作為距離。

所述匹配該等收音裝置3004的該等聲音資料，係根據所述的距離，以反比調整其音量值。此外，超過方向訊息範圍所在的收音裝置3004，皆可以最低音量值來揚升。

舉例說明，配合圖1請參閱圖2，圖2係本創作全景影片40、部分影像42、收音裝置3004、及相關位置資訊50之示意圖。此例中為全景範圍中均佈6顆收音裝置3004，在全景定應為360度的狀況之下，等於每一顆收音裝置3004主要負責60度角的收音範圍。

所述的全景此例中為水平解析具有3000畫素單位，因此，6顆收音裝置3004所對應的位置資訊50自左而右，則分別為500畫素單位、1000畫素單位、1500畫素單位、2000畫素單位、2500畫素單位、3000畫素單位的位置資訊50。

假設此時，所述方向訊息代表180度視角的部分影像42，此180度的部分影像42視角範圍目前落在1200畫素單位至2700畫素單位的範圍，此範圍包含了位在1500畫素單位、2000畫素單位、及2500畫素單位第3顆到第5顆等3顆收音裝置3004。

因此，部分影像42中心位置的位置資訊50為在1950畫素單位的位置，3顆收音裝置3004與中心位置的差值分別為450、-50、-550，作為距離分別為450單位、50單位、550單位。

舉例，此六顆收音裝置3004假設原始最大音量值皆為100單位，實際收音的音量值分別為30、40、35、38、42、36。以反比調整其音量值，此三顆收音裝置3004所對應的音量值分別被修正為35*((450+50+550-450)/(450+50+550))=20，38*((450+50+550-50)/(450+50+550))=36.2，42*((450+50+550-550)/(450+50+550))=20。

超過方向訊息範圍所在的收音裝置3004，第1顆以及第5顆、第6顆收音裝置3004以最低音量值來揚升，前述的最低比例為((450+50+550-550)/(450+50+550))=0.5，所以第1顆以及第5顆、第6顆收音裝置3004需以此最低比例之下來調整音量值，假如是打6折調整，則第1顆以及第5顆、第6顆收音裝置3004的音量值則分別為30*0.5*0.6=9，40*0.5*0.6=12，36*0.5*0.6=10.8。

所以，在本創作全景音效系統10的調整之下，六顆收音裝置3004的六個聲音資料，於終端裝置34的揚聲裝置3406，會分別以新的音量值適配成一組新的播放聲音資訊產生播放聲音，此即最能回應觀看者所見全景影片40中部分影像42所應該回應的聲音，彷彿觀看者視角所回應出的實際環境聲音，藉此才能提高觀看者身歷其境的感受。

因此，利用本創作所提供一種全景音效系統10，藉由具有複數個收音裝置3004的全景多媒體擷取裝置30，以及藉由音訊協調模組3202來產生播 放聲音資訊，使全景音效系統10能夠利用於全景影片40中，針對部分影像42來適配產生播放聲音，使觀看者如轉頭般移動全景影片40中的部分影像42時，環境聲音也會有方向性的改變大小，藉以提升身歷其境的感受。

藉由以上較佳具體實施例之詳述，係希望能更加清楚描述本創作之特徵與精神，而並非以上述所揭露的較佳具體實施例來對本創作之範疇加以限制。相反地，其目的是希望能涵蓋各種改變及具相等性的安排於本創作所欲申請之專利範圍的範疇內。

10‧‧‧全景音效系統

30‧‧‧全景多媒體擷取裝置

3002‧‧‧全景攝影機

3004‧‧‧收音裝置

32‧‧‧伺服裝置

3202‧‧‧音訊協調模組

34‧‧‧終端裝置

3402‧‧‧輸入裝置

3404‧‧‧顯示裝置

3406‧‧‧揚聲裝置

Claims (4)

1. 一種全景音效系統，用於適配一全景影片之部分影像，產生一播放聲音，該全景音效系統包含：一全景多媒體擷取裝置，包含一全景攝影機，擷取該全景影片以產生一全景影片資料，其中該全景影片資料對應該全景影片的複數個位置，具有複數個位置資訊，複數個收音裝置，固定於該全景攝影機，該等收音裝置對應該全景影片的該等位置亦對應有該位置資訊，該等收音裝置並收集該等位置所對應的聲音以產生複數個聲音資料；一伺服裝置，透過網路耦接該全景多媒體擷取裝置，用於接收來自該全景攝影機的該全景影片資料，以及接收來自該等收音裝置的該等聲音資料，該伺服裝置更包含一音訊協調模組，該音訊協調模組用於比對一方向訊息與該方向訊息所相鄰之至少一收音裝置的位置資訊間的距離，進而匹配該等收音裝置的該等聲音資料以產生一播放聲音資訊；以及一終端裝置，係通訊連接於該伺服裝置，包含一輸入裝置、一顯示裝置、及一揚聲裝置，該顯示裝置係接收該全景影片資料以顯示該全景影片之部分影像，該輸入裝置用於移動該顯示裝置所顯示之全景影片以改變所述之部分影像，所述之部分影像係對應該等位置資訊以產生該方向訊息，其中該方向訊息傳送至該伺服裝置後，將該音訊協調模組所對 應產生的播放聲音資訊傳回該終端裝置，並由該揚聲裝置對應該播放聲音資訊產生該播放聲音。
2. 如申請專利範圍第1項所述之全景音效系統，所述之部分影像對應該等位置資訊以產生該方向訊息，係以該部分影像中心位置的位置資訊為依據，朝左向以及右向分別延伸85度~125度視角，並以其範圍所對應的該等位置資訊做為該方向訊息，所述該方向訊息所相鄰之至少一收音裝置，係為該方向訊息涵蓋範圍中的至少一收音裝置，所述該音訊協調模組比對該方向訊息與該方向訊息所相鄰之至少一收音裝置的位置資訊間的距離，係以該方向訊息中心位置的位置資訊與該方向訊息涵蓋範圍內該收音裝置的位置資訊，以其差值作為距離。
3. 如申請專利範圍第2項所述之全景音效系統，所述匹配該等收音裝置的該等聲音資料，係根據所述的距離，以反比調整其音量值。
4. 如申請專利範圍第3項所述之全景音效系統，其中超過該方向訊息範圍所在的該收音裝置，皆以最低音量值來揚升。