TW201640921A - 虛擬實境音訊系統與其中播放器、以及虛擬實境音訊的產生方法 - Google Patents

虛擬實境音訊系統與其中播放器、以及虛擬實境音訊的產生方法 Download PDF

Info

Publication number
TW201640921A
TW201640921A TW105112771A TW105112771A TW201640921A TW 201640921 A TW201640921 A TW 201640921A TW 105112771 A TW105112771 A TW 105112771A TW 105112771 A TW105112771 A TW 105112771A TW 201640921 A TW201640921 A TW 201640921A
Authority
TW
Taiwan
Prior art keywords
virtual reality
sound
right ear
channel
listener
Prior art date
Application number
TW105112771A
Other languages
English (en)
Inventor
陳雷
徐和生
李淳民
漢熙 唐
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Publication of TW201640921A publication Critical patent/TW201640921A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • H04S7/304For headphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/027Spatial or constructional arrangements of microphones, e.g. in dummy heads
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/033Headphones for stereophonic communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/04Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S1/00Two-channel systems
    • H04S1/007Two-channel systems in which the audio signals are in digital form
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/307Frequency adjustment, e.g. tone control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00Signal processing covered by H04R, not provided for in its groups
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/15Aspects of sound capture and related signal processing for recording or reproduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Abstract

一種虛擬實境音訊播放器,具有左耳以及右耳揚聲器、運動偵測模組以及處理器。左耳以及右耳揚聲器分別用於播放左耳、右耳聲音。運動偵測模組收集左耳、右耳揚聲器之聽者的運動資訊。基於該運動偵測模組偵測到的運動資訊、以及一麥克風陣列結構,處理器將多聲道音軌轉換為左耳以及右耳聲音。上述多聲道音軌是由組成該麥克風陣列結構的多個麥克風所提供。

Description

虛擬實境音訊系統與其中播放器、以及虛擬實境音訊的產生方法
本案係關於虛擬實境音效系統(virtual reality audio system)。
虛擬實境複製一種環境,令使用者模擬位於真實世界或想像世界的各地點、與該世界互動。虛擬實境人工創造感官體驗-如,聽覺。
虛擬實境音訊系統之模擬聚焦於藉由揚聲器或耳機為虛擬實境使用者提供真實聲音。如何提升聲音模擬的擬真度為本領域重要課題。
根據本案一種實施方式所實現的一虛擬實境音訊播放器具有左耳、右耳揚聲器、運動偵測模組以及處理器。左耳以及右耳揚聲器分別用於播放左耳、右耳聲音。運動偵測模組收集左耳、右耳揚聲器之聽者的運動資訊。基於該運動偵測模組偵測到的運動資訊、以及一麥克風陣列結構,處理器將多聲道音軌轉換為左耳以及右耳聲音。上述多聲道音軌是由組成該麥克風陣列結構的多個麥克風所提供。
根據本案一種實施方式所實現的一虛擬實境音訊系統包括前述虛擬實境音訊播放器以及至少三個麥克風。上述至少三個麥克風用於該虛擬實境音訊播放器的多聲道音軌錄製。
根據本案一種實施方式所實現的一虛擬實境音訊產生方法包括:使用左耳以及右耳揚聲器分別播放左耳、右耳聲音;收集左耳、右耳揚聲器之聽者的運動資訊;並且,基於上述運動資訊、以及一麥克風陣列結構,將多聲道音軌轉換為左耳以及右耳聲音,其中,上述多聲道音軌是由組成該麥克風陣列結構的多個麥克風所提供。
下文特舉實施例,並配合所附圖示,詳細說明本發明內容。
100‧‧‧虛擬實境音訊播放器
102‧‧‧左耳揚聲器
104‧‧‧右耳揚聲器
106‧‧‧運動偵測模組
108‧‧‧處理器
400‧‧‧虛擬實境音訊系統
402‧‧‧麥克風陣列
404‧‧‧儲存媒體
600‧‧‧手持裝置
S302...S310‧‧‧步驟
d‧‧‧距離
Pa、Pb以及Pc‧‧‧麥克風/多聲道音軌
X、Y以及Z‧‧‧座標軸
θ、Φ‧‧‧旋轉角度
第1圖圖解根據本案一種實施方式所實現的一虛擬實境音訊播放器100;第2A圖圖解相對垂直軸Z的一旋轉角度θ,可藉運動偵測模組106偵測獲得;第2B圖圖解相對水平軸X的一旋轉角度Φ,可藉運動偵測模組106偵測獲得;第3圖為流程圖,根據本案一種實施方式圖解虛擬實境音訊播放器100如何運作;第4圖根據本案一種實施方式圖解一虛擬實境音訊系統400,具有前述虛擬實境音訊播放器100、一麥克風陣列402 以及一儲存媒體404;第5A圖圖解一正三角形麥克風陣列,在三個端點包括三個麥克風Pa、Pb以及Pc;第5B圖為流程圖,說明虛擬實境音訊播放器100如何根據第5A圖正三角形麥克風陣列接收的多聲道音軌Pa、Pb以及Pc運作;以及第6圖圖解一手持裝置600,具有三個麥克風Pa、Pb以及Pc(安裝在手持裝置600上方)。
以下敘述列舉本發明的多種實施例。以下敘述介紹本發明的基本概念,且並非意圖限制本發明內容。實際發明範圍應依照申請專利範圍界定之。
第1圖圖解根據本案一種實施方式所實現的一虛擬實境音訊播放器100。虛擬實境音訊播放器100包括一左耳揚聲器102、一右耳揚聲器104、一運動偵測模組106以及一處理器108。左耳揚聲器102以及右耳揚聲器104分別用於播放左耳聲音Sl以及右耳聲音Sr。運動偵測模組106收集左耳揚聲器102以及右耳揚聲器104之聽者(即虛擬實境使用者)的運動資訊motion。基於運動偵測模組106偵測到的運動資訊motion、以及一麥克風陣列結構,處理器108將多聲道音軌S1、S2...Sn轉換為左耳聲音Sl以及右耳聲音Sr。多聲道音軌S1、S2...Sn係由組成該麥克風陣列結構的麥克風M1、M2...Mn提供。處理器108可根據方程式Sl(S1,S2...Sn,motion)計算左耳聲音Sl、且根據方程式Sr(S1,S2...Sn,motion)計算右耳聲音Sr。藉由方程式 Sl(S1,S2...Sn,motion)以及Sr(S1,S2...Sn,motion),左耳聲音Sl以及右耳聲音Sr的生成考量了虛擬實境使用者的運動資訊motion以及收集多聲道音軌S1、S2...Sn的麥克風M1、M2...Mn之麥克風陣列結構。
在一種實施方式中,處理器108產生左耳聲音Sl以及右耳聲音Sr以便模擬虛擬實境使用者的左耳以及右耳感知差異。在另一種實施方式中,處理器108產生左耳聲音Sl以及右耳聲音Sr以便模擬杜普勒效應(Doppler Effect)。在其他實施方式中,處理器108產生左耳聲音Sl以及右耳聲音Sr以便模擬左、右耳感知差異以及杜普勒效應。
為了模擬左、右耳感知差異或/以及杜普勒效應,運動偵測模組106可偵測虛擬實境使用者相對垂直軸或/以及水平軸的旋轉。第2A圖圖解相對垂直軸Z的一旋轉角度θ,可藉運動偵測模組106偵測獲得。第2B圖圖解相對水平軸X的一旋轉角度Φ,可藉運動偵測模組106偵測獲得。在一些實施例中,運動偵測模組106更偵測虛擬實境使用者活動的加速度,作為運動資訊motion。虛擬實境使用者的運動資訊(例如,運動偵測模組106偵測到的旋轉角度θ或/以及旋轉角度Φ或/以及加速度)可被持續地收集,以顯示虛擬實境使用者位置、並顯示虛擬實境使用者在虛擬環境(對應真實世界或想像世界)中如何活動,據此,左耳聲音Sl以及右耳聲音Sr各自有對應多聲道音軌S1、S2...Sn之權重參數,且係分開作權重參數調整獲得。
此段落揭露虛擬實境使用者的感知差異模擬。當運動偵測模組106偵測到的運動資訊motion顯示原先在虛擬實 境環境中面向前方的虛擬實境使用者轉向虛擬實境環境的右側或左側,處理器108逐步調降右耳聲道音軌的權重參數、且逐步提升左耳聲道音軌的權重參數以產生右耳聲音Sr,並逐步調降左耳聲道音軌的權重參數、且逐步提升右耳聲道音軌的權重參數以產生左耳聲音Sl。所述右耳聲道音軌係多聲道音軌S1、S2...Sn其中之一,對應虛擬實境環境的右側。所述左耳聲道音軌係多聲道音軌S1、S2...Sn其中之一,對應虛擬實境環境的左側。
本段落討論杜普勒效應的模擬。運動偵測模組106偵測到的運動資訊motion顯示虛擬實境使用者逐漸接近虛擬實境環境中的一音源時,處理器108可逐步提高左耳聲音Sl以及右耳聲音Sr的頻率。此外,運動偵測模組106偵測到的運動資訊motion顯示虛擬實境使用者逐漸遠離虛擬實境環境中的該音源時,處理器108可逐步降低左耳聲音Sl以及右耳聲音Sr的頻率。
第3圖為流程圖,根據本案一種實施方式圖解虛擬實境音訊播放器100如何運作。步驟S302,虛擬實境使用者的運動資訊由運動偵測模組106收集,偵測內容包括相對垂直軸Z的旋轉角度θ、相對水平軸X的旋轉角度Φ、以及虛擬實境使用者的加速度。步驟S304,基於麥克風陣列M1、M2...Mn的結構以及虛擬實境使用者的轉向(例如,旋轉角度θ以及Φ),處理器108轉換多聲道音軌S1、S2...Sn為左耳聲音Sl’以及右耳聲音Sr’。左耳聲音Sl’以及右耳聲音Sr’的產生考量了虛擬實境使用者的左、右耳感知差異。除了麥克風陣列M1、M2...Mn的結構 以及旋轉角度θ以及Φ,處理器108更在步驟S306考量了虛擬實境使用者的加速度,以分別轉換左耳以及右耳聲音Sl’以及Sr’為Sl以及Sr,以便模擬杜普勒效應。例如,運動資訊motion顯示虛擬實境使用者逐漸接近虛擬實境環境中的一音源時,處理器108可將左耳聲音Sl’以及右耳聲音Sr’的頻率逐步提升以產生左耳聲音Sl以及右耳聲音Sr;運動資訊motion顯示虛擬實境使用者逐漸遠離虛擬實境環境中的該音源時,處理器108可將左耳聲音Sl’以及右耳聲音Sr’的頻率逐步降低以產生左耳聲音Sl以及右耳聲音Sr。步驟S308,左耳揚聲器102播放左耳聲音Sl,且右耳揚聲器104播放右耳聲音Sr。步驟S310檢查虛擬實境使用者是否變換其動作(自運動資訊motion(例如,運動偵測模組106偵測到的虛擬實境使用者之旋轉角度θ以及Φ以及加速度)觀察之)。若虛擬實境使用者的動作發生變化,步驟S302再次執行,以確認新的旋轉角度θ以及Φ以及新的加速度,繼而根據新的運動資訊motion進行步驟S304至S308。若虛擬實境使用者並未改變其動作,流程停留在步驟S308。在其他實施方式中,虛擬實境使用者的旋轉角度θ以及Φ以及加速度(即,運動參數)可能非全數考量於左耳聲音Sl以及右耳聲音Sr的產生過程中。簡化版本允許在左耳聲音Sl以及右耳聲音Sr的產生過程中僅考量部分的運動參數。運動偵測模組106可包括重力感測器(G sensor)、羅盤以及加速度器,但並不限定於此。
第4圖根據本案一種實施方式圖解一虛擬實境音訊系統400,具有前述虛擬實境音訊播放器100、一麥克風陣列402以及一儲存媒體404。麥克風陣列402具有至少三個麥克 風,用於虛擬實境音訊播放器100所需的多聲道音軌之錄製。儲存媒體402儲存錄製的多聲道音軌,由虛擬實境音訊播放器100讀取。
第5A圖圖解一正三角形麥克風陣列,在三個端點包括三個麥克風Pa、Pb以及Pc。麥克風Pa、Pb以及Pc接收的三個音軌同樣命名為Pa、Pb以及Pc。任兩個麥克風之間的距離為d,可設計為343(m/s)/(2*fc(Hz))。對應16KHz的空間混疊(space aliasing of 16KHz,即fc=16KHz),兩麥克風距離d可為1cm(求自343(m/s)/(2*16K(Hz)))。麥克風Pa在虛擬實境世界中視為前麥克風,軸Y指向前方。
第5B圖為流程圖,說明虛擬實境音訊播放器100如何根據第5A圖正三角形麥克風陣列接收的多聲道音軌Pa、Pb以及Pc運作。步驟S502偵測虛擬實境使用者相對垂直軸Z的旋轉角度θ。步驟S504,處理器108對應偵測到的旋轉角度θ計算出權重係數A、B以及C,並計算A*Pa-B*Pb+C*Pc作為左耳聲音Sl、A*Pa+B*Pb-C*Pc作為右耳聲音Sr。步驟S506,左耳揚聲器102播放左耳聲音Sl、且右耳揚聲器104播放右耳聲音Sr。步驟S508檢查旋轉角度θ是否變化。若旋轉角度θ有變化,步驟S502再次執行,確認新的旋轉角度θ,繼而根據此新的旋轉角度θ進行步驟S504至S506。若虛擬實境使用者沒有變化其旋轉角度θ,流程停留在步驟S506。一種實施方式中,音軌Pb可視為右耳音軌,音軌Pc可視為左耳音軌。若原先面向前方的虛擬實境使用者相對軸Z轉向右側或左側,權重參數B以及C可能削減。
第6圖圖解一手持裝置600,具有三個麥克風Pa、Pb以及Pc(安裝在手持裝置600上方)。
雖然本發明已以較佳實施例揭露如上,然其並非用以限定本發明,任何熟悉此項技藝者,在不脫離本發明之精神和範圍內,當可做些許更動與潤飾,因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。
100‧‧‧虛擬實境音訊播放器
102‧‧‧左耳揚聲器
104‧‧‧右耳揚聲器
106‧‧‧運動偵測模組
108‧‧‧處理器

Claims (16)

  1. 一種虛擬實境音訊播放器,包括:一左耳揚聲器以及一右耳揚聲器,分別播放左耳聲音以及右耳聲音;一運動偵測模組,收集上述左耳揚聲器以及右耳揚聲器的一聽者的運動資訊;以及一處理器,基於該運動偵測模組偵測到的上述運動資訊、以及一麥克風陣列結構,將多聲道音軌轉換為上述左耳聲音以及右耳聲音,其中上述多聲道音軌是由組成該麥克風陣列結構的複數個麥克風提供。
  2. 如申請專利範圍第1項所述之虛擬實境音訊播放器,其中:該處理器產生上述左耳聲音以及右耳聲音以便模擬該聽者左耳以及右耳的感知差異。
  3. 如申請專利範圍第2項所述之虛擬實境音訊播放器,其中:該運動偵測模組偵測到的上述運動資訊顯示原先在一虛擬實境環境中面向前方的該聽者正轉向該虛擬實境環境的右側或左側時,該處理器遞減一右耳聲道音軌的權重參數並遞增一左耳聲道音軌的權重參數以產生該右耳聲音,並遞減該左耳聲道音軌的權重參數並遞增該右耳聲道音軌的權重參數以產生該左耳聲音;該右耳聲道音軌為上述多聲道音軌中對應該虛擬實境環境之右側者;以及該左耳聲道音軌為上述多聲道音軌中對應該虛擬實境環境 之左側者。
  4. 如申請專利範圍第3項所述之虛擬實境音訊播放器,其中:該運動偵測模組偵測該聽者相對該虛擬實境環境中一垂直軸的旋轉角度為上述運動資訊。
  5. 如申請專利範圍第1項所述之虛擬實境音訊播放器,其中:該處理器產生上述左耳聲音以及右耳聲音以便模擬杜普勒效應。
  6. 如申請專利範圍第5項所述之虛擬實境音訊播放器,其中:該運動偵測模組偵測到的上述運動資訊顯示該聽者正在接近一虛擬實境環境的一音源時,該處理器遞升該左耳聲音以及該右耳聲音的頻率;以及該運動偵測模組偵測到的上述運動資訊顯示該聽者正在遠離該虛擬實境環境的該音源時,該處理器遞減該左耳聲音以及該右耳聲音的頻率。
  7. 如申請專利範圍第6項所述之虛擬實境音訊播放器,其中:該運動偵測模組偵測該聽者相對該虛擬實境環境中一垂直軸的旋轉角度、該聽者相對該虛擬實境環境中一水平軸的旋轉角度、以及該聽者的一加速度以便形成上述運動資訊。
  8. 一種虛擬實境音訊系統,包括:如申請專利範圍第1項所述之虛擬實境音效播放器;以及為該虛擬實境音訊播放器錄製上述多聲道音軌的至少三個麥克風。
  9. 如申請專利範圍第8項所述之虛擬實境音訊系統,更包括:一儲存媒體,儲存上述多聲道音軌,供該虛擬實境播放器讀 取。
  10. 一種虛擬實境音訊產生方法,包括:使用一左耳揚聲器以及一右耳揚聲器分別播放左耳聲音以及右耳聲音;收集上述左耳揚聲器以及右耳揚聲器的一聽者的運動資訊;以及基於上述運動資訊、以及一麥克風陣列結構,將多聲道音軌轉換為上述左耳聲音以及右耳聲音,其中上述多聲道音軌是由組成該麥克風陣列結構的複數個麥克風提供。
  11. 如申請專利範圍第10項所述之虛擬實境音訊產生方法,其中:產生上述左耳聲音以及右耳聲音以便模擬該聽者左耳以及右耳的感知差異。
  12. 如申請專利範圍第11項所述之虛擬實境音訊產生方法,其中:當上述運動資訊顯示原先在一虛擬實境環境中面向前方的該聽者正轉向該虛擬實境環境的右側或左側時,遞減一右耳聲道音軌的權重參數、並遞增一左耳聲道音軌的權重參數以產生該右耳聲音,並遞減該左耳聲道音軌的權重參數並遞增該右耳聲道音軌的權重參數以產生該左耳聲音;該右耳聲道音軌為上述多聲道音軌中對應該虛擬實境環境之右側者;以及該左耳聲道音軌為上述多聲道音軌中對應該虛擬實境環境 之左側者。
  13. 如申請專利範圍第12項所述之虛擬實境音訊產生方法,其中:該聽者相對該虛擬實境環境中一垂直軸的旋轉角度經偵測為上述運動資訊。
  14. 如申請專利範圍第10項所述之虛擬實境音訊產生方法,其中:產生上述左耳聲音以及右耳聲音以便模擬杜普勒效應。
  15. 如申請專利範圍第14項所述之虛擬實境音訊產生方法,其中:當上述運動資訊顯示該聽者正在接近一虛擬實境環境的一音源時,遞升該左耳聲音以及該右耳聲音的頻率;以及當上述運動資訊顯示該聽者正在遠離該虛擬實境環境的該音源時,遞減該左耳聲音以及該右耳聲音的頻率。
  16. 如申請專利範圍第15項所述之虛擬實境音訊產生方法,其中:該聽者相對該虛擬實境環境中一垂直軸的旋轉角度、該聽者相對該虛擬實境環境中一水平軸的旋轉角度、以及該聽者的一加速度經偵測以便形成上述運動資訊。
TW105112771A 2015-05-08 2016-04-25 虛擬實境音訊系統與其中播放器、以及虛擬實境音訊的產生方法 TW201640921A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201562158919P 2015-05-08 2015-05-08
US15/134,662 US20160330563A1 (en) 2015-05-08 2016-04-21 Virtual reality audio system and the player thereof, and method for generation of virtual reality audio

Publications (1)

Publication Number Publication Date
TW201640921A true TW201640921A (zh) 2016-11-16

Family

ID=56008461

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105112771A TW201640921A (zh) 2015-05-08 2016-04-25 虛擬實境音訊系統與其中播放器、以及虛擬實境音訊的產生方法

Country Status (4)

Country Link
US (1) US20160330563A1 (zh)
EP (1) EP3091757B1 (zh)
CN (1) CN106131745A (zh)
TW (1) TW201640921A (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10158963B2 (en) * 2017-01-30 2018-12-18 Google Llc Ambisonic audio with non-head tracked stereo based on head position and time
US11451689B2 (en) 2017-04-09 2022-09-20 Insoundz Ltd. System and method for matching audio content to virtual reality visual content
US9843883B1 (en) * 2017-05-12 2017-12-12 QoSound, Inc. Source independent sound field rotation for virtual and augmented reality applications
CN108279860B (zh) * 2017-06-14 2021-05-14 深圳市佳创视讯技术股份有限公司 一种提升虚拟现实临场音效体验的方法及系统
KR102616673B1 (ko) 2017-12-18 2023-12-27 돌비 인터네셔널 에이비 가상 현실 환경에서 청취 위치 사이의 글로벌 전환을 처리하기 위한 방법 및 시스템
US11750745B2 (en) 2020-11-18 2023-09-05 Kelly Properties, Llc Processing and distribution of audio signals in a multi-party conferencing environment
DE202022101069U1 (de) 2022-02-24 2022-03-23 Pankaj Agarwal Intelligentes Geräuscherkennungssystem auf der Grundlage der Verarbeitung mehrerer Geräusche durch künstliche Intelligenz

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5719944A (en) * 1996-08-02 1998-02-17 Lucent Technologies Inc. System and method for creating a doppler effect
IL121155A (en) * 1997-06-24 2000-12-06 Be4 Ltd Headphone assembly and a method for simulating an artificial sound environment
US6409599B1 (en) * 1999-07-19 2002-06-25 Ham On Rye Technologies, Inc. Interactive virtual reality performance theater entertainment system
US7084874B2 (en) * 2000-12-26 2006-08-01 Kurzweil Ainetworks, Inc. Virtual reality presentation
US7333622B2 (en) * 2002-10-18 2008-02-19 The Regents Of The University Of California Dynamic binaural sound capture and reproduction
US9237393B2 (en) * 2010-11-05 2016-01-12 Sony Corporation Headset with accelerometers to determine direction and movements of user head and method
JP2014060647A (ja) * 2012-09-19 2014-04-03 Sony Corp 情報処理システム及びプログラム
US9467792B2 (en) * 2013-07-19 2016-10-11 Morrow Labs Llc Method for processing of sound signals
CN103488291B (zh) * 2013-09-09 2017-05-24 北京诺亦腾科技有限公司 一种基于运动捕捉的浸入式虚拟现实系统
US20170109131A1 (en) * 2015-10-20 2017-04-20 Bragi GmbH Earpiece 3D Sound Localization Using Mixed Sensor Array for Virtual Reality System and Method

Also Published As

Publication number Publication date
US20160330563A1 (en) 2016-11-10
CN106131745A (zh) 2016-11-16
EP3091757B1 (en) 2017-11-08
EP3091757A1 (en) 2016-11-09

Similar Documents

Publication Publication Date Title
TW201640921A (zh) 虛擬實境音訊系統與其中播放器、以及虛擬實境音訊的產生方法
JP7275227B2 (ja) 複合現実デバイスにおける仮想および実オブジェクトの記録
US11115739B2 (en) Capturing sound
US10129681B2 (en) Calibrating listening devices
US10251012B2 (en) System and method for realistic rotation of stereo or binaural audio
WO2018196469A1 (zh) 声场的音频数据的处理方法及装置
JP2019527956A (ja) 仮想、拡張、および複合現実
US9420392B2 (en) Method for operating a virtual reality system and virtual reality system
CN107277736B (zh) 模拟系统、声音处理方法及信息存储介质
JP6055657B2 (ja) ゲームシステム、ゲーム処理制御方法、ゲーム装置、および、ゲームプログラム
JP6246922B2 (ja) 音響信号処理方法
JP2010147529A (ja) 情報処理システムおよび情報処理方法
JP2022538714A (ja) 人工現実環境のためのオーディオシステム
JP2017500989A (ja) 可変音声パラメータ設定
EP3683794B1 (en) Audio processing
JP2021513261A (ja) サラウンドサウンドの定位を改善する方法
JP7476930B2 (ja) 振動体感装置
Martens et al. The'Phantom Walker'illusion: Evidence for the dominance of dynamic interaural over spectral directional cues during walking
US11589181B1 (en) System and method for realistic rotation of stereo or binaural audio
JP6587047B2 (ja) 臨場感伝達システムおよび臨場感再現装置
JP2018152834A (ja) 仮想聴覚環境において音声信号出力を制御する方法及び装置
WO2023173285A1 (zh) 音频处理方法、装置、电子设备及计算机可读存储介质
JP2021527353A (ja) 低周波数チャネル間コヒーレンス制御
KR102534802B1 (ko) 멀티-채널 바이노럴 기록 및 동적 재생
KR102127179B1 (ko) 플렉서블 렌더링을 이용한 가상 현실 기반 음향 시뮬레이션 시스템