JPWO2019241754A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2019241754A5
JPWO2019241754A5 JP2020569075A JP2020569075A JPWO2019241754A5 JP WO2019241754 A5 JPWO2019241754 A5 JP WO2019241754A5 JP 2020569075 A JP2020569075 A JP 2020569075A JP 2020569075 A JP2020569075 A JP 2020569075A JP WO2019241754 A5 JPWO2019241754 A5 JP WO2019241754A5
Authority
JP
Japan
Prior art keywords
input signal
rip
correction factor
reverberation
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020569075A
Other languages
English (en)
Other versions
JP2021527360A (ja
JP7478100B2 (ja
Publication date
Application filed filed Critical
Priority claimed from PCT/US2019/037384 external-priority patent/WO2019241754A1/en
Publication of JP2021527360A publication Critical patent/JP2021527360A/ja
Publication of JPWO2019241754A5 publication Critical patent/JPWO2019241754A5/ja
Priority to JP2024039810A priority Critical patent/JP2024069464A/ja
Application granted granted Critical
Publication of JP7478100B2 publication Critical patent/JP7478100B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

いくつかの実施形態では、RIGは、RG値を入力信号に適用するように構成される、反響利得(RG)を含むことができる。いくつかの実施形態では、RIGは、RE補正係数をRGからの信号に適用するように構成される、RECを含むことができる。
本発明は、例えば、以下を提供する。
(項目1)
オーディオ信号をレンダリングするための方法であって、前記方法は、
入力信号を受信することであって、前記入力信号は、第1の部分と、第2の部分とを含む、ことと、
反響処理システムを使用することにより
反響初期利得(RIG)値を前記入力信号の第1の部分に適用することと、
反響初期パワー(RIP)補正係数を前記入力信号の第1の部分に適用することであって、前記RIP補正係数は、前記RIG値が、適用された後に適用される、ことと、
前記入力信号の第1の部分内に反響効果を導入することと
を行うことと、
直接処理システムを使用することにより、
遅延を前記入力信号の第2の部分の中に導入することと、
利得を前記入力信号の第2の部分に適用することと
を行うことと、
前記反響処理システムからの前記入力信号の第1の部分および前記直接処理システムからの前記入力信号の第2の部分を組み合わせることと、
前記入力信号の組み合わせられた第1および第2の部分を出力信号として出力することであって、前記出力信号は、前記オーディオ信号である、ことと
を含む、方法。
(項目2)
前記RIP補正係数を計算することであって、前記RIP補正係数は、RIP補正器によって、計算され、前記入力信号の第1の部分に適用される、こと
をさらに含み、前記RIP補正係数は、前記RIP補正器から出力される信号が、1.0に正規化されるように計算される、項目1に記載の方法。
(項目3)
前記RIP補正係数は、リバーブレータトポロジ、遅延ユニットの数および持続時間、接続利得、およびフィルタパラメータのうちの1つ以上のものに依存する、項目1に記載の方法。
(項目4)
前記RIP補正係数は、反響インパルス応答のRMSパワーに等しい、項目1に記載の方法。
(項目5)
前記入力信号の第1の部分内の前記反響効果の導入は、1つ以上の周波数をフィルタ処理して取り除くことを含む、項目1に記載の方法。
(項目6)
前記反響効果の導入は、前記入力信号の第1の部分の位相を変化させることを含む、項目1に記載の方法。
(項目7)
前記反響効果の導入は、リバーブレータトポロジを選択し、内部リバーブレータパラメータを設定することを含む、項目1に記載の方法。
(項目8)
前記RIG値は、1.0に等しく、前記方法はさらに、前記反響処理システムのRIPが、1.0に等しいように、前記RIP補正係数を計算することを含む、項目1に記載の方法。
(項目9)
反響時間を無限大に設定することと、
リバーブレータインパルス応答を記録することと、
反響RMS振幅を測定することと
によって、前記RIP補正係数を計算すること
をさらに含み、
前記RIP補正係数は、前記反響RMS振幅の逆数に関連する、項目1に記載の方法。
(項目10)
反響時間を有限値に設定することと、
リバーブレータインパルス応答を記録することと、
反響RMS振幅消滅曲線を導出することと、
放出の時間におけるRMS振幅を決定することと
によって、前記RIP補正係数を計算すること
をさらに含み、
前記RIP補正係数は、前記反響RMS振幅の逆数に関連する、項目1に記載の方法。
(項目11)
前記RIG値の適用は、
反響利得(RG)値を前記入力信号の第1の部分に適用することと、
反響エネルギー(RE)補正係数を前記入力信号の第1の部分に適用することであって、前記RE補正係数は、前記RG値が、適用された後に適用される、ことと
を含む、項目1に記載の方法。
(項目12)
前記RE補正係数を計算することであって、前記RE補正係数は、RE補正器によって、計算され、前記入力信号の第1の部分に適用される、こと
をさらに含み、前記RE補正器は、前記RE補正から出力される信号が、1.0に正規化されるように計算される、項目11に記載の方法。
(項目13)
前記RIG値を計算することであって、前記RIG値は、前記RG値を前記RE補正係数で乗算したものに等しい、こと
をさらに含む、項目11に記載の方法。
(項目14)
前記反響効果は、前記RIP補正係数が、適用された後に導入される、項目1に記載の方法。
(項目15)
システムであって、
オーディオ信号をユーザに提供するように構成されるウェアラブル頭部デバイスと、
前記オーディオ信号をレンダリングするように構成される回路であって、前記回路は、
反響処理システムであって、
RIG値を入力信号の第1の部分に適用するように構成される反響初期利得(RIG)と、
RIP補正係数を前記RIGからの信号に適用するように構成される反響初期パワー(RIP)補正器と
を含む、反響処理システムと、
前記RIP補正器からの信号内に反響効果を導入するように構成されるリバーブレータと、
直接処理システムであって、
前記入力信号の第2の部分内に遅延を導入するように構成される伝搬遅延と、
利得を前記入力信号の第2の部分に適用するように構成される直接利得と
を含む、直接処理システムと、
コンバイナであって、
前記反響処理システムからの前記入力信号の第1の部分および前記直接処理システムからの前記入力信号の第2の部分を組み合わせることと、
前記入力信号の組み合わせられた第1および第2の部分を出力信号として出力することであって、前記出力信号は、前記オーディオ信号である、ことと
を行うように構成される、コンバイナと
を含む、回路と
を備える、システム。
(項目16)
前記リバーブレータは、前記RIP補正器からの前記信号内の1つ以上の周波数をフィルタ処理して取り除くように構成される複数のコムフィルタを含む、項目15に記載のシステム。
(項目17)
前記リバーブレータは、前記複数のコムフィルタからの信号の位相を変化させるように構成される複数のオールパスフィルタを含む、項目16に記載のシステム。
(項目18)
前記RIGは、RG値を前記入力信号の第1の部分に適用するように構成される反響利得(RG)を含む、項目15に記載のシステム。
(項目19)
前記RIGはさらに、RE補正係数を前記RGからの信号に適用するように構成される反響エネルギー(RE)補正器を含む、項目18に記載のシステム。

Claims (20)

  1. 法であって、前記方法は、
    入力信号を受信することであって、前記入力信号は、第1の部分と、第2の部分とを含む、ことと、
    反響処理システムを使用して、
    反響初期利得(RIG)値を前記入力信号の第1の部分に適用することと、
    反響初期パワー(RIP)補正係数を前記入力信号の第1の部分に適用することであって、前記RIP補正係数は、前記RIG値適用された後に適用される、ことと、
    前記入力信号の第1の部分内に反響効果を導入することであって、前記反響効果は、前記RIG値および前記RIP補正係数とは別個に適用される、こと
    を行うことと、
    直接処理システムを使用して、前記入力信号の第2の部分を処理することと、
    前記反響処理システムからの前記入力信号の第1の部分および前記直接処理システムからの前記入力信号の第2の部分を組み合わせることと、
    前記入力信号の組み合わせられた第1および第2の部分を出力信号として出力することであって、前記出力信号はオーディオ信号である、ことと
    を含む、方法。
  2. 前記RIP補正係数を計算することであって、前記RIP補正係数は、RIP補正器によって、計算され、前記入力信号の第1の部分に適用される、こと
    をさらに含み、前記RIP補正係数は、前記RIP補正器から出力される信号1.0に正規化されるように計算される、請求項1に記載の方法。
  3. 前記RIP補正係数は、リバーブレータトポロジ、遅延ユニットの数および持続時間、接続利得、およびフィルタパラメータのうちの1つ以上のものに依存する、請求項1に記載の方法。
  4. 前記RIP補正係数は、反響インパルス応答のRMSパワーに等しい、請求項1に記載の方法。
  5. 前記入力信号の第1の部分内の前記反響効果の導入は、1つ以上の周波数をフィルタ処理して取り除くことを含む、請求項1に記載の方法。
  6. 前記反響効果の導入は、前記入力信号の第1の部分の位相を変化させることを含む、請求項1に記載の方法。
  7. 前記反響効果の導入は、リバーブレータトポロジを選択し、内部リバーブレータパラメータを設定することを含む、請求項1に記載の方法。
  8. 前記RIG値は、1.0に等しく、前記方法は前記反響処理システムのRIP1.0に等しいように、前記RIP補正係数を計算することをさらに含む、請求項1に記載の方法。
  9. 反響時間を無限大に設定することと、
    リバーブレータインパルス応答を記録することと、
    反響RMS振幅を測定することと
    によって、前記RIP補正係数を計算すること
    をさらに含み、
    前記RIP補正係数は、前記反響RMS振幅の逆数に関連する、請求項1に記載の方法。
  10. 反響時間を有限値に設定することと、
    リバーブレータインパルス応答を記録することと、
    反響RMS振幅消滅曲線を導出することと、
    放出の時間におけるRMS振幅を決定することと
    によって、前記RIP補正係数を計算すること
    をさらに含み、
    前記RIP補正係数は、前記反響RMS振幅の逆数に関連する、請求項1に記載の方法。
  11. 前記RIG値の適用は、
    反響利得(RG)値を前記入力信号の第1の部分に適用することと、
    反響エネルギー(RE)補正係数を前記入力信号の第1の部分に適用することであって、前記RE補正係数は、前記RG値適用された後に適用される、ことと
    を含む、請求項1に記載の方法。
  12. 前記RE補正係数を計算することであって、前記RE補正係数は、RE補正器によって、計算され、前記入力信号の第1の部分に適用される、こと
    をさらに含み、前記RE補正器は、前記RE補正から出力される信号1.0に正規化されるように計算される、請求項11に記載の方法。
  13. 前記RIG値を計算することであって、前記RIG値は、前記RG値を前記RE補正係数で乗算したものに等しい、こと
    をさらに含む、請求項11に記載の方法。
  14. 前記反響効果は、前記RIP補正係数適用された後に導入される、請求項1に記載の方法。
  15. システムであって、
    オーディオ信号をユーザに提供するように構成されるウェアラブル頭部デバイスと、
    前記オーディオ信号をレンダリングするように構成される回路であって、前記回路は、
    反響処理システムであって、
    RIG値を入力信号の第1の部分に適用するように構成される反響初期利得(RIG)と、
    RIP補正係数を前記RIGからの信号に適用するように構成される反響初期パワー(RIP)補正器と
    を含む、反響処理システムと、
    前記RIP補正器からの信号内に反響効果を導入するように構成されるリバーブレータであって、前記反響効果は、前記RIG値および前記RIP補正係数とは別個に適用される、リバーブレータと、
    記入力信号の第2の部分を処理するように構成され直接処理システムと、
    コンバイナであって、
    前記反響処理システムからの前記入力信号の第1の部分および前記直接処理システムからの前記入力信号の第2の部分を組み合わせることと、
    前記入力信号の組み合わせられた第1および第2の部分を出力信号として出力することであって、前記出力信号は、前記オーディオ信号である、ことと
    を行うように構成される、コンバイナと
    を含む、回路と
    を備える、システム。
  16. 前記リバーブレータは、前記RIP補正器からの前記信号内の1つ以上の周波数をフィルタ処理して取り除くように構成される複数のコムフィルタを含む、請求項15に記載のシステム。
  17. 前記リバーブレータは、前記複数のコムフィルタからの信号の位相を変化させるように構成される複数のオールパスフィルタを含む、請求項16に記載のシステム。
  18. 前記RIGは、RG値を前記入力信号の第1の部分に適用するように構成される反響利得(RG)を含む、請求項15に記載のシステム。
  19. 前記RIGはRE補正係数を前記RGからの信号に適用するように構成される反響エネルギー(RE)補正器をさらに含む、請求項18に記載のシステム。
  20. 方法であって、前記方法は、
    入力信号を受信することであって、前記入力信号は、第1の部分と、第2の部分とを含む、ことと、
    反響処理システムを使用して、
    反響初期利得(RIG)値を前記入力信号の第1の部分に適用することと、
    反響初期パワー(RIP)補正係数を前記入力信号の第1の部分に適用することであって、前記RIP補正係数は、前記RIG値が適用された後に適用され、前記RIG値の適用は、
    反響利得(RG)値を前記入力信号の第1の部分に適用することと、
    反響エネルギー(RE)補正係数を前記入力信号の第1の部分に適用することであって、前記RE補正係数は、前記RG値が適用された後に適用される、ことと
    を含む、ことと、
    前記入力信号の第1の部分内に反響効果を導入することと、
    直接処理システムを使用して、前記入力信号の第2の部分を処理することと、
    前記反響処理システムからの前記入力信号の第1の部分および前記直接処理システムからの前記入力信号の第2の部分を組み合わせることと、
    前記入力信号の組み合わせられた第1および第2の部分を出力信号として出力することであって、前記出力信号は、オーディオ信号である、ことと
    を含む、方法。
JP2020569075A 2018-06-14 2019-06-14 反響利得正規化 Active JP7478100B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2024039810A JP2024069464A (ja) 2018-06-14 2024-03-14 反響利得正規化

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862685235P 2018-06-14 2018-06-14
US62/685,235 2018-06-14
PCT/US2019/037384 WO2019241754A1 (en) 2018-06-14 2019-06-14 Reverberation gain normalization

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2024039810A Division JP2024069464A (ja) 2018-06-14 2024-03-14 反響利得正規化

Publications (3)

Publication Number Publication Date
JP2021527360A JP2021527360A (ja) 2021-10-11
JPWO2019241754A5 true JPWO2019241754A5 (ja) 2022-06-09
JP7478100B2 JP7478100B2 (ja) 2024-05-02

Family

ID=68839358

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020569075A Active JP7478100B2 (ja) 2018-06-14 2019-06-14 反響利得正規化
JP2024039810A Pending JP2024069464A (ja) 2018-06-14 2024-03-14 反響利得正規化

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2024039810A Pending JP2024069464A (ja) 2018-06-14 2024-03-14 反響利得正規化

Country Status (5)

Country Link
US (4) US10810992B2 (ja)
EP (2) EP4390918A2 (ja)
JP (2) JP7478100B2 (ja)
CN (1) CN112534498A (ja)
WO (1) WO2019241754A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112534498A (zh) 2018-06-14 2021-03-19 奇跃公司 混响增益归一化
WO2020057727A1 (en) * 2018-09-18 2020-03-26 Huawei Technologies Co., Ltd. Device and method for adaptation of virtual 3d audio to a real room
EP4174846A1 (en) * 2021-10-26 2023-05-03 Koninklijke Philips N.V. An audio apparatus and method of operation therefor

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4852988A (en) 1988-09-12 1989-08-01 Applied Science Laboratories Visor and camera providing a parallax-free field-of-view image for a head-mounted eye movement measurement system
GB9107011D0 (en) * 1991-04-04 1991-05-22 Gerzon Michael A Illusory sound distance control method
US6847336B1 (en) 1996-10-02 2005-01-25 Jerome H. Lemelson Selectively controllable heads-up display system
JP2997665B2 (ja) * 1998-05-25 2000-01-11 不二音響株式会社 音場再生装置
US6433760B1 (en) 1999-01-14 2002-08-13 University Of Central Florida Head mounted display with eyetracking capability
US6491391B1 (en) 1999-07-02 2002-12-10 E-Vision Llc System, apparatus, and method for reducing birefringence
CA2316473A1 (en) 1999-07-28 2001-01-28 Steve Mann Covert headworn information display or data display or viewfinder
CA2362895A1 (en) 2001-06-26 2002-12-26 Steve Mann Smart sunglasses or computer information display built into eyewear having ordinary appearance, possibly with sight license
DE10132872B4 (de) 2001-07-06 2018-10-11 Volkswagen Ag Kopfmontiertes optisches Durchsichtssystem
US20030030597A1 (en) 2001-08-13 2003-02-13 Geist Richard Edwin Virtual display apparatus for mobile activities
JP4055054B2 (ja) * 2002-05-15 2008-03-05 ソニー株式会社 音響処理装置
CA2388766A1 (en) 2002-06-17 2003-12-17 Steve Mann Eyeglass frames based computer display or eyeglasses with operationally, actually, or computationally, transparent frames
US6943754B2 (en) 2002-09-27 2005-09-13 The Boeing Company Gaze tracking system, eye-tracking assembly and an associated method of calibration
US7347551B2 (en) 2003-02-13 2008-03-25 Fergason Patent Properties, Llc Optical system for monitoring eye movement
US7500747B2 (en) 2003-10-09 2009-03-10 Ipventure, Inc. Eyeglasses with electrical components
ZA200608191B (en) 2004-04-01 2008-07-30 William C Torch Biosensors, communicators, and controllers monitoring eye movement and methods for using them
US20070081123A1 (en) 2005-10-07 2007-04-12 Lewis Scott W Digital eyewear
US8696113B2 (en) 2005-10-07 2014-04-15 Percept Technologies Inc. Enhanced optical and perceptual digital eyewear
SG135058A1 (en) * 2006-02-14 2007-09-28 St Microelectronics Asia Digital audio signal processing method and system for generating and controlling digital reverberations for audio signals
US8036767B2 (en) * 2006-09-20 2011-10-11 Harman International Industries, Incorporated System for extracting and changing the reverberant content of an audio input signal
CN102667918B (zh) * 2009-10-21 2015-08-12 弗兰霍菲尔运输应用研究公司 用于使音频信号混响的混响器和方法
US20110213664A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US8890946B2 (en) 2010-03-01 2014-11-18 Eyefluence, Inc. Systems and methods for spatially controlled scene illumination
JP5672748B2 (ja) * 2010-03-31 2015-02-18 ヤマハ株式会社 音場制御装置
US8531355B2 (en) 2010-07-23 2013-09-10 Gregory A. Maltz Unitized, vision-controlled, wireless eyeglass transceiver
US9292973B2 (en) 2010-11-08 2016-03-22 Microsoft Technology Licensing, Llc Automatic variable virtual focus for augmented reality displays
US9323325B2 (en) 2011-08-30 2016-04-26 Microsoft Technology Licensing, Llc Enhancing an object of interest in a see-through, mixed reality display device
US20130077147A1 (en) 2011-09-22 2013-03-28 Los Alamos National Security, Llc Method for producing a partially coherent beam with fast pattern update rates
US8929589B2 (en) 2011-11-07 2015-01-06 Eyefluence, Inc. Systems and methods for high-resolution gaze tracking
US8611015B2 (en) 2011-11-22 2013-12-17 Google Inc. User interface
US8235529B1 (en) 2011-11-30 2012-08-07 Google Inc. Unlocking a screen using eye tracking information
US10013053B2 (en) 2012-01-04 2018-07-03 Tobii Ab System for gaze interaction
US8638498B2 (en) 2012-01-04 2014-01-28 David D. Bohn Eyebox adjustment for interpupillary distance
US9274338B2 (en) 2012-03-21 2016-03-01 Microsoft Technology Licensing, Llc Increasing field of view of reflective waveguide
US8989535B2 (en) 2012-06-04 2015-03-24 Microsoft Technology Licensing, Llc Multiple waveguide imaging structure
JP5417491B2 (ja) * 2012-06-27 2014-02-12 株式会社東芝 電子機器、方法およびプログラム
CN104903818B (zh) 2012-12-06 2018-12-14 谷歌有限责任公司 眼睛跟踪佩戴式设备和使用方法
WO2014106823A2 (en) 2013-01-03 2014-07-10 Meta Company Extramissive spatial imaging digital eye glass apparatuses, methods and systems for virtual or augmediated vision, manipulation, creation, or interaction with objects, materials, or other entities
US20140195918A1 (en) 2013-01-07 2014-07-10 Steven Friedlander Eye tracking user interface
CN108369494B (zh) * 2015-10-28 2021-08-27 Dts(英属维尔京群岛)有限公司 音频信号的频谱校正
KR102642275B1 (ko) 2016-02-02 2024-02-28 디티에스, 인코포레이티드 증강 현실 헤드폰 환경 렌더링
US9940922B1 (en) * 2017-08-24 2018-04-10 The University Of North Carolina At Chapel Hill Methods, systems, and computer readable media for utilizing ray-parameterized reverberation filters to facilitate interactive sound rendering
RU2020112255A (ru) * 2017-10-20 2021-09-27 Сони Корпорейшн Устройство для обработки сигнала, способ обработки сигнала и программа
CN112534498A (zh) 2018-06-14 2021-03-19 奇跃公司 混响增益归一化

Similar Documents

Publication Publication Date Title
US5757931A (en) Signal processing apparatus and acoustic reproducing apparatus
JP2024069464A5 (ja)
KR100739691B1 (ko) 음장 효과 재생을 위한 사운드 초기 반사음 재생 장치 및방법
WO2017127286A1 (en) Audio enhancement for head-mounted speakers
JP5816072B2 (ja) バーチャルサラウンドレンダリングのためのスピーカアレイ
JPH05265477A (ja) 音場補正装置
JPH09322299A (ja) 音像定位制御装置
JP2021192553A (ja) カンファレンスのためのサブバンド空間処理およびクロストークキャンセルシステム
JPS59202499A (ja) 残響装置
JP2000163086A (ja) 反射音生成装置
JP3979133B2 (ja) 音場再生装置、プログラム及び記録媒体
US20080285768A1 (en) Method and System for Modifying and Audio Signal, and Filter System for Modifying an Electrical Signal
JPWO2019241754A5 (ja)
JP4019753B2 (ja) 残響付与装置、残響付与方法、プログラムおよび記録媒体
WO2022048376A1 (zh) 一种声场扩展方法、电路、电子设备及存储介质
JPS6017119B2 (ja) 人工残響装置
WO2014203496A1 (ja) 音声信号処理装置、および音声信号処理方法
TWI246866B (en) Method and device for digital audio signal processing
US9641953B2 (en) Sound spatialization with room effect, optimized in terms of complexity
JP4335752B2 (ja) 擬似ステレオ信号生成装置および擬似ステレオ信号生成プログラム
JP3287970B2 (ja) 残響音付加方法および装置
US7860256B1 (en) Artificial-reverberation generating device
JP4263869B2 (ja) 残響付与装置、残響付与方法、プログラムおよび記録媒体
JP2004166212A (ja) ヘッドホン再生方法及び装置
JP4001701B2 (ja) 帯域限定適応イコライザ