JP7384162B2 - 信号処理装置、信号処理方法、およびプログラム - Google Patents
信号処理装置、信号処理方法、およびプログラム Download PDFInfo
- Publication number
- JP7384162B2 JP7384162B2 JP2020537414A JP2020537414A JP7384162B2 JP 7384162 B2 JP7384162 B2 JP 7384162B2 JP 2020537414 A JP2020537414 A JP 2020537414A JP 2020537414 A JP2020537414 A JP 2020537414A JP 7384162 B2 JP7384162 B2 JP 7384162B2
- Authority
- JP
- Japan
- Prior art keywords
- head
- related transfer
- transfer function
- band
- signal processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 55
- 238000003672 processing method Methods 0.000 title claims description 7
- 238000012546 transfer Methods 0.000 claims description 225
- 238000005259 measurement Methods 0.000 claims description 42
- 230000004044 response Effects 0.000 claims description 20
- 238000012937 correction Methods 0.000 claims description 14
- 230000006870 function Effects 0.000 description 212
- 238000010586 diagram Methods 0.000 description 23
- 238000000034 method Methods 0.000 description 23
- 230000005236 sound signal Effects 0.000 description 22
- 230000015572 biosynthetic process Effects 0.000 description 17
- 238000003786 synthesis reaction Methods 0.000 description 17
- 238000004891 communication Methods 0.000 description 13
- 239000000284 extract Substances 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 10
- 238000000605 extraction Methods 0.000 description 9
- 210000005069 ears Anatomy 0.000 description 8
- 230000004807 localization Effects 0.000 description 7
- 238000000926 separation method Methods 0.000 description 5
- 230000002194 synthesizing effect Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
- H04S1/005—For headphones
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K15/00—Acoustics not otherwise provided for
- G10K15/08—Arrangements for producing a reverberation or echo sound
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/007—Two-channel systems in which the audio signals are in digital form
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
Description
2.第1の実施の形態(複数チャンネルについての頭部伝達関数の測定)
3.第2の実施の形態(正面方向についての頭部伝達関数の測定)
4.第3の実施の形態(正中面についての頭部伝達関数の測定)
5.その他
(携帯端末の構成)
まず、図1を参照して、本開示に係る技術を適用した信号処理装置としての携帯端末の構成例について説明する。
次に、図3のフローチャートを参照して、携帯端末1による頭部伝達関数の生成処理について説明する。
(携帯端末の構成)
図4は、本開示の技術に係る第1の実施の形態の携帯端末1の構成例を示す図である。
図5は、図4の携帯端末1による頭部伝達関数の生成処理について説明するフローチャートである。
上述した頭部伝達関数の測定においては、ユーザが左右の耳に装着するマイクロフォンとして、市販のノイズキャンセリングマイクロフォン(NCマイクロフォン)を利用することができる。
本実施の形態においては、仮想音源の音像定位を変えずに、立体音響の音色を変更することが可能である。
(携帯端末の構成)
図12は、本開示の技術に係る第2の実施の形態の携帯端末1の構成例を示す図である。
図13は、図12の携帯端末1による頭部伝達関数の生成処理について説明するフローチャートである。
(2)音源が左右方向に移動することに起因する、音源からの距離の変化に伴う遅延の補正
RR(t)=filti(t)*CR(t)
なお、“*”は畳み込みを意味する。
LR(t)=filtc(t)*CR(t)
以下においては、ユーザの正中面についての頭部伝達関数から矢状面についての頭部伝達関数を推定する例について説明する。
(音源の他の例)
上述した説明においては、測定用音波を再生する音源を、スピーカを有するスマートフォンとしたが、これ以外のデバイスとしてもよい。例えば、測定用音波を再生する音源を、スピーカとディスプレイを有するテレビジョン受像機とすることもできる。テレビジョン受像機は、高々200Hz程度の帯域までしか再生できず、スマートフォンと同様、再生帯域が広いものではない。
本開示に係る技術を適用した信号処理装置は、1つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
(1)
ユーザの第1の頭部伝達関数から抽出された第1の帯域の特性と、前記第1の頭部伝達関数が測定される第1の測定環境と異なる第2の測定環境で測定された第2の頭部伝達関数から抽出された前記第1の帯域以外の第2の帯域の特性とを合成することで、第3の頭部伝達関数を生成する合成部
を備える信号処理装置。
(2)
前記第1の帯域は、第1の周波数から第2の周波数までの帯域であり、
前記第2の帯域は、前記第1の周波数より低い帯域と、前記第2の周波数より高い帯域を含む
(1)に記載の信号処理装置。
(3)
前記第1の帯域は、第1の周波数より高い帯域であり、
前記第2の帯域は、前記第1の周波数より低い帯域を含む
(1)に記載の信号処理装置。
(4)
前記第1の頭部伝達関数は、前記ユーザが配置した音源を用いて実測されるデータであり、
前記第2の頭部伝達関数は、あらかじめ理想的な測定環境で測定されたプリセットデータである
(1)乃至(3)のいずれかに記載の信号処理装置。
(5)
前記第1の帯域は、個人に依存する特性を含む帯域である
(4)に記載の信号処理装置。
(6)
前記第2の帯域は、前記音源が再生できない帯域を含む
(4)または(5)に記載の信号処理装置。
(7)
前記音源は、スピーカを有するデバイスである
(4)乃至(6)のいずれかに記載の信号処理装置。
(8)
前記デバイスは、ディスプレイをさらに有する
(7)に記載の信号処理装置。
(9)
前記デバイスは、スマートフォンである
(8)に記載の信号処理装置。
(10)
前記デバイスは、テレビジョン受像機である
(8)に記載の信号処理装置。
(11)
前記第1の頭部伝達関数から抽出された前記第1の帯域の特性に含まれる前記音源の特性を除去するよう、前記第1の帯域の特性を補正する補正部をさらに備える
(4)乃至(10)のいずれかに記載の信号処理装置。
(12)
前記第2の頭部伝達関数に対応する頭部インパルス応答から分離された残響成分を、前記第3の頭部伝達関数に付加する付加部をさらに備える
(1)乃至(11)のいずれかに記載の信号処理装置。
(13)
信号処理装置が、
ユーザの第1の頭部伝達関数から抽出された第1の帯域の特性と、前記第1の頭部伝達関数が測定される第1の測定環境と異なる第2の測定環境で測定された第2の頭部伝達関数から抽出された前記第1の帯域以外の第2の帯域の特性とを合成することで、第3の頭部伝達関数を生成する
信号処理方法。
(14)
コンピュータに、
ユーザの第1の頭部伝達関数から抽出された第1の帯域の特性と、前記第1の頭部伝達関数が測定される第1の測定環境と異なる第2の測定環境で測定された第2の頭部伝達関数から抽出された前記第1の帯域以外の第2の帯域の特性とを合成することで、第3の頭部伝達関数を生成する
処理を実行させるためのプログラム。
Claims (13)
- ユーザの第1の頭部伝達関数から抽出された第1の帯域の特性と、前記第1の頭部伝達関数が測定される第1の測定環境と異なる第2の測定環境で測定された第2の頭部伝達関数から抽出された、前記第1の帯域より高い帯域を含む第2の帯域の特性とを合成することで、第3の頭部伝達関数を生成する合成部
を備える信号処理装置。 - 前記第1の帯域は、第1の周波数から第2の周波数までの帯域であり、
前記第2の帯域は、前記第1の周波数より低い帯域と、前記第2の周波数より高い帯域を含む
請求項1に記載の信号処理装置。 - 前記第1の頭部伝達関数は、前記ユーザが配置した音源を用いて実測されるデータであり、
前記第2の頭部伝達関数は、あらかじめ理想的な測定環境で測定されたプリセットデータである
請求項1に記載の信号処理装置。 - 前記第1の帯域は、個人に依存する特性を含む帯域である
請求項3に記載の信号処理装置。 - 前記第2の帯域は、前記音源が再生できない帯域を含む
請求項3に記載の信号処理装置。 - 前記音源は、スピーカを有するデバイスである
請求項3に記載の信号処理装置。 - 前記デバイスは、ディスプレイをさらに有する
請求項6に記載の信号処理装置。 - 前記デバイスは、スマートフォンである
請求項7に記載の信号処理装置。 - 前記デバイスは、テレビジョン受像機である
請求項7に記載の信号処理装置。 - 前記第1の頭部伝達関数から抽出された前記第1の帯域の特性に含まれる前記音源の特性を除去するよう、前記第1の帯域の特性を補正する補正部をさらに備える
請求項3に記載の信号処理装置。 - 前記第2の頭部伝達関数に対応する頭部インパルス応答から分離された残響成分を、前記第3の頭部伝達関数に付加する付加部をさらに備える
請求項1に記載の信号処理装置。 - 信号処理装置が、
ユーザの第1の頭部伝達関数から抽出された第1の帯域の特性と、前記第1の頭部伝達関数が測定される第1の測定環境と異なる第2の測定環境で測定された第2の頭部伝達関数から抽出された、前記第1の帯域より高い帯域を含む第2の帯域の特性とを合成することで、第3の頭部伝達関数を生成する
信号処理方法。 - コンピュータに、
ユーザの第1の頭部伝達関数から抽出された第1の帯域の特性と、前記第1の頭部伝達関数が測定される第1の測定環境と異なる第2の測定環境で測定された第2の頭部伝達関数から抽出された、前記第1の帯域より高い帯域を含む第2の帯域の特性とを合成することで、第3の頭部伝達関数を生成する
処理を実行させるためのプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018153658 | 2018-08-17 | ||
JP2018153658 | 2018-08-17 | ||
PCT/JP2019/030413 WO2020036077A1 (ja) | 2018-08-17 | 2019-08-02 | 信号処理装置、信号処理方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020036077A1 JPWO2020036077A1 (ja) | 2021-08-10 |
JP7384162B2 true JP7384162B2 (ja) | 2023-11-21 |
Family
ID=69525513
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020537414A Active JP7384162B2 (ja) | 2018-08-17 | 2019-08-02 | 信号処理装置、信号処理方法、およびプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US11743671B2 (ja) |
JP (1) | JP7384162B2 (ja) |
CN (1) | CN112567766B (ja) |
DE (1) | DE112019004139T5 (ja) |
WO (1) | WO2020036077A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2584152B (en) * | 2019-05-24 | 2024-02-21 | Sony Interactive Entertainment Inc | Method and system for generating an HRTF for a user |
JP2021131433A (ja) * | 2020-02-19 | 2021-09-09 | ヤマハ株式会社 | 音信号処理方法および音信号処理装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017130255A1 (ja) | 2016-01-26 | 2017-08-03 | 株式会社Jvcケンウッド | 音像定位処理装置、及び音像定位処理方法 |
JP2018502535A (ja) | 2014-12-04 | 2018-01-25 | ガウディ オーディオ ラボラトリー,インコーポレイティド | バイノーラルレンダリングのためのオーディオ信号処理装置及びその方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7116787B2 (en) | 2001-05-04 | 2006-10-03 | Agere Systems Inc. | Perceptual synthesis of auditory scenes |
US20050147261A1 (en) * | 2003-12-30 | 2005-07-07 | Chiang Yeh | Head relational transfer function virtualizer |
KR100754220B1 (ko) * | 2006-03-07 | 2007-09-03 | 삼성전자주식회사 | Mpeg 서라운드를 위한 바이노럴 디코더 및 그 디코딩방법 |
JP2009260574A (ja) | 2008-04-15 | 2009-11-05 | Sony Ericsson Mobilecommunications Japan Inc | 音声信号処理装置、音声信号処理方法及び音声信号処理装置を備えた携帯端末 |
JP2012004668A (ja) | 2010-06-14 | 2012-01-05 | Sony Corp | 頭部伝達関数生成装置、頭部伝達関数生成方法及び音声信号処理装置 |
US9426589B2 (en) * | 2013-07-04 | 2016-08-23 | Gn Resound A/S | Determination of individual HRTFs |
JP2015211418A (ja) | 2014-04-30 | 2015-11-24 | ソニー株式会社 | 音響信号処理装置、音響信号処理方法、および、プログラム |
WO2016089133A1 (ko) * | 2014-12-04 | 2016-06-09 | 가우디오디오랩 주식회사 | 개인 특징을 반영한 바이노럴 오디오 신호 처리 방법 및 장치 |
JP6732464B2 (ja) * | 2016-02-12 | 2020-07-29 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
-
2019
- 2019-08-02 WO PCT/JP2019/030413 patent/WO2020036077A1/ja active Application Filing
- 2019-08-02 CN CN201980052823.XA patent/CN112567766B/zh active Active
- 2019-08-02 DE DE112019004139.8T patent/DE112019004139T5/de active Pending
- 2019-08-02 JP JP2020537414A patent/JP7384162B2/ja active Active
- 2019-08-02 US US17/250,603 patent/US11743671B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018502535A (ja) | 2014-12-04 | 2018-01-25 | ガウディ オーディオ ラボラトリー,インコーポレイティド | バイノーラルレンダリングのためのオーディオ信号処理装置及びその方法 |
WO2017130255A1 (ja) | 2016-01-26 | 2017-08-03 | 株式会社Jvcケンウッド | 音像定位処理装置、及び音像定位処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2020036077A1 (ja) | 2021-08-10 |
US11743671B2 (en) | 2023-08-29 |
CN112567766A (zh) | 2021-03-26 |
DE112019004139T5 (de) | 2021-05-06 |
US20210297802A1 (en) | 2021-09-23 |
WO2020036077A1 (ja) | 2020-02-20 |
CN112567766B (zh) | 2022-10-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4584416B2 (ja) | 位置調節が可能な仮想音像を利用したスピーカ再生用多チャンネルオーディオ再生装置及びその方法 | |
CN107852563A (zh) | 双耳音频再现 | |
JP2011009842A (ja) | 音声信号処理装置および音声信号処理方法 | |
JP2009232438A (ja) | 垂直または水平に配置できる結合アレイスピーカー | |
JP2009194682A (ja) | 頭部伝達関数測定方法、頭部伝達関数畳み込み方法および頭部伝達関数畳み込み装置 | |
CN107925835B (zh) | 头外定位处理装置以及头外定位处理方法 | |
JP6515720B2 (ja) | 頭外定位処理装置、頭外定位処理方法、及びプログラム | |
JP2009260574A (ja) | 音声信号処理装置、音声信号処理方法及び音声信号処理装置を備えた携帯端末 | |
CN112956210B (zh) | 基于均衡滤波器的音频信号处理方法及装置 | |
JP7384162B2 (ja) | 信号処理装置、信号処理方法、およびプログラム | |
JP2018050222A (ja) | フィルタ生成装置、フィルタ生成方法、及びプログラム | |
JP2008502200A (ja) | ワイドステレオ再生方法及びその装置 | |
JP2003230198A (ja) | 音像定位制御装置 | |
CN105556990A (zh) | 音响处理装置、音响处理方法、及音响处理程序 | |
Liski et al. | Adaptive equalization of acoustic transparency in an augmented-reality headset | |
US20200059750A1 (en) | Sound spatialization method | |
WO2017013824A1 (ja) | 頭外定位処理装置、頭外定位処理方法、プログラム | |
CN109923877B (zh) | 对立体声音频信号进行加权的装置和方法 | |
US6999590B2 (en) | Stereo sound circuit device for providing three-dimensional surrounding effect | |
WO2017081733A1 (ja) | 音響再生装置 | |
US10764684B1 (en) | Binaural audio using an arbitrarily shaped microphone array | |
JP7010649B2 (ja) | オーディオ信号処理装置及びオーディオ信号処理方法 | |
JP5163685B2 (ja) | 頭部伝達関数測定方法、頭部伝達関数畳み込み方法および頭部伝達関数畳み込み装置 | |
JP6805879B2 (ja) | フィルタ生成装置、フィルタ生成方法、及びプログラム | |
JP2013176170A (ja) | 再生装置および再生方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220609 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230502 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230622 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231010 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231023 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7384162 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |