JP7472582B2 - 音声再生システムおよび頭部伝達関数選択方法 - Google Patents
音声再生システムおよび頭部伝達関数選択方法 Download PDFInfo
- Publication number
- JP7472582B2 JP7472582B2 JP2020054235A JP2020054235A JP7472582B2 JP 7472582 B2 JP7472582 B2 JP 7472582B2 JP 2020054235 A JP2020054235 A JP 2020054235A JP 2020054235 A JP2020054235 A JP 2020054235A JP 7472582 B2 JP7472582 B2 JP 7472582B2
- Authority
- JP
- Japan
- Prior art keywords
- head
- related transfer
- user
- transfer function
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012546 transfer Methods 0.000 title claims description 145
- 238000010187 selection method Methods 0.000 title claims description 9
- 230000006870 function Effects 0.000 claims description 222
- 230000004807 localization Effects 0.000 claims description 106
- 238000000034 method Methods 0.000 claims description 53
- 238000012360 testing method Methods 0.000 claims description 37
- 238000012545 processing Methods 0.000 claims description 26
- 238000004891 communication Methods 0.000 claims description 14
- 210000005069 ears Anatomy 0.000 claims description 11
- 230000005236 sound signal Effects 0.000 claims description 11
- 238000001514 detection method Methods 0.000 claims description 6
- 210000003128 head Anatomy 0.000 description 132
- 238000010586 diagram Methods 0.000 description 11
- 238000004148 unit process Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000000613 ear canal Anatomy 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
- H04S7/304—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
Description
上記実施形態では、携帯端末装置10は、各候補関数について1回ずつテスト音声が発生されるようにしていた。各候補関数について、それぞれ別の発音定位方向で複数回ずつテスト音声が発生されるようにしてもよい。この場合、携帯端末装置10は、同じ候補関数についてS14-S18の処理を複数回繰り返せばよい。
上記実施形態では、携帯端末装置10は、定位差に基づいて一つの候補関数を選択し、この候補関数(頭部伝達関数)をユーザLに適用している。携帯端末装置10が、定位差に基づいて複数の候補関数を選択し、これらの候補関数を補間してユーザに適用してもよい。
上記実施形態では、本発明の音響デバイスが、携帯端末装置10とヘッドホン20との組み合わせで構成されていた。本発明の音響デバイスの全ての構成が、ヘッドホン20に集約されていてもよい。
本発明の音響デバイスの構成の一部が、ネットワーク上のサーバ3に存在していてもよい。たとえば、頭部伝達関数データベース73がサーバ3に設けられ、プロファイルに基づいて選択された候補関数がサーバ3からダウンロードされてもよい。
上記実施形態では、ユーザが入力したプロファイルに基づいて候補関数が選択される。ユーザが装用するヘッドホンが、カメラなどのセンサを備え、センサによってヘッドトラッキングデータ取得してもよい。システムは、ヘッドトラッキングデータに基づいてユーザの頭の形状を推定し、候補関数またはユーザに設定される頭部伝達関数を自動選択する。
10 携帯端末装置(スマートホン)
20 ヘッドホン
21 スピーカ
23 ジャイロセンサ
70 アプリケーションプログラム
73 頭部伝達関数データベース
74 プロファイルテーブル
75 選択ログ
101 記憶部
105 信号処理部
Claims (17)
- ユーザが両耳に装用する放音部と、
複数の頭部伝達関数を記憶した記憶部と、
前記放音部から放音する音声信号を前記頭部伝達関数により処理する信号処理部と、
頭部伝達関数選択処理を実行する制御部と、
を備えた音声再生システムであって、
前記制御部は、前記頭部伝達関数選択処理において、
ユーザのプロファイルを入力し、前記複数の頭部伝達関数から入力した前記プロファイルに対応する2以上の頭部伝達関数を候補関数として選択し、
選択した各候補関数について、
所定のテスト音声を、所定の定位方向である発音定位方向に定位するよう前記候補関数で処理して前記放音部から放音し、
前記放音部から放音された前記テスト音声の、前記ユーザの聴覚上の定位方向である聴覚定位方向を取得し、
前記発音定位方向と前記聴覚定位方向の差である定位差を算出し、
2以上の前記候補関数についての前記定位差に基づいて、前記ユーザに適用する頭部伝達関数を選択する
音声再生システム。 - 前記プロファイルは、前記ユーザの頭部形状または耳介形状の情報を含む請求項1に記載の音声再生システム。
- 前記制御部は、前記複数の候補関数から一つの頭部伝達関数を選択することに代えて、2または3以上の候補関数を選択し、選択された関数値を補間して作成した新たな頭部伝達関数を前記ユーザに適用する請求項1または請求項2に記載の音声再生システム。
- 前記ユーザの頭部の向きを検出する方位検出部をさらに備え、
前記制御部は、前記テスト音声を聴いたユーザが向いたときの前記方位検出部の検出方向を前記聴覚定位方向として取得する
請求項1乃至請求項3のいずれかに記載の音声再生システム。 - オーディオ再生装置が有線または無線で接続され、前記記憶部、信号処理部、および、制御部の一部または全部が前記オーディオ再生装置に設けられている請求項1乃至請求項4のいずれかに記載の音声再生システム。
- 前記オーディオ再生装置は、ネットワーク通信部を備え、
前記記憶部および前記制御部の一部がネットワーク上のサーバに設けられている
請求項5に記載の音声再生システム。 - 前記放音部は、ネットワーク通信部を備え、
前記記憶部および前記制御部の一部がネットワーク上のサーバに設けられている
請求項1乃至請求項5のいずれかに記載の音声再生システム。 - 前記制御部は、前記ユーザに適用すべく選択された頭部伝達関数の情報を、前記サーバに送信する請求項6または請求項7に記載の音声再生システム。
- 前記候補関数として、入力した前記プロファイルに近いプロファイルに対応する2以上の頭部伝達関数が選択される
請求項1乃至請求項8のいずれかに記載の音声再生システム。 - 信号処理部を備えた装置が、
ユーザのプロファイルを入力し、複数の頭部伝達関数のうち、入力した前記プロファイルに対応する2以上の頭部伝達関数を候補関数として選択し、
選択した各候補関数について、所定のテスト音声を、所定の定位方向である発音定位方向に定位するよう前記候補関数で信号処理してユーザが両耳に装用する放音部から放音し、
前記放音部から放音された前記テスト音声の、前記ユーザの聴覚上の定位方向である聴覚定位方向を取得し、
前記発音定位方向と前記聴覚定位方向の差である定位差を算出し、
2以上の前記候補関数についての前記定位差に基づいて、前記ユーザに適用する頭部伝達関数を選択する
頭部伝達関数選択方法。 - 前記プロファイルは、前記ユーザの頭部形状または耳介形状の情報を含む請求項10に記載の頭部伝達関数選択方法。
- 前記複数の候補関数から一つの頭部伝達関数を選択することに代えて、2または3以上の候補関数を選択し、選択された関数値を補間して作成した新たな頭部伝達関数を前記ユーザに適用する請求項10または請求項11に記載の頭部伝達関数選択方法。
- 前記ユーザの頭部の向きを検出し、
前記テスト音声を聴いたユーザが向いたとき検出された方向を前記聴覚定位方向として取得する
請求項10乃至請求項12のいずれかに記載の頭部伝達関数選択方法。 - オーディオ再生装置を、有線または無線で接続し、
前記候補関数を選択する処理、前記テスト音声を前記候補関数で信号処理して放音する処理、前記聴覚定位方向の入力を受け付ける処理、前記定位差を算出する処理、および、前記ユーザに適用する頭部伝達関数を選択する処理、の一部または全部を前記オーディオ再生装置に実行させる
請求項10乃至請求項13のいずれかに記載の頭部伝達関数選択方法。 - ネットワーク通信部を介してサーバと通信し、
前記候補関数を選択する処理、前記テスト音声を前記候補関数で信号処理して放音する処理、前記聴覚定位方向の入力を受け付ける処理、前記定位差を算出する処理、および、前記ユーザに適用する頭部伝達関数を選択する処理、の一部または全部を前記サーバに実行させる
請求項10乃至請求項14のいずれかに記載の頭部伝達関数選択方法。 - 前記ユーザに適用すべく選択された頭部伝達関数の情報を前記サーバに送信する請求項15に記載の頭部伝達関数選択方法。
- 前記候補関数として、入力した前記プロファイルに近いプロファイルに対応する2以上の頭部伝達関数が選択される
請求項10乃至請求項16のいずれかに記載の頭部伝達関数選択方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020054235A JP7472582B2 (ja) | 2020-03-25 | 2020-03-25 | 音声再生システムおよび頭部伝達関数選択方法 |
US17/131,422 US11252526B2 (en) | 2020-03-25 | 2020-12-22 | Acoustic device and head-related transfer function selecting method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020054235A JP7472582B2 (ja) | 2020-03-25 | 2020-03-25 | 音声再生システムおよび頭部伝達関数選択方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021158427A JP2021158427A (ja) | 2021-10-07 |
JP7472582B2 true JP7472582B2 (ja) | 2024-04-23 |
Family
ID=77856852
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020054235A Active JP7472582B2 (ja) | 2020-03-25 | 2020-03-25 | 音声再生システムおよび頭部伝達関数選択方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11252526B2 (ja) |
JP (1) | JP7472582B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008193382A (ja) | 2007-02-05 | 2008-08-21 | Mitsubishi Electric Corp | 携帯電話機、及び音声調整方法 |
JP2014099797A (ja) | 2012-11-15 | 2014-05-29 | Nippon Hoso Kyokai <Nhk> | 頭部伝達関数選択装置、音響再生装置 |
JP2015019360A (ja) | 2013-07-04 | 2015-01-29 | ジーエヌ リザウンド エー/エスGn Resound A/S | 個人ごとのhrtfの決定 |
JP2015211235A (ja) | 2014-04-23 | 2015-11-24 | 国立研究開発法人情報通信研究機構 | 立体音再生装置およびプログラム |
JP2017143469A (ja) | 2016-02-12 | 2017-08-17 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017103598A (ja) | 2015-12-01 | 2017-06-08 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
US11228857B2 (en) * | 2019-09-28 | 2022-01-18 | Facebook Technologies, Llc | Dynamic customization of head related transfer functions for presentation of audio content |
-
2020
- 2020-03-25 JP JP2020054235A patent/JP7472582B2/ja active Active
- 2020-12-22 US US17/131,422 patent/US11252526B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008193382A (ja) | 2007-02-05 | 2008-08-21 | Mitsubishi Electric Corp | 携帯電話機、及び音声調整方法 |
JP2014099797A (ja) | 2012-11-15 | 2014-05-29 | Nippon Hoso Kyokai <Nhk> | 頭部伝達関数選択装置、音響再生装置 |
JP2015019360A (ja) | 2013-07-04 | 2015-01-29 | ジーエヌ リザウンド エー/エスGn Resound A/S | 個人ごとのhrtfの決定 |
JP2015211235A (ja) | 2014-04-23 | 2015-11-24 | 国立研究開発法人情報通信研究機構 | 立体音再生装置およびプログラム |
JP2017143469A (ja) | 2016-02-12 | 2017-08-17 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
Also Published As
Publication number | Publication date |
---|---|
US11252526B2 (en) | 2022-02-15 |
JP2021158427A (ja) | 2021-10-07 |
US20210306793A1 (en) | 2021-09-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10362432B2 (en) | Spatially ambient aware personal audio delivery device | |
JP5894634B2 (ja) | 個人ごとのhrtfの決定 | |
JP2017092732A (ja) | 聴覚支援システムおよび聴覚支援装置 | |
JP6791001B2 (ja) | 頭外定位フィルタ決定システム、頭外定位フィルタ決定装置、頭外定位決定方法、及びプログラム | |
JP6596896B2 (ja) | 頭部伝達関数選択装置、頭部伝達関数選択方法、頭部伝達関数選択プログラム、音声再生装置 | |
CN105814913A (zh) | 对名字敏感的收听装置 | |
US11115743B2 (en) | Signal processing device, signal processing method, and program | |
US10880669B2 (en) | Binaural sound source localization | |
JP2017532816A (ja) | 音声再生システム及び方法 | |
US10412530B2 (en) | Out-of-head localization processing apparatus and filter selection method | |
JPWO2017195616A1 (ja) | 情報処理装置および方法 | |
US11068233B2 (en) | Selecting a microphone based on estimated proximity to sound source | |
JP2019041382A (ja) | 音響デバイス | |
JP7472582B2 (ja) | 音声再生システムおよび頭部伝達関数選択方法 | |
US11659347B2 (en) | Information processing apparatus, information processing method, and acoustic system | |
JP6981330B2 (ja) | 頭外定位処理装置、頭外定位処理方法、及びプログラム | |
US11190896B1 (en) | System and method of determining head-related transfer function parameter based on in-situ binaural recordings | |
JP6805879B2 (ja) | フィルタ生成装置、フィルタ生成方法、及びプログラム | |
JP7404736B2 (ja) | 頭外定位フィルタ決定システム、頭外定位フィルタ決定方法、及びプログラム | |
JP7395906B2 (ja) | ヘッドホン、頭外定位フィルタ決定装置、及び頭外定位フィルタ決定方法 | |
US11937072B2 (en) | Headphones, out-of-head localization filter determination device, out-of-head localization filter determination system, out-of-head localization filter determination method, and program | |
WO2021059984A1 (ja) | 頭外定位フィルタ決定システム、頭外定位処理装置、頭外定位フィルタ決定装置、頭外定位フィルタ決定方法、及びプログラム | |
JP6988321B2 (ja) | 信号処理装置、信号処理方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230125 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230914 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231017 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231215 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240312 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240325 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7472582 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |