JP6572894B2 - 情報処理装置、情報処理方法及びプログラム - Google Patents
情報処理装置、情報処理方法及びプログラム Download PDFInfo
- Publication number
- JP6572894B2 JP6572894B2 JP2016531177A JP2016531177A JP6572894B2 JP 6572894 B2 JP6572894 B2 JP 6572894B2 JP 2016531177 A JP2016531177 A JP 2016531177A JP 2016531177 A JP2016531177 A JP 2016531177A JP 6572894 B2 JP6572894 B2 JP 6572894B2
- Authority
- JP
- Japan
- Prior art keywords
- listening environment
- characteristic information
- music signal
- signal
- environment characteristic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17879—General system configurations using both a reference signal and an error signal
- G10K11/17881—General system configurations using both a reference signal and an error signal the reference signal being an acoustic signal, e.g. recorded with a microphone
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17813—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17821—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the input signals only
- G10K11/17827—Desired external signals, e.g. pass-through audio such as music or speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1785—Methods, e.g. algorithms; Devices
- G10K11/17853—Methods, e.g. algorithms; Devices of the filter
- G10K11/17854—Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17885—General system configurations additionally using a desired external signal, e.g. pass-through audio such as music or speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K15/00—Acoustics not otherwise provided for
- G10K15/08—Arrangements for producing a reverberation or echo sound
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1083—Reduction of ambient noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers
- H04R3/04—Circuits for transducers for correcting frequency response
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1008—Earpieces of the supra-aural or circum-aural type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R2410/00—Microphones
- H04R2410/05—Noise reduction with a separate noise microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/01—Hearing devices using active noise cancellation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers
- H04R3/005—Circuits for transducers for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Circuit For Audible Band Transducer (AREA)
- Headphones And Earphones (AREA)
Description
1.第1の実施形態
1−1.第1の実施形態の概要
1−2.システムの構成
1−3.聴取環境特性情報取得部について
1−4.音楽信号処理部について
2.第2の実施形態
2−1.第2の実施形態の概要
2−2.システムの構成
2−3.聴取環境特性情報取得部について
2−3−1.音楽信号を測定信号に用いて伝達関数を取得する構成
2−3−2.音楽信号を測定信号に用いて相関関数を取得する構成
2−3−3.無相関雑音を測定信号に用いて相関関数を取得する構成
2−4.音楽信号処理部について
3.情報処理方法
4.変形例
4−1.音圧が調整される変形例
4−2.DBに記憶された聴取環境特性情報を用いる変形例
4−3.一対の筐体のそれぞれにより聴取環境特性情報を取得する変形例
5.ハードウェア構成
6.まとめ
まず、本開示の第1の実施形態について説明する。本開示の第1の実施形態では、ヘッドホンを装着したユーザによる発話に係る音声(以下、発話音声とも呼称する。)が、外部音声としてマイクロフォンによって収音される。そして、収音された発話音声に基づいてユーザが存在する空間(以下、聴取環境とも呼称する。)の音響特性を表す聴取環境特性情報が取得される。更に、取得された聴取環境特性情報に基づくフィルタ特性で音楽コンテンツの音声信号(以下、音楽信号とも呼称する。)がフィルタリングされる。これにより、聴取環境の音響特性が反映された、より外部音声となじんだ音楽がユーザに対して提供されることとなる。
図1を参照して、第1の実施形態に係るヘッドホンの一構成例について説明するとともに、第1の実施形態の概要について説明する。図1は、第1の実施形態に係るヘッドホンの一構成例を示す概略図である。
図2を参照して、第1の実施形態に係る音響調整システムの構成について説明する。図2は、第1の実施形態に係る音響調整システムの一構成例を示すブロック図である。
図3を参照して、図2に示す聴取環境特性情報取得部131の機能について説明する。図3は、聴取環境特性情報取得部131の機能構成の一例を示すブロック図である。
図4を参照して、図2に示す音楽信号処理部132の機能について説明する。図4は、音楽信号処理部132の一構成例を示すブロック図である。
次に、本開示の第2の実施形態について説明する。第2の実施形態では、外部音声として所定の測定用音声が用いられる。当該測定用音声としては、音楽信号に係る音声や、聴取環境における無相関雑音等が用いられ得る。マイクロフォンによって収音された測定用音声に基づいて、聴取環境特性情報が取得される。そして、取得された聴取環境特性情報に基づくフィルタ特性で音楽信号がフィルタリングされる。これにより、聴取環境の音響特性が反映された、より外部音声となじんだ音楽がユーザに対して提供されることとなる。
図5を参照して、第2の実施形態に係るヘッドホンの一構成例について説明するとともに、第2の実施形態の概要について説明する。図5は、第2の実施形態に係るヘッドホンの一構成例を示す概略図である。
図6を参照して、第2の実施形態に係る音響調整システムの構成について説明する。図6は、第2の実施形態に係る音響調整システムの一構成例を示すブロック図である。
第2の実施形態に係る聴取環境特性情報取得部231の機能について説明する。上述したように、聴取環境特性情報取得部231は、マイクロフォン210によって収音される測定用音声に基づいて、聴取環境特性情報として、聴取環境の伝達関数、出力した音楽信号と収音信号との相関関数、及び/又は、無相関雑音の自己相関関数を取得することができる。聴取環境特性情報取得部231は、取得する聴取環境特性情報に応じて、互いに異なる構成を取ることができる。ここでは、下記(2−3−1.音楽信号を測定信号に用いて伝達関数を取得する構成)、(2−3−2.音楽信号を測定信号に用いて相関関数を取得する構成)及び(2−3−3.無相関雑音を測定信号に用いて相関関数を取得する構成)において、取得する聴取環境特性情報に応じた、聴取環境特性情報取得部231の構成について説明する。なお、以下の図7、図8及び図10では、聴取環境特性情報取得部231における互いに異なる構成について説明するために、聴取環境特性情報取得部231に対して便宜的に異なる符号(聴取環境特性情報取得部231a、231b、231c)を付しているが、これらは全て、図6に示す聴取環境特性情報取得部231に対応するものである。
図7を参照して、図2に示す聴取環境特性情報取得部231において、音楽信号を測定信号に用いて伝達関数を取得するための一構成例について説明する。図7は、聴取環境特性情報取得部231において、音楽信号を測定信号に用いて伝達関数を取得するための一構成例を示すブロック図である。
図8を参照して、図2に示す聴取環境特性情報取得部231において、音楽信号を測定信号に用いて相関関数を取得するための一構成例について説明する。図8は、聴取環境特性情報取得部231において、音楽信号を測定信号に用いて相関関数を取得するための一構成例を示すブロック図である。
図10を参照して、図2に示す聴取環境特性情報取得部231において、無相関雑音を測定信号に用いて相関関数を取得するための一構成例について説明する。図10は、聴取環境特性情報取得部231において、無相関雑音を測定信号に用いて相関関数を取得するための一構成例を示すブロック図である。
図11−図13を参照して、図6に示す音楽信号処理部232の機能について説明する。図11は、聴取環境特性情報取得部231によって取得され得る相関関数の一例を示す概略図である。図12は、音楽信号処理部232の機能構成の一例を示すブロック図である。図13は、音楽信号処理部232に含まれる残響成分付与部293の一構成例を示すブロック図である。
初期反射時間は、相関関数の最初のピーク(直接音)と、その後の相関関数のピークとの間の時間T1(例えば、図9に示すt2−t1)として定められ得る。例えば、聴取環境が音楽ホールのような比較的広い室内空間である場合には、初期反射時間はより長くなると考えられる。パラメータ生成部291は、相関関数から当該初期反射時間T1を求め、残響成分付与部293に提供する。残響成分付与部293では、T1に応じて、図13に示すDelay lineの長さや係数ERが変更される。これにより、音楽信号に対して聴取環境の初期反射時間の特性を反映することができる。係数ERとして、相関関数やインパルス応答から求められる値を直接用いてもよいが、係数ERとして適用され得る値を予め数種類用意しておき、その中から、相関関数から得られた特性により近いものを選択して用いることも可能である。
残響時間Trは、得られた相関関数をシュレーダー積分し、エネルギーの減衰カーブを求めることによって推定され得る。シュレーダー積分の一例を下記数式(6)に示す。ここで、<S2(t)>は残響波形の集合平均であり、h(t)は、聴取環境特性情報取得部231によって取得された相関関数やインパルス応答である。
後部残響音の割合の指標としては、例えばD値が挙げられる。D値は、音全体のエネルギーに対する初期(50ms以内)のエネルギーの割合を示す値であり、下記数式(9)によって表される。ここで、h(t)は、聴取環境特性情報取得部231によって取得された相関関数やインパルス応答である。
パラメータ生成部291は、聴取環境特性情報取得部231によって取得された相関関数から、聴取環境の周波数特性を推定し、当該周波数特性を反映し得るようなパラメータを生成し、EQ部292に提供することができる。EQ部292によって、音楽信号に対して聴取環境の周波数特性が反映されることとなる。例えば、推定された聴取環境の周波数特性に高域の減衰が見られる場合には、EQ部292において、音楽信号の高域を減衰させる処理が実行され得る。
次に、図15を参照して、以上説明した第1及び第2の実施形態に係る情報処理方法について説明する。図15は、第1及び第2の実施形態に係る情報処理方法の処理手順の一例を示すフロー図である。なお、ここでは、第1及び第2の実施形態に係る情報処理方法の一例として、上記(2−3−1.音楽信号を測定信号に用いて伝達関数を取得する構成)で説明した聴取環境特性情報取得部231aを有する第2の実施形態に係る音響調整システム20において実行され得る、音楽信号を測定信号として用いて、聴取環境特性情報として伝達関数H2が取得される場合における情報処理方法について説明する。ただし、第1及び第2の実施形態に係る情報処理方法はかかる例に限定されず、上記で第1及び第2の実施形態として説明したように、測定信号としてはユーザの発話音声や無相関雑音が用いられてもよいし、聴取環境特性情報としては相関関数が取得されてもよい。
次に、以上説明した第1及び第2の実施形態についてのいくつかの変形例について説明する。なお、以下では、一例として、上述した第1の実施形態についての変形例について説明するが、以下に説明する変形例に係る構成は、上述した第2の実施形態に対しても同様に適用可能である。
以上説明した第1及び第2の実施形態では、聴取環境の音響特性として、音楽信号に対して聴取環境の残響特性や周波数特性等が付与されていた。ただし、第1及び第2の実施形態はかかる例に限定されず、音楽信号に対して聴取環境の他の音響特性が付与されてもよい。ここでは、一例として、聴取環境に応じて音楽信号の音圧が調整される変形例について説明する。
以上説明した第1及び第2の実施形態では、聴取環境特性情報取得条件が検出される度に、マイクロフォン110、210によって収音された外部音声に基づいて、聴取環境特性情報が取得されていた。ただし、第1及び第2の実施形態はかかる例に限定されず、例えば場所ごと(すなわち聴取環境ごと)の聴取環境特性情報が、当該場所の位置情報と対応付けてデータベース(DB)化されていてもよく、聴取環境特性情報取得部は、当該DBからユーザの現在位置に対応する場所の聴取環境特性情報を取得してもよい。
以上説明した第1及び第2の実施形態では、ヘッドホン100、200を構成する一対の筐体140、240のうち、一方の筐体140、240に設けられるマイクロフォン110、210によって収音された音声に基づいて、聴取環境特性情報が取得されていた。しかしながら、一対の筐体140、240のそれぞれによって、外部音声を収音し、聴取環境特性情報を取得することにより、より高精度に聴取環境特性情報を取得することが可能となる。
次に、図21を参照して、第1及び第2の実施形態に係る情報処理装置のハードウェア構成について説明する。図21は、第1及び第2の実施形態に係る情報処理装置のハードウェア構成の一例を示すブロック図である。図示される情報処理装置900は、例えば、上述した図1、図6、図16及び図20に示す音響調整システム10、20、30、70が一体的な装置として実現される場合における当該装置や、図18に示す携帯端末50等を実現し得る。また、図示される情報処理装置900は、例えば、図1、図6、図16、図18及び図20に示す制御部130、230、330、又は図20に示す聴取環境特性情報統合部190等の機能が搭載される携帯端末やサーバ等の情報処理装置の構成を実現し得る。
以上、本開示の第1及び第2の実施形態、並びに、第1及び第2の実施形態のいくつかの変形例について説明した。以上説明したように、第1及び第2の実施形態によれば、外部音声に基づいて聴取空間の音響特性を表す聴取空間特性情報が取得される。そして、取得された聴取空間特性情報に基づいて音楽信号に聴取空間の音響特性が付与される。従って、より外部の音声になじんだ、より開放感のある音楽がユーザに対して提供され得る。例えば、ユーザが遮音性の高い密閉型のヘッドホンを用いている場合であっても、外部音声を聞きながら、BGMのような感覚で音楽を聴くことが可能となる。
(1)少なくとも1つのマイクロフォンによって収音された外部音声に基づいて、聴取環境の特性を示す聴取環境特性情報を取得する聴取環境特性情報取得部と、取得された前記聴取環境特性情報に基づくフィルタ特性で音楽信号をフィルタリングする音楽信号処理部と、を備える、情報処理装置。
(2)前記外部音声は、ユーザの発話音声であり、前記聴取環境特性情報取得部は、前記ユーザの身体を経由して第1のマイクロフォンによって収音される前記発話音声と、前記聴取環境を経由して前記第1のマイクロフォンとは異なる第2のマイクロフォンによって収音される前記発話音声と、に基づいて、前記聴取環境特性情報を取得する、前記(1)に記載の情報処理装置。
(3)前記聴取環境特性情報は、前記発話音声が前記聴取環境を経由して前記第2のマイクロフォンに到達するまでの伝達関数である、前記(2)に記載の情報処理装置。
(4)前記外部音声は、スピーカから前記聴取環境に向かって出力される所定の測定用音声であり、前記聴取環境特性情報取得部は、前記マイクロフォンによって収音された前記測定用音声に基づいて、前記聴取環境特性情報を取得する、前記(1)に記載の情報処理装置。
(5)前記聴取環境特性情報は、前記測定用音声が前記聴取環境を経由して前記マイクロフォンに到達するまでの伝達関数である、前記(4)に記載の情報処理装置。
(6)前記聴取環境特性情報は、前記スピーカから出力される前の前記測定用音声と、前記聴取環境を経由して前記マイクロフォンによって収音された前記測定用音声との相関関数である、前記(4)に記載の情報処理装置。
(7)前記聴取環境特性情報取得部は、前記マイクロフォンによって収音された無相関雑音に基づいて、前記聴取環境特性情報を取得する、前記(1)に記載の情報処理装置。
(8)前記聴取環境特性情報は、前記無相関雑音の自己相関関数である、前記(7)に記載の情報処理装置。
(9)前記音楽信号処理部は、少なくとも前記聴取環境の残響特性を前記音楽信号に付与する、前記(1)〜(8)のいずれか1項に記載の情報処理装置。
(10)前記音楽信号処理部は、FIRフィルタを用いて、前記聴取環境における前記外部音声の伝達関数を前記音楽信号に畳み込むことにより、前記聴取環境の残響特性を前記音楽信号に付与する、前記(9)に記載の情報処理装置。
(11)前記音楽信号処理部は、前記聴取環境特性情報から算出される前記聴取環境の音響特性を示すパラメータを用いて、前記音楽信号をフィルタリングする、前記(1)〜(9)のいずれか1項に記載の情報処理装置。
(12)前記音楽信号処理部は、前記聴取環境の残響特性を示すパラメータが反映されたIIRフィルタと、前記聴取環境の周波数特性を示すパラメータが反映されたイコライザと、を含む、前記(11)に記載の情報処理装置。
(13)前記音楽信号処理部は、前記音楽信号に係る音声の音圧と外部音声の音圧との音圧比を調整する、前記(1)〜(12)のいずれか1項に記載の情報処理装置。
(14)プロセッサが、少なくとも1つのマイクロフォンによって収音された外部音声に基づいて、聴取環境の特性を示す聴取環境特性情報を取得することと、プロセッサが、取得された前記聴取環境特性情報に基づくフィルタ特性で音楽信号をフィルタリングすることと、を含む、情報処理方法。
(15)コンピュータのプロセッサに、少なくとも1つのマイクロフォンによって収音された外部音声に基づいて、聴取環境の特性を示す聴取環境特性情報を取得する機能と、取得された前記聴取環境特性情報に基づくフィルタ特性で音楽信号をフィルタリングする機能と、を実現させる、プログラム。
50 携帯端末
60 聴取環境特性情報DB
100、200 ヘッドホン
110、110a、110b、210 マイクロフォン
120、220a、220b スピーカ
130、230、330 制御部
131、231 聴取環境特性情報取得部
132、232、332 音楽信号処理部
133 モニタ信号生成部
134 ノイズキャンセル信号生成部
170、510 通信部
190 聴取環境特性情報統合部
520 位置検出部
Claims (9)
- 少なくとも1つのマイクロフォンによって収音された外部音声に基づいて、聴取環境の特性を示す聴取環境特性情報を取得する聴取環境特性情報取得部と、
取得された前記聴取環境特性情報に基づくフィルタ特性で音楽信号をフィルタリングする音楽信号処理部と、
を備え、
前記外部音声は、ユーザの発話音声であり、
前記聴取環境特性情報取得部は、前記ユーザの身体を経由して第1のマイクロフォンによって収音される前記発話音声と、前記聴取環境を経由して前記第1のマイクロフォンとは異なる第2のマイクロフォンによって収音される前記発話音声と、に基づいて、前記聴取環境特性情報を取得する、
情報処理装置。 - 前記聴取環境特性情報は、前記発話音声が前記聴取環境を経由して前記第2のマイクロフォンに到達するまでの伝達関数である、
請求項1に記載の情報処理装置。 - 前記音楽信号処理部は、少なくとも前記聴取環境の残響特性を前記音楽信号に付与する、
請求項1又は2に記載の情報処理装置。 - 前記音楽信号処理部は、FIRフィルタを用いて、前記聴取環境における前記外部音声の伝達関数を前記音楽信号に畳み込むことにより、前記聴取環境の残響特性を前記音楽信号に付与する、
請求項3に記載の情報処理装置。 - 前記音楽信号処理部は、前記聴取環境特性情報から算出される前記聴取環境の音響特性を示すパラメータを用いて、前記音楽信号をフィルタリングする、
請求項3に記載の情報処理装置。 - 前記音楽信号処理部は、前記聴取環境の残響特性を示すパラメータが反映されたIIRフィルタと、前記聴取環境の周波数特性を示すパラメータが反映されたイコライザと、を含む、
請求項5に記載の情報処理装置。 - 前記音楽信号処理部は、前記音楽信号に係る音声の音圧と外部音声の音圧との音圧比を調整する、
請求項1〜6のいずれか1つに記載の情報処理装置。 - プロセッサが、少なくとも1つのマイクロフォンによって収音された外部音声に基づいて、聴取環境の特性を示す聴取環境特性情報を取得することと、
プロセッサが、取得された前記聴取環境特性情報に基づくフィルタ特性で音楽信号をフィルタリングすることと、
を含み、
前記外部音声は、ユーザの発話音声であり、
前記聴取環境特性情報を取得することは、前記ユーザの身体を経由して第1のマイクロフォンによって収音される前記発話音声と、前記聴取環境を経由して前記第1のマイクロフォンとは異なる第2のマイクロフォンによって収音される前記発話音声と、に基づいて、前記聴取環境特性情報を取得することを含む、
情報処理方法。 - コンピュータのプロセッサに、
少なくとも1つのマイクロフォンによって収音された外部音声に基づいて、聴取環境の特性を示す聴取環境特性情報を取得する機能と、
取得された前記聴取環境特性情報に基づくフィルタ特性で音楽信号をフィルタリングする機能と、
を実現させる、プログラムであって、
前記外部音声は、ユーザの発話音声であり、
前記聴取環境特性情報を取得する機能は、前記ユーザの身体を経由して第1のマイクロフォンによって収音される前記発話音声と、前記聴取環境を経由して前記第1のマイクロフォンとは異なる第2のマイクロフォンによって収音される前記発話音声と、に基づいて、前記聴取環境特性情報を取得する、
プログラム。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014134909 | 2014-06-30 | ||
| JP2014134909 | 2014-06-30 | ||
| PCT/JP2015/063919 WO2016002358A1 (ja) | 2014-06-30 | 2015-05-14 | 情報処理装置、情報処理方法及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2016002358A1 JPWO2016002358A1 (ja) | 2017-04-27 |
| JP6572894B2 true JP6572894B2 (ja) | 2019-09-11 |
Family
ID=55018913
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016531177A Active JP6572894B2 (ja) | 2014-06-30 | 2015-05-14 | 情報処理装置、情報処理方法及びプログラム |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US9892721B2 (ja) |
| EP (1) | EP3163902A4 (ja) |
| JP (1) | JP6572894B2 (ja) |
| CN (1) | CN106664473B (ja) |
| WO (1) | WO2016002358A1 (ja) |
Families Citing this family (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9728179B2 (en) | 2015-10-16 | 2017-08-08 | Avnera Corporation | Calibration and stabilization of an active noise cancelation system |
| WO2017101067A1 (zh) * | 2015-12-17 | 2017-06-22 | 华为技术有限公司 | 一种对周围环境音的处理方法及设备 |
| EP3413590B1 (en) * | 2016-02-01 | 2019-11-06 | Sony Corporation | Audio output device, audio output method, program, and audio system |
| JP6577930B2 (ja) * | 2016-11-21 | 2019-09-18 | 日本電信電話株式会社 | 特徴量抽出装置、音響モデル学習装置、音響モデル選択装置、特徴量抽出方法、およびプログラム |
| US10200800B2 (en) * | 2017-02-06 | 2019-02-05 | EVA Automation, Inc. | Acoustic characterization of an unknown microphone |
| US10483931B2 (en) * | 2017-03-23 | 2019-11-19 | Yamaha Corporation | Audio device, speaker device, and audio signal processing method |
| US10157627B1 (en) * | 2017-06-02 | 2018-12-18 | Bose Corporation | Dynamic spectral filtering |
| WO2019003525A1 (ja) * | 2017-06-28 | 2019-01-03 | ソニー株式会社 | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
| CN109429147B (zh) * | 2017-08-30 | 2021-01-05 | 美商富迪科技股份有限公司 | 电子装置与电子装置的控制方法 |
| JP6972814B2 (ja) * | 2017-09-13 | 2021-11-24 | ソニーグループ株式会社 | イヤホン装置、ヘッドホン装置及び方法 |
| US10096313B1 (en) | 2017-09-20 | 2018-10-09 | Bose Corporation | Parallel active noise reduction (ANR) and hear-through signal flow paths in acoustic devices |
| WO2019082389A1 (ja) * | 2017-10-27 | 2019-05-02 | ヤマハ株式会社 | 音信号出力装置及びプログラム |
| US11087776B2 (en) | 2017-10-30 | 2021-08-10 | Bose Corporation | Compressive hear-through in personal acoustic devices |
| US10235987B1 (en) * | 2018-02-23 | 2019-03-19 | GM Global Technology Operations LLC | Method and apparatus that cancel component noise using feedforward information |
| CN108989931B (zh) * | 2018-06-19 | 2020-10-09 | 美特科技(苏州)有限公司 | 听力保护耳机及其听力保护方法、计算机可读存储介质 |
| JP7119210B2 (ja) * | 2018-08-02 | 2022-08-16 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 能動ノイズ制御システムの自動較正 |
| CN108985277B (zh) * | 2018-08-24 | 2020-11-10 | 广东石油化工学院 | 一种功率信号中背景噪声滤除方法及系统 |
| EP3955589A4 (en) * | 2019-04-08 | 2022-06-15 | Sony Group Corporation | SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING METHOD AND PROGRAM |
| US11882427B2 (en) | 2019-07-10 | 2024-01-23 | Ask Industries Gmbh | Vehicle, comprising a vehicle cabin defining an acoustic space |
| KR20210030708A (ko) * | 2019-09-10 | 2021-03-18 | 엘지전자 주식회사 | 복수의 사용자의 음성 신호 추출 방법과, 이를 구현하는 단말 장치 및 로봇 |
| US10834494B1 (en) * | 2019-12-13 | 2020-11-10 | Bestechnic (Shanghai) Co., Ltd. | Active noise control headphones |
| US11485231B2 (en) * | 2019-12-27 | 2022-11-01 | Harman International Industries, Incorporated | Systems and methods for providing nature sounds |
| JP7600526B2 (ja) * | 2020-02-19 | 2024-12-17 | ヤマハ株式会社 | 音信号処理方法および音信号処理装置 |
| JP7724305B2 (ja) * | 2021-10-27 | 2025-08-15 | パイオニア株式会社 | 情報処理装置、情報処理方法、プログラムおよび記録媒体 |
| CN114286278B (zh) * | 2021-12-27 | 2024-03-15 | 北京百度网讯科技有限公司 | 音频数据处理方法、装置、电子设备及存储介质 |
| CN118785044B (zh) | 2024-09-05 | 2024-12-10 | 南京乐韵瑞信息技术有限公司 | 音频的校正方法、系统和存储介质 |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001224100A (ja) | 2000-02-14 | 2001-08-17 | Pioneer Electronic Corp | 自動音場補正システム及び音場補正方法 |
| US8081780B2 (en) * | 2007-05-04 | 2011-12-20 | Personics Holdings Inc. | Method and device for acoustic management control of multiple microphones |
| US8611557B2 (en) * | 2007-08-17 | 2013-12-17 | J. Craig Oxford | Method and apparatus for audio processing |
| US20090074216A1 (en) * | 2007-09-13 | 2009-03-19 | Bionica Corporation | Assistive listening system with programmable hearing aid and wireless handheld programmable digital signal processing device |
| EP2206362B1 (en) * | 2007-10-16 | 2014-01-08 | Phonak AG | Method and system for wireless hearing assistance |
| JP2008282042A (ja) | 2008-07-14 | 2008-11-20 | Sony Corp | 再生装置 |
| US8155340B2 (en) * | 2008-07-24 | 2012-04-10 | Qualcomm Incorporated | Method and apparatus for rendering ambient signals |
| JP5241921B2 (ja) | 2008-07-29 | 2013-07-17 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 電子音響チャンネルの適応制御とイコライゼーションの方法 |
| US8908874B2 (en) | 2010-09-08 | 2014-12-09 | Dts, Inc. | Spatial audio encoding and reproduction |
| US8571226B2 (en) * | 2010-12-10 | 2013-10-29 | Sony Corporation | Automatic polarity adaptation for ambient noise cancellation |
| WO2012093352A1 (en) | 2011-01-05 | 2012-07-12 | Koninklijke Philips Electronics N.V. | An audio system and method of operation therefor |
| CN102158778A (zh) * | 2011-03-11 | 2011-08-17 | 青岛海信移动通信技术股份有限公司 | 一种降低耳机噪声的方法、设备和系统 |
| JP2013102411A (ja) * | 2011-10-14 | 2013-05-23 | Sony Corp | 音声信号処理装置、および音声信号処理方法、並びにプログラム |
| US20140126733A1 (en) * | 2012-11-02 | 2014-05-08 | Daniel M. Gauger, Jr. | User Interface for ANR Headphones with Active Hear-Through |
-
2015
- 2015-05-14 EP EP15815725.5A patent/EP3163902A4/en not_active Withdrawn
- 2015-05-14 US US15/321,408 patent/US9892721B2/en active Active
- 2015-05-14 CN CN201580034441.6A patent/CN106664473B/zh active Active
- 2015-05-14 JP JP2016531177A patent/JP6572894B2/ja active Active
- 2015-05-14 WO PCT/JP2015/063919 patent/WO2016002358A1/ja not_active Ceased
Also Published As
| Publication number | Publication date |
|---|---|
| JPWO2016002358A1 (ja) | 2017-04-27 |
| WO2016002358A1 (ja) | 2016-01-07 |
| US9892721B2 (en) | 2018-02-13 |
| US20170200442A1 (en) | 2017-07-13 |
| CN106664473B (zh) | 2020-02-14 |
| EP3163902A1 (en) | 2017-05-03 |
| CN106664473A (zh) | 2017-05-10 |
| EP3163902A4 (en) | 2018-02-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6572894B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| CN104918177B (zh) | 信号处理装置、信号处理方法和程序 | |
| US8675884B2 (en) | Method and a system for processing signals | |
| EP2202998B1 (en) | A device for and a method of processing audio data | |
| JP3670562B2 (ja) | ステレオ音響信号処理方法及び装置並びにステレオ音響信号処理プログラムを記録した記録媒体 | |
| CN113676803A (zh) | 一种主动降噪方法及装置 | |
| CN101184345A (zh) | 噪声降低装置、方法、程序以及噪声降低音频输出装置 | |
| JP2009530950A (ja) | ウェアラブル装置のためのデータ処理 | |
| CN101625868A (zh) | 音量调节设备和音量调节方法 | |
| JP2013527491A (ja) | オーディオ再生のための適応的環境ノイズ補償 | |
| CN102131136A (zh) | 自适应环境声抑制和语音跟踪 | |
| CN108235181B (zh) | 在音频处理装置中降噪的方法 | |
| WO2022256577A1 (en) | A method of speech enhancement and a mobile computing device implementing the method | |
| CN113424558B (zh) | 智能个人助理 | |
| CN117998251A (zh) | 音频信号处理方法及装置、音频播放设备、存储介质 | |
| CN108476372B (zh) | 测量装置以及测量方法 | |
| CN107077838B (zh) | 耳机混合主动噪声消除和噪声补偿 | |
| CN115713942A (zh) | 音频处理方法、装置、计算设备及介质 | |
| TW201506913A (zh) | 麥克風系統及其聲音處理方法 | |
| WO2018234618A1 (en) | Processing audio signals | |
| JP5880753B2 (ja) | ヘッドホン、ヘッドホンのノイズ低減方法、ノイズ低減処理用プログラム | |
| CN119137656A (zh) | 在通过耳机或听力设备播放音频信号时降低噪声的装置和相应方法 | |
| KR101602298B1 (ko) | 음량측정기를 이용한 오디오시스템 | |
| JP2012100117A (ja) | 音響処理装置及び方法 | |
| JP2012095254A (ja) | 音量調整装置、音量調整方法及び音量調整プログラム並びに音響機器 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180417 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180417 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190507 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190628 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190716 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190729 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6572894 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
