WO2015029205A1

WO2015029205A1 - 音響処理装置、音響処理方法、及び音響処理プログラム

Info

Publication number: WO2015029205A1
Application number: PCT/JP2013/073255
Authority: WO
Inventors: 好孝村山; 晃後藤
Original assignee: 共栄エンジニアリング株式会社
Priority date: 2013-08-30
Filing date: 2013-08-30
Publication date: 2015-03-05
Also published as: US20160286331A1; CN105556990B; EP3041272A1; EP3041272A4; JP6161706B2; US10524081B2; CN105556990A; JPWO2015029205A1

Abstract

　異環境で聴取される音色の相違を補正して両環境における音色を良好に符合させる音響処理装置を提供する。同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整するイコライザを備える。このイコライザは、異なる方向に音像定位する複数の音像信号に対応して複数設けられる。そして、イコライザは、対応の音像信号に対して特有の周波数特性変更処理を行う。各イコライザは、音像信号が定位する方向に応じて生じる特有の周波数特性の変化を相殺する伝達関数を有する。

Description

音響処理装置、音響処理方法、及び音響処理プログラム

　本発明は、所定環境用に調整された音響信号を他の環境用に変更する音響処理技術に関する。

　リスナーは、左右の耳に到来する音波の時間差、音圧差、響きなどを感知し、音像を其の方向に知覚する。音源から両耳までの頭部伝達関数（Ｈｅａｄ－Ｒｅｌａｔｅｄ　Ｔｒａｎｓｆｅｒ　Ｆｕｎｃｔｉｏｎ）が原音源と再生音場において良好に符合していれば、再生音場にてリスナーに対し原音場を模擬した音像を知覚させ得る。

　また、音波は、空間、頭部、及び耳を経由して鼓膜に至るまでに周波数ごとの特有な音圧レベルの変化が生じる。この周波数ごとに特有な音圧レベルの変化を伝達特性という。原音場と聴取音場の頭部伝達関数が良好に符合してれば、同様な伝達特性によりリスナーに原音と同じ音色を聴取させ得る。

　しかしながら、ほとんどの場合、原音場と聴取音場の頭部伝達関数は異なる。例えば、実際又は仮想のコンサートホールの音場空間をリビングルームに再現することは困難である。そのため、原音場空間の音源と受音点との位置関係に対する聴取空間のスピーカと受音点との位置関係は、距離及び角度において相違し、頭部伝達関数は符合せず、リスナーは、原音の音源位置及び音色と異なる音像位置及び音色を知覚してしまう。原音場空間と聴取空間とにおける音源の数の相違も一因である。すなわち、音像定位方法がステレオスピーカ等のサラウンド出力手法によるものであることも一因となる。

　そこで、一般的には、レコーディングスタジオやミキシングスタジオにおいて、録音又は人工的に作成した音響信号に、原音の音響効果を所定の聴取環境で模擬するための音響処理が加えられる。例えば、スタジオにおいて、ミキサー者は、一定のスピーカ配置と受音点を想定し、各スピーカから出力される複数チャンネルの音響信号に対して、原音の音源位置を摸した音像が知覚されるように意図的に時間差と音圧差を修正し、また、原音の音色と符合するように周波数ごとに音圧レベルを変化させる。

　ＩＴＵ－Ｒ（Ｉｎｔｅｒｎａｔｉｏｎａｌ　Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ　Ｕｎｉｏｎ－Ｒａｄｉｏ　ｓｅｃｔｏｒ）では、５．１ｃｈ等のスピーカ配置を具体的に推奨し、例えばＴＨＸなどでは、映画館におけるスピーカ配置、音の大きさ、館内の大きさなどの基準を定めている。このような推奨や基準をミキサー者及びリスナーが従うことで、たとえ聴取環境が原音場と相違していても、聴取環境にてリスナーの鼓膜に音響信号が到達するときには、原音の音源位置と音色が良好に模擬される。

　但し、原音場と聴取環境とを一致させる必要はなくなるとはいえ、リスニングルームを都合よく上記推奨や基準に合わせることは敷居が高い。そこで、各メーカは、再生装置に、各再生装置が作り出す聴取環境に合わせて音響信号を再調整し、リスニングルームに原音場を模擬する機能を再生装置に付加している。

　例えば、再生装置に手動の方向調整機能やイコライザを備え、リスナーが位相特性、周波数特性、残響特性等の再生特性を数値入力することで、その操作に従って、音響信号の時間差、音圧差、周波数特性を変化させる手法もある（例えば、特許文献１参照。）。

　また、原音場の周波数特性等を予めマッピングしておき、またマイクロホンで聴取位置での音波信号を収録し、マッピングデータと収録データとを突き合わせて、収録データがマッピングデータと一致するように、スピーカごとの音波信号の時間差、音圧差、及び周波数ごとの音圧レベルを調整していく手法もある（例えば、特許文献２参照。）。

特開２００１－２２４１００号公報ＷＯ２００６／００９００４号公報

　特許文献１の手法では、ユーザが原音場をイメージし、その原音場から位相特性、周波数特性、残響特性等を想定し、その想定を数値として再生装置に入力しなくてはならない。このようなユーザ操作は、原音場を模擬した聴取音場を作り出すために極めて煩雑かつ困難な作業となり、原音場と聴取環境の良好な頭部伝達関数の符合はほぼ不可能といってよい。

　特許文献２の手法では、ユーザの手間はなくなるとはいえ、原音場を模擬するためにユーザに負担を与えることに代わりはなく、またマイクロホン、膨大なマッピングデータ、マッピングデータと収録データから音響信号の補正係数を演算する高度な演算ユニットを必要するためにかなりのコスト高となる。

　また、これら手法は、音響信号に対して一律なイコライザ処理を行う。音響信号は、各方向に音像定位された音像信号をダウンミキシングした信号であり、各方向の音像成分が含まれている。一律なイコライザ処理では、特定方向の音像については推奨又は基準に定められた聴取環境に倣った音場空間でリスニングしているかの如く音色を再現するが、他の音像については音色の再現が不良であることが確認された。何れの音像についても音色の再現が不良となることもある。

　本願発明は、上記のような従来技術の問題点を解決するために成されたものであり、その目的は、異なる環境で聴取される音色を良好に符合させる音響処理装置、音響処理方法、及び音響処理プログラムを提供することにある。

　発明者等は、鋭意研究の結果、音響信号に対する一律なイコライザ処理による音色再現の不良原因を特定し、音像定位方向に応じて音波の伝達特性が異なることを突き止めた。一律なイコライザ処理では、ある方向に定位する音波の周波数変化を偶然にも相殺することはあるかもしれないが、他方向に定位する音波の周波数変化とは符合せず、そのため、音像ごとに見た場合の音色の再現が、原音場等の想定される環境における其れと異なることがわかった。

　従って、上記の目的を達成するために、本実施形態の音響処理装置は、異環境で聴取される音色の相違を補正する音響処理装置であって、同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整するイコライザを備え、前記イコライザは、異なる方向に音像定位する複数の音像信号に対応して複数設けられ、対応の音像信号に対して特有の周波数特性変更処理を行うこと、を特徴とする。

　前記各イコライザは、音像定位の方向ごとに特有の伝達関数を有し、対応の音像信号に対して前記特有の伝達関数を適用するようにしてもよい。

　前記イコライザが有する伝達関数は、対応の音像信号が音像定位させるために発生させるチャンネル間の相違に基づくようにしてもよい。

　前記チャンネル間の相違は、出力の際に音像定位の方向に従ってチャンネル間に与えられる振幅差、時間差、又はこれらの両方であるようにしてもよい。

　前記イコライザが有する伝達関数は、前記一方の環境及び他方の環境での各耳に到達する音波の各伝達関数に更に基づくようにしてもよい。

　音像信号を音像定位させるためにチャンネル間に相違を与える音像定位設定手段を更に備え、前記イコライザが有する伝達関数は、前記音像定位設定手段が与える相違に基づくようにしてもよい。

　音像定位方向が異なる複数の音像成分を含む音響信号から各音像成分を分離して各音像信号を生成する音源分離手段を更に備え、前記イコライザは、前記音源分離手段が生成した前記音像信号に対して特有の周波数特性変更処理を行うようにしてもよい。

　前記音源分離手段は、各音像成分に対応して複数設けられ、前記音響信号の一方のチャンネルについて特定時間遅延させて、対応の音像成分を同振幅同位相に調整するフィルタと、前記音響信号の一方のチャンネルに係数ｍを乗じた上でチャンネル間の誤差信号を生成し、この誤差信号を含む係数ｍの漸化式を演算する係数決定手段と、前記係数ｍを前記音響信号に乗じる合成手段と、を備えるようにしてもよい。

　また、上記の目的を達成するために、本実施形態の音響処理方法は、異環境で聴取される音色の相違を補正する音響処理方法であって、同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整する調整ステップを有し、前記調整ステップは、異なる方向に音像定位する複数の音像信号に対応して特有に行われ、対応の音像信号に対して特有の周波数特性変更処理を行うこと、を特徴とする。

　また、上記の目的を達成するために、本実施形態の音響処理プログラムは、コンピュータに異環境で聴取される音色の相違を補正する機能を実現させる音響処理プログラムであって、前記コンピュータを、同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整するイコライザとして機能させ、前記イコライザは、異なる方向に音像定位する複数の音像信号に対応して複数設けられ、対応の音像信号に対して特有の周波数特性変更処理を行うこと、を特徴とする。

　本発明によれば、音響信号に含有の音像成分ごとに特有な周波数特性の調整を行うようにしたため、各音像成分に特有な伝達特性の変化に個別対応が可能となり、各音像成分の音色を良好に再現できる。

第１の実施形態に係る音響処理装置の構成を示すブロック図である。第１の実施形態に係る想定聴取環境、実際聴取環境、及び各音像定位方向を示す模式図である。各スピーカセット及び各音像定位方向におけるインパルス応答の時間領域及び周波数領域における解析結果を示すグラフである。第２の実施形態に係る想定聴取環境、実際聴取環境、及び音像定位方向を示す模式図である。第２の実施形態に係る音響処理装置の構成を示すブロック図である。第３の実施形態に係る音響処理装置の構成を示すブロック図である。第３の実施形態に係る音源分離部の構成を示すブロック図である。

　（第１の実施形態）
　第１の実施形態に係る音響処理装置について図面を参照しつつ詳細に説明する。図１に示すように、音響処理装置は、前段側に３種類のイコライザＥＱ１、ＥＱ２、ＥＱ３を備え、後段側に２チャンネル分の加算器１０、２０を備え、左スピーカＳａＬ及び右スピーカＳａＲに接続される。前段側は、回路上、左スピーカＳａＬ及び右スピーカＳａＲに遠い側である。左スピーカＳａＬ及び右スピーカＳａＲは、信号に従って音波を発生させる振動源である。左スピーカＳａＬ及び右スピーカＳａＲが再生、すなわち音波を発生し、その音波が聴取者の両耳に届き、聴取者は音像を知覚する。

　各イコライザＥＱ１、ＥＱ２、ＥＱ３には、対応の音像信号が入力される。各イコライザＥＱ１、ＥＱ２、ＥＱ３は、回路特有の伝達関数を有し、この伝達関数を入力信号に畳み込む。ここで、音響信号は、サラウンドスピーカで再生したときに擬似的に生じる各音像定位方向の音像成分をミキシングした信号であり、各スピーカＳａＬ及びＳａＲに対応したチャンネル信号で構成され、各音像信号を含有する。音像信号は、音響信号の音像成分である。すなわち、音響信号が音像信号に音源分離され、対応の音像信号が対応のイコライザＥＱｉ（ｉ＝１，２，３）に入力される。音像信号は、音響信号にミキシングされることなく、当初より区別されて用意されている場合もある。

　イコライザＥＱ１、ＥＱ２、ＥＱ３は例えばＦＩＲフィルタやＩＩＲフィルタである。３種類のイコライザＥＱｉは、センターに音像定位する音像信号に対応したイコライザＥＱ２、左スピーカＳａＬの正面に音像定位する音像信号に対応したイコライザＥＱ１、右スピーカＳａＲの正面に音像定位する音像信号に対応するイコライザＥＱ３である。

　加算器１０は、左スピーカＳａＬから出力する左チャンネルの音響信号を生成する。この加算器１０は、イコライザＥＱ１を経た音像信号とイコライザＥＱ２を経た音像信号を加算する。加算器２０は、右スピーカＳａＲから出力する右チャンネルの音響信号を生成する。この加算器２０は、イコライザＥＱ２を経た音像信号とイコライザＥＱ３を経た音像信号を加算する。

　尚、音像定位は、左右スピーカＳａＬ及びＳａＲから受音点に到達する音波の音圧差及び時間差により決定される。本実施形態において、左スピーカＳａＬの正面に音像定位する音像信号は、左スピーカＳａＬのみから出力し、右スピーカＳａＲの音圧を零とすることで、概ね音像定位させる。右スピーカＳａＲの正面に音像定位する音像信号は、右スピーカＳａＲのみから出力し、左スピーカＳａＬの音圧を零とすることで、概ね音像定位させる。

　このような音響処理装置は、対応のイコライザＥＱｉに対応の音像信号が入力され、音像信号に対して特有の伝達関数を畳み込むことで、他方の環境である実際聴取環境における受音点での音色を一方の環境である想定聴取環境における受音点での音色と一致させる。

　実際聴取環境とは、音響信号を実際に再生するスピーカと受音点との位置関係を有するリスニング環境である。想定聴取環境とは、ユーザが所望する環境であり、例えば、原音場、ＩＴＵ－Ｒで定められた基準環境、ＴＨＸで推奨される推奨環境、或いはミキサー者等の製作者が想定する環境等、これら環境におけるスピーカと受音点との位置関係を有する環境である。

　この音響処理装置の原理と共にイコライザＥＱｉの伝達関数について図２に基づき説明する。想定聴取環境において、左スピーカＳｅＬから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＬＬ、左スピーカＳｅＬから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＬＲ、右スピーカＳｅＲから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＲＬ、右スピーカＳｅＲから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＲＲとする。また、左スピーカＳｅＬから音像信号Ａが出力され、右スピーカＳｅＲから音像信号Ｂが出力されるものとする。

　このとき、受音点でユーザの左耳が聴取する音波信号は、以下式（１）の音波信号ＤｅＬとなり、受音点でユーザの右耳が聴取する音波信号は、以下式（２）の音波信号ＤｅＲとなる。以下式（１）及び（２）は、左スピーカＳｅＬの出力音が右耳にも到達し、右スピーカＳｅＲの出力音が左耳にも到達することを想定している。

　更に、実際聴取環境において、左スピーカＳａＬから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＬＬ、左スピーカＳａＬから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＬＲ、右スピーカＳａＲから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＲＬ、右スピーカＳａＲから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＲＲとする。また、左スピーカＳａＬから音像信号Ａが出力され、右スピーカＳａＲから音像信号Ｂが出力されるものとする。

　このとき、受音点でユーザの左耳が聴取する音波信号は、以下式（３）の音波信号ＤａＬとなり、受音点でユーザの右耳が聴取する音波信号は、以下式（４）の音波信号ＤａＲとなる。

　ここで、センターに音像定位する音像信号は、左右のチャンネルで振幅差及び時間差は等しく、音像信号Ａ＝音像信号Ｂとすることができるから、想定聴取環境における上記式（１）及び（２）は以下式（５）と表すことができ、実際聴取環境における上記式（３）及び（４）は以下式（６）で表すことができる。尚、受音点は、一対のスピーカを結ぶ線分に直交し、かつ其の線分の中点を通る線上に位置するものとする。

　音響処理装置は、センターに定位する各音像信号を受音点で聴取したときの上記式（５）で表される音色を実際聴取環境で再現する。すなわち、イコライザＥＱ２は、以下式（７）で表される伝達関数Ｈ１を有し、センターに定位させる音像信号Ａに畳み込む。そして、イコライザＥＱ２は、伝達関数Ｈ１を畳み込んだ後の音像信号Ａを両加算器１０，２０に等分に入力する。

　次に、左のスピーカの正面に音像定位する音像信号は、例えば、想定聴取環境及び実際聴取環境において左スピーカＳｅＬ及び左スピーカＳａＬからのみ出力される。この場合、想定聴取環境及び実際聴取環境における左耳で聴取される音波信号ＤｅＬ及び音波信号ＤａＬ、想定聴取環境及び実際聴取環境における右耳で聴取される音波信号ＤｅＲ及び音波信号ＤａＲは、以下式（８）～（１１）となる。

　音響処理装置は、左スピーカＳｅＬの正面で音像定位する音像信号を受音点で聴取したときの上記式（８）及び（９）の音色を実際聴取環境で再現する。すなわち、イコライザＥＱ１は、左耳に聴取させる音像信号Ａに対して以下式（１２）で表される伝達関数Ｈ２を畳み込み、右耳に聴取させる音像信号Ａに対して以下式（１３）で表される伝達関数Ｈ３を畳み込む。

　左スピーカの正面に音像定位する音像信号を処理するイコライザＥＱ１は、この伝達関数Ｈ２及びＨ３を有し、音像信号Ａに対して伝達関数Ｈ２及びＨ３を一定比率α（０≦α≦１）で畳み込み、左側チャンネルの音響信号を生成する加算器１０に入力する。換言すると、このイコライザＥＱ１は、以下式（１４）の伝達関数Ｈ４を有している。

　次に、右のスピーカの正面に音像定位する音像信号は、例えば、想定聴取環境及び実際聴取環境において右スピーカＳｅＲ及び右スピーカＳａＲからのみ出力される。この場合、想定聴取環境及び実際聴取環境における左耳で聴取される音波信号ＤｅＬ及び音波信号ＤａＬ、想定聴取環境及び実際聴取環境における右耳で聴取される音波信号ＤｅＲ及び音波信号ＤａＲは、以下式（１５）～（１８）となる。

　音響処理装置は、右スピーカＳｅＲの正面で音像定位する音像信号を受音点で聴取したときの上記式（１５）及び（１６）の音色を実際聴取環境で再現する。すなわち、イコライザＥＱ３は、左耳に聴取させる音像信号Ｂに対して以下式（１９）で表される伝達関数Ｈ５を畳み込み、右耳に聴取させる音像信号Ｂに対して以下式（２０）で表される伝達関数Ｈ６を畳み込む。

　右スピーカの正面に音像定位する音像信号を処理するイコライザＥＱ３は、この伝達関数Ｈ５及びＨ６を有し、音像信号Ｂに対して伝達関数Ｈ５及びＨ６を一定比率α（０≦α≦１）で畳み込み、右側チャンネルの音響信号を生成する加算器２０に入力する。換言すると、このイコライザＥＱ３は、以下式（２１）の伝達関数Ｈ７を有している。

　発明者らは、左のスピーカの正面に音像が定位する音像信号を見開き３０度及び見開き６０度のスピーカセットと一方の左耳までのインパルス応答を計測し、頭部伝達関数を算出した。その結果の時間領域及び周波数領域における解析結果を図３の（ａ）に示す。また、音像信号の音像定位をセンターに変更して、同じようにインパルス応答を収録した。その収録結果の時間領域及び周波数領域における解析結果を図３の（ｂ）に示す。図３の（ａ）（ｂ）において各上図が時間領域、各下図が周波数領域である。

　図３の（ａ）（ｂ）に示すように、音像定位する方向が何れであろうとも、スピーカセットの変更に伴ってインパルス応答の周波数特性が変化している。更に、図３の（ａ）と（ｂ）の違いからわかるように、周波数特性の変化の具合は、音像定位させる方向によってもまるで異なることがわかる。

　一方、第１の実施形態に係る音響処理装置は、センター、左スピーカＳａＬの正面、及び右スピーカＳａＲの正面に音像を定位させる各音像信号に特有の３種類のイコライザＥＱ１、ＥＱ２、ＥＱ３を有する。センターに音像定位する音像信号が入力されるイコライザＥＱ２は、音像信号に伝達関数Ｈ１を畳み込み、左スピーカＳａＬに音像を定位させる音像信号が入力されるイコライザＥＱ１は、音像信号に伝達関数Ｈ４を畳み込み、右スピーカＳａＲに音像を定位させる音像信号が入力されるイコライザＥＱ３は、音像信号に伝達関数Ｈ７を畳み込む。

　そして、センターに音像を定位させる音像信号が入力されるイコライザＥＱ２は、伝達関数Ｈ１を畳み込んだ音像信号を、左スピーカＳａＬから出力する音響信号を生成する加算器１０と右スピーカＳａＲから出力する音響信号を生成する加算器２０に等しく入力する。

　左スピーカＳａＬに音像を定位させる音像信号が入力されるイコライザＥＱ１は、伝達関数Ｈ４を畳み込んだ音像信号を、左スピーカＳａＬから出力する音響信号を生成する加算器１０に入力する。また、右スピーカＳａＲに音像を定位させる音像信号が入力されるイコライザＥＱ３は、伝達関数Ｈ７を畳み込んだ音像信号を、右スピーカＳａＲから出力する音響信号を生成する加算器２０に入力する。

　以上のように、本実施形態に係る音響処理装置は、異環境で聴取される音色の相違を補正する装置であって、同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整するイコライザＥＱ１、ＥＱ２、ＥＱ３を備える。このイコライザＥＱ１、ＥＱ２、ＥＱ３は、異なる方向に音像定位する複数の音像信号に対応して複数設けられ、対応の音像信号に対して特有の周波数特性変更処理を行う。

　これにより、音像定位する方向に応じて周波数特性の変化が異なる各音像信号に対し、その特有の周波数特性の変化を相殺する特有のイコライザ処理を行うこととなり、それぞれの音響信号に最適な音色補正が実施され、出力される音波の音像定位方向が何れであろうとも、実際聴取環境を良好に想定聴取環境に倣わせることができる。

　（第２の実施形態）
　第２の実施形態に係る音響処理装置について図面を参照しながら詳細に説明する。第２の実施形態に係る音響処理装置は、音像信号ごとの音色補正処理を一般化したものであり、任意の音像定位方向を持つ音像信号に対して特有の音色補正処理を行う。

　図４に示すように、想定聴取環境において、左スピーカＳｅＬから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＬＬ、左スピーカＳｅＬから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＬＲ、右スピーカＳｅＲから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＲＬ、右スピーカＳｅＲから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣｅＲＲとする。

　このとき、所定方向に音像定位する音像信号Ｓは、想定聴取環境において以下式（２２）の音波信号ＳｅＬとなってユーザの左耳で聴取され、想定聴取環境において以下式（２３）の音波信号ＳｅＲとなってユーザの右耳で聴取される。式中、Ｆａ及びＦｂは、所定方向に音像定位を与えるために、音像信号の振幅及び遅延差を変更するチャンネルごとの伝達関数である。Ｆａは、左スピーカＳｅＬから出力される音像信号Ｓに畳み込まれる伝達関数であり、Ｆｂは、左スピーカＳｅＬから出力される音像信号Ｓに畳み込まれる伝達関数である。

　更に、実際聴取環境において、左スピーカＳａＬから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＬＬ、左スピーカＳａＬから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＬＲ、右スピーカＳａＲから左耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＲＬ、右スピーカＳａＲから右耳へ通じる伝達経路が与える周波数変化の伝達関数をＣａＲＲとする。

　このとき、所定方向に音像定位する音像信号Ｓは、想定聴取環境において以下式（２４）の音波信号ＳａＬとなってユーザの左耳で聴取され、想定聴取環境において以下式（２５）の音波信号ＳａＲとなってユーザの右耳で聴取される。

　上記式（２２）乃至（２５）は、上記式（１）乃至（４）、式（８）乃至（１１）、及び式（１５）乃至（１８）を一般化したものである。センターに音像定位する音像信号に関して、伝達関数Ｆａ＝伝達関数Ｆｂとなり、式（２２）乃至（２５）は式（１）乃至（４）となる。左スピーカ正面に音像定位する音像信号に関して、伝達関数Ｆｂ＝０となり、式（２２）乃至（２５）は式（８）乃至（１１）となる。右スピーカ正面に音像定位する音像信号に関して、伝達関数Ｆａ＝０となり、式（２２）乃至（２５）は式（１５）乃至（１８）となる。

　そうすると、以下の式（２６）及び（２７）で表される伝達関数Ｈ８及びＨ９が上記式（２４）及び（２５）に畳み込まれれば、上記式（２２）及び（２３）と一致することとなる。

　伝達関数Ｈ８を上記式（２４）に畳み込み、伝達関数Ｈ９を上記式（２５）に畳み込み、左スピーカＳａＬに対応するチャンネルの音像信号Ｆａ・Ｓと右スピーカＳａＲに対応するチャンネルの音像信号Ｆｂ・Ｓごとに整理すると、左スピーカＳａＬに対応するチャンネルの音像信号に畳み込む以下式（２８）の伝達関数Ｈ１０が導かれ、右スピーカＳａＲに対応するチャンネルの音像信号に適用する以下式（２９）の伝達関数Ｈ１１が導かれる。式中のαは、重み付けであり、想定音場における音像を知覚させうる左右耳の頭部伝達関数において、音像に近い耳側の伝達関数を実際の聴取環境における、耳側の伝達関数への近似度合いを決定する値（０≦α≦１）である。

　図５は、以上を踏まえた音響処理装置の構成を示す構成図である。図５に示すように、音響処理装置は、音像信号Ｓ１、Ｓ２、Ｓ３・・・Ｓｎの数に対応してイコライザＥＱ１、ＥＱ２、ＥＱ３・・・ＥＱｎを備え、イコライザＥＱ１、ＥＱ２、ＥＱ３・・・ＥＱｎの後段にはチャンネル数に対応して加算器１０、２０・・・を備える。各イコライザＥＱ１、ＥＱ２、ＥＱ３・・・ＥＱｎは、伝達関数Ｈ１０及びＨ１１を基本とし、処理する音像信号Ｓ１、Ｓ２、Ｓ３・・・Ｓｎに振幅差及び時間差を与える伝達関数Ｆａ及び伝達関数Ｆｂにより特定された伝達関数Ｈ１０_ｉ及びＨ１１_ｉを有する。

　イコライザＥＱｉは、音像信号Ｓｉが入力されると、その音像信号Ｓｉに対して特有の伝達関数Ｈ１０_ｉ及びＨ１１_ｉを適用し、音像信号Ｈ１０_ｉ・Ｓｉを左スピーカＳａＬに対するチャンネルの加算器１０に入力し、音像信号Ｈ１１_ｉ・Ｓｉを右スピーカＳａＲに対するチャンネルの加算器２０に入力する。

　左スピーカＳａＬに接続された加算器１０は、音像信号Ｈ１０_１・Ｓ１、音像信号Ｈ１０_２・Ｓ２、・・・音像信号Ｈ１０_ｎ・Ｓｎを加算して、左スピーカＳａＬから出力する音響信号を生成し、左スピーカＳａＬに出力すればよい。右スピーカＳａＲに接続された加算器２０は、音像信号Ｈ１１_１・Ｓ１、音像信号Ｈ１１_２・Ｓ２、・・・音像信号Ｈ１１_ｎ・Ｓｎを加算して、右スピーカＳａＲから出力する音響信号を生成し、右スピーカＳａＲに出力すればよい。

　（第３の実施形態）
　第３の実施形態に係る音像処理装置は、図６に示すように、第１及び第２の実施形態に係るイコライザＥＱ１、ＥＱ２、ＥＱ３・・・ＥＱｎの他、音源分離部３０ｉ及び音像定位設定部４０ｉを備える。

　音源分離部３０ｉは、複数のチャンネルで構成される音響信号が入力され、この音響信号から各音像定位方向の音像信号を音源分離する。音源分離部３０ｉで分離された音像信号が各イコライザに入力される。音源分離手法は公知の手法を含む各種手法を用いることができる。

　例えば、音源分離手法としては、チャンネル間の振幅差や位相差を解析し、統計的解析、周波数解析、複素解析等を行い、波形構造の違いを検出し、その検出結果をもとに特定周波数帯の音像信号を強調すればよい。特定周波数帯をずらしつつ複数設定することで、各方向の音像信号を分離することができる。

　音像定位設定部４０ｉは、各イコライザＥＱ１、ＥＱ２、ＥＱ３・・・ＥＱｎと各加算部１０、２０・・・との間に介在し、音像信号に音像定位方向を再設定する。音像定位設定部４０ｉは、左スピーカＳａＬから出力する音像信号に伝達関数Ｆａｉ（ｉ＝１，２，３・・・ｎ）を適用するフィルタを備え、右スピーカＳａＲから出力する音像信号に伝達関数Ｆｂｉ（ｉ＝１，２，３・・・ｎ）を適用するフィルタを備えている。この伝達関数Ｆａｉと伝達関数Ｆｂｉは、式（２６）及び式（２７）における伝達関数Ｈ８及びＨ９にも反映される。

　フィルタは、例えばゲイン回路と遅延回路で構成される。このフィルタは、チャンネル間で伝達関数Ｆａｉと伝達関数Ｆｂｉが示す振幅差及び時間差となるように音像信号を変更する。１つのイコライザＥＱｉには一対のフィルタが接続され、これらフィルタの伝達関数Ｆａｉと伝達関数Ｆｂｉが音像信号に新たな音像定位方向を与える。

　更に、音源分離部３０ｉについて其の一例を説明する。図７は、音源分離部の構成を示すブロック図である。音響処理装置は複数の音源分離部３０１、３０２、３０３、・・・３０ｎを備える。各音源分離部３０ｉは、それぞれ特定の音像信号を音響信号から抽出する。音像信号の抽出手法は、チャンネル間に位相差のない音像信号を相対的に強調し、その他の音像信号を相対的に抑制するものである。音響信号に含有の各音像信号に対して、特定の音像信号がチャンネル間で有する位相差を零にするディレイを一律に適用することで、特定の音像信号についてのみ、チャンネル間の位相差を一致させる。ディレイの度合いを各音源分離部で異ならせることで、各音像定位方向の音像信号が抽出される。

　この音源分離部３０ｉは、一方のチャンネルの音響信号に対する第１フィルタ３１０と、他方のチャンネルの音響信号に対する第２フィルタ３２０とを備える。また、音源分離部３０ｉは、第１フィルタ３１０と第２フィルタ３２０を経た信号が入力される係数決定回路及び合成回路を並列接続して備えている。

　第１フィルタ３１０は、ＬＣ回路等であり、一方のチャンネルの音響信号に一定の遅延時間を与えて、他方のチャンネルの音響信号に対して一方のチャンネルの音響信号を常に遅延させる。つまり、第１フィルタは、音像定位のためにチャンネル間に設定される時間差よりも長く遅延させる。これにより、他方のチャンネルの音響信号に含有する総ての音像成分が、一方のチャンネルの音響信号が含有する総ての音像信号に対して進んだ状態となる。

　第２フィルタ３２０は、例えばＦＩＲフィルタやＩＩＲフィルタである。この第２フィルタの伝達関数Ｔ１は、以下式（３０）で表される。式中、ＣｅＬ及びＣｅＲは、想定聴取環境において伝達経路が音波に与える伝達関数であり、その伝達経路は、音源分離部が抽出する音像信号の音像位置から受音点までである。ＣｅＬは音像位置から左耳まで、ＣｅＲは音像位置から右耳までである。

　第２フィルタ３２０は、上記式（３０）を満たす伝達関数Ｔ１を有し、特定方向に定位する音像信号を同振幅同位相に揃える一方、特定方向から逸れた方向に定位する音像信号に対して特定方向から逸れるほど、時間差を付けていく。

　係数決定回路３３０は、一方のチャンネルの音響信号と他方のチャンネルの音響信号の誤差を計算し、誤差に応じた係数ｍ（ｋ）を決定する。

　ここで、係数決定回路３３０に同着の音響信号の誤差信号ｅ（ｋ）を以下式（３１）のように定義する。式中、Ａ（ｋ）は、一方のチャンネルの音響信号であり、Ｂ（ｋ）は、他方のチャンネルの音響信号である。

　係数更新回路３３０は、誤差信号ｅ（ｋ）を係数ｍ（ｋ－１）の関数とし、誤差信号ｅ（ｋ）を含む係数ｍ（ｋ）の隣接二項間漸化式を演算することで、誤差信号ｅ（ｋ）が最小となる係数ｍ（ｋ）を探索する。係数決定回路３３０は、この演算処理により、音響信号のチャンネル間に時間差が生じていればいるほど、係数ｍ（ｋ）を減少させる方向で更新し、時間差がなければ係数ｍ（ｋ）を１に近づけて出力する。

　隣接二項間漸化式の一例は、以下式（３２）の通りである。

　合成回路３４０は、係数決定回路３３０の係数ｍ（ｋ）と両チャンネルの音響信号が入力される。合成回路３４０は、両チャンネルの音響信号に任意の比率で係数ｍ（ｋ）を乗じ、任意の比率で足し合わせて、その結果として特定の音像信号を出力すればよい。

　（その他の実施形態）
　本明細書においては、本発明に係る実施形態を説明したが、この実施形態は例として提示したものであって、発明の範囲を限定することを意図していない。実施形態で開示の構成の全て又は何れかを組み合わせたものも包含される。以上のような実施形態は、その他の様々な形態で実施されることが可能であり、発明の範囲を逸脱しない範囲で、種々の省略や置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

　例えば、実際聴取環境における出力手段としては、音波を生じさせうる振動源、ヘッドホン、イヤホン様々な形態が考えられる。また、音響信号は実音源でも仮想音源でもよく、その音源数が異なる実音源、仮想音源であってもよい、任意に分離抽出した音像信号の数で対応が可能である。

　また、音源分離装置は、ＣＰＵやＤＳＰのソフトウェア処理として実現してもよいし、専用のデジタル回路で構成するようにしてもよい。ソフトウェア処理として実現する場合には、ＣＰＵ、外部メモリ、ＲＡＭを備えるコンピュータにおいて、エコライザＥＱｉ、音源分離部３０ｉ、音像位置設定部４０ｉと同一の処理内容を記述したプログラムをＲＯＭやハードディスクやフラッシュメモリ等の外部メモリに記憶させ、ＲＡＭに適宜展開し、ＣＰＵで其のプログラムに従って演算を行うようにすればよい。

　このプログラムは、ＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、サーバ等の記憶媒体に記憶しておき、ドライブにメディアを挿入することにより、又はネットワークを介してダウンロードすることによりインストールすればよい。

　また、音響処理装置に接続されるスピーカセットは、ステレオスピーカ、５．１ｃｈスピーカ等のように２以上のスピーカを備えるものであればよく、スピーカごとの伝達経路に応じた伝達関数、チャンネル間の振幅差及び時間差を加味した伝達関数をイコライザＥＱｉに備えるようにすればよい。更に、各イコライザＥＱ１、ＥＱ２、ＥＱ３、・・・ＥＱｎは、スピーカセットの幾つかの態様に合わせて複数種類の伝達関数を用意しておき、スピーカセットのユーザによる選択に合わせて適用する伝達関数を決定するようにしてもよい。

　ＥＱ１、ＥＱ２、ＥＱ３・・・ＥＱｎ　イコライザ
　１０、２０　加算器
　３０１、３０２、３０３、・・・３０ｎ　音源分離部
　３１０　第１フィルタ
　３２０　第２フィルタ
　３３０　係数決定回路
　３４０　合成回路
　４０１、４０２、４０３、・・・４０ｎ　音像位置設定部
　ＳａＬ　スピーカ
　ＳａＲ　スピーカ

Claims

　異環境で聴取される音色の相違を補正する音響処理装置であって、
　同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整するイコライザを備え、
　前記イコライザは、
　異なる方向に音像定位する複数の音像信号に対応して複数設けられ、
　対応の音像信号に対して特有の周波数特性変更処理を行うこと、
　を特徴とする音響処理装置。
　前記各イコライザは、音像定位の方向ごとに特有の伝達関数を有し、対応の音像信号に対して前記特有の伝達関数を適用すること、
　を特徴とする請求項１記載の音響処理装置。
　前記イコライザが有する伝達関数は、対応の音像信号を音像定位させるために発生させるチャンネル間の相違に基づくこと、
　を特徴とする請求項２記載の音響処理装置。
　前記チャンネル間の相違は、出力の際に音像定位の方向に従ってチャンネル間に与えられる振幅差、時間差、又はこれらの両方であること、
　を特徴とする請求項３記載の音響処理装置。
　前記イコライザが有する伝達関数は、前記一方の環境及び他方の環境での各耳に到達する音波の各頭部伝達関数に更に基づくこと、
　を特徴とする請求項２乃至４の何れかに記載の音響処理装置。
　音像信号を音像定位させるためにチャンネル間に相違を与える音像定位設定手段を更に備え、
　前記イコライザが有する伝達関数は、前記音像定位設定手段が与える相違に基づくこと、
　を特徴とする請求項３乃至５の何れかに記載の音響処理装置。
　音像定位方向が異なる複数の音像成分を含む音響信号から各音像成分を分離して各音像信号を生成する音源分離手段を更に備え、
　前記イコライザは、前記音源分離手段が生成した前記音像信号に対して特有の周波数特性変更処理を行うこと、
　を特徴とする請求項１乃至６の何れかに記載の音響処理装置。
　前記音源分離手段は、
　各音像成分に対応して複数設けられ、
　前記音響信号の一方のチャンネルについて特定時間遅延させて、対応の音像成分を同振幅同位相に調整するフィルタと、
　前記音響信号の一方のチャンネルに係数ｍを乗じた上でチャンネル間の誤差信号を生成し、この誤差信号を含む係数ｍの漸化式を演算する係数決定手段と、
　前記係数ｍを前記音響信号に乗じる合成手段と、
　を備えること、
　を特徴とする請求項７記載の音響処理装置。
　異環境で聴取される音色の相違を補正する音響処理方法であって、
　同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整する調整ステップを有し、
　前記調整ステップは、
　異なる方向に音像定位する複数の音像信号に対応して特有に行われ、対応の音像信号に対して特有の周波数特性変更処理を行うこと、
　を特徴とする音響処理方法。
　コンピュータに異環境で聴取される音色の相違を補正する機能を実現させる音響処理プログラムであって、
　前記コンピュータを、
　同一音が一方の環境で聴取されたときの音波の周波数特性に他方の環境で聴取されたときの音波の周波数特性が倣うように、周波数特性を調整するイコライザとして機能させ、
　前記イコライザは、
　異なる方向に音像定位する複数の音像信号に対応して複数設けられ、
　対応の音像信号に対して特有の周波数特性変更処理を行うこと、
　を特徴とする音響処理プログラム。
　前記各イコライザは、音像定位の方向ごとに特有の伝達関数を有し、対応の音像信号に対して前記特有の伝達関数を適用すること、
　を特徴とする請求項１０記載の音響処理プログラム。
　前記イコライザが有する伝達関数は、対応の音像信号を音像定位させるために発生させるチャンネル間の相違に基づくこと、
　を特徴とする請求項１１記載の音響処理プログラム。
　前記チャンネル間の相違は、出力の際に音像定位の方向に従ってチャンネル間に与えられる振幅差、時間差、又はこれらの両方であること、
　を特徴とする請求項１２記載の音響処理プログラム。
　前記イコライザが有する伝達関数は、前記一方の環境及び他方の環境で各耳に到達する異環境での音波の各伝達関数に更に基づくこと、
　を特徴とする請求項１１乃至１３の何れかに記載の音響処理プログラム。
　音像信号を音像定位させるためにチャンネル間に相違を与える音像定位設定部として更に機能させ、
　前記イコライザが有する伝達関数は、前記音像定位設定部が与える相違に基づくこと、
　を特徴とする請求項１２乃至１４の何れかに記載の音響処理プログラム。
　音像定位方向が異なる複数の音像成分を含む音響信号から各音像成分を分離して各音像信号を生成する音源分離手段として更に機能させ、
　前記イコライザは、前記音源分離手段が生成した前記音像信号に対して特有の周波数特性変更処理を行うこと、
　を特徴とする請求項１０乃至１６の何れかに記載の音響処理プログラム。
　前記音源分離手段は、
　各音像成分に対応して複数回機能され、
　前記音響信号の一方のチャンネルについて特定時間遅延させて、対応の音像成分を同振幅同位相に調整するフィルタと、
　前記音響信号の一方のチャンネルに係数ｍを乗じた上でチャンネル間の誤差信号を生成し、この誤差信号を含む係数ｍの漸化式を演算する係数決定手段と、
　前記係数ｍを前記音響信号に乗じる合成手段と、
　を備えること、
　を特徴とする請求項１６記載の音響処理プログラム。