JP4949706B2 - 音像定位装置及び音像定位方法 - Google Patents

音像定位装置及び音像定位方法 Download PDF

Info

Publication number
JP4949706B2
JP4949706B2 JP2006075525A JP2006075525A JP4949706B2 JP 4949706 B2 JP4949706 B2 JP 4949706B2 JP 2006075525 A JP2006075525 A JP 2006075525A JP 2006075525 A JP2006075525 A JP 2006075525A JP 4949706 B2 JP4949706 B2 JP 4949706B2
Authority
JP
Japan
Prior art keywords
speaker
sound image
surround
speakers
hrtf
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006075525A
Other languages
English (en)
Other versions
JP2007251832A (ja
Inventor
捷 黄
渉 波多野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tamura Corp
University of Aizu
Original Assignee
Tamura Corp
University of Aizu
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tamura Corp, University of Aizu filed Critical Tamura Corp
Priority to JP2006075525A priority Critical patent/JP4949706B2/ja
Publication of JP2007251832A publication Critical patent/JP2007251832A/ja
Application granted granted Critical
Publication of JP4949706B2 publication Critical patent/JP4949706B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Stereophonic System (AREA)

Description

本発明は、6チャンネル以上の原音をソースとして、左フロントスピーカ、センタースピーカ、右フロントスピーカ、左サラウンドスピーカ及び右サラウンドスピーカから構成された5チャンネルのサラウンド信号を再生するデジタルオーディオ信号処理装置における音像定位装置及び音像定位方法に関するものである。
Nチャンネル(N>5)の入力信号を5チャンネル(5.1チャンネルを含む)サラウンド信号によって再生するデジタルオーディオ装置において、出力チャンネルの角度と異なるチャンネルの入力信号が与えられた場合、5チャンネルの再生スピーカからの出力信号を調整することで、入力信号に対応する角度に音像を定位する必要がある
例えば、図5は、センタースピーカC、左右のフロントスピーカL,R、左右の水平スピーカML,MR、左右のサラウンドスピーカSL,SR及びバックセンタースピーカBCからなる8チャンネルの原音をソースとして、センタースピーカC、左右のフロントスピーカL,R、及び左右のサラウンドスピーカSL,SRからなる5チャンネルのサラウンドシステムで再生する状況を示すものであって、5チャンネルには存在しない左右の水平スピーカML,MRやバックセンタースピーカBCからの原音は、その両側に配置されているチャンネルのスピーカからの出力を制御することで、あたかもその部分から音声が出力されているかのような状況を作り出している。
このような音像定位の方法としては、各種のものが知られているが、その一つに特許文献1から特許文献3などに示されるように、複数のスピーカの音量調整によって音像の位置をコントロールするAP(amplitude panning)法がある。このAP法による音像の定位は、左右のステレオスピーカに限らず、4チャンネルまたは5.1チャンネルに代表されるサラウンドシステムにおける前後方向の音像の定位にも使用されている。
特開2005−223747号公報 特開2002−135899号公報 特開2002−345097号公報
ところで、前記のような従来のAP法においては、次の(1)〜(5)に述べるような問題点があった。
(1)音源方向のHRTFで特徴付けた音源ソースによるAP法
HRTF(Head Related Transfer Function)は、頭部(頭、外耳などを含む)の影響で音の到来方向によって異なる音の伝達関数で、3−Dサウンド生成のための重要な要素である。HRTFは音源方向に対して、左右2つの耳で異なる。従来の3−Dサウンドシステムは2チャンネルシステム(ヘッドホンか、クロストークを打ち消したトランスオーラルシステム)に音像の到来方向によって決まる左右のHRTFでそれぞれ特徴付けた2チャンネルのソースを提示する方法をとる。しかし、AP法のように音像付近のスピーカの音量によって音像の位置をコントロールするシステムでは、左右2つの耳に異なるHRTFで特徴付けた音を提示することは不可能であった。
(2)特徴HRTFの強さのコントロール
HRTFで特徴付けた音源ソースによるAP法では、通常のAP法と比べ、音の周波数特徴を変化させることによって、音像の方向感覚を与えるもので、場合によっては音源ソースに必要以上の音質の変化を与えることがある。
(3)スピーカ方向HRTFのキャンセル
AP法では、音像の付近のスピーカによって音像のコントロールする方向であるため、音像の位置とスピーカの位置のずれが生じる。このスピーカの位置によって生じるHRTFは実際の音像方向の特徴HRTFとは異なるので、キャンセルする必要がある。
(4)AP法でのスピーカの方向によって生じる時間差のコントロール
ステレオシステムにおいてセンター方向に音源定位させるためには、左右のスピーカの音量を等しくすれば、左右のスピーカの効果が等しくなり、音像をセンター方向に定位させることができる。先行音効果によれば、先に到達する音の方が音源定位により大きな効果がある。サイド方向では、前後のスピーカの位置によって到達時間に差が生じた場合では、たとえスピーカの音量を等しくしても、スピーカの中間に音像を定位させることができない場合がある。このことは外耳の非対称性も要因の1つであるが、特に、5.1チャンネルの標準配置ではサイドのスピーカは前後非対称であるため、音の到達時間差が生じる。
例えば、図8に示すように、聴取者の前方30°に配置された左側のフロントスピーカLと120°に配置された左側のサラウンドスピーカSLとから、等しいボリュームaF=aBの音声出力があった場合に、聴取者の左右の耳の位置により右耳と左耳とでは音の到達時期が異なる。すなわち、各スピーカL,SLと左耳との距離が等しいときに、各スピーカと反対側に位置する右耳までの距離は、サラウンドスピーカから右耳までの方が大きいために、左耳には各スピーカからの音が同時に到達するのに対して、右耳にはフロントスピーカLからの音aFがサラウンドスピーカSLの音aBより早く到達する。ところで、一般に「先行音効果」と呼ばれる先に到達する音の方が音像の定位に当たっては大きなウェートを占めることが知られており、この先行音効果により、先に右耳に達したフロントスピーカLの音aFにより、音像がフロントスピーカ側に定位されることになる。
(5)2つのスピーカとの位置関係から生じる音像定位の困難性
図6は、左右のスピーカL,R間のレベル差によって音源をファンタム定位させる場合の一例を示すものであって、左右のスピーカからの出力(例えば、電力和)が常に一定になるように、左右のスピーカの出力を増減することで、左右のスピーカ間の任意の位置に音像を定位させるものである。
しかしながら、前記図6に記載のように、聴取者の前方に配置された左右のスピーカL,Rの出力を調整して音像を定位する場合、従来では、音像の定位角度と左右のスピーカL,R間のレベル差とをほとんど直線的(もしくは図6に示すように一方向に湾曲した曲線となるように)に比例させていた。すなわち、定位する音像の角度が一方のスピーカに近いほどそのスピーカからの出力を大きくし、定位する音像の角度が他方のスピーカに近づくにつれて一方のスピーカからの出力の分配率を直線的あるいは一方向に湾曲した曲線に沿って大きくしていた。
ところが、このような方法を、図7に示すような5チャンネルの前後方向のスピーカ、例えば、左側あるいは右側のフロントスピーカとサラウンドスピーカに適用した場合には、聴取者の耳の位置がフロントスピーカとサラウンドスピーカとに正対していないため、意図した角度に音像を定位できないという問題が生じる。
例えば、フロントスピーカLまたはRを聴取者の30°前方に配置し、サラウンドスピーカSLまたはSRを聴取者の120°後方に配置し、両スピーカから等しい音量レベルを出力した場合、本来であれば75°付近に音像が定位されるはずが、聴取者は45〜50°付近に音像が定位された印象を持つことになる。
そのため、2つのスピーカの音量を回転式あるいはスライド式のボリュームなどを利用して調整した場合に、音量に比例して音像の位置が線形的に変化しないことになり、所望の位置に音像を定位させることが難しくなる。
前記(1)〜(5)のように、AP法においては、HRTFの特徴付け時や、5.1チャンネルにおけるスピーカの非対称性に起因して生じる種々の問題点に解決が望まれていた。本発明は前記のような従来技術の問題点を解決するために提案されたものであって、その目的は、近い方の耳のHRTFで特徴付けた音源ソースを使うことで音像定位の明瞭さを向上させると共に、スピーカの非対称性に起因する音の到達時間差を解消した音像定位装置及び音像定位方法を提供することにある。
前記の目的を達成するために、請求項1の発明は、5チャンネルのサラウンド信号再生装置の左フロントスピーカと左サラウンドスピーカの間、及び右フロントスピーカと右サラウンドスピーカの間に音像を定位させる場合に、左右それぞれのフロントスピーカとそれに対応するサラウンドスピーカから出力する音量を配分することにより音像の定位位置を決定する音像定位装置において、6チャンネル以上の原音に基づいて、右または左のフロントスピーカとサラウンドスピーカとの間に定位すべき音像の角度を検出する角度検出部と、この角度検出部によって検出された角度に基づいて、フロントスピーカとサラウンドスピーカとに振り分ける信号の音量レベルを決定する出力レベル演算部と、フロントスピーカとサラウンドスピーカ間に定位する音像に対して、前記角度検出部によって検出された角度に対応したHRTFを畳み込む処理を施すHRTF畳み込み部と、前記出力レベル演算部からの出力と前記HRTF畳み込み部からの出力を加算してフロントスピーカおよびサラウンドスピーカから出力する出力部とを備えていることを特徴とする。
このような構成を有する請求項1の発明によれば、2つのスピーカの音量レベルを制御して音像の定位を行うAP法に対して、音像の定位角度に対応したHRTFを畳み込むことが可能となるので、2つのスピーカの出力を加算して音像の定位を行った場合に、各スピーカから出力された信号の周波数特性の差に起因する音像の不明瞭さが解消され、本来の定位角度から再生される音像の周波数特性に近い音像を得ることができる。
請求項2の発明は、前記出力レベル演算部からの出力と前記HRTF畳み込み部からの出力を加算するにあたり、両出力信号の加算比率を調整するためのHRTF比率設定部を設けたことを特徴とする。
このような構成を有する請求項2の発明においては、出力レベル演算部からの出力信号に加算するHRTFの畳み込み信号の加算比率を、前記HRTF比率設定部によって制御することができるため、前記(2)で述べた特徴HRTFの強さのコントロール可能となる。その結果、HRTFとオールパスのインパルスとの線形結合をとることによって、位相差ゼロのオールパスをフルのHRTFとの間で任意の割合でHRTFの働きをコントロールし、HRTFの働きを和らげる処理が可能となる。
請求項3の発明は、前記HRTF畳み込み部がスピーカ位置によるHRTFをキャンセルするものであることを特徴とする。このような構成によれば、実際の音像方向の特徴HRTFとは異なるスピーカ位置によって生じるHRTFをキャンセルすることができる。
請求項4の発明は、前記HRTF畳み込み部が、聴取者の耳に近い側のスピーカから出力される信号に対してのみHRTFの畳み込み処理を行うことを特徴とする。すなわち、AP法のように音像付近のスピーカの音量によって音像の位置をコントロールするシステムでは、左右2つの耳に異なるHRTFで特徴付けた音を提示することは不可能といえる。これは、聴取者が位置を変えたり、頭の向きをずらすと定位感がなくなってしまう(スイートスポットが小さい)ため、実用的ではない。一方、心理音響学実験によって、サイド方向の音像の定位は音像に近い方の耳の方がより重要であるという実験データがある。このような理由から、AP法によるサイド方向の音像定位では、スピーカに近い方の耳のHRTFで特徴付けた音源ソースを使うことが音像定位の明瞭さを向上させることが期待できる。

請求項5の発明は、前記出力レベル演算部およびHRTF畳み込み部から出力される信号に対して、前記(4)で述べたような複数のスピーカから耳への到達時間の違いをなくすために、スピーカの方向によって生じる時間差を予め、キャンセルするための遅延量設定部を設けたことを特徴とする。
すなわち、請求項5の発明では、図9に示すように、フロントスピーカの音aFを遅らせることにより、各スピーカに近い側の左耳においてはサラウンドスピーカの音aBが先に耳に届くようにし、スピーカから離れた右耳においてはフロントスピーカの音aFとサラウンドスピーカの音aBが同時に届くようにすることで、左耳において「先行音効果」が発揮され、音像がサラウンドスピーカ側に定位されるように構成する。
請求項6の発明は、フロントスピーカとサラウンドスピーカの間の角度と直線的に比例するフロントスピーカの分配率に比較して、聴取者の側方よりも前方の角度に音像を定位する場合にはフロントスピーカの分配率が小さくなり、聴取者の側方よりも後方の角度に音像を定位する場合にはフロントスピーカの分配率が大きくなり、フロントスピーカと聴取者の側方との中間の角度及び聴取者側方とサラウンドスピーカとの中間の角度において前記直線的な分配率とフロントスピーカの分配率とのかい離量が大きくなった連続した曲線(図4参照)で表される補正用パラメータを取得するパラメータ取得部を備え、前記出力レベル演算部が、前記角度検出部によって検出された音像の定位角度に基づいてフロントスピーカとサラウンドスピーカに配分する音量の割合を演算するにあたり、前記パラメータ取得部より取得した補正用パラメータを考慮した演算処理を行うものであることを特徴とする。
このような構成を有する請求項6の発明によれば、前記(5)で述べたような音像定位の困難性を解消するために、音像定位時に出力信号を2つのスピーカに振り分けるにあたり、聴取者の聴覚特性に応じてフロントスピーカとサラウンドスピーカから出力する音量レベルを補正することにより、2つのスピーカの音量に比例して音像の定位位置が線形的に変化し、定位操作を容易に実施できる。
さらに、請求項7から請求項12の発明は、前記請求項1から請求項6の音像定位装置を音像定位方法の観点から把握したものである。このような音像定位方法においても、前記音像定位装置と同様な作用効果が期待できる。
本発明によれば、心理音響学実験によって、サイド方向の音像の定位は音像に近い方の耳の方がより重要であるという実験データがあることから、サイド方向のAP法に音像定位では、近い方の耳のHRTFで特徴付けた音源ソースを使うことにより、音像定位の明瞭さを向上させることができる。
(A)実施形態の基本的構成並びに作用
以下、本発明の実施形態の1つを図1の機能ブロック図及び図2のフローチャートに従って具体的に説明する。なお、図2のフローチャート及び以下の説明では、8チャンネル及び5チャンネルの左側のスピーカのみを示しているが、右側のスピーカも同様に動作する。
(1)音源の入力部
図1において、符号1は音源の入力部であって、本実施形態では、8チャンネルの音源を入力するように構成されている(図2のステップ01)。
(2)相関判定部
相関判定部2は、前記音源入力部1から入力された隣接する3つのチャンネルからの音源の相関性を調べるものであって、一例として、フロントスピーカL、水平スピーカML及びサラウンドスピーカSLの各チャンネルからの入力信号について高速フーリエ変換(FFT)を施し、変換後の値を比較することで、フロントスピーカからの入力信号Lと水平スピーカからの入力信号MLの相関、及び水平スピーカからの入力信号MLとサラウンドスピーカからの入力信号SLの相関を判定するものである(図2のステップ02)。
(3)角度検出部
角度検出部3は、前記相関判定部2による相関の有無に従い、次のようにして、音像の定位位置(角度)を決定するものである(図2のステップ03〜04)。
(1) 水平スピーカからの入力信号ML,MRとフロントスピーカからの入力信号L,Rまたはサラウンドスピーカからの入力信号SL,SRとの間に相関がない場合に、音像の定位位置(定位角度)を90°(水平スピーカMLの位置)とする。
(2) 水平スピーカからの入力信号MLとフロントスピーカからの入力信号Lまたはサラウンドスピーカからの入力信号SLとの間に相関がある場合に、水平スピーカからの入力信号MLとフロントスピーカからの入力信号Lまたはサラウンドスピーカからの入力信号SLとの振幅の平均値の比から、音像の定位位置(角度)を決定する。
(4)遅延量設定部
遅延量設定部4は、前記音源入力部1から入力された8チャンネル音源の左スピーカ、水平スピーカおよびサラウンドスピーカからの入力信号に対して一定量の遅延処理を施すものである。すなわち、この遅延量設定部5は、5.1チャンネルの標準配置によって生じるフロントスピーカまたはサラウンドスピーカと聴取者との距離の差から生じる音の到達時間差を解消するためのものである。
本実施形態の5.1チャンネルでは、図7に示すように、フロントスピーカLを30°の位置に、サラウンドスピーカSLを120°の位置に配置しているため、フロントスピーカからの入力信号の方が聴取者に早く到達するので、図10に示すように、フロントスピーカ側の入力信号Lに対して、到達時間差を考慮した遅延処理を施している(図2のステップ05)。
(5)パラメータ取得部
パラメータ取得部5は、前記のようにして決定された角度と、予め用意された図4に示すようなパラメータ決定曲線Qに基づいて、定位する音像位置に対応したパラメータを取得する(図2のステップ06)。
すなわち、パラメータ取得部5は、フロントスピーカとサラウンドスピーカの間の角度と直線的に比例するフロントスピーカの分配率に比較して、聴取者の側方よりも前方の角度に音像を定位する場合にはフロントスピーカの分配率が小さくなり、聴取者の側方よりも後方の角度に音像を定位する場合にはフロントスピーカの分配率が大きくなり、フロントスピーカと聴取者の側方との中間の角度及び聴取者側方とサラウンドスピーカとの中間の角度において前記直線的な分配率とフロントスピーカの分配率とのかい離量が大きくなった連続した曲線で表される補正用パラメータを取得するものである。
(6)出力レベル演算部
出力レベル演算部6は、前記のようにして得られたパラメータに従って、フロントスピーカL及びサラウンドスピーカSLの出力レベルを計算する。例えば、前記の角度が90°の場合には、図3の横軸の90°に対応する0.33を、角度が40°の場合には0.62を、角度が110度の場合には0.17を、フロントスピーカLの分配率として取得する。
そして、8チャンネルのフロントスピーカからの入力信号Lに、前記のようにして得られた分配率と、図12に示すような各分配率に対応するフロントスピーカとサラウンドスピーカのエネルギー比率に基づいて、5チャンネルのフロントスピーカからの出力信号Lのレベルを決定する(図2のステップ7)。
すなわち、本実施形態では、フロントスピーカとサラウンドスピーカとの出力の和が一定となるように、図12に示すサイン2乗の曲線によるエネルギー配分を行うものであるから、前記のようにして得られた分配率に対応する各スピーカへのエネルギー配分を図12の曲線から求めることにより、各スピーカから出力される音量レベルが決定される。
同様にして、5チャンネルのサラウンドスピーカからの出力信号SLの分配率も、サラウンドスピーカの出力とフロントスピーカの出力の和が一定となるように、図4の曲線Qから得ることができるので、得られた分配率と図12のエネルギー配分に基づいて、8チャンネルのサラウンドスピーカの入力信号SLから5チャンネルのサラウンドスピーカの出力信号SLを得ることができる(図2のステップ08)。
(7)HRTF畳み込み部
HRTF畳み込み部7には、前記音源入力部1から水平スピーカからの入力信号MLが入力されると共に、前記角度検出部3において検出された音像の定位角度が入力される。このHRTF畳み込み部7においては、入力された音像の定位角度に対応するHRTFを水平スピーカの入力信号MLに畳み込むものである(図2のステップ09)。
このHRTF畳み込み部7は、音源に近い方の耳に達する音声信号についてサイド方向の周波数特性を与えるものである。すなわち、図11に示すように、前方のスピーカと後方のサラウンドスピーカから来る音の周波数特性は違うので、両者の和ではサイド方向の周波数特性を再現できない。そこで、このHRTF畳み込み部7により、前方のスピーカとサラウンドスピーカに予めサイド方向の周波数特性を与える(サイド方向のHRTFを畳み込む)ことで、前後のスピーカの音を加算した場合に、サイド方向の周波数特性を原音に近いものとする。
この場合、畳み込むサイド方向のHRTFは、前後のスピーカの間に定位する音像の角度によって異なることから、前記角度検出部3によって音像の定位角度を検出し、HRTF畳み込み部7はこの定位角度に応じて所定のHRTFを音源入力部1からの音声信号に畳み込む。また、左右両耳を同時に操作することは演算量も多くなることから、本実施形態では、音源に近い方の耳に達する音に対してのみ、畳み込み処理を行う。
また、本実施形態では、反対サイドの耳で聞こえる音については、逆サイドのスピーカから音がくるので、そのまま再生しても目的とする音源方向との大きな差はないので、クロストークキャンセルは行わない。
さらに、本実施形態では、前記HRTF畳み込み部7が音像の位置とスピーカの位置のずれによって生じるHRTFをキャンセルする。
(8)遅延処理部
前記のようなHRTF畳み込み部7の出力側には前記パラメータ取得部5による重み付けをした出力信号に与えたものと同様な遅延処理を行う遅延処理部8が設けられている。この遅延処理部8により、水平スピーカの出力信号LHをフロントスピーカLとサラウンドスピーカSLとに振り分ける場合に、フロントスピーカ側の信号を遅延させることで、前記パラメータ取得部5側の信号との同期をとることが可能となる(図2のステップ10)。
(9)HRTF比率設定部
HRTF比率設定部9では、前記音源入力部1から出力された3種類の信号(具体的には、音源入力部から直接入力されたフロントスピーカおよびサラウンドスピーカからの信号、前記パラメータ取得部5を経由して重み付けされた信号、HRTF畳み込み部7を介して出力されたHRTFを畳み込んだ信号)を加算するにあたり、HRTFを畳み込んだ信号の比率を設定するためのものである(図2のステップ11)。
すなわち、前記のようにして図4のグラフの曲線Qに基づいて重み付けを行った信号と、周波数特性に対する補整を行うためにHRTFの畳み込みを行った音声信号とは、必ずしも同じ割合で加算する必要はなく、本実施形態では、定位する音像やそれを再生するスピーカの特性や、スピーカ配置などに応じてHRTF比率設定部9により両信号の比率を適宜変更できるようになっている。
例えば、本発明によるHRTFで特徴付けた音源ソースによるAP法は、通常のAP法と比べ、音の周波数特徴を変化させることによって音像の方向感覚を与えるもので、場合によっては音源ソースに必要以上の音質の変化を与えることがある。この点を改善するために、HRTFの働きを和らげる処理が必要となる。そこで、本実施形態では、前記HRTF比率設定部9により、HRTFとオールパスのインパルスとの線形結合をとることによって、位相差ゼロのオールパスをフルのHRTFとの間で任意の割合でHRTFの働きをコントロールする。
また、AP法では、音像の付近のスピーカによって音像のコントロールする方向であるため、音像の位置とスピーカの位置のずれが生じる。このスピーカの位置によって生じるHRTFは実際の音像方向の特徴HRTFとは異なるので、キャンセルする必要がある。このキャンセル処理は、前記HRTF畳み込み部7に対して、スピーカのソースにその位置によるHRTFの逆のHRTFを加えることによって達成できる。この場合、システムの安定性を保つためにキャンセルの度合いを、HRTF比率設定部9において、特徴HRTFのコントロールに用いる方法と同じ方法でコントロールする。
(10)出力部
前記のようにしてHRTF比率設定部9においてHRTFの畳み込んだ信号の比率を設定した後は、その後段の出力部10において、前記音源入力部1から出力された3種類の信号をその比率割合に応じて加算し(図2のステップ12)、5チャンネルの対応する各スピーカに出力する。
以上のような本実施形態では、水平スピーカMLからの出力については、サイド方向のHRTFの畳み込みを行い、その畳み込みを行った信号を所定の割合で前記の重み付けを行った信号や音源から直接スピーカに出力する信号に対して加算するようにしたので、前方と後方のスピーカから来る音の周波数特性の差による影響を排除して、サイド方向の周波数特性に近い音を聴取者の耳に送出することができる。
また、本実施形態では、遅延量設定部4,8により聴取者の耳に近い側のスピーカ(フロントスピーカ)からの出力信号に遅延処理を施すことにより、前方または後方のスピーカから耳に達する距離の相違に起因する音の到達時間差を解消したので、先行音効果によって音像の定位置がずれる不都合も解消される。
さらに、本実施形態では、音像の定位角度に応じて図4の曲線Q重み付けを変更したため、例えば、音像の定位角度が40°の場合、従来技術では、分配率を0.89として、この分配率0.89に対応したフロントスピーカとサラウンドスピーカとの出力を図12から求めていたが、本実施形態では、分配率を0.62として、その分配率0.62に対応したフロントスピーカとサラウンドスピーカとの出力を図12から求める。その結果、フロントスピーカの音量が従来技術に比較して少ない方向に補正されることとなり、聴取者による聞き取り実験の結果に近い音像の定位が実現される。
前記のような構成を有する本実施形態によれば、音像の定位角度に合わせて異なった値の補正用パラメータを取得し、この補正用パラメータを考慮してフロントスピーカとサラウンドスピーカの音量の配分割合を決定するようにしたので、直線的に音量の配分割合を変化させた従来技術に比較して、音像の定位角度に対するボリュームなどの操作量を均等に割り当てることが可能になる。
(B)8チャンネルを5チャンネルに変換する実施形態
前記(A)では左側のスピーカについて、8チャンネルのフロントスピーカ、水平スピーカおよびサラウンドスピーカの出力を、5チャンネルフロントスピーカおよびサラウンドスピーカから出力する手段について説明したが、次に、8チャンネルの各スピーカの出力を5チャンネルの各スピーカから出力する場合の構成を、図3に従って説明する。なお、図3は、8チャンネルの各スピーカと5チャンネルの各スピーカ間の出力信号の流れを概略的に説明するため、前記図2の主要なステップのみを示している。
(1)センタースピーカ
センタースピーカCについては、8チャンネルのセンタースピーカの出力をそのまま5チャンネルのセンタースピーカから出力される。
(2)左側のスピーカ群
8チャンネルの左側を構成するフロントスピーカL、水平スピーカMLおよびサラウンドスピーカSLについては、前記図2と同様な処理がなされる。この場合、8チャンネルの各スピーカからの出力信号は、角度検出および遅延処理を行った後、音像の定位位置に合わせて音量レベルの振り分け処理がなされる。この振り分け処理により5チャンネルのフロントスピーカ側に振り分けられた信号に対して、水平スピーカMLからの出力にHRTFを畳み込んだ信号が加算された後、5チャンネルのフロントスピーカLから出力される。
一方、音量レベルの振り分け処理により、5チャンネルのサラウンドスピーカ側に振り分けられた信号に、水平スピーカMLからの出力にHRTFを畳み込んだ信号が加算された信号SL1については、本実施形態ではそのままサラウンドスピーカから出力せず、次に述べる後方のスピーカ群から得られるサラウンドスピーカ用の信号SL2と加算されて、左側のサラウンドスピーカSLから出力される。
(3)後方のスピーカ群
8チャンネルの後方のスピーカ群は、左右のサラウンドスピーカSL,SRとその中間位置に配置された後方センタースピーカBCとからなる。これに対して、5チャンネルでは、後方センタースピーカBCが存在せず、これに対応する出力はAP法により左右のサラウンドスピーカSL,SRの出力をコントロールすることで、音像の定位を行う。
この後方のスピーカ群からの信号に基づく音像の定位は、前記左側のスピーカの場合と同様に実施するものであるが、8チャンネルおよび5チャンネルのいずれにおいても、聴取者から見て左右のサラウンドスピーカSL,SRは対称形をなしており、その距離も角度も等しい。そのため、前記(A)で述べたような、聴取者の耳の位置が2つのスピーカに対して同じ位置関係にない場合に必要であった図4のようなパラメータ決定曲線Qに基づく音量レベルの振り分け処理は不要である。そこで、この後方スピーカ群における音量レベルの振り分け処理は、図4において、スピーカの分配率と音像の定位角度が直線的に比例する直線Pに基づいた音量レベルの振り分け処理が行われる。
前記振り分け処理により、5チャンネルの左側のサラウンドスピーカ用に振り分けられた信号と、後方センタースピーカBCからの信号に対してHRTFを畳み込んだ信号とが加算された信号SL2は、前記左側のスピーカ群から出力された5チャンネルのサラウンドスピーカ用の信号SL1と加算され、5チャンネルのサラウンドスピーカSLから出力される。
同様にして、5チャンネルの右側のサラウンドスピーカ用に出力された信号SR2については、右側のスピーカ群から出力された右側のサラウンドスピーカ用の信号SR1と加算されて、右側のサラウンドスピーカSRから出力される。
(4)右側のスピーカ群
8チャンネルの右側のフロントスピーカR、水平スピーカMRおよびサラウンドスピーカSRからの出力については、前記(2)で述べた左側のスピーカ群と同様に音量レベルの振り分け処理とHRTFの畳み込み処理が行われ、これらの処理が施された各信号が加算された後、5チャンネルのフロントスピーカRから出力される。また、5チャンネルのサラウンドスピーカ用の信号SR1については、前記後方のスピーカ群からの信号SR2と加算された後、サラウンドスピーカSRから出力される。
(C)他の実施形態
本発明は、前記の実施形態に限定されるものではなく、例えば、ソースとなる原音としては、8チャンネルに限らず、6チャンネル以上の複数チャンネルについても適用可能である。
本発明の実施形態の構成を示すブロック図。 図1の実施形態の動作を示すフローチャート。 本発明を8チャンネルの原音を5チャンネルのスピーカシステムに出力する場合の各出力信号に対する処理を示すフローチャート。 本発明に使用する分配率のパラメータを決定する曲線を示すグラフ。 8チャンネルの原音を5チャンネルサラウンドシステムで再生する状態を示す平面図。 左右のフロントスピーカ間の音像の定位を示す平面図。 5チャンネルサラウンドシステムにおけるフロントスピーカとサラウンドスピーカ間の音像の定位を示す平面図。 フロントスピーカとサラウンドスピーカとで耳に到達する音に時間差が生ずることを説明する図。 フロントスピーカとサラウンドスピーカとで耳に到達する音に生じる時間差を解消するために遅延処理を施した状態を説明する図。 フロントスピーカとサラウンドスピーカとで耳に到達する音に生じる時間差を解消するために遅延処理を施した状態を説明する図。 サイド方向のHRTFの畳み込み処理の原理を示す図。 フロントスピーカとサラウンドスピーカとの音量の和を一定とする場合のエネルギー配分を示すグラフ。
符号の説明
1…音源入力部
2…相関判定部
3…角度検出部
4…遅延処理部
5…パラメータ取得部
6…出力レベル演算部
7…HRTF畳み込み部
8…遅延量設定部
9…HRTF比率設定部
10…出力部
L,R…フロントスピーカ
ML,MR…水平スピーカ
SL,SR…サラウンドスピーカ
C…センタースピーカ
BC…後方センタースピーカ

Claims (12)

  1. 5チャンネルのサラウンド信号再生装置の左フロントスピーカと左サラウンドスピーカの間、及び右フロントスピーカと右サラウンドスピーカの間に音像を定位させる場合に、左右それぞれのフロントスピーカとそれに対応するサラウンドスピーカから出力する音量を配分することにより音像の定位位置を決定する音像定位装置において、
    6チャンネル以上の原音に基づいて、右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカとの間に定位すべき音像の角度を検出する角度検出部と、
    この角度検出部によって検出された角度に基づいて、前記原音を右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカとに振り分ける信号の音量レベルを決定する出力レベル演算部と、
    右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカと間に定位する音像に対して、前記角度検出部によって検出された角度に対応したHRTFを畳み込む処理を施すHRTF畳み込み部と、
    前記出力レベル演算部からの出力と前記HRTF畳み込み部からの出力を加算して右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカから出力する出力部とを備えていることを特徴とする音像定位装置。
  2. 前記出力レベル演算部からの出力信号と前記HRTF畳み込み部からの出力信号の加算比率を調整するためのHRTF比率設定部を設けたことを特徴とする請求項1に記載の音像定位装置。
  3. 前記HRTF畳み込み部がスピーカ位置によるHRTFをキャンセルするものであることを特徴とする請求項1または請求項2に記載の音像定位装置。
  4. 前記HRTF畳み込み部が、左右のスピーカのうち聴取者の耳に近い側のスピーカから出力される信号に対してのみHRTFの畳み込み処理を行うことを特徴とする請求項1から請求項3のいずれか1項に記載の音像定位装置。
  5. 前記出力レベル演算部およびHRTF畳み込み部から出力される信号に対して、複数のスピーカから耳への到達時間の違いをなくすための遅延量設定部を設けたことを特徴とする請求項1から請求項4のいずれか1項に記載の音像定位装置。
  6. フロントスピーカとサラウンドスピーカの間の角度と直線的に比例するフロントスピーカの分配率に比較して、聴取者の側方よりも前方の角度に音像を定位する場合にはフロントスピーカの分配率が小さくなり、聴取者の側方よりも後方の角度に音像を定位する場合にはフロントスピーカの分配率が大きくなり、フロントスピーカと聴取者の側方との中間の角度及び聴取者側方とサラウンドスピーカとの中間の角度において前記直線的な分配率とフロントスピーカの分配率とのかい離量が大きくなった連続した曲線で表される補正用パラメータを取得するパラメータ取得部を備え、
    前記出力レベル演算部が、前記角度検出部によって検出された音像の定位角度に基づいてフロントスピーカとサラウンドスピーカに配分する音量の割合を演算するにあたり、前記パラメータ取得部より取得した補正用パラメータを考慮した演算処理を行うものであることを特徴とする請求項1から請求項5のいずれか1項に記載の音像定位装置。
  7. 5チャンネルのサラウンド信号再生装置の左フロントスピーカと左サラウンドスピーカの間、及び右フロントスピーカと右サラウンドスピーカの間に音像を定位させる場合に、左右それぞれのフロントスピーカとそれに対応するサラウンドスピーカから出力する音量を配分することにより音像の定位位置を決定する音像定位方法において、
    6チャンネル以上の原音に基づいて、右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカとの間に定位すべき音像の角度を検出するステップと、
    この検出された角度に基づいて、右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカとに振り分ける信号の音量レベルを決定するステップと、
    右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカと間に定位する音像に対して、前記検出された角度に対応したHRTFを畳み込む処理を施すステップと、
    前記音量レベルが決定された出力信号と前記HRTFを畳み込んだ出力信号を加算して右のフロントスピーカと右のサラウンドスピーカまたは左のフロントスピーカと左のサラウンドスピーカから出力するステップとを備えていることを特徴とする音像定位方法。
  8. 前記音量レベルが決定された出力信号と前記HRTFを畳み込んだ出力信号を加算するにあたり、両出力信号の加算比率を調整するステップを設けたことを特徴とする請求項7に記載の音像定位方法。
  9. 前記HRTFの畳み込みステップがスピーカ位置によるHRTFをキャンセルするものであることを特徴とする請求項7または請求項8に記載の音像定位方法。
  10. 前記HRTFの畳み込みステップが、聴取者の耳に近い側のスピーカから出力される信号に対してのみHRTFの畳み込み処理を行うことを特徴とする請求項7から請求項9のいずれか1項に記載の音像定位方法。
  11. 前記音量レベルが決定された出力信号と前記HRTFを畳み込んだ出力信号に対して、複数のスピーカから耳への到達時間の違いをなくすための遅延量を設定するステップを設けたことを特徴とする請求項7から請求項10のいずれか1項に記載の音像定位方法。
  12. フロントスピーカとサラウンドスピーカの間の角度と直線的に比例するフロントスピーカの分配率に比較して、聴取者の側方よりも前方の角度に音像を定位する場合にはフロントスピーカの分配率が小さくなり、聴取者の側方よりも後方の角度に音像を定位する場合にはフロントスピーカの分配率が大きくなり、フロントスピーカと聴取者の側方との中間の角度及び聴取者側方とサラウンドスピーカとの中間の角度において前記直線的な分配率とフロントスピーカの分配率とのかい離量が大きくなった連続した曲線で表される補正用パラメータを取得するステップを備え、
    前記出力レベルを演算するステップが、前記検出された音像の定位角度に基づいてフロントスピーカとサラウンドスピーカに配分する音量の割合を演算するにあたり、前記取得した補正用パラメータを考慮した演算処理を行うものであることを特徴とする請求項7から請求項11のいずれか1項に記載の音像定位方法。
JP2006075525A 2006-03-17 2006-03-17 音像定位装置及び音像定位方法 Expired - Fee Related JP4949706B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006075525A JP4949706B2 (ja) 2006-03-17 2006-03-17 音像定位装置及び音像定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006075525A JP4949706B2 (ja) 2006-03-17 2006-03-17 音像定位装置及び音像定位方法

Publications (2)

Publication Number Publication Date
JP2007251832A JP2007251832A (ja) 2007-09-27
JP4949706B2 true JP4949706B2 (ja) 2012-06-13

Family

ID=38595617

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006075525A Expired - Fee Related JP4949706B2 (ja) 2006-03-17 2006-03-17 音像定位装置及び音像定位方法

Country Status (1)

Country Link
JP (1) JP4949706B2 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009100144A (ja) * 2007-10-16 2009-05-07 Panasonic Corp 音場制御装置、音場制御方法およびプログラム
JP5577597B2 (ja) * 2009-01-28 2014-08-27 ヤマハ株式会社 スピーカアレイ装置、信号処理方法およびプログラム
JP5314129B2 (ja) * 2009-03-31 2013-10-16 パナソニック株式会社 音響再生装置及び音響再生方法
JP5472613B2 (ja) * 2009-12-28 2014-04-16 公立大学法人会津大学 立体音響生成システム、その制御方法及び制御プログラム
WO2012042905A1 (ja) * 2010-09-30 2012-04-05 パナソニック株式会社 音響再生装置および音響再生方法
JP6017352B2 (ja) * 2013-03-07 2016-10-26 シャープ株式会社 音声信号変換装置及び方法
JP2013176170A (ja) * 2013-06-14 2013-09-05 Panasonic Corp 再生装置および再生方法
JP6512767B2 (ja) * 2014-08-08 2019-05-15 キヤノン株式会社 音響処理装置および方法、並びにプログラム
CN115206332B (zh) * 2021-04-12 2025-09-16 炬芯科技股份有限公司 一种音效的处理方法、装置、电子设备及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5396801A (en) * 1977-02-03 1978-08-24 Nippon Columbia Multichannel stereo signal reproducer
JPS56132100A (en) * 1980-03-19 1981-10-16 Matsushita Electric Ind Co Ltd Acoustic image orientating device
JP3402567B2 (ja) * 1997-03-07 2003-05-06 日本ビクター株式会社 マルチチャンネル信号処理方法
JP2000354300A (ja) * 1999-06-11 2000-12-19 Accuphase Laboratory Inc マルチチャンネルオーディオ再生装置
JP4101452B2 (ja) * 2000-10-30 2008-06-18 日本放送協会 多チャンネル音声回路
JP2002345097A (ja) * 2001-05-15 2002-11-29 Sony Corp サラウンド音場再生システム
JP4062905B2 (ja) * 2001-10-24 2008-03-19 ヤマハ株式会社 ディジタル・ミキサ

Also Published As

Publication number Publication date
JP2007251832A (ja) 2007-09-27

Similar Documents

Publication Publication Date Title
EP1680941B1 (en) Multi-channel audio surround sound from front located loudspeakers
CN1753577B (zh) 再现双声道虚拟声音的方法、设备和计算机可读介质
KR100608024B1 (ko) 다중 채널 오디오 입력 신호를 2채널 출력으로 재생하기위한 장치 및 방법과 이를 수행하기 위한 프로그램이기록된 기록매체
US8520862B2 (en) Audio system
US6970569B1 (en) Audio processing apparatus and audio reproducing method
US20150139427A1 (en) Signal processing apparatus, signal processing method, program, and speaker system
JP5103522B2 (ja) 音声再生装置
CN1956606B (zh) 产生空间立体声的方法和装置
KR20130080819A (ko) 다채널 음향 신호의 정위 방법 및 장치
JP4744695B2 (ja) 仮想音源装置
JP4949706B2 (ja) 音像定位装置及び音像定位方法
JPWO2014125581A1 (ja) 音声再生装置、音声再生方法及び音声再生プログラム
JPWO2000045619A1 (ja) 仮想音源装置及びこれを用いた音響装置
US11388539B2 (en) Method and device for audio signal processing for binaural virtualization
WO2010073336A1 (ja) 音場補正装置
US11477595B2 (en) Audio processing device and audio processing method
Jost et al. Transaural 3-D Audio with Usercontrolled Calibration
JP2015170926A (ja) 音響再生装置、音響再生方法
JP6512767B2 (ja) 音響処理装置および方法、並びにプログラム
JP2000059898A (ja) 聴取位置補正装置およびその方法
WO2006057521A1 (en) Apparatus and method of processing multi-channel audio input signals to produce at least two channel output signals therefrom, and computer readable medium containing executable code to perform the method
JP4689506B2 (ja) 音像定位装置及び音像定位方法
JP4943098B2 (ja) 音響再生システム及び音響再生方法
JP5034694B2 (ja) 音像定位処理装置
JP3942914B2 (ja) ステレオ信号処理装置

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20071002

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110201

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20110223

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20110223

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110404

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111206

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120124

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120221

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120308

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150316

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4949706

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees