JP4385289B2 - 音声処理装置および方法、並びにプログラム - Google Patents

Description

本発明は、音声処理装置および方法、並びにプログラムに関し、特に、映像と、その映像に関わる音声を処理するとき、映像が提供される方向と音声が提供される方向を一致させるように制御する際に適用して好適な音声処理装置および方法、並びにプログラムに関する。

近年、ホームシアターシステムや、５．１チャンネルシステムなどと称されるシステムが普及しつつある。このようなシステムにおいては、複数のスピーカが設置され、臨場感のある音がユーザに提供されるように構成されている。

また、そのようなシステムにおいて扱われるマルチチャンネルコンテンツなどと称されるコンテンツも普及しつつある。マルチチャンネルコンテンツには、映像と複数の音声（オーディオ）チャネルで構成されるものと、複数のオーディオチャンネルのみで構成されるものがある。

映像がある場合、センターチャンネル（システムに含まれる複数のスピーカのうち、センタースピーカと称され、通常、映像を映し出すモニターの近傍に配置されるスピーカ用のチャンネル）に台詞が割り振られる。一方、映像がない場合、サラウンド空間の中央正面の音が割り当てられる。

このように、マルチチャンネルコンテンツを扱う装置では、センタースピーカとモニターのような映像再生装置を視聴者の正面に配置することでサラウンド空間を再現している。そのようなサラウンド空間を車でも再現できるように、車内に複数のスピーカを配置している車もある。

このようにして、ユーザに最適な音響を提供するような制御が行われている。また、マルチチャンネルコンテンツを扱う装置において、映像があるコンテンツを扱うときと、映像がないコンテンツを扱うときとで、モニターの電源のオン、オフを制御することも提案されている。（例えば、特許文献１参照）
特開２００１−２５０３３３号公報

しかしながら、車内空間のように余剰スペースが限られる環境においては必ずしも視聴者の正面にセンタースピーカやモニターを配置できない場合が多い。そのような場合、例えば、モニターに表示されている映像が映画であるようなとき、その映画の台詞が、映像画面とは異なる方向から聞こえてきて、ユーザ（搭乗者）に違和感を与えてしまうといった問題があった。

このような問題は、必ずしも車載のシステムに限定される問題ではなく、家などで、同様なシステムを構築したとしても、余剰スペースなどの関係で、センタースピーカとモニターを適切な位置に配置することができず、結果として、上述したような問題が発生する可能性があった。

ホームシアターシステムなどと称されるシステムを構築したときに、このような問題、すなわち、ユーザに違和感を感じさせるようなことを防ぐ必要があるといた課題があった。

本発明はこのような状況に鑑みてなされたものであり、映像に関わりある音声が、その映像とは結びつかない方向から聞こえてくることにより、ユーザが違和感を感じるといったような不都合が発生しないように、また、ユーザに最適な音響を提供できるように、出力される音声を制御することを目的とする。また、そのような制御を行うためにユーザ側で行う設定を、できる限り簡便に行えるようにすることを目的とする。

本発明の音声処理装置は、車内に設置された複数のスピーカから出力される音声を制御する音声処理装置において、リスニングポジション、スピーカの数、スピーカの配置、センタースピーカの有無に関するデータをそれぞれ設定する設定手段と、前記設定手段により設定されたデータから一意に算出されるパラメータ、または一意にテーブルから読み出されるパラメータであり、前記車内に設置されたモニタの映像と音声が提供される方向が一致するようにするために前記複数のスピーカから出力される音を制御するための第１のパラメータと、前記リスニングポジションの位置に音像を定位させるようにするために前記複数のスピーカから出力される音を制御するための第２のパラメータを、それぞれ設定し、記憶する記憶手段と、所定の記録媒体から読み出されるコンテンツデータが映像データを含むか否かを判断する判断手段と、前記判断手段により当該コンテンツデータに映像データが含まれると判断された場合、前記記憶手段に記憶された前記第１のパラメータを読み出し、前記判断手段により当該コンテンツデータに映像データは含まれないと判断された場合、前記記憶手段に記憶された前記第２のパラメータを読み出す読み出し手段と、前記読み出し手段により読み出された前記第１のパラメータまたは前記第２のパラメータに基づき、前記コンテンツデータに含まれる音声データを処理する処理手段とを含む。

本発明の音声処理方法は、パラメータを記憶する記憶手段と、所定の記録媒体からコンテンツデータを再生する再生手段を少なくとも備え、車内に設置された複数のスピーカから出力される音声を制御する音声処理装置の音声処理方法において、リスニングポジション、スピーカの数、スピーカの配置、センタースピーカの有無に関するデータをそれぞれ設定する設定ステップと、前記設定ステップの処理で設定されたデータから一意に算出されるパラメータ、または一意にテーブルから読み出されるパラメータであり、前記車内に設置されたモニタの映像と音声が提供される方向が一致するようにするために前記複数のスピーカから出力される音を制御するための第１のパラメータと、前記リスニングポジションの位置に音像を定位させるようにするために前記複数のスピーカから出力される音を制御するための第２のパラメータを、それぞれ設定し、前記記憶手段への記憶を制御する記憶制御ステップと、前記再生手段により前記記録媒体から再生されたコンテンツデータに映像データが含まれるか否かを判断する判断ステップと、前記判断ステップの処理で当該コンテンツデータに映像データが含まれると判断された場合、前記記憶手段に記憶されている前記第１のパラメータを読み出し、前記判断手段により当該コンテンツデータに映像データは含まれないと判断された場合、前記記憶手段に記憶されている前記第２のパラメータを読み出す読み出しステップと、前記読み出しステップの処理により読み出された前記第１のパラメータまたは前記第２のパラメータに基づき、前記コンテンツデータに含まれる音声データを処理する処理ステップとを含む。

本発明のプログラムは、パラメータを記憶する記憶手段と、所定の記録媒体からコンテンツデータを再生する再生手段を少なくとも備え、車内に設置された複数のスピーカから出力される音声を制御する音声処理装置に、リスニングポジション、スピーカの数、スピーカの配置、センタースピーカの有無に関するデータをそれぞれ設定する設定ステップと、前記設定ステップの処理で設定されたデータから一意に算出されるパラメータ、または一意にテーブルから読み出されるパラメータであり、前記車内に設置されたモニタの映像と音声が提供される方向が一致するようにするために前記複数のスピーカから出力される音を制御するための第１のパラメータと、前記リスニングポジションの位置に音像を定位させるようにするために前記複数のスピーカから出力される音を制御するための第２のパラメータを、それぞれ設定し、前記記憶手段への記憶を制御する記憶制御ステップと、前記再生手段により前記記録媒体から再生されたコンテンツデータに映像データが含まれるか否かを判断する判断ステップと、前記判断ステップの処理で当該コンテンツデータに映像データが含まれると判断された場合、前記記憶手段に記憶されている前記第１のパラメータを読み出し、前記判断手段により当該コンテンツデータに映像データは含まれないと判断された場合、前記記憶手段に記憶されている前記第２のパラメータを読み出す読み出しステップと、前記読み出しステップの処理により読み出された前記第１のパラメータまたは前記第２のパラメータに基づき、前記コンテンツデータに含まれる音声データを処理する処理ステップとを含む処理を実行させるコンピュータが読み取り可能なプログラム。

このプログラムを処理するコンピュータは、音声処理装置を含むカーナビゲーションシステムなどと称される装置を制御するために、そのカーナビゲーションシステムに内蔵されているものとすることができる。

また、このプログラムは、所定の記録媒体に記録して配布することが可能である。また、このプログラムは、ネットワークを介して、音声処理装置を制御するコンピュータに提供することが可能である。

本発明の音声処理装置および方法、並びにプログラムにおいては、再生されるコンテンツデータに映像データが含まれている場合と、含まれていない場合とで、異なるパラメータに基づいて音声データが処理される。音声データが処理されることにより複数のスピーカから音が出力される場合、パラメータにより各スピーカから出力される音の強度などは調整され、その調整は、映像がある場合とない場合とで異なるものとされる。

本発明によれば、映像と音声をユーザ側に提供するときと、音声のみをユーザ側に提供するときとで、異なる音声出力の制御を行うことが可能となる。その制御により、映像が提供されるときには、その映像が提供される方向と、音声が提供される方向とが、一致しているとユーザが感じるようにすることが可能となる。

以下に、本発明の実施の形態について図面を参照して説明する。

図１は、本発明を適用したシステムの一実施の形態の構成を示す図である。

図１に示したシステムは、車内に設置される、カーナビゲーションシステムなどと称される装置に、本発明を適用した場合の構成例を示している。カーナビゲーションシステムは、ＧＰＳ（Global Positioning System）を用い、車の走行位置をユーザに認識させ、ユーザが設定した目的地までの道順を、ユーザに案内する機能を有するものである。

また、近年のカーナビゲーションシステムには、カーオーディオなどと称される装置と一体化されたものもある。そのような一体化された装置には、ＣＤ（Compact Disk）やラジオ放送を再生することにより、ユーザに音声を提供する機能が備えられている。また、そのような一体化された装置には、ＤＶＤ（Digital Versatile Disc）やテレビジョン放送を再生し、ユーザに、映像と音声を提供する機能も備えられている。

本明細書においては、カーナビゲーションシステムと称される機能と、カーオーディオと称される機能が一体化された装置を例に挙げて説明する。また、説明の都合上、以下の説明においては、そのような一体化された装置をカーナビゲーションシステムと記述する。

カーナビゲーションシステムは、本体１０とモニター１１とから構成されている。モニター１１は、ユーザ（運転者）が運転している状態でも視認できる位置、例えば、車のダッシュボードの上に取り付けられる。モニター１１には、本体１０から供給されるデータに基づく画像や映像、例えば、地図や映画などの映像が表示される。

画像や映像（以下、特に区別する必要がない場合、画像と記述する）を表示するモニター１１と、タッチパネル１２は一体的に構成されている。タッチパネル１２は、ユーザがその上をタッチしたとき、その位置（座標）を検出する。タッチパネル１２は、透明な部材で形成されており、その下に配置されているモニター１１に表示された画像をユーザが視認することができるように構成されている。

カーナビゲーションシステムは、通常、音声をユーザに提供するためのスピーカも含む構成とされている。図２は、カーナビゲーションシステムを構成し、車内に設置されるスピーカの配置について説明するための図である。図２に示した例では、運転席２１、助手席２２、および、後部座席２３が車内の座席として設置されている。このような座席の配置の場合、例えば、図２に示すように、運転席２１側にスピーカ３１−１、助手席２２側にスピーカ３１−２、後部座席２３の両側に、それぞれスピーカ３２−１，３２−２が設けられている。

このように、図２に示した車内には、４個のスピーカが設置されている。スピーカの数は、車やユーザの好みなどにより異なり、４個とは限らない。また、５．１チャンネルシステムなどと称され、５個のスピーカと、１個の重低音用のスピーカ（ウーファー）から構成されるスピーカシステムを備える車両もある。

このように、車により設置されているスピーカの数や、その配置などは異なる。

また、モニター１１で映像が表示されているときと、映像が表示されていないときとでは、各スピーカからの音の出し方が異なる方が好ましい。このことについて説明を加える。例えば、モニター１１に映像が表示されている状況は、本体１０で映画などが収録されたＤＶＤを再生している状況である。

映画などの場合、モニター１１の近傍（好ましくは背後）からセリフなどの音が出力される方が好ましい。これは、モニター１１上の映像、特に、その映像に含まれている俳優から発せられる音声は、その俳優から発せられているように聞こえる方が好ましいからである。

例えば、図２に示したように、モニター１１とスピーカが配置されているような場合、モニター１１上に映し出されている俳優が発したセリフが、スピーカ３１−１から聞こえてくるような場合、運転席２１に座っている運転者（ユーザ）は、モニター１１上の映像と、聞こえてくる音声の方向との不一致による違和感（場合によっては不快感）を感じることがある。このことは、他の席に座っているユーザにとっても同じことが言える。

次に、モニター１１上に映像が表示されていないような状況を考える。モニター１１上に映像が表示されていないような状況とは、例えば、モニター１１上に何も表示されていない、地図などの画像が表示されている場合などが考えられる。このような状況で、本体１２により音楽が収録されたＣＤが再生されているような場合、その音楽が、モニター１１の近傍から聞こえてこなくても、ユーザが違和感を感じるようなことはないと考えられる。むしろ、音楽のような場合、換言すれば、映像とのかかわりがない音の場合、モニター１１の配置位置にかかわらず、例えば、運転席２１に座っている運転者には、スピーカ３１−１から音が聞こえれば問題はないと考えられる。

このように、モニター１１上に表示されている画像とスピーカから出力される音にかかわりがある場合、その音が聞こえてくる方向が制御された方が好ましいと考えられる。

そこで、音の方向に関する制御を、本体１０側で行えるようにするために、車内に設置されているスピーカの数およびその配置の設定が行なわれ、その設定に基づいて音の方向に関する制御が行われるようにする。まず、そのような設定や制御を行う本体１０の構成について説明を加える。

図３は、本体１０の内部構成例を示す図である。

本体１０のＣＰＵ（Central Processing Unit）５１は、ＲＯＭ（Read Only Memory）５２に記憶されているプログラムに従って各種の処理を実行する。ＲＡＭ（Random Access Memory）５３には、ＣＰＵ５１が各種の処理を実行する上において必要なデータやプログラムなどが適宜記憶される。入出力インタフェース５５は、タッチパネル１２や図示されていない本体１０に設けられた操作部から構成される入力部５６が接続され、入力部５６に入力された信号をＣＰＵ５１に出力する。また、入出力インタフェース５５には、モニター１１やスピーカなどから構成される（または、それらの機器と接続され、制御するためのインタフェースなどを含む構成とされる）出力部５７も接続されている。

さらに、入出力インタフェース５５には、ハードディスクなどから構成される記憶部５８、および、リモートコントローラ（不図示）と赤外線などを用いてデータの授受を行う通信部５９も接続されている。ドライブ６０は、磁気ディスク７１、光ディスク７２、光磁気ディスク７３、半導体メモリ７４などの記録媒体からデータを読み出したり、データを書き込んだりするときに用いられる。

ドライブ６０に装着される記録媒体は、上述したように、映画などが収録されたＤＶＤ、音楽などが収録されたＣＤ、地図データが収録された所定のディスクなどである。ドライブ６０は、このように、複数の記録媒体を取り扱うことができる、マルチディスクドライブなどと称されるドライブである。

図４は、本体１２の機能を示すブロック図である。

図４においては、以下の説明において必要となる機能を図示し、説明を加えるが、本体１０の機能は、図４に示した機能に限定されるわけではない。例えば、図４に示した機能には、カーナビゲーションシステムにおけるナビゲーションを実行する部分の詳細は図示していないが、そのような機能が、実際のカーナビゲーションシステムに備えられているのはいうまでもなく、そのような機能がないカーナビゲーションシステムに本発明が適用されることを意味しているわけではない。

制御部１０１は、本体１０内の各部を制御するために設けられている。制御部１０１は、ＣＰＵ５１（図３）が有する機能である。制御部１０１は入力処理部１０２から入力されるユーザからの指示に基づき各部を制御する。ユーザからの指示は、タッチパネル１２から入力される。ここでは、タッチパネル１２から指示が入力されるとするが、リモートコントローラなどからも入力され、制御部１０１は、それらの指示も処理するように構成されている。

入力処理部１０２は、ドライブ６０が所定の記録媒体から読み出したデータを、制御部１０１に供給するための制御も行う。表示制御部１０３は、モニター１０１の表示の制御を行う。その制御に用いるためのデータ（例えば、地図データ）は、制御部１０１から供給される。データ保持部１０４は、後述するような、スピーカの設定に関わる処理に関するデータなどを保持し、制御部１０１にその保持しているデータを供給する。データ保持部１０４は、例えば、ＲＯＭ５２、ＲＡＭ５３、記憶部５８（いずれも図３）から構成される。

映像処理部１０５は、ドライブ６０から読み出されたデータのうち、映像に関する映像データを処理するために設けられている。通常、映像データは、ＭＰＥＧ（Moving Picture Experts Group）方式などの所定の方式で圧縮されている。そこで、映像処理部１０５は、供給された映像データを所定の方式に基づき伸張し、表示制御部１０３に供給する。

同様に、音声処理部１０６は、制御部１０１から供給される音声データを所定の方式に基づいて伸張し、スピーカ３１−１（図２）などに対して出力する。音声処理部１０６は、デジタルフィルタ１０７を有し、必要に応じて、スピーカ３１−１に出力するデータに対してフィルタリング処理を施す。

このような機能を有する本体１０の動作について説明を加える。まず、図５のフローチャートを参照して、スピーカの数および配置の設定に関わる動作について説明する。

前提として、スピーカの数および配置に関わる設定が行われる場合、ユーザにより、その設定を行うためのプログラムの起動が指示される。その指示に基づき、制御部１０１は、データ保持部１０４からプログラムを読み出し、その読み出したプログラムに基づく制御を制御を行うことにより以下に説明する処理が実行される。

ステップＳ１１において、車種の設定が行われる。制御部１０１は、データ保持部１０４に保持（記憶）されているデータの内、車種の設定に関わるデータ（プログラム）を読み出す。読み出されたデータに基づく処理が実行されることにより、モニター１１上には、図６に示したような画面が表示される。

図６に示した画面には、“乗車定員は？”というメッセージの下側に、“５人以下”という項目１２１と、“５人以上”という項目１２２が表示されている。ここで、乗車定員として５人を閾値としたのは、車内に設置される座席の列が、２列かまたは３列かを決定する一要因であると考えられるからである。

また、車内に設置されるスピーカの数を決定する要因として、車内に設置される座席数（列数）が一要因であると考えられる。そこで、ここでは、スピーカの数を設定するための画面として、まず、図６に示すように、乗車定員をユーザ側に質問する画面を設ける。

なお、図６に示した画面の他の画面の例として、例えば、“１ボックス”、“セダン”、“ワゴン”といった車種をユーザ側に質問する画面や、直接的にスピーカの数を入力（選択）させるような画面も考えられ、そのような画面でも良い。

図６のような画面が、モニター１１上に表示され、項目１２１、または、項目１２２のうちのどちらか一方がユーザにより選択されると、ステップＳ１２に処理が進められる。モニター１１上には、タッチパネル１２が設置されているため、ユーザは、そのタッチパネル１２をタッチすることにより、項目１２１または項目１２２を選択することができる。

タッチパネル１２は、タッチされた位置を検出すると、その位置を示すデータを入力処理部１０２（図４）の制御のもと、制御部１０１に出力する。制御部１０１は、タッチパネル１２からの位置データを参照し、項目１２１が選択されたのか、項目１２２が選択されたのかを判断する。“５人以下”という項目１２１が選択された場合、図７に示したような画面が、モニター１１上に表示され、“５人以上”という項目１２２が選択された場合、図８に示したような画面が、モニター１１上に表示される。

図７に示した画面は、乗車定員が“５人以下”という項目１２１が選択された際に、モニター１１上に表示される画面例である。その表示される画面は、車内の座席の列が２列の場合を模式的に示している。図７に示した画面には、俗にフロントスピーカなどと称されるスピーカ１３１−１，１３１−２、リアスピーカなどと称されるスピーカ１３２−１，１３２−２、および、サブウーファーなどと称されるスピーカ１３３を示すマークが、それぞれ表示されている。なお、センタースピーカは、後述する処理で選択されるため、図７に示した画面には表示されない。

図８に示した画面は、乗車定員が“５人以上”という項目１２２が選択された際に、モニター１１上に表示される画面例である。その表示される画面は、車内の座席の列が３列の場合を模式的に示している。図８に示した画面には、図７に示した画面で表示されるスピーカのマークに加え３列目の座席の左右に、スピーカ１５１−１とスピーカ１５１−２を示すマークが表示されている。

なお、図７や図８に示した画面は、一例であり限定を示すものではない。例えば、車によっては、座席が２列の車であっても、図７に示したようなスピーカの配置（数）になっていない車もある。そのような車にも対応できるように、適宜、ユーザによりスピーカの配置位置や数を変更できるような仕組み、例えば、図７や図８に示したような画面だけでなく、他の画面も用意し、それらの画面をユーザが選択できるようにしても良い。

図７または図８に示したような画面が、モニター１１上に表示されると、ステップＳ１２の処理としてユーザは、リスニングポジションの選択を行う。最も良い音の環境が提供されるポジションを、どこにするかが選択される。リスニングポジションが選択され、“ＯＫ”ボタン１４１が操作されると、ステップＳ１３に処理が進められ、モニター１１の設置されている列が選択（設定）される。

図７に示した画面において“ＯＫ”ボタン１４１が操作された場合、図９に示したような画面に切り換えられ、図８に示した画面において“ＯＫ”ボタン１４１が操作された場合、図１０に示したような画面に切り換えられる。図９や図１０に示した画面には、列を選択するための枠１７１が表示されている。例えば、ユーザが、所定の列を選択すると、その選択された列に枠１７１が表示され、ユーザにその列が選択されていることを認識させるようになっている。

図９または図１０に示した画面において、ユーザが、モニター１１が設置されている座席の列を選択し、“ＯＫ”ボタン１４１を操作すると、図１１に示したような画面にモニター１１上の画面が切り換えられる。ユーザは、図１１に示したような画面において、モニター１１上のスクロールバー１９１を操作することにより、モニター１１が設置されている位置を設定する。

このように、モニター１１が設置されている列と、その列における位置（左右方向）が設定されることにより、モニター１１の設置されている位置が登録される。

図１１における画面から、“ＯＫ”ボタン１４１が操作されると、図１２または図１３に示したような画面にモニター１１上の画面が切り換えられる。図１２または図１３に示した画面が参照され、ステップＳ１４において、スピーカの構成が設定される。

図１２または図１３に示した、各スピーカを示す複数のマークのなかから、選択されたマーク（ユーザによりタッチされたマーク）は実線で、選択されていないマークは、点線で表示される。図１２に示した画面例においては、スピーカ１３１−１，１３１−２が、選択されたため、実線で表示されている。また、選択されたマークで、実線で表示されているマークであっても、再度タッチされることにより、選択されていない状態（点線で表示される状態）に戻すことが可能とされている。

また、例えば、フロントスピーカと称されるスピーカ１３１−１とスピーカ１３１−２は、通常、車には少なくとも設置されているスピーカであるため、デフォルトとして実線で表示される（既に選択された状態にされる）ようにしても良い。

さらに、フロントスピーカ（スピーカ１３１−１とスピーカ１３１−２）やリアスピーカ（スピーカ１３２−１とスピーカ１３２−２）は、通常、対になって装着されるため、例えば、スピーカ１３２−１が選択された場合、ユーザの指示によらず、対に構成されるスピーカ１３２−２も選択されるようにしても良い。

ユーザは、このような図１２または図１３に示した画面を参照し、自己の車に設置されているスピーカに対応する位置に表示されているマークをタッチし、選択する。ユーザは、設置されているスピーカに対応するマークを選択し終えた場合、“Ｏ．Ｋ．”ボタンをタッチする。このような選択、および、決定の処理が、ユーザ側で行われることにより、センタースピーカ以外のスピーカの数およびその位置の設定が行われる。

そして、図１４または図１５に示したような画面においてセンタースピーカの有無が設定される。センタースピーカが設置されている場合には、“あり”というボタン２０１が操作され、センタースピーカが設置されていない場合には、“なし”というボタン２０２が操作される。操作されたボタンは、操作されていないボタンと区別が付くように表示される。ユーザは、操作されたボタンが正しければ、“ＯＫ”ボタン１４１を操作する。

ステップＳ１５において、センタースピーカが設置されていると選択されたか否かが判断される。図１４または図１５に示した画面において、“あり”というボタン２０１が操作され、その後“ＯＫ”ボタン１４１が操作された場合、“ＹＥＳ”と判断され、ステップＳ１６に処理が進められ、それ以外のときには“ＮＯ”と判断され、ステップＳ１６の処理がスキップされてステップＳ１７に処理が進められる。

ステップＳ１６において、図１６に示したような画面がモニター１１上に表示される。ユーザは、図１６に示した画面を参照し、センタースピーカの位置を設定する。図１６に示した画面は、センタースピーカの位置（左右方向）を、スクロールバー１９１により設定する場合を示している。

図１６の画面の代わりに、図１７に示したような画面が表示され、より詳細にセンタースピーカの位置が設定されるようにしても良い。図１７に示した画面において、センタースピーカが、車内の天井に設置されている場合、スピーカ１３４−１が選択される。同様に、ダッシュボード上で、運転席から見て左側に設置されている場合、スピーカ１３４―２が選択され、中央に設置されている場合、スピーカ１３４―３が選択され、右側（運転者から見て前）に設置されている場合、スピーカ１３４―４が選択される。

ここまでの処理において、リスニングポジション、スピーカの数、その配置がそれぞれ設定される。本体１０側では、このような設定に関する処理を、以下のように行う。すなわち、選択されたスピーカのマーク（座席の列などのマーク）を点線の表示から実線の表示に切り換えるといった処理は、表示制御部１０３により行われる。ユーザがタッチパネル１２をタッチすると、ユーザがタッチした位置のデータは、入力処理部１０２を介して制御部１０１に供給される。

制御部１０１は、供給されたデータから、どのスピーカのマークが選択されたのかを判断する。制御部１０１は、選択されたと判断したマークの情報を、表示制御部１０３に供給する。表示制御部１０３は、その供給されたデータを基に、マークを実線で表示する、または、点線で表示するといった制御を行う。

また、制御部１０１は、“ＯＫ”ボタン１４１が操作されたと判断した場合、その時点で設定されているスピーカに関するデータを、データ保持部１０４に保持させる。この保持に関する処理は、ステップＳ１７およびステップＳ１８の処理として行われる。

ステップＳ１７とステップＳ１８におけるそれぞれの処理で設定され、保持されるデータは、共に、設定されたリスニングポジション、スピーカの数、その配置、センタースピーカの有無に関するデータである。そして、そのようなデータの他に、それらのデータから一意に算出されるパラメータ、または、一意にテーブルから読み出されるパラメータである。

ステップＳ１７において設定されるパラメータは、モニター１１の位置にセンタースピーカ１３４の音像を定位させるためのパラメータ（以下、パラメータ１とする）である。このようなパラメータ１は、モニター１１上に音声と関わりのある映像が表示され（例えば、ＤＶＤが再生されているような状態）、あたかもその映像から音が出ているような感覚をユーザに提供するためのパラメータである。

ステップＳ１８において設定されるパラメータは、リスニングポジションの位置にセンタースピーカ１３４の音像を定位させるためのパラメータ（以下、パラメータ２とする）である。このようなパラメータ２は、モニター１１上に音声と関わりのある映像は表示されていなく（例えば、ＣＤが再生されているような状態）、あたかもユーザの目の前で演奏されている（音が出ているような）感覚をユーザに提供するためのパラメータである。

このようにして、車内に設置されているスピーカの数や、センタースピーカの有無、それらのスピーカの配置位置が設定され、その設定された情報（以下、適宜、スピーカデータと記述する）から、パラメータが設定され、データ保持部１０４に保持される。

このようにしてデータ保持部１０４に保持されたパラメータは、ドライブ６０によりデータが再生される際、ユーザにとって最適であると判断される音を提供するための制御に用いられる。具体的には映像がある場合には、その映像が存在しているところから、音が発せられているかのように制御され、映像がない場合には、通常の制御が行われるようにするために、データ保持部１０４に保持されたスピーカデータが用いられる。

このような制御について、図１８のフローチャートを参照して説明する。

ユーザによりドライブ６０に所定の記録媒体（例えば、ＤＶＤやＣＤ）が挿入され、その挿入された記録媒体からのデータ（以下、適宜、コンテンツデータと記述する）の再生が指示されると、ステップＳ３１以下の処理が本体１２において開始される。

ステップＳ３１において、ドライブ６０により記録媒体に記録されているコンテンツデータの再生が行われる。ドライブ６０により記録媒体から読み出されたコンテンツデータは、入力処理部１０２の制御のもと、制御部１０１に供給される。ステップＳ３２において、制御部１０１は、読み出されたコンテンツデータに映像データは含まれているか否かを判断する。

例えば、コンテンツデータのヘッダ部分には、そのデータの種類（音声データであるか、映像データであるかなど）の情報が記載されている。その情報が参照されることにより、ステップＳ３２における処理が行われる。

ステップＳ３２において、読み出されたコンテンツデータには映像データが含まれると判断された場合、ステップＳ３３に処理が進められる。ステップＳ３３において、データ保持部１０４に保持されているパラメータ１が読み出される。そして、データ保持部１０４から読み出されたパラメータ１は、音声処理部１０６のデジタルフィルタ１０７に設定される。このパラメータ１がどのようなことを実現するためのパラメータなのかについて、ここで説明を加えておく。

上述したように、モニター１１に映像が表示されているとき、その映像に関わりのある音声は、あたかもその映像から発せられているように制御される方が好ましい。換言すれば、映像と、その映像に関わる音声は、その映像と一致する方向から発せられる方が好ましい。

例えば、センタースピーカが設置されている場合を例に挙げて説明すると、モニター１１の背面に、センタースピーカが設置されていれば、センタースピーカからの音がモニター１１が位置する方向から発せられることになる。よって、このような場合、ユーザに提供される映像の方向と、提供される音声の方向が一致することになる。このような一致している状態が、好ましい状態であると考えられる。

しかしながら、車内という限られた空間内では、必ずしもセンタースピーカをモニター１１の背面に設置できるとは限らず、図１７に示したように、センタースピーカの配置位置は、ダッシュボードの左右、中央、または天井といったように種々の場所が考えられる。また、センタースピーカ自体が設置されていない場合もある。

そのような場合であっても、映像と音声が提供される方向が一致するようにするために、車内に設置されている各スピーカから出力される音を制御する。その制御のために用いられるのが、上記したパラメータである。

図１８に示したフローチャートの説明に戻り、ステップＳ３４において、音声処理部１０６は、制御部１０１から供給される音声データを、設定されたパラメータ１を用いて処理する。処理された音声データは、それぞれ、対応するスピーカに対して出力される。

また、映像処理部１０５は、制御部１０１から供給される映像データを処理する。処理された映像データは、表示制御部１０３を介してモニター１１に供給される。

ステップＳ３５において、コンテンツの切り換えがあったか否かが判断される。例えば、ドライブ６０に挿入されていた記録媒体が、他の記録媒体に交換され、その記録媒体に記録されているコンテンツデータの再生が指示された場合、ステップＳ３５において、コンテンツの切り換えがあったと判断される。

ステップＳ３５において、コンテンツの切り換えはないと判断された場合、ステップＳ３４に処理が戻され、それ以降の処理が繰り返される。すなわち、その時点で再生されているコンテンツデータの再生が維持される。

一方、ステップＳ３５において、コンテンツの切り換えがあったと判断された場合、その新たなコンテンツに対して、ステップＳ３２以降の処理が繰り返される。

ステップＳ３２において、再生されているコンテンツに映像はないと判断された場合、ステップＳ３６に処理が進められる。ステップＳ３６において、データ保持部１０４に保持されている、パラメータ２が読み出される。そして、データ保持部１０４から読み出されたパラメータ２は、音声処理部１０６のデジタルフィルタ１０７に設定される。このパラメータ２は、上述したように、音像を、リスニングポジションにいるユーザの前にくるようにするためのものである。

ステップＳ３７において、音声処理部１０６は、制御部１０１から供給される音声データを、設定されたパラメータ２を用いて処理する。処理された音声データは、それぞれ、対応するスピーカに対して出力される。

ステップＳ３８において、コンテンツの切り換えがあったか否かが判断される。例えば、ドライブ６０に挿入されていた記録媒体が、他の記録媒体に交換され、その記録媒体に記録されているコンテンツデータの再生が指示された場合、ステップＳ３８において、コンテンツの切り換えがあったと判断される。

ステップＳ３８において、コンテンツの切り換えはないと判断された場合、ステップＳ３７に処理が戻され、それ以降の処理が繰り返される。すなわち、その時点で再生されているコンテンツデータの再生が維持される。

このように、再生されるコンテンツデータに映像データが含まれているか否かにより、音を制御するためのパラメータが設定され、その設定されたパラメータにより、スピーカから出力される音が制御される。すなわち、モニター１１に映像が映し出される場合、その映像に適合する方向から音が出力されるように制御される。

このような制御が行われることにより、ユーザは、映像のあり、なしに依存する最適な音響設定を容易に設定することができると共に、設置した音響設定に基づく音の提供を受けることができる。また、一度スピーカデータを設定すれば、すなわち、図５に示したようなフローチャートの処理が実行されれば、コンテンツの種類が切り替わったような場合でも、本体１０側で最適な音響設定に切り換えられるようにすることができる。もって、ユーザに、常に、最適な音響を提供することが可能となる。

なお、スピーカデータ（パラメータ）は、データ保持部１０４に複数保持させておく（パラメータ１、２以外にさらに他のパラメータも保持させておく）ようにしても良い。複数のパラメータをデータ保持部１０４に保持させるようにした場合、複数のパラメータを作成するために、図５に示したようなフローチャートの処理が複数回行われる（または、ステップＳ１７やステップＳ１８と同様の処理が繰り返される）。

また、複数のパラメータは、それぞれ、例えばコンテンツの特徴（例えば、コンテンツが映画の映像なのか、コンサートなどの映像なのか）により用意されるようにし、コンテンツの特徴などに依存して、音響設定が切り換えられるようにしても良い。

なお、上述した実施の形態においては、車内における音の制御を例に挙げて説明したが、本発明を家内のホームシアターシステムなどと称されるシステムに適用することも可能である。

上述した一連の処理は、それぞれの機能を有するハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータ（本実施の形態においては、本体１０に相当する装置）などに、記録媒体からインストールされる。

記録媒体は、図３に示すように、パーソナルコンピュータ（本体１０）とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク７１（フレキシブルディスクを含む）、光ディスク７２（CD-ROM（Compact Disc-Read Only Memory），DVD（Digital Versatile Disc）を含む）、光磁気ディスク７３（MD（Mini-Disc）（登録商標）を含む）、若しくは半導体メモリ７４などよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供される、プログラムが記憶されているＲＯＭ５２や記憶部５８が含まれるハードディスクなどで構成される。

なお、本明細書において、媒体により提供されるプログラムを記述するステップは、記載された順序に従って、時系列的に行われる処理は勿論、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。

本発明を適用したシステムの一実施の形態の構成を示す図である。 スピーカの配置について説明するための図である。 本体の内部構成例を示す図である。 本体の機能を示すブロック図である。 本体の動作を説明するためのフローチャートである。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 モニターに表示される画面例を示す図である。 本体の動作を説明するためのフローチャートである。

符号の説明

１０ 本体， １１ モニター， １２ タッチパネル， ５１ ＣＰＵ， ５２ ＲＯＭ， ５３ ＲＡＭ， ５６ 入力部， ５７ 出力部， ５８ 記憶部， ５９ 通信部， ６０ ドライブ， １０１ 制御部， １０２ 入力処理部， １０３ 表示制御部， １０４ データ保持部， １０５ 映像処理部， １０６ 音声処理部， １０７ デジタルフィルタ

Claims (4)

1. 車内に設置された複数のスピーカから出力される音声を制御する音声処理装置において、
   リスニングポジション、スピーカの数、スピーカの配置、センタースピーカの有無に関するデータをそれぞれ設定する設定手段と、
   前記設定手段により設定されたデータから一意に算出されるパラメータ、または一意にテーブルから読み出されるパラメータであり、前記車内に設置されたモニタの映像と音声が提供される方向が一致するようにするために前記複数のスピーカから出力される音を制御するための第１のパラメータと、前記リスニングポジションの位置に音像を定位させるようにするために前記複数のスピーカから出力される音を制御するための第２のパラメータを、それぞれ設定し、記憶する記憶手段と、
   所定の記録媒体から読み出されるコンテンツデータが映像データを含むか否かを判断する判断手段と、
   前記判断手段により当該コンテンツデータに映像データが含まれると判断された場合、前記記憶手段に記憶された前記第１のパラメータを読み出し、前記判断手段により当該コンテンツデータに映像データは含まれないと判断された場合、前記記憶手段に記憶された前記第２のパラメータを読み出す読み出し手段と、
   前記読み出し手段により読み出された前記第１のパラメータまたは前記第２のパラメータに基づき、前記コンテンツデータに含まれる音声データを処理する処理手段と
   を含む音声処理装置。
2. それぞれ所定の位置に配置されて音声を出力するための前記複数のスピーカに対して、
   前記処理手段は、
   前記第１のパラメータまたは前記第２のパラメータに基づき前記複数のスピーカからの音声の出力を異ならせるように前記音声データを処理する
   請求項１記載の音声処理装置。
3. パラメータを記憶する記憶手段と、所定の記録媒体からコンテンツデータを再生する再生手段を少なくとも備え、車内に設置された複数のスピーカから出力される音声を制御する音声処理装置の音声処理方法において、
   リスニングポジション、スピーカの数、スピーカの配置、センタースピーカの有無に関するデータをそれぞれ設定する設定ステップと、
   前記設定ステップの処理で設定されたデータから一意に算出されるパラメータ、または一意にテーブルから読み出されるパラメータであり、前記車内に設置されたモニタの映像と音声が提供される方向が一致するようにするために前記複数のスピーカから出力される音を制御するための第１のパラメータと、前記リスニングポジションの位置に音像を定位させるようにするために前記複数のスピーカから出力される音を制御するための第２のパラメータを、それぞれ設定し、前記記憶手段への記憶を制御する記憶制御ステップと、
   前記再生手段により前記記録媒体から再生されたコンテンツデータに映像データが含まれるか否かを判断する判断ステップと、
   前記判断ステップの処理で当該コンテンツデータに映像データが含まれると判断された場合、前記記憶手段に記憶されている前記第１のパラメータを読み出し、前記判断手段により当該コンテンツデータに映像データは含まれないと判断された場合、前記記憶手段に記憶されている前記第２のパラメータを読み出す読み出しステップと、
   前記読み出しステップの処理により読み出された前記第１のパラメータまたは前記第２のパラメータに基づき、前記コンテンツデータに含まれる音声データを処理する処理ステップと
   を含む音声処理方法。
4. パラメータを記憶する記憶手段と、所定の記録媒体からコンテンツデータを再生する再生手段を少なくとも備え、車内に設置された複数のスピーカから出力される音声を制御する音声処理装置に、
   リスニングポジション、スピーカの数、スピーカの配置、センタースピーカの有無に関するデータをそれぞれ設定する設定ステップと、
   前記設定ステップの処理で設定されたデータから一意に算出されるパラメータ、または一意にテーブルから読み出されるパラメータであり、前記車内に設置されたモニタの映像と音声が提供される方向が一致するようにするために前記複数のスピーカから出力される音を制御するための第１のパラメータと、前記リスニングポジションの位置に音像を定位させるようにするために前記複数のスピーカから出力される音を制御するための第２のパラメータを、それぞれ設定し、前記記憶手段への記憶を制御する記憶制御ステップと、
   前記再生手段により前記記録媒体から再生されたコンテンツデータに映像データが含まれるか否かを判断する判断ステップと、
   前記判断ステップの処理で当該コンテンツデータに映像データが含まれると判断された場合、前記記憶手段に記憶されている前記第１のパラメータを読み出し、前記判断手段により当該コンテンツデータに映像データは含まれないと判断された場合、前記記憶手段に記憶されている前記第２のパラメータを読み出す読み出しステップと、
   前記読み出しステップの処理により読み出された前記第１のパラメータまたは前記第２のパラメータに基づき、前記コンテンツデータに含まれる音声データを処理する処理ステップと
   を含む処理を実行させるコンピュータが読み取り可能なプログラム。

Images