JP2007150890A - 映像表示装置 - Google Patents

Abstract

【課題】画面に表示された複数の映像に対応する音声が混声することなく、それぞれの映像の視聴者に視聴させることが可能な映像表示装置を提供する。
【解決手段】制御部１は、各映像信号の番組情報及び表示モードに基づいて、各音声信号によって形成される各音像の定位位置を決定する。そして、音声信号処理部１７は、各音像の定位位置に基づいて、第１ＤＳＰ１７１ａ，第２ＤＳＰ１７１ｂの処理内容を決定するＤＳＰパラメータを適宜設定し、各音声信号の波形及び位相を変更する。第１混合器１７２ａは、第１ＤＳＰ１７１ａによって生成された左音声信号Ｓ１Ｌと、第２ＤＳＰ１７１ｂによって生成された左音声信号Ｓ２Ｌとを混合してスピーカ（左）１８ａへ出力する。第２混合器１７２ｂは、第１ＤＳＰ１７１ａによって生成された右音声信号Ｓ１Ｒと、第２ＤＳＰ１７１ｂによって生成された右音声信号Ｓ２Ｒとを混合してスピーカ（右）１８ｂへ出力する。
【選択図】図１

Description

本発明は、ピクチャー・アンド・ピクチャー表示、ピクチャー・イン・ピクチャー表示のように、複数の映像信号に基づく映像を表示する映像表示装置に関し、より具体的には、表示された複数の映像に対応する音声が混声することなく、それぞれの映像の視聴者に視聴されることができる映像表示装置に関する。

近年、複数のチューナを内蔵することにより、１画面上にピクチャー・アンド・ピクチャー表示、ピクチャー・イン・ピクチャー表示を行なうことができる映像表示装置が実用化されている。このような映像表示装置においては、表示される映像については視聴者が選択して一方の画面にのみ集中して見ることができるが、音声については、２つの音声が混声することから、音声を聞き分けることが極めて困難である。

そこで、特許文献１には、多画面表示時にＯＳＤ（オンスクリーンディスプレイ）のクロック周波数を切り換えるようにし、主画面側のみに字幕表示がかかるようにした表示装置が開示されている。さらに第２の字幕切り取り手段を有することで、主画面、副画面いずれにも字幕が表示でき、音声ではなく字幕を利用して表示されている映像の音声を代用するようにした表示装置が開示されている。

また、特許文献２には、複数の映像ソースからの映像信号のうち、対応する音声信号を出力する映像信号を選択する選択手段と、この選択された映像の音声を出力するようにする音声処理回路と、選択されていない映像信号に付随した字幕信号を処理して、選択されていない複数の映像とともに字幕を表示する字幕処理手段とから構成されたテレビジョン受像機が開示されている。このテレビジョン受像機においても、特許文献１と同様に、一方の映像に対しては音声を出力し、他方の映像に対しては字幕を表示することで、両映像の内容をそれぞれの視聴者に把握させることができる。
特開２００２−３１４８９６号公報 特開平１０−２４３３１５号公報

しかしながら、特許文献１及び特許文献２に開示されている技術は、字幕を音声の代用とすることから、臨場感が欠けるとともに、字幕を目で追う必要があることから、視聴者が肝心な映像を注視することができなくなる虞があった。また、字幕での情報伝達量は音声の情報伝達量より少ないことから、番組制作者及び番組出演者が伝えたい内容が十分に視聴者に伝わらない虞があった。例えば、字幕制作の担当者によって番組から受ける影響に相違が生じる虞がある。さらに、現在、一部の放送しか字幕に対応していないので、特許文献１及び特許文献２に開示されている技術は、字幕に対応した放送番組にしか適用することができないという問題があった。

本発明は斯かる事情に鑑みてなされたものであり、複数の音声信号によって形成される各音像の定位位置を決定し、決定した定位位置に基づいて各音声信号の波形及び／又は位相を変更する構成とすることにより、同一画面に表示された複数の映像に対応する音声が混声することなく、それぞれの映像の視聴者に視聴させることが可能な映像表示装置の提供を目的とする。

また本発明は、各映像の表示寸法及び表示位置を選択し、選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成とすることにより、各映像の表示寸法及び表示位置によって各音像の画面からの距離に相違を持たせて、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることが可能な映像表示装置の提供を目的とする。

さらに本発明は、各映像信号を識別する番組情報を取得し、取得した番組情報に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成することにより、映像の番組情報に応じて画面からの音像の定位位置が変更されるので、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることが可能な映像表示装置の提供を目的とする。

さらにまた本発明は、番組情報並びに選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成とすることにより、各映像の表示寸法が等しい場合であっても、一方の映像が他方より、音声に対する重要性が低いと考えられるときは、一方の映像に対応する音像を、他方の音像より後方側に定位させるなど、より様々な状況に対応することができる映像表示装置の提供を目的とする。

さらにまた本発明は、番組情報が番組のカテゴリーを含んでいる場合に、カテゴリーに対して音声の出力優先順位を規定した音声優先度情報を記憶しておき、各映像信号の番組情報からカテゴリーを抽出し、抽出したカテゴリーに対応する音声優先度情報を抽出して、各音声信号によって形成される各音像の定位位置を決定する構成することにより、視聴者が音声優先度情報を適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる映像表示装置の提供を目的とする。

さらにまた本発明は、番組情報が番組のカテゴリーを含んでいる場合に、カテゴリーに対して基準の定位位置を規定した基準位置情報を記憶しておき、各映像信号の番組情報からカテゴリーを抽出し、抽出したカテゴリーに対応する基準位置情報を抽出して、各音声信号によって形成される各音像の定位位置とする構成とすることにより、視聴者が基準位置情報を適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる映像表示装置の提供を目的とする。

さらにまた本発明は、各映像を視聴する視聴者の位置を推定し、推定した位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成とすることにより、各映像の視聴者が存在していると推定された位置に、各映像の音声信号によって形成される音像の定位位置を設定することができる映像表示装置の提供を目的とする。

さらにまた本発明は、視聴者までの距離を計測し、計測した距離の位置に視聴者が存在していると推定する構成とすることにより、定位させるべき音像の表示画面からの距離の設定精度が向上する映像表示装置の提供を目的とする。

さらにまた本発明は、視聴者の画面に対する方位を計測し、計測した方位に視聴者が存在していると推定する構成とすることにより、定位させるべき音像の位置の推定精度が向上する映像表示装置の提供を目的とする。

本発明に係る映像表示装置は、複数の映像信号に基づく映像を画面に表示し、各映像信号に対応する複数の音声信号に基づく音声を出力する映像表示装置において、前記複数の音声信号によって形成される各音像の定位位置を決定する定位位置決定手段と、決定した定位位置に基づいて各音声信号の波形及び／又は位相を変更する手段とを備えることを特徴とする。

本発明にあっては、複数の映像信号に基づく映像を画面に表示し、各映像信号に対応する複数の音声信号に基づく音声を出力する場合に、複数の音声信号によって形成される各音像の定位位置を決定し、決定した定位位置に基づいて各音声信号の波形及び／又は位相を変更する。これにより、たとえ同一画面に複数の映像が表示された場合であっても、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。

本発明に係る映像表示装置は、各映像の表示寸法及び表示位置を選択するための手段をさらに備え、前記定位位置決定手段は、選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあることを特徴とする。

本発明にあっては、画面に表示される各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する。例えば、ピクチャー・アンド・ピクチャー表示のように各映像の表示寸法が等しい場合には、両映像に対する音声出力の優先度が等しいと判断し、各映像に対応する音声信号によって形成される音像の定位位置の画面からの距離を等しくする。２画面の場合には、左画面の映像に対応する音声を左側に定位させ、右画面の映像に対応する音声を右側に定位させる。これにより、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。また、例えば、ピクチャー・イン・ピクチャー表示のように各映像の表示寸法が異なる場合には、表示寸法の大きい映像に対する音声出力の優先度が、表示寸法の小さい映像に対する音声出力の優先度より高いと判断し、表示寸法の大きい映像に対応する音像の定位位置を、表示寸法の小さい映像に対応する音像の定位位置より、画面に近づける。これにより、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。

本発明に係る映像表示装置は、各映像信号を識別する番組情報を取得する手段をさらに備え、前記定位位置決定手段は、取得した番組情報に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあることを特徴とする。

本発明にあっては、各映像信号を識別するＥＰＧ情報などの番組情報を取得し、取得した番組情報に基づいて、各音声信号によって形成される各音像の定位位置を決定する。例えば、野球やサッカーのようなスポーツの映像は音声に対する重要性が一般的に低いと考えられるので、スポーツの映像に対応する音像を、映画やニュースような映像に対応する音像より後方側に定位させる。これにより、映像の番組情報に応じて画面からの音像の定位位置が変更されるので、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。

本発明に係る映像表示装置は、各映像信号を識別する番組情報を取得する手段と、各映像の表示寸法及び表示位置を選択するための手段とをさらに備え、前記定位位置決定手段は、取得した番組情報並びに選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあることを特徴とする。

本発明にあっては、各映像信号を識別するＥＰＧ情報などの番組情報、並びに、画面に表示される各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する。例えば、ピクチャー・アンド・ピクチャー表示のように各映像の表示寸法が等しい場合であっても、一方の映像が他方より、音声に対する重要性が低いと考えられるときは、一方の映像に対応する音像を、他方の音像より後方側に定位させる。これにより、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。

本発明に係る映像表示装置は、前記番組情報が番組のカテゴリーを含み、前記カテゴリーに対して音声の出力優先順位を規定した音声優先度情報を記憶する記憶部と、取得した各映像信号の番組情報から前記カテゴリーを抽出する手段とをさらに備え、抽出したカテゴリーに対応する音声優先度情報を前記記憶部から抽出して、各音声信号によって形成される各音像の定位位置を決定するようにしてあることを特徴とする。

本発明にあっては、番組情報が番組のカテゴリーを含んでいる場合に、カテゴリーに対して音声の出力優先順位を規定した音声優先度情報を記憶しておく。そして、各映像信号の番組情報からカテゴリーを抽出し、抽出したカテゴリーに対応する音声優先度情報を抽出して、各音声信号によって形成される各音像の定位位置を決定する。音声優先度情報によって各音像の定位位置が決定されることから、視聴者が音声優先度情報を適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる。

本発明に係る映像表示装置は、前記番組情報が番組のカテゴリーを含み、前記カテゴリーに対して基準の定位位置を規定した基準位置情報を記憶する記憶部と、取得した各映像信号の番組情報から前記カテゴリーを抽出する手段とをさらに備え、抽出したカテゴリーに対応する基準位置情報を前記記憶部から抽出して、各音声信号によって形成される各音像の定位位置とするようにしてあることを特徴とする。

本発明にあっては、番組情報が番組のカテゴリーを含んでいる場合に、カテゴリーに対して基準の定位位置を規定した基準位置情報を記憶しておく。そして、各映像信号の番組情報からカテゴリーを抽出し、抽出したカテゴリーに対応する基準位置情報を抽出して、各音声信号によって形成される各音像の定位位置とする。基準位置情報によって各音像の定位位置が決定されることから、視聴者が基準位置情報を適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる。

本発明に係る映像表示装置は、各映像を視聴する視聴者の位置を推定する推定手段をさらに備え、前記定位位置決定手段は、推定した位置に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあることを特徴とする。

本発明にあっては、各映像を視聴する視聴者の位置を推定し、推定した位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する。これにより、各映像の視聴者が存在していると推定された位置に、各映像の音声信号によって形成される音像の定位位置を設定することができる。

本発明に係る映像表示装置は、前記視聴者までの距離を計測する手段をさらに備え、前記推定手段は、計測した距離の位置に視聴者が存在していると推定するようにしてあることを特徴とする。

本発明にあっては、視聴者までの距離を計測し、計測した距離の位置に視聴者が存在していると推定する。視聴者までの距離を計測によって推定することができるので、定位させるべき音像の表示画面からの距離の設定精度が向上する。

本発明に係る映像表示装置は、前記視聴者の前記画面に対する方位を計測する手段をさらに備え、前記推定手段は、計測した方位に視聴者が存在していると推定するようにしてあることを特徴とする。

本発明にあっては、視聴者の画面に対する方位を計測し、計測した方位に視聴者が存在していると推定する。視聴者の画面に対する方位を計測によって推定することができるので、定位させるべき音像の位置の推定精度が向上する。

本発明によれば、複数の音声信号によって形成される各音像の定位位置を決定し、決定した定位位置に基づいて各音声信号の波形及び／又は位相を変更する構成としたので、たとえ同一画面に複数の映像が表示された場合であっても、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。

本発明によれば、各映像の表示寸法及び表示位置を選択し、選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成としたので、各映像の表示寸法及び表示位置によって各音像の画面からの距離に相違を持たせて、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。

本発明によれば、各映像信号を識別する番組情報を取得し、取得した番組情報に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成としたので、映像の番組情報に応じて画面からの音像の定位位置が変更されるので、各映像に対応する音声が混声することなく、それぞれの映像の視聴者に、映像と音声とを視聴させることができる。

本発明によれば、番組情報並びに選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成としたので、各映像の表示寸法が等しい場合であっても、一方の映像が他方より、音声に対する重要性が低いと考えられるときは、一方の映像に対応する音像を、他方の音像より後方側に定位させるなど、より様々な状況に対応することができる。

本発明によれば、番組情報が番組のカテゴリーを含んでいる場合に、カテゴリーに対して音声の出力優先順位を規定した音声優先度情報を記憶しておき、各映像信号の番組情報からカテゴリーを抽出し、抽出したカテゴリーに対応する音声優先度情報を抽出して、各音声信号によって形成される各音像の定位位置を決定する構成としたので、視聴者が音声優先度情報を適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる。

本発明によれば、番組情報が番組のカテゴリーを含んでいる場合に、カテゴリーに対して基準の定位位置を規定した基準位置情報を記憶しておき、各映像信号の番組情報からカテゴリーを抽出し、抽出したカテゴリーに対応する基準位置情報を抽出して、各音声信号によって形成される各音像の定位位置とする構成としたので、視聴者が基準位置情報を適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる。

本発明によれば、各映像を視聴する視聴者の位置を推定し、推定した位置に基づいて、各音声信号によって形成される各音像の定位位置を決定する構成としたので、各映像の視聴者が存在していると推定された位置に、各映像の音声信号によって形成される音像の定位位置を設定することができる。

本発明によれば、視聴者までの距離を計測し、計測した距離の位置に視聴者が存在していると推定する構成としたので、定位させるべき音像の表示画面からの距離の設定精度が向上する。

本発明によれば、視聴者の画面に対する方位を計測し、計測した方位に視聴者が存在していると推定する構成としたので、定位させるべき音像の位置の推定精度が向上する等、優れた効果を奏する。

以下、本発明をその実施の形態を示す図面に基づいて詳述する。

（実施の形態１）
図１は本発明の実施の形態１に係る映像表示装置の構成を示すブロック図である。なお、同図において、映像信号・音声信号の流れを破線で示す。
本発明の実施の形態１に係る映像表示装置は、制御部１、記憶部１０、第１チューナ部１１ａ、第２チューナ部１１ｂ、セレクタ部１２、操作信号受信部１３、番組情報取得部１４、映像信号処理部１５、表示部１６、音声信号処理部１７、スピーカ１８などを備えている。制御部１は、上述した各部を直接的又は間接的に制御し、内蔵するＲＯＭに格納された制御プログラムに従って種々の機能を果たす。

第１チューナ部１１ａ及び第２チューナ部１１ｂは、例えば放送中継基地の方向に向けて配置された図示しないアンテナに接続されている。第１チューナ部１１ａ及び第２チューナ部１１ｂは、それぞれ、信号復調部１１１ａ及び１１１ｂと、信号分離部１１２ａ及び１１２ｂとから構成されている。放送中継基地からは、映像信号と音声信号とが重畳された放送波（映像音声信号）が送信されており、信号復調部部１１１ａ、１１１ｂは、送信された映像音声信号のうちの特定周波数帯域の映像音声信号を選択して復調し、信号分離部１１２ａ、１１２ｂは、復調された映像音声信号を映像信号と音声信号とに分離する。

セレクタ部１２は、第１チューナ部１１ａ及び第２チューナ部１１ｂから出力される２セットの映像信号及び音声信号のうち、一方の映像信号及び音声信号をメイン信号に、他方の映像信号及び音声信号をサブ信号に、それぞれ設定するものである。

操作信号受信部１３は、リモコン３から送信された操作信号を受信するためのものであり、この操作信号によって映像表示装置の動作が操作される。本発明の映像表示装置に対応したリモコン３は、図２に示すように、ピクチャー・アンド・ピクチャーモードを指示するためのＰ＆Ｐ表示キー３ａと、ピクチャー・イン・ピクチャーモードを指示するためのＰｉｎＰ表示キー３ｂとを備えている。

視聴者がＰ＆Ｐ表示キー３ａを押下することによって、図３（ａ）に示すように、表示部１６の画面の左（左画面１６１）に一方のチューナ部の映像を、画面の右（右画面１６２）に他方のチューナ部の映像を表示する旨の操作信号が生成され、リモコン３から映像表示装置（操作信号受信部１３）に向けて操作信号が送信される。

一方、視聴者がＰｉｎＰ表示キー３ｂを押下することによって、図３（ｂ）に示すように、表示画面（親画面１６３）に一方のチューナ部の映像を、親画面１６３の中に設定した子画面１６４に他方のチューナ部の映像を表示する旨の操作信号が生成され、リモコン３から映像表示装置（操作信号受信部１３）に向けて操作信号が送信される。本例では、映像表示装置とは別体のリモコン３を用いて映像表示装置を遠隔操作するものとするが、映像表示装置の本体には図示しない操作部が設けられてあり、映像表示装置を本体側で操作することも可能である。

また、番組の放送時刻、内容（カテゴリーを含む）などの番組情報（ＥＰＧ情報）が放送波に重畳されており、番組情報取得部１４は、放送波に重畳された番組情報を取得する。これにより、取得した番組情報から、第１チューナ部１１ａ及び第２チューナ部１１ｂにて受信した映像音声信号の内容を把握することができる。

記憶部１０には、音声優先度データベース１０ａが格納されている。音声優先度データベース１０ａは、図４に示すように、番組カテゴリーと音声出力優先順位とが関連付けられて記憶されたものであり、番組カテゴリーが、「映画」、「ドラマ」、「音楽」、「バラエティ」、「ニュース」、「スポーツ」のそれぞれに対して、音声出力優先順位が、「１」、「２」、「３」、「４」、「５」、「６」のように設定されている。もちろん、音声優先度データベース１０ａは、視聴者によって適宜変更を加えられてもよく、視聴者が音声優先度データベース１０ａを適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる。音声出力優先順位は、映像に加えて音声が出力されることが望ましいと想定されるコンテンツを優先度の上位に設定する。

映像信号処理部１５は、合成処理部１５ａを内蔵しており、第１チューナ部１１ａ及び第２チューナ部１１ｂにて復調・分離された映像信号に対して適宜の信号処理を行なう。合成処理部１５ａは、リモコン３からの指示により、ピクチャー・アンド・ピクチャーモード（図３（ａ））、又はピクチャー・イン・ピクチャーモード（図３（ｂ））のうちの一方の２画面表示となるように２つの映像信号を合成する。そして、映像信号処理部１５にて適宜の信号処理が行なわれた映像信号は表示部１６へ出力され、映像が表示部１６に表示される。

音声信号処理部１７は、第１ＤＳＰ（デジタル・シグナル・プロセッサ）１７１ａ，第２ＤＳＰ１７１ｂ及び第１混合器１７２ａ，１７２ｂを内蔵しており、第１チューナ部１１ａ及び第２チューナ部１１ｂにて復調・分離された各音声信号に対して適宜の信号処理を行なった後にスピーカ１８へ出力して音声を出力する。スピーカ１８は複数から構成され、２つのスピーカ（左）１８ａ，スピーカ（右）１８ｂから構成されている場合についてさらに説明する。

制御部１は、各映像信号の番組情報及び表示モードに基づいて、各音声信号によって形成される各音像の定位位置を決定する（詳細は後述する）。音声信号処理部１７は、制御部１によって決定した各音像の定位位置に基づいて、第１ＤＳＰ１７１ａ，第２ＤＳＰ１７１ｂの処理内容を決定するＤＳＰパラメータを適宜設定し、各音声信号の波形及び位相を変更する。本例では、第１ＤＳＰ１７１ａにて、セレクタ部１２にて設定されたメインの音声信号Ｓ１の波形及び位相を変更し、左音声信号Ｓ１Ｌ及び右音声信号Ｓ１Ｒを生成する。一方、第２ＤＳＰ１７１ｂにて、セレクタ部１２にて設定されたサブの音声信号Ｓ２の波形及び位相を変更し、左音声信号Ｓ２Ｌ及び右音声信号Ｓ２Ｒを生成する。なお、音声信号の波形の変更とは、単なる波形の振幅変更のみならず、音声信号を構成する各周波数成分の振幅変更を含み、また、位相の変更とは、単なる波形の位相変更のみならず、音声信号を構成する各周波数成分の位相変更を含む。

第１混合器１７２ａは、第１ＤＳＰ１７１ａによって生成された左音声信号Ｓ１Ｌと、第２ＤＳＰ１７１ｂによって生成された左音声信号Ｓ２Ｌとを混合してスピーカ（左）１８ａへ出力する。一方、第２混合器１７２ｂは、第１ＤＳＰ１７１ａによって生成された右音声信号Ｓ１Ｒと、第２ＤＳＰ１７１ｂによって生成された右音声信号Ｓ２Ｒとを混合してスピーカ（右）１８ｂへ出力する。

次に、セレクタ部１２の機能についてさらに詳述する。図５はセレクタ部の機能を説明するための図である。
第１チューナ部１１ａの映像をメインとする場合、セレクタ部１２は、第１チューナ部１１ａによって復調・分離された映像信号Ｖ１を合成処理部１５ａの第１入力部へ、音声信号Ｓ１を第１ＤＳＰ１７１ａへ出力するとともに、第２チューナ部１１ｂによって復調・分離された映像信号Ｖ２を合成処理部１５ａの第２入力部へ、音声信号Ｓ２を第２ＤＳＰ１７１ｂへ出力する（図５（ａ））。

第２チューナ部１１ｂの映像をメインとする場合、セレクタ部１２は、第２チューナ部１１ｂによって復調・分離された映像信号Ｖ２を合成処理部１５ａの第１入力部へ、音声信号Ｓ２を第１ＤＳＰ１７１ａへ出力するとともに、第１チューナ部１１ａによって復調・分離された映像信号Ｖ１を合成処理部１５ａの第２入力部へ、音声信号Ｓ１を第２ＤＳＰ１７１ｂへ出力する（図５（ｂ））。このようにして、セレクタ部１２は、第１チューナ部１１ａ及び第２チューナ部１１ｂから出力される２セットの映像信号及び音声信号のうち、一方の映像信号及び音声信号をメイン信号に、他方の映像信号及び音声信号をサブ信号に、それぞれ設定する。

図６は本発明の実施の形態１に係る映像表示装置が行なう処理手順を示すフローチャートである。なお、処理手順は一例であり、これに限るものではない。また、このような処理手順は、制御部１に内蔵したＲＯＭへ予め制御プログラムを組み込んでおくことにより行なうことができる。

本例では、２画面表示モードとして、ピクチャー・アンド・ピクチャーモード、又はピクチャー・イン・ピクチャーモードの一方の表示モードが選択されるようになっており、先ず、制御部１は現在の表示モードの情報を取得する（ステップＳ１）。

次いで、番組情報取得部１４は、第１チューナ部１１ａの映像に係る番組情報（第１番組情報）を取得し（ステップＳ２）、また、第２チューナ部１１ｂの映像に係る番組情報（第２番組情報）を取得する（ステップＳ３）。ここでは、番組情報が番組のカテゴリー（映画、ドラマ、音楽、バラエティ、ニュース、スポーツなどのコンテンツの種類）を含み、第１チューナ部１１ａ及び第２チューナ部１１ｂの映像のカテゴリーを抽出する。

そして、制御部１は、現在の表示モードの情報、並びに第１番組情報及び第２番組情報に基づいて、各映像に対応する音声信号によって形成される各音像の定位位置を決定する（ステップＳ４：音像定位位置決定処理）。そして、音声信号処理部１７は、制御部１によって決定した各音像の定位位置に基づいて、各音声信号の波形及び位相を変更する（ステップＳ５）。

例えば、左右に配置されたスピーカ（左）１８ａ，スピーカ（右）１８ｂから出力される音声信号の振幅によって音像の左右方向の定位位置が決定され、スピーカ（左）１８ａ，スピーカ（右）１８ｂから出力される音声信号の位相によって音像の前後方向の定位位置が決定される。第１ＤＳＰ１７１ａ，第２ＤＳＰ１７１ｂは、各音声信号の振幅及び位相の変更のための各種計算を行なうための専用ＬＳＩであって、各音像の定位位置をパラメータとして入力することによって各音声信号の振幅及び位相を適宜変更し、音像を目的の位置に定位させる。

上述のような処理を行なうことにより、表示部１６に表示されている２つの映像に対応する各音声信号によって形成される音像の定位位置を相違させ、各音声をそれぞれの定位位置で聞き取りやすくさせることができる。

次に、Ｓ４の音像定位位置決定処理の具体例について説明する。図７は音像定位位置決定処理の処理手順の一例を示すフローチャートである。先ず、制御部１は、第１番組情報と第２番組情報とが同一カテゴリーであるか否かを判定する（ステップＳ１１）。

Ｓ１１において、第１番組情報と第２番組情報とが同一カテゴリーであると判定された場合（Ｓ１１：ＹＥＳ）、２画面表示モードがピクチャー・アンド・ピクチャーモードであるか否かを判定する（ステップＳ１２）。Ｓ１２において、２画面表示モードがピクチャー・アンド・ピクチャーモードであると判定された場合（Ｓ１２：ＹＥＳ）、２つの映像の表示寸法及びカテゴリーが等しいことから音声出力の優先度が等しいと判断し、各映像に対応する音声信号によって形成される音像の定位位置の画面からの距離を等距離にし、かつ左画面の映像に対応する音像を左側に定位させ、右画面の映像に対応する音像を右側に定位させるものと決定する（ステップＳ１３）。

これにより、音声信号処理部１７が各音声信号の波形及び位相を変更し、図８（図８（ａ）：正面図，図８（ｂ）：上面図）に示すように、左画面１６１の映像に対応する音声信号によって形成される音像３１が左側に定位され、右画面１６２の映像に対応する音声信号によって形成される音像３２が右側に定位される。

一方、Ｓ１２において、２画面表示モードがピクチャー・アンド・ピクチャーモードでない、すなわちピクチャー・イン・ピクチャーモードであると判定された場合（Ｓ１２：ＮＯ）、子画面の映像の優先度が親画面の映像より低いと判断し、親画面の映像に対応する音像を前方側に定位させ、子画面の映像に対応する音像を後方側に定位させるものと決定する（ステップＳ１４）。

これにより、音声信号処理部１７が各音声信号の波形及び位相を変更し、図９（図９（ａ）：正面図，図９（ｂ）：上面図）に示すように、親画面１６３の映像に対応する音声信号によって形成される音像３３を前方側に定位され、子画面１６４の映像に対応する音声信号によって形成される音像３４を後方側に定位される。

また、Ｓ１１において、第１番組情報と第２番組情報とが同一カテゴリーでないと判定された場合（Ｓ１１：ＮＯ）、それぞれのカテゴリーの音声優先度を把握すべく、制御部１は、音声優先度データベース１０ａにアクセスし（ステップＳ１５）、各映像のカテゴリーの音声優先度を抽出する（ステップＳ１６）。そして、抽出した音声優先度に基づいて、各映像に対応する音声信号によって形成される音像の定位位置を決定する（ステップＳ１７）。

例えば、優先度が高い方の映像に対応する音声を、優先度が低い方の映像の音声よりも前方側に定位させるものと決定することにより、音声信号処理部１７が各音声信号の波形及び位相を変更し、図１０（図１０（ａ）：正面図，図１０（ｂ）：上面図）に示すように、優先度が高い方の映像（ここでは左画面１６１の映像）に対応する音声信号によって形成される音像３５を前方側に定位され、優先度が低い方の映像（ここでは右画面１６２の映像）に対応する音声信号によって形成される音像３６が後方側に定位される。

なお、番組カテゴリーと該番組カテゴリーに対する基準の定位位置とが関連付けられた基準定位位置データベースを記憶部１０に記憶しておき、制御部１が各映像の番組情報から番組カテゴリーを抽出し、抽出した番組カテゴリーに対応する基準の定位位置を基準定位位置データベースから抽出し、抽出した基準の定位位置を各映像に対応する音声信号によって形成される音像の定位位置とするようにしてもよい。基準定位位置データベースは、図１１に示すように、番組カテゴリーと基準の定位位置とが関連付けられて記憶されたものであり、番組カテゴリーが、「映画」、「ドラマ」、「音楽」、「バラエティ」、「ニュース」、「スポーツ」のそれぞれに対して、基準の定位位置（画面からの距離）が、「距離Ａ」、「距離Ｂ」、「距離Ｃ」、「距離Ｄ」、「距離Ｅ」、「距離Ｆ」のように設定されている。設定距離については、距離Ａ＜距離Ｂ＜距離Ｃ＜距離Ｄ＜距離Ｅ＜距離Ｆの関係を有しており、「映画」の音像が最も前方に定位され、「スポーツ」の音像が最も後方に定位される。もちろん、基準定位位置データベースは、視聴者によって適宜変更を加えられてもよく、視聴者が基準定位位置データベースを適宜更新することで、使用用途に応じて各音像の定位位置を設定することができる。

（実施の形態２）
図１２は本発明の実施の形態２に係る映像表示装置の構成を示すブロック図である。
本発明の実施の形態２に係る映像表示装置は、制御部２、第１チューナ部１１ａ、第２チューナ部１１ｂ、セレクタ部１２、操作信号受信部１３、位置センサ２４、映像信号処理部１５、表示部１６、音声信号処理部１７、スピーカ１８などを備えている。制御部２は、上述した各部を直接的又は間接的に制御し、内蔵するＲＯＭに格納された制御プログラムに従って種々の機能を果たす。

位置センサ２４は、例えば超音波センサであって、視聴者に対して超音波を出射するとともに、視聴者によって反射された反射波を検出し、その時間差を算出することによって視聴者までの距離を計測するものである。本例では、図１３に示すように、左右に設けたスピーカ（左）１８ａ，スピーカ（右）１８ｂの各下辺側に位置センサ２４ａ，２４ｂを配置することによって、位置センサ２４ａが左側の視聴者までの距離を、位置センサ２４ｂが右側の視聴者までの距離を計測する。

制御部２は、位置センサ２４ａ，２４ｂを用いることによって計測した距離に基づいて、各音声信号によって形成される各音像の定位位置に決定する。そして、音声信号処理部１７は、制御部２によって決定した定位位置に基づいて、ＤＳＰパラメータを適宜設定することによって各音声信号の波形及び位相を変更する。その他の構成は図１と同様であるので、対応する部分には同一の符号を付してその詳細な説明を省略する。

図１４は本発明の実施の形態２に係る映像表示装置が行なう処理手順を示すフローチャートである。なお、本例では、２画面表示モードがピクチャー・アンド・ピクチャーモードの場合を想定する。

先ず、位置センサ２４ａが左映像の視聴者までの距離Ｘ１を計測し（ステップＳ２１）、位置センサ２４ｂが右映像の視聴者までの距離Ｘ２を計測する（ステップＳ２２）。計測された距離Ｘ１、Ｘ２は、各音声信号によって形成される各音像を定位させるべきスピーカ（左）１８ａ，スピーカ（右）１８ｂからの距離に相当し、制御部２は、計測された距離Ｘ１、Ｘ２に基づいて、各映像に対応する各音像の定位位置を決定する（ステップＳ２３）。

そして、音声信号処理部１７は、制御部２によって決定された各音像の定位位置に基づいて、各音声信号の波形及び位相を変更する（ステップＳ２４）。例えば、制御部２は、図１５（図１５（ａ）：正面図，図１５（ｂ）：上面図）に示すように、距離Ｘ１がスピーカ（左）１８ａから左側の視聴者までの距離であると推定し、スピーカ（左）１８ａから表示画面の法線方向に距離Ｘ１の位置を、左画面１６１の映像に対応する音声信号によって形成される音像３７の定位位置に設定する。また、距離Ｘ２がスピーカ（右）１８ｂから右側の視聴者までの距離であると推定し、スピーカ（右）１８ｂから表示画面の法線方向に距離Ｘ２の位置を、右画面１６２の映像に対応する音声信号によって形成される音像３８の定位位置に設定する。

このようにすれば、各映像の視聴者が存在していると推定された位置に、各映像の音声信号によって形成される音像の定位位置を設定することができる。

なお、実施の形態２では、位置センサ２４ａが左映像の視聴者までの距離Ｘ１を計測し、位置センサ２４ｂが右映像の視聴者までの距離Ｘ２を計測することとし、画面に対する各視聴者の方位を考慮しなかったが、各視聴者の方位を計測して、各音声信号によって形成される各音像の定位位置を決定するようにしてもよい。

例えば、図１６に示すように、左映像の視聴者用に、適長離隔した２つの位置センサ２４ａ，２４ｃを映像表示装置の表示面側に設け、位置センサ２４ａ，２４ｃによって左映像の視聴者までの距離Ｘ１１、Ｘ１２を計測する。そして、位置センサ２４ａ，２４ｃの各位置を中心とする半径がＸ１１、Ｘ１２の２つの円の交点３９を算出することによって、左映像の視聴者までの距離及び方位角φ１を推定することができる。

同様に、右映像の視聴者用に、適長離隔した２つの位置センサ２４ｂ，２４ｄを映像表示装置の表示面側に設け、位置センサ２４ｂ，２４ｄによって右映像の視聴者までの距離Ｘ２１、Ｘ２２を計測する。そして、位置センサ２４ｂ，２４ｄの各位置を中心とする半径がＸ２１、Ｘ２２の２つの円の交点４０を算出することによって、右映像の視聴者までの距離及び方位角φ２を推定することができる。そして、推定した各映像の視聴者の位置を、各音像の定位位置に設定することによって、より精度良く目的の位置に各映像に対応する音声を定位させることができる。

本発明の実施の形態１に係る映像表示装置の構成を示すブロック図である。 本発明に用いる映像表示装置用のリモコンの模式図である。 ２画面表示モードとしてのピクチャー・アンド・ピクチャーモード及びピクチャー・イン・ピクチャーモードの概要を示す図である。 音声優先度データベースの概要を示す図である。 セレクタ部の機能を説明するための図である。 本発明の実施の形態１に係る映像表示装置が行なう処理手順を示すフローチャートである。 音像定位位置決定処理の処理手順の一例を示すフローチャートである。 音像の定位位置を説明するための図である。 音像の定位位置を説明するための図である。 音像の定位位置を説明するための図である。 基準定位位置データベースの概要を示す図である。 本発明の実施の形態２に係る映像表示装置の構成を示すブロック図である。 本発明の実施の形態２に係る映像表示装置の正面図である。 本発明の実施の形態２に係る映像表示装置が行なう処理手順を示すフローチャートである。 音像の定位位置を説明するための図である。 画面に対する各視聴者の方位を推定する概要を説明するための説明図である。

符号の説明

１，２ 制御部
３ リモコン
１１ａ 第１チューナ部
１１ｂ 第２チューナ部
１２ セレクタ部
１３ 操作信号受信部
１４ 番組情報取得部
１５ 映像信号処理部
１６ 表示部
１７ 音声信号処理部
１８（１８ａ，１７ｂ） スピーカ
２４（２４ａ，２４ｂ，２４ｃ，２４ｄ） 位置センサ

Claims (9)

1. 複数の映像信号に基づく映像を画面に表示し、各映像信号に対応する複数の音声信号に基づく音声を出力する映像表示装置において、
   前記複数の音声信号によって形成される各音像の定位位置を決定する定位位置決定手段と、
   決定した定位位置に基づいて各音声信号の波形及び／又は位相を変更する手段と
   を備えることを特徴とする映像表示装置。
2. 各映像の表示寸法及び表示位置を選択するための手段をさらに備え、
   前記定位位置決定手段は、
   選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあること
   を特徴とする請求項１に記載の映像表示装置。
3. 各映像信号を識別する番組情報を取得する手段をさらに備え、
   前記定位位置決定手段は、
   取得した番組情報に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあること
   を特徴とする請求項１に記載の映像表示装置。
4. 各映像信号を識別する番組情報を取得する手段と、
   各映像の表示寸法及び表示位置を選択するための手段と
   をさらに備え、
   前記定位位置決定手段は、
   取得した番組情報並びに選択された各映像の表示寸法及び表示位置に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあること
   を特徴とする請求項１に記載の映像表示装置。
5. 前記番組情報は、番組のカテゴリーを含み、
   前記カテゴリーに対して音声の出力優先順位を規定した音声優先度情報を記憶する記憶部と、
   取得した各映像信号の番組情報から前記カテゴリーを抽出する手段と
   をさらに備え、
   抽出したカテゴリーに対応する音声優先度情報を前記記憶部から抽出して、各音声信号によって形成される各音像の定位位置を決定するようにしてあること
   を特徴とする請求項３又は請求項４に記載の映像表示装置。
6. 前記番組情報は、番組のカテゴリーを含み、
   前記カテゴリーに対して基準の定位位置を規定した基準位置情報を記憶する記憶部と、
   取得した各映像信号の番組情報から前記カテゴリーを抽出する手段と
   をさらに備え、
   抽出したカテゴリーに対応する基準位置情報を前記記憶部から抽出して、各音声信号によって形成される各音像の定位位置とするようにしてあること
   を特徴とする請求項３又は請求項４に記載の映像表示装置。
7. 各映像を視聴する視聴者の位置を推定する推定手段をさらに備え、
   前記定位位置決定手段は、
   推定した位置に基づいて、各音声信号によって形成される各音像の定位位置を決定するようにしてあること
   を特徴とする請求項１に記載の映像表示装置。
8. 前記視聴者までの距離を計測する手段をさらに備え、
   前記推定手段は、
   計測した距離の位置に視聴者が存在していると推定するようにしてあること
   を特徴とする請求項７に記載の映像表示装置。
9. 前記視聴者の前記画面に対する方位を計測する手段をさらに備え、
   前記推定手段は、
   計測した方位に視聴者が存在していると推定するようにしてあること
   を特徴とする請求項８に記載の映像表示装置。

Images