JP2012182769A - 映像音声再生装置及び映像音声再生方法 - Google Patents

Abstract

【課題】接続されているモニタの機器構成が変化した場合に、利用者にとって違和感の少ないタイミングでフォーマットを切り替えること。
【解決手段】映像音声再生装置１００は、第１モニタ１５０及び第２モニタ１５１から、それぞれが対応する音声フォーマットを示す対応フォーマット情報を取得するフォーマット取得部１０９と、この対応フォーマット情報から、第１モニタ１５０及び第２モニタ１５１がともに対応する音声フォーマットを決定する出力フォーマット決定部１１０と、音声データの無音区間を検出する無音区間検出部１１２と、この無音区間において、音声フォーマット変換部１０５が使用する音声フォーマットを切り替えるフォーマット制御部１１４と、を備える。
【選択図】図１

Description

本発明は、映像音声再生装置及び映像音声再生方法に関する。

近年、民生用映像音声再生装置において、複数のデジタル映像音声出力端子を持つ映像音声再生装置が増えつつある。特に車載用途においては、前列以外のシートで同乗者が車中での移動時間を退屈せずに過ごせるようなリアシートエンターテイメントと呼ばれるシステムの構築も進んできている。このようなシステムでは、中列及び後列シートにそれぞれモニタが設置されることも多い。

一方、著作権保護の観点から、技術的に著作権保護機構が破られやすいアナログ方式の映像音声出力をなくして、著作権保護のコントロールを比較的容易に行うことが可能で、強力な暗号化等の技術を用いることができるデジタル方式の映像音声出力に限定する動きもある。

以上のような状況から、今後は複数のデジタル映像音声出力端子を持つ映像音声再生装置に対する需要がますます増大すると考えられる。

このような映像音声再生装置においては、接続される複数のモニタが同じ能力を有するとは限らないため、映像データ及び音声データのフォーマットは、各モニタで共通して再生可能なものが選択される必要がある。

これに対して、特許文献１には、接続されているモニタの機器構成が変化したタイミングで、現在接続されているモニタが対応する映像データ及び音声データのフォーマットを示す情報を取得し、各モニタで共通して再生可能なフォーマットのうちで最も上位の映像フォーマット及び音声フォーマットを自動的に設定する技術が開示されている。

特開２００７−３２４９１９号公報

しかしながら、特許文献１に開示された技術では、接続されているモニタの機器構成が変化したタイミングで、各モニタが共通して再生可能なフォーマットに切り替えられるため、フォーマットが変わる度に、映像ミュート又は音声ミュートが挿入されてしまう。ここで、映像ミュートとは、映像フォーマットの切り替え直前に、予め定められた映像、例えば、黒等の単一色映像を表示することで、映像フォーマットの切り替えに伴う映像信号の乱れを利用者に認知されにくくする表示形態のことである。この場合、接続状況に変化のないモニタで継続して視聴している利用者にとっては、自身に直接関係しないモニタの接続状況の変化によって、不意に映像ミュート又は音声ミュートが発生することになり、このような利用者の視聴品質が損なわれる。

本発明は、上述のような課題を解消するためになされたもので、接続されているモニタの機器構成が変化した場合に、利用者にとって違和感の少ないタイミングでフォーマットを切り替えることを目的とする。

本発明の１態様に係る映像音声再生装置は、映像音声ストリームから映像データ及び音声データを再生する再生部と、前記映像データのフォーマットを一の映像フォーマットに変換して、変換済みの映像データを生成する映像フォーマット変換部と、前記音声データのフォーマットを一の音声フォーマットに変換して、変換済みの音声データを生成する音声フォーマット変換部と、前記変換済みの映像データ及び前記変換済みの音声データを複数の映像音声出力装置に出力する複数の入出力部と、前記複数の入出力部を介して、前記複数の映像音声出力装置に含まれる各々の映像音声出力装置から、前記各々の映像音声出力装置が対応する音声フォーマットを示す対応フォーマット情報を取得するフォーマット取得部と、前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する音声フォーマットを、音声出力フォーマットとして決定する出力フォーマット決定部と、前記音声データの音量が予め定められた音量以下にある期間が、予め定められた期間以上の無音区間を検出する無音区間検出部と、前記無音区間において、前記音声フォーマット変換部に、前記一の音声フォーマットを前記音声出力フォーマットに切り替えさせるフォーマット制御部と、を備えることを特徴とする。

本発明の１態様によれば、接続されているモニタの機器構成が変化した場合に、利用者にとって違和感の少ないタイミングでフォーマットを切り替えることができる。

実施の形態１に係る映像音声再生装置の構成を概略的に示すブロック図である。 実施の形態１において、フォーマット取得部が取得した対応フォーマット情報の内容の一例を示す概略図である。 実施の形態１において、無音区間検出部で行う無音区間検出処理を示すフローチャートである。 （Ａ）及び（Ｂ）は、実施の形態１において行われる無音区間検出処理の具体例を示す概略図である。 実施の形態１における無音区間検出部が管理する無音区間管理情報の一例を示す概略図である。 実施の形態１における出力フォーマット決定部が行う映像出力フォーマット決定処理を示すフローチャートである。 実施の形態１における出力フォーマット決定部が行う音声出力フォーマット決定処理を示すフローチャートである。 実施の形態１におけるフォーマット制御部が行う映像フォーマット変更処理を示すフローチャートである。 実施の形態１におけるフォーマット制御部が行う音声フォーマット変更処理を示すフローチャートである。 実施の形態１におけるフォーマット制御部が行う音声フォーマット変更処理の変形例を示すフローチャートである。 実施の形態２に係る映像音声再生装置の構成を概略的に示すブロック図である。 実施の形態２における黒画区間検出部が行う黒画区間検出処理のフローチャートである。 実施の形態２におけるフォーマット制御部が行う映像フォーマット変更処理を示すフローチャートである。

実施の形態１．
図１は、実施の形態１に係る映像音声再生装置１００の構成を概略的に示すブロック図である。実施の形態１に係る映像音声再生装置１００は、ドライブ部１０１と、分離デコード部１０２と、映像フォーマット変換部１０３と、音声データ一時記憶部としての音声データバッファ部１０４と、音声フォーマット変換部１０５と、第１ＨＤＭＩ入出力部１０６と、第２ＨＤＭＩ入出力部１０７と、再生制御部１０８と、フォーマット取得部１０９と、出力フォーマット決定部１１０と、フォーマット記憶部１１１と、無音区間検出部１１２と、無音区間記憶部１１３と、フォーマット制御部１１４と、使用フォーマット記憶部１１５と、ユーザーインターフェース部（以下、ＵＩＦ部という）１１６と、リモコン１１７とを備える。ここで、ドライブ部１０１、分離デコード部１０２及び再生制御部１０８は、再生部１１８を構成する。映像音声再生装置１００には、映像音声出力装置としての第１モニタ１５０及び第２モニタ１５１がＨＤＭＩケーブルで接続されている。

ドライブ部１０１は、ＤＶＤ規格及びＢｌｕ−ｒａｙ Ｄｉｓｃ規格等の光ディスク等の記憶媒体からデータを読み取る読取部としての光学ドライブである。ドライブ部１０１は、再生制御部１０８からの指示に従って、光ディスクに記録された映像音声ストリームを読み取って、この映像音声ストリームを分離デコード部１０２に与える。なお、本実施の形態では、ドライブ部１０１は、光ディスクからデータを読み取るものとしたが、映像音声ストリームを保持したものであれば、ハードディスクドライブ及びフラッシュメモリ等の記憶媒体でも構わない。

分離デコード部１０２には、ドライブ部１０１にて読み出された映像音声ストリームが入力される。分離デコード部１０２は、映像音声ストリームから、映像ストリームと音声ストリームとを分離するデマルチプレクサと、映像ストリームをデコードして映像データを生成する映像デコーダと、音声ストリームをデコードして音声データを生成する音声デコーダとを有している。分離デコード部１０２は、再生制御部１０８からの指示に従って、内包するデマルチプレクサと、映像デコーダと、音声デコーダとを動作させ、入力された映像音声ストリームに基づいて、映像データ及び音声データを生成して、これらのデータを出力する。

映像フォーマット変換部１０３には、分離デコード部１０２から出力された映像データが入力される。映像フォーマット変換部１０３は、フォーマット制御部１１４からの指示に従い、入力された映像データを、接続されている第１モニタ１５０及び第２モニタ１５１の両方で再生可能な映像フォーマットに変換して、変換後の映像データを出力する。

音声データバッファ部１０４には、分離デコード部１０２から出力された音声データが入力される。音声データバッファ部１０４は、再生制御部１０８から、映像データ及び音声データの同期を取るための音声データ遅延時間の指示を受け、この音声データ遅延時間に従って、音声データを遅延させて出力する。

音声フォーマット変換部１０５には、音声データバッファ部１０４から出力された音声データが入力される。音声フォーマット変換部１０５は、フォーマット制御部１１４の指示に従い、入力された音声データを、接続されている第１モニタ１５０及び第２モニタ１５１の両方で再生可能な音声フォーマットに変換して、変換後の音声データを出力する。

第１ＨＤＭＩ入出力部１０６は、フォーマット取得部１０９の制御に従って、ＨＤＭＩケーブルで接続されたモニタが存在すれば、そのモニタで再生可能な映像フォーマット及び音声フォーマットを示す対応フォーマット情報を取得する。図１においては、第１ＨＤＭＩ入出力部１０６は、ＨＤＭＩケーブルにて第１モニタ１５０と接続されているので、接続されている第１モニタ１５０と通信を行い、第１モニタ１５０で再生可能な映像フォーマット及び音声フォーマットを示す対応フォーマット情報を取得する。そして、第１ＨＤＭＩ入出力部１０６は、取得された対応フォーマット情報を、フォーマット取得部１０９に与える。また、第１ＨＤＭＩ入出力部１０６には、映像フォーマット変換部１０３から出力された変換後の映像データ、及び、音声フォーマット変換部１０５から出力された変換後の音声データが入力される。そして、第１ＨＤＭＩ入出力部１０６は、入力されたこれらのデータに対して、ＨＤＭＩ規格に従って符号化を行って、デジタル信号としてのＨＤＭＩ信号を生成し、このＨＤＭＩ信号を第１モニタ１５０へ送信する。

第２ＨＤＭＩ入出力部１０７についても、第１ＨＤＭＩ入出力部１０６と同様の処理を行う。例えば、図１においては、第２ＨＤＭＩ入出力部１０７は、ＨＤＭＩケーブルにて第２モニタ１５１と接続されているので、接続されている第２モニタ１５１と通信を行い、第２モニタ１５１で再生可能な映像フォーマット及び音声フォーマットを示す対応フォーマット情報を取得する。そして、第２ＨＤＭＩ入出力部１０７は、取得された対応フォーマット情報を、フォーマット取得部１０９に与える。また、第２ＨＤＭＩ入出力部１０７には、映像フォーマット変換部１０３から出力された変換後の映像データ、及び、音声フォーマット変換部１０５から出力された変換後の音声データが入力される。そして、第２ＨＤＭＩ入出力部１０７は、入力されたこれらのデータに対して、ＨＤＭＩ規格に従って符号化を行って、デジタル信号としてのＨＤＭＩ信号を生成し、このＨＤＭＩ信号を第２モニタ１５１へ送信する。

再生制御部１０８は、ドライブ部１０１及び分離デコード部１０２に指示を与えて、ドライブ部１０１に装填された光ディスクの規格（ＤＶＤ又はＢｌｕ−ｒａｙ Ｄｉｓｃ等）に従った再生方式で再生制御を行う。また、再生制御部１０８は、音声データバッファ部１０４に対して、映像データ及び音声データの同期をとるための音声データ遅延時間を指示する。さらに、再生制御部１０８は、フォーマット制御部１１４からの再生状態の問い合わせに対して、再生状態を応答する。加えて、ＵＩＦ部１１６から再生及び停止に関する指示を受け付け、その指示に従ってドライブ部１０１及び分離デコード部１０２等の制御を行う。

フォーマット取得部１０９は、第１ＨＤＭＩ入出力部１０６から第１ＨＤＭＩ入出力部１０６に接続されている第１モニタ１５０にて再生可能な映像フォーマット及び音声フォーマットを示す対応フォーマット情報を取得する処理を行う。同様に、フォーマット取得部１０９は、第２ＨＤＭＩ入出力部１０７から第２ＨＤＭＩ入出力部１０７に接続されている第２モニタ１５１にて再生可能な映像フォーマット及び音声フォーマットを示す対応フォーマット情報を取得する処理を行う。なお、フォーマット取得部１０９は、第１ＨＤＭＩ入出力部１０６及び第２ＨＤＭＩ入出力部１０７に接続されたモニタが変化したり、モニタが切断及び接続されたりする度に、これらの情報を取得する処理を行う。

図２は、フォーマット取得部１０９が、第１ＨＤＭＩ入出力部１０６及び第２ＨＤＭＩ入出力部１０７から取得した対応フォーマット情報の内容の一例を示す概略図である。図２において、第１モニタ１５０は、映像フォーマットとして、４８０ｐ、７２０ｐ及び１０８０ｉの３種に対応しており、音声フォーマットとして、ＰＣＭ２ｃｈ及びＰＣＭ５．１ｃｈに対応している。第２モニタ１５１は、映像フォーマットとして、７２０ｐ及び４８０ｐに対応しており、音声フォーマットとして、ＰＣＭ２ｃｈのみに対応している。

出力フォーマット決定部１１０は、フォーマット取得部１０９から、映像音声再生装置１００に接続されているモニタが対応する、最新の映像フォーマット及び音声フォーマットを取得し、これらに基づいて、出力フォーマットを決定し、フォーマット制御部１１４に通知する。例えば、出力フォーマット決定部１１０は、フォーマット取得部１０９から取得した最新の映像フォーマット及び音声フォーマットを、モニタ毎、又は、第１ＨＤＭＩ入出力部１０６及び第２ＨＤＭＩ入出力部１０７毎に、フォーマット情報としてフォーマット記憶部１１１に記憶させておき、このフォーマット情報に基づいて、全てのモニタで共通して再生可能な映像フォーマット及び音声フォーマットを出力フォーマットとして決定する。なお、出力フォーマットとして決定された映像フォーマット及び音声フォーマットを、それぞれ映像出力フォーマット及び音声出力フォーマットとする。
フォーマット記憶部１１１は、モニタ毎に、再生可能な映像フォーマット及び音声フォーマットを記憶する。

無音区間検出部１１２は、音声データが一時的に保持されている音声データバッファ部１０４にアクセスし、保持されている音声データを解析することで、無音状態が一定期間以上連続する無音区間の検出を行う。ここで、無音区間は、音声データの音量が予め定められた音量以下にある期間が、予め定められた期間以上の期間となっている区間のことである。無音区間検出部１１２は、無音区間が見つかった場合、この無音区間を特定する無音区間特定情報を無音区間記憶部１１３に記憶されている無音区間管理情報に格納する。無音区間検出及び無音区間管理情報に関しては、後ほど詳しく述べる。また、無音区間検出部１１２は、フォーマット制御部１１４から、無音区間を問い合わせる無音区間問合せがあった場合に、音声データバッファ部１０４より、これから出力される音声データが無音区間に該当しているか否かを示す無音区間判別応答を返答する。
無音区間記憶部１１３は、無音区間検出部１１２が検出した無音区間を特定する無音区間特定情報を含む無音区間管理情報を記憶する。なお、無音区間管理情報については、後に詳しく述べる。

フォーマット制御部１１４は、出力フォーマット決定部１１０にて決定された出力フォーマット（映像出力フォーマット及び音声出力フォーマット）の通知を受け、決定された出力フォーマットに従い、映像フォーマット変換部１０３及び音声フォーマット変換部１０５が変換する映像フォーマット及び音声フォーマットを、出力フォーマットに対応する映像フォーマット及び音声フォーマットに変更する処理を行う。なお、フォーマット制御部１１４は、無音区間検出部１１２から無音区間判別応答を取得し、また、再生制御部１０８から再生情報を取得し、これらの情報に基づいて、出力フォーマット決定部１１０にて決定された出力フォーマットに対応する映像フォーマット及び音声フォーマットへの変更タイミングを調整する。この変更タイミングの調整の仕方については、後ほど詳しく述べる。なお、フォーマット制御部１１４は、映像フォーマット及び音声フォーマットを変更した場合には、変更後の映像フォーマット及び音声フォーマットを示す使用フォーマット情報を使用フォーマット記憶部１１５に記憶させる。
使用フォーマット記憶部１１５は、映像フォーマット変換部１０３で採用されている映像フォーマット、及び、音声フォーマット変換部１０５で採用されている音声フォーマットを示す使用フォーマット情報を記憶する。

ＵＩＦ部１１６は、利用者のリモコン１１７を用いた操作に対応するリモコン信号を受けて、このリモコン信号に対応する指示を再生制御部１０８に与える。
リモコン１１７は、利用者からの操作を受け付けて、この操作に対応するリモコン信号を発信する。
なお、ＵＩＦ部１１６及びリモコン１１７により、利用者からの操作の入力を受け付ける入力部が構成される。

以上に記載した、出力フォーマット決定部１１０、無音区間検出部１１２及びフォーマット制御部１１４は、ＣＰＵが所定のプログラムを実行することにより実現することができる。この所定のプログラムは、映像音声再生装置１００を制御するプログラムとともに、図示しないプログラム記憶部に記憶されているものとする。このプログラム記憶部は、半導体の記憶素子、光ディスク又は磁気ディスク等の記憶媒体により実現することができる。
また以上に記載したフォーマット記憶部１１１、無音区間記憶部１１３及び使用フォーマット記憶部１１５は、一つの記憶部の領域を分けることにより構成されていてもよい。

図３は、無音区間検出部１１２で行う無音区間検出処理を示すフローチャートである。ここで、ＴＨ＿ＬＥＶＥＬは、各音声チャンネルにおいて無音であると判断するための音声レベル閾値である。ここでは、ＴＨ＿ＬＥＶＥＬは、最大レベルの３％とする。また、ＴＨ＿ＤＵＲは、無音が続いた区間長の閾値である。ここでは、ＴＨ＿ＤＵＲは、０．５秒とする。また、Ｆｓは、音声データのサンプリング周波数である。さらに、ＳＩＧ＿ＭＵＯＮは、無音区間検出情報であり、「０」のときは無音区間なし、「１」のときは無音区間ありを示す。そして、ＡＭ＿ＣＯＵＮＴは、無音区間を計測するカウンタである。

まず、無音区間検出部１１２は、ＳＩＧ＿ＭＵＯＮ及びＡＭ＿ＣＯＵＮＴの値を初期化する（Ｓ１０）。例えば、無音区間検出部１１２は、ＳＩＧ＿ＭＵＯＮの値を「０」とし、ＡＭ＿ＣＯＵＮＴの値を「０」とする。

次に、無音区間検出部１１２は、無音区間検出を実施するか否かを判断する（Ｓ１１）。例えば、無音区間検出部１１２は、図示しない設定記憶部に記憶されている、無音区間の検出を実施するか否かを示す動作設定フラグに基づいて、この判断を行う。そして、無音区間検出部１１２は、無音区間検出を実施する場合（ステップＳ１１でＹｅｓ）には、ステップＳ１２の処理に進み、無音区間検出を実施しない場合（ステップＳ１１でＮｏ）には、無音区間検出処理を終了する。

ステップＳ１２では、無音区間検出部１１２は、音声データバッファ部１０４への音声データの書き込みがあるか否かを調べる。そして、無音区間検出部１１２は、新たな音声データが音声データバッファ部１０４に追加された場合（ステップＳ１２でＹｅｓ）には、ステップＳ１３の処理に進み、追加されていない場合（ステップＳ１２でＮｏ）には、ステップＳ１１の処理に戻る。

ステップＳ１３では、無音区間検出部１１２は、新たに追加された音声データに対して、各音声チャンネルにおいて、音声の音量を示す音声レベルを確認する。

次に、無音区間検出部１１２は、ステップＳ１３で確認された各音声レベルが、全てのチャンネルにおいて、ＴＨ＿ＬＥＶＥＬ以下になるか否かを判定する（Ｓ１４）。そして、無音区間検出部１１２は、各音声チャンネルがすべてＴＨ＿ＬＥＶＥＬ以下である場合（ステップＳ１４でＹｅｓ）には、ステップＳ１５の処理に進み、各音声チャンネルのすべてがＴＨ＿ＬＥＶＥＬ以下ではない場合、言い換えると、ＴＨ＿ＬＥＶＥＬ以下ではない音声チャンネルがある場合（ステップＳ１４でＮｏ）には、ステップＳ１６の処理に進む。

ステップＳ１５では、無音区間検出部１１２は、ＡＭ＿ＣＯＵＮＴの値に「１」を加算する。ステップＳ１５の処理の後には、無音区間検出部１１２は、ステップＳ１７の処理に進む。

一方、ステップＳ１６では、無音ではないと判断された場合に相当するので、無音区間検出部１１２は、ＡＭ＿ＣＯＵＮＴの値を「０」に、ＳＩＧ＿ＭＵＯＮの値を「０」にして、ステップＳ１１の処理に戻る。

ステップＳ１７では、無音区間検出部１１２は、ＡＭ＿ＣＯＵＮＴの値と、ＴＨ＿ＤＵＲにＦｓを乗算した値と、を比較して、ＡＭ＿ＣＯＵＮＴの値がＴＨ＿ＤＵＲにＦｓを乗算した値以上であるか否かを判断する。そして、無音区間検出部１１２は、ＡＭ＿ＣＯＵＮＴの値がＴＨ＿ＤＵＲにＦｓを乗算した値以上である場合（ステップＳ１７でＹｅｓ）には、ステップＳ１８の処理に進み、ＡＭ＿ＣＯＵＮＴの値がＴＨ＿ＤＵＲにＦｓを乗算した値未満である場合（ステップＳ１７でＮｏ）には、ステップＳ１１の処理に戻る。

ステップＳ１８では、無音区間検出部１１２は、無音区間を検出したと判断し、ＳＩＧ＿ＭＵＯＮの値に「１」をセットする。そして、無音区間検出部１１２は、ステップＳ１１の処理に戻る。

図３に示されているフローチャートでは、ＴＨ＿ＬＥＶＥＬは３％、ＴＨ＿ＤＵＲは０．５秒となっているが、ＴＨ＿ＬＥＶＥＬについては、ほぼ無音に聞こえる音声レベルであれば３％以外でも構わないし、ＴＨ＿ＤＵＲについては、音声フォーマット切り替えに要する時間以上であれば０．５秒以外でも構わない。また、ＴＨ＿ＬＥＶＥＬを固定ではなく、出力フォーマット決定部１１０から無音区間の問い合わせを受けてからの経過時間とともにＴＨ＿ＬＥＶＥＬの値を上げて、無音と判断される音声レベルの範囲を広げていってもよい。この方法の効果としては、モニタの接続状況に変化があってから音声レベルが継続して低い値になることがない場合、出力フォーマット決定部１１０より無音区間の問い合わせを受けてからの経過時間とともにＴＨ＿ＬＥＶＥＬを上げて、無音と判断される音声レベルの範囲を広げることで、無音区間を検出しやすくなり、いつまでも音声フォーマットを切り替えることができなくなる事態を防止することができる。上げられたＴＨ＿ＬＥＶＥＬの値については、無音区間が検出された後に、元の初期値に戻されるのが望ましい。

図４（Ａ）及び（Ｂ）は、無音区間検出処理の具体例を示す概略図である。簡略化のため、音声チャンネル数は「２」、音声レベルを「０」から「９９」の１００段階で示し、ＴＨ＿ＬＥＶＥＬは「３」、ＴＨ＿ＤＵＲは「０．５（秒）」、Ｆｓは「１０（Ｈｚ）」とする。また、図４（Ａ）及び（Ｂ）では、番号欄に格納されている番号が小さいものから順に、それぞれのチャンネルで音声レベルが確認される。図４（Ａ）では、チャンネル１及びチャンネル２の音声レベルが、ともにＴＨ＿ＬＥＶＥＬである「３」以下の値であるため、ＡＭ＿ＣＯＵＮＴの値が加算されていき、５番目の音声データが確認されたときに、ＡＭ＿ＣＯＵＮＴの値がＴＨ＿ＤＵＲにＦｓを乗算した値以上になり、ＳＩＧ＿ＭＵＯＮの値が「１」、つまり無音区間が検出される。一方、図４（Ｂ）では、４番目の音声データにおいて、チャンネル１の音声レベルがＴＨ＿ＬＥＶＥＬを超える「１０」であるため、この時点でＡＭ＿ＣＯＵＮＴの値がリセットされ、無音区間は検出されない。

図５は、無音区間検出部１１２が管理する無音区間管理情報ＳＤＴの一例を示す概略図である。無音区間管理情報ＳＤＴは、無音区間記憶部１１３に記憶される。図示するように、無音区間管理情報ＳＤＴは、管理番号欄ＳＤＴ１と、無音区間開始点欄ＳＤＴ２と、無音区間終了点欄ＳＤＴ３とを有するテーブル形式の情報である。
管理番号欄ＳＤＴ１は、無音区間検出部１１２が検出した無音区間を管理するための管理番号を格納する。例えば、無音区間検出部１１２は、無音区間を検出する度に、「１」から順に連番となる整数を管理番号欄ＳＤＴ１に格納する。
無音区間開始点欄ＳＤＴ２は、管理番号欄ＳＤＴ１で識別される無音区間の開始点となる音声データが書き込まれた、音声データバッファ部１０４のアドレスを格納する。例えば、無音区間検出部１１２は、ＳＩＧ＿ＭＵＯＮの値が「０」から「１」に変化したときに、新たに音声データの書き込みがあった音声データバッファ部１０４内のアドレスからＴＨ＿ＤＵＲ時間分だけ戻ったアドレス（言い換えると、無音が検出されはじめた音声データが格納されているアドレス）を無音区間開始点として、無音区間開始点欄ＳＤＴ２に登録する。
無音区間終了点欄ＳＤＴ３は、管理番号欄ＳＤＴ１で識別される無音区間の終了点となる音声データが書き込まれた、音声データバッファ部１０４のアドレスを格納する。例えば、無音区間検出部１１２は、ＳＩＧ＿ＭＵＯＮの値が「１」から「０」に変化したときに、新たに音声データの書き込みがあった音声データバッファ部１０４内のアドレスからＴＨ＿ＤＵＲ時間分だけ前にもどったアドレスを無音区間終了点として、無音区間終了点欄ＳＤＴ３に登録する。終了点をＴＨ＿ＤＵＲ時間だけ戻す理由としては、フォーマット制御部１１４が、実際に無音の期間が終了する点の近くで音声フォーマットを切り替える指示を出してしまうと、音声フォーマットの切替処理が完了する前に無音の期間が終わり、音声が途切れる等、利用者に違和感を生じさせてしまうためである。このため、本実施の形態においては、実際に検知された無音の期間から音声フォーマット切り替えに要する時間を差し引いた期間を無音区間としている。
なお、無音区間は、音声データバッファ部１０４内に複数個存在する可能性があるので、管理番号にて管理される。また、音声データバッファ部１０４から、ある無音区間のデータが全て読み出されてしまうと、当該無音区間の情報は管理番号単位で無音区間管理情報ＳＤＴから消去される。

図６は、出力フォーマット決定部１１０が行う映像出力フォーマット決定処理を示すフローチャートである。

まず、出力フォーマット決定部１１０は、映像音声再生装置１００にて対応する映像フォーマットのうち、最上位の品質のものを選択する（Ｓ２０）。なお、映像音声再生装置１００にて対応する映像フォーマット及び映像フォーマットの品質の順位については、フォーマット記憶部１１１に記憶されているものとする。

次に、出力フォーマット決定部１１０は、選択された映像フォーマットが、映像音声再生装置１００に接続されている全てのモニタで対応可能か否かを調べる（Ｓ２１）。そして、出力フォーマット決定部１１０は、全てのモニタが選択された映像フォーマットに対応している場合（ステップＳ２１でＹｅｓ）には、ステップＳ２２の処理に進み、選択された映像フォーマットに対応していないモニタがある場合（ステップＳ２１でＮｏ）には、ステップＳ２３の処理に進む。

ステップＳ２２では、出力フォーマット決定部１１０は、選択されている映像フォーマットを映像出力フォーマットとして決定し、映像出力フォーマット決定処理を終了する。
一方、ステップＳ２３では、出力フォーマット決定部１１０は、既に選択されている映像フォーマットより一つ下位の品質の映像フォーマットを新たに選択して、ステップＳ２１の処理に戻る。

図６に示されている映像出力フォーマット決定処理を、図２に示されている第１モニタ１５０及び第２モニタ１５１にて再生可能な映像フォーマット及び音声フォーマットの一例に対して適用すると、ステップＳ２０では、出力フォーマット決定部１１０は、映像フォーマット１０８０ｉを選択する。ステップＳ２１では、出力フォーマット決定部１１０は、映像フォーマット１０８０ｉの対応状況を調べる。第１モニタ１５０は、映像フォーマット１０８０ｉに対応しているが、第２モニタ１５１は対応していないため、出力フォーマット決定部１１０は、ステップＳ２３の処理に進む。ステップＳ２３では、出力フォーマット決定部１１０は、映像フォーマット１０８０ｉよりも一つ下位の品質の映像フォーマット７２０ｐを選択する。そして、出力フォーマット決定部１１０は、ステップＳ２１において、選択された映像フォーマット７２０ｐの対応状況を調べる。今度は第１モニタ１５０及び第２モニタ１５１が、ともに選択された映像フォーマット７２０ｐに対応しているため、ステップＳ２２において、映像フォーマット７２０ｐが映像出力フォーマットとして決定される。なお、映像フォーマット４８０ｐについても、第１モニタ１５０及び第２モニタ１５１が、ともに対応しているが、より上位の品質の映像フォーマットを優先する仕組みになっているため、映像フォーマット７２０ｐが優先的に映像出力フォーマットとして決定される。

図７は、出力フォーマット決定部１１０が行う音声出力フォーマット決定処理を示すフローチャートである。

まず、出力フォーマット決定部１１０は、映像音声再生装置１００にて対応する音声フォーマットのうち、最上位の品質のものを選択する（Ｓ３０）。なお、映像音声再生装置１００にて対応する音声フォーマット及び音声フォーマットの品質の順位については、フォーマット記憶部１１１に記憶されているものとする。

次に、出力フォーマット決定部１１０は、選択された音声フォーマットが、映像音声再生装置１００に接続されている全てのモニタで対応可能か否かを調べる（Ｓ３１）。そして、出力フォーマット決定部１１０は、全てのモニタが選択された音声フォーマットに対応している場合（ステップＳ３１でＹｅｓ）には、ステップＳ３２の処理に進み、選択された音声フォーマットに対応していないモニタがある場合（ステップＳ３１でＮｏ）には、ステップＳ３３の処理に進む。

ステップＳ３２では、出力フォーマット決定部１１０は、選択されている音声フォーマットを音声出力フォーマットとして決定し、音声出力フォーマット決定処理を終了する。
一方、ステップＳ３３では、出力フォーマット決定部１１０は、既に選択されている音声フォーマットより一つ下位の品質の音声フォーマットを新たに選択して、ステップＳ３１の処理に戻る。

図７に示されている音声出力フォーマット決定処理を、図２に示されている第１モニタ１５０及び第２モニタ１５１にて再生可能な映像フォーマット及び音声フォーマットの一例に対して適用すると、ステップＳ３０では、出力フォーマット決定部１１０は、音声フォーマットＰＣＭ７．１ｃｈを選択する。ステップＳ３１では、出力フォーマット決定部１１０は、音声フォーマットＰＣＭ７．１ｃｈの対応状況を調べる。第１モニタ１５０及び第２モニタ１５１の何れも音声フォーマットＰＣＭ７．１ｃｈに対応していないため、出力フォーマット決定部１１０は、ステップＳ３３の処理に進む。ステップＳ３３では、出力フォーマット決定部１１０は、音声フォーマットＰＣＭ７．１ｃｈよりも一つ下位の品質の音声フォーマットＰＣＭ５．１ｃｈを選択する。そして、出力フォーマット決定部１１０は、ステップＳ３１において、選択された音声フォーマットＰＣＭ５．１ｃｈの対応状況を調べる。今度は、第１モニタ１５０は、音声フォーマットＰＣＭ５．１ｃｈに対応しているが、第２モニタ１５１は、音声フォーマットＰＣＭ５．１ｃｈに対応していないため、再び、ステップＳ３３の処理に進む。ステップＳ３３では、音声フォーマットＰＣＭ５．１ｃｈよりも一つ下位の品質の音声フォーマットＰＣＭ２ｃｈが選択される。そして、出力フォーマット決定部１１０は、ステップＳ３１において、選択された音声フォーマットＰＣＭ２ｃｈの対応状況を調べる。今度は、第１モニタ１５０及び第２モニタ１５１が、ともに選択された音声フォーマットＰＣＭ２ｃｈに対応しているため、ステップＳ３２において、音声フォーマットＰＣＭ２ｃｈが音声出力フォーマットとして決定される。

図８は、フォーマット制御部１１４が行う映像フォーマット変更処理を示すフローチャートである。

まず、フォーマット制御部１１４は、出力フォーマット決定部１１０から新しい映像出力フォーマットの通知を受ける（Ｓ４０）。

次に、フォーマット制御部１１４は、通知された映像出力フォーマットと、使用中の映像フォーマットとを比較して、映像フォーマットに変化があるか否かを判断する（Ｓ４１）。使用中の映像フォーマットは、使用フォーマット記憶部１１５に記憶されている使用フォーマット情報で示される映像フォーマットである。そして、フォーマット制御部１１４は、映像フォーマットに変化がある場合（ステップＳ４１でＹｅｓ）には、ステップＳ４２の処理に進み、映像フォーマットに変化がない場合（ステップＳ４１でＮｏ）には、映像フォーマット変更処理を終了する。

ステップＳ４２では、フォーマット制御部１１４は、現在より上位の品質の映像フォーマットに変更するか否か、言い換えると、映像出力フォーマットが、使用中の映像フォーマットよりも上位の品質のフォーマットであるか否かを確認する。そして、フォーマット制御部１１４は、現在より上位の品質の映像フォーマットに変更すると判断した場合（ステップＳ４２でＹｅｓ）には、ステップＳ４３の処理に進み、現在より下位の品質の映像フォーマットに変更すると判断した場合（ステップＳ４２でＮｏ）には、ステップＳ４４の処理に進む。

ステップＳ４３では、フォーマット制御部１１４は、再生制御部１０８に再生状態を問い合わせて、再生中か否かを確認する。そして、フォーマット制御部１１４は、再生中であれば、ステップＳ４３の処理を再生終了まで繰り返す。一方、フォーマット制御部１１４は、再生中ではないと判断した場合（ステップＳ４３でＹｅｓ）には、ステップＳ４４の処理に進む。

ステップＳ４４では、フォーマット制御部１１４は、ステップＳ４０で通知された映像出力フォーマットに変更する映像フォーマット変更指示を映像フォーマット変換部１０３に与えて処理を終了する。なお、このとき、フォーマット制御部１１４は、使用フォーマット記憶部１１５に記憶されている使用フォーマット情報を更新して、使用フォーマット情報が変更後の映像フォーマットを示すようにする。

なお、ステップＳ４１において、フォーマット制御部１１４は、下位の品質の映像フォーマットに変更すると判断した場合に、ステップＳ４４の処理に進み、再生終了を待たずに映像フォーマット変更指示を出す理由は、以下の通りである。映像出力フォーマットが下位の品質の映像フォーマットに決定されたことは、現在使用中の映像フォーマットには対応していないモニタが接続されたことを意味するため、接続された全てのモニタに映像を表示させるには、映像フォーマットを変更する必要があるからである。映像フォーマットを変更する際には、映像の表示は一時停止される。このため、切り替え時に再生中であった場合、継続して接続中のモニタで視聴中の利用者にとって意図しない映像ミュートが挿入されるが、下位の品質の映像フォーマットに変更する場合には、全てのモニタで映像を表示させるために、やむを得ず変更が実行される。一方、上位の品質の映像フォーマットに変更する場合には、ステップＳ４３で再生終了を待ってから、映像フォーマットが変更されるため、再生中の映像ミュートを防止することができる。なお、映像フォーマットの切り替えを、無音区間に行うようにしてもよい。

図９は、フォーマット制御部１１４が行う音声フォーマット変更処理を示すフローチャートである。

まず、フォーマット制御部１１４は、出力フォーマット決定部１１０から新しい音声出力フォーマットの通知を受ける（Ｓ５０）。

次に、フォーマット制御部１１４は、通知された音声出力フォーマットと、使用中の音声フォーマットとを比較して、音声フォーマットに変化があるか否かを判断する（Ｓ５１）。使用中の音声フォーマットは、使用フォーマット記憶部１１５に記憶されている使用フォーマット情報で示される音声フォーマットである。そして、フォーマット制御部１１４は、音声フォーマットに変化がある場合（ステップＳ５１でＹｅｓ）には、ステップＳ５２の処理に進み、音声フォーマットに変化がない場合（ステップＳ５１でＮｏ）には、音声フォーマット変更処理を終了する。

ステップＳ５２では、フォーマット制御部１１４は、無音区間検出部１１２に問い合わせて、音声データバッファ部１０４よりこれから出力される音声データが無音区間にあるか否かを確認する。例えば、無音区間検出部１１２は、フォーマット制御部１１４より問い合わせを受けた際に、音声データバッファ部１０４にアクセスして、出力しようとする音声データのアドレスを取得する。そして、無音区間検出部１１２は、無音区間記憶部１１３に記憶されている無音区間管理情報ＳＤＴを参照して、取得されたアドレスが無音区間に含まれているか否かを判断することにより、これから出力される音声データが無音区間にあるか否かを判別する。さらに、無音区間検出部１１２は、この判別結果に基づいて、無音区間にあるか否かを示す無音区間判別応答をフォーマット制御部１１４に返答する。そして、フォーマット制御部１１４は、これから出力される音声データが無音区間にあると判断した場合（ステップＳ５２でＹｅｓ）には、ステップＳ５３の処理に進み、これから出力される音声データが無音区間にないと判断した場合（ステップＳ５２でＮｏ）には、再びステップＳ５２の処理を繰り返す。

ステップＳ５３では、フォーマット制御部１１４は、ステップＳ５０で通知された音声出力フォーマットに音声フォーマットを変更する音声フォーマット変更指示を映像フォーマット変換部１０３に与えて処理を終了する。なお、このとき、フォーマット制御部１１４は、使用フォーマット記憶部１１５に記憶されている使用フォーマット情報を更新して、使用フォーマット情報が変更後の音声フォーマットを示すようにする。

図９に示されているフローチャートでは、同時に接続されていた他のモニタの切断や、新たなモニタの接続による音声フォーマットの変更を行う際に、音声の無音区間を検出し、音声の無音区間に音声フォーマットの変更が行われることにより、継続して視聴中の利用者にとって不意な音声ミュートがかからず、違和感の少ない音声フォーマットの変更が可能となる。ただし、下位の品質の音声フォーマットに変更する必要がある場合、音声フォーマットが変更されるまで、新たに接続されたモニタで音声の出力ができないことになる。

図１０は、フォーマット制御部１１４が行う音声フォーマット変更処理の変形例を示すフローチャートである。

まず、フォーマット制御部１１４は、出力フォーマット決定部１１０から新しい音声出力フォーマットの通知を受ける（Ｓ６０）。

次に、フォーマット制御部１１４は、通知された音声出力フォーマットと、使用中の音声フォーマットとを比較して、音声フォーマットに変化があるか否かを判断する（Ｓ６１）。そして、フォーマット制御部１１４は、音声フォーマットに変化がある場合（ステップＳ６１でＹｅｓ）には、ステップＳ６２の処理に進み、音声フォーマットに変化がない場合（ステップＳ６１でＮｏ）には、音声フォーマット変更処理を終了する。

ステップＳ６２では、フォーマット制御部１１４は、現在より上位の品質の音声フォーマットに変更するか否か、言い換えると、音声出力フォーマットが、使用中の音声フォーマットよりも上位の品質のフォーマットであるか否かを確認する。そして、フォーマット制御部１１４は、現在より上位の品質の音声フォーマットに変更すると判断した場合（ステップＳ６２でＹｅｓ）には、ステップＳ６３の処理に進み、現在より下位の品質の音声フォーマットに変更すると判断した場合（ステップＳ６２でＮｏ）には、ステップＳ６５の処理に進む。

ステップＳ６３では、フォーマット制御部１１４は、再生制御部１０８に再生状態を問い合わせて、再生中か否かを確認する。そして、フォーマット制御部１１４は、再生中の場合（ステップＳ６３でＹｅｓ）には、ステップＳ６４の処理に進み、再生中ではない場合（ステップＳ６３でＮｏ）には、ステップＳ６５の処理に進む。

ステップＳ６４では、フォーマット制御部１１４は、無音区間検出部１１２に問い合わせて、音声データバッファ部１０４よりこれから出力される音声データが無音区間にあるか否かを確認する。そして、フォーマット制御部１１４は、これから出力される音声データが無音区間にあると判断した場合（ステップＳ６４でＹｅｓ）には、ステップＳ６５の処理に進み、これから出力される音声データが無音区間にないと判断した場合（ステップＳ６４でＮｏ）には、ステップＳ６３の処理に進む。

ステップＳ６５では、フォーマット制御部１１４は、ステップＳ６０で通知された音声出力フォーマットに音声フォーマットを変更する音声フォーマット変更指示を映像フォーマット変換部１０３に与えて処理を終了する。なお、このとき、フォーマット制御部１１４は、使用フォーマット記憶部１１５に記憶されている使用フォーマット情報を更新して、使用フォーマット情報が変更後の音声フォーマットを示すようにする。

図１０に示すフローチャートのステップＳ６２において、変更する音声フォーマットが、使用中の音声フォーマットよりも下位の品質の音声フォーマットである場合（ステップＳ６２でＮｏ）には、ステップＳ６５の処理に進み、再生終了を待たずに音声フォーマット変更指示を出す理由は、以下の通りである。音声出力フォーマットが下位の品質の音声フォーマットに決定されたことは、現在出力している音声フォーマットには対応していないモニタが接続されたことを意味し、接続された全てのモニタに音声を再生させるには、音声フォーマットを変更する必要があるからである。音声フォーマットを変更する際には音声をミュートする必要がある。このため、再生中に音声フォーマットを変更してしまうと、継続して接続中のモニタで視聴中の利用者にとって意図しない音声ミュートが挿入されてしまうが、下位の品質の音声フォーマットに変更する場合には、全てのモニタで音声を出力するために、やむを得ず変更が実行される。

映像フォーマットを切り替える処理と音声フォーマットを切り替える処理との違いは、音声区間の判定を行うか否かである（図９のステップＳ５２、図１０のステップＳ６４）。ＨＤＭＩ規格で音声を送る場合、映像信号のブランキング期間に音声データをパケット化して送る。音声フォーマットを切り替えても、映像データには影響がないため、映像を表示したまま音声フォーマットを変更できる。よって、音声が無音の状態でこの音声フォーマット切り替えを行うことで、継続して接続中のモニタで視聴中の利用者にとって、実質的に映像も音声も途切れないシームレスな音声フォーマットの切り替えができる。

以上に記載した実施の形態１に係る映像音声再生装置１００は、同時に接続されていた他のモニタが切断されて上位の品質の音声フォーマットに切り替える際に、音声の無音区間を検出し、音声の無音区間で音声フォーマットを切り替えることにより、継続して視聴中の利用者にとって不意な音声ミュートがかからず、違和感の少ない音声フォーマットの切り替えを行うことができる。
また、映像音声再生装置１００は、映像と音声の同期を取るための音声データバッファ部１０４を利用して音声の無音検出を行うため、特別なハードウェアを必要とせず、無音検出を行うソフトウェアのみで実現可能なため、コストの増大を引き起こさない。

実施の形態２．
図１１は、実施の形態２に係る映像音声再生装置２００の構成を概略的に示すブロック図である。実施の形態２に係る映像音声再生装置２００は、ドライブ部１０１と、分離デコード部１０２と、映像フォーマット変換部１０３と、音声データバッファ部１０４と、音声フォーマット変換部１０５と、第１ＨＤＭＩ入出力部１０６と、第２ＨＤＭＩ入出力部１０７と、再生制御部１０８と、フォーマット取得部１０９と、出力フォーマット決定部１１０と、フォーマット記憶部１１１と、無音区間検出部１１２と、無音区間記憶部１１３と、フォーマット制御部２１４と、使用フォーマット記憶部１１５と、ＵＩＦ部１１６と、リモコン１１７と、映像データ一時記憶部としての映像データバッファ部２１９と、黒画区間検出部２２０とを備える。実施の形態２に係る映像音声再生装置２００は、フォーマット制御部２１４での処理の点、並びに、映像データバッファ部２１９及び黒画区間検出部２２０が備えられている点において、実施の形態１に係る映像音声再生装置１００と異なっている。

映像データバッファ部２１９には、分離デコード部１０２から出力された映像データが入力される。映像データバッファ部２１９は、映像データを一時的に保持し、黒画区間検出部２２０で用いるＴＨ＿Ｖ＿ＤＵＲの時間分遅延させて、映像データを出力する。

黒画区間検出部２２０は、映像データバッファ部２１９にアクセスし、映像データを解析することで、全画面がほぼ真っ黒の状態（黒画と呼称する）が一定期間連続する黒画区間の検出を行う。ここで、黒画区間は、映像データの明るさが予め定められた明るさ以下にある期間が、予め定められた期間以上の期間となっている区間のことである。黒画区間検出については、後ほど詳しく述べる。また、黒画区間検出部２２０は、フォーマット制御部２１４から、黒画区間の問い合わせがあった場合には、黒画区間であるか否かを示す黒画区間判別応答を返答する。

フォーマット制御部２１４は、出力フォーマット決定部１１０にて決定された出力フォーマット（映像出力フォーマット及び音声出力フォーマット）の通知を受け、決定された出力フォーマットに従い、映像フォーマット変換部１０３及び音声フォーマット変換部１０５に、出力フォーマットに対応する映像フォーマット及び音声フォーマットに変換させる処理を行う。なお、フォーマット制御部２１４は、無音区間検出部１１２から無音区間判別応答、再生制御部１０８から再生情報、及び黒画区間検出部２２０から黒画区間判別応答を取得し、これらの情報に基づいて、出力フォーマット決定部１１０にて決定された出力フォーマットに対応する映像フォーマット及び音声フォーマットへの変更タイミングを調整する。この変更タイミングの調整の仕方については、後ほど詳しく述べる。なお、フォーマット制御部２１４は、出力フォーマット決定部１１０から通知された出力フォーマットに従って、映像フォーマット及び音声フォーマットを変更した場合には、変更後の映像フォーマット及び音声フォーマットを示す使用フォーマット情報を使用フォーマット記憶部１１５に記憶させる。

図１２は、黒画区間検出部２２０が行う黒画区間検出処理のフローチャートである。図１２において、ＴＨ＿Ｖ＿ＬＥＶＥＬは、各映像チャンネルにおいて黒画であると判断するための映像レベル閾値である。なお、ＲＧＢなのか輝度色差なのかによって閾値の考え方が変わり、ＲＧＢと輝度の場合は、単純にＴＨ＿Ｖ＿ＬＥＶＥＬ以下か否かで判断するが、色差の場合は、中央値±ＴＨ＿Ｖ＿ＬＥＶＥＬ以内か否かで、黒画であるか否かが判断される。ここでは映像チャンネルが、ＲＧＢの映像であるものとする。ここで、ＴＨ＿Ｖ＿ＬＥＶＥＬは、最大レベルの３％であるものとする。また、ＴＨ＿Ｖ＿ＤＵＲは、黒画が続いた区間長の閾値である。ここでは、ＴＨ＿Ｖ＿ＤＵＲは０．５秒とする。Ｆｒは、映像データのフレーム周波数である。また、ＳＩＧ＿ＫＵＲＯは、黒画区間検出情報であり、この値が「０」のときは黒画区間なし、「１」のときは黒画区間ありを示す。さらに、ＶＫ＿ＣＯＵＮＴは、黒画区間を計測するカウンタである。

まず、黒画区間検出部２２０は、ＳＩＧ＿ＫＵＲＯ及びＶＫ＿ＣＯＵＮＴの値を初期化する（Ｓ７０）。例えば、黒画区間検出部２２０は、ＳＩＧ＿ＫＵＲＯの値を「０」とし、ＶＫ＿ＣＯＵＮＴの値を「０」とする。

次に、黒画区間検出部２２０は、黒画区間検出を実施するか否かを判断する（Ｓ７１）。例えば、黒画区間検出部２２０は、図示しない設定記憶部に記憶されている、黒画区間の検出を実施するか否かを示す動作設定フラグに基づいて、この判断を行う。そして、黒画区間検出部２２０は、黒画区間検出を実施する場合（ステップＳ７１でＹｅｓ）には、ステップＳ７２の処理に進み、黒画区間検出を実施しない場合（ステップＳ７１でＮｏ）には、黒画区間検出処理を終了する。

ステップＳ７２では、黒画区間検出部２２０は、映像データバッファ部２１９への映像データの書き込みがあるかどうかを調べる。そして、黒画区間検出部２２０は、新たな映像データが映像データバッファ部２１９に追加された場合（ステップＳ７２でＹｅｓ）には、ステップＳ７３の処理に進み、追加されていない場合（ステップＳ７２でＮｏ）には、ステップＳ７１の処理に戻る。

ステップＳ７３では、黒画区間検出部２２０は、新たに追加された映像データに対して、各映像チャンネルにおいて、映像の明るさを示す映像レベルを確認する。

次に、黒画区間検出部２２０は、ステップＳ７３で確認された各映像レベルが、全てのチャンネルにおいて、ＴＨ＿Ｖ＿ＬＥＶＥＬ以下になるか否かを判定する（Ｓ７４）。そして、黒画区間検出部２２０は、各映像チャンネルがすべてＴＨ＿Ｖ＿ＬＥＶＥＬ以下である場合（ステップＳ７４でＹｅｓ）には、ステップＳ７５の処理に進み、各音声チャンネルのすべてがＴＨ＿Ｖ＿ＬＥＶＥＬ以下ではない場合、言い換えると、ＴＨ＿Ｖ＿ＬＥＶＥＬ以下ではない映像チャンネルがある場合（ステップＳ７４でＮｏ）には、ステップＳ７６の処理に進む。

ステップＳ７５では、黒画区間検出部２２０は、ＶＫ＿ＣＯＵＮＴの値に「１」を加算する。ステップＳ７５の処理の後には、黒画区間検出部２２０は、ステップＳ７７の処理に進む。

一方、ステップＳ７６では、黒画ではないと判断された場合に相当するので、黒画区間検出部２２０は、ＶＫ＿ＣＯＵＮＴの値を「０」に、ＳＩＧ＿ＫＵＲＯの値を「０」にして、ステップＳ７１の処理に戻る。

ステップＳ７７では、黒画区間検出部２２０は、ＶＫ＿ＣＯＵＮＴの値と、ＴＨ＿Ｖ＿ＤＵＲの値にＦｒを乗算した値と、を比較して、ＶＫ＿ＣＯＵＮＴの値がＴＨ＿Ｖ＿ＤＵＲにＦｒを乗算した値以上であるか否かを判断する。そして、黒画区間検出部２２０は、ＶＫ＿ＣＯＵＮＴの値がＴＨ＿Ｖ＿ＤＵＲにＦｒを乗算した値以上である場合（ステップＳ７７でＹｅｓ）には、ステップＳ７８の処理に進み、ＶＫ＿ＣＯＵＮＴの値がＴＨ＿Ｖ＿ＤＵＲにＦｒを乗算した値未満である場合（ステップＳ７７でＮｏ）には、ステップＳ７１の処理に戻る。

ステップＳ７８では、黒画区間検出部２２０は、黒画区間を検出したと判断し、ＳＩＧ＿ＫＵＲＯの値に「１」をセットする。そして、黒画区間検出部２２０は、ステップＳ７１の処理に戻る。

図１２に示されているフローチャートでは、ＴＨ＿Ｖ＿ＬＥＶＥＬは３％、ＴＨ＿Ｖ＿ＤＵＲは０．５秒となっているが、ＴＨ＿Ｖ＿ＬＥＶＥＬについては、ほぼ黒画に見える映像レベルであれば３％以外でも構わないし、ＴＨ＿Ｖ＿ＤＵＲについては、映像フォーマット切り替えに要する時間以上であれば０．５秒以外でも構わない。また、ＴＨ＿Ｖ＿ＬＥＶＥＬを固定ではなく、出力フォーマット決定部１１０から黒画区間の問い合わせを受けてからの経過時間とともにＴＨ＿Ｖ＿ＬＥＶＥＬの値を上げて、黒画と判断される映像レベルの範囲を広げていってもよい。この方法の効果としては、モニタの接続状況に変化があってから映像レベルが継続して低い値になることがない場合、出力フォーマット決定部１１０から黒画区間の問い合わせを受けてからの経過時間とともにＴＨ＿Ｖ＿ＬＥＶＥＬを上げて、黒画と判断される映像レベルの範囲を広げることにより、黒画区間を検出しやすくなり、いつまでも映像フォーマットを切り替えることができなくなる事態を防止することができる。

次に、フォーマット制御部２１４について述べる。実施の形態２におけるフォーマット制御部２１４は、映像フォーマット変更処理において、実施の形態１におけるフォーマット制御部１１４と異なっている。

図１３は、フォーマット制御部２１４が行う映像フォーマット変更処理を示すフローチャートである。

まず、フォーマット制御部２１４は、出力フォーマット決定部１１０から新しい映像出力フォーマットの通知を受ける（Ｓ８０）。

次に、フォーマット制御部２１４は、通知された映像出力フォーマットと、使用中の映像フォーマットとを比較して、映像フォーマットに変化があるか否かを判断する（Ｓ８１）。使用中の映像フォーマットは、使用フォーマット記憶部１１５に記憶されている使用フォーマット情報で示される映像フォーマットである。そして、フォーマット制御部２１４は、映像フォーマットに変化がある場合（ステップＳ８１でＹｅｓ）には、ステップＳ８２の処理に進み、映像フォーマットに変化がない場合（ステップＳ８１でＮｏ）には、映像フォーマット変更処理を終了する。

ステップＳ８２では、フォーマット制御部２１４は、現在より上位の品質の映像フォーマットに変更するか否か、言い換えると、映像出力フォーマットが、使用中の映像フォーマットよりも上位の品質のフォーマットであるか否かを確認する。そして、フォーマット制御部２１４は、現在より上位の品質の映像フォーマットに変更すると判断した場合（ステップＳ８２でＹｅｓ）には、ステップＳ８３の処理に進み、現在より下位の品質の映像フォーマットに変更すると判断した場合（ステップＳ８２でＮｏ）には、ステップＳ８５の処理に進む。

ステップＳ８３では、フォーマット制御部２１４は、再生制御部１０８に再生状態を問い合わせて、再生中か否かを確認する。そして、フォーマット制御部２１４は、再生中である場合（ステップＳ８３でＹｅｓ）には、ステップＳ８４の処理に進み、再生中ではない場合（ステップＳ８３でＮｏ）には、ステップＳ８５の処理に進む。

ステップＳ８４では、フォーマット制御部２１４は、黒画区間検出部２２０に問い合わせて、映像データバッファ部２１９よりこれから出力される映像データが黒画区間にあるか否かを確認する。例えば、黒画区間検出部２２０は、フォーマット制御部２１４より問い合わせを受けた際に、黒画区間検出情報（ＳＩＧ＿ＫＵＲＯ）の値を確認することで、これから出力される映像データが黒画区間にあるか否かを判別する。そして、黒画区間検出部２２０は、判別結果に基づいて、黒画区間にあるか否かを示す黒画区間判別応答をフォーマット制御部２１４に返答する。そして、フォーマット制御部２１４は、これから出力される映像データが黒画区間にあると判断した場合（ステップＳ８４でＹｅｓ）には、ステップＳ８５の処理に進み、これから出力される映像データが黒画区間にないと判断した場合（ステップＳ８４でＮｏ）には、ステップＳ８３の処理に戻る。

ステップＳ８５では、フォーマット制御部２１４は、無音区間検出部１１２に問い合わせて、音声データバッファ部１０４よりこれから出力される音声データが無音区間にあるか否かを確認する。そして、フォーマット制御部２１４は、これから出力される音声データが無音区間にあると判断した場合（ステップＳ８５でＹｅｓ）には、ステップＳ８６の処理に進み、これから出力される音声データが無音区間にないと判断した場合（ステップＳ８５でＮｏ）には、ステップＳ８３の処理に戻る。

ステップＳ８６では、フォーマット制御部２１４は、ステップＳ８０で通知された映像出力フォーマットに変更する映像フォーマット変更指示を映像フォーマット変換部１０３に与えて処理を終了する。なお、このとき、フォーマット制御部２１４は、使用フォーマット記憶部１１５に記憶されている使用フォーマット情報を更新して、使用フォーマット情報が変更後の映像フォーマットを示すようにする。

図１３に示されているフローチャートのステップＳ８５において、映像フォーマットを切り替えるために、映像データが黒画区間だけでなく、音声データが無音区間である確認をする理由としては、ＨＤＭＩ規格では、音声は映像のブランキング期間にパケット化して送るので、映像フォーマットが切り替わって受信側で再同期がかかるまで、映像の表示が一時停止するだけでなく音声に関してもミュートされてしまうからである。ＨＤＭＩ規格ではなく、別な方式で映像と音声を独立して送る場合は、ステップＳ８５での無音区間のチェックは不要である。

以上のように、実施の形態２に係る映像情報再生装置２００によれば、映像データの黒画区間を検出し、映像データの黒画区間で映像フォーマットを切り替えることにより、同時に接続されていた他のモニタが切断されて上位の品質の映像フォーマットに切り替える際に、継続して視聴中の利用者にとって不意な映像ミュートが行われず、違和感の少ない映像フォーマットの切り替えが可能となる。

１００，２００：映像音声再生装置、 １０１：ドライブ部、 １０２：分離デコード部、 １０３：映像フォーマット変換部、 １０４：音声データバッファ部、 １０５：音声フォーマット変換部、 １０６：第１ＨＤＭＩ入出力部、 １０７：第２ＨＤＭＩ入出力部、 １０８：再生制御部、 １０９：フォーマット取得部、 １１０：出力フォーマット決定部、 １１１：フォーマット記憶部、 １１２：無音区間検出部、 １１３：無音区間記憶部、 １１４，２１４：フォーマット制御部、 １１５：使用フォーマット記憶部、 １１６：ユーザーインターフェース部、 １１７：リモコン、 １１８：再生部、 ２１９：映像データバッファ部、 ２２０：黒画区間検出部、 １５０：第１モニタ、 １５１：第２モニタ。

Claims (22)

1. 映像音声ストリームから映像データ及び音声データを再生する再生部と、
   前記映像データのフォーマットを一の映像フォーマットに変換して、変換済みの映像データを生成する映像フォーマット変換部と、
   前記音声データのフォーマットを一の音声フォーマットに変換して、変換済みの音声データを生成する音声フォーマット変換部と、
   前記変換済みの映像データ及び前記変換済みの音声データを複数の映像音声出力装置に出力する複数の入出力部と、
   前記複数の入出力部を介して、前記複数の映像音声出力装置に含まれる各々の映像音声出力装置から、前記各々の映像音声出力装置が対応する音声フォーマットを示す対応フォーマット情報を取得するフォーマット取得部と、
   前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する音声フォーマットを、音声出力フォーマットとして決定する出力フォーマット決定部と、
   前記音声データの音量が予め定められた音量以下にある期間が、予め定められた期間以上の無音区間を検出する無音区間検出部と、
   前記無音区間において、前記音声フォーマット変換部に、前記一の音声フォーマットを前記音声出力フォーマットに切り替えさせるフォーマット制御部と、を備えること
   を特徴とする映像音声再生装置。
2. 前記フォーマット制御部は、前記音声出力フォーマットが前記一の音声フォーマットよりも上位の品質のフォーマットである場合に、前記無音区間において、前記一の音声フォーマットを前記音声出力フォーマットに切り替えさせること
   を特徴とする請求項１に記載の映像音声再生装置。
3. 前記フォーマット制御部は、前記音声出力フォーマットが前記一の音声フォーマットよりも下位の品質のフォーマットである場合には、前記無音区間であるか否かを問わずに、前記一の音声フォーマットを前記音声出力フォーマットに切り替えさせること
   を特徴とする請求項２に記載の映像音声再生装置。
4. 前記再生部から与えられた音声データを一時的に記憶する音声データ一時記憶部をさらに備え、
   前記無音区間検出部は、前記音声データ一時記憶部に一時的に記憶された音声データから、前記無音区間を検出すること
   を特徴とする請求項１から３の何れか一項に記載の映像音声再生装置。
5. 前記対応フォーマット情報は、前記各々の映像音声出力装置が対応する音声フォーマット、及び、前記各々の映像音声出力装置が対応する映像フォーマットを示し、
   前記出力フォーマット決定部は、前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定し、
   前記フォーマット制御部は、前記映像出力フォーマットが前記一の映像フォーマットよりも上位の品質のフォーマットである場合に、前記映像データの再生終了後に、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせること
   を特徴とする請求項１から４の何れか一項に記載の映像音声再生装置。
6. 前記フォーマット制御部は、前記映像出力フォーマットが前記一の映像フォーマットよりも下位の品質のフォーマットである場合に、前記映像データの再生が終了しているか否かを問わずに、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせること
   を特徴とする請求項５に記載の映像音声再生装置。
7. 前記映像データの明るさが予め定められた明るさ以下である期間が、予め定められた期間以上の黒画区間を検出する黒画区間検出部をさらに備え、
   前記対応フォーマット情報は、前記各々の映像音声出力装置が対応する音声フォーマット、及び、前記各々の映像音声出力装置が対応する映像フォーマットを示し、
   前記出力フォーマット決定部は、前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定し、
   前記フォーマット制御部は、前記黒画区間において、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせること
   を特徴とする請求項１から４の何れか一項に記載の映像音声再生装置。
8. 前記フォーマット制御部は、前記映像出力フォーマットが前記一の映像フォーマットよりも上位の品質のフォーマットである場合に、前記黒画区間において、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせること
   を特徴とする請求項７に記載の映像音声再生装置。
9. 前記フォーマット制御部は、前記映像出力フォーマットが前記一の映像フォーマットよりも下位の品質のフォーマットである場合には、前記黒画区間であるか否かを問わずに、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせること
   を特徴とする請求項８に記載の映像音声再生装置。
10. 前記映像データの明るさが予め定められた明るさ以下である期間が、予め定められた期間以上の黒画区間を検出する黒画区間検出部をさらに備え、
    前記対応フォーマット情報は、前記各々の映像音声出力装置が対応する音声フォーマット、及び、前記各々の映像音声出力装置が対応する映像フォーマットを示し、
    前記出力フォーマット決定部は、前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定し、
    前記フォーマット制御部は、前記黒画区間かつ前記無音区間である期間において、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせること
    を特徴とする請求項１から４の何れか一項に記載の映像音声再生装置。
11. 映像音声ストリームから映像データ及び音声データを再生する再生部と、
    前記映像データのフォーマットを一の映像フォーマットに変換して、変換済みの映像データを生成する映像フォーマット変換部と、
    前記音声データのフォーマットを一の音声フォーマットに変換して、変換済みの音声データを生成する音声フォーマット変換部と、
    前記変換済みの映像データ及び前記変換済みの音声データを複数の映像音声出力装置に出力する複数の入出力部と、
    前記複数の入出力部を介して、前記複数の映像音声出力装置に含まれる各々の映像音声出力装置から、前記各々の映像音声出力装置が対応する映像フォーマットを示す対応フォーマット情報を取得するフォーマット取得部と、
    前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定する出力フォーマット決定部と、
    前記映像データの明るさが予め定められた明るさ以下である期間が、予め定められた期間以上の黒画区間を検出する黒画区間検出部と、
    前記黒画区間において、前記映像フォーマット変換部に、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせるフォーマット制御部と、を備えること
    を特徴とする映像音声再生装置。
12. 映像音声ストリームから映像データ及び音声データを再生する再生部と、
    前記映像データのフォーマットを一の映像フォーマットに変換して、変換済みの映像データを生成する映像フォーマット変換部と、
    前記音声データのフォーマットを一の音声フォーマットに変換して、変換済みの音声データを生成する音声フォーマット変換部と、
    前記変換済みの映像データ及び前記変換済みの音声データを複数の映像音声出力装置に出力する複数の入出力部と、
    前記複数の入出力部を介して、前記複数の映像音声出力装置に含まれる各々の映像音声出力装置から、前記各々の映像音声出力装置が対応する映像フォーマット及び音声フォーマットを示す対応フォーマット情報を取得するフォーマット取得部と、
    前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマット及び音声フォーマットを、それぞれ映像出力フォーマット及び音声出力フォーマットとして決定する出力フォーマット決定部と、
    無音区間検出部と、
    フォーマット制御部と、を備える映像音声再生装置が行う映像音声再生方法であって、
    前記無音区間検出部が、前記音声データの音量が予め定められた音量以下にある期間が、予め定められた期間以上の無音区間を検出する無音区間検出過程と、
    前記フォーマット制御部が、前記無音区間において、前記一の音声フォーマットを前記音声出力フォーマットに切り替えさせる第１音声フォーマット切替過程と、を有すること
    を特徴とする映像音声再生方法。
13. 前記フォーマット制御部が、前記音声出力フォーマットが前記一の音声フォーマットよりも、上位の品質のフォーマットであるか、又は、下位の品質のフォーマットであるかを判断する音声フォーマット判断過程をさらに備え、
    前記フォーマット制御部は、前記音声フォーマット判断過程において、前記音声出力フォーマットが前記一の音声フォーマットよりも上位の品質のフォーマットであると判断した場合に、前記第１音声フォーマット切替過程に進むこと
    を特徴とする請求項１２に記載の映像音声再生方法。
14. 前記フォーマット制御部が、前記音声フォーマット判断過程において、前記音声出力フォーマットが前記一の音声フォーマットよりも下位の品質のフォーマットであると判断した場合に、前記無音区間であるか否かを問わずに、前記一の音声フォーマットを前記音声出力フォーマットに切り替えさせる第２音声フォーマット切替過程をさらに有すること
    を特徴とする請求項１３に記載の映像音声再生方法。
15. 前記映像音声再生装置は、前記再生部から与えられた音声データを一時的に記憶する音声データ一時記憶部をさらに備え、
    前記無音区間検出過程において、前記無音区間検出部は、前記音声データ一時記憶部に一時的に記憶された音声データから、前記無音区間を検出すること
    を特徴とする請求項１２から１４の何れか一項に記載の映像音声再生方法。
16. 前記対応フォーマット情報は、前記各々の映像音声出力装置が対応する音声フォーマット、及び、前記各々の映像音声出力装置が対応する映像フォーマットを示し、
    前記出力フォーマット決定部は、前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定し、
    前記フォーマット制御部が、前記映像出力フォーマットが前記一の映像フォーマットよりも、上位の品質のフォーマットであるか、又は、下位の品質のフォーマットであるかを判断する映像フォーマット判断過程をさらに備え、
    前記フォーマット制御部が、前記映像フォーマット判断過程において、前記映像出力フォーマットが前記一の映像フォーマットよりも上位の品質のフォーマットであると判断した場合に、前記映像データの再生終了後に、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせる第１映像フォーマット切替過程をさらに有すること
    を特徴とする請求項１２から１４の何れか一項に記載の映像音声再生方法。
17. 前記フォーマット制御部が、前記映像フォーマット判断過程において、前記映像出力フォーマットが前記一の映像フォーマットよりも下位の品質のフォーマットであると判断した場合に、前記映像データの再生が終了しているか否かを問わずに、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせる第２映像フォーマット切替過程をさらに有すること
    を特徴とする請求項１６に記載の映像音声再生方法。
18. 前記映像音声再生装置は、前記映像データの明るさが予め定められた明るさ以下である期間が、予め定められた期間以上の黒画区間を検出する黒画区間検出部をさらに備え、
    前記対応フォーマット情報は、前記各々の映像音声出力装置が対応する音声フォーマット、及び、前記各々の映像音声出力装置が対応する映像フォーマットを示し、
    前記出力フォーマット決定部は、前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定し、
    前記フォーマット制御部が、前記黒画区間において、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせる第１映像フォーマット切替過程をさらに有すること
    を特徴とする請求項１２から１５の何れか一項に記載の映像音声再生方法。
19. 前記フォーマット制御部が、前記映像出力フォーマットが前記一の映像フォーマットよりも、上位の品質のフォーマットであるか、又は、下位の品質のフォーマットであるかを判断する映像フォーマット判断過程をさらに備え、
    前記フォーマット制御部は、前記映像フォーマット切替過程において、前記映像出力フォーマットが前記一の映像フォーマットよりも上位の品質のフォーマットであると判断した場合に、前記第１映像フォーマット切替過程に進むこと、
    を特徴とする請求項１８に記載の映像音声再生方法。
20. 前記フォーマット制御部が、前記映像フォーマット切替過程において、前記映像出力フォーマットが前記一の映像フォーマットよりも下位の品質のフォーマットであると判断した場合に、前記黒画区間であるか否かを問わずに、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせる第２映像フォーマット切替過程をさらに有すること
    を特徴とする請求項１９に記載の映像音声再生方法。
21. 前記映像音声再生装置は、前記映像データの明るさが予め定められた明るさ以下である期間が、予め定められた期間以上の黒画区間を検出する黒画区間検出部をさらに備え、
    前記対応フォーマット情報は、前記各々の映像音声出力装置が対応する音声フォーマット、及び、前記各々の映像音声出力装置が対応する映像フォーマットを示し、
    前記出力フォーマット決定部は、前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定し、
    前記フォーマット制御部が、前記黒画区間かつ前記無音区間である期間において、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせる第１映像フォーマット切替過程をさらに有すること
    を特徴とする請求項１２から１５の何れか一項に記載の映像音声再生方法。
22. 映像音声ストリームから映像データ及び音声データを再生する再生部と、
    前記映像データのフォーマットを一の映像フォーマットに変換して、変換済みの映像データを生成する映像フォーマット変換部と、
    前記音声データのフォーマットを一の音声フォーマットに変換して、変換済みの音声データを生成する音声フォーマット変換部と、
    前記変換済みの映像データ及び前記変換済みの音声データを複数の映像音声出力装置に出力する複数の入出力部と、
    前記複数の入出力部を介して、前記複数の映像音声出力装置に含まれる各々の映像音声出力装置から、前記各々の映像音声出力装置が対応する映像フォーマットを示す対応フォーマット情報を取得するフォーマット取得部と、
    前記対応フォーマット情報から、前記複数の映像音声出力装置の全てが対応する映像フォーマットを、映像出力フォーマットとして決定する出力フォーマット決定部と、
    黒画区間検出部と、
    フォーマット制御部と、を備える映像音声再生装置が行う映像音声再生方法であって、
    前記黒画区間検出部が、前記映像データの明るさが予め定められた明るさ以下である期間が、予め定められた期間以上の黒画区間を検出する黒画区間検出過程と、
    前記フォーマット制御部が、前記黒画区間において、前記一の映像フォーマットを前記映像出力フォーマットに切り替えさせる映像フォーマット変更過程と、を有すること
    を特徴とする映像音声再生方法。

Images