JP6120679B2

JP6120679B2 - マルチディスプレイシステム

Info

Publication number: JP6120679B2
Application number: JP2013112577A
Authority: JP
Inventors: 昇濱口
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2013-05-29
Filing date: 2013-05-29
Publication date: 2017-04-26
Anticipated expiration: 2033-05-29
Also published as: JP2014232192A

Description

この発明は、複数のディスプレイを組み合わせて構成するマルチディスプレイシステムに関する。

複数のディスプレイを例えば格子状に配置して１つの表示画面を構成するマルチディスプレイシステムは、電力、交通、プラント等のインフラ分野の監視に用いる映像表示装置として広く活用されている。

このようなマルチディスプレイシステムでは、表示画面上に同時に複数の映像を表示するため、映像信号処理装置によって複数の映像の大きさ、位置、優先度を決定し、入力された映像信号から１または複数の映像を選択して映像表示装置に出力するのが一般的である。

近年、遠隔地に配置された監視用カメラなどの映像配信機器から出力された圧縮された映像データ（以下、圧縮映像データ）をＥｔｈｅｒｎｅｔ（登録商標）などのネットワークを介して圧縮映像データ伸長再生装置（以下、伸長再生装置）に配信し、伸長再生装置で圧縮映像データを伸長再生してディスプレイに出力し、表示画面上に映像を表示することが行われている（特許文献１参照）。

このようなシステムでは、同一の監視用カメラの映像を複数の地点に配置したディスプレイで同時に表示することが容易であり、伸長再生装置にはＰＣを用いることが多い。

また、前述のマルチディスプレイシステムでは、各ディスプレイ上に同時に複数の映像を表示することが多く、この場合、伸長再生装置は複数のデータの伸長再生を同時に行わなければならない。ここで、伸長再生装置のもつ処理能力が十分でない場合、伸長再生が不安定な動作、すなわち、映像の不定期なコマ飛びや、映像のフリーズ、破綻などの生じるおそれがある。

これらの問題の解決手段の一つとして、伸長再生装置のもつ処理能力を超えそうな場合には、監視カメラから出力する映像のフォーマットを変更し、情報量を減らすよう監視カメラを制御して、伸長再生装置の処理量を減らし、安定な動作を得る方法が一般的に行われている。映像のフォーマットの変更例としては、解像度を低くしたり、フレームレートを低くしたりする等の方法が多く用いられる。

また、他の解決手段として、伸長再生装置の処理負荷（ＣＰＵ負荷）に応じて伸長再生方法を切り替え、ＣＰＵ負荷が一定の値を超えないようにすることにより、安定な動作を得る方法が提案されている（特許文献２参照）。

特開平１１−０３８９５１号公報特許第３１３３１１３号公報

伸長再生装置の処理能力を基に監視カメラから出力する映像フォーマットを変更する前述の方法によれば、監視カメラの出力映像データの情報量を、システム内で最も処理能力が低い伸長再生装置に合わせて抑える必要がある。そのため、高品位な映像を表示するためには、カメラの映像を表示する全てのディスプレイに対して処理能力が高い伸長再生装置を用意する必要があった。

また、マルチディスプレイシステムでは、マルチディスプレイ上に複数の映像ウィンドウを任意の位置に任意の大きさで表示するため、１つのディスプレイ上に複数の映像ウィンドウを表示する必要が生じ、１つの伸長再生装置が複数の映像を伸長再生する。この場合、表示する映像ウィンドウの数、すなわち伸長再生する映像の数が多いほど、伸長再生装置の処理負荷が大きくなる傾向にあり、従って、表示する映像ウィンドウの数により各伸長再生装置で負荷が異なる状態となる。

そのため、特許文献２に示す、伸長再生装置内のＣＰＵ負荷に応じて伸長再生方式を切り替える方法では、１つの映像ウィンドウが複数のディスプレイに跨って表示される場合、同一の映像ウィンドウの映像データを複数の伸長再生装置で伸長し、再生する。このとき各伸長再生装置の負荷状態の違いにより、異なる伸長再生方法が選択されると、ディスプレイの境目で表示状態が異なり、映像が適切に表示されないという問題がある。

本発明は上述の課題に鑑みてなされたものであり、圧縮映像データの伸長再生にかかる処理負荷を考慮した上で、複数のディスプレイに跨って適切に映像を表示することが可能なマルチディスプレイシステムの提供を目的とする。

本発明の第１のマルチディスプレイシステムは、複数のディスプレイを配列してひとつの表示面を構成するマルチディスプレイと、各ディスプレイと１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各ディスプレイに出力する複数の伸長再生装置と、伸長再生装置を制御する制御装置と、を備え、伸長再生装置は、制御装置の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、制御装置は、伸長再生装置が同時に伸長再生する映像データの数に応じて、全映像データに対する各伸長再生装置の伸長再生方法を個別に決定し、複数の伸長再生装置が複数のディスプレイに跨って表示されるべき同一の映像データである横断映像データの伸長再生を行う場合には、複数の伸長再生装置に対して個別に決定されるべき伸長再生方法のうち最も処理負荷の低い伸長再生方法を、横断映像データに対する複数の伸長再生装置の伸長再生方法とする。

本発明の第２のマルチディスプレイシステムは、複数のディスプレイを配列してひとつの表示面を構成するマルチディスプレイと、各ディスプレイと１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各ディスプレイに出力する複数の伸長再生装置と、伸長再生装置を制御する制御装置と、を備える。伸長再生装置は、制御装置の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、制御装置は、各伸長再生装置の負荷状態に応じて、各伸長再生装置の伸長再生方法を個別に決定し、複数の伸長再生装置が複数のディスプレイに跨って表示されるべき同一の映像データである横断映像データの伸長再生を行う場合には、複数の伸長再生装置に対して個別に決定されるべき伸長再生方法のうち最も処理負荷の低い伸長再生方法を、横断映像データに対する複数の伸長再生装置の伸長再生方法とする。

本発明の第１のマルチディスプレイシステムは、複数のディスプレイを配列してひとつの表示面を構成するマルチディスプレイと、各ディスプレイと１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各ディスプレイに出力する複数の伸長再生装置と、伸長再生装置を制御する制御装置と、を備え、伸長再生装置は、制御装置の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、制御装置は、伸長再生装置が同時に伸長再生する映像データの数に応じて、全映像データに対する各伸長再生装置の伸長再生方法を個別に決定し、複数の伸長再生装置が複数のディスプレイに跨って表示されるべき同一の映像データである横断映像データの伸長再生を行う場合には、複数の伸長再生装置に対して個別に決定されるべき伸長再生方法のうち最も処理負荷の低い伸長再生方法を、横断映像データに対する複数の伸長再生装置の伸長再生方法とする。したがって、伸長再生装置は不安定動作に陥ることなく圧縮映像データの伸長再生を行うことができる。また、複数のディスプレイに跨って表示される映像ウィンドウは各伸長再生装置において同一方法で伸長再生されるため、複数のディスプレイに跨って同じ画質で表示され、違和感のない表示がなされる。

本発明の第２のマルチディスプレイシステムは、複数のディスプレイを配列してひとつの表示面を構成するマルチディスプレイと、各ディスプレイと１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各ディスプレイに出力する複数の伸長再生装置と、伸長再生装置を制御する制御装置と、を備える。伸長再生装置は、制御装置の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、制御装置は、各伸長再生装置の負荷状態に応じて、各伸長再生装置の伸長再生方法を個別に決定し、複数の伸長再生装置が複数のディスプレイに跨って表示されるべき同一の映像データである横断映像データの伸長再生を行う場合には、複数の伸長再生装置に対して個別に決定されるべき伸長再生方法のうち最も処理負荷の低い伸長再生方法を、横断映像データに対する複数の伸長再生装置の伸長再生方法とする。したがって、伸長再生装置は不安定動作に陥ることなく圧縮映像データの伸長再生を行うことができる。また、複数のディスプレイに跨って表示される映像ウィンドウは各伸長再生装置において同一方法で伸長再生されるため、複数のディスプレイに跨って同じ画質で表示され、違和感のない表示がなされる。

マルチディスプレイシステムの構成を示すブロック図である。実施の形態１の伸長再生装置の構成を示すブロック図である。伸長再生装置の伸長再生映像ウィンドウ数と動作状態の関係を伸長再生方法ごとに示す図である。マルチディスプレイ上のウィンドウレイアウトを示す図である。マルチディスプレイ上のウィンドウレイアウトを示す図である。伸長再生方式に応じた伸長再生装置の負荷状態を示す図である。実施の形態２の伸長再生装置の構成を示すブロック図である。伸長再生装置の負荷状態と基本伸長再生方法の関係を示す図である。基本伸長再生方法の決定処理を示すフローチャートである。映像ウィンドウの伸長再生方法を示す図である。伸長再生装置の動作状態と負荷状態の関係を示す図である。伸長再生装置の動作状態と負荷状態の関係を示す図である。伸長再生装置の動作状態と負荷状態の関係を示す図である。伸長再生装置の動作状態と負荷状態の関係を示す図である。伸長再生装置の動作状態と負荷状態の関係を示す図である。マルチディスプレイ上のウィンドウレイアウトを示す図である。

＜Ａ．実施の形態１＞
＜Ａ−１．構成＞
図１は、実施の形態１に係るマルチディスプレイシステムの構成を示すブロック図であり、以下、このマルチディスプレイシステムの構成を説明する。実施の形態１のマルチディスプレイシステムは、配信装置３１〜３４と、伸長再生装置１〜４と、制御装置２０と、マルチディスプレイ１０とを備えている。

配信装置３１〜３４は、例えば監視カメラであり、所定のフォーマットの圧縮映像データをＥｔｈｅｒｎｅｔ（登録商標）などのネットワークを介して伸長再生装置１〜４に入力する。

伸長再生装置１〜４は、配信装置３１〜３４から取得した圧縮映像データを伸長し、得られた映像を任意の大きさに拡大縮小し、マルチディスプレイ１０の表示画面上の任意の位置に映像ウィンドウとして表示する。

マルチディスプレイ１０は、複数のディスプレイ１１〜１４が１つの表示画面（ディスプレイ）を形成するように格子状に配置されて構成される。ディスプレイ１１〜１４は、伸長再生装置１〜４で生成された映像を、例えばＤＶＩケーブルなどを介して受信し、表示する。ディスプレイ１１〜１４の解像度を、例えば１９２０×１２００画素とすれば、マルチディスプレイ１０全体のスクリーンサイズは３８４０×２４００画素となる。ディスプレイ１１〜１４と伸長再生装置１〜４は一対一で対応しており、例えば伸長再生装置１の生成映像はディスプレイ１１で表示され、伸長再生装置２の生成映像はディスプレイ１２で表示される。

伸長再生装置１〜４の内部構成はどれも同じであり、図２は、代表して伸長再生装置１の内部構成を示している。図２に示すように、伸長再生装置１は、システムバス１０１、受信手段１０２、制御手段１０３、通信手段１０４、メモリ１０５、プログラムデータファイル１０６、伸長再生手段１０７、映像表示手段１０８を備えている。システムバス１０１は共通バスであり、制御手段１０３、伸長再生手段１０７、受信手段１０２、メモリ１０５、プログラムデータファイル１０６、映像表示手段１０８が接続されている。

受信手段１０２はＥｔｈｅｒｎｅｔ（登録商標）などのネットワークを介して配信装置３１〜３４から圧縮映像データを受信し、メモリ１０５に一時的に格納する。

プログラムデータファイル１０６には、映像データの伸長再生を行うための制御プログラム等のプログラムが記憶されている。メモリ１０５には、圧縮映像データの他、プログラムデータファイル１０６の展開したプログラムが一時的に蓄積される。

伸長再生手段１０７は、メモリ１０５に一時的に格納された圧縮映像データをプログラムデータファイル１０６のプログラムに従って伸長再生し、システムバス１０１を介して映像表示手段１０８へ出力する。なお、伸長再生手段１０７は、時分割処理などにより複数の圧縮映像データを同時に伸長できるように構成されている。

伸長再生手段１０７における伸長再生方法には、処理負荷が異なる複数の方法があり、例えば処理負荷が高い順に第１伸長再生方法（方式１）、第２伸長再生方法（方式２）とする。なお、以下では伸長再生手段１０７が２つの伸長再生方法を選択することが出来るものとして説明するが、伸長再生方法の数は２つに限定しない。

方式２は、方式１に比べて制御手段１０３および伸長再生手段１０７の処理負荷を低減する方式であり、各方式の内容は予め設定され、プログラムデータファイル１０６に記録されている。

例えば、圧縮映像データの圧縮方式が、ＪＰＥＧ方式のように時間方向の圧縮を行わない方式である場合、方式１ではコマ落とし等の処理を行わず、入力されるすべての映像データを使用して伸長再生を行うのに対して、方式２では、コマ落とし等をしてデータ量を少なくしたり、フレームレートを下げたりする。

また、ＭＰＥＧ４方式やＨ．２６４方式のように時間方向の圧縮を行う方式の圧縮映像データである場合、方式１では全てのフレームを使用して伸長再生を行うのに対し、方式２ではイントラ・フレームのみを伸長再生することで処理負荷を低減する。なお、イントラ・フレームとは、圧縮映像データ内に一定間隔で含まれ、前後のコマのデータに依存せずに伸長再生可能なフレームのことである。

また、ＪＰＥＧ２０００方式のように１つのデータから異なる解像度で伸長再生可能なスケーラビリティ機能を持つ方式の圧縮映像データである場合、方式２では方式１よりも表示解像度を粗くして伸長再生することにより、方式１よりも情報量を低減することができる。この場合、方式１，２における表示解像度は、予め伸長再生手段１０７に設定しておくか、プログラムデータファイル１０６に記録しておく。

伸長再生手段１０７は、制御手段１０３の制御を受けて、伸長再生する各映像毎に、上述の方式１，２のいずれかを用いて伸長再生を行う。

映像表示手段１０８は、伸長再生手段１０７が伸長再生した映像を取得し、制御手段１０３の制御によりマルチディスプレイに表示するレイアウトを決定した上で、各ディスプレイ１１〜１４に表示出力１０９として映像を出力する。

図１に戻って、制御装置２０は、例えばＲＳ−２３２ＣやＥｔｈｅｒｎｅｔ（登録商標）などの汎用通信インターフェースの他、キーボード、マウス、ディスプレイモニター等のユーザーインターフェースを備えるＰＣ等である。制御装置２０は、オペレータの操作により、マルチディスプレイ１０の映像ウィンドウがレイアウトされるよう伸長再生装置１〜４に対して圧縮映像データの伸長再生、再生された映像の表示サイズ及び表示位置の指示をする。また、制御装置２０は、各伸長再生装置１〜４における映像ウィンドウの表示状態に応じて、各映像ウィンドウ毎に伸長再生方法を決定する。

＜Ａ−２．動作＞
制御装置２０による各映像ウィンドウ毎の伸長再生方法の決定処理について、以下に説明する。

図１における伸長再生装置１〜４の処理負荷は、伸長再生する映像データの数、すなわち表示する映像ウィンドウの数が多いほど大きくなる傾向にある。従って、前述の伸長再生方法の方式１により伸長再生する映像ウィンドウの数がある閾値を超えると、処理負荷が伸長再生装置１〜４の処理能力を超え、不安定な動作になる。

図３は、伸長再生する映像ウィンドウ数に応じた伸長再生装置１〜４の動作状態を、方式１，２のそれぞれについて示している。図中、○は安定動作、×は不安定動作を示す。この例では、方式１で伸長再生する場合は、映像ウィンドウ数が３以上で不安定動作となり、方式２で伸長再生する場合は、映像ウィンドウ数が６以上で不安定動作となることを示している。従って、伸長再生方法を方式１から２に切り替える閾値を映像ウィンドウ数３とする。すなわち、伸長再生する映像ウィンドウ数が３以上である伸長再生装置は、基本伸長再生方法を方式２とする。ここで基本伸長再生方法とは、後述する横断映像ウィンドウについての修正を考慮しない場合に、伸長再生装置１〜４が行う伸長再生方法である。伸長再生する映像ウィンドウ数が２以下の伸長再生装置は、基本伸長再生方法を方式１とする。

基本伸長再生方法を決定した後は、横断映像ウィンドウについて伸長再生方法の修正を行う。横断映像ウィンドウとは、ディスプレイ１１〜１４のうち複数のディスプレイに跨って表示されるべき映像ウィンドウのことである。一の伸長再生装置が伸長再生する映像ウィンドウが横断映像ウィンドウである場合、同一の横断映像ウィンドウを伸長再生する全ての伸長再生装置の中で最も処理負荷が軽い基本伸長再生方法を、当該横断映像ウィンドウに対する伸長再生方法として採用する。

図４は、マルチディスプレイ１０における映像ウィンドウのレイアウトの一例であり、図５は図４に示す表示状態を表に纏めたものである。ディスプレイ１１には３つの映像ウィンドウＡ，Ｂ，Ｃが表示されるので、伸長再生装置１の基本伸長再生方法は方式２となる。また、ディスプレイ１２には１つのウィンドウＣが表示されるので、伸長再生装置２の基本伸長再生方法は方式１となる。同様に、伸長再生装置３、４の基本伸長再生方法は共に方式１となる。

ウィンドウＢはディスプレイ１１，１３に跨る横断映像ウィンドウであり、ウィンドウＢを伸長再生する伸長再生装置１，３の基本伸長再生方法のうち最も処理負荷が軽いものは、伸長再生装置１の方式２である。従って、伸長再生装置３においてもウィンドウＢの伸長再生方法を方式２に決定する。

ウィンドウＣは、ディスプレイ１１，１２に跨る横断映像ウィンドウであり、ウィンドウＣを伸長再生する伸長再生装置１，２の基本伸長再生方法のうち最も処理負荷が軽いものは、伸長再生装置１の方式２である。従って、伸長再生装置２に置いてもウィンドウＣの伸長再生方法を方式２に決定する。

ウィンドウＤは、ディスプレイ１３，１４に跨る横断映像ウィンドウであり、ウィンドウＤを伸長再生する伸長再生装置３，４の基本伸長再生方法のうち最も処理負荷が軽いものは、伸長再生装置３，４の方式１である。従って、伸長再生装置３，４におけるウィンドウＤの伸長再生方法は、基本伸長再生方法から変更しない。

制御装置２０は、上記の方法で決定した各伸長再生装置における各映像ウィンドウの伸長再生方法で伸長再生するよう、伸長再生装置１〜４に指示する。この結果、伸長再生装置１〜４は不安定動作に陥ることなく、圧縮映像データの伸長再生を行うことができる。また、複数のディスプレイに跨って表示される映像ウィンドウは各伸長再生装置において同一方法で伸長再生されるため、複数のディスプレイに亘って同じ画質で表示され、違和感のない表示がなされる。また、伸長再生装置の処理負荷に余裕があれば、図４のウィンドウＤに示すように方式１で伸長再生されるため、安定に動作を行える範囲で高画質な再生が可能である。このように、配信装置３１〜３４から配信される圧縮映像データを、伸長再生装置１〜４の側で最適な再生方式を選択して再生することが出来るため、システム全体として安定かつ高品位の映像再生を行うことが可能となる。

＜Ａ−３．効果＞
実施の形態１のマルチディスプレイシステムは、複数のディスプレイ１１〜１４を配列してひとつの表示面を構成するマルチディスプレイ１０と、各ディスプレイ１１〜１４と１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各ディスプレイ１１〜１４に出力する複数の伸長再生装置１〜４と、伸長再生装置１〜４を制御する制御装置２０と、を備えるマルチディスプレイシステムである。伸長再生装置１〜４は、制御装置２０の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、制御装置２０は、伸長再生装置１〜４が同時に伸長再生する映像データの数に応じて、全映像データに対する各伸長再生装置１〜４の伸長再生方法を個別に決定し、複数の伸長再生装置１〜４が複数のディスプレイ１１〜１４に跨って表示されるべき同一の映像データである横断映像データの伸長再生を行う場合には、当該横断映像データを伸長再生する複数の伸長再生装置１〜４に対して個別に決定されるべき伸長再生方法のうち最も処理負荷の低い伸長再生方法を、横断映像データに対する複数の伸長再生装置１〜４の伸長再生方法とする。したがって、伸長再生装置１〜４が安定的に圧縮映像データの伸長再生を行うと共に、複数のディスプレイ１１〜１４に跨って表示される映像ウィンドウの伸長再生方法がディスプレイ１１〜１４間で同一の方式となるため、正しく映像を認識できる。また、伸長再生装置１〜４の伸長再生方法を調整することにより処理負荷を調整するため、最も処理能力の低い伸長再生装置に合わせて映像配信機器の出力フォーマットを変更する必要がない。そのため、処理能力に余裕がある伸長再生装置では高画質の映像を伸長再生することができる。

＜Ｂ．実施の形態２＞
図６は、映像ウィンドウを表示しないアイドル状態と、映像ウィンドウＡ〜Ｄを夫々表示した場合の伸長再生装置１〜４の負荷状態を、方式１，２の夫々について示している。いずれの映像ウィンドウＡ〜Ｄにおいても、方式１の方が方式２よりも処理負荷が高いが、同一の伸長再生方式であっても、映像ウィンドウＡ〜Ｄによって、映像の解像度やビットレート処理負荷の違いから処理負荷が異なる。

そのため、実施の形態２のマルチディスプレイシステムでは、実際に伸長再生装置の処理負荷を検出した上で、伸長再生方法を選択的に切り替えることにより、映像ウィンドウ毎に映像の解像度やビットレートが異なっていても、適切に伸長再生方法を決定できるようにする。

＜Ｂ−１．構成＞
実施の形態２のマルチディスプレイシステムの全体構成は、図１に示す実施の形態１のマルチディスプレイシステムの構成と同様であるため、説明を省略する。但し、伸長再生装置１〜４の内部構成が一部異なるため、実施の形態２では伸長再生装置１〜４に代えて伸長再生装置２１〜２４とする。

伸長再生装置２１〜２４の内部構成はどれも同じであり、図７は、代表して伸長再生装置２１の内部構成を示している。伸長再生装置２１は、伸長再生装置１の構成に加えて負荷検出手段１１０を備える。負荷検出手段１１０は、予め定めた条件により、制御手段１０３及び伸長再生手段１０７の負荷状態を検出する。検出方法は、例えばシステムバス１０１上の使用頻度や、メモリ１０５への書込み及び読み出し頻度、制御手段１０３や伸長再生手段１０７が使用するＣＰＵ使用率から、負荷状態を割り出す。検出した負荷状態は、負荷の割合（％）として制御手段１０３に出力する。

制御手段１０３は、負荷検出手段１１０から入力された負荷状態を通信手段１０４を介して制御装置２０に送る。制御装置２０は、伸長再生装置２１〜２４の負荷状態と映像ウィンドウの表示状態より、各ウィンドウの映像の伸長再生方法をそれぞれ決定する。

＜Ｂ−２．動作＞
実施の形態２の制御装置２０における、各映像ウィンドウの伸長再生方法の決定処理について説明する。まず、それぞれの伸長再生装置２１〜２４における、基本伸長再生方法を決定する。制御装置２０は、伸長再生装置２１〜２４からそれぞれ負荷状態を取得し、図８に示す特性に従い基本伸長再生方法を決定する。図８は横軸が伸長再生装置２１〜２４の負荷状態（％）を、縦軸が基本伸長再生方式を示している。負荷状態が０〜６０％のときは基本伸長再生方法を方式１とする。負荷が６０％未満の状態から上昇して９０％を超えると、基本伸長再生方法を方式２に切り替える。この状態で、負荷状態が６０％未満に減少すると、基本伸長再生方法を方式１に切り替える。

図９は、以上に説明した基本伸長再生方法の決定処理を示すフローチャートである。図９に沿って決定処理を説明する。負荷検出手段１１０で検出した負荷状態を伸長再生装置１〜４から取得した制御装置２０は、負荷状態が９０％より高いか否かを判断する（ステップＳ１）。負荷状態が９０％より高ければ基本伸長再生方法を方式２とする（ステップＳ４）。ステップＳ４でＮｏであれば、負荷状態が６０％未満であるか否かを判断する（ステップＳ２）。負荷状態が６０％未満であれば基本伸長再生方法を方式１とする（ステップＳ５）。負荷状態が６０％より高ければ、現在の基本伸長再生方法を維持する。すなわち、現在の基本伸長再生方法が方式１か否かを判断し（ステップＳ３）、Ｙｅｓであれば方式１に（ステップＳ６）、Ｎｏであれば方式２に決定する（ステップＳ７）。

こうして伸長再生装置１〜４ごとに基本伸長再生方法を決定した後、映像ウィンドウ毎に伸長再生方法を決定する。具体的には、複数のディスプレイに跨らず１つのディスプレイにのみ表示される映像ウィンドウに対しては、当該映像ウィンドウを伸長再生する伸長再生装置の基本伸長再生方法を伸長再生方法に決定する。また、複数のディスプレイに跨って表示される横断映像ウィンドウに対しては、当該横断映像ウィンドウを伸長再生する全ての伸長再生装置のうち、基本伸長再生方法に方式２が選択されているものが少なくとも１つあれば、当該横断映像ウィンドウの伸長再生方法を方式２に決定する。すなわち、当該横断映像ウィンドウを伸長再生する全ての伸長再生装置は、自己の基本伸長再生方法に関わらず、方式２で当該横断映像ウィンドウを伸長再生する。

図１０は、マルチディスプレイ１０のレイアウト例である。処理負荷を基に、ディスプレイ１２〜１４に対応する伸長再生装置２２〜２４の基本伸長再生方法は方式１が、ディスプレイ１１に対応する伸長再生装置２１の基本伸長再生方法には方式２が選択される。そして、映像ウィンドウＡの伸長再生方法は、伸長再生装置２１の基本伸長再生方法と同じく方式２となり、横断映像ウィンドウＤの伸長再生方法は、伸長再生装置２４の基本伸長再生方法と同じく方式１となる。横断映像ウィンドウＢ，Ｃの伸長再生方法は、伸長再生装置２１の基本伸長再生方法に合わせて方式２となる。

図１１〜図１５は、マルチディスプレイ１０上の映像ウィンドウの表示状態と伸長再生装置１〜４の負荷状態を示している。図１１は、マルチディスプレイ１０上に映像ウィンドウを１つも表示していない状態を示しており、伸長再生装置１〜４の負荷状態はいずれも２２％である。基本伸長再生方法に方式２を選択する負荷状態の閾値は図８に示すように９０％であるため、伸長再生装置１〜４の基本伸長再生方法にはいずれも方式１を選択する。

この状態から図４に示す映像ウィンドウＡ、Ｂ、Ｃ、Ｄを表示するレイアウトにマルチディスプレイ１０の表示を切り替える場合、伸長再生装置１〜４の基本伸長再生方法はいずれも方式１である為、映像ウィンドウＡ、Ｂ、Ｃ、Ｄの伸長再生方法は何れも方式１となる。制御装置２０は、伸長再生装置１に対して映像ウィンドウＡ、Ｂ、Ｃを、伸長再生装置２２に対して映像ウィンドウＣを、伸長再生装置２３に対して映像ウィンドウＢ、Ｄを、伸長再生装置２４に映像ウィンドウＤを、それぞれ方式１で伸長再生するよう指示する。

伸長再生装置２１〜２４は制御装置２０から指示を受け、図４に示すウィンドウレイアウトとなるよう、それぞれ映像ウィンドウを表示し方式１で伸長再生を開始する。この結果、伸長再生装置２１〜２４の負荷状態は高くなり、図１２の表の「負荷状態」列に示す値となる。

次に、制御装置２０は伸長再生装置２１〜２４からそれぞれの負荷状態の値を取得し、取得した負荷状態を基に、各映像ウィンドウの伸長再生方式を再び決定する。このとき、取得した伸長再生装置２１の負荷状態は１００％であり、方式２を選択する閾値である９０％を超えているので、伸長再生装置２１の基本伸長再生方法として方式２が選択される。また、伸長再生装置２２〜２４の負荷状態はいずれも方式２を選択する閾値の９０％に達しないので、伸長再生装置２２〜２４の基本伸長再生方法は方式１のまま変化しない。

この結果、映像ウィンドウＡは伸長再生装置２１に対応するディスプレイ１１に表示される映像ウィンドウであり、映像ウィンドウＢ，Ｃはディスプレイ１１に跨る横断ウィンドウであるため、これらの映像ウィンドウに対して伸長再生方法を方式２と決定する。映像ウィンドウＤはディスプレイ１１に跨らないため、伸長再生方法に変更はない。すなわち、制御装置２０は、伸長再生装置２１に対してウィンドウＡ、Ｂ、Ｃを方式２で、伸長再生装置２２に対してウィンドウＣを方式２で、伸長再生装置２３に対してウィンドウＢを方式２で伸長再生するよう、それぞれ指示する。

伸長再生装置２１〜２３は制御装置２０から指示を受け、それぞれ映像ウィンドウＡ、Ｂ、Ｃの伸長再生方法を方式２に切り替えて伸長再生を開始する。この結果、伸長再生装置２１〜２３の負荷状態は低下し、図１３の表の「負荷状態」列に示す値となる。

次に、マルチディスプレイ１０のレイアウトを、図４に示す状態から図１６に示す状態に、すなわち映像ウィンドウＡを非表示に切り替える場合の動作を説明する。

まず、制御装置２０が、伸長再生装置２１に対して映像ウィンドウＡを非表示にするよう指示する。この指示を受けた伸長再生装置２１は、映像ウィンドウＡを非表示にするため映像ウィンドウＡの伸長再生動作を停止する。その結果、伸長再生装置２１の負荷状態の値は低下し、図１４の表の「負荷状態」列に示す値となる。

次に、制御装置２０は伸長再生装置２１〜２４からそれぞれの負荷状態の値を取得し、取得した負荷状態を基に、各映像ウィンドウの再生方式を再決定する。このとき、伸長再生装置２１の負荷状態の値は４８％であり、基本伸長再生方法を方式１に切り替える閾値の６０％を下回っているため、伸長再生装置２１の基本伸長再生方法として方式１が選択される。また伸長再生装置２２〜２４の負荷状態の値は何れも変化していないので、伸長再生装置２２〜２４の基本伸長再生方法は方式１のまま変化しない。

この結果、映像ウィンドウＢ、Ｃ、Ｄの伸長再生方法はいずれも方式１が選択され、制御装置２０は伸長再生装置２１に対して映像ウィンドウＢ、Ｃを、伸長再生装置２２に対してウィンドウＣを、伸長再生装置２３に対してウィンドウＢを、それぞれ方式１で伸長再生するよう指示する。

伸長再生装置２１〜２３は制御装置２０から指示を受け、映像ウィンドウＢ、Ｃを方式１に切り替えて伸長再生を開始する。この結果、伸長再生装置２１〜２３の負荷状態は上昇し、図１５の表の「負荷状態」列に示す値となる。

＜Ｂ−３．効果＞
実施の形態２のマルチディスプレイシステムは、複数のディスプレイ１１〜１４を配列してひとつの表示面を構成するマルチディスプレイ１０と、各ディスプレイ１１〜１４と１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各ディスプレイに出力する複数の伸長再生装置２１〜２４と、伸長再生装置２１〜２４を制御する制御装置２０と、を備えるマルチディスプレイシステムであって、伸長再生装置２１〜２４は、制御装置２０の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、制御装置２０は、伸長再生装置２１〜２４の負荷状態に応じて、各伸長再生装置２１〜２４の伸長再生方法を個別に決定し、複数の伸長再生装置２１〜２４が複数のディスプレイ１１〜１４に跨って表示されるべき同一の映像データである横断映像データの伸長再生を行う場合には、複数の伸長再生装置２１〜２４に対して個別に決定されるべき伸長再生方法のうち最も処理負荷の低い伸長再生方法を、横断映像データに対する複数の伸長再生装置２１〜２４の伸長再生方法とする。したがって、伸長再生装置２１〜２４が安定的に圧縮映像データの伸長再生を行うと共に、複数のディスプレイ１１〜１４に跨って表示される映像ウィンドウの伸長再生方法がディスプレイ１１〜１４間で同一の方式となるため、正しく映像を認識できる。また、伸長再生装置２１〜２４の伸長再生方法を調整することにより処理負荷を調整するため、最も処理能力の低い伸長再生装置に合わせて映像配信機器の出力フォーマットを変更する必要がない。そのため、処理能力に余裕がある伸長再生装置では高画質の映像を伸長再生することができる。また、映像ウィンドウ毎に解像度やビットレート等が異なり処理負荷が異なる場合であっても、制御装置２０は伸長再生装置２１〜２４の負荷状態に応じて適切に伸長再生方法を決定することができる。

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略したりすることが可能である。

１〜４，２１〜２４伸長再生装置、１０マルチディスプレイ、１１〜１４ディスプレイ、２０制御装置、３１〜３４配信装置、１０１システムバス、１０２受信手段、１０３制御手段、１０４通信手段、１０５メモリ、１０６プログラムデータファイル、１０７伸長再生手段、１０８映像表示手段、１０９表示出力、１１０負荷検出手段。

Claims

複数のディスプレイを配列してひとつの表示面を構成するマルチディスプレイと、
各前記ディスプレイと１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各前記ディスプレイに出力する複数の伸長再生装置と、
前記伸長再生装置を制御する制御装置と、を備える
マルチディスプレイシステムであって、
前記伸長再生装置は、前記制御装置の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、
前記制御装置は、
各前記伸長再生装置が同時に伸長再生する前記映像データの数に応じて、各前記伸長再生装置の前記伸長再生方法を個別に決定し、
複数の前記伸長再生装置が複数の前記ディスプレイに跨って表示されるべき同一の前記映像データである横断映像データの伸長再生を行う場合には、前記複数の伸長再生装置に対して前記個別に決定されるべき前記伸長再生方法のうち最も処理負荷の低い前記伸長再生方法を、前記横断映像データに対する前記複数の伸長再生装置の前記伸長再生方法とする、
マルチディスプレイシステム。
複数のディスプレイを配列してひとつの表示面を構成するマルチディスプレイと、
各前記ディスプレイと１対１に対応し、１以上のデータ圧縮された映像データを伸長再生してひとつの映像信号を生成し、各前記ディスプレイに出力する複数の伸長再生装置と、
前記伸長再生装置を制御する制御装置と、を備える
マルチディスプレイシステムであって、
前記伸長再生装置は、前記制御装置の制御に従い、伸長再生方法として各々処理負荷が異なる複数の伸長再生方法を選択的に切り替え、
前記制御装置は、
各前記伸長再生装置の負荷状態に応じて、各前記伸長再生装置の前記伸長再生方法を個別に決定し、
複数の前記伸長再生装置が複数の前記ディスプレイに跨って表示されるべき同一の前記映像データである横断映像データの伸長再生を行う場合には、前記複数の伸長再生装置に対して前記個別に決定されるべき前記伸長再生方法のうち最も処理負荷の低い前記伸長再生方法を、前記横断映像データに対する前記複数の伸長再生装置の前記伸長再生方法とする、
マルチディスプレイシステム。