JP4804378B2 - 映像表示装置及び映像表示方法 - Google Patents

Description

本発明は、複数のカメラ等の映像入力部で得られた映像を画面に表示する映像表示装置及び映像表示方法に関する。

カメラ等で撮影した映像を画面表示する映像表示装置として、例えば、映像信号をネットワークを介して伝送し、他の場所にある画像表示部において映像を表示するような映像表示システムがある。このようなネットワークを用いた映像表示システムは、対象領域の撮影映像を遠隔地で集中的に監視する監視カメラシステムなどに用いられている。

この種の映像表示システムとしては、カメラの操作性を向上させるとともにネットワークにかかる負担を軽減させるカメラ制御システムが知られている（特許文献１参照）。このカメラ制御システムでは、カメラ操作装置は、その操作画面に設けられたボタンが操作されると、このボタンに予め割り当てられたアングルになるように、カメラ管理装置に指示する。カメラ管理装置は、この指示されたアングルになるまで映像データの転送を禁止し、アングルの変更を高速で行う。これにより、カメラのアングル変更を高速化し、このときのネットワークにかかる負荷を低減することが可能である。

しかしながら、上記従来のカメラ制御システムでは、以下のような不具合があった。カメラ操作装置（クライアントＰＣ）側では、操作対象（制御対象）であるカメラのパン・チルトの操作性向上と引き換えに、パン・チルト動作中、カメラからの映像データの転送を抑制するようになっている。このため、パン・チルト動作中に画面に表示される映像が断続的になってしまうので、表示映像を見ながらカメラのパン・チルトを細かく調整することが困難であった。

また、上記カメラ制御システムでは、表示部において１台のカメラからの映像だけを表示する単画面表示が行われているが、遠隔地で集中的に監視する監視カメラシステムなどでは、複数の映像を一つのモニタ内に多画面表示して一目で目視できるものが望まれている。通常、表示部に多画面を表示する映像表示システムでは、ネットワークや各装置の能力的な制約があるので、表示部側の装置の負荷を抑えるために、各画面のフレームレートを低くする必要があった。システム全体での映像データの伝送容量や処理能力はほぼ決まっているため、特に一度に表示する画面の数が多いほど、動画表示に制約をうけることになる。この場合も、単画面表示と同様に、パン・チルト動作中に画面に表示される映像が断続的になり、カメラのパン・チルトを細かく調整することが困難であった。
特開平１０−１３６２４６号公報

上述したように、従来の映像表示装置では、パン・チルトなどのカメラ制御動作中に表示される映像が粗くなるので、表示映像を見ながらカメラの細かい調整が困難であるという問題点があった。特に、一つのモニタ内に複数の映像を表示する多画面表示を行う場合は、ネットワークや各装置などのシステムのリソースに限りがあるので、映像の表示レートなどが低下し、カメラの調整に支障をきたす場合も生じ得る。

本発明は、上記事情に鑑みてなされたもので、複数の映像を一画面内に複数画面で表示する場合、撮影画角などを制御する制御対象となる撮像部の映像入力部に対応する映像の品質を他と比べて高くすることができ、撮像部制御時の操作性を向上することが可能な映像表示装置及び映像表示方法を提供することを目的とする。

本発明の映像表示装置は、複数の映像入力部で得られた映像を画面に表示する映像表示装置であって、少なくとも一つの撮像部を含む複数の映像入力部で得られた複数の映像を、一画面内に複数画面で表示する画面表示部と、前記複数の映像入力部のうち、撮像部がパンまたはチルト動作をしている場合、前記画面表示部においてパンまたはチルト動作をしている撮像部で撮影された映像が表示される画面の更新頻度を、他の映像入力部からの映像が表示される画面の更新頻度に比べて高くする表示映像品質制御部と、を備えるものである。
これにより、複数の映像入力部で得られた映像を一画面内に複数画面で表示する際、複数の映像入力部において、撮像部が例えば撮像領域や画角等を調整するパンまたはチルト動作をしている場合、その撮像部に対応する画面の品質を他と比べて高くすることができ、撮像部に対してパン・チルト等の操作を行う際に、その操作性を向上することが可能となる。

また、本発明は、上記の映像表示装置であって、前記複数の映像入力部の中から、撮像部がパンまたはチルト動作をしているか否かを判別する制御対象判別部と、前記撮像部がパンまたはチルト動作をしなくなってから所定時間が経過したか否かを判別する制御時間判別部とを備え、前記表示映像品質制御部は、前記所定時間が経過した場合、前記画面表示部においてパンまたはチルト動作をしなくなった撮像部に対応する画面の更新頻度を元の更新頻度に戻すものを含む。
これにより、パンまたはチルト動作をしなくなった撮像部に対応する画面の更新頻度を元に戻すことで、各表示画面の品質を自動的に元の状態に戻すことができ、状況に応じた使い勝手を向上させることが可能となる。

また、本発明は、上記の映像表示装置であって、前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部から配信される映像データの配信フレームレートを上げ、前記他の映像入力部から配信される映像データの配信フレームレートを下げるようにするものを含む。
これにより、パンまたはチルト動作をしている撮像部に対応する画面について、画面の更新頻度を変更し、画面の品質を調整することが可能となる。このとき、配信するネットワーク等の伝送路の伝送容量に制限がある場合等でも、伝送容量内で目的の制御対象の画面の品質を高くし、複数の表示画面を適切に調整することが可能である。

また、本発明は、上記の映像表示装置であって、前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部で符号化された映像データを復号化する際の復号化フレームレートを上げ、前記他の映像入力部で符号化された映像データを復号化する際の復号化フレームレートを下げるようにするものを含む。
これにより、制御対象の撮像部に対応する画面について、画面の更新頻度を変更し、画面の品質を調整することが可能となる。このとき、表示映像品質制御部は撮像部との通信が不要であるので、ネットワーク等の伝送路の構成に関わらず、容易に実現可能である。また、伝送路の伝送容量を軽減できる、マルチキャストのような１対多通信の場合に有効である。

また、本発明は、上記の映像表示装置であって、前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部からの映像データを用いて描画する際の描画フレームレートを上げ、前記他の映像入力部からの映像データを用いて描画する際の描画フレームレートを下げるようにするものを含む。
これにより、パンまたはチルト動作をしている撮像部に対応する画面について、画面の更新頻度を変更し、画面の品質を調整することが可能となる。このとき、表示映像品質制御部は撮像部との通信が不要であるので、ネットワーク等の伝送路の構成に関わらず、容易に実現可能である。また、伝送路の伝送容量を軽減できる、マルチキャストのような１対多通信の場合に有効である。

また、本発明は、上記の映像表示装置であって、前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部で撮影された映像が表示される画面の更新頻度を高くするとともに、前記制御対象である撮像部から配信される映像データの画質を前記他の映像入力部から配信される映像データの画質に比べて高くするものを含む。
これにより、画面の更新頻度を高くするのに加えて、例えば圧縮率等の符号化効率、画像の解像度、ピントなどを調節することで画質を良くすることによって、制御対象の撮像部に対応する画面をより鮮明にすることができ、操作性をより一層向上可能となる。

また、本発明は、上記の映像表示装置であって、前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部から配信される映像データの配信フレームレート、前記映像データを復号化する際の復号化フレームレート、及び前記映像データを用いて描画する際の描画フレームレートのうちの少なくとも２つを用いて、前記更新頻度を変更するものを含む。
これにより、各種フレームレートの変更を任意に組み合わせることで、制御対象である撮像部に対応する画面の更新頻度を変更する際の自由度を増すことができる。

本発明の映像表示装置は、撮像部で撮影される映像を画面に表示する映像表示装置であって、前記撮像部で得られた映像を表示する画面表示部と、前記撮像部がパンまたはチルト動作をしているか否かを判別する制御対象判別部と、前記撮像部がパンまたはチルト動作をしている場合、前記画面表示部における前記撮像部で撮影された映像が表示される画面の更新頻度を、パンまたはチルト動作をしていない場合の前記画面の更新頻度に比べて高くする表示映像品質制御部と、を備えるものである。
これにより、パンまたはチルト動作をしているときの撮像部で得られた映像が表示される画面の更新頻度を、パンまたはチルト動作をしていない場合の画面の更新頻度よりも高くすることができ、撮像部制御時の操作性を向上することが可能となる。

本発明の映像表示方法は、複数の映像入力部で得られた映像を画面に表示する際の映像表示方法であって、少なくとも一つの撮像部を含む複数の映像入力部で得られた複数の映像を、画面表示部において一画面内に複数画面で表示する画面表示ステップと、前記複数の映像入力部の中から、パンまたはチルト動作をしている撮像部があるか否かを判別する制御対象判別ステップと、前記複数の映像入力部のうち、パンまたはチルト動作をしている撮像部がある場合、前記画面表示部においてパンまたはチルト動作をしている撮像部で撮影された映像が表示される画面の更新頻度を、他の映像入力部からの映像が表示される画面の更新頻度に比べて高くする表示映像品質制御ステップと、を有するものである。

本発明の情報処理装置は、少なくとも一つの撮像部を含む複数の映像入力部と接続され、前記複数の映像入力部で得られた映像データを用いて表示装置に映像を表示させる情報処理装置であって、前記撮像部を含む複数の映像入力部で得られた複数の映像を、前記表示装置において一画面内に複数画面で表示する画面表示部と、前記複数の映像入力部の中から、パンまたはチルト動作をしている撮像部があるか否かを判別する制御対象判別部と、前記複数の映像入力部のうち、パンまたはチルト動作をしている撮像部がある場合、前記表示装置におけるパンまたはチルト動作をしている撮像部で撮影された映像が表示される画面の更新頻度を、他の映像入力部からの映像が表示される画面の更新頻度に比べて高くする表示映像品質制御部と、を備えるものである。

また、本発明は、上記いずれかに記載の映像表示装置の各手段として機能させるためのプログラムを提供する。

本発明によれば、複数の映像を一画面内に複数画面で表示する場合、撮影画角などを制御する制御対象となる撮像部の映像入力部に対応する映像の品質を他と比べて高くすることができ、撮像部制御時の操作性を向上することが可能な映像表示装置及び映像表示方法を提供できる。

本実施形態では、映像表示装置の一例として、ネットワークを介して複数台のカメラ装置及びクライアントＰＣが接続され、クライアントＰＣに接続されたディスプレイ装置に複数台のカメラ装置で撮影された映像を一画面内に同時に複数画面で表示するマルチ映像監視システムに適用した構成例を示す。

（第１の実施形態）
図１は本発明の第１の実施形態におけるマルチ映像監視システムの構成を示す図である。このマルチ映像監視システムでは、ネットワーク１０を介して、映像入力部及び映像送信部となる複数台の撮像部であるカメラ装置２０、３０と、映像受信部及び映像処理部となるクライアントＰＣ４０とが接続されている。ネットワーク１０には、例えばＩＰネットワーク等が用いられ、遠隔地のカメラ装置を接続して撮影領域の映像を監視者の手元で視認することができる。このマルチ映像監視システムは、セキュリティ用の所定位置や所定領域の監視目的などに用いられる。本実施形態では、一例として１６台のカメラ装置がネットワーク１０に接続されている場合を説明するが、図１では一部のカメラ装置だけが描かれ、その他は省略されている。映像入力部としては、カメラ装置の他に、映像データを記録するレコーダや映像データを蓄積するストレージ装置なども用いられる。なお、カメラ装置の台数及びクライアントＰＣの台数は特に限定されない。

カメラ装置２０は、映像入力部２１、カメラ制御部２２、映像符号化部２３、映像符号化制御部２４、映像配信部２５、及び映像配信制御部２６を有して構成される。なお、カメラ装置３０はカメラ装置２０と同様の構成を有するので、その説明を省略する。

映像入力部２１は、被写体を撮影し、その映像データを出力する撮像部を有する。カメラ制御部２２は、撮像部の撮像領域を調整するためのパン・チルト方向を制御するとともに、撮像画角を調整するためのズーム制御やピント調節などを行う。映像符号化部２３は所定の符号化方式で映像データを圧縮・符号化する。この符号化方式として、例えばＪＰＥＧやＭＰＥＧ−４などが用いられる。映像符号化制御部２４は、クライアントＰＣ４０からの指示に従って、映像符号化部２３を制御し、映像データを符号する際の圧縮率などの符号化効率を変更する。映像配信部２５は、符号化された映像データをネットワーク１０を介してクライアントＰＣ４０に配信する。映像配信制御部２６は、映像配信部２５を制御し、クライアントＰＣ４０からの指示に従って、カメラ装置から配信される映像データにおける、単位時間当たりのフレーム枚数である配信フレームレート等を変更する。

クライアントＰＣ４０は汎用ＰＣと同様のハードウェア構成を有する。クライアントＰＣ４０は、映像受信部４１、映像復号化制御部４２、映像復号化部４３、４４、復号映像メモリ４５、４６、映像合成表示部４７、映像符号化管理部４８、映像配信管理部４９、映像復号化管理部５０、映像表示制御部５１、映像表示管理部５２、及びカメラ管理部５３を有して構成される。また、クライアントＰＣ４０には、操作者が閲覧するためのディスプレイ装置６０や、操作者が操作するための操作部７０が設けられている。

映像受信部４１は、複数台のカメラ装置２０、３０からそれぞれ配信される映像データを受信する。映像復号化制御部４２は、複数台のカメラ装置２０、３０からそれぞれ受信した映像データを、各カメラ装置に対応した映像復号化部４３、４４に分配するとともに、各映像復号化部４３、４４を制御し、そのデコードフレームレート等を変更する。映像復号化部４３、４４は、それぞれ符号化された映像データを復号化する。復号映像メモリ４５、４６には、映像復号化部４３、４４で復号化された映像データがそれぞれ記憶される。映像合成表示部４７は、復号映像メモリ４５、４６に記憶された各映像データを読み出し、チャンネル（ＣＨ）毎に各映像データをディスプレイ装置６０に表示させるように、一画面内に同時に複数画面で表示する多画面表示（マルチ画面表示）の表示制御を行う。

映像符号化管理部４８は、カメラ装置２０、３０内の各映像符号化制御部２４に対し、ネットワーク１０を介して圧縮率などの符号化効率を指示する。映像配信管理部４９は、カメラ装置２０、３０内の各映像配信制御部２６に対し、映像データの配信フレームレート等を指示する。映像復号化管理部５０は、映像復号化制御部４２にデコードフレームレート等を指示する。映像表示制御部５１は、各復号映像メモリ４５、４６に記憶される映像データの描画フレームレートを制御する。この描画フレームレートの制御として、復号映像メモリに記憶される映像データの単位時間当たりの更新枚数を変更する制御、復号映像メモリから読み出される映像データの単位時間当たりの読み出し枚数を変更する制御、あるいは復号映像メモリに格納された映像データの表示領域を変更する制御が行われる。映像表示管理部５２は、映像表示制御部５１に対し、映像データの描画フレームレートを指示する。

カメラ管理部５３は、操作部７０からの指示に従って、カメラ装置２０、３０内のカメラ制御部２２に対し、パン・チルト方向の制御、ズーム制御やピント調節などを指示する。

なお、クライアントＰＣ４０内のこれら各部の機能は、クライアントＰＣ４０内のＣＰＵがメモリやストレージ等の記憶媒体に格納された制御プログラムを実行して所定の処理を行うことにより実現される。ここで、上記構成において、クライアントＰＣ４０の映像合成表示部４７及びディスプレイ装置６０等により画面表示部の機能が実現される。また、カメラ装置２０の映像符号化制御部２４、映像配信制御部２６、クライアントＰＣ４０の映像復号化制御部４２、映像表示制御部５１等により表示映像品質制御部の機能が実現される。また、クライアントＰＣ４０のカメラ管理部５３等により制御対象判別部及び制御時間判別部の機能が実現される。

上記構成を有するマルチ映像監視システムの動作を説明する。図２はマルチ映像監視システムにおける映像表示動作手順を示すフローチャートである。この処理プログラムは、クライアントＰＣ４０内のメモリやストレージ等の記憶媒体に格納されており、クライアントＰＣ４０内のＣＰＵによって所定のタイミング毎に繰り返し実行される。

まず、クライアントＰＣ４０は、映像受信部４１により、複数台のカメラ装置２０、３０から配信される映像データをそれぞれ受信し（ステップＳ１）、映像復号化部４３、４４により、受信した映像データを復号化して復号映像メモリ４５、４６にそれぞれ記憶する（ステップＳ２）。クライアントＰＣ４０は、映像合成表示部４７により、復号映像メモリ４５、４６に記憶された各映像データを読み出して合成し、合成映像データを生成する（ステップＳ３）。クライアントＰＣ４０は、映像合成表示部４７により生成された合成映像データをディスプレイ装置６０に出力し、ディスプレイ装置６０に多画面表示を行わせる（ステップＳ４）。この後、本処理を終了する。

図３はカメラ装置から配信される映像データの配信フレームレートを変更する配信フレームレート変更処理手順を示すフローチャートである。この処理プログラムは、クライアントＰＣ４０内の記憶媒体に格納され、クライアントＰＣ４０内のＣＰＵによって所定周期（例えば、１ｓｅｃ）毎に繰り返し実行される。

まず、クライアントＰＣ４０は、カメラ管理部５３により、ディスプレイ装置６０に多画面で表示された各チャンネルに対応するカメラ装置の制御状態を監視する（ステップＳ１１）。ここでは、カメラ管理部５３が操作部７０を介して操作されているカメラ装置を調べることにより、カメラ装置の制御状態が監視される。

各カメラ装置の制御状態を監視した結果、クライアントＰＣ４０は、カメラ制御が行われているか否か、つまり制御対象であるカメラ装置が存在するか否かを判別する（ステップＳ１２）。カメラ制御が行われている場合、クライアントＰＣ４０は、制御対象であるカメラ装置から配信される映像データのチャンネルの受信レートを上げ、その他のチャンネルの受信レートを下げるべく、対応する各カメラ装置２０、３０に対し、映像配信管理部４９により、映像データの配信フレームレートを変更するように指示する（ステップＳ１３）。この指示により、カメラ装置側では、制御対象であるカメラ装置に対して配信フレームレートを上げ、その他のカメラ装置に対しては配信フレームレートを下げる制御が行われる。この後、本処理を終了する。

一方、ステップＳ１２でカメラ制御が行われていない場合、クライアントＰＣ４０は、前回カメラ制御を行ってから一定間隔（例えば、１０秒）が経過したか否かを判別する（ステップＳ１４）。一定間隔が経過していない場合、そのまま本処理を終了する。一方、一定間隔が経過している場合、映像配信管理部４９により、各カメラ装置に対し、その配信フレームレートを元の初期値に戻すように指示する（ステップＳ１５）。この後、本処理を終了する。

なお、ステップＳ１１では、クライアントＰＣ４０内のＣＰＵが各チャンネルのカメラ装置に対してポーリング動作を行うことにより制御対象である（操作されている）カメラ装置の有無を判別してもよいし、あるいは制御対象であるカメラ装置から出力される割込み信号を受け付けることにより制御対象であるカメラ装置を特定するようにしてもよい。

図４はカメラ装置２０の映像配信動作手順を示すフローチャートである。この動作は所定のタイミング毎に繰り返し実行される。まず、カメラ装置２０は、映像入力部２１により、撮像を行ってその映像データを生成する（ステップＳ２１）。カメラ装置２０は、映像符号化部２３により、所定の符号化方式で映像データを符号化する（ステップＳ２２）。カメラ装置２０は、映像配信部２５により、ネットワーク１０を介して、符号化された映像データをクライアントＰＣ４０に配信する（ステップＳ２３）。この後、本動作を終了する。

図５はカメラ装置２０の操作・設定動作手順を示すフローチャートである。この動作は所定の周期毎に繰り返し実行される。まず、カメラ装置２０は、ネットワーク１０を介して、クライアントＰＣ４０からの指示を受信したか否かを判別する（ステップＳ３１）。クライアントＰＣ４０からの指示を受信した場合、カメラ装置２０は、その指示内容がパン・チルト操作等のカメラ制御であるか否かを判別する（ステップＳ３２）。カメラ制御である場合、カメラ装置２０は、その指示内容に従って、カメラ制御部２２によりパン・チルト等のカメラ制御を行う（ステップＳ３３）。この後、本動作を終了する。

一方、ステップＳ３２でカメラ制御でない場合、カメラ装置２０は、その指示内容を判別する（ステップＳ３４）。指示内容が配信フレームレートの変更である場合、カメラ装置２０は、映像配信制御部２６により、映像配信部２５で配信される映像データの配信フレームレートを変更する（ステップＳ３５）。この後、本動作を終了する。一方、ステップＳ３４で指示内容が画質の変更である場合、カメラ装置２０は、映像符号化制御部２４により、映像符号化部２３で符号化される映像データの圧縮率等の符号化効率を変更する（ステップＳ３６）。この後、本動作を終了する。なお、指示内容が画質の変更である場合、本実施形態では、画質を変更するために、圧縮率等の符号化効率を変更したが、これに限らず、カメラ装置の撮像部で撮影される画像の解像度を変更したり、ピントのぼかし具合を調節するようにしてもよい。

図６はディスプレイ装置６０に表示される監視映像画面を模式的に示す図である。前述したように、本実施形態のマルチ監視映像システムでは、１６台のカメラ装置が装備されている。１６画面に分割されたディスプレイ装置６０の各チャンネルの画面には、対応するカメラ装置から配信された映像データに基づく映像が表示されている。ここでは、カメラ装置２０が制御対象となっており、カメラ装置２０から配信された映像データに基づく映像を表示する分割画面６０ａでは、１６ｆｐｓのフレームレートで映像が更新されている。一方、その他の分割画面６０ｂでは、１ｆｐｓのフレームレートで映像が更新されている。なお、制御対象の分割画面６０ａはシステムの伝送容量や処理能力に応じて最大のフレームレートとし、その他の分割画面６０ｂは極端な場合は静止画（０ｆｐｓ）としてもよい。このような多画面表示により、操作者がディスプレイ装置２０を見ながらカメラ装置２０に対してパン・チルト等の操作を行う際、制御対象の映像である分割画面６０ａは被写体の輪郭や動きが鮮明に見えるため、カメラ制御時の操作性を高めることができる。

このように、第１の実施形態の映像監視システムでは、複数台のカメラ装置からの映像を複数同時に表示する多画面表示を行う際、制御対象であるカメラ装置から配信される映像データの受信レートを上げるとともに、他のカメラ装置から配信される映像データの受信レートを下げる。これにより、制御対象であるカメラ装置の映像を表示する分割画面のフレームレート（更新頻度）が他のカメラ装置のそれと比べて高くなり、制御時に必要な映像の品質を高くすることができる。したがって、システム全体の伝送容量や処理能力に制約がある場合でも、カメラ制御中の映像を明瞭に視認可能となり、カメラ装置に対してパン・チルト等の操作を行う際、その操作性を向上させることができる。

なお、本実施形態では、制御対象であるカメラの配信フレームレートを上げ、他のカメラの配信フレームレートを下げたが、通信の伝送容量に余裕がある場合、他のカメラの配信フレームレートを変更することなく、制御対象であるカメラの配信フレームレートだけを上げるようにしてもよい。

（第２の実施形態）
第２の実施形態では、カメラ装置で撮影され、符号化された映像データをクライアントＰＣで復号化する際、１フレーム当たりの変換速度である復号化（デコード）フレームレートを変更することに特徴がある。即ち、制御対象であるカメラ装置に対してデコードフレームレートを上げ、それ以外のカメラ装置に対してデコードフレームレートを下げることが行われる。このデコードフレームレートの制御は、例えばＪＰＥＧやＭＰＥＧ−４などの映像データを用いる場合に適用できる。

第２の実施形態のマルチ映像監視システムのハードウェア構成は前記第１の実施形態と同様である。ここでは、第２の実施形態に特徴的な動作を中心に説明する。

図７は第２の実施形態におけるデコードフレームレート変更処理手順を示すフローチャートである。この処理プログラムは、クライアントＰＣ４０内の記憶媒体に格納され、クライアントＰＣ４０内のＣＰＵによって所定周期（例えば、１ｓｅｃ）毎に繰り返し実行される。前記第１の実施形態と同一のステップ処理については同一のステップ番号を付すことによりその説明を省略する。

ステップＳ１２でカメラ制御が行われている場合、クライアントＰＣ４０は、制御対象であるカメラ装置から配信される映像データのチャンネルに対応するデコードフレームレートを上げ、その他のチャンネルのデコードフレームレートを下げるように、映像復号化管理部５０により、映像復号化制御部４２に指示する（ステップＳ１３Ａ）。映像復号化制御部４２は、この指示を受けると、制御対象であるカメラ装置に対応する映像復号化部のデコードフレームレートを上げ、それ以外のカメラ装置に対応する映像復号化部のデコードフレームレートを下げる。例えば、カメラ装置における符号化方式がＭＰＥＧ−４である場合、デコードフレームレートを変更する際、制御対象の特定の画面のみフルレートとし、他の画面を間引くようにする。また、映像データが全てキーフレーム（Ｉフレーム）で構成されている場合は、制御対象の特定の画面のみそのままとし、他の画面はキーフレームを間引くようにする。

また、ステップＳ１４で一定間隔が経過している場合、クライアントＰＣ４０は、映像復号化管理部５０により、全ての映像復号化部のデコードフレームレートを元の初期値に戻すように、映像復号化制御部４２に指示する（ステップＳ１５Ａ）。映像復号化制御部４２は、この指示を受けると、全ての映像復号化部のデコードフレームレートを元の初期値に戻す。

このように、第２の実施形態の映像監視システムでは、前記第１の実施形態と同様、制御対象であるカメラ装置の映像を表示する分割画面のフレームレートが他のカメラ装置のそれと比べて高くなり、カメラ制御時に視認するために必要な映像の品質を高くすることができる。したがって、カメラ装置に対してパン・チルト等の操作を行う際の操作性を向上させることができる。また、クライアントＰＣ内で全ての処理が行えるので、ネットワークを介したカメラ装置との通信が不要となり、容易に実現可能である。また、ネットワークの負荷も軽減でき、マルチキャストのような１対多通信の場合に有効である。

なお、本実施形態では、制御対象であるカメラのデコードフレームレートを上げ、他のカメラのデコードフレームレートを下げたが、クライアントＰＣの処理能力に余裕がある場合、他のカメラのデコードフレームレートを変更することなく、制御対象であるカメラのデコードフレームレートだけを上げるようにしてもよい。

（第３の実施形態）
第３の実施形態では、制御対象であるカメラ装置の映像を表示する分割画面のフレームレートを変更する際、描画フレームレートを制御することに特徴を有する。また、前述したように、描画フレームレートを変更する制御として、復号映像メモリに記憶される映像データの単位時間当たりの更新枚数を変更する制御、復号映像メモリから読み出される映像データの単位時間当たりの読み出し枚数を変更する制御、あるいは復号映像メモリに格納された映像データの表示領域を変更する制御が行われる。この描画フレームレートの制御は、例えばＪＰＥＧやＭＰＥＧ−４などの映像データを用いる場合に適用できる。

第３の実施形態のマルチ映像監視システムのハードウェア構成は前記第１の実施形態と同様である。ここでは、第３の実施形態に特徴的な動作を中心に説明する。

図８は第３の実施形態における描画フレームレート変更処理手順を示すフローチャートである。この処理プログラムは、クライアントＰＣ内の記憶媒体に格納され、クライアントＰＣ内のＣＰＵによって所定周期（例えば、１ｓｅｃ）毎に繰り返し実行される。前記第１の実施形態と同一のステップ処理については同一のステップ番号を付すことによりその説明を省略する。

ステップＳ１２でカメラ制御が行われている場合、クライアントＰＣ４０は、制御対象であるカメラ装置から配信される映像データのチャンネルに対応する描画フレームレートを上げ、その他のチャンネルの描画フレームレートを下げるように、映像表示管理部５２により、映像表示制御部５１に指示する（ステップＳ１３Ｂ）。映像表示制御部５１は、この指示を受けると、制御対象であるカメラ装置に対応する復号映像メモリの描画フレームレートを上げ、それ以外のカメラ装置に対応する復号映像メモリの描画フレームレートを下げる。即ち、映像表示制御部５１により、復号映像メモリに記憶される映像データの単位時間当たりの更新枚数を変更する制御、復号映像メモリから読み出される映像データの単位時間当たりの読み出し枚数を変更する制御、あるいは復号映像メモリに格納された映像データの表示領域を変更する制御が行われる。

また、ステップＳ１４で一定間隔が経過している場合、クライアントＰＣ４０は、映像表示管理部５２により、全ての復号映像メモリに対する描画フレームレートを元の初期値に戻すように、映像表示制御部５１に指示する（ステップＳ１５Ｂ）。映像表示制御部５１は、この指示を受けると、全ての復号映像メモリに対する描画フレームレートを元の初期値に戻す。

このように、第３の実施形態の映像監視システムにおいても、前記第２の実施形態と同様の効果が得られる。なお、本実施形態では、制御対象であるカメラの描画フレームレートを上げ、他のカメラの描画フレームレートを下げたが、クライアントＰＣの処理能力に余裕がある場合、他のカメラの描画フレームレートを変更することなく、制御対象であるカメラの描画フレームレートだけを上げるようにしてもよい。

なお、本発明は上記の実施形態において示されたものに限定されるものではなく、明細書の記載、並びに周知の技術に基づいて、当業者が変更、応用することも本発明の予定するところであり、保護を求める範囲に含まれる。

例えば、上記各実施形態で示した、配信フレームレート、デコードフレームレート、描画フレームレート、画質（圧縮率等の符号化効率、画像の解像度、ピント）などに関して、任意に組み合わせて実施してもよく、適宜組み合わせることによってより一層の操作性の向上が期待される。

また、同時に複数台のカメラ装置が操作され、制御対象であるカメラ装置が複数台となる場合にも適用可能である。この場合、複数台のカメラ装置に対し、同様に、前述した配信フレームレート、デコードフレームレート、描画フレームレート、画質などを変更することで、対応することが可能である。但し、この場合は１台のカメラ装置の場合と比べて、その変更度合いが小さくなる。

上述したように、本実施形態によれば、複数のカメラ等で撮影された映像を一画面内に複数画面で表示する多画面表示を行う際、制御対象であるカメラに対応する画面の更新頻度を他のカメラのそれと比べて高くすることができ、カメラ制御時の操作性を向上できる。また、制御対象となっているときのカメラで撮影された映像が表示される画面の更新頻度を、制御対象ではないときの画面の更新頻度よりも高くすることができ、カメラ制御時の操作性を向上できる。したがって、複数の映像を用いて多画面表示する場合に、制御対象となっているカメラ等の撮像部に対応する映像の品質を他と比べて高くすることが可能となり、操作性を向上させることができる。

本発明は、複数の映像を一画面内に複数画面で表示する場合、撮影画角などを制御する制御対象となる撮像部の映像入力部に対応する映像の品質を他と比べて高くすることができ、撮像部制御時の操作性を向上することが可能となる効果を有し、複数のカメラ等の映像入力部で得られた映像を画面に表示するマルチ映像監視システム等に適用される映像表示装置及び映像表示方法等に有用である。

本発明の第１の実施形態におけるマルチ映像監視システムの構成を示す図 本実施形態のマルチ映像監視システムにおける映像表示動作手順を示すフローチャート 第１の実施形態における配信フレームレート変更処理手順を示すフローチャート 本実施形態におけるカメラ装置の映像配信動作手順を示すフローチャート 本実施形態におけるカメラ装置の操作・設定動作手順を示すフローチャート 本実施形態におけるディスプレイ装置に表示される監視映像画面を模式的に示す図 第２の実施形態におけるデコードフレームレート変更処理手順を示すフローチャート 第３の実施形態における描画フレームレート変更処理手順を示すフローチャート

符号の説明

１０ ネットワーク
２０、３０ カメラ
２１ 映像入力部
２２ カメラ制御部
２３ 映像符号化部
２４ 映像符号化制御部
２５ 映像配信部
２６ 映像配信制御部
４０ クライアントＰＣ
４１ 映像受信部
４２ 映像復号化制御部
４３、４４ 映像復号化部
４５、４６ 復号映像メモリ
４７ 映像合成表示部
５１ 映像表示制御部
６０ ディスプレイ装置
７０ 操作部

Claims (11)

1. 複数の映像入力部で得られた映像を画面に表示する映像表示装置であって、
   少なくとも一つの映像部を含む複数の映像入力部で得られた複数の映像を、一画面内に複数画面で表示する画面表示部と、
   前記複数の映像入力部のうち、撮像部がパンまたはチルト動作をしている場合、前記画面表示部においてパンまたはチルト動作をしている撮像部で撮影された映像が表示される画面の更新頻度を、他の映像入力部からの映像が表示される画面の更新頻度に比べて高くする表示映像品質制御部と、
   を備える映像表示装置。
2. 請求項１記載の映像表示装置であって、
   前記複数の映像入力部の中から、撮像部がパンまたはチルト動作をしているか否かを判別する制御対象判別部と、
   前記撮像部がパンまたはチルト動作をしなくなってから所定時間が経過したかを判別する制御時間判別部とを備え、
   前記表示映像品質制御部は、前記所定時間が経過した場合、前記画面表示部においてパンまたはチルト動作をしなくなった撮像部に対応する画面の更新頻度を元の更新頻度に戻す映像表示装置。
3. 請求項１または２に記載の映像表示装置であって、
   前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部から配信される映像データの配信フレームレートを上げ、前記他の映像入力部から配信される映像データの配信フレームレートを下げるようにする映像表示装置。
4. 請求項１または２に記載の映像表示装置であって、
   前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部で符号化された映像データを復号化する際の複合化フレームレートを上げ、前記他の映像入力部で映像データを復号化する際の複合化フレームレートを下げるようにする映像表示装置。
5. 請求項１または２に記載の映像表示装置であって、
   前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部からの映像データを用いて描画する際の描画フレームレートを上げ、前記他の映像入力部からの映像データを用いて描画する際の描画フレームレートを下げるようにする映像表示装置。
6. 請求項１または２に記載の映像表示装置であって、
   前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部で撮像された映像が表示される画面の更新頻度を高くするとともに、パンまたはチルト動作をしている撮像部から配信される映像データの画質を前記他の映像入力部から配信される映像データの画質に比べて高くする映像表示装置。
7. 請求項１、２または６のいずれかに記載の映像表示装置であって、
   前記表示映像品質制御部は、パンまたはチルト動作をしている撮像部から配信される映像データの配信フレームレート、前記映像データを復号化する際の復号化フレートレート、及び前記映像データを用いて描画する際の描画フレームレートのうちの少なくとも２つを用いて、前記更新頻度を変更する映像表示装置。
8. 撮像部で撮影される映像を画面に表示する映像表示装置であって、
   前記撮影部で得られた映像を表示する画面表示部と、
   前記撮影部がパンまたはチルト動作をしているか否かを判別する制御対象判別部と、
   前記撮像部がパンまたはチルト動作をしている場合、前記画面表示部において撮像部で撮影された映像が表示される画面の更新頻度をパンまたはチルト動作をしていない場合の前記画面の更新頻度に比べて高くする表示映像品質制御部と、
   を備える映像表示装置。
9. 複数の映像入力部で得られた映像を画面に表示する際の映像表示方法であって、
   少なくとも一つの撮像部を含む複数の映像入力部で得られた複数の映像を、画面表示部において一画面内に複数画面で表示する画面表示ステップと、
   前記複数の映像入力部の中から、パンまたはチルト動作をしている撮像部があるか否かを判別する制御対象判別ステップと、
   前記複数の映像入力部のうち、パンまたはチルト動作をしている撮像部がある場合、前記画面表示部においてパンまたはチルト動作をしている撮像部で撮影された映像が表示される画面の更新頻度を、他の映像入力部からの映像が表示される画像の更新頻度に比べて高くする表示映像品質制御ステップと、
   を有する映像表示方法。
10. 少なくとも一つの撮像部を含む複数の映像入力部と接続され、前記複数の映像入力部で得られた映像データを用いて表示装置に映像を表示させる情報処理装置であって、
    前記撮像部を含む複数の映像入力部で得られた複数の映像を、前記表示装置において一画面内に複数画面で表示する画面表示部と、
    前記複数の映像入力部の中から、パンまたはチルト動作をしている撮像部があるか否かを判別する制御対象判別部と、
    前記複数の映像入力部のうち、パンまたはチルト動作をしている撮像部がある場合、前記表示装置においてパンまたはチルト動作をしている撮像部で撮影された映像が表示される画面の更新頻度を、他の映像入力部からの映像が表示される画面の更新頻度に比べて高くする表示映像品質制御部と、
    を備える情報処理装置。
11. コンピュータを、請求項１〜８のいずれかに記載の映像表示装置の各手段として機能させるためのプログラム。

Images