JP6049910B2 - 映像処理装置及び映像表示装置 - Google Patents

Description

本発明は、複数の映像データに基づく複数個の映像を１つの画面に表示させる映像信号を生成する映像処理装置及びこの映像処理装置を含む映像表示装置に関するものである。

一般に、監視システムは、Ｍｏｔｉｏｎ ＪＰＥＧ（Ｍｏｔｉｏｎ Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ：ＭＪＰＥＧ）形式又はＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）形式などの圧縮形式で圧縮映像データを生成する監視カメラと、監視カメラで生成された圧縮映像データを記録及び再生する監視レコーダと、映像信号に基づく映像を表示する映像表示部とを備えている。また、一般に、監視レコーダは、記録されている複数の圧縮映像データを同時にデコードし、デコードされた複数の映像データに基づく複数個（例えば、４個、９個、又は１６個）の映像からなる合成映像を映像表示部の画面に表示させる機能を備えている。１つの画面に複数個の映像を並べて表示するために利用できる技術が、例えば、特許文献１及び２に説明されている。

また、監視レコーダは、圧縮形式の異なる複数種類の映像データを記録するだけでなく、ＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｙｓｔｅｍ Ｃｏｍｍｉｔｔｅｅ）方式の映像データとハイビジョン（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）方式の映像データのように解像度の異なるカメラで生成された解像度の異なる複数種類の映像データを記録する場合がある。

特開２００１−２８５７１４号公報（段落００３１〜０１１３、図１〜図１１） 特開２０００−３０５５４３号公報

一般に、解像度の異なる複数種類の映像データを同時に再生する処理、又は、圧縮形式の異なる複数種類の映像データを同時にデコードする処理を、１個のＩＣ（集積回路）素子で実現することは困難であるため、これらの処理は複数個のＩＣ素子で分担して実現されることが多い。例えば、第１のＩＣ素子がＭＰＥＧ方式で圧縮された複数の圧縮映像データを伸張及び再生し、第２のＩＣ素子がＭＪＰＥＧ方式で圧縮された複数の圧縮映像データを伸張及び再生する。

しかしながら、従来の監視システムにおいて、圧縮形式の異なる複数種類の映像データに基づく複数個の映像を１つの画面に表示させながら、複数個の映像の１つを徐々に拡大する場合には、拡大される映像の位置を拡大倍率に応じた好適な位置に自動的に移動させることが難しいという問題がある。これは、複数種類の映像データの映像処理を複数個のＩＣ素子で分担して行う従来のシステムにおいて、複数個のＩＣ素子の内の一方のＩＣ素子のデコードによって生成された映像データに基づく映像の位置を、他方のＩＣ素子が把握していないからである。

そこで、本発明は、上記従来技術の課題を解決するためになされたものであり、複数の映像データに基づく複数個の映像（分割領域映像）を１つの画面に表示させながら複数個の映像のいずれかを拡大する場合に、拡大される映像の位置を拡大倍率に応じた好適な位置に自動的に移動させることができる映像処理装置及び映像表示装置を提供することを目的とする。

本発明の一態様に係る映像処理装置は、複数の第１の映像データから、第１の映像信号を生成する第１の映像信号生成部と、複数の第２の映像データ及び前記第１の映像信号から、表示用映像信号を生成する第２の映像信号生成部と、前記第１の映像信号生成部及び前記第２の映像信号生成部の動作を制御する制御部とを有し、前記第１の映像信号生成部は、前記複数の第１の映像データのそれぞれに対する縮小又は拡大処理としての第１の変倍処理を施すための複数の第１の変倍処理部と、前記複数の第１の変倍処理部が行う前記第１の変倍処理の変倍率を含む変倍情報を送信する変倍情報送信部と、前記複数の第１の変倍処理部によって処理された前記複数の第１の映像データから前記第１の映像信号を生成する第１の映像加工処理部とを含み、前記第２の映像信号生成部は、前記変倍情報送信部から送信された前記変倍情報を受信する変倍情報受信部と、前記変倍情報受信部が受信した前記変倍情報に応じた複数の映像加工情報を予め記憶する映像加工情報記憶部と、前記複数の第２の映像データのそれぞれに対する縮小又は拡大処理としての第２の変倍処理を施すための複数の第２の変倍処理部と、前記複数の第２の変倍処理部によって処理された前記複数の第２の映像データに、前記映像加工情報記憶部が記憶する前記複数の映像加工情報の内の前記変倍情報受信部が受信した前記変倍情報に対応する映像加工情報を用いて、前記複数の第２の変倍処理部によって処理された前記複数の第２の映像データに加工処理を施して、第２の映像信号を生成する第２の映像加工処理部と、前記第１の映像信号と前記第２の映像信号とから前記表示用映像信号を生成する映像合成部とを含み、前記複数の第１の変倍処理部が行う前記第１の変倍処理は、前記複数の第１の映像データから選択された第１の映像データの拡大処理を含み、前記変倍情報送信部が送信する前記変倍情報は、前記選択された第１の映像データを特定する特定情報と、前記選択された第１の映像データの拡大処理の拡大倍率を示す拡大情報とを含むことを特徴とする。

本発明によれば、複数の映像データに基づく複数個の分割領域映像を１つの画面に表示させながら複数個の分割領域映像のいずれかを拡大する場合であっても、拡大される分割領域映像の位置を拡大倍率に応じた好適な位置に自動的に移動させることができる。

本発明の実施の形態１に係る映像処理装置及び映像表示装置の構成を概略的に示すブロック図である。 実施の形態１に係る映像処理装置の第１の映像生成部が生成する１６個の第１の分割領域映像からなる映像が表示されている画面を示す図である。 実施の形態１に係る映像処理装置の第１の映像生成部が生成する映像の上に、第２の映像生成部が生成する４個の第２の分割領域映像が重ねて表示されている画面を示す図である。 （ａ）から（ｃ）は、実施の形態１に係る映像処理装置の第１の映像生成部の変倍情報送信部の動作を示すタイミング図である。 実施の形態１に係る映像処理装置の第２の映像生成部が生成する４個の第２の分割領域映像が表示されている画面を示す図である。 （ａ）から（ｄ）は、実施の形態１に係る映像処理装置の第１の映像生成部の変倍情報送信部の動作を示すタイミング図である。 （ａ）から（ｄ）は、実施の形態１に係る映像処理装置が第１の分割領域映像の１つを拡大する場合における拡大対象の映像の大きさと位置を示す図である。 実施の形態１に係る映像処理装置が第１の分割領域映像の１つを拡大する場合における拡大対象の映像の拡大方向と移動方向を示す図である。 実施の形態１に係る映像処理装置が映像を表示する画面における座標を示す図である。 実施の形態１に係る映像処理装置の第１の映像加工情報記憶部が記憶する拡大情報と第１の分割領域映像の中心位置の座標との対応関係の一部を表形式（対応テーブル）で示す図である。 （ａ）及び（ｂ）は、実施の形態１に係る映像処理装置の映像合成部の動作を示す図である。 （ａ）及び（ｂ）は、実施の形態１に係る映像処理装置の第２の映像生成部で加工された映像を示す図である。 実施の形態１に係る映像処理装置の第２の映像生成部が生成する第２の分割領域映像の配列を示す図である。 実施の形態１に係る映像処理装置の第２の映像加工情報記憶部が記憶する拡大情報と第２の分割領域映像の中心位置と削除領域との対応関係の一部を表形式（対応テーブル）で示す図である。 本発明の実施の形態２に係る映像処理装置及び映像表示装置の構成を概略的に示すブロック図である。 本発明の実施の形態３に係る映像処理装置及び映像表示装置の構成を概略的に示すブロック図である。 実施の形態３に係る映像処理装置の第２の分割領域映像の並び替えを示す図である。

《１》実施の形態１．
《１−１》実施の形態１の構成．
図１は、本発明の実施の形態１に係る映像処理装置１及び映像表示装置１ａの構成を概略的に示すブロック図である。映像表示装置１ａは、映像処理装置１と、映像処理装置１から出力される表示用映像信号Ｉ３に基づく映像を表示する映像表示部としてのモニタ６０とを有する。映像処理装置１には、映像データが格納されるハードディスクドライブなどのような情報記憶部である映像データ記憶部５０が接続されている。映像データ記憶部５０に格納されている映像データは、例えば、複数の監視カメラによって撮影された圧縮映像データである。圧縮映像データは、例えば、ＭＰＥＧ映像データ及びＭＪＰＥＧ映像データを含む。映像処理装置１は、映像データ記憶部５０を、映像処理装置１の一部として内蔵してもよい。また、映像処理装置１には、ユーザ指示を入力するための入力操作部３０が接続される。入力操作部３０は、例えば、マウス、キーボード、タッチパネル、リモコン装置、又は映像処理装置１の本体に備えられた操作部などである。

図１に示されるように、映像処理装置１は、映像データ記憶部５０に記憶されている複数の第１の映像データとしての複数のＭＰＥＧ映像データから、第１の映像信号Ｉ１を生成する第１の映像信号生成部１０を有する。また、映像処理装置１は、映像データ記憶部５０に記憶されている複数の第２の映像データとしての複数のＭＪＰＥＧ映像データ及び第１の映像信号Ｉ１から、表示用映像信号Ｉ３を生成する第２の映像信号生成部２０を有する。さらに、映像処理装置１は、第１の映像信号生成部１０及び第２の映像信号生成部２０の動作を制御する制御部（表示制御部）４０を有する。第１の映像信号生成部１０と第２の映像信号生成部２０とは、例えば、互いに異なる種類の映像データを処理するように構成されている。第１の映像信号生成部１０と第２の映像信号生成部２０とはそれぞれ、別個のＩＣ素子によって構成することができる。なお、第１の映像信号生成部１０及び第２の映像信号生成部２０が扱う映像データの種類は、ＭＰＥＧ映像データ及びＭＪＰＥＧ映像データに限定されない。

第１の映像信号生成部１０は、映像データ記憶部５０から読み出された複数のＭＰＥＧ映像データのそれぞれをデコードするための複数のＭＰＥＧデコーダ１０１〜１１６と、デコードされた複数の映像データ（第１の映像データ）のそれぞれに対する縮小及び拡大処理である変倍処理を施すための複数の第１の変倍処理部１２１〜１３６とを有する。また、第１の映像信号生成部１０は、複数の第１の変倍処理部１２１〜１３６が行ういずれかの変倍処理の変倍率（例えば、拡大処理の拡大倍率）を含む変倍情報を送信する変倍情報送信部１４２と、複数の第１の変倍処理部１２１〜１３６によって処理された複数の映像データから第１の映像信号Ｉ１を生成する第１の映像加工処理部１４１とを有する。また、第１の映像信号生成部１０は、第１の映像加工処理部１４１が使用する第１の映像加工情報を予め記憶する第１の映像加工情報記憶部１４３を備えてもよい。変倍情報送信部１４２による変倍情報の送信は、第１の映像信号Ｉ１に含まれる垂直同期信号に同期したタイミングで行われることが望ましい。第１の映像信号Ｉ１は、例えば、複数の第１の変倍処理部１２１〜１３６が行う縮小処理によって生成された複数個の映像（以下「分割領域映像」又は「第１の分割領域映像」とも言う。）を複数行又は複数列又は複数行複数列（マトリクス状）に配列して１つの画面６１に表示させる映像信号である。また、変倍情報送信部１４２が送信する変倍情報は、例えば、制御部４０からの制御信号によって選択された分割領域映像を特定する情報と、この分割領域映像の最初のサイズを基準とする拡大倍率とを含む情報である。複数個の第１の分割領域映像の内から、１又は複数の第１の分割領域映像を選択することを指示するための制御部４０からの制御信号は、例えば、入力操作部３０から入力されたユーザ指示にしたがって、又は、制御部４０が予め保持する情報若しくはプログラムにしたがって、生成される。なお、第１の映像信号生成部１０が非圧縮形式で記録されている映像データを処理する構成である場合には、第１の映像信号生成部１０は、複数のＭＰＥＧデコーダ１０１〜１１６を備える必要はない。また、図１には、複数のＭＰＥＧデコーダ１０１〜１１６の数が１６台であり、複数の第１の変倍処理部１２１〜１３６の数が１６台である場合を例示したが、これらの数は１６台に限定されず、２台、４台、９台、２５台、３６台、またはそれ以外でもよい。

第２の映像信号生成部２０は、変倍情報送信部１４２から送信された変倍情報を受信する変倍情報受信部２２２と、受信した変倍情報に応じた複数の第２の映像加工情報を予め記憶する第２の映像加工情報記憶部２２３とを有する。また、第２の映像信号生成部２０は、映像データ記憶部５０から読み出された複数のＭＪＰＥＧ映像データのそれぞれをデコードするための複数のＭＪＰＥＧデコーダ２０１〜２０４と、デコードされた複数の映像データ（第２の映像データ）のそれぞれに対する縮小及び拡大処理である変倍処理を施すための複数の第２の変倍処理部２１１〜２１４とを有する。また、第２の映像信号生成部２０は、複数の第２の変倍処理部２１１〜２１４によって処理された複数の第２の映像データに、第２の映像加工情報記憶部２２３が記憶する複数の映像加工情報の内の変倍情報受信部２２２が受信した変倍情報に対応する映像加工情報を用いて、複数の第２の変倍処理部２１１〜２１４によって処理された複数の映像データに加工処理を施して、第２の映像信号Ｉ２を生成する第２の映像加工処理部２２１を有する。さらに、第２の映像信号生成部２０は、第１の映像信号Ｉ１を一時記憶するバッファメモリ２３１と、バッファメモリ２３１から読み出された第１の映像信号Ｉ１と第２の映像信号Ｉ２とから表示用映像信号を生成する映像合成部２３２とを有する。第２の映像信号Ｉ２は、例えば、複数の第２の変倍処理部２１１〜２１４が行う縮小処理によって生成された複数個の映像（以下「分割領域映像」又は「第２の分割領域映像」とも言う。）を複数行又は複数列又は複数行複数列（マトリクス状）に配列して１つの画面６１に表示させる映像信号である。なお、第２の映像信号生成部２０が非圧縮形式で記録されている映像データを処理する構成である場合には、第２の映像信号生成部２０は、複数のＭＪＰＥＧデコーダ２０１〜２０４を備える必要はない。また、図１には、複数のＭＪＰＥＧデコーダ２０１〜２０４の数が４台であり、複数の第２の変倍処理部２１１〜２１４の数が４台である場合を例示したが、これらの数は４台に限定されず、２台、４台、９台、２５台、３６台、またはそれ以外でもよい。

実施の形態１では、モニタ６０の画面６１に、ユーザがＭＰＥＧ形式の圧縮映像データに基づく１６個の第１の分割領域映像を並べて表示し、さらに、ＭＪＰＥＧ形式の圧縮映像データに基づく４個の第２の分割領域映像を第１の分割領域映像のいずれかの上に上書き表示される（すなわち、第２の分割領域映像が表示される領域内においては第１の分割領域映像は表示されず第２の分割領域映像のみが表示される）ように指示した例を説明する。例えば、制御部４０は、入力操作部３０から入力されたユーザ指示にしたがって、第１の映像信号生成部１０が１６個の第１の分割領域映像を生成し、第２の映像信号生成部２０が４個の第２の分割領域映像を生成し、４個の第２の分割領域映像が第１の映像信号生成部１０で生成した１６個の第１の分割領域映像の内の４つの分割領域映像の上に上書き表示するように、第１の映像信号生成部１０及び第２の映像信号生成部２０を制御する。

図２は、第１の映像信号生成部１０から供給される第１の映像信号Ｉ１に基づいて１つの画面６１に表示される１６個の第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４を示す図である。図２においては、第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４が、４行４列に並んで表示される場合を示しているが、第１の分割領域映像の数及び配列は、図２の例に限定されない。第１の分割領域映像の配列は、例えば、２行２列、３行３列、３行４列、４行５列などのような他の配列であってもよい。

図３は、第１の映像信号生成部１０から供給される第１の映像信号Ｉ１に基づく１２個の第１の分割領域映像Ａ１３，Ａ１４，Ａ２３，Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４と第２の映像信号生成部２０から供給される第２の映像信号Ｉ２に基づく４個の第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１，Ｂ２２とが複数行複数列に並んで表示されている画面６１を示す図である。図３においては、図２に示される１６個の第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４の内の第１の分割領域映像Ａ１１，Ａ１２，Ａ２１，Ａ２２の部分が、第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１，Ｂ２２で上書き表示された（すなわち、置き換えられた）映像を画面６１に表示した例である。なお、第１の分割領域映像Ａ１１，Ａ１２，Ａ２１，Ａ２２は、第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１，Ｂ２２によって上書き表示されている間は、画面６１に表示されない。

また、実施の形態１においては、画面６１が、フルハイビジョンサイズ（Ｆｕｌｌ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｓｉｚｅ）、すなわち、横方向（水平走査方向）に１９２０ドット、縦方向（垂直走査方向）に１０８０ドットの画素で映像を表示する場合を説明する。したがって、１つの画面６１に同じサイズの１６個の分割領域映像を４行４列に表示する場合には、各分割領域映像が表示される１つの領域のサイズは、横４８０ドット×縦２７０ドットである。

《１−２》実施の形態１の動作．
次に、第１の映像信号生成部１０及び第２の映像信号生成部２０の動作を説明する。制御部４０は、入力操作部３０で入力されたユーザ操作に基づいて、第１の映像信号生成部１０及び第２の映像信号生成部２０の各々に制御信号を送り、第１の映像信号生成部１０及び第２の映像信号生成部２０の各々に映像データ記憶部５０から圧縮映像データを読み出しモニタ６０に表示させるための動作を実行させる。

第１の映像信号生成部１０は、制御部４０から受け取った制御信号にしたがって、映像データ記憶部５０から複数の第１の映像データとして複数のＭＰＥＧ形式の圧縮映像データを読み出す。複数のＭＰＥＧデコーダ１０１〜１１６は、映像データ記憶部５０に記憶されている複数のＭＰＥＧ形式の圧縮映像データの各々を伸張して１６個の映像データを生成する。

複数のＭＰＥＧデコーダ１０１〜１１６で生成される複数の映像データはそれぞれ、複数の第１の変倍処理部１２１〜１３６に入力される。複数の第１の変倍処理部１２１〜１３６は、複数のＭＰＥＧデコーダ１０１〜１１６が生成した映像データを縮小又は拡大処理し、図２に示されるような、１６個の分割領域映像（第１の分割領域映像）Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４を生成する。なお、映像データ記憶部５０に記憶されている圧縮映像データが、例えば、横１９２０ドット×縦１０８０ドットのフルハイビジョンサイズの解像度で撮影された映像をもとに生成されている場合には、複数のＭＰＥＧデコーダ１０１〜１１６で生成される映像のサイズはフルハイビジョンサイズである。

一方、第１の映像信号生成部１０が出力する映像信号のサイズがフルハイビジョンサイズの場合、分割領域映像のサイズ（例えば、図２における分割領域映像Ａ１１のサイズ）は、横１９２０ドット×縦１０８０ドットの面積の１／１６の面積であり、横４８０ドット×縦２７０ドットである。したがって、複数の第１の変倍処理部１２１〜１３６では、通常は、最初の変倍処理として縮小処理が行われる。ただし、複数の第１の変倍処理部１２１〜１３６で、最初に行う拡大処理は、入力される映像データのサイズ、画面６１のサイズ、分割領域映像のサイズなどに応じて決定されるので、拡大処理又は等倍処理の場合もある。また、このときの拡大倍率、すなわち、縮小倍率又は拡大倍率は、通常は、複数の映像データの各々について同じ値であるが、複数の映像データの各々について異なる値とすることも可能である。

複数の第１の変倍処理部１２１〜１３６で変倍処理、すなわち、縮小又は拡大処理された第１の分割領域映像は、第１の映像加工処理部１４１に入力される。また、複数の第１の変倍処理部１２１〜１３６で生成した第１の分割領域映像のサイズである基準サイズに対してどの程度変倍したかを示す変倍情報を、第１の映像加工処理部１４１及び変倍情報送信部１４２に供給する。この基準サイズとは、例えば、１６個（４行４列）の分割領域に合致した映像サイズである横４８０ドット×縦２７０ドットである。

実施の形態１における変倍情報（拡大情報）は、例えば、水平方向１６ドット及び垂直方向９ドットを１単位とする情報である。基準サイズである横４８０ドット×縦２７０ドットから、１単位拡大した場合には、映像サイズは、横４９６×縦２７９ドットである。このときの、拡大情報が示す値は“１”単位である。また、例えば、基準サイズである横４８０ドット×縦２７０ドットから“１０”単位拡大した場合には、映像サイズは、横６４０ドット×縦３６０ドットである。このときの、拡大情報が示す値は“１０”単位である。

Ｎ_１ＥＨを拡大された第１の分割領域映像の水平ドット数（拡大水平サイズ）とし、
Ｎ_１ＥＶを拡大された第１の分割領域映像の垂直ドット数（拡大垂直サイズ）とし、
Ｎ_１ＳＨを拡大前の第１の分割領域映像の水平ドット数（基準水平サイズ）とし、
Ｎ_１ＳＶを拡大前の第１の分割領域映像の垂直ドット数（基準垂直サイズ）とし、
Ｍ_１を拡大情報が示す値（Ｍ_１は、０以上９０以下の整数）とすると、
拡大情報が示す値と拡大された第１の分割領域映像のサイズとの関係は、以下の式１及び２のようになる。
Ｎ_１ＥＨ＝Ｎ_１ＳＨ＋１６×Ｍ_１ 式１
Ｎ_１ＥＶ＝Ｎ_１ＳＶ＋９×Ｍ_１ 式２
なお、実施の形態１においては、第１の分割領域映像の最大サイズはフルハイビジョンサイズであるので、拡大情報が示す値の範囲は、０以上９０以下の整数である。

複数の第１の変倍処理部１２１〜１３６で生成される複数の第１の分割領域映像と拡大情報が示す値（０以上９０以下の整数）が入力された第１の映像加工処理部１４１では、入力された複数の第１の分割領域映像を１つの画面６１上において並び替えて合成映像を生成し、これを第１の映像信号Ｉ１として出力する。このとき、拡大情報が示す値がすべて“０”の場合は、すべての第１の分割領域映像が基準サイズであるため、１６個の第１の分割領域映像を、図２のように１つの画面６１内に並べることが可能である。また、第１の映像加工処理部１４１は、各第１の分割領域映像の拡大情報が示す値（０以上９０以下の整数）と中心位置の座標の関係を示す第１の映像加工情報を記憶した第１の映像加工情報記憶部１４３の情報を元に分割領域映像の生成を行う。

以下の説明では、例えば、複数の第１の変倍処理部１２１〜１３６から出力された第１の分割領域映像を、図２の第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４とする。なお、複数の第１の変倍処理部１２１〜１３６の出力を、図２の第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４の配置とは異なる配置とすることも可能である。

変倍情報送信部１４２は、複数の第１の変倍処理部１２１〜１３６で生成される拡大情報を受け取り、変倍情報（拡大情報）とそれに対応する拡大対象の第１の分割領域映像の特定情報、又は、拡大対象の第１の分割領域映像の位置情報（図２の第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４の情報）を垂直同期信号とクロック信号に同期して送信する。なお、拡大情報が示す値（実施の形態１においては、０以上９０以下の整数）が“０”以外となっている第１の分割領域映像は、１６個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４の内の１つである場合を説明するが、これは１つに限定されない。

図４（ａ）から（ｃ）は、実施の形態１に係る映像処理装置１の第１の映像信号生成部１０の変倍情報送信部１４２の動作を示すタイミング図である。図４（ｃ）において、垂直同期信号３０１は、アクティブ時にローレベル（Ｌ）である。変倍情報送信部１４２は、図４（ｂ）のクロック信号３０２を生成し、図４（ａ）のデータ３０３を送信する。

図４（ａ）のデータ３０３は、例えば、４ビットで構成され、クロック信号３０２の立下りでデータを変化させ、３回に分けてデータを送信する。最初に送信する４ビット（データ３１０）のデータで、拡大対象の第１の分割領域映像の位置を示す情報を送信し、２回目に送信する４ビット（データ３１１）のデータで、拡大情報が示す値（０以上９０以下の整数）の下位４ビットを送信し、３回目の４ビット（データ３１２）で、拡大情報が示す値の上位４ビットを送信する。第１の分割領域映像の位置を示す情報は、図２における第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４を示す情報であり、それぞれ、「０ｘ０」〜「０ｘＦ」（１６進数表記）で割り付けることで、４ビットで表現することができる。なお、図４（ａ）の例では、拡大情報の下位４ビット（データ３１１）が「０ｘ５」で上位４ビット（データ３１２）が「０ｘ０」であるので、分割領域映像Ａ２３の位置で、拡大情報が示す値（０以上９０以下の整数）は、「０ｘ０５」（１６進数表記）である。拡大情報が示す値については、０以上９０以下の整数であることから、８ビットで表現することができ、例えば、下位４ビット及び上位４ビットをこの順で送信することで、すべての拡大情報を送信することができる。

次に、図１における第２の映像信号生成部２０の動作について説明する。第２の映像信号生成部２０では、制御部４０からの制御信号にしたがって、映像データ記憶部５０からＭＪＰＥＧ形式の圧縮映像データを読み出す。複数のＭＪＰＥＧデコーダ２０１〜２０４で生成される映像データは、その映像データを変倍処理、すなわち、縮小又は拡大処理する複数の第２の変倍処理部２１１〜２１４に入力される。複数の第２の変倍処理部２１１〜２１４は、複数のＭＪＰＥＧデコーダ２０１〜２０４が生成した映像データを縮小又は拡大処理し、例えば、図３の網掛け領域内の４個の第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１，Ｂ２２のような、１６分割表示に合致するサイズの映像を生成する。なお、例えば、映像データ記憶部５０に記憶されている圧縮映像データが、横１９２０ドット×縦１０８０ドットの解像度を持つフルハイビジョンサイズで撮影された映像をもとに生成されている場合、複数のＭＪＰＥＧデコーダ２０１〜２０４で生成される映像のサイズはフルハイビジョンサイズである。

図３に示される１６個の分割領域映像のサイズ（例えば、図３における第２の分割領域映像Ｂ１１の映像サイズ）は、横１９２０ドット×縦１０８０ドットの面積の１／１６の面積であり、横４８０ドット×縦２７０ドットである。したがって、複数の第２の変倍処理部２１１〜２１４は、最初に縮小処理を行う。

複数の第２の変倍処理部２１１〜２１４で縮小又は拡大処理された分割領域映像は、第２の映像加工処理部２２１に入力され、また、複数の第２の変倍処理部２１１〜２１４で生成された第２の分割領域映像の最初のサイズである基準サイズに対してどの程度拡大されるかを示す変倍情報（拡大情報）を、第２の映像加工処理部２２１に送信する。

このときの基準サイズとは、例えば、１６個の分割領域映像を表示した場合における１個の分割領域映像のサイズである横４８０ドット×縦２７０ドットとし、この基準サイズからの変倍情報を、第２の映像加工処理部２２１に送信する。変倍情報（例えば、拡大情報）については、第１の映像加工処理部１４１の場合と同様であり、拡大情報と、拡大された映像サイズの関係は、例えば、以下のようになる。

Ｎ_２ＥＨを拡大された第２の分割領域映像の水平ドット数（拡大水平サイズ）とし、
Ｎ_２ＥＶを拡大された第２の分割領域映像の垂直ドット数（拡大垂直サイズ）とし、
Ｎ_２ＳＨを拡大前の第２の分割領域映像の水平ドット数（基準水平サイズ）とし、
Ｎ_２ＳＶを拡大前の第２の分割領域映像の垂直ドット数（基準垂直サイズ）とし、
Ｍ_２を変倍情報が示す値（Ｍ_２は、０以上９０以下の整数）とすると、変倍情報が示す値と拡大された第２の分割領域映像のサイズとの関係は、以下の式３及び式４のようになる。
Ｎ_２ＥＨ＝Ｎ_２ＳＨ＋１６×Ｍ_２ 式３
Ｎ_２ＥＶ＝Ｎ_２ＳＶ＋９×Ｍ_２ 式４
なお、実施の形態１においては、分割領域映像の最大サイズはフルハイビジョンサイズであるので、変倍情報が示す値の範囲は、０以上９０以下の整数である。

変倍情報受信部２２２は、第１の映像信号生成部１０の変倍情報送信部１４２から送信される拡大された分割領域映像の位置を示す情報及び変倍情報を受信する。図４（ｃ）に示される垂直同期信号３０１がハイになった後の、図４（ｂ）のクロック信号３０２の１回目の立ち上がりで、図４（ａ）に示される拡大された第１の分割領域映像の位置を示す情報（データ３１０）を取得し、２回目の立ち上がりで、拡大情報が示す値の下位４ビット（データ３１１）、３回目の立ち上がりで拡大情報が示す値の上位４ビット（データ３１２）を取得する。変倍情報受信部２２２は、この拡大された第１の分割領域映像の位置を示す情報及び拡大情報を、第２の映像加工処理部２２１に送信する。

第２の映像加工処理部２２１は、複数の第２の変倍処理部２１１〜２１４から送信される映像データと、変倍情報受信部２２２から供給された拡大情報とを受信し、図５に示される４個の第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１，Ｂ２２を生成する。この４個の第２の分割領域映像は、１６個の第２の分割領域映像のうちの４個の分割領域映像に相当し、図５では、左上の４個の第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１，Ｂ２２を第２の映像信号生成部２０で生成していることを示す。

また、第２の映像加工処理部２２１では、変倍情報受信部２２２で受信した拡大された分割領域映像の位置を示す情報、変倍情報も参照して４個の第２の分割領域映像を生成する。変倍情報が示す値が０の場合は、第１の映像信号生成部１０で拡大された分割領域映像はないので、４個の第２の分割領域映像を生成し出力する。

また、第２の映像加工処理部２２１は、各映像の変倍情報と中心位置の座標に基づいて映像の一部を加工（削除を含む）する必要があり、その加工する領域の情報を記憶した第２の映像加工情報記憶部２２３の情報を元に、合成映像信号の生成を行う。

第２の映像信号生成部２０におけるバッファメモリ２３１は、第１の映像信号生成部１０の第１の映像加工処理部１４１が出力する第１の映像信号Ｉ１を受信し、１フレーム分記憶する一時記憶部である。バッファメモリ２３１は、変倍情報送信部１４２で送信された拡大された分割領域映像の位置を示す情報と変倍情報を変倍情報受信部２２２が受信し、第２の映像加工処理部２２１が、それに基づいた映像を生成するために必要な時間を得るための一時記憶部である。

図６（ａ）から（ｄ）において、図６（ｃ）は垂直同期信号３０１、図６（ｂ）はクロック信号３０２、図６（ａ）は４ビットのデータ３０３を示している。図６（ａ）から（ｄ）に示されるように、拡大された分割領域映像の位置を示す情報３２１は１つ目の拡大情報“１”であり、情報３２２は２つ目の拡大情報“２”であり、情報３２３は３つ目の拡大情報“３”である。このように拡大された分割領域映像の位置を示す情報及び拡大情報は、垂直同期信号の直後に送信されるが、垂直同期信号がハイになっているので、映像の表示が既に始まっている。そのため、情報３２１の拡大された分割領域映像の位置を示す情報及び拡大情報に対応した分割領域映像は、図６（ｄ）に示されるように、次の垂直同期信号で反映されることになる。

映像の生成タイミング３３０は、第２の映像加工処理部２２１で生成される分割領域映像の生成タイミングを示す。タイミング３３１では、拡大された分割領域映像の位置を示す情報及び拡大情報３２１を反映した分割領域映像が表示される。したがって、第１の映像信号生成部１０で生成された第１の映像信号Ｉ１と、第２の映像信号生成部２０の第２の映像加工処理部２２１で生成される第２の映像信号Ｉ２には、１フレームのずれが生じる。このずれを解消するために、バッファメモリ２３１を用いる。

次に、映像合成部２３２は、第１の映像信号生成部１０で生成されバッファメモリ２３１を介して入力された映像と、第２の映像加工処理部２２１で生成された映像とを重ね合わせて合成し、合成映像をモニタ６０に供給する。例えば、映像合成部２３２は、第１の映像信号生成部１０で生成されバッファメモリ２３１を介して入力された映像に、第２の映像加工処理部２２１で生成された映像を上書き表示して合成し、モニタ６０は、例えば、図３に示されるような映像を表示する。

図７（ａ）から（ｄ）は、ユーザが入力操作部３０を操作して、図２における第１の分割領域映像Ａ２３を画面６１の全域に拡大表示するように指示したときの動作を示す図である。図７（ａ）は、第１の分割領域映像Ａ２３が少し拡大した領域２５１に表示された時点を示し、図７（ｂ）は、第１の分割領域映像Ａ２３が画面６１全体の１／４程度に拡大した領域２５２に表示された時点を示し、図７（ｃ）は、第１の分割領域映像Ａ２３が最初の第１の分割領域映像Ａ２３の映像サイズである基準サイズの縦横３倍程度に拡大され領域２５３に表示された時点を示し、図７（ｄ）は、第１の分割領域映像Ａ２３が画面６１全域２５４に表示（全画面表示）された時点を示す。図７（ａ）から（ｄ）の順に、第１の分割領域映像Ａ２３が徐々に拡大される場合に、第１の分割領域映像Ａ２３は拡大倍率に応じてその中心位置の座標を移動させる。

図８は、実施の形態１に係る映像処理装置１が第１の分割領域映像の１つを拡大する場合における拡大対象の映像の拡大方向（矢印４０１，４０２，４０３，４０４）と移動方向（矢印４０５）を示す図である。図８において、矢印４０１，４０２，４０３，４０４は、第１の分割領域映像Ａ２３を拡大する動きを示す。拡大された映像は、水平方向１６ドット単位、垂直方向９ドット単位で拡大する。また、矢印４０５は、第１の分割領域映像Ａ２３の中心位置の動きを示している。第１の分割領域映像Ａ２３の中心位置の座標は、画面６１全域に拡大されたときの中心位置の座標と、水平で２４０ドット、垂直で１３５ドットずれており、直線では、約２７５ドットずれている。第１の分割領域映像Ａ２３が拡大するにつれて、この中心位置の座標を画面６１中央に向けて移動することで、より自然な拡大表示を行うことができる。

第１の分割領域映像Ａ２３の拡大情報が示す値については、０以上９０以下の整数で拡大されるため、中心位置の座標の移動位置についても、０以上９０以下の整数の拡大情報が示す値に連動することで、第１の分割領域映像Ａ２３を徐々に且つ滑らかに拡大させることができる。具体的には、拡大情報が示す値に対して、中心位置の座標を３〜４ドット、画面６１の中心に向けて移動させることで、拡大開始から拡大終了までの期間において、より自然に見える拡大処理を行うことができる。

なお、この拡大情報が示す値と拡大対象の分割領域映像の中心位置の座標については、以下の式５から８で計算することができる。図９に示されるように、横１９２０ドット×縦１０８０ドットの画面６１の左上を座標始点（０，０）とし、右下を座標（１９２０，１０８０）とした場合、画面６１の中央は、座標（９６０，５４０）であり、１６個の分割領域映像の中心位置の座標は、それぞれ一意に決まり、第１の分割領域映像Ａ２３の中心位置の座標は（１２００，４０５）である。ここで、拡大情報が示す値は０以上９０以下の整数で拡大されるため、中心位置の座標も、０以上９０以下の整数で変化させ、拡大情報が示す値が“０”のときは、はじめの中心位置の座標（各映像の中心位置の座標）、拡大情報が示す値が“９０”のときに、画面６１の中心位置の座標（９６０，５４０）になるように変化させる。

Ｘ_ｃを拡大対象の分割領域映像の中心位置の水平方向座標とし、
Ｙ_ｃを拡大対象の分割領域映像の中心位置の垂直方向座標とし、
Ｘ_Ｓを拡大対象の分割領域映像の中心位置の拡大処理開始時における水平方向座標とし、
Ｙ_Ｓを拡大対象の分割領域映像の中心位置の拡大処理開始時における垂直方向座標とし、
Ｘ_Ｌを拡大対象の分割領域映像の中心位置の拡大処理終了時における水平方向座標とし、
Ｙ_Ｌを拡大対象の分割領域映像の中心位置の拡大処理終了時における垂直方向座標とし、
Ｍを拡大情報が示す値としたときに、拡大対象の分割領域映像の中心位置の座標（Ｘ_ｃ，Ｙ_ｃ）は、式５〜８によって求めることができる。
Ｘ_Ｓ≧９６０の場合： Ｘ_ｃ＝Ｘ_Ｓ−｛（Ｘ_Ｓ−Ｘ_Ｌ）／９０｝×Ｍ 式５
Ｘ_Ｓ＜９６０の場合： Ｘ_ｃ＝Ｘ_Ｓ＋｛（Ｘ_Ｌ−Ｘ_Ｓ）／９０｝×Ｍ 式６
Ｙ_Ｓ≧５４０の場合： Ｙ_ｃ＝Ｙ_Ｓ−｛（Ｙ_Ｓ−Ｙ_Ｌ）／９０｝×Ｍ 式７
Ｙ_Ｓ＜５４０の場合： Ｙ_ｃ＝Ｙ_Ｓ＋｛（Ｙ_Ｌ−Ｙ_Ｓ）／９０｝×Ｍ 式８

図１０は、第１の映像加工情報記憶部１４３に第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４の各々における、拡大情報と第１の分割領域映像の中心位置の座標との関係を表形式（対応テーブル）で示す図である。図１０の対応テーブルは、式５〜８に基づいて、各第１の分割領域映像（例えば、図２の第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４）について予め作成し格納しておく。図１０の対応テーブルにおいては、例として、分割領域映像Ａ１１，Ａ２３，Ａ４４の拡大情報と中心位置の座標の対応を示している。なお、図１０において、中心位置の座標の小数点以下は四捨五入としている。第１の分割領域映像Ａ１１の中心位置の座標は図１０の対応テーブルの列４５１に示されており、第１の分割領域映像Ａ２３の中心位置の座標は図１０の対応テーブルの列４５２に示されており、第１の分割領域映像Ａ４４の中心位置の座標は図１０の対応テーブルの列４５３に示されている。

図１０の対応テーブルを、図１に示される第１の映像加工情報記憶部１４３に予め記憶させ、第１の映像加工処理部１４１は、この対応テーブルを参照して、拡大対象の分割領域映像、すなわち、拡大情報が示す値が“０”以外の分割領域映像に対して、合成処理を行う。このとき、第１の映像加工処理部１４１においては、拡大対象の分割領域映像を最後に描画することによって、図７（ａ）〜（ｄ）に示されるような映像を生成することができる。

次に、図７（ａ）〜（ｄ）に示される第１の分割領域映像に対して、第２の映像信号生成部２０が第２の分割領域映像を追加合成する場合の動作について説明する。図７（ａ）〜（ｄ）における第１の分割領域映像Ａ２３の拡大表示において、第１の分割領域映像Ａ１１，Ａ１２，Ａ２１，Ａ２２を、第２の映像信号生成部２０の複数の第２の変倍処理部２１１〜２１４が生成する映像である第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１，Ｂ２２に置き換えた場合の第１の分割領域映像Ａ２３の拡大表示を、図１１（ａ）及び（ｂ）に示す。

図１１（ａ）は、第１の分割領域映像Ａ２３が少し拡大された状態（映像５０５）を示し、図１１（ｂ）は、第１の分割領域映像Ａ２３のサイズが最初のサイズ（基準サイズ）の縦横３倍以上拡大された状態（映像５０６）を示す。ここで、図１１（ａ）の部分５０１は、拡大した第１の分割領域映像Ａ２３が第２の分割領域映像Ｂ１２，Ｂ２２の領域を部分的に覆っている。また、図１１（ｂ）の部分５０２は、第２の分割領域映像Ｂ２２をすべて覆い、第２の分割領域映像Ｂ１１，Ｂ１２，Ｂ２１の領域の一部を覆っている。

図１１（ａ）のように第１の分割領域映像Ａ２３が拡大されたときには、第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４は、第１の映像信号生成部１０で生成されるため、図１２（ａ）に示されるような映像である。この第１の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４に、第２の映像信号生成部２０の複数の第２の変倍処理部２１１〜２１４が生成した映像を重ねるためには、図１２（ｂ）の部分５１０に示され斜線領域のように、第２の分割領域映像Ｂ１２，Ｂ２２の一部の映像を削除するように加工した合成映像を生成する必要がある。

そのような合成映像を生成するために、第２の映像信号生成部２０は、第１の映像信号生成部１０内の変倍情報送信部１４２から送信される拡大された分割領域映像の位置を示す情報、拡大情報を使用する。これらの情報は、変倍情報受信部２２２で受信され、第２の映像加工処理部２２１は、その受信した情報を元に、一部の映像を加工した合成映像を生成する。

この一部の映像を加工した合成映像の生成手順を説明する。図１３は、第２の映像加工処理部２２１で生成する１６個の第２の分割領域映像Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４を示す図である。第２の映像信号生成部２０は、式９から１２によって、分割領域映像の各々の中心位置の座標、拡大情報に基づいて、拡大表示したときの領域の４角の座標を求めることができる。

Ｘ_ａを分割領域映像の左端位置の水平座標とし、
Ｘ_ｂを分割領域映像の右端位置の水平座標とし、
Ｙ_ａを分割領域映像の上端位置の垂直座標とし、
Ｙ_ｂを分割領域映像の下端位置の垂直座標とし、
Ｘ_ｃを分割領域映像の中心位置の水平座標とし、
Ｙ_ｃを分割領域映像の中心位置の垂直座標とし、
Ｕ_Ｘを水平方向の拡大単位（１６ドット）とし、
Ｕ_Ｙを垂直方向の拡大単位（９ドット）とし、
Ｓ_Ｘを分割領域映像の水平方向の映像サイズ（４８０ドット）とし、
Ｓ_Ｙを分割領域映像の垂直方向の映像サイズ（２７０ドット）としたときに、
式９から１２の関係がある。
Ｘ_ａ＝Ｘ_ｃ−（Ｓ_Ｘ／２＋Ｍ×Ｕ_Ｘ／２） 式９
Ｘ_ｂ＝Ｘ_ｃ＋（Ｓ_Ｘ／２＋Ｍ×Ｕ_Ｘ／２） 式１０
Ｙ_ａ＝Ｙ_ｃ−（Ｓ_Ｙ／２＋Ｍ×Ｕ_Ｙ／２） 式１１
Ｙ_ｂ＝Ｙ_ｃ＋（Ｓ_Ｙ／２＋Ｍ×Ｕ_Ｙ／２） 式１２

これらの式９〜１２に基づいて、図１３の第２の分割領域映像の映像位置の中心位置の座標、及び、４角の座標を示す。図１４の対応テーブルの列６０１が第１の分割領域映像Ａ２３の中心位置の座標であり、列６０２が第１の分割領域映像Ａ２３の４つの角の座標である。４つの角の座標が、第２の分割領域映像と重なっている場合に、その映像は削除するように加工する必要があるため、その座標について、削除領域として、予め図１４の対応テーブルに記載する。この削除領域については、拡大対象の映像（例えば、第１の分割領域映像Ａ２３）に接する辺から拡大されるので、削除する領域は、四角形の領域である。

削除する映像の座標については、拡大した映像の座標Ｘａ、Ｘｂ、Ｙａ、Ｙｂとその映像の座標を比較して求める。例えば、図１３における第２の分割領域映像Ｂ２３（又は第１の分割領域映像Ａ２３）を拡大したときの第２の分割領域映像Ｂ１２の削除領域は、座標（９６０，２７０）よりも、第２の分割領域映像Ｂ１２の内側に入ったときであり、拡大情報“１”が示す値のときであり、既に第２の分割領域映像Ｂ２３の領域は、第２の分割領域映像Ｂ１２の内側に入っていることから、削除領域（Ｘｄａ，Ｙｄａ，Ｘｄｂ，Ｙｄｂ）は、（９４９，２６７，９６０，２７０）である（図１４の対応テーブルの欄６１０）。第２の分割領域映像Ｂ２３（又は第１の分割領域映像Ａ２３）を拡大したときの、第２の分割領域映像Ｂ１２の削除領域の座標情報は、図１４の対応テーブルの列６０４に示される。

また、第２の分割領域映像Ｂ１１については、座標（４８０，２７０）よりも小さい座標となるまで、第２の分割領域映像Ｂ２３（又は第１の分割領域映像Ａ２３）が拡大したときに、削除するように加工する必要がある。そのときの拡大情報“４５”を境界値としている。拡大情報が“４６”であると、第２の分割領域映像Ｂ２３（又は第１の分割領域映像Ａ２３）は、第２の分割領域映像Ｂ１１に重なるようになるので、そのときの第２の分割領域映像Ｂ１１の削除領域は（４６９，１３２，４８０，２７０）である（図１４の対応テーブルの欄６１１）。第２の分割領域映像Ｂ１１の削除領域の座標情報を、図１４の対応テーブルの列６０３に示す。

図１４の対応テーブルに示されるような各領域の拡大情報と中心位置の座標及び削除領域の座標情報を、第２の映像信号生成部２０の第２の映像加工情報記憶部２２３に記憶しておき、第２の映像加工処理部２２１は、この各領域の拡大情報と中心位置の座標及び削除領域の座標情報に基づいて、拡大された領域を含む第１の分割領域映像に対応した第１の合成映像を生成する。

なお、第２の映像信号生成部２０内の複数の第２の変倍処理部２１１〜２１４で、基準サイズより拡大することも可能である。この場合の動作は、第１の映像信号生成部１０の第１の変倍処理部１２１〜１３６の動作と同じである。

《１−３》実施の形態１の効果．
以上に説明したように、実施の形態１に係る映像処理装置１及び映像表示装置１ａによれば、複数種類の映像データに基づく複数個の分割領域映像（例えば、複数個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４，Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４の内の１６個の分割領域映像）を１つの画面６１に表示させながら複数個の分割領域映像の一部（例えば、複数個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４，Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４の内の１個の分割領域映像）を変倍する場合であっても、変倍される分割領域映像の位置を変倍率（例えば、拡大倍率）に応じた好適な位置に自動的に且つ徐々に移動させることができる。

また、分割領域映像の一部（例えば、複数個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４，Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４の内の１個の分割領域映像）を拡大する方法としては、第２の映像信号生成部２０で、第１の映像信号生成部１０から送信される第１の分割領域映像の一部を拡大する方法を用いることもできるが、実施の形態１に係る映像処理装置１及び映像表示装置１ａでは、第１の映像信号生成部１０で映像の一部を拡大した場合、ＭＰＥＧデコーダ１０１〜１１６で生成された映像データの縮小倍率を変更することで基準サイズよりも拡大された映像を生成することができる。この場合には、第２の映像信号生成部２０で拡大映像を生成する方法を採用する場合よりも、拡大された分割領域映像を表示ドット数の多い高画質な映像として生成することが可能である。

また、実施の形態１に係る映像処理装置１及び映像表示装置１ａにおいては、変倍情報送信部１４２から送信される拡大情報は、第１の映像加工処理部１４１で生成される垂直同期信号に同期して送信され、垂直同期信号に同期して拡大情報を更新することができる。このため、例えば、第１の分割領域映像の一部の領域が垂直同期信号に同期して、連続的に拡大するように制御すれば、拡大情報も垂直同期信号に同期して第２の映像加工処理部２２１に送信され、第２の映像加工処理部２２１でも垂直同期信号に同期して第１の合成映像を生成し、最終的に、映像合成部２３２も垂直同期信号に同期して出力するように構成できる。したがって、実施の形態１に係る映像処理装置１及び映像表示装置１ａによれば、選択された分割領域映像を徐々に拡大させる処理において、ユーザに違和感を与えずに、拡大倍率の増加に伴う拡大表示を滑らかな映像変化によって実現することができる。

また、実施の形態１に係る映像処理装置によれば、拡大情報に基づいて拡大される分割領域映像を、拡大情報が示す拡大倍率の増加に応じて画面６１の中央に向けて移動するように構成しているため、分割領域映像の拡大処理を滑らか且つユーザに違和感を与えないように行うことができる。

《２》実施の形態２．
図１５は、本発明の実施の形態２に係る映像処理装置２及び映像表示装置２ａの構成を概略的に示すブロック図である。図１５において、図１に示される構成要素と同一又は対応する構成要素には、図１における符号と同じ符号を付す。図１５に示されるように、実施の形態２に係る映像処理装置２は、実施の形態１におけるバッファメモリ２３１を備えていない点が、実施の形態１に係る映像処理装置１と相違する。この点以外の点について、実施の形態２は、実施の形態１と同じである。

実施の形態１においては、第１の映像信号生成部１０で生成された映像を、第２の映像信号生成部２０のバッファメモリ２３１で一時記憶してから、映像合成部２３２で合成する構成を示した。しかし、複数の第１の変倍処理部１２１〜１３６で拡大処理するときに、拡大対象の分割領域映像の位置を示す情報及び拡大情報を、変倍情報送信部１４２に送信し、その後の垂直同期信号（例えば、１垂直同期期間だけ後の垂直同期信号）に同期して、拡大対象の分割領域映像を出力するように構成してもよい。このような方法によって、バッファメモリを用いずに、映像合成部２３２に入力される第１の映像信号Ｉ１と第２の映像信号Ｉ２とを同期させることができる。

以上に説明したように、実施の形態２に係る映像処理装置２及び映像表示装置２ａによれば、複数種類の映像データに基づく複数個の分割領域映像（例えば、複数個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４，Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４の内の１６個の分割領域映像）を１つの画面６１に表示させながら複数個の分割領域映像の一部（例えば、複数個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４，Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４の内の１個の分割領域映像）を変倍する場合であっても、変倍される分割領域映像の位置を変倍率（例えば、拡大倍率）に応じた好適な位置に自動的に且つ徐々に移動させることができる。

また、実施の形態２に係る映像処理装置２及び映像表示装置２ａによれば、実施の形態１に係る映像処理装置１及び映像表示装置１ａに比べ、バッファメモリを減らすことができ、構成の簡素化を実現できる。

《３》実施の形態３．
図１６は、本発明の実施の形態３に係る映像処理装置３及び映像表示装置３ａの構成を概略的に示すブロック図である。図１６において、図１に示される構成要素と同一又は対応する構成要素には、図１における符号と同じ符号を付す。図１６に示されるように、実施の形態３に係る映像処理装置３は、映像合成部２３２の出力段に、映像操作部２４１と映像データを一時的に記憶するメモリ２４２と、映像操作部２４１で分割領域映像を並び替えた結果を、第１の映像加工処理部１４１及び第２の映像加工処理部２２１に伝える並び情報送信部２４３とを備えている点において、実施の形態１に係る映像処理装置１と相違する。

図１７は、実施の形態３に係る映像処理装置３の第２の分割領域映像Ｂ１〜Ｂ４の並び替えを示す図である。実施の形態１においては、１６個の分割領域映像は、図１７の上側（及び図３）に示される分割領域映像の並び（配列）で説明したが、この並びを、ユーザの要求に応じて、並び替えたい場合がある。例えば、図１７の上側（及び図３）に示される分割領域映像の並び（配列）を、図１７の下側に示すような分割領域映像の並び（配列）に変更した場合がある。実施の形態３に係る映像処理装置３においては、映像操作部２４１を用いたユーザ操作にしたがって、分割領域映像Ｂ３，Ｂ４の並べ替えを行う。映像操作部２４１の入力情報は、入力操作部３０としてのマウスからの並べ替え入力情報であってもよい。映像操作部２４１は、映像合成部２３２から入力される映像データを一旦メモリ２４２に記憶し、メモリ２４２で各分割領域映像の表示位置を並び替える。

ユーザが並び替えを確定したあと、並び情報送信部２４３は、映像操作部２４１から並び情報を取得し、この並び情報を第１の映像加工処理部１４１及び第２の映像加工処理部２２１に送信する。第１の映像加工処理部１４１及び第２の映像加工処理部２２１は、並び情報送信部２４３から並び情報を取得すると、取得した並び情報が示す並び方を満たすように、分割領域映像の並びを変更する。さらに、並び情報送信部２４３は、垂直同期信号と同期して、映像操作部２４１、第１の映像加工処理部１４１、及び第２の映像加工処理部２２１に、並び替えた後の分割領域映像を表示するように指示し、映像操作部２４１で並び替えた分割領域映像を、第１の映像加工処理部１４１及び第２の映像加工処理部２２１で生成するように構成する。

以上に説明したように、実施の形態３に係る映像処理装置３及び映像表示装置３ａによれば、複数種類の映像データに基づく複数個の分割領域映像（例えば、複数個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４，Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４の内の１６個の分割領域映像）を１つの画面６１に表示させながら複数個の分割領域映像の一部（例えば、複数個の分割領域映像Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４，Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４の内の１個の分割領域映像）を変倍する場合であっても、変倍される分割領域映像の位置を変倍率（例えば、拡大倍率）に応じた好適な位置に自動的に且つ徐々に移動させることができる。

また、実施の形態３に係る映像処理装置３及び映像表示装置３ａによれば、並び替えに伴う煩雑な処理を、メモリ２４２を使用した映像操作部２４１でまとめて行うことができ、並べ替えの結果を第１の映像加工処理部１４１及び第２の映像加工処理部２２１に反映させることができる。このため、分割領域映像を画面６１に表示させた後の操作で、分割領域映像の一部を拡大させることができる。この場合にも、複数種類の映像データに基づく複数個の分割領域映像を１つの画面６１に表示させながら複数個の分割領域映像の一部を拡大する場合であっても、拡大される分割領域映像の位置を拡大倍率に応じた好適な位置に自動的に移動させることができる。

本発明は、複数の監視カメラを備えた監視システムにおける制御装置、又は、監視システムにおける監視用映像レコーダとしての映像記録再生装置、又は、監視システムにおける監視用モニタとしての映像表示装置に適用可能である。また、本発明は、１つの画面に複数の分割領域映像を並べて表示し、いずれかの分割領域映像を選択して変倍表示する装置であれば、多チャンネルの映像を１画面内に同時に表示する機能を備えた家庭用又は放送用の映像記録再生装置又は放送受信装置などにも適用可能である。

１，２，３ 映像処理装置、 １ａ，２ａ，３ａ 映像表示装置、 １０ 第１の映像信号生成部、 ２０，２０ａ，２０ｂ 第２の映像信号生成部、 ３０ 入力操作部、 ４０ 制御部（表示制御部）、 ５０ 映像データ記憶部、 ６０ モニタ（映像表示部）、 ６１ 画面、 １０１〜１１６ ＭＰＥＧデコーダ、 １２１〜１３６ 第１の変倍処理部、 １４１ 第１の映像加工処理部、 １４２ 変倍情報送信部、 １４３ 第１の映像加工情報記憶部（他の像加工情報記憶部）、 ２０１〜２０４ ＭＪＰＥＧデコーダ、 ２１１〜２１４ 第２の変倍処理部、 ２２１ 第２の映像加工処理部、 ２２２ 変倍情報受信部、 ２２３ 第２の映像加工情報記憶部（映像加工情報記憶部）、 ２３１ バッファメモリ、 ２３２ 映像合成部、 ２４１ 映像操作部、 ２４２ メモリ、 ２４３ 並び情報送信部、 Ａ１１〜Ａ１４，Ａ２１〜Ａ２４，Ａ３１〜Ａ３４，Ａ４１〜Ａ４４ 第１の分割領域映像、 Ｂ１１〜Ｂ１４，Ｂ２１〜Ｂ２４，Ｂ３１〜Ｂ３４，Ｂ４１〜Ｂ４４ 第２の分割領域映像。

Claims (15)

1. 複数の第１の映像データから、第１の映像信号を生成する第１の映像信号生成部と、
   複数の第２の映像データ及び前記第１の映像信号から、表示用映像信号を生成する第２の映像信号生成部と、
   前記第１の映像信号生成部及び前記第２の映像信号生成部の動作を制御する制御部と
   を有し、
   前記第１の映像信号生成部は、
   前記複数の第１の映像データのそれぞれに対する縮小又は拡大処理としての第１の変倍処理を施すための複数の第１の変倍処理部と、
   前記複数の第１の変倍処理部が行う前記第１の変倍処理の変倍率を含む変倍情報を送信する変倍情報送信部と、
   前記複数の第１の変倍処理部によって処理された前記複数の第１の映像データから前記第１の映像信号を生成する第１の映像加工処理部と
   を含み、
   前記第２の映像信号生成部は、
   前記変倍情報送信部から送信された前記変倍情報を受信する変倍情報受信部と、
   前記変倍情報受信部が受信した前記変倍情報に応じた複数の映像加工情報を予め記憶する映像加工情報記憶部と、
   前記複数の第２の映像データのそれぞれに対する縮小又は拡大処理としての第２の変倍処理を施すための複数の第２の変倍処理部と、
   前記複数の第２の変倍処理部によって処理された前記複数の第２の映像データに、前記映像加工情報記憶部が記憶する前記複数の映像加工情報の内の前記変倍情報受信部が受信した前記変倍情報に対応する映像加工情報を用いて、前記複数の第２の変倍処理部によって処理された前記複数の第２の映像データに加工処理を施して、第２の映像信号を生成する第２の映像加工処理部と、
   前記第１の映像信号と前記第２の映像信号とから前記表示用映像信号を生成する映像合成部と
   を含み、
   前記複数の第１の変倍処理部が行う前記第１の変倍処理は、前記複数の第１の映像データから選択された第１の映像データの拡大処理を含み、
   前記変倍情報送信部が送信する前記変倍情報は、前記選択された第１の映像データを特定する特定情報と、前記選択された第１の映像データの拡大処理の拡大倍率を示す拡大情報とを含む
   ことを特徴とする映像処理装置。
2. 前記変倍情報送信部による前記変倍情報の送信は、前記第１の映像信号に含まれる垂直同期信号に同期したタイミングで行われることを特徴とする請求項１に記載の映像処理装置。
3. 前記第１の映像加工処理部が生成する前記第１の映像信号は、映像表示部の画面に、前記複数の第１の映像データに基づく複数個の第１の分割領域映像を並べて、また、前記複数個の第１の分割領域映像のいずれかを拡大して表示させる映像信号であることを特徴とする請求項１又は２に記載の映像処理装置。
4. 前記複数個の第１の分割領域映像は、前記複数の第１の変倍処理部が前記複数の第１の映像データに対し、前記第１の変倍処理としての縮小処理を施すことによって生成された映像信号であることを特徴とする請求項３に記載の映像処理装置。
5. 前記第２の映像加工処理部が生成する前記第２の映像信号は、前記画面に、前記複数の第２の映像データに基づく複数個の第２の分割領域映像を並べて、また、前記複数個の第２の分割領域映像のいずれかを拡大して表示させる映像信号であることを特徴とする請求項３又は４に記載の映像処理装置。
6. 前記複数個の第２の分割領域映像を並べて表示させる映像信号は、前記複数の第２の変倍処理部が前記複数の第２の映像データに対し、前記第２の変倍処理としての第２の縮小処理を施すことによって生成された映像信号であることを特徴とする請求項５に記載の映像処理装置。
7. 前記映像合成部が生成する前記表示用映像信号は、前記画面に表示される前記複数個の第１の分割領域映像のいずれかの上に、前記複数個の第２の分割領域映像を上書きした合成映像を表示させる映像信号である
   ことを特徴とする請求項５又は６に記載の映像処理装置。
8. 前記第１の映像信号生成部は、前記第１の映像加工処理部が前記複数の第１の映像データのいずれかを加工するときに使用する映像加工情報を記憶する他の映像加工情報記憶部をさらに含み、
   前記他の映像加工情報記憶部が記憶する前記映像加工情報は、前記第１の映像加工処理部による加工対象の第１の映像データの拡大倍率と前記加工対象の第１の映像データに基づく第１の分割領域映像の表示位置情報との対応関係を示すテーブルを含む
   ことを特徴とする請求項３から７のいずれか１項に記載の映像処理装置。
9. 前記第２の映像信号生成部は、前記第１の映像信号を一時的に記憶するバッファメモリをさらに含み、
   前記映像合成部は、前記バッファメモリに一時的に記憶された前記第１の映像信号と前記第２の映像加工処理部で生成された前記第２の映像信号とから前記表示用映像信号を生成し、
   前記第１の映像信号生成部が、前記制御部から前記複数個の第１の分割領域映像の内のいずれかの第１の分割領域映像を拡大対象とする指示を受け取ったときに、前記変倍情報送信部は、前記拡大対象の第１の分割領域映像の特定情報と拡大情報とを前記変倍情報として、垂直同期信号に同期して送信し、
   前記第１の映像加工処理部は、前記変倍情報の送信より遅い時点で前記拡大対象の第１の分割領域映像を含む前記第１の映像信号を前記バッファメモリに供給する
   ことを特徴とする請求項３から８のいずれか１項に記載の映像処理装置。
10. 前記映像加工情報記憶部が予め記憶する前記映像加工情報は、前記複数個の第２の分割領域映像の内の加工対象の第２の分割領域映像の特定情報と拡大倍率とに応じて変化する前記加工対象の第２の分割領域映像の中心位置の座標と角の位置の座標とを含むことを特徴とする請求項５から７のいずれか１項に記載の映像処理装置。
11. 前記映像加工情報記憶部が予め記憶する前記映像加工情報は、前記加工対象の第２の分割領域映像以外の分割領域映像についての映像加工情報を含むことを特徴とする請求項１０に記載の映像処理装置。
12. 前記第２の映像信号生成部は、
    前記映像合成部から出力される表示用映像信号が入力され、ユーザ操作に基づいて前記複数個の第１の分割領域映像及び前記複数個の第２の分割領域映像の並び替え指示情報の入力のためのユーザ操作を行う映像操作部と、
    前記映像操作部から入力された前記並び替え指示情報を前記第１の映像加工処理部及び前記第２の映像加工処理部に供給する並び替え情報送信部と
    をさらに含み、
    前記第１の映像加工処理部及び前記第２の映像加工処理部は、供給された前記並び替え指示情報にしたがって前記複数個の第１の分割領域映像及び前記複数個の第２の分割領域映像の並び変えを行う
    ことを特徴とする請求項５から７のいずれか１項に記載の映像処理装置。
13. 前記第１の映像データと前記第２の映像データとは、互いに圧縮形式の異なる映像データであることを特徴とする請求項１から１２のいずれか１項に記載の映像処理装置。
14. 前記第１の映像データと前記第２の映像データとは、互いに解像度の異なる映像データであることを特徴とする請求項１から１２のいずれか１項に記載の映像処理装置。
15. 表示用映像信号を生成する映像処理装置と、前記表示用映像信号に基づく映像を表示する映像表示部とを有する映像表示装置であって、
    前記映像処理装置は、
    複数の第１の映像データから、第１の映像信号を生成する第１の映像信号生成部と、
    複数の第２の映像データ及び前記第１の映像信号から、前記表示用映像信号を生成する第２の映像信号生成部と、
    前記第１の映像信号生成部及び前記第２の映像信号生成部の動作を制御する制御部と
    を有し、
    前記第１の映像信号生成部は、
    前記複数の第１の映像データのそれぞれに対する縮小又は拡大処理としての第１の変倍処理を施すための複数の第１の変倍処理部と、
    前記複数の第１の変倍処理部が行う前記第１の変倍処理の変倍率を含む変倍情報を送信する変倍情報送信部と、
    前記複数の第１の変倍処理部によって処理された前記複数の第１の映像データから前記第１の映像信号を生成する第１の映像加工処理部と
    を含み、
    前記第２の映像信号生成部は、
    前記変倍情報送信部から送信された前記変倍情報を受信する変倍情報受信部と、
    前記変倍情報受信部が受信した前記変倍情報に応じた複数の映像加工情報を予め記憶する映像加工情報記憶部と、
    前記複数の第２の映像データのそれぞれに対する縮小又は拡大処理としての第２の変倍処理を施すための複数の第２の変倍処理部と、
    前記複数の第２の変倍処理部によって処理された前記複数の第２の映像データに、前記映像加工情報記憶部が記憶する前記複数の映像加工情報の内の前記変倍情報受信部が受信した前記変倍情報に対応する映像加工情報を用いて、前記複数の第２の変倍処理部によって処理された前記複数の第２の映像データに加工処理を施して、第２の映像信号を生成する第２の映像加工処理部と、
    前記第１の映像信号と前記第２の映像信号とから前記表示用映像信号を生成する映像合成部と
    を含み、
    前記複数の第１の変倍処理部が行う前記第１の変倍処理は、前記複数の第１の映像データから選択された第１の映像データの拡大処理を含み、
    前記変倍情報送信部が送信する前記変倍情報は、前記選択された第１の映像データを特定する特定情報と、前記選択された第１の映像データの拡大処理の拡大倍率を示す拡大情報とを含む
    ことを特徴とする映像表示装置。

Images