JP6866181B2 - 画像処理装置、その制御方法、画像処理装置を備える表示装置、プログラム、および記憶媒体 - Google Patents

Description

本発明は、複数の映像信号に基づいて表示画像を生成する画像処理装置及びその制御方法、表示装置、プログラムおよび記憶媒体に関する。

近年、画像信号の高解像度化により画像のデータ量が増大することがある。このような画像（原画像）を伝送する場合、原画像を、複数の画像信号に分割して複数の伝送路を用いて伝送することがある。これにより、データ量の大きい画像を、高速に伝送することが可能となる。複数の画像信号として伝送された画像信号を受信した処理装置は、画像を表示するために、複数の画像信号を合成して、原画像に対応する画像を生成する。

また、映像制作の現場では、カメラで撮影した高解像度の画像に対して、エッジ強調処理や白黒表示処理等の画像処理を施して、画質を確認する場合がある。

特許文献１の画質調整装置は、画像に縮小処理を施した縮小画像に、所定の画像処理を施した画像と、所定の画像処理を施していない画像とを並べて表示することが開示されている。これによって、画像処理の効果を確認することが容易となる。

特開２００６‐１３６１８号公報

しかしながら、特許文献１に開示された技術では、画像が複数の画像信号として伝送された場合、一度複数の画像信号を合成した合成画像を生成し、さらに合成画像を縮小する処理をする必要があり、処理装置の回路への負荷が大きくなることがあった。

そこで、本発明は、処理装置の回路への負荷を低減しつつ、好適に画像処理の効果を確認するための画像を生成することが可能な画像処理装置、その制御方法、表示装置、プログラム、および記憶媒体を提供することを目的とする。

上述した課題を解決するために、本発明の一実施形態に係る画像処理装置は、複数の画像信号が入力される複数の入力手段と、入力された画像信号に画像処理を適用し、出力画像を生成する処理手段と、を備え、前記複数の画像信号が原画像の画素を互いに異なる位置で間引いて得られた複数の間引き画像信号である場合、前記処理手段は、前記複数の間引き画像信号のうちいずれかの１つの画像信号に基づく画像に第１の画像処理を施した第１画像と、前記複数の間引き画像信号のうちいずれか１つの画像信号に基づく画像に前記第１の画像処理と異なる第２の画像処理を施した第２画像と、を並べて配置した画像を前記出力画像として生成することを特徴とする。

本発明によれば、入力された複数の画像信号が、それぞれ単独で原画像に対応する画像を表示可能な画像信号である場合に、複数の画像信号を合成する処理を実行せずに、画像処理の効果を確認可能な画像を生成することが可能となる。

したがって、処理装置の回路への負荷を低減しつつ、好適に画像処理の効果を確認することが可能な画像を生成することが可能となる。

撮像装置、表示装置、および画像処理装置を示す装置構成図である。 画像処理装置の装置構成図である。 原画像と、画像の画素を所定の間隔で間引いて生成された複数の画像とを示す模式図である。 原画像と、原画像を分割して生成された複数の分割画像とを示す模式図である。 出力処理部の機能ブロックを示すブロック図である。 映像信号フォーマット情報の一例を示す図である。 出力処理部の表示画像の生成処理を示す第１のフローチャートである。 特定画像に基づいて表示装置に表示された画像を示す第１の模式図である。 特定画像に基づいて表示装置に表示された画像を示す第２の模式図である。 出力処理部の表示画像の生成処理を示す第２のフローチャートである。 出力処理部の表示画像の生成処理を示す第３のフローチャートである。 一部の領域に画像処理を施された合成画像の模式図である。

以下、図面を用いて本発明の実施の形態について説明する。なお、本発明の技術的範囲は、特許請求の範囲によって確定され、以下に例示する実施形態によって限定されるものではない。また、実施形態の中で説明されている特徴の組み合わせすべてが本発明に必須とは限らない。本明細書および図面に記載の内容は例示であって、本発明を制限するものと見なすべきではない。本発明の趣旨に基づき種々の変形が可能であり、それらを本発明の範囲から除外するものではない。即ち、各実施形態及びその変形例を組み合わせた構成も全て本発明に含まれるものである。

（実施例１）
図１は、撮像装置１、表示装置２、および画像処理装置１００を示す装置構成図である。

撮像装置１は、被写体を撮影して原画像を取得し、原画像に基づいて生成した複数の画像信号を出力可能なデジタルビデオカメラである。撮像装置１が取得する原画像は、４Ｋ（４０９６×２１６０）の解像度の画像であるとする。なお、原画像は４Ｋの解像度の画像に限らない。原画像は２Ｋや８Ｋの画像であってもよい。撮像装置１は、原画像に基づいて４つの画像信号を生成して、それぞれ異なる出力端子から出力するものとする。撮像装置１は、Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ（ＳＤＩ）規格に準ずるＳＤＩ信号で画像信号を出力するとする。撮像装置１が原画像から生成する複数の画像信号の形式は後述する。

表示装置２は、画像処理装置１００から取得した画像信号に基づいて、画面に画像を表示する表示装置である。例えば、表示装置２は、液晶ディスプレイであるとする。なお、表示装置２は、有機ＥＬディスプレイであってもよい。また、表示装置２は、スクリーンに画像を投影して表示するプロジェクタであってもよい。また、画像処理装置１００と表示装置２との間の伝送路は、図１において１本の伝送路で記述されているが、撮像装置１と画像処理装置１００との間と同様に複数の伝送路であってもよい。

画像処理装置１００は、撮像装置１から取得した複数の画像信号に基づいて、表示装置２に表示するための画像を生成して出力する画像処理装置である。画像処理装置１００は、例えば、Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ（ＰＣ）であるとする。なお、画像処理装置１００は、表示装置２の内部に設けられ、一体の表示装置を構成するものであってもよい。

画像処理装置１００は、画像処理が施された画像を表示装置２に出力することが可能である。ここで、画像処理は、エッジ強調処理、白黒表示処理、フォルスカラー表示処理、およびブルーオンリー表示処理等であるとする。エッジ強調処理は、画像の輪郭部分にあたる領域を着色表示する処理である。白黒表示処理は、画像をモノクロ表示する処理である。フォルスカラー処理は、映像の輝度レベル毎に異なる色で着色する処理である。ブルーオンリー表示処理は、画像の赤色成分及び緑色成分を除去し、青色成分のみをモノクロ表示する処理である。なお、画像処理は、上述の処理以外の画像処理であってもよい。

また、画像処理装置１００は、入力された画像に対して画像処理を施した場合の効果を確認するための特定画像を生成して、表示装置２に出力することが可能である。画像処理装置１００は、非図示の入力インターフェースを介して、ユーザが特定画像を出力するか否かの指示を取得し、特定画像を出力する指示を取得した場合に、特定画像を生成して出力する処理を実行する。なお、画像処理装置１００は、画像処理を実行する指示を取得したことに応じて、特定画像を生成して出力するものであってもよい。

図２は、画像処理装置１００の装置構成図である。画像処理装置１００は、入力端子１０１ａ〜１０１ｄ、画像信号判定部１０２、指示入力部１０３、および出力処理部１１０を備える。入力端子１０１ａ〜１０１ｄは、撮像装置１からそれぞれ異なる画像信号を取得するための入力端子である。例えば、入力端子１０１ａ〜１０１ｄは、Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ規格（ＳＤＩ規格）に準じた入力端子であるとする。なお、入力端子１０１ａ〜１０１ｅは、ＨＤＭＩ（登録商標）規格に準じた入力端子であってもよい。入力端子１０１ａ〜１０１ｄは、入力された画像信号を画像信号判定部１０２と出力処理部１１０とにそれぞれ出力する。

画像信号判定部１０２は、入力端子１０１ａ〜１０１ｄに入力された画像信号のデータ形式を判定する判定回路である。また、画像信号判定部１０２は、入力端子１０１ａ〜１０１ｄにそれぞれ正常に画像信号が入力されたか否かを判定する判定回路である。

ここで、原画像と、撮像装置１が出力する複数の画像信号との関係を説明する。図３は、原画像と、原画像の画素を所定の間隔で間引いて生成された複数の間引き画像とを示す模式図である。原画像から生成された複数の画像信号は、原画像の左上に示すように、原画像を構成する画素のうち２画素ごとに、水平方向に２画素、垂直方向に１画素（１ライン）の間隔をあけて抽出された画像Ａ〜Ｄにそれぞれ対応する。このような方式が、２−Ｓａｍｐｌｅ Ｉｎｔｅｒ ｌｅａｖｅ方式（２ＳＩ方式）である。２ＳＩ方式で生成された複数の画像信号は、それぞれ、原画像に対応する画像を形成することが可能である。

なお、間引き画像に対応する画像信号は、上述の例に限らない。複数の間引き画像信号は、それぞれ原画像において異なる画素の画像信号からなり、かつ、原画像の解像度を低減した画像に対応する画像信号であれば、間引きの間隔や画像信号の数は問わない。例えば、原画像の画素を１つおきに抜き出した２つの画像信号であってもよい。また、複数の間引き画像は、重ね合わせることで原画像を得ることが可能な画像であるともいえる。

図４は、原画像と、原画像を分割して生成された複数の分割画像とを示す模式図である。この場合、複数の画像信号は、原画像を水平方向に２つ、垂直方向に２つに分割した４つの分割画像Ａ〜Ｄにそれぞれ対応する。このような方式が、Ｓｑｕａｒｅ Ｄｉｖｉｓｉｏｎ方式（ＳｑＤｉｖ方式）である。ＳｑＤｉｖ方式で生成された複数の画像信号は、それぞれ、原画像の左上、左下、右下、右上に対応する画像を形成することから、原画像に対応する画像を表示するためには、複数の画像信号から合成画像を生成することが必要となる。

撮像装置１は、複数の画像信号をどのような方式で生成したかを示す映像信号フォーマット情報を、各画像信号にメタデータとして付加して出力する。図６は、映像信号フォーマット情報の一例を示す図である。映像信号フォーマット情報は、解像度、フレームレート、Ｉ／Ｐ変換種別、カラーフォーマット、色深度、分割方式及びリンク符号（各画像信号の原画像における配置）に関する情報を含む。ここで、分割方式は２ＳＩ方式あるいはＳｑＤｉｖ方式の２種類のうちいずれかであるとする。ＳｑＤｉｖ方式の画像信号である場合、リンク符号にはそれぞれ、分割時の左上の画像に対応する画像信号であれば「Ａ」、右上が「Ｂ」、左下が「Ｃ」、右下が「Ｄ」という情報が入るものとする。また、２ＳＩ方式の画像信号である場合、リンク符号にはそれぞれ、原画像の所定の領域において、左上の２画素からなる画像信号であれば「Ａ」、右上が「Ｂ」、左下が「Ｃ」、右下が「Ｄ」という情報が入るものとする。

画像信号判定部１０２は、入力端子１０１ａ〜１０１ｄに入力された画像信号のうち、有効な画像信号を検出する。画像信号判定部１０２は、有効な画像信号のうちいずれか１つの画像信号に付加された映像信号フォーマット情報から、入力された複数の画像信号が、２ＳＩ方式で生成された画像信号であるか否かを判定する。

なお、画像信号判定部１０２は、各入力端子から取得した全ての画像信号に付加された映像信号フォーマット情報から、入力された複数の画像信号が、２ＳＩ方式で生成された画像信号であるか否かを判定してもよい。また、画像信号判定部１０２は、原画像から生成された複数の画像信号が全て正常に入力されているか否かを判定する。画像信号判定部１０２は、判定結果を出力処理部１１０に出力する。

指示入力部１０３は、ユーザの操作に応じて、特定画像を出力するか否かの指示を出力処理部１１０に出力する。また、指示入力部１０３は、ユーザの操作に応じて、画像処理を実行する指示を取得したことに応じて、特定画像を生成して出力するものであってもよい。

出力処理部１１０は、取得した複数の画像信号から、表示装置２が表示するための画像（出力画像）を生成して出力するための処理回路である。出力処理部１１０は、ユーザからの指示に応じて、入力された画像信号に基づく画像に所定の画像処理を施すことによる効果を確認するための特定画像を生成して出力することが可能である。図５は、出力処理部１１０の機能ブロックを示すブロック図である。出力処理部１１０は、入力部１１１、合成処理部１１２、画像処理部１１３、縮小処理部１１４、表示画像生成部１１５、制御部１１６、およびメモリ１１７を備える。

入力部１１１は、画像信号ａ〜ｄを入力端子１０１ａ〜１０１ｄから取得する入力インターフェースである。入力部１１１は、画像信号ａ〜ｄを出力する。

合成処理部１１２は、画像信号ａ〜ｄに基づいて、原画像に対応する合成画像を生成する合成処理回路である。

画像処理部１１３は、入力された画像信号に基づく画像に指定された画像処理を施して出力する画像処理回路である。画像処理部１１３が実行可能な画像処理は、上述した画像処理であり、例えば、白黒表示処理である。

縮小処理部１１４は、縮小処理を実行するスケーリング回路である。例えば、縮小処理部１１４は、４Ｋ解像度の画像を２Ｋ解像度の画像に縮小することが可能である。

表示画像生成部１１５は、画像処理の効果を比較して確認するための特定画像を生成する生成手段である。表示画像生成部１１５は、画像処理部１１３が実行する画像処理の効果を確認するために、画像処理を施した処理画像Ａと、処理画像Ａとは異なる画像処理を施した処理画像Ｂと、を並べて配置した特定画像を生成する。例えば、表示画像生成部１１５は、白黒画像処理を含む画像処理を施した処理画像Ａと、白黒画像処理を施さない処理画像Ｂとを並べて配置した特定画像を生成するとする。

なお、表示画像生成部１１５は、それぞれ異なる画像処理を施された複数の画像を並べて配置して特定画像を生成するものであってもよい。例えば、ある強度で画像処理が施された処理画像Ｃと、処理画像Ｃとは異なる強度で画像処理が施された処理画像Ｄとを並べて配置して、特定画像を生成してもよい。この場合、処理画像Ｃと処理画像Ｄとに施される画像処理は、同種の画像処理である。

制御部１１６は、出力処理部１１０の各機能ブロックの動作を制御するための制御回路である。制御部１１６は、メモリ１１７に記憶されたプログラムおよびパラメータを読出して実行することにより、各機能ブロックの動作を制御するＣＰＵ等の演算処理回路であるとする。

メモリ１１７は、制御部１１６が本願実施例を実行するためのプログラムを記憶し、制御部１１６が読取可能な記憶媒体である。メモリ１１７は、不揮発性の記憶媒体であるとする。なお、メモリ１１７は複数の記憶媒体の組み合わせで構成されていてもよく、揮発性の記憶媒体と、不揮発性の記憶媒体とを含むものであってもよい。

出力部１１８は、表示装置２が画像を表示するための表示画像を出力する出力インターフェースである。

図７は、出力処理部１１０の表示画像の生成処理を示すフローチャートである。出力処理部１１０は、画像処理装置１００が動作中において、図７に示す表示画像の生成処理を繰り返し実行するものとする。

Ｓ７０１で、制御部１１６は、ユーザが画像処理の実行を指示したか否かを判定する。具体的には、制御部１１６は、指示入力部１０３から、ユーザが画像処理の実行を指示した信号を取得した場合に、ユーザが画像処理の実行を指示したと判定する。制御部１１６が、ユーザが画像処理の実行を指示していないと判定した場合、処理は、Ｓ７１２に進む。制御部１１６が、ユーザが画像処理の実行を指示したと判定した場合、処理は、Ｓ７０２に進む。ここでは、画像処理として、白黒変換処理（モノクロ処理）を実行すると指示したとして説明する。

Ｓ７０２で、制御部１１６は、ユーザが比較表示の実行を指示したか否かを判定する。具体的には、制御部１１６は、指示入力部１０３から、ユーザが比較表示の実行を指示する信号を取得した場合に、ユーザが比較表示の実行を指示したと判定する。制御部１１６が、ユーザが比較表示の実行を指示していないと判定した場合、処理は、Ｓ７１０に進む。制御部１１６が、ユーザが比較表示の実行を指示したと判定した場合、処理は、Ｓ７０３に進む。

Ｓ７０３で、制御部１１６は、入力された複数の画像信号が、２ＳＩ方式で生成されたか否かを判定する。具体的には、制御部１１６は、画像信号判定部１０２から取得した判定結果に基づいて、入力された複数の画像信号が、２ＳＩ方式で生成されたか否かを判定する。制御部１１６が、入力された複数の画像信号が、２ＳＩ方式で生成されていないと判定した場合、処理は、Ｓ７０６に進む。制御部１１６が、入力された複数の画像信号が、２ＳＩ方式で生成されていると判定した場合、処理は、Ｓ７０４に進む。

Ｓ７０４で、制御部１１６は、入力された複数の画像信号のうち、いずれか１つの画像信号に基づく画像に画像処理を施すように、画像処理部１１３を制御する。例えば、画像処理部１１３は、画像信号ｄに基づく画像Ｄに白黒表示処理を施すとする。画像処理部１１３は、白黒表示処理を施された画像Ｄ´を表示画像生成部１１５に出力する。処理は、Ｓ７０５に進む。

Ｓ７０５で、表示画像生成部１１５は、画像信号ａに基づく画像Ａと、画像Ｄ´とを並べた特定画像を生成して出力部１１８に出力する。なお、制御部１１６は、特定画像を構成する２つの画像として、原画像において互いに画素が隣接しない２つの画像信号を選択する。例えば、画像信号ｂに基づく画像Ｂと画像信号ｃに基づく画像Ｃに画像処理を施した画像Ｃ´を用いて特定画像を生成してもよい。処理は、Ｓ７１３に進む。

Ｓ７１３で、出力部１１８は、取得した画像を表示画像として、表示装置２に出力する。

図８は、生成された特定画像に基づいて、表示装置２に表示された画像を示す模式図である。例えば、表示画像生成部１１５は、画像Ａを左側に配置し、画像Ｄ´を右側に配置するとする。原画像に対応する画像に対して、画像処理を施した画像と、そうでない画像とを並べて表示することにより、画像処理の効果をユーザが容易に確認することが可能となる。

上述の一連の処理により、２ＳＩ方式で生成された複数の画像信号に対して、画像処理の効果を確認するための比較表示を行う場合に、合成処理を行わずに特定画像を生成して出力することが可能となる。したがって、画像処理装置１００の負荷を低減しつつ、好適に画像処理の効果を確認することが可能な特定画像を生成することが可能となる。

また、Ｓ７０３で制御部１１６が、入力された複数の画像信号が、２ＳＩ方式で生成されていないと判定した場合、Ｓ７０６で、制御部１１６が合成処理部１１２に複数の画像信号を合成した合成画像を生成するように、合成処理部１１２を制御する。複数の画像信号が、例えば伝送過程でエラーが発生する等が起こらない場合、合成画像は、原画像と同一の画像である。処理はＳ７０７に進む。

Ｓ７０７で、制御部１１６は、合成画像を縮小して縮小画像を生成するように、縮小処理部１１４を制御する。縮小処理部１１４は、生成した縮小画像を表示画像生成部１１５（画像Ｅ）と、画像処理部１１３（画像Ｆ）とに出力する。処理はＳ７０８に進む。

Ｓ７０８で、制御部１１６は、画像Ｆに対して画像処理を実行するように、画像処理部１１３を制御する。画像処理部１１３は、画像Ｆに対して、白黒表示処理を施すとする。画像処理部１１３は、白黒表示処理を施された画像Ｆ´を表示画像生成部１１５に出力する。処理は、Ｓ７０９に進む。

Ｓ７０９で、表示画像生成部１１５は、画像Ｅと、画像Ｆ´とを並べた特定画像を生成して出力部１１８に出力する。処理は、Ｓ７１３に進む。

Ｓ７０６〜Ｓ７０９の処理により、入力された複数の画像信号が、２ＳＩ方式で生成された画像信号でない場合に、複数の画像信号から生成された原画像に対応する合成画像を用いて特定画像を生成して出力することが可能となる。

また、Ｓ７０２で、制御部１１６が、ユーザが比較表示の実行を指示していないと判定した場合、Ｓ７１０で、制御部１１６が合成処理部１１２に複数の画像信号を合成した合成画像を生成するように、合成処理部１１２を制御する。合成処理部１１２は、合成画像を画像処理部１１３に出力する。処理は、Ｓ７１１に進む。

Ｓ７１１で、制御部１１６は、合成画像に画像処理を実行するように画像処理部１１３を制御する。例えば、画像処理部１１３は、白黒表示処理を合成画像に施すとする。画像処理部１１３は、白黒表示処理を施された合成画像を、出力部１１８に出力する。処理は、Ｓ７１３に進む。

また、Ｓ７０１で、制御部１１６が、ユーザが画像処理の実行を指示していないと判定した場合、Ｓ７１２で、制御部１１６は、制御部１１６が合成処理部１１２に複数の画像信号を合成した合成画像を生成するように、合成処理部１１２を制御する。合成処理部１１２は、合成画像を出力部１１８に出力する。処理は、Ｓ７１３に進む。

以上のように、画像処理部１１３は、原画像の画素を間引いた間引き画像に対応する複数の画像信号のうち、いずれか１つの画像信号に基づく画像に画像処理を施した画像と他の画像信号に基づく画像とを並べて配置した特定画像を生成する。したがって、入力された複数の画像信号が、それぞれ単独で原画像に対応する画像を表示可能な画像信号である場合に、複数の画像信号を合成する処理を実行せずに、画像処理の効果を確認可能な画像を生成することが可能となる。これにより、処理装置の回路への負荷を低減しつつ、好適に画像処理の効果を確認することが可能な画像を生成することが可能となる。

なお、特定画像に配置する画像は、３以上の画像であってもよい。例えば、画像信号ａに基づく画像と、画像信号ｂに基づく画像であって、白黒表示処理を施された画像と、画像信号ｃに基づく画像であって、エッジ強調処理を施された画像と、を並べて配置した特定画像を生成することも可能である。

なお、複数の画像信号が２ＳＩ方式で生成された画像信号である場合に、画像信号ａに基づく画像と画像信号ｄとに基づく画像とから、特定画像を生成したが、他の画像信号に基づく画像を用いてもよい。制御部１１６は、入力された画像信号のうち、任意の画像信号に基づく画像を用いて、特定画像を生成することが可能である。

なお、表示画像生成部１１５が生成する特定画像は、処理画像と未処理画像とを並べて配置した画像に限らない。表示画像生成部１１５、適用する画像処理の、処理の強度が異なる画像を並べて配置して特定画像を生成することが可能である。例えば、表示画像生成部１１５は、エッジ強調処理の効果を確認する特定画像を生成する場合、一方の画像のエッジの検出感度よりも、もう一方の画像のエッジの検出感度よりも高くし、検出感度の差を確認するための特定画像を生成してもよい。また、特定画像を構成する画像に対して、異なる種類の画像処理を同時に適用して、それぞれの画像処理を施した画像を同時にユーザが容易に確認することを可能にするものであってもよい。

また、表示画像生成部１１５は、それぞれ異なる画像処理を施した３以上の複数の画像を並べて配置して、特定画像を生成することも可能である。例えば、入力端子１０１ａ〜１０１ｄに入力された画像信号が、それぞれ原画像の画素を間引いた画像信号である場合、表示画像生成部１１５は、各画像信号に基づく画像に異なる画像処理を施した複数の画像を並べて配置して特定画像を生成してもよい。

図９は、２ＳＩ方式で生成された４つの画像信号ａ〜ｄそれぞれに基づく画像に、それぞれ異なる画像処理を施した処理画像からなる特定画像を示す模式図である。図８に示すように、４つの画像信号からなる４つの画像を並べて、特定画像を生成してもよい。また、３つの画像信号を選択して、３つの画像を並べて、特定画像を生成してもよい。

（実施例２）
実施例２の画像処理装置１００は、入力端子１０１ａ〜１０１ｄのうち、いずれか１つの入力端子に正常に画像信号が入力されていないと判定した場合、他の入力端子に入力された画像信号が、２ＳＩ方式で生成された画像信号であっても、合成画像を生成する。

実施例２の画像処理装置１００、および出力処理部１１０の構成は実施例１と同様であるので、説明を省略する。

図１０は、実施例２における表示画像の出力処理を示すフローチャートである。実施例１の図６と同符号を付した工程は、実施例１と同様の処理であるので説明を省略する。実施例２において、Ｓ７０３で、制御部１１６が、入力された複数の画像信号が、２ＳＩ方式で生成されていると判定した場合、処理は、Ｓ８０１に進む。

Ｓ８０１で、制御部１１６は、入力端子１０１ａ〜１０１ｄに有効な画像信号が入力されたか否かを判定する。具体的には、画像信号判定部１０２が、入力端子１０１ａ〜１０１ｄに正常に画像信号が入力されたか否かを判定した結果に基づいて、制御部１１６が、入力端子１０１ａ〜１０１ｄに正常に画像信号が入力されたか否かを判定する。画像信号判定部１０２は、入力端子１０１ａ〜１０１ｄのうち少なくとも１つの入力端子に有効な画像信号が入力されていないことを検出した場合、入力端子１０１ａ〜１０１ｄに有効な画像信号が入力されていないと判定する。

Ｓ８０１で、制御部１１６が、入力端子１０１ａ〜１０１ｄに有効な画像信号が入力されていると判定した場合、処理は、Ｓ７０４に進む。制御部１１６が、入力端子１０１ａ〜１０１ｄに有効な画像信号が入力されていないと判定した場合、処理は、Ｓ７０６に進む。

画像信号が不足した状態で生成された合成画像をさらに縮小した画像に画像処理を施した場合、本来得られる画像処理の効果の確認が困難となることがある。上述の処理により、原画像から生成された複数の画像信号が正常に入力されていない場合に、複数の入力手段のうち、有効に入力された画像信号を用いて、特定画像を生成することが可能となる。したがって、有効でない画像信号の影響を抑制して、好適に画像処理の効果を確認することが可能となる。

（実施例３）
実施例３の画像処理装置１００の出力処理部１１０は、入力された画像信号が、原画像を分割した画像に対応する画像信号である場合、合成した画像のうち一部の領域に画像処理を施して、特定画像を生成する。

実施例３の出力処理部１１０は、実施例１に対して、縮小処理部１１４を持たない。そのほかの構成は、実施例１と同様である。

図１１は、実施例３における表示画像の出力処理を示すフローチャートである。実施例１の図６と同符号を付した工程は、実施例１と同様の処理であるので説明を省略する。実施例３において、Ｓ７０３で、制御部１１６が、入力された複数の画像信号が、２ＳＩ方式で生成されていないと判定した場合、処理は、Ｓ７０６に進む。

Ｓ７０６で、制御部１１６が合成処理部１１２に複数の画像信号を合成した合成画像を生成するように、合成処理部１１２を制御する。合成処理部１１２は、合成画像を画像処理部１１３に出力する。処理は、Ｓ９０１に進む。

Ｓ９０１で、制御部１１６は、合成画像の一部に画像処理を施すように、画像処理部１１３を制御する。例えば、画像処理部１１３は、合成画像の右半分に白黒表示処理を施すとする。図１２は、右半分に白黒表示処理を施された合成画像の模式図である。

制御部１１６は、指示入力部１０３から取得したユーザの指示に応じて、合成画像のうち、画像処理を施す領域を制御することが可能である。例えば、ユーザは、合成画像のうち、画像処理を施す領域と、画像処理を施さない領域との境界Ｒの位置を動的に制御することが可能であるとする。

ユーザが、境界Ｒを動的に制御することにより、ユーザは、注目領域に対して、画像処理を施した場合とそうでない場合とを比較して確認することが可能となる。

上述の処理を行うことにより、縮小処理を行わなくとも、ユーザが画像処理の効果を確認することが可能となる。したがって、縮小処理部１１４が不要となり、回路規模を削減することが可能となる。

なお、ユーザが指示する画像処理を施す領域は、合成画像中の任意の領域を指定するものであれば、種々の方式をとることが可能である。例えば、合成画像中の円形の領域を指定するものであってもよい。また、合成画像中の不定形の領域を指定するものであってもよい。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００ 画像処理装置
１０１ 入力端子
１０２ 画像信号判定部
１０３ 指示入力部
１１０ 出力処理部
１１１ 入力部
１１２ 合成部
１１３ 画像処理部
１１４ 縮小処理部
１１５ 表示画像生成部
１１６ 制御部
１１７ メモリ
１１８ 出力部

Claims (17)

1. 複数の画像信号が入力される複数の入力手段と、
   入力された画像信号に画像処理を適用し、出力画像を生成する処理手段と、
   を備え、
   前記複数の画像信号が原画像の画素を互いに異なる位置で間引いて得られた複数の間引き画像信号である場合、前記処理手段は、前記複数の間引き画像信号のうちいずれかの１つの画像信号に基づく画像に第１の画像処理を施した第１画像と、前記複数の間引き画像信号のうちいずれか１つの画像信号に基づく画像に前記第１の画像処理と異なる第２の画像処理を施した第２画像と、を並べて配置した画像を前記出力画像として生成することを特徴とする画像処理装置。
2. 前記複数の画像信号が前記原画像を分割して得られた複数の分割画像信号である場合、前記処理手段は、前記複数の分割画像信号から前記原画像を縮小した縮小画像を生成し、前記縮小画像に対して前記第１の画像処理を施した画像と、前記縮小画像に対して前記第２の画像処理を施した画像とを並べて配置した画像を前記出力画像として生成することを特徴とする請求項１に記載の画像処理装置。
3. 前記複数の間引き画像信号は、それぞれ前記原画像において異なる画素の画像信号からなり、かつ、各間引き画像信号に基づく画像は、前記原画像の解像度を低減した画像に対応する画像となることを特徴とする請求項１または２に記載の画像処理装置。
4. 前記原画像の画素を間引いた間引き画像に対応する画像信号は、前記原画像に基づいて、２−Ｓａｍｐｌｅ Ｉｎｔｅｒ ｌｅａｖｅ方式で生成された画像信号であることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
5. 前記第１の画像処理と前記第２の画像処理とは、同じ種類の画像処理であって、それぞれ画像処理の強度が異なることを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
6. 前記第１画像は、所定の画像処理が施された画像であって、前記第２画像は、前記所定の画像処理が施されない画像であることを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
7. 前記処理手段は、前記第１画像と、前記第２画像と、前記複数の画像信号のうち第３画像信号に基づく第３画像と、前記複数の画像信号のうち第４画像信号に基づく第４画像と、を並べて配置した画像を前記出力画像として生成することを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
8. 前記複数の入力手段は、Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ規格に対応した複数の入力端子であることを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
9. 請求項１乃至８のいずれか１項に記載の画像処理装置と、
   前記画像処理装置が出力した前記出力画像に基づいて画像を表示する表示手段と、
   を備えることを特徴とする表示装置。
10. 複数の画像信号が入力される複数の入力手段を備える画像処理装置の制御方法であって、
    入力された画像信号に画像処理を適用し、出力画像を生成する処理工程を備え、
    前記複数の画像信号が原画像の画素を互いに異なる位置で間引いて得られた複数の間引き画像信号である場合、前記処理工程は、前記複数の間引き画像信号のうちいずれか１つの画像信号に基づく画像に第１の画像処理を施した第１画像と、前記複数の画像信号のうちいずれか１つの画像信号に基づく画像に前記第１の画像処理と異なる第２の画像処理を施した第２画像と、を並べて配置した画像を前記出力画像として生成することを特徴とする画像処理装置の制御方法。
11. 前記複数の画像信号が前記原画像を分割して得られた複数の分割画像信号である場合、前記処理工程は、前記複数の分割画像信号から前記原画像を縮小した縮小画像を生成し、前記縮小画像に対して前記第１の画像処理を施した画像と、前記縮小画像に対して前記第２の画像処理を施した画像とを並べて配置した画像を前記出力画像として生成することを特徴とする請求項１０に記載の画像処理装置の制御方法。
12. 前記複数の間引き画像信号は、それぞれ前記原画像において異なる画素の画像信号からなり、かつ、各間引き画像信号に基づく画像は、前記原画像の解像度を低減した画像に対応する画像となることを特徴とする請求項１０または１１に記載の画像処理装置の制御方法。
13. 前記原画像の画素を間引いた間引き画像に対応する画像信号は、前記原画像に基づいて、２−Ｓａｍｐｌｅ Ｉｎｔｅｒ ｌｅａｖｅ方式で生成された画像信号であることを特徴とする請求項１０乃至１２のいずれか１項に記載の画像処理装置の制御方法。
14. 前記第１の画像処理と前記第２の画像処理とは、同じ種類の画像処理であって、それぞれ画像処理の強度が異なることを特徴とする請求項１０乃至１３のいずれか１項に記載の画像処理装置の制御方法。
15. 前記第１画像は、所定の画像処理が施された画像であって、前記第２画像は、前記所定の画像処理が施されない画像であることを特徴とする請求項１０乃至１４のいずれか１項に記載の画像処理装置の制御方法。
16. 請求項１０乃至１５のいずれか１項に記載の制御方法の各工程を演算処理装置に実行させるためのプログラム。
17. 請求項１６に記載のプログラムを記憶する、演算処理装置が読出し可能な記憶媒体。

Images