JP2014138410A - 画像処理装置及びその制御方法、プログラム - Google Patents

Abstract

【課題】 読出領域、読出頻度、スキップ間隔のうちの少なくとも一つを変更することが可能な撮像素子を用いるとき、画像の読出頻度、スキップ間隔、または画像が最後に更新された時刻からの経過時間を視覚的に区別可能な処理を行うことができない。
【解決手段】 撮像素子から読み出された画像を表示するための画像処理を行う。第１の読出モードにて撮像部で読み出された第１の画像と、第２の読出モードにて撮像部で読み出された第２の画像を更新しながら表示する場合に、第１の画像と第２の画像とについて、画像読出の読出頻度、画素更新後経過時間、画像読出のスキップ間隔、前記撮像素子のビット深さ、及び前記撮像素子のバンド数のうちの少なくとも一つに従って視覚的に区別可能な処理を行う。
【選択図】 図１

Description

本発明は、撮像素子から読み出された画像を表示するための画像処理を行う画像表示装置、及びその制御方法に関するものである。特に、画像読出の読出頻度、画像読出のスキップ間隔、画像が最後に更新された時刻からの経過時間、撮像素子のビット深さ、または撮像素子のバンド数を視覚的に区別可能な処理を行う画像処理装置及びその制御方法に関するものである。

近年の撮像素子には、その読出モードを「全画素読出モード」、「部分読出モード」または「間引き読出モード」のいずれかに切り替えることのできるものが存在する。「全画素読出モード」とは、撮像素子上のすべての画素から信号を読み出すモードである。「部分読出モード」とは、撮像素子上の任意の領域に存在する画素のみから信号を読み出すモードである。「間引き読出モード」とは、撮像素子上の画素を任意の間隔でスキップしながら信号を読み出すモードである。また、「部分読出モード」と「間引き読出モード」とを組み合わせ、任意の領域上の画素を任意の間隔でスキップしながら信号を読み出すことも可能である。

従来、読出モードを変更可能な撮像素子を用いた監視カメラシステムが存在する。

特許文献１では、撮像素子上の指定された領域を短い時間間隔で読み出し、それ以外の領域を、この時間間隔より長い時間間隔で複数回に分けて間引き読み出しするシステムが開示されている。特許文献１では、モニタの左側に全体間引き画像を表示し、またモニタの右側に部分画像を拡大した画像を表示するシステムも開示している。

また、特定の領域のみを読み出し続け、特定の領域以外の領域を読み出さないようにする撮像システムも構成可能である。

特開２００９ー１７１５４５号公報

しかしながら、特許文献１で開示されている撮像システムは、全体間引き画像と部分画像とがそれぞれどの程度の頻度で読みだされているかを明示的に表示する方法については明らかではない。そのため、全体間引き画像及び部分画像の更新頻度を視覚的に知ることができないという課題がある。また、画像読出のスキップ間隔を視覚的に区別できないという課題がある。

特定の領域のみを読み出し続け、特定の領域以外の領域を読み出さないようにする場合においても、特定の領域以外の領域が、どれくらいの間、更新されないままになっているかを視覚的に知ることができないという課題がある。

本発明は上記の課題を解決するためになされたものである。本発明の目的は、画像読出方法を変更可能な撮像素子から読み出された画像を表示する際、画像読出の読出頻度、画像読出のスキップ間隔、または画像が最後に更新された時刻からの経過時間を視覚的に区別可能な処理を行うことを可能とすることである。

上記の目的を達成するための本発明による画像処理装置は以下の構成を備える。即ち、 撮像素子から読み出された画像を表示するための画像処理を行う画像処理装置であって、
前記撮像素子から画像を読み出す撮像部と、
第１の読出モードにて前記撮像部で読み出された第１の画像と、第２の読出モードにて前記撮像部で読み出された第２の画像を更新しながら表示する場合に、前記第１の画像と前記第２の画像とについて、画像読出の読出頻度、画素更新後経過時間、画像読出のスキップ間隔、前記撮像素子のビット深さ、及び前記撮像素子のバンド数のうちの少なくとも一つに従って視覚的に区別可能な処理を行う画像処理部と
を備える。

本発明によれば、画像読出方法を変更可能な撮像素子から読み出された画像を表示する際、画像読出の読出頻度、画像読出のスキップ間隔、または画像が最後に更新された時刻からの経過時間を視覚的に表現可能な画像表示を行うことができる。

画像処理装置の構成の一実施例を示す図である。 画像表示部の表示例を示す図である。 撮像指示パラメータを設定するためのユーザインタフェースの例を示す図である。 撮像指示パラメータの例を示す図である。 画像処理部の手順を示すフローチャートである。 読出頻度と画像処理の効果の強さとの関係の一例と、読出頻度に従って画像処理を行う場合の例を示す図である。 画素更新後経過時間と画像処理の効果の強さとの関係の一例と、画素更新後経過時間に従って画像処理を行う場合の例を示す図である。 スキップ間隔と画像処理の効果の強さとの関係の一例と、スキップ間隔に従って画像処理を行う場合の例を示す図である。

以下、添付の図面を参照して、本発明をその好適な実施形態に基づいて詳細に説明する。尚、以下の実施形態において示す構成は一例に過ぎず、本発明は図示された構成に限定されるものではない。

図１は画像処理装置の構成の一例を示す図である。

図１において、画像処理装置は、画像取得装置１００と画像表示装置１５０とから構成される。画像取得装置１００は、撮像制御部１０１と、撮像部１０２と、画像送信部１０３とから構成される。また、画像表示装置１５０は、撮像指示パラメータ設定部１５１と、画像受信部１５２と、画像処理部１５３と、記憶部１５４と、画像表示部１５５とから構成される。

撮像指示パラメータ設定部１５１は、ユーザによるマウス等の入力インタフェース（Ｉ／Ｆ）１６０の操作結果を用いて撮像指示パラメータを設定する。撮像指示パラメータとは、撮像部１０２の撮像方法に関するパラメータである。例えば、撮像指示パラメータには、撮像素子上の領域、及び撮像素子上の画素のスキップ間隔、撮像素子の読出頻度のうちの少なくとも一つが含まれる。撮像素子上の領域は、例えば、矩形、もしくは任意の多角形である。他の任意の形をした領域でも構わない。また、領域の数は１個以上である。読出頻度は、一定の時間内に撮像素子から画像を読み出す回数を表す。スキップ間隔は、画素を読み飛ばす割合を表す。撮像指示パラメータの設定方法は後述する。

撮像制御部１０１は、撮像指示パラメータ設定部１５１により設定された撮像指示パラメータを受信し、撮像部１０２による撮像方法（画像取得方法）を制御する。

撮像部１０２は、撮像素子に結像された光に応じた信号を、撮像制御部１０１によって設定された撮像指示パラメータに基づき取得する。そして、その信号に対して、プログラム等によって定められた方法に従ってＡＤ変換等の処理を行い、画像を形成する。撮像部１０２は、複数の読出領域を設定可能であり、また、その読出領域の変更または取得制御の少なくとも一方を実行可能である。ここで、取得制御とは、例えば、画像の読出頻度またはスキップ間隔を制御することである。取得制御は、これらに限定されるものではなく、例えば、撮像素子のビット深さの制御や、撮像素子のバンド数の制御であってもよい。

画像送信部１０３は、画像、画像形成に使用されたパラメータである撮像実行パラメータ、及び画像作成時刻を撮像部１０２から受信し、画像受信部１５２へ送信する。撮像実行パラメータに含まれる項目は撮像指示パラメータと同様である。しかし、撮像素子のハードウェア的制約により、撮像実行パラメータの値は撮像指示パラメータの値とは必ずしも一致しない。送信される画像は、ＪＰＥＧ等のように静止画の連続列であっても、ＭＰＥＧ等のように静止画の連続列から作成した動画であっても構わない。

画像受信部１５２は、画像、撮像実行パラメータ、及び画像作成時刻を画像送信部１０３から受信し、画像処理部１５３へ渡す。

画像処理部１５３は、画像受信部１５２から、画像、撮像実行パラメータ、及び画像作成時刻を受信する。次に、受信したこれらの情報を用いて、記憶部１５４に保存された画像の部分または全体を更新した画像を生成する。さらに、画像読出の読出頻度、画像読出のスキップ間隔、または画像が最後に更新された時刻からの経過時間に従って視覚的に区別可能な処理を行う。詳細は後述する。

記憶部１５４は、画像処理部１５３により過去に保存された画像と、画素更新時刻情報を保存する。画素更新時刻情報とは、最後に画素を更新した画像の画像作成時刻である。画素更新時刻情報は、すべての画素についての画像更新時刻を保持する。例えば、画像作成時刻がそれぞれ０、１００、２００である３枚の画像によって画像全体が順番に更新され、次いで画像作成時刻がそれぞれ２１０、２２０、２３０である３枚の画像によってある領域の画素のみが順番に更新された直後のことを考える。この場合、ある領域に属する画素の画像更新時刻は２３０となり、それ以外の領域に属する画素の画像更新時刻は２００となる。

画像表示部１５５は、画像処理部１５３により生成された画像をディスプレイ等の外部装置に表示する。ここでは、例として、最初は撮像素子を全画素読出モード（第１の読出モード）で動作させ、途中で撮像素子を部分読出モード（第２の読出モード）に変更し、１０秒間経過した時点において表示される画像について説明する。この場合に、画像表示部１５５が表示する画像２００を図２に示す。

全体画像表示部２０１は、撮像素子が全画素読出をしたときに撮像される領域と同じ画角の画像を表示する。この場合は、１０秒前に最後に全画素読出モードで取得した画像が、１０秒間という経過時間に対応して、彩度を落とした状態で、つまり、白黒画像に近づいた状態で表示されている。

部分読出領域２０２は、撮像素子の部分読出モードにて部分読出された画像（部分画像）が、全画素読出モードにて全画素読出された画像（全体画像）上に重畳されている領域に相当する。部分読出領域２０２に相当する画像は、画像送信部１０３から高い頻度で送信されてくる画像により頻繁に更新される。この部分は、彩度を落とす画像処理は行わない。このため、全体画像表示部２０１を見ることで、最後に画素が読みだされてから更新されていない部分を視覚的に確認することができる。

部分画像表示部２０３は、部分読出領域２０２に相当する画像を拡大して表示する。
ここでは全体画像表示部２０１と部分画像表示部２０３が同一のウィンドウ内に表示される場合を示しているが、これらがそれぞれ別のウィンドウに表示、もしくは別の外部装置に表示されても構わない。また、部分読出領域２０２が複数存在し、それぞれの部分読出領域２０２に相当する複数の部分画像表示部２０３が存在しても構わない。

ここで、撮像指示パラメータの設定方法、画像の重畳方法について詳細な説明を加える。

撮像指示パラメータは、撮像指示パラメータ設定部１５１により設定する。撮像指示パラメータの設定は、例えば、ユーザがマウスやキーボード等の入力機器を用いて設定する。

まず、ユーザは、全体画像上でドラッグ操作を行って矩形を対角指定することで、部分読出対象の領域を指定する。続いて、撮像素子上の画素のスキップ間隔を指定する。図３は、スキップ間隔を指定するユーザインタフェース３００の例である。

図３において、ラジオボタン３０１は、画素のスキップを行わない設定を選択するためのコントロールである。ラジオボタン３０２は、画素の縦の列及び横の行をそれぞれ１／２の密度で読み出す設定を選択するためのコントロールである。この場合、読出画素の数は、画素のスキップを行わない場合に比べておよそ１／４となる。ラジオボタン３０３は、画素の縦の列及び横の行をそれぞれ１／４の密度で読み出す設定を選択するためのコントロールである。ラジオボタン３０４は、テキストフィールド３０５に任意の数字を入れることで、任意のスキップ間隔を設定可能なコントロールである。

ラジオボタン３０１〜３０４はいずれか１つを選択することができ、図３では、ラジオボタン３０２が選択されている状態を示している。

また、テキストフィールド３０６に、任意の数字を入れることで任意の読出頻度を設定可能である。

そして、ＯＫボタン３０７を押下することで、選択されているあるいは指定されているパラメータがスキップ間隔として指定される。スキップ間隔の指定をキャンセルする場合には、キャンセルボタン３０８を押下する。

また、撮像指示パラメータ設定部１５１は、外部センサ（不図示）や映像解析処理部（不図示）の出力結果に従って撮像指示パラメータを自動的に設定するようにしてもよい。例えば、動体検出により動体が存在する位置と動体の大きさとを取得して、動体が含まれるような領域と、動体の大きさに応じたスキップ間隔、及び動体の速度に応じた読出頻度を自動的に撮像指示パラメータとして設定するようにしてもよい。

さらに、撮像指示パラメータ設定部１５１は、設定された撮像指示パラメータをあらかじめ定められたプロトコルに従って撮像制御部１０１へ送信する。図４はプロトコルの一例としてテキストファイル表現したものである。

図４は、部分読出領域が２つある場合の撮像指示パラメータの例である。１つ目の部分読出領域４０１は、左上の座標が（ｘ，ｙ）＝（２００，２００）かつ横幅と縦幅がそれぞれ８００及び６００、スキップ間隔は１／２、読出頻度は１秒当たり１０回であることを表している。２つ目の部分読出領域４０２は、左上の座標が（ｘ，ｙ）＝（１３００，６００）かつ横幅と縦幅がそれぞれ２００及び１５０で、画素のスキップは行わず、読出頻度は１秒当たり３０回であることを表している。

画像処理部１５３の動作について、図５のフローチャートを用いて詳しく説明する。

ステップＳ５０１において、画像処理部１５３は、記憶部１５４に過去画像が存在するかどうかを判定する。ここで、過去画像とは、画像処理部１５３により保存された過去の重畳画像のことである。この過去画像の画角は、撮像素子が全画素読出したときの画角に一致する。但し、過去画像の解像度は、必ずしも撮像素子が全画素読出したときの解像度と一致するとは限らない。例えば、撮像素子の解像度が横２０００ピクセル、縦１０００ピクセルの場合、過去画像の解像度は横２０００ピクセル、縦１０００ピクセルでもよいし、横４００ピクセル、縦２００ピクセルでもよい。

過去画像が存在する場合（ステップＳ５０１でＹＥＳ）、ステップＳ５０２へ進み、画像処理部１５３は、記憶部１５４に保存された過去画像と、画素更新時刻情報とを読み込む。一方、過去画像が存在しない場合（ステップＳ５０１でＮＯ）、ステップＳ５０３へ進み、画像処理部１５３は、過去画像の代わりに、あらかじめ用意した初期画像を読み込む。初期画像は、例えば、画像上のすべての画素が単一色からなる画像である。

ステップＳ５０４において、画像処理部１５３は、画像受信部１５２から、画像、撮像実行パラメータ、及び画像作成時刻を受信する。ここで、受信する画像を、以下では最新画像と呼ぶ。

ステップＳ５０５において、画像処理部１５３は、過去画像上に最新画像をその画角が同一になるように重畳して重畳画像を生成する。画角の計算は、撮像素子を全画素読出したときの解像度、過去画像の解像度、及び最新画像の撮影実行パラメータを用いて行う。このとき、同時に、画素更新時刻情報を更新する。

ステップＳ５０６において、画像処理部１５３は、ここで得られた重畳画像、及び画素更新時刻情報を、記憶部１５４に保存する。

ステップＳ５０７において、画像処理部１５３は、重畳画像上の各画素に対して、ステップＳ５０８、ステップＳ５０９、及びステップＳ５１０の内の少なくとも一つの視覚的に区別可能な処理を行うことを決定する。この判定は、事前のユーザによる指定に基づいてもよいし、画像受信部１５２から受信する撮像実行パラメータに基づいて自動的に行ってもよい。

ステップＳ５０８では、画像処理部１５３は、重畳画像上の各画素に対して、画像読出の読出頻度に従って視覚的に区別可能な処理を行う。

画像読出の読出頻度に従って視覚的に区別可能な処理を行う場合の例を、図６を用いて説明する。この例では、図６（Ａ）に示すように、読出頻度が少ない範囲ほど画像処理の効果を強くする。読出頻度は、画像処理部１５３において各画素が更新される回数をカウントすることで算出してもよいし、画像送信部１０３から画像受信部１５２へ受け渡される撮像実行パラメータの中に読出頻度を含めるようにしてもよい。尚、読出頻度と画像処理の効果の強さの関係は任意でよい。例えば、読出頻度があらかじめ設定したある閾値より小さい場合のみ画像処理を行うようにしてもよい。

図６（Ｂ）では、画面全体を３秒に１回の割合で読み出し、領域７０１を１秒に１０回の割合で読み出し、領域７０２を１秒に３０回の割合で読み出している。読出頻度が小さい領域ほど画像処理の効果が強くなっている。

ステップＳ５０９では、画像処理部１５３は、重畳画像上の各画素に対して、画素更新後経過時間を算出する。画素更新後経過時間とは、最新画像の画像作成時刻と、重畳画像の画素更新時刻との差分である。次に、画素更新後経過時間に従って視覚的に区別可能な処理を行う。

画素更新後経過時間に従って視覚的に区別可能な処理を行う場合の例を、図７を用いて説明する。この例では、図７（Ａ）に示すように、画素更新後経過時間が大きい範囲ほど画像処理の効果を強くする。尚、画素更新後経過時間と画像処理の効果の強さの関係は任意でよい。例えば、画素更新後経過時間があらかじめ設定したある閾値より大きい場合のみ画像処理を行うようにしてもよい。

図７（Ｂ）では、時刻ｔ＝０からｔ＝６までの間は全画素読出を行い、時刻ｔ＝７以降は画面中央部に対する部分読出を行った場合において、画像処理部１５３による画像処理の後に得られる画像を表している。時刻ｔ＝０から時刻ｔ＝６までの間は、画像上の各画素のすべてが更新される。そのため、画像上の各画素について、画素更新後経過時間は０である。時刻ｔ＝７以降では、部分読出される領域に属する画素のみが更新される。従って、図９の７０３、７０４、及び７０５では、画面中央部の部分読出領域２０２に属する画素の画素更新後経過時間は０であるが、それ以外の領域に属する画素の画素更新後経過時間は徐々に大きくなる。そして、画素更新後経過時間が大きくなるにつれて画像処理の効果が強くなる。

ステップＳ５１０では、画像処理部１５３は、重畳画像上の各画素に対して、画像読出のスキップ間隔に従って視覚的に区別可能な処理を行う。

画像読出のスキップ間隔に従って視覚的に区別可能な処理を行う場合の例を図８を用いて説明する。この例では、図８（Ａ）に示すように、読み飛ばされる画素の割合が高い範囲ほど画像処理の効果を強くする。尚、スキップ間隔と画像処理の効果の強さの関係は任意でよい。例えば、スキップを行う場合のみ画像処理を行うようにしてもよい。

図８（Ｂ）では、画面全体を１／８のスキップ間隔で読み出し、領域１１０１を１／２のスキップ間隔で読み出し、領域７０２をスキップなしで読み出している。読み飛ばされる画素の割合が高い範囲ほど画像処理の効果が強くなっている。

ステップＳ５０８、ステップＳ５０９またはステップＳ５１０で行う視覚的に区別可能な処理の例として、以下のものがある。例えば、画像の彩度を下げる処理、即ち、カラー画像を白黒画像に近づける処理、点や斜線等の均一のパターンによる網掛け処理、画像のコントラストを下げる処理、画像の明度を下げる処理、ぼかし処理、モザイク処理等の画像処理がある。

視覚的に区別可能な処理の例はこれらに限定されるものではなく、画像読出の読出頻度、スキップ間隔、または画素更新後経過時間を視覚的に区別可能な処理を行うことのできる画像処理ならば何でもよい。例えば、画像の読出領域に相当する枠線の色を変える処理、枠線の太さを変える処理、アイコンの表示処理、所定の画像（例えば、数値等）の表示処理がある。

また、画像の読出頻度の高低に応じて、視覚的に区別可能な処理を多段階に行っても良い。また、画素更新後経過時間の大小に応じて、視覚的に区別可能な処理を多段階に行っても良い。また、スキップ間隔の大小に応じて、視覚的に区別可能な処理を多段階に行っても良い。

例えば、読出頻度を第１の読出頻度（例えば、１０ｆｐｓ）と第２の読出頻度（例えば、３０ｆｐｓ）に切替可能な撮像部である場合には、１０ｆｐｓで読み出す第１の読出モードにて読み出した第１の画像と３０ｆｐｓで読み出す第２の読出モードにて読み出した第２の画像とを視覚的に区別可能な処理を行っても良い。この場合、同一画面内で第１の画像と第２の画像とを対比表示しても良いし、異なる表示装置にそれぞれの画像を表示するようにしても良い。この表示制御については、上述の全画素読出モード（第１の読出モード）と部分読出モード（第２の読出モード）について適用することももちろん可能である。つまり、本発明の趣旨としては、撮像部における複数種類の読出モード間で読み出した画像を視覚的に区別可能となる処理を実現できれば良く、その画像の出力方法としては、上述の図７や図８の表示例に限定されるものではない。

以上説明したように、本実施形態によれば、画像読出方法を変更可能な撮像素子から読み出された画像を表示する際、画像読出の読出頻度、画像読出のスキップ間隔、または画像が最後に更新された時刻からの経過時間を視覚的に区別可能な処理を行うことが可能となる。

尚、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステムまたは装置に供給し、そのシステムまたは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims (13)

1. 撮像素子から読み出された画像を表示するための画像処理を行う画像処理装置であって、
   前記撮像素子から画像を読み出す撮像部と、
   第１の読出モードにて前記撮像部で読み出された第１の画像と、前記第１の読出モードとは異なる第２の読出モードにて前記撮像部で読み出された第２の画像を更新しながら表示する場合に、前記第１の画像と前記第２の画像とについて、画像読出の読出頻度、画素更新後経過時間、画像読出のスキップ間隔、前記撮像素子のビット深さ、及び前記撮像素子のバンド数のうちの少なくとも一つに従って視覚的に区別可能な処理を行う画像処理部と
   を備えることを特徴とする画像処理装置。
2. 前記第１の読出モードは、第１の読出頻度で前記撮像素子から画像を読み出す読出モードであり、
   前記第２の読出モードは、前記第１の読出頻度とは異なる第２の読出頻度で前記撮像素子から画像を読み出す読出モードである
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記第１の読出モードは、前記撮像素子上のすべての画素から信号を読み出す全画素読出モードであり、
   前記第２の読出モードは、前記撮像素子上の任意の領域に存在する画素のみから信号を読み出す部分読出モードである
   ことを特徴とする請求項１に記載の画像処理装置。
4. 前記画像処理部は、前記全画素読出モードにて前記撮像部で読み出された全体画像上に、前記部分読出モードにて前記撮像部で読み出された部分画像を重畳して更新しながら表示する場合に、前記全体画像と前記部分画像とについて、画像読出の読出頻度、画素更新後経過時間、及び画像読出のスキップ間隔のうちの少なくとも一つに従って視覚的に区別可能な処理を行う
   ことを特徴とする請求項３に記載の画像処理装置。
5. 前記撮像部は、前記画像読出の読出頻度の制御、前記画像読出のスキップ間隔の制御、前記撮像素子のビット深さの制御、前記撮像素子のバンド数の制御の少なくとも一つを実行する
   ことを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
6. 前記視覚的に区別可能な処理は、
   画像の彩度を下げる処理、網掛け処理、画像のコントラストを下げる処理、画像の明度を下げる処理、ぼかし処理、モザイク処理の少なくとも一つである
   ことを特徴とする請求項１乃至５のいずれか1項に記載の画像処理装置。
7. 前記視覚的に区別可能な処理は、
   画像の読出領域に相当する枠線の色を変える処理、前記枠線の太さを変える処理、アイコンの表示処理、値の表示処理の少なくとも一つである
   ことを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
8. 前記撮像部は、複数の読出領域を設定可能であり、
   前記画像処理部は、前記複数の読出領域の各読出領域から読み出される画像それぞれについて、前記画像読出の読出頻度、前記画素更新後経過時間、及び前記画像読出のスキップ間隔のうちの少なくとも一つに従って視覚的に区別可能な処理を行う
   ことを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
9. 前記画像処理部は、前記画像読出の読出頻度の高低に応じて、前記視覚的に区別可能な処理を多段階に行う
   ことを特徴とする請求項１乃至８のいずれか１項に記載の画像処理装置。
10. 前記画像処理部は、前記画素更新後経過時間の大小に応じて、前記視覚的に区別可能な処理を多段階に行う
    ことを特徴とする請求項１乃至８のいずれか１項に記載の画像処理装置。
11. 前記画像処理部は、前記画像読出のスキップ間隔の大小に応じて、前記視覚的に区別可能な処理を多段階に行う
    ことを特徴とする請求項１乃至８のいずれか１項に記載の画像処理装置。
12. 撮像素子から読み出された画像を表示するための画像処理を行う画像処理装置の制御方法であって、
    前記撮像素子から画像を読み出す撮像工程と、
    第１の読出モードにて前記撮像工程で読み出された第１の画像と、第２の読出モードにて前記撮像工程で読み出された第２の画像を更新しながら表示する場合に、前記第１の画像と前記第２の画像とについて、画像読出の読出頻度、画素更新後経過時間、画像読出のスキップ間隔、前記撮像素子のビット深さ、及び前記撮像素子のバンド数のうちの少なくとも一つに従って視覚的に区別可能な処理を行う画像処理工程と
    を備えることを特徴とする画像処理装置の制御方法。
13. 撮像素子から読み出された画像を表示するための画像処理を行う画像処理装置をコンピュータに機能させるためのプログラムであって、
    前記コンピュータを、
    前記撮像素子から画像を読み出す撮像部と、
    第１の読出モードにて前記撮像部で読み出された第１の画像と、前記第２の読出モードにて前記撮像部で読み出された第２の画像を更新しながら表示する場合に、前記第１の画像と前記第２の画像とについて、画像読出の読出頻度、画素更新後経過時間、画像読出のスキップ間隔、前記撮像素子のビット深さ、及び前記撮像素子のバンド数のうちの少なくとも一つに従って視覚的に区別可能な処理を行う画像処理部と
    して機能させることを特徴とするプログラム。