JP6365097B2 - 画像処理方法、撮像装置、画像処理装置、及び、撮像表示装置 - Google Patents
画像処理方法、撮像装置、画像処理装置、及び、撮像表示装置 Download PDFInfo
- Publication number
- JP6365097B2 JP6365097B2 JP2014162104A JP2014162104A JP6365097B2 JP 6365097 B2 JP6365097 B2 JP 6365097B2 JP 2014162104 A JP2014162104 A JP 2014162104A JP 2014162104 A JP2014162104 A JP 2014162104A JP 6365097 B2 JP6365097 B2 JP 6365097B2
- Authority
- JP
- Japan
- Prior art keywords
- image signal
- image
- output
- signal
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Studio Devices (AREA)
Description
本発明は、画像処理方法、撮像装置、画像処理装置、及び、撮像表示装置に関する。
いわゆるミラーレス一眼のデジタルカメラでは、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-Oxide Semiconductor）イメージセンサ等のイメージセンサで撮像した画像信号に応じた画像をリアルタイムで筐体裏面に設けられた液晶パネルや筐体上部に取り付けられた電子ビューファインダー（以下、ＥＶＦ[Electronic View Finder]と称する）等に表示するいわゆるライブビュー動作により、被写体の画像を確認することができるようになっている（例えば、特許文献１）。
しかしながら、このライブビュー動作では、イメージセンサで被写体を撮像してからビューファインダー等に画像が表示されるまでに顕著な遅延が生じている。このため、動きのある被写体にカメラを向けて追従させることが困難になる。さらに、表示されている被写体の画像に基づいて静止画像の撮像を指示すると、表示されていた被写体の画像と実際に撮像される静止画の画像とにタイミングのずれが生じ、特に動きの早い被写体の場合には、意図した静止画を撮像することが困難になる。
本発明は、上述した事情に鑑みてなされたものであり、撮像から表示までの遅延時間を短縮することを解決課題の一つとする。
以上の課題を解決するために、本発明に係る画像処理方法は、被写体を撮像する撮像部が出力する撮像信号に基づいて、前記撮像部よりも高いフレームレートで画像表示が可能な表示部の各ラインで表示すべき画像を示す画像信号を生成し、生成した前記画像信号を前記撮像部よりも高いフレームレートで画像表示が可能な表示部に出力する画像処理方法であって、前記撮像部が前記撮像信号を出力してから、前記画像信号を生成するまでの時間を画像処理時間とし、前記撮像信号のフレームの開始から、前記表示部に出力する前記画像信号のフレームの開始までの時間を位相差とし、前記撮像部のフレームレートを第１フレームレートとし、前記表示部で表示可能な最高のフレームレートを第２フレームレートとしたとき、前記位相差が、前記画像処理時間より長い場合には、前記表示部のフレームレートが前記第２フレームレートとなるように前記画像信号を前記表示部に出力することにより、前記位相差を次第に小さくし、前記位相差が、前記画像処理時間以下となった後は、前記表示部のフレームレートが前記第１フレームレートとなるように前記画像信号を前記表示部に出力する、ことを特徴とする。
この発明によれば、撮像信号のフレームの開始から画像信号のフレームの開始までの時間である位相差が、画像処理時間よりも長い場合には、撮像部よりも高いフレームレートである第２フレームレートで画像信号を出力することで、表示部のフレーム期間と撮像部のフレーム期間との差分に相当する期間ずつ位相差を縮小する。そして、位相差が画像処理時間以下となった後は、表示部のフレームレートが撮像部のフレームレートである第１フレームレートとなるようにすることで、画像信号を撮像信号に同期するように出力する。
このため、本発明によれば、位相差が、画像処理時間よりも大きい場合において、位相差を画像処理時間以下となるまで段階的に短くすることができ、位相差が画像処理時間以下に収束した後は当該位相差を維持することができるため、位相差を画像処理時間以下となるまで段階的に短くしない場合と比較して、撮像から表示までの遅延時間を短縮することができる。
これにより、例えば、画像処理の手法の変更等に伴う画像処理時間の変更がある場合や、ライン毎に画像処理時間が変動する場合、表示部をフレームレートが異なるものに交換する場合、または、撮像部をフレームレートが異なるものに交換する場合等、撮像部及び表示部の位相差、撮像部のフレームレート、並びに、表示部で表示可能な最高のフレームレートのうち、一部または全部が変化する場合であっても、位相差を画像処理時間以下の長さに自動的に収束させることが可能となる。
なお、画像処理時間が、表示部のライン毎に変動する場合には、例えば、当該変動する時間のうち最大の時間を、画像処理時間と看做してもよい。
このため、本発明によれば、位相差が、画像処理時間よりも大きい場合において、位相差を画像処理時間以下となるまで段階的に短くすることができ、位相差が画像処理時間以下に収束した後は当該位相差を維持することができるため、位相差を画像処理時間以下となるまで段階的に短くしない場合と比較して、撮像から表示までの遅延時間を短縮することができる。
これにより、例えば、画像処理の手法の変更等に伴う画像処理時間の変更がある場合や、ライン毎に画像処理時間が変動する場合、表示部をフレームレートが異なるものに交換する場合、または、撮像部をフレームレートが異なるものに交換する場合等、撮像部及び表示部の位相差、撮像部のフレームレート、並びに、表示部で表示可能な最高のフレームレートのうち、一部または全部が変化する場合であっても、位相差を画像処理時間以下の長さに自動的に収束させることが可能となる。
なお、画像処理時間が、表示部のライン毎に変動する場合には、例えば、当該変動する時間のうち最大の時間を、画像処理時間と看做してもよい。
また、上述した画像処理方法において、前記位相差が前記画像処理時間より長い場合には、前記画像信号を生成した後、生成した画像信号の示す画像が前記表示部で表示可能となるまで待機して、生成した画像信号を前記表示部に出力する、ことを特徴としてもよい。
この態様によれば、表示部が画像信号の示す画像を表示可能となるまで待機することで、表示部のフレームレートが第２フレームレートとなるように画像信号を出力するため、撮像部及び表示部の位相差を、段階的に短縮することができる。
この態様によれば、表示部が画像信号の示す画像を表示可能となるまで待機することで、表示部のフレームレートが第２フレームレートとなるように画像信号を出力するため、撮像部及び表示部の位相差を、段階的に短縮することができる。
また、上述した画像処理方法において、前記表示部は一定周期で出力される水平同期パルスに同期して動作し、生成された前記画像信号を前記水平同期パルスに同期して前記表示部に出力し、前記位相差が前記画像処理時間以下となった後において、前記画像信号を生成する画像信号生成時刻が、前記表示部において前記画像信号の示す画像を表示可能となる表示可能時刻以降となる場合、前記画像信号生成時刻の後に最初に出力される水平同期パルスに同期して前記画像信号を前記表示部出力する、ことを特徴としてもよい。
この態様によれば、画像信号の生成から出力までの間隔を、水平同期パルスにより定められる水平走査期間以下とすることができる。つまり、水平同期パルスにより定められる水平走査期間の精度で、各ラインの画像信号の出力タイミングを制御することができる。このため、画像信号の生成に要する画像処理時間がライン毎に変動する場合であっても、ライン毎の画像処理時間に応じたタイミングで、各ラインの画像信号を表示部に対して出力することが可能となる。
この態様によれば、画像信号の生成から出力までの間隔を、水平同期パルスにより定められる水平走査期間以下とすることができる。つまり、水平同期パルスにより定められる水平走査期間の精度で、各ラインの画像信号の出力タイミングを制御することができる。このため、画像信号の生成に要する画像処理時間がライン毎に変動する場合であっても、ライン毎の画像処理時間に応じたタイミングで、各ラインの画像信号を表示部に対して出力することが可能となる。
また、上述した画像処理方法において、前記表示部は水平同期パルスに同期して動作し、生成された前記画像信号を前記水平同期パルスに同期して前記表示部に出力し、前記位相差が前記画像処理時間以下となった後において、前記画像信号を生成する画像信号生成時刻が、前記表示部において前記画像信号の示す画像を表示可能となる表示可能時刻以降となる場合、前記画像信号生成時刻までは、前記水平同期パルスの出力を停止するとともに、前記画像信号の出力を停止し、前記画像信号生成時刻の後は、前記水平同期パルスを出力するとともに、当該出力される水平同期パルスに同期して前記画像信号を出力する、ことを特徴としてもよい。
この態様によれば、水平同期パルスにより定められる水平走査期間の時間長が、各ラインの画像信号の出力が可能となるタイミングに応じて定められる。このため、画像信号の生成に要する画像処理時間がライン毎に変動する場合であっても、ライン毎の画像処理時間に応じたタイミングで、各ラインの画像信号を表示部に対して出力することが可能となる。
この態様によれば、水平同期パルスにより定められる水平走査期間の時間長が、各ラインの画像信号の出力が可能となるタイミングに応じて定められる。このため、画像信号の生成に要する画像処理時間がライン毎に変動する場合であっても、ライン毎の画像処理時間に応じたタイミングで、各ラインの画像信号を表示部に対して出力することが可能となる。
また、本発明に係る撮像装置は、被写体を撮像して撮像信号を出力する撮像部と、前記撮像信号に基づいて、前記撮像部よりも高いフレームレートで画像表示が可能な表示部の各ラインで表示すべき画像を示す画像信号を生成し、生成した前記画像信号を前記表示部に出力する画像信号生成部と、前記画像信号生成部が前記画像信号を出力するタイミングを制御するタイミング制御部と、を備え、前記撮像部が前記撮像信号を出力してから、前記画像信号生成部が前記画像信号を生成するまでの時間を画像処理時間とし、前記撮像信号のフレームの開始から、前記表示部に出力する前記画像信号のフレームの開始までの時間を位相差とし、前記撮像部のフレームレートを第１フレームレートとし、前記表示部で表示可能な最高のフレームレートを第２フレームレートとしたとき、前記タイミング制御部は、前記位相差が、前記画像処理時間より長い場合において、前記表示部のフレームレートが前記第２フレームレートとなるように、前記画像信号生成部に前記画像信号を出力させることにより、前記位相差を次第に小さくする第１のタイミング制御と、前記位相差が、前記画像処理時間以下となった後において、前記表示部のフレームレートが前記第１フレームレートとなるように、前記画像信号生成部に前記画像信号を出力させる第２のタイミング制御と、を実行可能である、ことを特徴とする。
この発明によれば、位相差が、画像処理時間よりも大きい場合において、位相差を画像処理時間以下となるまで段階的に短くすることができ、位相差が画像処理時間以下に収束した後は当該位相差を維持することができる。
この発明によれば、位相差が、画像処理時間よりも大きい場合において、位相差を画像処理時間以下となるまで段階的に短くすることができ、位相差が画像処理時間以下に収束した後は当該位相差を維持することができる。
また、本発明に係る画像処理装置は、被写体を撮像する撮像部が出力する撮像信号に基づいて、前記撮像部よりも高いフレームレートで画像表示が可能な表示部の各ラインで表示すべき画像を示す画像信号を生成し、生成した前記画像信号を前記表示部に出力する画像信号生成部と、前記画像信号生成部が前記画像信号を出力するタイミングを制御するタイミング制御部と、を備え、前記撮像部が前記撮像信号を出力してから、前記画像信号生成部が前記画像信号を生成するまでの時間を画像処理時間とし、前記撮像信号のフレームの開始から、前記表示部に出力する前記画像信号のフレームの開始までの時間を位相差とし、前記撮像部のフレームレートを第１フレームレートとし、前記表示部で表示可能な最高のフレームレートを第２フレームレートとしたとき、前記タイミング制御部は、前記位相差が、前記画像処理時間より長い場合において、前記表示部のフレームレートが前記第２フレームレートとなるように、前記画像信号生成部に前記画像信号を出力させることにより、前記位相差を次第に小さくする第１のタイミング制御と、前記位相差が、前記画像処理時間以下となった後において、前記表示部のフレームレートが前記第１フレームレートとなるように、前記画像信号生成部に前記画像信号を出力させる第２のタイミング制御と、を実行可能である、ことを特徴とする。
この発明によれば、位相差が、画像処理時間よりも大きい場合において、位相差を画像処理時間以下となるまで段階的に短くすることができ、位相差が画像処理時間以下に収束した後は当該位相差を維持することができる。
この発明によれば、位相差が、画像処理時間よりも大きい場合において、位相差を画像処理時間以下となるまで段階的に短くすることができ、位相差が画像処理時間以下に収束した後は当該位相差を維持することができる。
また、本発明に係る撮像表示装置は、上述した表示部と、上述した撮像装置と、を備える、ことを特徴とする。
本発明を実施するための形態について図面を参照して説明する。ただし、各図において、各部の寸法及び縮尺は、実際のものと適宜に異ならせてある。また、以下に述べる実施の形態は、本発明の好適な具体例であるから、技術的に好ましい種々の限定が付されているが、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの形態に限られるものではない。
＜Ａ．第１実施形態＞
以下、本発明の第１実施形態に係る撮像表示装置１について説明する。
以下、本発明の第１実施形態に係る撮像表示装置１について説明する。
＜１．撮像表示装置の構成＞
図１は、撮像表示装置１の機能を示すブロック図である。
図１に示すように、撮像表示装置１は、被写体を撮像し、撮像して得たデータを撮像信号ＤSとして出力する撮像部１０と、撮像信号ＤSに対して画像処理を施して画像信号Ｄを生成する画像処理回路１００と、画像信号Ｄに応じた画像を表示する表示部４０と、撮像表示装置１の設定の変更、撮像の指示等を入力するための操作部６０と、撮像表示装置１全体の動作を制御するＣＰＵ５０と、を備える。
図１は、撮像表示装置１の機能を示すブロック図である。
図１に示すように、撮像表示装置１は、被写体を撮像し、撮像して得たデータを撮像信号ＤSとして出力する撮像部１０と、撮像信号ＤSに対して画像処理を施して画像信号Ｄを生成する画像処理回路１００と、画像信号Ｄに応じた画像を表示する表示部４０と、撮像表示装置１の設定の変更、撮像の指示等を入力するための操作部６０と、撮像表示装置１全体の動作を制御するＣＰＵ５０と、を備える。
この撮像表示装置１は、いわゆるミラーレスデジタルカメラであり、撮像表示装置１の利用者による操作部６０の操作により、撮像部１０で撮像した被写体に係る画像をほぼリアルタイムで表示部４０に表示するライブビューモードによる動作と、撮像部１０で撮像した被写体に係る画像を静止画格納用のメモリに静止画として格納する撮像モードによる動作と、を選択可能となっている。
なお、撮像表示装置１から表示部４０を除いた、撮像部１０、画像処理回路１００、操作部６０、及び、ＣＰＵ５０は「撮像装置」の一例である。
なお、撮像表示装置１から表示部４０を除いた、撮像部１０、画像処理回路１００、操作部６０、及び、ＣＰＵ５０は「撮像装置」の一例である。
撮像部１０は、被写体の像を結像させる撮像光学系１１と、マトリックス状に配列された受光素子（撮像素子）からの信号を線順次に走査して被写体の像に応じた撮像信号ＤSを出力するイメージセンサ１２と、イメージセンサ１２に対して各種のタイミング信号を出力するタイミングジェネレータ１３と、を備える。
図２（Ａ）に示すように、イメージセンサ１２は、有効イメージセンサ領域ＡSにおいて、複数の受光素子がＸ軸方向（水平方向）にＱS列、Ｘ軸方向に交差するＹ軸方向（垂直方向）にＰS行（ＰSライン）となるようにマトリックス状に配列されている（ＰSびＱSは、２以上の自然数）。換言すれば、有効イメージセンサ領域ＡSには、Ｘ軸方向に配列されたＱS個の受光素子からなるラインが、Ｙ軸方向にＰS行並ぶように構成されている。各受光素子は、検出した光量に応じた画素データ信号Ｓigを生成する。
また、各受光素子に１対１に対応するように、赤色、緑色、または、青色のうちいずれか１色のカラーフィルターが設けられている。以下では、１つの受光素子と、当該１つの受光素子に対応して設けられるカラーフィルターとの組を、イメージセンサ１２の画素と称することがある。
また、各受光素子に１対１に対応するように、赤色、緑色、または、青色のうちいずれか１色のカラーフィルターが設けられている。以下では、１つの受光素子と、当該１つの受光素子に対応して設けられるカラーフィルターとの組を、イメージセンサ１２の画素と称することがある。
イメージセンサ１２は、撮像表示装置１が撮像モードで動作する場合、有効イメージセンサ領域ＡSに設けられたＰS行×ＱS列の受光素子から出力される画素データ信号Ｓigの全部を静止画用撮像データとして出力することができる。そして、静止画用撮像データが出力されると、後述する画像処理部２１が、当該静止画用撮像データに対してフィルタ処理等の各種画像処理を施して静止画データを生成し、生成した静止画データを静止画格納用のメモリに格納する。
一方、イメージセンサ１２は、撮像表示装置１がライブビューモードで動作する場合、ＰS行×ＱS列の受光素子が出力する画素データ信号Ｓigに対して間引き処理を施すことで画素データ信号Ｓigのデータサイズを小さくして、図２（Ｂ）に示すようなＰ行×Ｑ列の画素に対応する撮像信号ＤSとして出力する（Ｐは、２≦Ｐ≦ＰSを満たす自然数。Ｑは、２≦Ｑ≦ＱSを満たす自然数）。
なお、イメージセンサ１２は、有効イメージセンサ領域ＡS以外の領域に画素を備えるものであってもよいが、本明細書では簡単のために有効イメージセンサ領域ＡSの画素についての説明は省略する。
なお、イメージセンサ１２は、有効イメージセンサ領域ＡS以外の領域に画素を備えるものであってもよいが、本明細書では簡単のために有効イメージセンサ領域ＡSの画素についての説明は省略する。
タイミングジェネレータ１３は、撮像垂直同期信号ＳＶsync、撮像水平同期信号ＳＨsync、及び、撮像ドットクロック信号ＳCLKを生成し、これら生成した信号をイメージセンサ１２と、画像処理回路１００とに対して出力する。
図３は、タイミングジェネレータ１３が生成する、撮像垂直同期信号ＳＶsync、撮像水平同期信号ＳＨsync、及び、撮像ドットクロック信号ＳCLKを説明するためのタイミングチャートである。撮像垂直同期信号ＳＶsyncは、イメージセンサ１２の有効イメージセンサ領域ＡS全体（ＰSライン分）の受光素子から画素データ信号Ｓigを読み出すための垂直走査期間Ｆs（すなわち、撮像部１０のフレーム期間）を規定する信号である。なお、撮像部１０のフレームレート、すなわち、「１／Ｆs」を、「第１フレームレート」と称する場合がある。撮像水平同期信号ＳＨsyncは、有効イメージセンサ領域ＡSの１ライン分の受光素子から画素データ信号Ｓigを読み出すための水平走査期間Ｈsを規定する信号である。撮像ドットクロック信号ＳCLKは、有効イメージセンサ領域ＡSの１画素分の受光素子から画素データ信号Ｓigを読み出すためのタイミングを規定する信号である。
垂直走査期間Ｆsの時間長は一定（固定長）であり、水平走査期間Ｈsの時間長も一定（固定長）である。また、垂直走査期間Ｆsは、複数の水平走査期間Ｈsから構成される。
図３は、タイミングジェネレータ１３が生成する、撮像垂直同期信号ＳＶsync、撮像水平同期信号ＳＨsync、及び、撮像ドットクロック信号ＳCLKを説明するためのタイミングチャートである。撮像垂直同期信号ＳＶsyncは、イメージセンサ１２の有効イメージセンサ領域ＡS全体（ＰSライン分）の受光素子から画素データ信号Ｓigを読み出すための垂直走査期間Ｆs（すなわち、撮像部１０のフレーム期間）を規定する信号である。なお、撮像部１０のフレームレート、すなわち、「１／Ｆs」を、「第１フレームレート」と称する場合がある。撮像水平同期信号ＳＨsyncは、有効イメージセンサ領域ＡSの１ライン分の受光素子から画素データ信号Ｓigを読み出すための水平走査期間Ｈsを規定する信号である。撮像ドットクロック信号ＳCLKは、有効イメージセンサ領域ＡSの１画素分の受光素子から画素データ信号Ｓigを読み出すためのタイミングを規定する信号である。
垂直走査期間Ｆsの時間長は一定（固定長）であり、水平走査期間Ｈsの時間長も一定（固定長）である。また、垂直走査期間Ｆsは、複数の水平走査期間Ｈsから構成される。
説明を図１に戻す。
表示部４０は、撮像対象となる被写体を示す画像を表示して撮像表示装置１の利用者に被写体の様子を把握させるためのＥＶＦ（Electronic View Finder）であり、画像処理回路１００が生成した画像信号Ｄに応じた画像を表示するための液晶パネル４２と、液晶パネル４２の動作を制御するＥＶＦコントローラ４１と、を備える。
表示部４０は、撮像対象となる被写体を示す画像を表示して撮像表示装置１の利用者に被写体の様子を把握させるためのＥＶＦ（Electronic View Finder）であり、画像処理回路１００が生成した画像信号Ｄに応じた画像を表示するための液晶パネル４２と、液晶パネル４２の動作を制御するＥＶＦコントローラ４１と、を備える。
図２（Ｃ）に示すように、液晶パネル４２には、表示領域ＡDにおいて、複数の画素がＸ軸方向にＮ列、Ｙ軸方向にＭ行（Ｍライン）となるようにマトリックス状に配列されている（Ｍは、２≦Ｍ≦Ｐを満たす自然数。Ｎは、２≦Ｎ≦Ｑを満たす自然数）。換言すれば、表示領域ＡDは、Ｘ軸方向に配列されたＮ個の画素からなるラインが、Ｙ軸方向にＭ行並ぶように構成されている。これらＭ行×Ｎ列の画素は、赤色を表示するための画素、緑色を表示するための画素、及び、青色を表示するための画素を含む。当該表示領域ＡDには、画像処理回路１００が生成する画像信号Ｄに応じた画像が表示される。
上述のとおり、Ｍ≦Ｐであり、Ｎ≦Ｑである。つまり、有効イメージセンサ領域ＡSに設けられた有効画素数と、表示領域ＡDに設けられた画素数は、異なる場合がある。
なお、図２（Ａ）〜（Ｃ）に示す座標系は、それぞれ、有効イメージセンサ領域ＡSに固定された座標系、撮像信号ＤSを表すための概念上の座標系、及び、表示領域ＡDに固定された座標系であり、これら３つの座標系の各軸の向きは互いに相違するものであってもよい。
上述のとおり、Ｍ≦Ｐであり、Ｎ≦Ｑである。つまり、有効イメージセンサ領域ＡSに設けられた有効画素数と、表示領域ＡDに設けられた画素数は、異なる場合がある。
なお、図２（Ａ）〜（Ｃ）に示す座標系は、それぞれ、有効イメージセンサ領域ＡSに固定された座標系、撮像信号ＤSを表すための概念上の座標系、及び、表示領域ＡDに固定された座標系であり、これら３つの座標系の各軸の向きは互いに相違するものであってもよい。
表示部４０の表示領域ＡDが１画面分の画像を表示可能な時間長は、撮像部１０が１画面分の画像を撮像可能な時間長よりも短い。このため、液晶パネル４２が表示可能な周期で画像を表示しようとする場合、撮像部１０からの撮像信号ＤSの出力が追いつかない。そこで、本実施形態に係る撮像表示装置１では、画像処理回路１００により、画像処理回路１００からの画像信号Ｄの出力タイミングを調整することで、表示部４０の表示速度を、撮像部１０からの撮像信号ＤSの出力周期に追従させる。
図１に示すように、画像処理回路１００は、撮像信号ＤSに基づいて画像信号Ｄを生成し、生成した画像信号Ｄを表示部４０に対して出力する画像信号生成部２０と、画像信号生成部２０が画像信号Ｄを出力するタイミングを制御するタイミング制御部３０と、を備える。
画像信号生成部２０は、撮像信号ＤSに対して画像処理を施して画像信号Ｄを生成する画像処理部２１と、画像処理部２１が生成した画像信号Ｄを一時的に記憶するＶＲＡＭ／ラインバッファ２２（以下、「ラインバッファ２２」と称する）と、ラインバッファ２２から画像信号Ｄを取得して、取得した画像信号Ｄを表示部４０に対して出力する画像信号出力部２３と、を備える。
画像信号生成部２０は、撮像信号ＤSに対して画像処理を施して画像信号Ｄを生成する画像処理部２１と、画像処理部２１が生成した画像信号Ｄを一時的に記憶するＶＲＡＭ／ラインバッファ２２（以下、「ラインバッファ２２」と称する）と、ラインバッファ２２から画像信号Ｄを取得して、取得した画像信号Ｄを表示部４０に対して出力する画像信号出力部２３と、を備える。
画像信号Ｄは、液晶パネル４２の表示領域ＡDに設けられるＭ行×Ｎ列の画素のそれぞれが表示すべき画像（階調）を規定する信号である。以下では、表示領域ＡDで表示すべき画像を示す画像信号Ｄのうち、表示領域ＡDの第ｍ行のラインで表示すべき画像を示す１ライン分の画像信号Ｄを、画像信号Ｄ[m]と表記する（ｍは、１≦ｍ≦Ｍを満たす自然数）。
画像処理部２１は、液晶パネル４２の表示領域ＡDで表示すべき画像を示す画像信号Ｄを、１ライン分の画素で表示すべき画像毎に生成する。より具体的には、画像処理部２１は、画像信号Ｄ[1]、画像信号Ｄ[2]、…、画像信号Ｄ[M]の順番で、画像信号Ｄを生成する。なお、画像処理部２１が実行する画像処理の詳細については後述する。
また、画像処理部２１は、画像信号Ｄ[m]を生成すると、生成した画像信号Ｄ[m]をラインバッファ２２に格納するとともに、画像信号Ｄ[m]のラインバッファ２２への格納が完了したことを示す書込完了信号ＰtAを、タイミング制御部３０に対して出力する。
画像処理部２１は、液晶パネル４２の表示領域ＡDで表示すべき画像を示す画像信号Ｄを、１ライン分の画素で表示すべき画像毎に生成する。より具体的には、画像処理部２１は、画像信号Ｄ[1]、画像信号Ｄ[2]、…、画像信号Ｄ[M]の順番で、画像信号Ｄを生成する。なお、画像処理部２１が実行する画像処理の詳細については後述する。
また、画像処理部２１は、画像信号Ｄ[m]を生成すると、生成した画像信号Ｄ[m]をラインバッファ２２に格納するとともに、画像信号Ｄ[m]のラインバッファ２２への格納が完了したことを示す書込完了信号ＰtAを、タイミング制御部３０に対して出力する。
本実施形態において、書込完了信号ＰtAは、画像処理部２１によるラインバッファ２２への書込が完了した画像信号Ｄに対応するラインの番号ｍを示す信号である。以下では、書込完了信号ＰtAの示すラインの番号ｍを、特に「ライン番号ｍa」と称する（ｍaは、１≦ｍa≦Ｍを満たす自然数）。書込完了信号ＰtAの示す値であるライン番号ｍaは、画像処理が完了したラインを表す「画像処理ライン情報」の一例である。
なお、書込完了信号ＰtAは、ラインの番号を示す信号に限定されるものではなく、画像処理部２１による画像信号Ｄ[m]の生成が完了した場合にハイレベルに立ち上がるようなパルス波形を含む２値の信号であってもよい。書込完了信号ＰtAが２値の信号である場合、タイミング制御部３０は、例えば、一の画面の表示が開始された後に書込完了信号ＰtAに含まれるパルスの個数をカウントすることで、画像処理部２１により生成が完了した画像信号Ｄ[m]のライン番号を演算すればよい。この場合は、書込完了信号ＰtAに含まれるパルス波形（または、パルス波形の個数）が、「画像処理ライン情報」に該当することになる。
画像信号出力部２３は、タイミング制御部３０の制御に応じて、ラインバッファ２２から１ライン毎に画像信号Ｄを読み出し、読み出した１ライン分の画像信号Ｄ[m]を表示部４０に対して出力する。
なお、以下では、説明の都合上区別が必要な場合には、画像処理部２１が生成してラインバッファ２２に格納する画像信号Ｄを画像信号ＤGAと称し、画像信号出力部２３がラインバッファ２２から取得して表示部４０に出力する画像信号Ｄを画像信号ＤGBと称する。また、画像処理部２１がラインバッファ２２に格納する画像信号ＤGAのうち、表示領域ＡDの第ｍ行のラインで表示すべき画像を示す画像信号ＤGAを画像信号ＤGA[m]と称し、画像信号出力部２３が表示部４０に出力する画像信号ＤGBのうち、表示領域ＡDの第ｍ行のラインで表示すべき画像を示す画像信号ＤGBを画像信号ＤGB[m]と称する。
なお、以下では、説明の都合上区別が必要な場合には、画像処理部２１が生成してラインバッファ２２に格納する画像信号Ｄを画像信号ＤGAと称し、画像信号出力部２３がラインバッファ２２から取得して表示部４０に出力する画像信号Ｄを画像信号ＤGBと称する。また、画像処理部２１がラインバッファ２２に格納する画像信号ＤGAのうち、表示領域ＡDの第ｍ行のラインで表示すべき画像を示す画像信号ＤGAを画像信号ＤGA[m]と称し、画像信号出力部２３が表示部４０に出力する画像信号ＤGBのうち、表示領域ＡDの第ｍ行のラインで表示すべき画像を示す画像信号ＤGBを画像信号ＤGB[m]と称する。
画像信号出力部２３は、ラインバッファ２２から画像信号ＤGB[m]を読み出して当該画像信号ＤGB[m]を表示部４０に出力する処理が完了した場合、画像信号ＤGB[m]の表示部４０への出力が完了したことを示す出力完了信号ＰtBを、タイミング制御部３０に対して出力する。本実施形態において、出力完了信号ＰtBは、画像信号出力部２３による表示部４０への出力が完了した画像信号Ｄに対応するラインの番号ｍを示す信号である。以下では、出力完了信号ＰtBの示すラインの番号ｍを、特に「ライン番号ｍb」と称する（ｍbは、１≦ｍb≦Ｍを満たす自然数）。出力完了信号ＰtBの示す値であるライン番号ｍbは、表示部４０に対する出力が完了した画像信号Ｄ[m]のラインを示す「表示出力ライン情報」の一例である。
詳細は後述するが、画像信号出力部２３は、表示部４０に対して、画像信号ＤGB[m]を出力する代わりに、無効信号Ｄmyを出力する場合がある（図４参照）。この場合は、画像信号出力部２３は、出力完了信号ＰtBを出力しない。
詳細は後述するが、画像信号出力部２３は、表示部４０に対して、画像信号ＤGB[m]を出力する代わりに、無効信号Ｄmyを出力する場合がある（図４参照）。この場合は、画像信号出力部２３は、出力完了信号ＰtBを出力しない。
なお、出力完了信号ＰtBは、ラインの番号を示す信号に限定されるものではなく、画像信号出力部２３による画像信号Ｄ[m]の出力が完了した場合にハイレベルに立ち上がるようなパルス波形を含む２値の信号であってもよい。
図１に示すように、タイミング制御部３０は、書込完了信号ＰtA及び出力完了信号ＰtBに基づいて出力制御信号ＣTRを生成する出力制御部３１と、各種のタイミング信号を生成して画像信号出力部２３が画像信号ＤGB[m]を出力するタイミングを制御するタイミングジェネレータ３２と、ＥＶＦコントローラ４１の動作を規定する設定パラメーターＰRMをＥＶＦコントローラ４１に対して送信するパラメーター送信部３３と、を備える。
出力制御部３１は、書込完了信号ＰtA及び出力完了信号ＰtBに基づいて、画像信号出力部２３が表示部４０に対して表示領域ＡDの第ｍ行で表示すべき画像を示す画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する準備が完了したか否かを判定し、判定結果を示す出力制御信号ＣTRを生成する。
ここで、「画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する準備が完了した」とは、以下の第１条件及び第２条件を充足したことをいう。
（第１条件） 画像処理部２１が、第ｍ行の画像信号Ｄ[m]（画像信号ＤGA[m]）の画像処理を完了していること。
（第２条件） 画像信号出力部２３が、第ｍ-1行の画像信号Ｄ[m-1]（画像信号ＤGB[m-1]）の出力を完了したこと。
ここで、「画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する準備が完了した」とは、以下の第１条件及び第２条件を充足したことをいう。
（第１条件） 画像処理部２１が、第ｍ行の画像信号Ｄ[m]（画像信号ＤGA[m]）の画像処理を完了していること。
（第２条件） 画像信号出力部２３が、第ｍ-1行の画像信号Ｄ[m-1]（画像信号ＤGB[m-1]）の出力を完了したこと。
第１条件は、書込完了信号ＰtAの示すライン番号ｍaがライン番号ｍ以上である場合、つまり、「ｍ≦ｍa」を満たす場合に充足される。第２条件は、出力完了信号ＰtBの示すライン番号ｍbが「ｍb＝ｍ-1」を満たす場合に充足される（厳密には、「ｍ＝１」の場合には、「ｍb＝Ｍ」を満たす場合に充足される）。
本明細書では、出力制御部３１が判定の対象とする画像信号Ｄ[m]が示す画像を表示する表示領域ＡDのラインを、「表示対象ライン」と称する場合がある。
本明細書では、出力制御部３１が判定の対象とする画像信号Ｄ[m]が示す画像を表示する表示領域ＡDのラインを、「表示対象ライン」と称する場合がある。
なお、厳密には、画像信号出力部２３が画像信号ＤGB[m]を出力するためには、以下の第３条件が充足される必要がある。
（第３条件） 画像信号出力部２３が第ｍ行の画像信号Ｄ[m]（画像信号ＤGB[m]）を出力するタイミングが、表示領域ＡDが画像を表示可能な期間（図４で後述する水平有効データ期間ＤＨＩ）に含まれること。
しかし、上述した第１条件及び第２条件が充足されている場合、画像信号出力部２３からの画像信号ＤGB[m]の出力タイミングをタイミングジェネレータ３２が制御することにより第３条件は必然的に充足される。このため、本実施形態では、出力制御部３１における判定において第３条件を考慮しない。
（第３条件） 画像信号出力部２３が第ｍ行の画像信号Ｄ[m]（画像信号ＤGB[m]）を出力するタイミングが、表示領域ＡDが画像を表示可能な期間（図４で後述する水平有効データ期間ＤＨＩ）に含まれること。
しかし、上述した第１条件及び第２条件が充足されている場合、画像信号出力部２３からの画像信号ＤGB[m]の出力タイミングをタイミングジェネレータ３２が制御することにより第３条件は必然的に充足される。このため、本実施形態では、出力制御部３１における判定において第３条件を考慮しない。
出力制御部３１は、「画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する準備が完了した」か否かの判定を、例えば、以下の２つの態様により実行することができる。
「画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する準備が完了した」か否かの判定の第１の態様としては、第１条件が充足されているか否かの判定（第１の判定）と、第２条件が充足されているか否かの判定（第２の判定）の２つの判定を、出力制御部３１が直接に実行する態様である。
具体的には、出力制御部３１は、画像処理部２１が書込完了信号ＰtAを出力すると、書込完了信号ＰtAの示すライン番号ｍaが「ｍ≦ｍa」を満たすか否かを判定し（第１の判定を実行し）、画像信号出力部２３が出力完了信号ＰtBを出力すると、出力完了信号ＰtBの示すライン番号ｍbが「ｍb＝ｍ-1」を満たすか否かを判定し（第２の判定を実行し）、第１の判定の判定結果と、第２の判定の判定結果の両方が肯定である場合に、「画像信号Ｄ[m]を出力する準備が完了した」と判定する。
この場合、出力制御部３１は、第１の判定を実行することにより、表示対象ラインで表示すべき画像に対応する画像信号を生成したか否かを判定する「処理状況判定部」として機能し、第２の判定を実行することにより、表示対象ラインにおける画像の表示が可能であるか否かを判定する「表示判定部」として機能する。
なお、出力制御部３１は、第１の判定の判定結果、または、第２の判定の判定結果が否定である場合、第１の判定の判定結果と、第２の判定の判定結果の両方が肯定となるまで、第１の判定及び第２の判定を繰り返す。具体的には、出力制御部３１は、例えば、第１の判定及び第２の判定の両方の判定結果が肯定となるまで、画像処理部２１から書込完了信号ＰtAが出力される毎に第１の判定を実行し、また、画像信号出力部２３から出力完了信号ＰtBが出力される毎に第２の判定を実行すればよい。また、例えば、出力制御部３１は、第１の判定及び第２の判定の両方の判定結果が肯定となるまで、後述する水平走査期間Ｈdの周期で、第１の判定及び第２の判定を繰り返してもよい。そして、第１の判定の判定結果と、第２の判定の判定結果の両方が肯定となったときに、出力制御信号ＣTRを、判定結果が肯定であることを示す値に設定する。
具体的には、出力制御部３１は、画像処理部２１が書込完了信号ＰtAを出力すると、書込完了信号ＰtAの示すライン番号ｍaが「ｍ≦ｍa」を満たすか否かを判定し（第１の判定を実行し）、画像信号出力部２３が出力完了信号ＰtBを出力すると、出力完了信号ＰtBの示すライン番号ｍbが「ｍb＝ｍ-1」を満たすか否かを判定し（第２の判定を実行し）、第１の判定の判定結果と、第２の判定の判定結果の両方が肯定である場合に、「画像信号Ｄ[m]を出力する準備が完了した」と判定する。
この場合、出力制御部３１は、第１の判定を実行することにより、表示対象ラインで表示すべき画像に対応する画像信号を生成したか否かを判定する「処理状況判定部」として機能し、第２の判定を実行することにより、表示対象ラインにおける画像の表示が可能であるか否かを判定する「表示判定部」として機能する。
なお、出力制御部３１は、第１の判定の判定結果、または、第２の判定の判定結果が否定である場合、第１の判定の判定結果と、第２の判定の判定結果の両方が肯定となるまで、第１の判定及び第２の判定を繰り返す。具体的には、出力制御部３１は、例えば、第１の判定及び第２の判定の両方の判定結果が肯定となるまで、画像処理部２１から書込完了信号ＰtAが出力される毎に第１の判定を実行し、また、画像信号出力部２３から出力完了信号ＰtBが出力される毎に第２の判定を実行すればよい。また、例えば、出力制御部３１は、第１の判定及び第２の判定の両方の判定結果が肯定となるまで、後述する水平走査期間Ｈdの周期で、第１の判定及び第２の判定を繰り返してもよい。そして、第１の判定の判定結果と、第２の判定の判定結果の両方が肯定となったときに、出力制御信号ＣTRを、判定結果が肯定であることを示す値に設定する。
次に、「画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する準備が完了した」か否かの判定の第２の態様としては、出力制御部３１が前回の判定（画像信号Ｄ[m-1]を出力する準備が完了したか否かの判定）の結果が肯定となった後であって、画像信号出力部２３が出力完了信号ＰtBを出力したタイミングで、第１条件が充足されているか否かの判定（第１の判定）を実行する態様である。
この態様において、出力制御部３１は、第１の判定の判定結果が否定である場合、第１の判定の判定結果が肯定となるまで第１の判定を繰り返し、第１の判定の判定結果が肯定となったときに、出力制御信号ＣTRを、判定結果が肯定であることを示す値に設定する。具体的には、出力制御部３１は、例えば、出力完了信号ＰtBが出力されたタイミングで第１の判定の判定結果が否定である場合には、その後、画像処理部２１が書込完了信号ＰtAを出力する毎に、当該書込完了信号ＰtAの示すライン番号ｍaが「ｍ≦ｍa」を満たすか否かを判定し、「ｍ≦ｍa」を満たしたときに、第１条件が充足されたと判定すればよい。
この態様において、出力制御部３１は、第１の判定の判定結果が否定である場合、第１の判定の判定結果が肯定となるまで第１の判定を繰り返し、第１の判定の判定結果が肯定となったときに、出力制御信号ＣTRを、判定結果が肯定であることを示す値に設定する。具体的には、出力制御部３１は、例えば、出力完了信号ＰtBが出力されたタイミングで第１の判定の判定結果が否定である場合には、その後、画像処理部２１が書込完了信号ＰtAを出力する毎に、当該書込完了信号ＰtAの示すライン番号ｍaが「ｍ≦ｍa」を満たすか否かを判定し、「ｍ≦ｍa」を満たしたときに、第１条件が充足されたと判定すればよい。
上述のとおり、画像処理部２１は、ライン番号順に画像信号Ｄ[m]（画像信号ＤGA[m]）を生成し、画像信号出力部２３は、ライン番号順に画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する。そして、本実施形態では、第ｍ-2行の画像信号Ｄ[m-2]の出力が完了し、出力制御部３１が「画像信号Ｄ[m-1]を出力する準備が完了した」と判定した後に、画像信号出力部２３が画像信号Ｄ[m-1]を出力する。よって、出力制御部３１が「画像信号Ｄ[m]（画像信号ＤGB[m]）を出力する準備が完了した」か否かの判定を行うタイミングは、画像信号出力部２３から画像信号Ｄ[m-2]（画像信号ＤGB[m-2]）が出力された後のタイミングであって、且つ、出力制御部３１が「画像信号Ｄ[m-1]（画像信号ＤGB[m-1]）を出力する準備が完了した」と判定した後のタイミングである。つまり、出力制御部３１が、「画像信号Ｄ[m]を出力する準備が完了した」か否かの第１の判定を行うタイミングにおいて、画像信号出力部２３が出力する出力完了信号ＰtBの示すライン番号ｍbは「ｍ-1」となる。
このため、第２の態様において、出力制御部３１は、画像信号出力部２３からの出力完了信号ＰtBの出力をもって第２条件が充足されたと見做す。そして、出力制御部３１は、画像信号出力部２３から出力完了信号ＰtBが出力されたタイミングにおいて第１条件が充足されているか否かの判定（第１の判定）を実行することで、「画像信号Ｄ[m]（画像信号ＤGB[m]）の出力準備が完了した」か否かの判定を行う。
このため、第２の態様において、出力制御部３１は、画像信号出力部２３からの出力完了信号ＰtBの出力をもって第２条件が充足されたと見做す。そして、出力制御部３１は、画像信号出力部２３から出力完了信号ＰtBが出力されたタイミングにおいて第１条件が充足されているか否かの判定（第１の判定）を実行することで、「画像信号Ｄ[m]（画像信号ＤGB[m]）の出力準備が完了した」か否かの判定を行う。
本実施形態では、上述した２つの態様のうち、第２の態様を採用することを前提として、以下の説明を行う。
タイミングジェネレータ３２は、表示垂直同期信号ＤＶsync、垂直有効データ信号ＤＶactive、表示水平同期信号ＤＨsync、表示ドットクロック信号ＤCLK、及び、イネーブル信号ＤＥnbを生成し、生成したこれらの信号を、画像信号出力部２３及び表示部４０に対して出力する。
図４は、タイミングジェネレータ３２が生成する、表示垂直同期信号ＤＶsync、垂直有効データ信号ＤＶactive、表示水平同期信号ＤＨsync、表示ドットクロック信号ＤCLK、及び、イネーブル信号ＤＥnbを説明するためのタイミングチャートである。
図４は、タイミングジェネレータ３２が生成する、表示垂直同期信号ＤＶsync、垂直有効データ信号ＤＶactive、表示水平同期信号ＤＨsync、表示ドットクロック信号ＤCLK、及び、イネーブル信号ＤＥnbを説明するためのタイミングチャートである。
図４（Ａ）及び（Ｂ）に示すように、表示垂直同期信号ＤＶsyncは、液晶パネル４２の表示領域ＡD全体（Ｍライン分）の画素で画像を表示するための垂直走査期間Ｆd（すなわち、表示部４０のフレーム期間）を規定する信号である。表示水平同期信号ＤＨsyncは、表示領域ＡDの１ライン分の画素で画像を表示すための水平走査期間Ｈdを規定する信号である。表示ドットクロック信号ＤCLKは、表示領域ＡDの各画素で画像を表示するためのタイミングを規定する信号である。
本実施形態において、水平走査期間Ｈdは、予め定められた一定の時間長を有している。また、本実施形態において、垂直走査期間Ｆdは、複数の水平走査期間Ｈdから構成されており、垂直走査期間Ｆsの時間長以下の可変な時間長を有する。すなわち、各垂直走査期間Ｆdに含まれる水平走査期間Ｈdの個数は可変である。図４（Ａ）に示す例では、図４（Ａ）に示す複数の垂直走査期間Ｆdのうち、最初の垂直走査期間Ｆdである垂直走査期間Ｆd1は、垂直走査期間Ｆd1に後続する垂直走査期間Ｆd2よりも短く、垂直走査期間Ｆd2は、垂直走査期間Ｆd2に後続する垂直走査期間Ｆd3よりも短い場合を例示している。
なお、表示垂直同期信号ＤＶsyncの有する波形のうち、垂直走査期間Ｆdの開始及び終了のタイミングを規定するパルス状の波形を、垂直同期パルスＰlsＶと称する。また、表示水平同期信号ＤＨsyncの有する波形のうち、水平走査期間Ｈdの開始及び終了のタイミングを規定するパルス状の波形を、水平同期パルスＰlsＨと称する。
なお、表示垂直同期信号ＤＶsyncの有する波形のうち、垂直走査期間Ｆdの開始及び終了のタイミングを規定するパルス状の波形を、垂直同期パルスＰlsＶと称する。また、表示水平同期信号ＤＨsyncの有する波形のうち、水平走査期間Ｈdの開始及び終了のタイミングを規定するパルス状の波形を、水平同期パルスＰlsＨと称する。
図４（Ｂ）に示すように、垂直走査期間Ｆdは、垂直同期期間ＤＶpと、垂直バックポーチ期間ＤＶbと、垂直有効データ期間ＤＶＩと、垂直フロントポーチ期間ＤＶfと、からなる。
垂直同期期間ＤＶpは、表示垂直同期信号ＤＶsyncがアクティブ（この図の例ではローレベル）である期間であり、垂直走査期間Ｆdが開始されるのと同時に開始される、予め定められた時間長を有する期間である。垂直バックポーチ期間ＤＶbは、垂直同期期間ＤＶpに後続する期間であり、予め定められた時間長を有する期間である。垂直有効データ期間ＤＶＩは、垂直バックポーチ期間ＤＶbに後続する、可変な時間長の期間である。当該垂直有効データ期間ＤＶＩにおいて、画像信号出力部２３から画像信号ＤGB（画像信号ＤGB[1]〜ＤGB[M]）が出力される。垂直フロントポーチ期間ＤＶfは、垂直有効データ期間ＤＶＩに後続する期間であり、垂直走査期間Ｆdの終了と同時に終了する、予め定められた時間長を有する期間である。
垂直有効データ期間ＤＶＩは、各垂直走査期間Ｆdにおいてイネーブル信号ＤＥnbが最初にアクティブとなる水平走査期間Ｈdの開始からイネーブル信号ＤＥnbがＭ回目にアクティブとなる水平走査期間Ｈdの終了までの期間である（イネーブル信号ＤＥnbがアクティブとなる場合については、後述する）。
当該垂直有効データ期間ＤＶＩは、例えば、イネーブル信号ＤＥnbがアクティブとなる回数をカウントするカウンタ（図示省略）が出力するカウント値に基づいて定めればよい。但し、本実施形態では、説明の便宜上、各垂直走査期間Ｆdにおいてイネーブル信号ＤＥnbが最初にアクティブとなる水平走査期間Ｈdの開始からイネーブル信号ＤＥnbがＭ回目にアクティブとなる水平走査期間Ｈdの終了までの期間においてアクティブ（この図の例ではハイレベル）となる垂直有効データ信号ＤＶactiveを導入する。すなわち、本実施形態では、垂直有効データ信号ＤＶactiveがアクティブである期間を垂直有効データ期間ＤＶＩとして説明する。なお、この垂直有効データ信号ＤＶactiveは、説明の便宜上導入した信号であり、出力制御部３１は、この垂直有効データ信号ＤＶactiveを出力しないものであってもよい。
垂直同期期間ＤＶpは、表示垂直同期信号ＤＶsyncがアクティブ（この図の例ではローレベル）である期間であり、垂直走査期間Ｆdが開始されるのと同時に開始される、予め定められた時間長を有する期間である。垂直バックポーチ期間ＤＶbは、垂直同期期間ＤＶpに後続する期間であり、予め定められた時間長を有する期間である。垂直有効データ期間ＤＶＩは、垂直バックポーチ期間ＤＶbに後続する、可変な時間長の期間である。当該垂直有効データ期間ＤＶＩにおいて、画像信号出力部２３から画像信号ＤGB（画像信号ＤGB[1]〜ＤGB[M]）が出力される。垂直フロントポーチ期間ＤＶfは、垂直有効データ期間ＤＶＩに後続する期間であり、垂直走査期間Ｆdの終了と同時に終了する、予め定められた時間長を有する期間である。
垂直有効データ期間ＤＶＩは、各垂直走査期間Ｆdにおいてイネーブル信号ＤＥnbが最初にアクティブとなる水平走査期間Ｈdの開始からイネーブル信号ＤＥnbがＭ回目にアクティブとなる水平走査期間Ｈdの終了までの期間である（イネーブル信号ＤＥnbがアクティブとなる場合については、後述する）。
当該垂直有効データ期間ＤＶＩは、例えば、イネーブル信号ＤＥnbがアクティブとなる回数をカウントするカウンタ（図示省略）が出力するカウント値に基づいて定めればよい。但し、本実施形態では、説明の便宜上、各垂直走査期間Ｆdにおいてイネーブル信号ＤＥnbが最初にアクティブとなる水平走査期間Ｈdの開始からイネーブル信号ＤＥnbがＭ回目にアクティブとなる水平走査期間Ｈdの終了までの期間においてアクティブ（この図の例ではハイレベル）となる垂直有効データ信号ＤＶactiveを導入する。すなわち、本実施形態では、垂直有効データ信号ＤＶactiveがアクティブである期間を垂直有効データ期間ＤＶＩとして説明する。なお、この垂直有効データ信号ＤＶactiveは、説明の便宜上導入した信号であり、出力制御部３１は、この垂直有効データ信号ＤＶactiveを出力しないものであってもよい。
図４（Ｃ）及び（Ｄ）に示すように、水平走査期間Ｈdは、水平同期期間ＤＨpと、水平バックポーチ期間ＤＨbと、水平有効データ期間ＤＨＩと、水平フロントポーチ期間ＤＨfと、からなる。
水平同期期間ＤＨpは、表示水平同期信号ＤＨsyncがアクティブ（この図の例ではローレベル）である期間であり、水平走査期間Ｈdが開始されるのと同時に開始される、予め定められた時間長を有する期間である。水平バックポーチ期間ＤＨbは、水平同期期間ＤＨpに後続する期間であり、予め定められた時間長を有する期間である。水平有効データ期間ＤＨＩは、水平バックポーチ期間ＤＨbに後続する、予め定められた時間長を有する期間である。水平フロントポーチ期間ＤＨfは、水平有効データ期間ＤＨＩに後続する期間であり、水平走査期間Ｈdの終了と同時に終了する、予め定められた時間長を有する期間である。
水平同期期間ＤＨpは、表示水平同期信号ＤＨsyncがアクティブ（この図の例ではローレベル）である期間であり、水平走査期間Ｈdが開始されるのと同時に開始される、予め定められた時間長を有する期間である。水平バックポーチ期間ＤＨbは、水平同期期間ＤＨpに後続する期間であり、予め定められた時間長を有する期間である。水平有効データ期間ＤＨＩは、水平バックポーチ期間ＤＨbに後続する、予め定められた時間長を有する期間である。水平フロントポーチ期間ＤＨfは、水平有効データ期間ＤＨＩに後続する期間であり、水平走査期間Ｈdの終了と同時に終了する、予め定められた時間長を有する期間である。
本実施形態では、水平走査期間Ｈdには、画像信号出力部２３が画像信号Ｄ[m]を出力するための有効水平走査期間Ｈd-Ａ（図４（Ｃ）参照）と、画像信号Ｄ[m]を出力する代わりに無効信号Ｄmy[m]を出力する無効水平走査期間Ｈd-Ｄ（図４（Ｄ）参照）と、が存在する。
図４（Ｃ）は、水平走査期間Ｈdが有効水平走査期間Ｈd-Ａである場合を例示している。この図に示すように、イネーブル信号ＤＥnbは、水平走査期間Ｈdが有効水平走査期間Ｈd-Ａである場合には、水平有効データ期間ＤＨＩにおいてアクティブ（この図の例ではハイレベル）となる。そして、イネーブル信号ＤＥnbがアクティブとなる水平有効データ期間ＤＨＩにおいて、画像信号出力部２３から画像信号Ｄ[m]（画像信号ＤGB[m]）が出力される。一方、イネーブル信号ＤＥnbは、有効水平走査期間Ｈd-Ａのうち、水平有効データ期間ＤＨＩ以外の期間（水平同期期間ＤＨp、水平バックポーチ期間ＤＨb、水平フロントポーチ期間ＤＨf）において、非アクティブとなる。画像信号出力部２３は、有効水平走査期間Ｈd-Ａのうち、イネーブル信号ＤＥnbが非アクティブとなる、水平有効データ期間ＤＨＩ以外の期間において、画像信号Ｄ[m]（画像信号ＤGB[m]）の出力を停止して、無効ライン信号ＤGB-dmyを出力する。
上述した第３条件は、タイミングジェネレータ３２が水平有効データ期間ＤＨＩにおいてイネーブル信号ＤＥnbをアクティブとすることで充足される。すなわち、出力制御部３１及びタイミングジェネレータ３２を備えるタイミング制御部３０は、上述した第１条件〜第３条件の全てが充足されたタイミングで、表示対象ラインに対応する画像信号Ｄ[m]（画像信号ＤGB[m]）を画像信号出力部２３から出力させる。
図４（Ｃ）は、水平走査期間Ｈdが有効水平走査期間Ｈd-Ａである場合を例示している。この図に示すように、イネーブル信号ＤＥnbは、水平走査期間Ｈdが有効水平走査期間Ｈd-Ａである場合には、水平有効データ期間ＤＨＩにおいてアクティブ（この図の例ではハイレベル）となる。そして、イネーブル信号ＤＥnbがアクティブとなる水平有効データ期間ＤＨＩにおいて、画像信号出力部２３から画像信号Ｄ[m]（画像信号ＤGB[m]）が出力される。一方、イネーブル信号ＤＥnbは、有効水平走査期間Ｈd-Ａのうち、水平有効データ期間ＤＨＩ以外の期間（水平同期期間ＤＨp、水平バックポーチ期間ＤＨb、水平フロントポーチ期間ＤＨf）において、非アクティブとなる。画像信号出力部２３は、有効水平走査期間Ｈd-Ａのうち、イネーブル信号ＤＥnbが非アクティブとなる、水平有効データ期間ＤＨＩ以外の期間において、画像信号Ｄ[m]（画像信号ＤGB[m]）の出力を停止して、無効ライン信号ＤGB-dmyを出力する。
上述した第３条件は、タイミングジェネレータ３２が水平有効データ期間ＤＨＩにおいてイネーブル信号ＤＥnbをアクティブとすることで充足される。すなわち、出力制御部３１及びタイミングジェネレータ３２を備えるタイミング制御部３０は、上述した第１条件〜第３条件の全てが充足されたタイミングで、表示対象ラインに対応する画像信号Ｄ[m]（画像信号ＤGB[m]）を画像信号出力部２３から出力させる。
図４（Ｄ）は、水平走査期間Ｈdが無効水平走査期間Ｈd-Ｄである場合を例示している。この図に示すように、イネーブル信号ＤＥnbは、水平走査期間Ｈdが無効水平走査期間Ｈd-Ｄである場合には、水平有効データ期間ＤＨＩにおいて非アクティブとなる。そして、画像信号出力部２３は、無効水平走査期間Ｈd-Ｄのうち、水平有効データ期間ＤＨＩにおいて、画像信号Ｄ[m]（画像信号ＤGB[m]）の代わりに、無効信号Ｄmyを出力する。一方、イネーブル信号ＤＥnbは、無効水平走査期間Ｈd-Ｄのうち、水平有効データ期間ＤＨＩ以外の期間（水平同期期間ＤＨp、水平バックポーチ期間ＤＨb、水平フロントポーチ期間ＤＨf）においても非アクティブとなる。画像信号出力部２３は、無効水平走査期間Ｈd-Ｄのうち、水平有効データ期間ＤＨＩ以外の期間において、画像信号Ｄ[m]（画像信号ＤGB[m]）の出力を停止して、無効ライン信号ＤGB-dmyを出力する。
なお、タイミングジェネレータ３２は、出力制御部３１が出力する出力制御信号ＣTRに基づいて、水平走査期間Ｈdを有効水平走査期間Ｈd-Ａまたは無効水平走査期間Ｈd-Ｄのいずれにするか、換言すれば、水平有効データ期間ＤＨＩにおいてイネーブル信号ＤＥnbをアクティブとするか否かを決定する。この、出力制御信号ＣTR、イネーブル信号ＤＥnb、及び、水平走査期間Ｈdの種類の関係については、後述する。
なお、タイミングジェネレータ３２は、出力制御部３１が出力する出力制御信号ＣTRに基づいて、水平走査期間Ｈdを有効水平走査期間Ｈd-Ａまたは無効水平走査期間Ｈd-Ｄのいずれにするか、換言すれば、水平有効データ期間ＤＨＩにおいてイネーブル信号ＤＥnbをアクティブとするか否かを決定する。この、出力制御信号ＣTR、イネーブル信号ＤＥnb、及び、水平走査期間Ｈdの種類の関係については、後述する。
図５は、タイミングジェネレータ３２が生成する各種信号と、液晶パネル４２の表示領域ＡDにおける画像の表示タイミングとの関係を説明するための説明図である。
この図に示すように、表示領域ＡDの有する第１行のラインから第Ｍ行のラインに至るＭ行×Ｎ列の画素は、垂直走査期間Ｆdのうち、垂直有効データ信号ＤＶactiveがアクティブとなる垂直有効データ期間ＤＶＩにおいて、画像信号Ｄ[1]〜Ｄ[M]の示す１画面分の画像を表示する。
また、表示領域ＡDのうち第ｍ行のラインを構成するＮ個の画素は、水平走査期間Ｈd（有効水平走査期間Ｈd-Ａ）のうち、イネーブル信号ＤＥnbがアクティブとなる水平有効データ期間ＤＨＩにおいて、画像信号Ｄ[m]の示す画像を表示する。
なお、垂直有効データ期間ＤＶＩは、当該垂直有効データ期間ＤＶＩに含まれる無効水平走査期間Ｈd-Ｄの個数によって延長されるが、この図では、垂直有効データ期間ＤＶＩに含まれる水平走査期間Ｈdは全て有効水平走査期間Ｈd-Ａである場合を想定している。
この図に示すように、表示領域ＡDの有する第１行のラインから第Ｍ行のラインに至るＭ行×Ｎ列の画素は、垂直走査期間Ｆdのうち、垂直有効データ信号ＤＶactiveがアクティブとなる垂直有効データ期間ＤＶＩにおいて、画像信号Ｄ[1]〜Ｄ[M]の示す１画面分の画像を表示する。
また、表示領域ＡDのうち第ｍ行のラインを構成するＮ個の画素は、水平走査期間Ｈd（有効水平走査期間Ｈd-Ａ）のうち、イネーブル信号ＤＥnbがアクティブとなる水平有効データ期間ＤＨＩにおいて、画像信号Ｄ[m]の示す画像を表示する。
なお、垂直有効データ期間ＤＶＩは、当該垂直有効データ期間ＤＶＩに含まれる無効水平走査期間Ｈd-Ｄの個数によって延長されるが、この図では、垂直有効データ期間ＤＶＩに含まれる水平走査期間Ｈdは全て有効水平走査期間Ｈd-Ａである場合を想定している。
図６は、出力制御信号ＣTRと、イネーブル信号ＤＥnbとを説明するための説明図である。
上述のとおり、出力制御部３１は、画像信号Ｄ[m]の出力準備が完了したと判定したとき、つまり、第１条件及び第２条件が充足されたときに、出力制御信号ＣTRに判定結果が肯定であることを示す値を設定する。具体的には、本実施形態では、出力制御部３１は、画像信号Ｄ[m]の出力準備が完了したと判定したときに、出力制御信号ＣTRに一時的にハイレベルに立ち上がるパルス状の波形を設定する。図６に示すように、出力制御信号ＣTRに設定される画像信号Ｄ[m]を出力する準備が完了した旨の判定結果を示す波形を、出力許可パルスＰL[m]と称する。
上述のとおり、出力制御部３１は、画像信号Ｄ[m]の出力準備が完了したと判定したとき、つまり、第１条件及び第２条件が充足されたときに、出力制御信号ＣTRに判定結果が肯定であることを示す値を設定する。具体的には、本実施形態では、出力制御部３１は、画像信号Ｄ[m]の出力準備が完了したと判定したときに、出力制御信号ＣTRに一時的にハイレベルに立ち上がるパルス状の波形を設定する。図６に示すように、出力制御信号ＣTRに設定される画像信号Ｄ[m]を出力する準備が完了した旨の判定結果を示す波形を、出力許可パルスＰL[m]と称する。
上述のとおり、本実施形態に係る出力制御部３１は、画像信号出力部２３から出力完了信号ＰtBが出力されたことをもって、第２の条件が充足されたと看做す。そして、出力制御部３１は、出力完了信号ＰtBが出力されたときに画像信号Ｄ[m]の画像処理が完了しているか（第１条件が充足されているか）否かの判定（第１の判定）を実行することで、画像信号Ｄ[m]の出力準備が完了したか否かを判定する。
図６に示すように、出力制御部３１が画像信号Ｄ[m]の出力準備が完了したか否かの判定を行う場合において、出力制御部３１が画像信号Ｄ[m]の画像処理が完了したと判定（第１条件が充足されたと判定）するタイミング、つまり、第１の判定の結果が肯定となるタイミングを、画像処理判定時刻ＴA[m]と称する。
また、出力制御部３１に出力完了信号ＰtBが供給された（第２条件が充足されたと看做す）タイミングを、表示準備判定時刻ＴB[m]と称する。
また、以下では、説明の便宜上、画像処理部２１による画像信号Ｄ[m]の生成が実際に完了した時刻を、画像信号生成時刻ＴC[m]と定義する。つまり、画像信号生成時刻ＴC[m]は、画像処理部２１が書込完了信号ＰtAを出力する時刻と略同じ時刻である。この画像信号生成時刻ＴC[m]は、「画像信号生成時刻」の一例である。
図６に示すように、出力制御部３１が画像信号Ｄ[m]の出力準備が完了したか否かの判定を行う場合において、出力制御部３１が画像信号Ｄ[m]の画像処理が完了したと判定（第１条件が充足されたと判定）するタイミング、つまり、第１の判定の結果が肯定となるタイミングを、画像処理判定時刻ＴA[m]と称する。
また、出力制御部３１に出力完了信号ＰtBが供給された（第２条件が充足されたと看做す）タイミングを、表示準備判定時刻ＴB[m]と称する。
また、以下では、説明の便宜上、画像処理部２１による画像信号Ｄ[m]の生成が実際に完了した時刻を、画像信号生成時刻ＴC[m]と定義する。つまり、画像信号生成時刻ＴC[m]は、画像処理部２１が書込完了信号ＰtAを出力する時刻と略同じ時刻である。この画像信号生成時刻ＴC[m]は、「画像信号生成時刻」の一例である。
表示準備判定時刻ＴB[m]は、出力制御部３１からの画像信号Ｄ[m-1]の出力が完了した時刻と略同じ時刻であり、画像信号Ｄ[m-1]が出力される有効水平走査期間Ｈd-Ａ（有効水平走査期間Ｈd-Ａ[m-1]と称する）の水平有効データ期間ＤＨＩが終了する時刻と略同じ時刻である。なお、表示準備判定時刻ＴB[m]の後に最初の水平走査期間Ｈd[m]の水平有効データ期間ＤＨＩが開始される時刻は、「表示可能時刻」の一例である。
なお、本明細書において「略同じ時刻」とは、信号の送受信に起因するタイムラグや、各種処理に起因するタイムラグがある場合において、これらのタイムラグを無視した場合に同一の時刻であると看做すことができる場合を含む概念である。
なお、本明細書において「略同じ時刻」とは、信号の送受信に起因するタイムラグや、各種処理に起因するタイムラグがある場合において、これらのタイムラグを無視した場合に同一の時刻であると看做すことができる場合を含む概念である。
画像処理判定時刻ＴA[m]は、表示準備判定時刻ＴB[m]までに画像信号Ｄ[m]（画像信号ＤGA[m]）の生成が完了している場合、すなわち、表示準備判定時刻ＴB[m]までに画像信号生成時刻ＴC[m]が経過している場合（Ｃase-1と称する）には、表示準備判定時刻ＴB[m]と略同じ時刻となる。
なお、Ｃase-1の場合、表示準備判定時刻ＴB[m]の経過後に、出力制御部３１が、当該表示準備判定時刻ＴB[m]までに出力制御部３１に供給されている書込完了信号ＰtAの示すライン番号ｍaが「ｍ≦ｍa」を満たす旨の判定をし、当該判定をしたタイミングが画像処理判定時刻ＴA[m]であるため、画像処理判定時刻ＴA[m]及び表示準備判定時刻ＴB[m]の間にはタイムラグが存在するが、以下では、簡単のために両時刻を略同じと看做す。
なお、Ｃase-1の場合、表示準備判定時刻ＴB[m]の経過後に、出力制御部３１が、当該表示準備判定時刻ＴB[m]までに出力制御部３１に供給されている書込完了信号ＰtAの示すライン番号ｍaが「ｍ≦ｍa」を満たす旨の判定をし、当該判定をしたタイミングが画像処理判定時刻ＴA[m]であるため、画像処理判定時刻ＴA[m]及び表示準備判定時刻ＴB[m]の間にはタイムラグが存在するが、以下では、簡単のために両時刻を略同じと看做す。
一方、画像処理判定時刻ＴA[m]は、表示準備判定時刻ＴB[m]までに画像信号Ｄ[m]（画像信号ＤGA[m]）の生成が完了していない場合、すなわち、表示準備判定時刻ＴB[m]までに画像信号生成時刻ＴC[m]が到来していない場合（Ｃase-2と称する）には、画像処理部２１が画像信号Ｄ[m]の生成を完了させた時刻、すなわち、画像信号生成時刻ＴC[m]と略同じ時刻となる。
なお、Ｃase-2の場合、画像処理部２１が画像信号生成時刻ＴC[m]に画像信号Ｄ[m]の生成を完了させた後に、画像処理部２１が書込完了信号ＰtAを出力し、当該書込完了信号ＰtAの供給を受けた出力制御部３１が「ｍ≦ｍa」を満たす旨の判定をしたタイミングが画像処理判定時刻ＴA[m]であるため、画像処理判定時刻ＴA[m]及び画像信号生成時刻ＴC[m]の間にはタイムラグが存在するが、以下では、簡単のために両時刻を略同じと看做す。
なお、Ｃase-2の場合、画像処理部２１が画像信号生成時刻ＴC[m]に画像信号Ｄ[m]の生成を完了させた後に、画像処理部２１が書込完了信号ＰtAを出力し、当該書込完了信号ＰtAの供給を受けた出力制御部３１が「ｍ≦ｍa」を満たす旨の判定をしたタイミングが画像処理判定時刻ＴA[m]であるため、画像処理判定時刻ＴA[m]及び画像信号生成時刻ＴC[m]の間にはタイムラグが存在するが、以下では、簡単のために両時刻を略同じと看做す。
出力制御部３１は、画像処理判定時刻ＴA[m]及び表示準備判定時刻ＴB[m]のうち遅い方の時刻、すなわち、画像処理判定時刻ＴA[m]において、出力制御信号ＣTRに出力許可パルスＰL[m]を設定する。つまり、この出力許可パルスＰL[m]は、画像信号Ｄ[m]についての第１条件及び第２条件が充足されたときに出力される。そして、タイミングジェネレータ３２は、出力許可パルスＰL[m]が出力された後であって第３条件が充足されたとき、換言すれば、出力許可パルスＰL[m]が出力された後に最初にイネーブル信号ＤＥnbがアクティブになるときに、画像信号出力部２３から画像信号Ｄ[m]が出力されるように制御する。
以下、説明の都合上、画像信号Ｄ[m]について、第１条件〜第３条件の全てが充足された時刻を、出力条件充足時刻ＴJ[m]と称する。
以下、説明の都合上、画像信号Ｄ[m]について、第１条件〜第３条件の全てが充足された時刻を、出力条件充足時刻ＴJ[m]と称する。
本実施形態では、タイミングジェネレータ３２は、出力制御信号ＣTRに基づいて、タイミングジェネレータ３２の内部処理で用いるための内部処理信号ＩSのレベルを決定する。そして、タイミングジェネレータ３２は、内部処理信号ＩSに基づいて、イネーブル信号ＤＥnbをアクティブにするタイミング、及び、水平走査期間Ｈdの種別（有効水平走査期間Ｈd-Ａまたは無効水平走査期間Ｈd-Ｄ）を決定する。
具体的には、タイミングジェネレータ３２は、図６に示すように、出力制御信号ＣTRに出力許可パルスＰL[m]が設定されると、内部処理信号ＩSをアクティブ（この図の例ではハイレベル）とする。
次に、タイミングジェネレータ３２は、水平走査期間Ｈdが開始されるタイミングにおいて内部処理信号ＩSがアクティブである場合、当該水平走査期間Ｈdの種別を有効水平走査期間Ｈd-Ａ[m]に決定（分類）し、当該有効水平走査期間Ｈd-Ａ[m]の水平有効データ期間ＤＨＩが開始されるタイミングでイネーブル信号ＤＥnbをアクティブにする。このイネーブル信号ＤＥnbがアクティブとなるタイミングが、出力条件充足時刻ＴJ[m]に該当する。
そして、タイミングジェネレータ３２は、当該有効水平走査期間Ｈd-Ａ[m]の水平有効データ期間ＤＨＩが開始されてイネーブル信号ＤＥnbがアクティブとなるタイミング、つまり、出力条件充足時刻ＴJ[m]において、内部処理信号ＩSを非アクティブとする。
次に、タイミングジェネレータ３２は、水平走査期間Ｈdが開始されるタイミングにおいて内部処理信号ＩSがアクティブである場合、当該水平走査期間Ｈdの種別を有効水平走査期間Ｈd-Ａ[m]に決定（分類）し、当該有効水平走査期間Ｈd-Ａ[m]の水平有効データ期間ＤＨＩが開始されるタイミングでイネーブル信号ＤＥnbをアクティブにする。このイネーブル信号ＤＥnbがアクティブとなるタイミングが、出力条件充足時刻ＴJ[m]に該当する。
そして、タイミングジェネレータ３２は、当該有効水平走査期間Ｈd-Ａ[m]の水平有効データ期間ＤＨＩが開始されてイネーブル信号ＤＥnbがアクティブとなるタイミング、つまり、出力条件充足時刻ＴJ[m]において、内部処理信号ＩSを非アクティブとする。
一方、タイミングジェネレータ３２は、水平走査期間Ｈdが開始されるタイミングにおいて内部処理信号ＩSが非アクティブである場合、当該水平走査期間Ｈdの種別を無効水平走査期間Ｈd-Ｄに決定（分類）し、当該無効水平走査期間Ｈd-Ｄの間はイネーブル信号ＤＥnbを非アクティブとする。
以下、図６に示す例において、出力制御部３１が、画像信号Ｄ[2]の出力準備が完了したか否かの判定を行い、出力制御信号ＣTRに出力許可パルスＰL[2]を設定する場合（Ｃase-1に相当）を説明する。
図６に示す例では、表示準備判定時刻ＴB[2]は、画像信号Ｄ[1]の出力が完了する水平走査期間Ｈd[1]（有効水平走査期間Ｈd-Ａ[1]）の水平有効データ期間ＤＨＩの終了時である。また、この例では、画像信号Ｄ[2]の画像処理が完了する画像信号生成時刻ＴC[2]が、表示準備判定時刻ＴB[2]よりも前に到来する場合を想定している。よって、この例では、画像処理判定時刻ＴA[2]は、表示準備判定時刻ＴB[2]と略同じ時刻となる。このため、出力制御部３１は、水平走査期間Ｈd[1]の水平有効データ期間ＤＨＩの終了時、つまり、表示準備判定時刻ＴB[2]に、出力制御信号ＣTRとして出力許可パルスＰL[2]を出力する。
タイミングジェネレータ３２は、出力制御信号ＣTRとして出力許可パルスＰL[2]が出力されタイミング、つまり、水平走査期間Ｈd[1]の水平有効データ期間ＤＨＩの終了するタイミングにおいて、内部処理信号ＩSをアクティブにする。この場合、内部処理信号ＩSは、水平走査期間Ｈd[2]の開始時においてもアクティブとなっている。このため、タイミングジェネレータ３２は、水平走査期間Ｈd[2]を有効水平走査期間Ｈd-Ａ[2]とし、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩにおいて、イネーブル信号ＤＥnbをアクティブにする。
すなわち、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩの開始時刻が、画像信号Ｄ[2]についての第１条件〜第３条件の全てが充足された出力条件充足時刻ＴJ[2]となる。このため、水平走査期間Ｈd[2]において、画像信号Ｄ[2]が出力されることになる。また、タイミングジェネレータ３２は、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩが開始されるタイミングにおいて、内部処理信号ＩSを非アクティブとする。
図６に示す例では、表示準備判定時刻ＴB[2]は、画像信号Ｄ[1]の出力が完了する水平走査期間Ｈd[1]（有効水平走査期間Ｈd-Ａ[1]）の水平有効データ期間ＤＨＩの終了時である。また、この例では、画像信号Ｄ[2]の画像処理が完了する画像信号生成時刻ＴC[2]が、表示準備判定時刻ＴB[2]よりも前に到来する場合を想定している。よって、この例では、画像処理判定時刻ＴA[2]は、表示準備判定時刻ＴB[2]と略同じ時刻となる。このため、出力制御部３１は、水平走査期間Ｈd[1]の水平有効データ期間ＤＨＩの終了時、つまり、表示準備判定時刻ＴB[2]に、出力制御信号ＣTRとして出力許可パルスＰL[2]を出力する。
タイミングジェネレータ３２は、出力制御信号ＣTRとして出力許可パルスＰL[2]が出力されタイミング、つまり、水平走査期間Ｈd[1]の水平有効データ期間ＤＨＩの終了するタイミングにおいて、内部処理信号ＩSをアクティブにする。この場合、内部処理信号ＩSは、水平走査期間Ｈd[2]の開始時においてもアクティブとなっている。このため、タイミングジェネレータ３２は、水平走査期間Ｈd[2]を有効水平走査期間Ｈd-Ａ[2]とし、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩにおいて、イネーブル信号ＤＥnbをアクティブにする。
すなわち、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩの開始時刻が、画像信号Ｄ[2]についての第１条件〜第３条件の全てが充足された出力条件充足時刻ＴJ[2]となる。このため、水平走査期間Ｈd[2]において、画像信号Ｄ[2]が出力されることになる。また、タイミングジェネレータ３２は、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩが開始されるタイミングにおいて、内部処理信号ＩSを非アクティブとする。
次に、図６に示す例において、出力制御部３１が、画像信号Ｄ[3]の出力準備が完了したか否かの判定を行い、出力制御信号ＣTRに出力許可パルスＰL[3]を設定する場合（Ｃase-2に相当）を説明する。
図６に示す例では、表示準備判定時刻ＴB[3]は、画像信号Ｄ[2]の出力が完了する水平走査期間Ｈd[2]（有効水平走査期間Ｈd-Ａ[2]）の水平有効データ期間ＤＨＩの終了時である。この例では、画像信号Ｄ[3]の画像処理が完了する画像信号生成時刻ＴC[3]が、表示準備判定時刻ＴB[3]よりも後となる場合を想定している。よって、画像処理判定時刻ＴA[3]は、表示準備判定時刻ＴB[3]よりも後の時刻となる。また、この例では、画像信号生成時刻ＴC[3]が、水平走査期間Ｈd[3]の開始時よりも後となる場合を想定している。このため、出力制御部３１は、水平走査期間Ｈd[3]の開始時よりも後の時刻に、出力許可パルスＰL[3]を出力する。
上述のとおり、タイミングジェネレータ３２は、内部処理信号ＩSを、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩの開始時に非アクティブとする。このため、内部処理信号ＩSは、水平走査期間Ｈd[3]の開始時に非アクティブとなっている。よって、タイミングジェネレータ３２は、水平走査期間Ｈd[3]を無効水平走査期間Ｈd-Ｄとして分類し、水平走査期間Ｈd[3]の水平有効データ期間ＤＨＩにおいて、イネーブル信号ＤＥnbを非アクティブにする。この場合、画像信号出力部２３は、水平走査期間Ｈd[3]の水平有効データ期間ＤＨＩにおいて、画像信号Ｄ[3]を出力せずに、無効信号Ｄmyを出力する。
その後、タイミングジェネレータ３２は、出力制御信号ＣTRとして出力許可パルスＰL[3]が出力されタイミングにおいて、内部処理信号ＩSをアクティブにする。この例では、出力許可パルスＰL[3]が出力されるタイミングは、水平走査期間Ｈd[4]の開始前である。この場合、内部処理信号ＩSは、水平走査期間Ｈd[4]の開始時においてもアクティブとなっている。このため、タイミングジェネレータ３２は、水平走査期間Ｈd[4]を有効水平走査期間Ｈd-Ａ[3]とし、水平走査期間Ｈd[4]の水平有効データ期間ＤＨＩにおいて、イネーブル信号ＤＥnbをアクティブにする。
すなわち、水平走査期間Ｈd[4]の水平有効データ期間ＤＨＩの開始時刻が、画像信号Ｄ[3]についての第１条件〜第３条件の全てが充足された出力条件充足時刻ＴJ[3]となる。このため、水平走査期間Ｈd[4]において、画像信号Ｄ[3]が出力されることになる。
なお、この図に示す例では、出力制御部３１が、画像信号Ｄ[1]の出力準備が完了したか否かの判定を行い出力制御信号ＣTRに出力許可パルスＰL[1]を設定する場合、及び、画像信号Ｄ[1]の出力準備が完了したか否かの判定を行い出力制御信号ＣTRに出力許可パルスＰL[1]を設定する場合は、Ｃase-1である場合を想定している。
図６に示す例では、表示準備判定時刻ＴB[3]は、画像信号Ｄ[2]の出力が完了する水平走査期間Ｈd[2]（有効水平走査期間Ｈd-Ａ[2]）の水平有効データ期間ＤＨＩの終了時である。この例では、画像信号Ｄ[3]の画像処理が完了する画像信号生成時刻ＴC[3]が、表示準備判定時刻ＴB[3]よりも後となる場合を想定している。よって、画像処理判定時刻ＴA[3]は、表示準備判定時刻ＴB[3]よりも後の時刻となる。また、この例では、画像信号生成時刻ＴC[3]が、水平走査期間Ｈd[3]の開始時よりも後となる場合を想定している。このため、出力制御部３１は、水平走査期間Ｈd[3]の開始時よりも後の時刻に、出力許可パルスＰL[3]を出力する。
上述のとおり、タイミングジェネレータ３２は、内部処理信号ＩSを、水平走査期間Ｈd[2]の水平有効データ期間ＤＨＩの開始時に非アクティブとする。このため、内部処理信号ＩSは、水平走査期間Ｈd[3]の開始時に非アクティブとなっている。よって、タイミングジェネレータ３２は、水平走査期間Ｈd[3]を無効水平走査期間Ｈd-Ｄとして分類し、水平走査期間Ｈd[3]の水平有効データ期間ＤＨＩにおいて、イネーブル信号ＤＥnbを非アクティブにする。この場合、画像信号出力部２３は、水平走査期間Ｈd[3]の水平有効データ期間ＤＨＩにおいて、画像信号Ｄ[3]を出力せずに、無効信号Ｄmyを出力する。
その後、タイミングジェネレータ３２は、出力制御信号ＣTRとして出力許可パルスＰL[3]が出力されタイミングにおいて、内部処理信号ＩSをアクティブにする。この例では、出力許可パルスＰL[3]が出力されるタイミングは、水平走査期間Ｈd[4]の開始前である。この場合、内部処理信号ＩSは、水平走査期間Ｈd[4]の開始時においてもアクティブとなっている。このため、タイミングジェネレータ３２は、水平走査期間Ｈd[4]を有効水平走査期間Ｈd-Ａ[3]とし、水平走査期間Ｈd[4]の水平有効データ期間ＤＨＩにおいて、イネーブル信号ＤＥnbをアクティブにする。
すなわち、水平走査期間Ｈd[4]の水平有効データ期間ＤＨＩの開始時刻が、画像信号Ｄ[3]についての第１条件〜第３条件の全てが充足された出力条件充足時刻ＴJ[3]となる。このため、水平走査期間Ｈd[4]において、画像信号Ｄ[3]が出力されることになる。
なお、この図に示す例では、出力制御部３１が、画像信号Ｄ[1]の出力準備が完了したか否かの判定を行い出力制御信号ＣTRに出力許可パルスＰL[1]を設定する場合、及び、画像信号Ｄ[1]の出力準備が完了したか否かの判定を行い出力制御信号ＣTRに出力許可パルスＰL[1]を設定する場合は、Ｃase-1である場合を想定している。
このように本実施形態では、出力制御部３１は、第１条件及び第２条件が充足されときに、出力許可パルスＰL[m]を出力する。そして、画像信号出力部２３は、出力許可パルスＰL[m]が出力された後の最初の水平走査期間Ｈdにおいて、画像信号Ｄ[m]を出力する。このため、画像処理部２１による画像処理等により、ある水平走査期間Ｈdにおいて画像信号出力部２３から画像信号Ｄ[m]を出力できない場合において、画像信号出力部２３からの画像信号Ｄ[m]の出力タイミングを、水平走査期間Ｈdの精度で調整することができる。
なお、図６に示す例では、タイミングジェネレータ３２は、水平走査期間Ｈdの種別を、水平走査期間Ｈdが開始されるタイミングで決定しているが、これは一例に過ぎず、例えば、出力許可パルスＰL[m]が出力される水平走査期間Ｈdの水平フロントポーチ期間ＤＨfの開始から、出力許可パルスＰL[m]が出力された後の最初の水平走査期間Ｈdの水平バックポーチ期間ＤＨbの終了までの間に決定すればよい。
また、図６に示す例では、内部処理信号ＩSを非アクティブとするタイミングを、イネーブル信号ＤＥnbがアクティブとなるタイミングとしているが、これは一例に過ぎず、タイミングジェネレータ３２が内部処理信号ＩSを非アクティブとするタイミングは、イネーブル信号ＤＥnbがアクティブとなってから非アクティブとなるまでの水平有効データ期間ＤＨＩの間であればいつでもよい。
また、図６に示す例では、内部処理信号ＩSを非アクティブとするタイミングを、イネーブル信号ＤＥnbがアクティブとなるタイミングとしているが、これは一例に過ぎず、タイミングジェネレータ３２が内部処理信号ＩSを非アクティブとするタイミングは、イネーブル信号ＤＥnbがアクティブとなってから非アクティブとなるまでの水平有効データ期間ＤＨＩの間であればいつでもよい。
また、本実施形態において、タイミングジェネレータ３２は、内部処理信号ＩSを用いて、イネーブル信号ＤＥnbの波形と、水平走査期間Ｈdの種別とを決定しているが、これは一例に過ぎず、内部処理信号ＩSを用いずに、出力制御信号ＣTRに基づいて、これらを決定してもよい。
また、本実施形態において、出力制御信号ＣTRは、出力許可パルスＰL[m]を含む波形となっているが、これは一例であり、出力制御信号ＣTRは、例えば、図６に示す内部処理信号ＩSの波形を有していてもよい。この場合、タイミングジェネレータ３２は、出力制御部３１が出力制御信号ＣTRの波形の決定をするために必要なイネーブル信号ＤＥnb等の各種信号を、出力制御部３１に供給すればよい。
また、本実施形態において、出力制御信号ＣTRは、出力許可パルスＰL[m]を含む波形となっているが、これは一例であり、出力制御信号ＣTRは、例えば、図６に示す内部処理信号ＩSの波形を有していてもよい。この場合、タイミングジェネレータ３２は、出力制御部３１が出力制御信号ＣTRの波形の決定をするために必要なイネーブル信号ＤＥnb等の各種信号を、出力制御部３１に供給すればよい。
図７は、有効水平走査期間Ｈd-Ａ及び無効水平走査期間Ｈd-Ｄと、垂直走査期間Ｆdとの関係を説明するための説明図である。
垂直走査期間Ｆdは、Ｍ行のラインに対応する画像信号Ｄ[1]〜Ｄ[M]を出力する期間である。このため、タイミングジェネレータ３２は、各垂直走査期間Ｆdの垂直有効データ期間ＤＶＩに、Ｍ個の有効水平走査期間Ｈd-Ａを設ける。
一方、本実施形態に係るタイミングジェネレータ３２は、水平走査期間Ｈdを、有効水平走査期間Ｈd-Ａまたは無効水平走査期間Ｈd-Ｄの何れかに分類する。そして、水平走査期間Ｈdが有効水平走査期間Ｈd-Ａである場合にのみ、当該水平走査期間Ｈdにおいて画像信号Ｄ[m]が出力される。
このため、本実施形態に係るタイミングジェネレータ３２は、垂直走査期間Ｆdの垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄを設ける場合には、当該無効水平走査期間Ｈd-Ｄに相当する時間長だけ垂直有効データ期間ＤＶＩを延長し、各垂直走査期間Ｆdの垂直有効データ期間ＤＶＩにＭ個の有効水平走査期間Ｈd-Ａを設けるように、表示垂直同期信号ＤＶsync及び垂直有効データ信号ＤＶactiveを出力する。
垂直走査期間Ｆdは、Ｍ行のラインに対応する画像信号Ｄ[1]〜Ｄ[M]を出力する期間である。このため、タイミングジェネレータ３２は、各垂直走査期間Ｆdの垂直有効データ期間ＤＶＩに、Ｍ個の有効水平走査期間Ｈd-Ａを設ける。
一方、本実施形態に係るタイミングジェネレータ３２は、水平走査期間Ｈdを、有効水平走査期間Ｈd-Ａまたは無効水平走査期間Ｈd-Ｄの何れかに分類する。そして、水平走査期間Ｈdが有効水平走査期間Ｈd-Ａである場合にのみ、当該水平走査期間Ｈdにおいて画像信号Ｄ[m]が出力される。
このため、本実施形態に係るタイミングジェネレータ３２は、垂直走査期間Ｆdの垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄを設ける場合には、当該無効水平走査期間Ｈd-Ｄに相当する時間長だけ垂直有効データ期間ＤＶＩを延長し、各垂直走査期間Ｆdの垂直有効データ期間ＤＶＩにＭ個の有効水平走査期間Ｈd-Ａを設けるように、表示垂直同期信号ＤＶsync及び垂直有効データ信号ＤＶactiveを出力する。
例えば、タイミングジェネレータ３２は、図７（Ａ）に示す垂直走査期間Ｆd1のように、垂直有効データ期間ＤＶＩの全ての水平走査期間Ｈdを有効水平走査期間Ｈd-Ａとする場合には、垂直有効データ期間ＤＶＩの時間長を、水平走査期間ＨdのＭ倍の時間長とする。
一方、タイミングジェネレータ３２は、図７（Ｂ）に示す垂直走査期間Ｆd2のように、垂直有効データ期間ＤＶＩに１または複数の無効水平走査期間Ｈd-Ｄを設ける場合には、垂直有効データ期間ＤＶＩの時間長が、水平走査期間ＨdのＭ倍の時間長と、垂直有効データ期間ＤＶＩに存在する１または複数の無効水平走査期間Ｈd-Ｄの合計の時間長と、を加算した時間長とする。
つまり、タイミングジェネレータ３２は、垂直走査期間Ｆdの時間長を、水平走査期間Ｈdの単位で調整することで、各垂直走査期間Ｆdにおいて画像信号出力部２３が画像信号Ｄ[1]〜Ｄ[M]を出力することを可能としている。
一方、タイミングジェネレータ３２は、図７（Ｂ）に示す垂直走査期間Ｆd2のように、垂直有効データ期間ＤＶＩに１または複数の無効水平走査期間Ｈd-Ｄを設ける場合には、垂直有効データ期間ＤＶＩの時間長が、水平走査期間ＨdのＭ倍の時間長と、垂直有効データ期間ＤＶＩに存在する１または複数の無効水平走査期間Ｈd-Ｄの合計の時間長と、を加算した時間長とする。
つまり、タイミングジェネレータ３２は、垂直走査期間Ｆdの時間長を、水平走査期間Ｈdの単位で調整することで、各垂直走査期間Ｆdにおいて画像信号出力部２３が画像信号Ｄ[1]〜Ｄ[M]を出力することを可能としている。
なお、図７（Ａ）に示す垂直走査期間Ｆd1のように、垂直有効データ期間ＤＶＩの全ての水平走査期間Ｈdが有効水平走査期間Ｈd-Ａである場合における、垂直走査期間Ｆdの時間長を、標準垂直走査時間Ｔdと称する。また、表示部４０で表示可能な最高のフレームレート、すなわち、垂直走査期間Ｆdの時間長が標準垂直走査時間Ｔdである場合のフレームレートである「１／Ｔd」を、「第２フレームレート」と称する場合がある。また、タイミング制御部３０が実行するタイミングの制御のうち、第２フレームレートにより画像信号Ｄが出力されるようにタイミングを制御することを、「第１のタイミング制御」と称する場合がある。
また、図７（Ｂ）に示す垂直走査期間Ｆd2のように、垂直有効データ期間ＤＶＩに１または複数の無効水平走査期間Ｈd-Ｄが設けられる場合における、当該１または複数の無効水平走査期間Ｈd-Ｄの時間長の合計値を、延長垂直走査時間Ｔexと称する。つまり、垂直有効データ期間ＤＶＩに１または複数の無効水平走査期間Ｈd-Ｄが設けられる場合の垂直走査期間Ｆdの時間長は、標準垂直走査時間Ｔdと延長垂直走査時間Ｔexとの合計である。なお、タイミング制御部３０が実行するタイミングの制御のうち、１または複数の無効水平走査期間Ｈd-Ｄが設けられる垂直有効データ期間ＤＶＩにおいて画像信号Ｄが出力されるようにタイミングを制御することを、「第２のタイミング制御」と称する場合がある。詳細は後述するが、第２のタイミング制御において、タイミング制御部３０は、第１フレームレートにより画像信号Ｄが出力されるようにタイミングを制御する。
また、図７（Ｂ）に示す垂直走査期間Ｆd2のように、垂直有効データ期間ＤＶＩに１または複数の無効水平走査期間Ｈd-Ｄが設けられる場合における、当該１または複数の無効水平走査期間Ｈd-Ｄの時間長の合計値を、延長垂直走査時間Ｔexと称する。つまり、垂直有効データ期間ＤＶＩに１または複数の無効水平走査期間Ｈd-Ｄが設けられる場合の垂直走査期間Ｆdの時間長は、標準垂直走査時間Ｔdと延長垂直走査時間Ｔexとの合計である。なお、タイミング制御部３０が実行するタイミングの制御のうち、１または複数の無効水平走査期間Ｈd-Ｄが設けられる垂直有効データ期間ＤＶＩにおいて画像信号Ｄが出力されるようにタイミングを制御することを、「第２のタイミング制御」と称する場合がある。詳細は後述するが、第２のタイミング制御において、タイミング制御部３０は、第１フレームレートにより画像信号Ｄが出力されるようにタイミングを制御する。
次に、図８を参照しつつ、表示部４０について説明する。
図８は、表示部４０の構成を示すブロック図である。上述のとおり、表示部４０は、液晶パネル４２の動作を制御するＥＶＦコントローラ４１と、画像信号Ｄに応じた画像を表示するための液晶パネル４２と、を備える。
液晶パネル４２には、上述のとおり、画像信号Ｄに応じた画像を表示するための表示領域ＡDが設けられている。表示領域ＡDは、図５においてＸ軸方向に延在するＭ行の走査線と、Ｙ軸方向に延在するＮ列のデータ線と、走査線及びデータ線の交差に対応しても受けられるＭ行×Ｎ列の画素と、を含んで構成されている。また、液晶パネル４２は、走査線を選択するための走査線駆動回路４２１と、データ線を駆動するためのデータ線駆動回路４２２と、表示領域ＡDに表示される画像を拡大して観察可能とするための光学系（図示省略）と、を備える。
図８は、表示部４０の構成を示すブロック図である。上述のとおり、表示部４０は、液晶パネル４２の動作を制御するＥＶＦコントローラ４１と、画像信号Ｄに応じた画像を表示するための液晶パネル４２と、を備える。
液晶パネル４２には、上述のとおり、画像信号Ｄに応じた画像を表示するための表示領域ＡDが設けられている。表示領域ＡDは、図５においてＸ軸方向に延在するＭ行の走査線と、Ｙ軸方向に延在するＮ列のデータ線と、走査線及びデータ線の交差に対応しても受けられるＭ行×Ｎ列の画素と、を含んで構成されている。また、液晶パネル４２は、走査線を選択するための走査線駆動回路４２１と、データ線を駆動するためのデータ線駆動回路４２２と、表示領域ＡDに表示される画像を拡大して観察可能とするための光学系（図示省略）と、を備える。
ＥＶＦコントローラ４１は、画像信号出力部２３から画像信号Ｄ（画像信号ＤGB）が入力されるデータ入力部４１１と、各垂直有効データ期間ＤＶＩにおいて有効水平走査期間Ｈd-Ａの個数（イネーブル信号ＤＥnbがアクティブとなる回数）をカウントするカウンタ４１２と、液晶パネル４２の駆動タイミングを規定する各種タイミング信号を生成するタイミング生成部４１３と、液晶パネル４２に対して画像信号Ｄ（画像信号ＤGC）を出力するデータ出力部４１４と、ＥＶＦコントローラ４１の動作を規定する設定パラメーターＰRMを格納するためのレジスタ４１５と、を備える。
なお、本実施形態において、画像処理回路１００（画像信号生成部２０、及び、タイミング制御部３０）とＥＶＦコントローラ４１との間のデータ伝送は、パラレルインタフェース（図示省略）によって行う。
なお、本実施形態において、画像処理回路１００（画像信号生成部２０、及び、タイミング制御部３０）とＥＶＦコントローラ４１との間のデータ伝送は、パラレルインタフェース（図示省略）によって行う。
撮像表示装置１の利用者が操作部６０によりライブビューモードによる動作を選択する等して、撮像表示装置１がライブビューモードで動作する場合、撮像表示装置１がライブビューモードによる動作を開始するに先立ち、パラメーター送信部３３から設定パラメーターＰRMがタイミング生成部４１３に供給される。そして、タイミング生成部４１３は、送信された設定パラメーターＰRMを、レジスタ４１５に格納（設定）する。
レジスタ４１５に設定される設定パラメーターＰRMは、液晶パネル４２の仕様に応じてＥＶＦコントローラ４１を動作させるための、ＥＶＦコントローラ４１の動作を規定する値である。
設定パラメーターＰRMとしては、例えば、水平走査期間Ｈdの時間長（または、水平走査期間Ｈdに含まれる表示ドットクロック信号ＤCLKのクロック数。以下、表示ドットクロック信号ＤCLKのクロック数を、単に「クロック数」と称する）、水平有効データ期間ＤＨＩの時間長（または、表示領域ＡDにおけるＸ軸方向の画素数（Ｎ））、水平同期期間ＤＨpの時間長（または、クロック数）、水平バックポーチ期間ＤＨbの時間長（または、クロック数）、水平フロントポーチ期間ＤＨfの時間長（または、クロック数）、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄが含まれない場合の垂直有効データ期間ＤＶＩの時間長（または、表示領域ＡDにおけるＹ軸方向のライン数（Ｍ）。すなわち、垂直有効データ期間ＤＶＩに含まれる有効水平走査期間Ｈd-Ａの個数）、垂直同期期間ＤＶpの時間長（または、クロック数）、垂直バックポーチ期間ＤＶbの時間長（または、クロック数）、垂直フロントポーチ期間ＤＶfの時間長（または、クロック数）、等を含むものであればよい。
本実施形態に係る撮像表示装置１では、画像処理回路１００から、液晶パネル４２の仕様に応じたＥＶＦコントローラ４１の動作タイミングを設定できるので、液晶パネル４２のサイズを変更する場合や、フレームレート等の液晶パネル４２の仕様を変更する場合であっても、ＥＶＦコントローラ４１を変更する必要がない。このため、システムの汎用性を向上させることが可能となる。
設定パラメーターＰRMとしては、例えば、水平走査期間Ｈdの時間長（または、水平走査期間Ｈdに含まれる表示ドットクロック信号ＤCLKのクロック数。以下、表示ドットクロック信号ＤCLKのクロック数を、単に「クロック数」と称する）、水平有効データ期間ＤＨＩの時間長（または、表示領域ＡDにおけるＸ軸方向の画素数（Ｎ））、水平同期期間ＤＨpの時間長（または、クロック数）、水平バックポーチ期間ＤＨbの時間長（または、クロック数）、水平フロントポーチ期間ＤＨfの時間長（または、クロック数）、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄが含まれない場合の垂直有効データ期間ＤＶＩの時間長（または、表示領域ＡDにおけるＹ軸方向のライン数（Ｍ）。すなわち、垂直有効データ期間ＤＶＩに含まれる有効水平走査期間Ｈd-Ａの個数）、垂直同期期間ＤＶpの時間長（または、クロック数）、垂直バックポーチ期間ＤＶbの時間長（または、クロック数）、垂直フロントポーチ期間ＤＶfの時間長（または、クロック数）、等を含むものであればよい。
本実施形態に係る撮像表示装置１では、画像処理回路１００から、液晶パネル４２の仕様に応じたＥＶＦコントローラ４１の動作タイミングを設定できるので、液晶パネル４２のサイズを変更する場合や、フレームレート等の液晶パネル４２の仕様を変更する場合であっても、ＥＶＦコントローラ４１を変更する必要がない。このため、システムの汎用性を向上させることが可能となる。
データ入力部４１１には、画像処理回路１００から、表示ドットクロック信号ＤCLKと、画像信号Ｄ（画像信号ＤGB）及び無効信号Ｄmyを含む画像信号出力部２３からの出力信号と、イネーブル信号ＤＥnbと、が供給される。
データ入力部４１１は、イネーブル信号ＤＥnbがアクティブとなると、当該イネーブル信号ＤＥnbがアクティブの間に表示ドットクロック信号ＤCLKに同期して画像信号出力部２３から供給される１ライン分の画像信号Ｄ[m]を取り込み、取り込んだ画像信号Ｄ[m]をデータ出力部４１４に対して出力する。一方、データ入力部４１１は、イネーブル信号ＤＥnbが非アクティブの場合、画像信号出力部２３から供給される無効信号Ｄmyを取り込まずに破棄する。
データ入力部４１１は、イネーブル信号ＤＥnbがアクティブとなると、当該イネーブル信号ＤＥnbがアクティブの間に表示ドットクロック信号ＤCLKに同期して画像信号出力部２３から供給される１ライン分の画像信号Ｄ[m]を取り込み、取り込んだ画像信号Ｄ[m]をデータ出力部４１４に対して出力する。一方、データ入力部４１１は、イネーブル信号ＤＥnbが非アクティブの場合、画像信号出力部２３から供給される無効信号Ｄmyを取り込まずに破棄する。
カウンタ４１２には、画像処理回路１００から、イネーブル信号ＤＥnbと、表示垂直同期信号ＤＶsyncとが供給される。
カウンタ４１２は、イネーブル信号ＤＥnbの立ち上がりエッジをカウントし、カウント結果を示すカウント値Ｃntを、タイミング生成部４１３に対して出力する。また、カウンタ４１２は、表示垂直同期信号ＤＶsyncがアクティブになり、表示垂直同期信号ＤＶsyncとして垂直同期パルスＰlsＶが供給されると、カウント値Ｃntを「０」にリセットする。このため、カウンタ４１２は、各垂直走査期間Ｆdに含まれる有効水平走査期間Ｈd-Ａの個数をカウントすることができる。すなわち、カウント値Ｃntは、データ入力部４１１が第ｍ行のラインで表示すべき画像を指定する画像信号Ｄ[m]を取り込む場合には、当該画像信号Ｄ[m]に対応するライン番号（ｍ）を示す。
カウンタ４１２は、イネーブル信号ＤＥnbの立ち上がりエッジをカウントし、カウント結果を示すカウント値Ｃntを、タイミング生成部４１３に対して出力する。また、カウンタ４１２は、表示垂直同期信号ＤＶsyncがアクティブになり、表示垂直同期信号ＤＶsyncとして垂直同期パルスＰlsＶが供給されると、カウント値Ｃntを「０」にリセットする。このため、カウンタ４１２は、各垂直走査期間Ｆdに含まれる有効水平走査期間Ｈd-Ａの個数をカウントすることができる。すなわち、カウント値Ｃntは、データ入力部４１１が第ｍ行のラインで表示すべき画像を指定する画像信号Ｄ[m]を取り込む場合には、当該画像信号Ｄ[m]に対応するライン番号（ｍ）を示す。
タイミング生成部４１３には、画像処理回路１００から、表示垂直同期信号ＤＶsyncと、表示水平同期信号ＤＨsyncと、設定パラメーターＰRMと、が供給され、また、カウンタ４１２から、カウント値Ｃntが供給される。
上述のとおり、タイミング生成部４１３は、画像処理回路１００から設定パラメーターＰRMが供給されると、供給された設定パラメーターＰRMをレジスタ４１５に設定する。
上述のとおり、タイミング生成部４１３は、画像処理回路１００から設定パラメーターＰRMが供給されると、供給された設定パラメーターＰRMをレジスタ４１５に設定する。
タイミング生成部４１３は、カウント値Ｃntが「ｍ」を示す場合には、走査線駆動回路４２１に対して、カウント値Ｃntに対応する第ｍ行のライン（走査線）の選択を行わせる。また、タイミング生成部４１３は、カウント値Ｃntが「ｍ」を示す場合には、データ出力部４１４に対して、データ入力部４１１が取り込んだ１ライン分の画像信号Ｄ[m]を画像信号ＤGC[m]としてデータ線駆動回路４２２に供給させる。この場合、データ線駆動回路４２２は、走査線駆動回路４２１が選択している第ｍ行の走査線に対応して設けられるＮ個の画素（第ｍ行のライン）に対し、データ出力部４１４から供給された画像信号ＤGC[m]を、データ線を介して書き込む。これにより、選択されたラインの画像が表示領域ＡDに表示される。なお、本実施形態では、画像信号ＤGA及びＤGBはデジタルの信号であるが、画像信号ＤGCは、デジタルの信号であってもアナログの信号であってもよい。
このように、ＥＶＦコントローラ４１は、画像信号出力部２３から供給された画像信号Ｄの示す画像を、液晶パネル４２の表示領域ＡDに表示させる。
このように、ＥＶＦコントローラ４１は、画像信号出力部２３から供給された画像信号Ｄの示す画像を、液晶パネル４２の表示領域ＡDに表示させる。
なお、ＥＶＦコントローラ４１は、カウント値Ｃntが、レジスタ４１５に設定された表示領域ＡDのライン数「Ｍ」と等しくなったことを検出した場合、検出後に最初に表示水平同期信号ＤＨsyncが供給されるタイミング、つまり、垂直フロントポーチ期間ＤＶfが開始されるタイミングで、改フレーム処理の準備に入る。そして、垂直フロントポーチ期間ＤＶfが開始された後、タイミング生成部４１３は、データ入力部４１１及びデータ出力部４１４に対して、改フレーム処理の実行を指令するための改フレーム処理開始信号Ｃngを出力する。
ここで、改フレーム処理とは、次の垂直走査期間Ｆdにおいて画像を表示する準備のための処理であり、例えば、データ入力部４１１及びデータ出力部４１４が備えるバッファに記憶されたデータの消去を実行する処理等が含まれる。改フレーム処理は、垂直フロントポーチ期間ＤＶfの開始以後に開始される。また、改フレーム処理は、垂直フロントポーチ期間ＤＶfの終了までに終了することが好ましい。
ここで、改フレーム処理とは、次の垂直走査期間Ｆdにおいて画像を表示する準備のための処理であり、例えば、データ入力部４１１及びデータ出力部４１４が備えるバッファに記憶されたデータの消去を実行する処理等が含まれる。改フレーム処理は、垂直フロントポーチ期間ＤＶfの開始以後に開始される。また、改フレーム処理は、垂直フロントポーチ期間ＤＶfの終了までに終了することが好ましい。
＜２．画像処理＞
次に、図９乃至図１１を参照しつつ、画像処理部２１の詳細と、画像処理部２１で実行される画像処理と、について説明する。
次に、図９乃至図１１を参照しつつ、画像処理部２１の詳細と、画像処理部２１で実行される画像処理と、について説明する。
図９は、画像処理部２１の構成を示すブロック図である。
この図に示すように、画像処理部２１は、イメージセンサ１２から出力される撮像信号ＤSを一時的に格納するラインバッファ２１１と、ラインバッファ２１１に格納された撮像信号ＤSに対して補間処理を行う画素補間処理部２１２と、補間された撮像信号ＤSに対して色再現処理を行う色再現処理部２１３と、色再現された撮像信号ＤSに対してフィルタ処理を行うフィルタ処理部２１４と、フィルタ処理された撮像信号ＤSに対してガンマ補正を施すガンマ補正部２１５と、ガンマ補正された撮像信号ＤSを一時的に格納するラインバッファ２１６と、ラインバッファ２１６に格納された撮像信号ＤSを表示領域ＡDの備える画素数の画像信号Ｄに変換するリサイズ処理を行うリサイズ処理部２１７と、を備える。
この図に示すように、画像処理部２１は、イメージセンサ１２から出力される撮像信号ＤSを一時的に格納するラインバッファ２１１と、ラインバッファ２１１に格納された撮像信号ＤSに対して補間処理を行う画素補間処理部２１２と、補間された撮像信号ＤSに対して色再現処理を行う色再現処理部２１３と、色再現された撮像信号ＤSに対してフィルタ処理を行うフィルタ処理部２１４と、フィルタ処理された撮像信号ＤSに対してガンマ補正を施すガンマ補正部２１５と、ガンマ補正された撮像信号ＤSを一時的に格納するラインバッファ２１６と、ラインバッファ２１６に格納された撮像信号ＤSを表示領域ＡDの備える画素数の画像信号Ｄに変換するリサイズ処理を行うリサイズ処理部２１７と、を備える。
図１０は、イメージセンサ１２が備える受光素子が出力する画素データ信号Ｓigと、撮像信号ＤSとの関係を説明するための説明図である。上述のとおり、撮像表示装置１が撮像モードで動作する場合、イメージセンサ１２は、図１０（Ａ）に示す画素データ信号Ｓigの全部を静止画用撮像データとして出力する。一方、撮像表示装置１がライブビューモードで動作する場合、イメージセンサ１２は、画素データ信号Ｓigを間引きして、図１０（Ｂ）に示す撮像信号ＤSを出力する。
図１０（Ａ）において、「Ｒ」が付された四角形の各々は、赤色の画素に対応する（赤色光を検出するための）受光素子から出力される画素データ信号Ｓigを示し、「Ｇ」が付された四角形の各々は、緑色の画素の受光素子から出力される画素データ信号Ｓigを示し、「Ｂ」が付された四角形の各々は、青色の画素の受光素子から出力される画素データ信号Ｓigを示す。
また、図１０（Ｂ）において、「Ｒ」が付された四角形の各々は、表示領域ＡDの有する赤色の画素に対応する（赤色の画素で表示すべき階調を指定する）画像信号Ｄを生成するための撮像信号ＤSを示し、「Ｇ」が付された四角形の各々は、表示領域ＡDの有する緑色の画素に対応する画像信号Ｄを生成するための撮像信号ＤSを示し、「Ｂ」が付された四角形の各々は、表示領域ＡDの有する青色の画素に対応する画像信号Ｄを生成するための撮像信号ＤSを示す。
なお、本実施形態では、イメージセンサ１２の有効イメージセンサ領域ＡS及び液晶パネル４２の表示領域ＡDおいて、赤色、緑色、及び、青色の画素がベイヤー配列されている場合を想定する。
図１０（Ａ）において、「Ｒ」が付された四角形の各々は、赤色の画素に対応する（赤色光を検出するための）受光素子から出力される画素データ信号Ｓigを示し、「Ｇ」が付された四角形の各々は、緑色の画素の受光素子から出力される画素データ信号Ｓigを示し、「Ｂ」が付された四角形の各々は、青色の画素の受光素子から出力される画素データ信号Ｓigを示す。
また、図１０（Ｂ）において、「Ｒ」が付された四角形の各々は、表示領域ＡDの有する赤色の画素に対応する（赤色の画素で表示すべき階調を指定する）画像信号Ｄを生成するための撮像信号ＤSを示し、「Ｇ」が付された四角形の各々は、表示領域ＡDの有する緑色の画素に対応する画像信号Ｄを生成するための撮像信号ＤSを示し、「Ｂ」が付された四角形の各々は、表示領域ＡDの有する青色の画素に対応する画像信号Ｄを生成するための撮像信号ＤSを示す。
なお、本実施形態では、イメージセンサ１２の有効イメージセンサ領域ＡS及び液晶パネル４２の表示領域ＡDおいて、赤色、緑色、及び、青色の画素がベイヤー配列されている場合を想定する。
上述のとおり、イメージセンサ１２は、ＰS行×ＱS列の受光素子が出力する画素データ信号Ｓigに対して間引き処理を施すことで、Ｐ行×Ｑ列の画素に対応する撮像信号ＤSを出力する。
間引き処理において、イメージセンサ１２は、Ｙ軸方向について、ＰS行の受光素子が出力する画素データ信号Ｓigを、Ｐ行の画素に対応する信号に間引きする。
具体的には、イメージセンサ１２は、ＰS行の中から読み出し対象ラインを選択し、読み出し対象ラインに位置する受光素子が出力する画素データ信号Ｓigを読み出す一方で、読み出し対象ライン以外のラインに位置する受光素子が出力する画素データ信号Ｓigを読み飛ばすことで、Ｙ軸方向の間引きを行う。
具体的には、イメージセンサ１２は、ＰS行の中から読み出し対象ラインを選択し、読み出し対象ラインに位置する受光素子が出力する画素データ信号Ｓigを読み出す一方で、読み出し対象ライン以外のラインに位置する受光素子が出力する画素データ信号Ｓigを読み飛ばすことで、Ｙ軸方向の間引きを行う。
本実施形態では、イメージセンサ１２の有効イメージセンサ領域ＡSに設けられる画素の配列がベイヤー配列であるため、奇数ラインに１ラインの割合で読み出し対象ラインを定める。
画素がベイヤー配列されている場合、赤色画素及び緑色画素からなるラインと、緑色画素及び青色画素からなるラインとが、Ｙ軸方向において交互に並んでいる。このため、奇数ラインに１ラインの割合で読み出し対象ラインを定めることで、読み出し後の画素を、赤色画素及び緑色画素からなるラインと、緑色画素及び青色画素からなるラインとが、Ｙ軸方向において交互に並ぶように配列することができ、同色の画素が隣り合うことを防止することができる。
図１０（Ａ）に示す例では、Ｙ軸方向において、３ラインに１ラインの割合で読み出し対象ラインを定めている。具体的には、ライン１〜９のうち、ライン１、ライン４、及び、ライン７を読み出し対象ラインとしている。この場合、図１０（Ｂ）に示すように、画素データ信号ＳigをＹ軸方向に３分の１に間引いた撮像信号ＤSを得ることができる。
画素がベイヤー配列されている場合、赤色画素及び緑色画素からなるラインと、緑色画素及び青色画素からなるラインとが、Ｙ軸方向において交互に並んでいる。このため、奇数ラインに１ラインの割合で読み出し対象ラインを定めることで、読み出し後の画素を、赤色画素及び緑色画素からなるラインと、緑色画素及び青色画素からなるラインとが、Ｙ軸方向において交互に並ぶように配列することができ、同色の画素が隣り合うことを防止することができる。
図１０（Ａ）に示す例では、Ｙ軸方向において、３ラインに１ラインの割合で読み出し対象ラインを定めている。具体的には、ライン１〜９のうち、ライン１、ライン４、及び、ライン７を読み出し対象ラインとしている。この場合、図１０（Ｂ）に示すように、画素データ信号ＳigをＹ軸方向に３分の１に間引いた撮像信号ＤSを得ることができる。
また、イメージセンサ１２は、間引き処理として、Ｘ軸方向の間引きを行い、ＱS列の受光素子が出力する画素データ信号Ｓigを、Ｑ列の画素に対応する信号（撮像信号ＤS）とする。
具体的には、イメージセンサ１２は、各読み出し対象ラインに位置するＱS個の受光素子を、所定数個の受光素子が１つの組となるようにグループ分けし、各組を構成する所定数個の受光素子が出力する画素データ信号Ｓigの示す値を平均することで、ＱS個の受光素子が出力する画素データ信号Ｓigを、「所定数分の１」に縮小する。
具体的には、イメージセンサ１２は、各読み出し対象ラインに位置するＱS個の受光素子を、所定数個の受光素子が１つの組となるようにグループ分けし、各組を構成する所定数個の受光素子が出力する画素データ信号Ｓigの示す値を平均することで、ＱS個の受光素子が出力する画素データ信号Ｓigを、「所定数分の１」に縮小する。
イメージセンサ１２の画素がベイヤー配列の場合、各ラインには２色の画素が交互に配列されているため、Ｘ軸方向に１個おきに所定数個の受光素子を１組とするグループ分けを行う。そして、各組を構成する所定数個の受光素子が出力する画素データ信号Ｓigの示す値を相加平均する。
図１０（Ａ）に示す例では、Ｘ軸方向において、１個おきに３個の受光素子を１組としてグループ分けし、各組を構成する同色の３個の受光素子が出力する画素データ信号Ｓigの示す値を平均している。具体的には、例えば、ライン１及びライン７において、第１列、第３列、第５列の赤色画素を１組として、当該３個の画素に対応する３個の受光素子が出力する画素データ信号Ｓigの値を加算器Ａve1によって相加平均し、得られた平均値を第１列の赤色画素に対応する撮像信号ＤSの値として設定する。同様に、ライン１及びライン７において、第２列、第４列、第６列の緑色画素に対応する受光素子が出力する画素データ信号Ｓigの値を加算器Ａve2によって相加平均し、得られた平均値を第２列の緑色画素に対応する撮像信号ＤSの値として設定する。この場合、図１０（Ｂ）に示すように、画素データ信号ＳigをＸ軸方向に３分の１にリサイズ（縮小）した撮像信号ＤSを得ることができる。
図１０（Ａ）に示す例では、Ｘ軸方向において、１個おきに３個の受光素子を１組としてグループ分けし、各組を構成する同色の３個の受光素子が出力する画素データ信号Ｓigの示す値を平均している。具体的には、例えば、ライン１及びライン７において、第１列、第３列、第５列の赤色画素を１組として、当該３個の画素に対応する３個の受光素子が出力する画素データ信号Ｓigの値を加算器Ａve1によって相加平均し、得られた平均値を第１列の赤色画素に対応する撮像信号ＤSの値として設定する。同様に、ライン１及びライン７において、第２列、第４列、第６列の緑色画素に対応する受光素子が出力する画素データ信号Ｓigの値を加算器Ａve2によって相加平均し、得られた平均値を第２列の緑色画素に対応する撮像信号ＤSの値として設定する。この場合、図１０（Ｂ）に示すように、画素データ信号ＳigをＸ軸方向に３分の１にリサイズ（縮小）した撮像信号ＤSを得ることができる。
図１１は、リサイズ処理部２１７が実行するリサイズ処理を説明するための説明図である。
上述のとおり、撮像信号ＤSの示す画像の画素数と、画像信号Ｄの示す画像の画素数（表示領域ＡDの画素数）とは異なる。このため、リサイズ処理部２１７では、撮像信号ＤSを、表示領域ＡDの画素数に対応した画像信号Ｄに変換するリサイズ処理を実行する。
上述のとおり、撮像信号ＤSの示す画像の画素数と、画像信号Ｄの示す画像の画素数（表示領域ＡDの画素数）とは異なる。このため、リサイズ処理部２１７では、撮像信号ＤSを、表示領域ＡDの画素数に対応した画像信号Ｄに変換するリサイズ処理を実行する。
なお、撮像信号ＤSの示す画像は、撮像光学系１１が備えるレンズの光学特性に起因しする歪曲収差を有する場合がある。具体的には、被写体を撮像した際の撮像結果を示す画像が、表示領域ＡDにおいて本来表示すべき画像に比べて外側に向かって膨張する樽型収差や、または、本来表示すべき画像に比べて内側に向かって収縮する糸巻形収差を有することがある。このため、リサイズ処理部２１７では、リサイズ処理において、樽型収差や糸巻型収差等の歪曲収差を補正する歪曲補正処理を実行する。
以下、図１１を参照しつつ、リサイズ処理の中で実行される歪曲補正処理について説明する。なお、図１１では、撮像信号ＤSの示す画像のライン数が１６ライン（Ｐ＝１６）であり、画像信号Ｄ示す画像のライン数が１２ライン（Ｍ＝１２）である場合を想定している。
図１１（Ｃ）及び（Ｄ）は、被写体を撮像した際に表示領域ＡDに表示されるべき、画像信号Ｄの示す画像を表し、図１１（Ａ）は、樽型収差が生じている場合に撮像信号ＤSの示す画像を表し、図１１（Ｂ）は、糸巻型収差が生じている場合に撮像信号ＤSの示す画像を表している。
すなわち、図１１（Ａ）は、表示領域ＡDに表示すべき画像が四角形ＳQであるのにもかかわらず、撮像信号ＤSが、樽型収差によって四角形ＳQが膨張した閉曲線ＣV1を示す場合を表す。また、図１１（Ｂ）は、表示領域ＡDに表示すべき画像が四角形ＳQであるのにもかかわらず、撮像信号ＤSが、糸巻型収差によって四角形ＳQが収縮した閉曲線ＣV2を示す場合を表す。
すなわち、図１１（Ａ）は、表示領域ＡDに表示すべき画像が四角形ＳQであるのにもかかわらず、撮像信号ＤSが、樽型収差によって四角形ＳQが膨張した閉曲線ＣV1を示す場合を表す。また、図１１（Ｂ）は、表示領域ＡDに表示すべき画像が四角形ＳQであるのにもかかわらず、撮像信号ＤSが、糸巻型収差によって四角形ＳQが収縮した閉曲線ＣV2を示す場合を表す。
リサイズ処理部２１７は、図１１（Ａ）に示すような樽型収差が生じた場合、歪曲補正処理において、図１１（Ａ）に示すような閉曲線ＣV1で示される画像を、図１１（Ｃ）に示すような四角形ＳQで示される画像へと補正する。同様に、リサイズ処理部２１７は、図１１（Ｂ）に示すような樽型収差が生じた場合、歪曲補正処理において、図１１（Ｂ）に示すような閉曲線ＣV2で示される画像を、図１１（Ｄ）に示すような四角形ＳQで示される画像へと補正する。
これらの場合、リサイズ処理部２１７は、補正前の画像における画素と補正後の画像における画素とを対応付け、補正後の画素に対応する補正前の画素を中心画素とし、中心画素とその周辺の画素である周辺画素とを含む参照領域内の画素の各々で表示する階調に基づいて、補正後の画素の表示すべき階調を決定する。
これらの場合、リサイズ処理部２１７は、補正前の画像における画素と補正後の画像における画素とを対応付け、補正後の画素に対応する補正前の画素を中心画素とし、中心画素とその周辺の画素である周辺画素とを含む参照領域内の画素の各々で表示する階調に基づいて、補正後の画素の表示すべき階調を決定する。
例えば、リサイズ処理部２１７は、図１１（Ｃ）または（Ｄ）に示す、補正後の画素ＰxS1の階調を決定する場合、図１１（Ａ）または（Ｂ）に示す、補正前の画素ＰxC1を中心画素と定める。そして、リサイズ処理部２１７は、中心画素である画素ＰxC1を含む参照領域Ａrea1内の各画素で表示すべき階調に基づいて、画素ＰxS1で表示すべき階調を定める。
同様に、リサイズ処理部２１７は、図１１（Ｃ）または（Ｄ）に示す、補正後の画素ＰxS2の階調を決定する場合、図１１（Ａ）または（Ｂ）に示す、補正前の画素ＰxC2を中心画素と定める。そして、リサイズ処理部２１７は、中心画素である画素ＰxC2を含む参照領域Ａrea2内の各画素で表示すべき階調に基づいて、画素ＰxS2で表示すべき階調を定める。
同様に、リサイズ処理部２１７は、図１１（Ｃ）または（Ｄ）に示す、補正後の画素ＰxS2の階調を決定する場合、図１１（Ａ）または（Ｂ）に示す、補正前の画素ＰxC2を中心画素と定める。そして、リサイズ処理部２１７は、中心画素である画素ＰxC2を含む参照領域Ａrea2内の各画素で表示すべき階調に基づいて、画素ＰxS2で表示すべき階調を定める。
なお、図１１（Ｃ）及び（Ｄ）において濃いハッチングを付した画素は、画像信号Ｄにおける第１行、第７行、及び、第１２行に位置する補正後の画素を示し、図１１（Ａ）及び（Ｂ）において濃いハッチングを付した画素は、補正後の画素のそれぞれに対応する補正前の画素（中心画素）を示し、図１１（Ａ）及び（Ｂ）において淡いハッチングを付した画素は、中心画素のそれぞれに対応する周辺画素を示す。
図１１に示す例からも明らかなように、樽型収差が生じている場合の画像の膨張の程度は、画面のラインの位置によって変動し、垂直方向（Ｙ軸方向）の位置が端部に近づくにつれて、画像の膨張の程度は大きくなる。また、糸巻型収差が生じる場合における画像の収縮の程度は、画面のラインの位置によって変動し、垂直方向（Ｙ軸方向）の位置が端部に近づくにつれて、画像の収縮の程度は大きくなる。
よって、リサイズ処理部２１７が画像信号Ｄ[m]を生成する場合に必要となる撮像信号ＤSのライン数は、画像信号Ｄ[m]に対応するラインの位置（ｍの値）により変動する。このため、リサイズ処理部２１７がリサイズ処理に要する時間長は、ラインの位置により変動することになる。
よって、リサイズ処理部２１７が画像信号Ｄ[m]を生成する場合に必要となる撮像信号ＤSのライン数は、画像信号Ｄ[m]に対応するラインの位置（ｍの値）により変動する。このため、リサイズ処理部２１７がリサイズ処理に要する時間長は、ラインの位置により変動することになる。
ここで、第ｐ行のラインに対応する撮像信号ＤSを、撮像信号ＤS[p]と表す（ｐは、１≦ｐ≦Ｐを満たす自然数）。
このとき、例えば、図１１に示す例では、リサイズ処理部２１７が、第１行のラインに対応する画像信号Ｄ[1]を生成するためには、第１行〜第５行のラインに対応する撮像信号ＤS[1]〜ＤS[5]が必要となる。これに対して、リサイズ処理部２１７が、第７行のラインに対応する画像信号Ｄ[7]を生成するためには、第８行〜第１０行のラインに対応する撮像信号ＤS[8]〜ＤS[10]が必要となる。つまり、リサイズ処理部２１７が、画像信号Ｄ[1]を生成するために要する時間長は、画像信号Ｄ[7]を生成するために要する時間長よりも長くなる。
このとき、例えば、図１１に示す例では、リサイズ処理部２１７が、第１行のラインに対応する画像信号Ｄ[1]を生成するためには、第１行〜第５行のラインに対応する撮像信号ＤS[1]〜ＤS[5]が必要となる。これに対して、リサイズ処理部２１７が、第７行のラインに対応する画像信号Ｄ[7]を生成するためには、第８行〜第１０行のラインに対応する撮像信号ＤS[8]〜ＤS[10]が必要となる。つまり、リサイズ処理部２１７が、画像信号Ｄ[1]を生成するために要する時間長は、画像信号Ｄ[7]を生成するために要する時間長よりも長くなる。
以下では、画像信号Ｄ[m]を生成するために必要となる、１または複数ラインの撮像信号ＤS[p]を、撮像信号ＤGS[m]と総称する。
例えば、図１１に示す例では、画像信号Ｄ[1]を生成するために必要となる撮像信号ＤGS[1]は、撮像信号ＤS[1]〜ＤS[5]の５ライン分の撮像信号ＤS[p]であり、画像信号Ｄ[7]を生成するために必要となる撮像信号ＤGS[7]は、撮像信号ＤS[8]〜ＤS[10]の３ライン分の撮像信号ＤS[p]であり、画像信号Ｄ[12]を生成するために必要となる撮像信号ＤGS[12]は、撮像信号ＤS[12]〜ＤS[16]の５ライン分の撮像信号ＤS[p]である。
例えば、図１１に示す例では、画像信号Ｄ[1]を生成するために必要となる撮像信号ＤGS[1]は、撮像信号ＤS[1]〜ＤS[5]の５ライン分の撮像信号ＤS[p]であり、画像信号Ｄ[7]を生成するために必要となる撮像信号ＤGS[7]は、撮像信号ＤS[8]〜ＤS[10]の３ライン分の撮像信号ＤS[p]であり、画像信号Ｄ[12]を生成するために必要となる撮像信号ＤGS[12]は、撮像信号ＤS[12]〜ＤS[16]の５ライン分の撮像信号ＤS[p]である。
なお、リサイズ処理部２１７は、リサイズ処理が完了し、画像信号Ｄをライン毎に生成すると、生成した１ライン分の画像信号Ｄ[m]（画像信号ＤGA[m]）をラインバッファ２２に格納すると共に、画像信号Ｄ[m]のラインバッファ２２への格納が完了したことを示す書込完了信号ＰtAを出力する。
＜３．画像信号の出力＞
次に、撮像部１０からの撮像信号ＤS[p]の出力タイミングと、画像信号生成部２０からの画像信号Ｄ[m]の出力タイミングとの関係について説明する。
図１２は、連続する複数の垂直走査期間Ｆs（Ｆs0〜Ｆs3）のうち、垂直走査期間Ｆs1〜Ｆs3のそれぞれにおいて、撮像部１０が撮像信号ＤS（ＤS[1]〜ＤS[P]）を出力するタイミングと、当該撮像信号ＤSに基づいて、画像処理部２１が画像信号Ｄ（Ｄ[1]〜Ｄ[M]）つまり画像信号ＤGA（ＤGA[1]〜ＤGA[M]）を生成し、生成した画像信号ＤGAをラインバッファ２２に格納タイミングと、連続する複数の垂直走査期間Ｆd（Ｆd0〜Ｆd3）のうち、垂直走査期間Ｆd1〜Ｆd3のそれぞれにおいて、画像信号出力部２３が、ラインバッファ２２から画像信号Ｄつまり画像信号ＤGB（ＤGB[1]〜ＤGB[M]）を取得してこれを表示部４０に対して出力するタイミングと、の関係を、概略的に示すタイミングチャートである。なお、垂直走査期間Ｆsのうち、撮像信号ＤSが出力される期間を、「撮像信号ＤSのフレーム」と称する。また、垂直走査期間Ｆdのうち、画像信号Ｄが出力されうる期間である垂直有効データ期間ＤＶＩを「画像信号Ｄのフレーム」と称する。そして、図１２に示すように、撮像信号ＤSのフレームの開始から、画像信号Ｄの開始までの時間を、位相差ＰDと称する。
次に、撮像部１０からの撮像信号ＤS[p]の出力タイミングと、画像信号生成部２０からの画像信号Ｄ[m]の出力タイミングとの関係について説明する。
図１２は、連続する複数の垂直走査期間Ｆs（Ｆs0〜Ｆs3）のうち、垂直走査期間Ｆs1〜Ｆs3のそれぞれにおいて、撮像部１０が撮像信号ＤS（ＤS[1]〜ＤS[P]）を出力するタイミングと、当該撮像信号ＤSに基づいて、画像処理部２１が画像信号Ｄ（Ｄ[1]〜Ｄ[M]）つまり画像信号ＤGA（ＤGA[1]〜ＤGA[M]）を生成し、生成した画像信号ＤGAをラインバッファ２２に格納タイミングと、連続する複数の垂直走査期間Ｆd（Ｆd0〜Ｆd3）のうち、垂直走査期間Ｆd1〜Ｆd3のそれぞれにおいて、画像信号出力部２３が、ラインバッファ２２から画像信号Ｄつまり画像信号ＤGB（ＤGB[1]〜ＤGB[M]）を取得してこれを表示部４０に対して出力するタイミングと、の関係を、概略的に示すタイミングチャートである。なお、垂直走査期間Ｆsのうち、撮像信号ＤSが出力される期間を、「撮像信号ＤSのフレーム」と称する。また、垂直走査期間Ｆdのうち、画像信号Ｄが出力されうる期間である垂直有効データ期間ＤＶＩを「画像信号Ｄのフレーム」と称する。そして、図１２に示すように、撮像信号ＤSのフレームの開始から、画像信号Ｄの開始までの時間を、位相差ＰDと称する。
図１２では、説明の都合上、垂直走査期間Ｆs0〜Ｆs3において出力される撮像信号ＤS[p]を、それぞれ、撮像信号ＤS0[p]〜ＤS3[p]と区別して表現することがある。
また、図１１において説明したとおり、画像処理部２１における画像信号Ｄ[1]〜Ｄ[M]の生成という視点から見れば、撮像部１０から出力される撮像信号ＤS[1]〜ＤS[P]は、撮像信号ＤGS[1]〜ＤGS[M]である。以下では、説明の都合上、垂直走査期間Ｆs0〜Ｆs3において出力される撮像信号ＤGS[m]を、それぞれ、撮像信号ＤGS0[m]〜ＤGS3[m]として区別して表現することがある。
同様に、撮像信号ＤGS0[m]〜ＤGS3[m]に基づいて生成される画像信号Ｄ[m]（ＤGA[m]、ＤGA[m]）を、それぞれ、画像信号Ｄ0[m]〜Ｄ3[m]（ＤGA0[m]〜ＤGA3[m]、ＤGB0[m]〜ＤGB3[m]）として区別して表現することがある。
また、図１１において説明したとおり、画像処理部２１における画像信号Ｄ[1]〜Ｄ[M]の生成という視点から見れば、撮像部１０から出力される撮像信号ＤS[1]〜ＤS[P]は、撮像信号ＤGS[1]〜ＤGS[M]である。以下では、説明の都合上、垂直走査期間Ｆs0〜Ｆs3において出力される撮像信号ＤGS[m]を、それぞれ、撮像信号ＤGS0[m]〜ＤGS3[m]として区別して表現することがある。
同様に、撮像信号ＤGS0[m]〜ＤGS3[m]に基づいて生成される画像信号Ｄ[m]（ＤGA[m]、ＤGA[m]）を、それぞれ、画像信号Ｄ0[m]〜Ｄ3[m]（ＤGA0[m]〜ＤGA3[m]、ＤGB0[m]〜ＤGB3[m]）として区別して表現することがある。
上述のとおり、撮像部１０は、撮像水平同期信号ＳＨsync毎に撮像信号ＤS[1]〜ＤS[P]を順番に出力する。また、画像処理部２１は、撮像信号ＤGS[m]に対応する撮像信号ＤS[p]の供給が開始されると、画像信号ＤGA[m]を生成するための画像処理を開始する。つまり、画像処理部２１が、画像信号ＤGA[m]を生成するための画像処理を開始するタイミングは、ラインによって異なる。
図１２では、撮像部１０が撮像信号ＤGS[1]〜ＤGS[M]を画像処理部２１に供給するタイミングを線Ｌ1で表す。つまり、線Ｌ1は、画像処理部２１が、画像信号ＤGA[1]〜ＤGA[M]のそれぞれを生成するための画像処理をライン毎に順番に開始する様子（タイミング）を、線Ｌ1で表す。
また、画像処理部２１による画像信号ＤGA[1]〜ＤGA[M]の生成が完了し、これらがライン毎に順番にラインバッファ２２に格納される様子（タイミング）を、線Ｌ2で表す。画像信号出力部２３は、画像信号ＤGA[m]の生成が完了した後に画像信号ＤGB[m]を出力する。よって、画像信号ＤGB[m]が、線Ｌ2の示す時刻よりも前の時刻に出力されることはない。なお、線Ｌ2は、図６で説明した画像信号生成時刻ＴC[1]〜ＴC[M]を結んだ線である。
図１２では、撮像部１０が撮像信号ＤGS[1]〜ＤGS[M]を画像処理部２１に供給するタイミングを線Ｌ1で表す。つまり、線Ｌ1は、画像処理部２１が、画像信号ＤGA[1]〜ＤGA[M]のそれぞれを生成するための画像処理をライン毎に順番に開始する様子（タイミング）を、線Ｌ1で表す。
また、画像処理部２１による画像信号ＤGA[1]〜ＤGA[M]の生成が完了し、これらがライン毎に順番にラインバッファ２２に格納される様子（タイミング）を、線Ｌ2で表す。画像信号出力部２３は、画像信号ＤGA[m]の生成が完了した後に画像信号ＤGB[m]を出力する。よって、画像信号ＤGB[m]が、線Ｌ2の示す時刻よりも前の時刻に出力されることはない。なお、線Ｌ2は、図６で説明した画像信号生成時刻ＴC[1]〜ＴC[M]を結んだ線である。
また、画像信号出力部２３が、表示部４０にとって理想的なタイミングで画像信号ＤGB[1]〜ＤGB[M]を供給する場合、すなわち、表示部４０が表示可能な最高のフレームレート（垂直走査期間Ｆdの時間長が標準垂直走査時間Ｔdである場合のフレームレート）で表示するように画像信号ＤGB[1]〜ＤGB[M]を供給する場合の、画像信号出力部２３が画像信号ＤGB[1]〜ＤGB[M]をライン毎に順番に出力するタイミングを、線Ｌ3で表す。つまり、線Ｌ3は、表示部４０が１ライン分の画像を表示可能な水平走査期間Ｈd毎に、画像信号出力部２３が１ライン分の画像信号ＤGB[m]を出力すると仮定した場合（つまり、表示部４０のフレームレートが第２フレームレートである場合）に、表示部４０が画像信号ＤGB[1]〜ＤGB[M]の示す画像を水平走査期間Ｈd毎にライン順に表示するタイミングを示す線であり、水平走査期間Ｈd毎に１ライン増加するような傾きを有する。すなわち、線Ｌ3は、垂直有効データ期間ＤＶＩに含まれる水平走査期間Ｈdの全てが有効水平走査期間Ｈd-Ａである場合を想定したものであり、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄが含まれる場合も想定したうえで、第ｍ-1行の画像信号Ｄ[m-1]の出力の完了（第２条件の充足）を前提とした画像信号Ｄ[m]の出力時刻を示す表示準備判定時刻ＴB[m]とは、必ずしも一致しない。
画像信号出力部２３は、表示部４０が表示可能であるときに画像信号ＤGB[m]を出力する。よって、画像信号ＤGB[m]が、線Ｌ3の示す時刻よりも前の時刻に出力されることはない。
画像信号出力部２３は、表示部４０が表示可能であるときに画像信号ＤGB[m]を出力する。よって、画像信号ＤGB[m]が、線Ｌ3の示す時刻よりも前の時刻に出力されることはない。
また、図１２では、ライン毎の画像信号ＤGA[m]を生成するための画像処理に要する時間を、画像処理時間ＵAとしている。以下では、説明の都合上、画像信号ＤGA0[m]〜ＤGA3[m]のそれぞれに対応する画像処理時間ＵAを、画像処理時間ＵA0〜ＵA3として区別して表現することがある。
また、図１２では、画像信号ＤGA[m]がラインバッファ２２に格納されてから、画像信号出力部２３により表示部４０に対して出力されるまでの時間を待機時間ＵBとしている。以下では、説明の都合上、画像信号ＤGB0[m]〜ＤGB3[m]のそれぞれに対応する待機時間ＵBを、待機時間ＵB0〜ＵB3として区別して表現することがある。
また、図１２では、画像信号ＤGA[m]がラインバッファ２２に格納されてから、画像信号出力部２３により表示部４０に対して出力されるまでの時間を待機時間ＵBとしている。以下では、説明の都合上、画像信号ＤGB0[m]〜ＤGB3[m]のそれぞれに対応する待機時間ＵBを、待機時間ＵB0〜ＵB3として区別して表現することがある。
上述のとおり、撮像信号ＤS[1]〜ＤS[P]と、撮像信号ＤGS[1]〜ＤGS[M]とは１対１に対応するものではなく、各ラインに対応する画像信号Ｄ[m]を生成する画像処理の開始間隔は変動することがある。このため、線Ｌ1は通常は直線とはならずに折れ線となるが、図１２では、図示の都合上直線として描いている。なお、線Ｌ1を直線とした場合（例えば、線Ｌ1の始点と終点とを直線とつないだ場合）、線Ｌ1の傾きは、撮像部１０のフレームレートである第１フレームレートに応じて定められる。
また、上述のとおり、撮像信号ＤGS[1]〜ＤGS[M]のそれぞれに含まれる撮像信号ＤS[p]のライン数は、ラインの位置によって異なる場合がある。つまり、画像処理部２１は、図１１で説明したように、３ライン分の撮像信号ＤS[p]からなる撮像信号ＤGS[m]に基づいて画像信号ＤGA[m]を生成する場合もあれば、５ライン分の撮像信号ＤS[p]からなる撮像信号ＤGS[m]に基づいて画像信号ＤGA[m]を生成する場合もあり、後者の場合は前者の場合と比較して画像処理時間ＵAは長くなる。すなわち、画像処理部２１が、画像信号ＤGA[1]〜ＤGA[M]を生成するための画像処理時間ＵAは、通常、ラインの位置に応じて変動する。このため、線Ｌ2は通常は直線とはならずに折れ線となるが、図１２では、図示の都合上直線として描いている。
また、上述のとおり、撮像信号ＤGS[1]〜ＤGS[M]のそれぞれに含まれる撮像信号ＤS[p]のライン数は、ラインの位置によって異なる場合がある。つまり、画像処理部２１は、図１１で説明したように、３ライン分の撮像信号ＤS[p]からなる撮像信号ＤGS[m]に基づいて画像信号ＤGA[m]を生成する場合もあれば、５ライン分の撮像信号ＤS[p]からなる撮像信号ＤGS[m]に基づいて画像信号ＤGA[m]を生成する場合もあり、後者の場合は前者の場合と比較して画像処理時間ＵAは長くなる。すなわち、画像処理部２１が、画像信号ＤGA[1]〜ＤGA[M]を生成するための画像処理時間ＵAは、通常、ラインの位置に応じて変動する。このため、線Ｌ2は通常は直線とはならずに折れ線となるが、図１２では、図示の都合上直線として描いている。
図１２に示すように、垂直走査期間Ｆs1において撮像部１０から出力される撮像信号ＤS1[p]（ＤGS1[m]）に基づいて画像処理部２１が画像信号Ｄ1[m]（ＤGA1[m]）を生成する時刻を示す線Ｌ2は、垂直走査期間Ｆd1において表示部４０が画像信号Ｄ1[m]（ＤGA1[m]）の示す画像を表示可能となる最早の時刻を示す線Ｌ3よりも時間的に先行している。このような、線Ｌ2が線Ｌ3よりも時間的に先行している状態を「第１の状態」と称する。
すなわち、第１の状態とは、画像処理部２１が撮像信号ＤS[p]に基づいて画像信号Ｄ[m]を生成したときに、表示部４０において当該画像信号Ｄ[m]の示す画像を表示する準備ができていない、という状態である。ここで、表示部４０において画像信号Ｄ[m]を表示する準備ができていない場合とは、例えば、画像信号Ｄ1[m]が生成されたときに、表示部４０が画像信号Ｄ1の前に表示すべき画像信号Ｄ0の示す画像を表示中であり、表示部４０が画像信号Ｄ1[m]の示す画像を表示できない場合等である。
つまり、第１の状態においては、画像処理部２１が画像信号Ｄ[m]を生成しても、画像信号Ｄ[m]を表示するための表示部４０側の準備が間に合っていないため、表示部４０における画像の表示が、表示部４０側の表示準備がボトルネックとなって、遅延する状態である。換言すれば、第１の状態は、表示部４０が画像信号Ｄ[m]を表示可能となったタイミングにおいて、遅延することなく速やかに画像信号Ｄ[m]を表示することができる、という状態である。
すなわち、第１の状態とは、画像処理部２１が撮像信号ＤS[p]に基づいて画像信号Ｄ[m]を生成したときに、表示部４０において当該画像信号Ｄ[m]の示す画像を表示する準備ができていない、という状態である。ここで、表示部４０において画像信号Ｄ[m]を表示する準備ができていない場合とは、例えば、画像信号Ｄ1[m]が生成されたときに、表示部４０が画像信号Ｄ1の前に表示すべき画像信号Ｄ0の示す画像を表示中であり、表示部４０が画像信号Ｄ1[m]の示す画像を表示できない場合等である。
つまり、第１の状態においては、画像処理部２１が画像信号Ｄ[m]を生成しても、画像信号Ｄ[m]を表示するための表示部４０側の準備が間に合っていないため、表示部４０における画像の表示が、表示部４０側の表示準備がボトルネックとなって、遅延する状態である。換言すれば、第１の状態は、表示部４０が画像信号Ｄ[m]を表示可能となったタイミングにおいて、遅延することなく速やかに画像信号Ｄ[m]を表示することができる、という状態である。
ところで、表示部４０で１つの画面を表示するために必要な時間（周期）は、撮像部１０で１つの画面を撮像するために必要な時間（周期）よりも短いため、表示部４０側における表示準備がボトルネックとなる表示の遅延は、徐々に縮小されて解消されるに至る。
図１２では、図示の都合上、第１の状態として、１つの垂直走査期間Ｆs（Ｆs1）及び１つの垂直走査期間Ｆd（Ｆd1）の１組の垂直走査期間しか記載していないが、実際には複数の組の垂直走査期間が存在する場合がある。この場合、第１の状態における、位相差ＰD1（第１の状態における位相差ＰDとして、図１２に示すように符号ＰD1を付する）は、垂直走査期間Ｆdと垂直走査期間Ｆsの差分に相当する時間ずつ短くなる。換言すれば、垂直走査期間の組毎に線Ｌ3と線Ｌ2との距離は、概ね、垂直走査期間Ｆdと垂直走査期間Ｆsの差分に相当する時間ずつ短くなる。
表示部４０側における表示準備がボトルネックとなる表示の遅延が解消される前は、線Ｌ2が線Ｌ3よりも時間的に先行する。一方、表示準備がボトルネックとなる表示の遅延が解消された後は、線Ｌ3が線Ｌ2よりも時間的に先行する。すなわち、表示準備がボトルネックとなる表示の遅延が解消されるタイミングにおいて、線Ｌ2と線Ｌ3がクロスする。
なお、上述のとおり、線Ｌ2は直線とはならず、折れ線となる場合が存在する。この場合、線Ｌ2及び線Ｌ3のクロスは、複数回生じることがある。
図１２では、図示の都合上、第１の状態として、１つの垂直走査期間Ｆs（Ｆs1）及び１つの垂直走査期間Ｆd（Ｆd1）の１組の垂直走査期間しか記載していないが、実際には複数の組の垂直走査期間が存在する場合がある。この場合、第１の状態における、位相差ＰD1（第１の状態における位相差ＰDとして、図１２に示すように符号ＰD1を付する）は、垂直走査期間Ｆdと垂直走査期間Ｆsの差分に相当する時間ずつ短くなる。換言すれば、垂直走査期間の組毎に線Ｌ3と線Ｌ2との距離は、概ね、垂直走査期間Ｆdと垂直走査期間Ｆsの差分に相当する時間ずつ短くなる。
表示部４０側における表示準備がボトルネックとなる表示の遅延が解消される前は、線Ｌ2が線Ｌ3よりも時間的に先行する。一方、表示準備がボトルネックとなる表示の遅延が解消された後は、線Ｌ3が線Ｌ2よりも時間的に先行する。すなわち、表示準備がボトルネックとなる表示の遅延が解消されるタイミングにおいて、線Ｌ2と線Ｌ3がクロスする。
なお、上述のとおり、線Ｌ2は直線とはならず、折れ線となる場合が存在する。この場合、線Ｌ2及び線Ｌ3のクロスは、複数回生じることがある。
図１２に示す例では、垂直走査期間Ｆs2において撮像部１０が出力する撮像信号ＤS2[p]（ＤGS2[m]）に基づいて、画像処理部２１が画像信号Ｄ2[m]（ＤGA2[m]）を生成する時刻を示す線Ｌ2は、垂直走査期間Ｆd2において表示部４０が画像信号Ｄ2[m]（ＤGA2[m]）の示す画像を表示可能となる最早の時刻を示す線Ｌ3とクロスしている。このような、線Ｌ2と線Ｌ3がクロスする状態を、「第２の状態」と称する。なお、線Ｌ2及び線Ｌ3のクロスが複数回生じる場合には、このようなクロスが最初に生じる状態を、「第２の状態」と称する。また、線Ｌ2と線Ｌ3がクロスする時刻を、時刻Ｔthと称する。なお、線Ｌ2及び線Ｌ3のクロスが複数回生じる場合には、最初にクロスが生じる時刻を時刻Ｔthとする。
すなわち、第２の状態とは、画像処理部２１が撮像信号ＤS[p]に基づいて画像信号Ｄ[m]を生成したときに表示部４０において当該画像信号Ｄ[m]の示す画像を表示する準備ができていないという状態（常に線Ｌ2が線Ｌ3よりも時間的に先行する状態）から、表示部４０において画像信号Ｄ[m]の示す画像を表示可能となったときに画像処理部２１が画像信号Ｄ[m]を生成するための画像処理を完了していない場合が存在する状態（線Ｌ3が線Ｌ2よりも時間的に先行する場合がある状態）へと遷移することをいう。
つまり、第２の状態は、時刻Ｔth以前においては、表示部４０が画像信号Ｄ[m]の示す画像を表示することが可能となるタイミングにおいて、遅延することなく画像信号Ｄ[m]の示す画像を表示されるという状態であり、一方、時刻Ｔth以後においては、表示部４０側において画像信号Ｄ[m]を表示することが可能となる時刻に至っても、画像信号Ｄ[m]を生成するための画像処理部２１における画像処理が間に合っていないため、表示部４０における画像の表示が、画像処理部２１の画像処理がボトルネックとなって遅延する場合がある、という状態である。
この、第２の状態における、位相差ＰD2（第２の状態における位相差ＰDとして、図１２に示すように符号ＰD2を付する）は、図１２に示すように位相差ＰD1よりも短くなる。
すなわち、第２の状態とは、画像処理部２１が撮像信号ＤS[p]に基づいて画像信号Ｄ[m]を生成したときに表示部４０において当該画像信号Ｄ[m]の示す画像を表示する準備ができていないという状態（常に線Ｌ2が線Ｌ3よりも時間的に先行する状態）から、表示部４０において画像信号Ｄ[m]の示す画像を表示可能となったときに画像処理部２１が画像信号Ｄ[m]を生成するための画像処理を完了していない場合が存在する状態（線Ｌ3が線Ｌ2よりも時間的に先行する場合がある状態）へと遷移することをいう。
つまり、第２の状態は、時刻Ｔth以前においては、表示部４０が画像信号Ｄ[m]の示す画像を表示することが可能となるタイミングにおいて、遅延することなく画像信号Ｄ[m]の示す画像を表示されるという状態であり、一方、時刻Ｔth以後においては、表示部４０側において画像信号Ｄ[m]を表示することが可能となる時刻に至っても、画像信号Ｄ[m]を生成するための画像処理部２１における画像処理が間に合っていないため、表示部４０における画像の表示が、画像処理部２１の画像処理がボトルネックとなって遅延する場合がある、という状態である。
この、第２の状態における、位相差ＰD2（第２の状態における位相差ＰDとして、図１２に示すように符号ＰD2を付する）は、図１２に示すように位相差ＰD1よりも短くなる。
なお、時刻Ｔth以降においては、タイミングジェネレータ３２が、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄを挿入して、画像信号出力部２３からの画像信号Ｄ[m]の出力タイミング（表示部４０における画像信号Ｄ[m]の示す画像の表示タイミング）を調整する。これにより、表示部４０は、画像信号Ｄ[m]を生成するための画像処理の完了を待って、画像信号Ｄ[m]が生成されると、ただちに（水平走査期間Ｈd以下の時間内に）、当該画像信号Ｄ[m]の示す画像を表示することができる。すなわち、時刻Ｔth以降は、無効水平走査期間Ｈd-Ｄの挿入により、画像信号出力部２３からの画像信号Ｄ[m]（ＤGB[m]）の出力タイミングを調整することで、表示部４０側の表示タイミングを、画像処理部２１における画像処理の完了タイミングに、水平走査期間Ｈdの精度で追従させる。
図１２に示すように、垂直走査期間Ｆd3において表示部４０が画像信号Ｄ3[m]（ＤGA3[m]）の示す画像を表示可能となる最早の時刻を示す線Ｌ3は、垂直走査期間Ｆs3において出力される撮像信号ＤS3[p]（ＤGS3[m]）に基づいて画像処理部２１が画像信号Ｄ3[m]（ＤGA3[m]）を生成する時刻を示す線Ｌ2よりも時間的に先行している。このような、線Ｌ3が線Ｌ2よりも時間的に先行している状態を、「第３の状態」と称する。なお、上述のとおり、線Ｌ2は直線とはならず、折れ線となり、線Ｌ2及び線Ｌ3のクロスが複数回生じる場合がある。このような場合は、時刻Ｔth以降に開始される垂直走査期間の組（Ｆs及びＦd）における状態を、第３の状態と称する。
すなわち、第３の状態とは、表示部４０において画像信号Ｄ[m]の示す画像を表示する準備が完了したときに、画像処理部２１が画像信号Ｄ[m]を生成するための画像処理を完了していない場合が恒常的に生じているという、状態である。
つまり、第３の状態においては、画像信号Ｄ[m]を表示するための表示部４０側の準備が完了しても、画像信号Ｄ[m]を生成するための画像処理部２１における画像処理が間に合っていないという状況が恒常的に生じているため、表示部４０における画像の表示が、画像処理部２１の画像処理がボトルネックとなって、遅延する状態である。
この、第３の状態における、位相差ＰD3（第３の状態における位相差ＰDとして、図１２に示すように符号ＰD3を付する）は、図１２に示すように、位相差ＰD2よりも短くなる。なお、第１の状態における位相差ＰD1は、画像処理時間ＵA（より具体的には、画像処理時間ＵA[1]〜ＵA[M]の最大値）よりも大きく、第３の状態における位相差ＰD3は、画像処理時間ＵA（より具体的には、画像処理時間ＵA[1]〜ＵA[M]の最大値）よりも小さい。
すなわち、第３の状態とは、表示部４０において画像信号Ｄ[m]の示す画像を表示する準備が完了したときに、画像処理部２１が画像信号Ｄ[m]を生成するための画像処理を完了していない場合が恒常的に生じているという、状態である。
つまり、第３の状態においては、画像信号Ｄ[m]を表示するための表示部４０側の準備が完了しても、画像信号Ｄ[m]を生成するための画像処理部２１における画像処理が間に合っていないという状況が恒常的に生じているため、表示部４０における画像の表示が、画像処理部２１の画像処理がボトルネックとなって、遅延する状態である。
この、第３の状態における、位相差ＰD3（第３の状態における位相差ＰDとして、図１２に示すように符号ＰD3を付する）は、図１２に示すように、位相差ＰD2よりも短くなる。なお、第１の状態における位相差ＰD1は、画像処理時間ＵA（より具体的には、画像処理時間ＵA[1]〜ＵA[M]の最大値）よりも大きく、第３の状態における位相差ＰD3は、画像処理時間ＵA（より具体的には、画像処理時間ＵA[1]〜ＵA[M]の最大値）よりも小さい。
なお、第３の状態においても、タイミングジェネレータ３２が、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄを挿入して、表示部４０における画像信号Ｄ[m]の示す画像の表示タイミングを調整する。これにより、表示部４０側の表示タイミングを、画像処理部２１における画像処理の完了タイミングに、水平走査期間Ｈdの精度で追従させることが可能となる。
上述のとおり、画像処理時間ＵAはライン毎に変動する。しかし、その変動幅は、垂直走査期間Ｆsに比べれば十分に小さい。このため、画像信号Ｄ[m]の出力のタイミング（表示部４０側の表示タイミング）を、画像処理部２１における画像処理の完了タイミングに追従させている状態においては、撮像部１０が撮像信号ＤS3を出力している期間の時間長と、画像信号出力部２３が画像信号ＤGB3を出力している期間の時間長とは、略同じとなる。換言すれば、第３の状態においては、タイミング制御部３０は、表示部４０のフレームレートを撮像部１０のフレームレートである第１フレームレートとなるように、画像信号Ｄ[m]が出力されるタイミングを調整していることになる（第２のタイミング制御）。
なお、図１２では、図示の都合上、第３の状態として、１つの垂直走査期間Ｆs（Ｆs3）及び１つの垂直走査期間Ｆd（Ｆd3）の１組の垂直走査期間しか記載していないが、実際には複数の組の垂直走査期間が存在する。第３の状態では、複数の組の垂直走査期間のそれぞれにおいて、撮像部１０が撮像信号ＤS3を出力している期間の時間長と、画像信号出力部２３が画像信号ＤGB3を出力している期間の時間長とが、略同じととなるように、画像信号Ｄ[m]が出力されるタイミングが調整される。すなわち、第３の状態では、複数の組の垂直走査期間のそれぞれにおいて、表示部４０のフレームレートが撮像部１０のフレームレートである第１フレームレートとなるように、画像信号Ｄ[m]が出力されるタイミングが調整される。このため、第３の状態では、複数の組の垂直走査期間のそれぞれにおいて、位相差ＰD3が略同じ時間長となる。、
上述のとおり、画像処理時間ＵAはライン毎に変動する。しかし、その変動幅は、垂直走査期間Ｆsに比べれば十分に小さい。このため、画像信号Ｄ[m]の出力のタイミング（表示部４０側の表示タイミング）を、画像処理部２１における画像処理の完了タイミングに追従させている状態においては、撮像部１０が撮像信号ＤS3を出力している期間の時間長と、画像信号出力部２３が画像信号ＤGB3を出力している期間の時間長とは、略同じとなる。換言すれば、第３の状態においては、タイミング制御部３０は、表示部４０のフレームレートを撮像部１０のフレームレートである第１フレームレートとなるように、画像信号Ｄ[m]が出力されるタイミングを調整していることになる（第２のタイミング制御）。
なお、図１２では、図示の都合上、第３の状態として、１つの垂直走査期間Ｆs（Ｆs3）及び１つの垂直走査期間Ｆd（Ｆd3）の１組の垂直走査期間しか記載していないが、実際には複数の組の垂直走査期間が存在する。第３の状態では、複数の組の垂直走査期間のそれぞれにおいて、撮像部１０が撮像信号ＤS3を出力している期間の時間長と、画像信号出力部２３が画像信号ＤGB3を出力している期間の時間長とが、略同じととなるように、画像信号Ｄ[m]が出力されるタイミングが調整される。すなわち、第３の状態では、複数の組の垂直走査期間のそれぞれにおいて、表示部４０のフレームレートが撮像部１０のフレームレートである第１フレームレートとなるように、画像信号Ｄ[m]が出力されるタイミングが調整される。このため、第３の状態では、複数の組の垂直走査期間のそれぞれにおいて、位相差ＰD3が略同じ時間長となる。、
以下、図１２及び図１３を参照しつつ、垂直走査期間Ｆs1において撮像部１０が出力する撮像信号ＤS1（ＤGS1）と、垂直走査期間Ｆd1において画像信号生成部２０が表示部４０に出力する画像信号Ｄ1（ＤGB1）との関係を例にとって、第１の状態について説明する。
図１３は、撮像信号ＤS1[p]（撮像信号ＤGS1[m]）と、画像信号Ｄ1[m]（画像信号ＤGA1[m]及び画像信号ＤGB1[m]）との関係を説明するためのタイミングチャートである。
なお、図１３と、後述する図１４及び図１５では、簡単のために、撮像信号ＤSの示す画像のライン数が５ライン（Ｐ＝５）であり、画像信号Ｄ示す画像のライン数が４ライン（Ｍ＝４）である場合を想定する。また、図１３乃至図１５に示す例では、撮像信号ＤGS[1]が、撮像信号ＤS[1]及びＤS[2]を含み、撮像信号ＤGS[2]が、撮像信号ＤS[2]及びＤS[3]を含み、撮像信号ＤGS[3]が、撮像信号ＤS[3]及びＤS[4]を含み、撮像信号ＤGS[4]が、撮像信号ＤS[4]及びＤS[5]を含む場合を想定する。すなわち、図１３乃至図１５に示す例では、画像信号Ｄ[1]が、撮像信号ＤS[1]及びＤS[2]に基づいて生成され、画像信号Ｄ[2]が、撮像信号ＤS[2]及びＤS[3]に基づいて生成され、画像信号Ｄ[3]が、撮像信号ＤS[3]及びＤS[4]に基づいて生成され、画像信号Ｄ[4]が、撮像信号ＤS[4]及びＤS[5]に基づいて生成される場合を想定する。また、図１３乃至図１５に示す例では、線Ｌ2及び線Ｌ3のクロスは、１回のみ生じる場合を想定する。
なお、図１３と、後述する図１４及び図１５では、簡単のために、撮像信号ＤSの示す画像のライン数が５ライン（Ｐ＝５）であり、画像信号Ｄ示す画像のライン数が４ライン（Ｍ＝４）である場合を想定する。また、図１３乃至図１５に示す例では、撮像信号ＤGS[1]が、撮像信号ＤS[1]及びＤS[2]を含み、撮像信号ＤGS[2]が、撮像信号ＤS[2]及びＤS[3]を含み、撮像信号ＤGS[3]が、撮像信号ＤS[3]及びＤS[4]を含み、撮像信号ＤGS[4]が、撮像信号ＤS[4]及びＤS[5]を含む場合を想定する。すなわち、図１３乃至図１５に示す例では、画像信号Ｄ[1]が、撮像信号ＤS[1]及びＤS[2]に基づいて生成され、画像信号Ｄ[2]が、撮像信号ＤS[2]及びＤS[3]に基づいて生成され、画像信号Ｄ[3]が、撮像信号ＤS[3]及びＤS[4]に基づいて生成され、画像信号Ｄ[4]が、撮像信号ＤS[4]及びＤS[5]に基づいて生成される場合を想定する。また、図１３乃至図１５に示す例では、線Ｌ2及び線Ｌ3のクロスは、１回のみ生じる場合を想定する。
図１３に示すように、撮像部１０から、撮像信号ＤS1[m]及びＤS1[m+1]からなる撮像信号ＤGS1[m]の出力が開始されると、画像処理部２１は、当該撮像信号ＤGS1[m]に基づいて画像信号ＤGA1[m]の生成を開始する。そして、画像処理部２１は、画像処理の開始から画像処理時間ＵA1[m]の経過後に画像信号ＤGA1[m]の生成を完了し、これをラインバッファ２２に格納する。
一方、図１３に示す例は、上述した第１の状態を例示するものであり、線Ｌ2が線Ｌ3よりも時間的に先行する。つまり、図１３に示す例では、画像処理部２１による画像信号ＤGA1[m]の生成が完了したタイミングでは、表示部４０において画像信号ＤGB1[m]の示す画像を表示する準備ができていない。換言すれば、画像処理部２１による画像信号ＤGA1[m]の生成が完了したタイミングでは、出力制御部３１から出力許可パルスＰL[m]が出力されていない。
このため、画像信号出力部２３は、出力許可パルスＰL[m]が出力された後の最初の水平走査期間Ｈd1[m]まで、待機時間ＵB1[m]だけ画像信号ＤGB1[m]の出力を待ち、その後、水平走査期間Ｈd1[m]において画像信号ＤGB1[m]を出力する。
一方、図１３に示す例は、上述した第１の状態を例示するものであり、線Ｌ2が線Ｌ3よりも時間的に先行する。つまり、図１３に示す例では、画像処理部２１による画像信号ＤGA1[m]の生成が完了したタイミングでは、表示部４０において画像信号ＤGB1[m]の示す画像を表示する準備ができていない。換言すれば、画像処理部２１による画像信号ＤGA1[m]の生成が完了したタイミングでは、出力制御部３１から出力許可パルスＰL[m]が出力されていない。
このため、画像信号出力部２３は、出力許可パルスＰL[m]が出力された後の最初の水平走査期間Ｈd1[m]まで、待機時間ＵB1[m]だけ画像信号ＤGB1[m]の出力を待ち、その後、水平走査期間Ｈd1[m]において画像信号ＤGB1[m]を出力する。
また、図１３に例示する第１の状態は、画像処理部２１による画像処理の完了までに表示部４０による表示準備が間に合わない場合である。換言すれば、水平走査期間Ｈd1[m]が開始されるまでに、画像処理部２１による画像信号ＤGA1[m]の生成が完了し、画像信号出力部２３から画像信号ＤGB1[m]を出力可能な状態となっている。このため、図１３に例示する第１の状態では、垂直走査期間Ｆd1の垂直有効データ期間ＤＶＩに含まれる全ての水平走査期間Ｈdが、有効水平走査期間Ｈd-Ａとなる。すなわち、第１の状態において、垂直走査期間Ｆdの時間長は、標準垂直走査時間Ｔdとなる。
このように、図１３に例示する第１の状態では、画像信号Ｄ1を生成するための画像処理は十分に余裕を持って完了しているものの、表示部４０側の表示準備がボトルネックとなって、表示部４０における表示が遅延する。
このため、撮像部１０が撮像信号ＤS1を出力してから、表示部４０が画像信号Ｄ1の示す画像を表示するまでの遅延時間ΔＴ1は、画像信号生成部２０における画像処理に要する時間（画像処理時間ＵA）と、画像処理の完了後に表示部４０における表示準備を待つための時間（待機時間ＵB）との合計時間となる。
このため、撮像部１０が撮像信号ＤS1を出力してから、表示部４０が画像信号Ｄ1の示す画像を表示するまでの遅延時間ΔＴ1は、画像信号生成部２０における画像処理に要する時間（画像処理時間ＵA）と、画像処理の完了後に表示部４０における表示準備を待つための時間（待機時間ＵB）との合計時間となる。
次に、図１２及び図１４を参照しつつ、垂直走査期間Ｆs2において撮像部１０が出力する撮像信号ＤS2（ＤGS2）と、垂直走査期間Ｆd2において画像信号生成部２０が表示部４０に出力する画像信号Ｄ2（ＤGB2）との関係を例にとって、第２の状態について説明する。
図１４は、撮像信号ＤS2[p]（撮像信号ＤGS2[m]）と、画像信号Ｄ2[m]（画像信号ＤGA2[m]及び画像信号ＤGB2[m]）との関係を説明するためのタイミングチャートである。
図１４は、撮像信号ＤS2[p]（撮像信号ＤGS2[m]）と、画像信号Ｄ2[m]（画像信号ＤGA2[m]及び画像信号ＤGB2[m]）との関係を説明するためのタイミングチャートである。
図１４に示すように、撮像部１０から、撮像信号ＤS2[m]及びＤS2[m+1]からなる撮像信号ＤGS2[m]の出力が開始されると、画像処理部２１は、当該撮像信号ＤGS2[m]に基づいて画像信号ＤGA2[m]の生成を開始する。そして、画像処理部２１は、画像処理の開始から画像処理時間ＵA2[m]の経過後に画像信号ＤGA2[m]の生成を完了し、これをラインバッファ２２に格納する。
なお、図１４に示す例では、画像信号Ｄ2[1]及びＤ2[2]が、時刻Ｔth以前に画像信号出力部２３が出力する画像信号Ｄ[m]であり、画像信号Ｄ2[3]及びＤ2[4]が、時刻Ｔth以後に画像信号出力部２３が出力する画像信号Ｄ[m]である場合を想定している。
時刻Ｔth以前においては、線Ｌ2が線Ｌ3よりも時間的に先行する。つまり、時刻Ｔth以前においては、画像処理部２１による画像信号ＤGA2[m]の生成が完了したタイミングでは、出力制御部３１から出力許可パルスＰL[m]が出力されていない。
このため、画像信号出力部２３は、時刻Ｔth以前においては、出力許可パルスＰL[m]が出力された後の最初の水平走査期間Ｈd2[m]まで、待機時間ＵB2[m]だけ画像信号ＤGB2[m]の出力を待ち、その後、水平走査期間Ｈd2[m]において画像信号ＤGB2[m]を出力する。
図１４に示す例では、画像信号出力部２３は、画像信号ＤGA2[1]が生成された後、待機時間ＵB2[1]だけ画像信号ＤGB2[1]の出力を待ち、その後、水平走査期間Ｈd2[1]において、画像信号ＤGB2[1]を出力する。同様に、画像信号出力部２３は、画像信号ＤGA2[2]が生成された後、待機時間ＵB2[2]だけ画像信号ＤGB2[2]の出力を待ち、その後、水平走査期間Ｈd2[2]において、画像信号ＤGB2[2]を出力する。
このため、画像信号出力部２３は、時刻Ｔth以前においては、出力許可パルスＰL[m]が出力された後の最初の水平走査期間Ｈd2[m]まで、待機時間ＵB2[m]だけ画像信号ＤGB2[m]の出力を待ち、その後、水平走査期間Ｈd2[m]において画像信号ＤGB2[m]を出力する。
図１４に示す例では、画像信号出力部２３は、画像信号ＤGA2[1]が生成された後、待機時間ＵB2[1]だけ画像信号ＤGB2[1]の出力を待ち、その後、水平走査期間Ｈd2[1]において、画像信号ＤGB2[1]を出力する。同様に、画像信号出力部２３は、画像信号ＤGA2[2]が生成された後、待機時間ＵB2[2]だけ画像信号ＤGB2[2]の出力を待ち、その後、水平走査期間Ｈd2[2]において、画像信号ＤGB2[2]を出力する。
一方、時刻Ｔth以後においては、通常、線Ｌ3が線Ｌ2よりも時間的に先行する。線Ｌ3が線Ｌ2よりも時間的に先行する場合、画像処理部２１が画像信号ＤGA2[m]を生成すると、表示部４０は、すぐに（直後の水平走査期間Ｈdにおいて）、当該画像信号ＤGB2[m]の示す画像を表示することができる。よって、線Ｌ3が線Ｌ2よりも時間的に先行する場合、画像処理部２１による画像信号ＤGA2[m]の生成が完了したタイミングに、出力制御部３１から出力許可パルスＰL[m]が出力される。
図１４に示す例では、画像信号出力部２３は、画像信号ＤGA2[3]が生成され、出力許可パルスＰL[3]が出力された後の最初の水平走査期間Ｈd2[3]において、画像信号ＤGB2[3]を出力する。
また、この図に示す例では、画像信号ＤGA2[4]が生成されるのは、水平走査期間Ｈd2[4]の開始後である。このため、画像信号出力部２３は、画像信号ＤGA2[4]が生成され、出力許可パルスＰL[4]が出力された後の最初の水平走査期間Ｈd2[5]において、画像信号ＤGB2[4]を出力する。そして、タイミングジェネレータ３２は、水平走査期間Ｈd2[4]を無効水平走査期間Ｈd-Ｄとする。
図１４に示す例では、画像信号出力部２３は、画像信号ＤGA2[3]が生成され、出力許可パルスＰL[3]が出力された後の最初の水平走査期間Ｈd2[3]において、画像信号ＤGB2[3]を出力する。
また、この図に示す例では、画像信号ＤGA2[4]が生成されるのは、水平走査期間Ｈd2[4]の開始後である。このため、画像信号出力部２３は、画像信号ＤGA2[4]が生成され、出力許可パルスＰL[4]が出力された後の最初の水平走査期間Ｈd2[5]において、画像信号ＤGB2[4]を出力する。そして、タイミングジェネレータ３２は、水平走査期間Ｈd2[4]を無効水平走査期間Ｈd-Ｄとする。
このように、図１４に例示する第２の状態では、時刻Ｔth以降において、画像処理に起因する表示の遅延が生じるため、垂直走査期間Ｆd2の垂直有効データ期間ＤＶＩには、無効水平走査期間Ｈd-Ｄが挿入される。つまり、第２の状態において、垂直走査期間Ｆdの時間長は、標準垂直走査時間Ｔd及び延長垂直走査時間Ｔexの合計となる。
また、撮像部１０が撮像信号ＤS2を出力してから、表示部４０が画像信号Ｄ2の示す画像を表示するまでの遅延時間ΔＴ2は、時刻Ｔth以前は、画像信号生成部２０における画像処理に要する時間（画像処理時間ＵA）と、表示部４０における表示準備を待つための時間（待機時間ＵB）との合計時間であるが、時刻Ｔth以後において、線Ｌ3が線Ｌ2よりも時間的に先行する場合には、画像信号生成部２０における画像処理に要する時間（画像処理時間ＵA）のみとなる。このため、第２の状態に係る遅延時間ΔＴ2は、第１の状態に係る遅延時間ΔＴ1よりも短くなる。
また、撮像部１０が撮像信号ＤS2を出力してから、表示部４０が画像信号Ｄ2の示す画像を表示するまでの遅延時間ΔＴ2は、時刻Ｔth以前は、画像信号生成部２０における画像処理に要する時間（画像処理時間ＵA）と、表示部４０における表示準備を待つための時間（待機時間ＵB）との合計時間であるが、時刻Ｔth以後において、線Ｌ3が線Ｌ2よりも時間的に先行する場合には、画像信号生成部２０における画像処理に要する時間（画像処理時間ＵA）のみとなる。このため、第２の状態に係る遅延時間ΔＴ2は、第１の状態に係る遅延時間ΔＴ1よりも短くなる。
次に、図１２及び図１５を参照しつつ、垂直走査期間Ｆs3において撮像部１０が出力する撮像信号ＤS3（ＤGS3）と、垂直走査期間Ｆd3において画像信号生成部２０が表示部４０に出力する画像信号Ｄ3（ＤGB3）との関係を例にとって、第３の状態について説明する。
図１５は、撮像信号ＤS3[p]（撮像信号ＤGS3[m]）と、画像信号Ｄ3[m]（画像信号ＤGA3[m]及び画像信号ＤGB3[m]）との関係を説明するためのタイミングチャートである。
図１５は、撮像信号ＤS3[p]（撮像信号ＤGS3[m]）と、画像信号Ｄ3[m]（画像信号ＤGA3[m]及び画像信号ＤGB3[m]）との関係を説明するためのタイミングチャートである。
図１５に示すように、撮像部１０から、撮像信号ＤS3[m]及びＤS3[m+1]からなる撮像信号ＤGS3[m]の出力が開始されると、画像処理部２１は、当該撮像信号ＤGS3[m]に基づいて画像信号ＤGA3[m]の生成を開始する。そして、画像処理部２１は、画像処理の開始から画像処理時間ＵA3[m]の経過後に画像信号ＤGA3[m]の生成を完了し、これをラインバッファ２２に格納する。
第３の状態においては、通常、線Ｌ3が線Ｌ2よりも時間的に先行する。線Ｌ3が線Ｌ2よりも時間的に先行する場合、画像処理部２１が画像信号ＤGA3[m]を生成すると、表示部４０は、すぐに（直後の水平走査期間Ｈdにおいて）、当該画像信号ＤGB3[m]の示す画像を表示することができる。よって、この場合、画像処理部２１による画像信号ＤGA3[m]の生成が完了したタイミングに、出力制御部３１から出力許可パルスＰL[m]が出力される。
具体的には、図１５に示す例では、画像信号出力部２３は、画像信号ＤGA3[1]が生成され、出力許可パルスＰL[1]が出力された後の最初の水平走査期間Ｈd3[3]において、画像信号ＤGB3[1]を出力し、画像信号ＤGA3[2]が生成され、出力許可パルスＰL[2]が出力された後の最初の水平走査期間Ｈd3[5]において、画像信号ＤGB3[2]を出力し、画像信号ＤGA3[3]が生成され、出力許可パルスＰL[3]が出力された後の最初の水平走査期間Ｈd3[7]において、画像信号ＤGB3[3]を出力し、画像信号ＤGA3[4]が生成され、出力許可パルスＰL[4]が出力された後の最初の水平走査期間Ｈd3[9]において、画像信号ＤGB3[4]を出力する。なお、この場合、タイミングジェネレータ３２は、水平走査期間Ｈd3[1]、Ｈd3[2]、Ｈd3[4]、Ｈd3[6]、及び、Ｈd3[8]を、無効水平走査期間Ｈd-Ｄとする。
具体的には、図１５に示す例では、画像信号出力部２３は、画像信号ＤGA3[1]が生成され、出力許可パルスＰL[1]が出力された後の最初の水平走査期間Ｈd3[3]において、画像信号ＤGB3[1]を出力し、画像信号ＤGA3[2]が生成され、出力許可パルスＰL[2]が出力された後の最初の水平走査期間Ｈd3[5]において、画像信号ＤGB3[2]を出力し、画像信号ＤGA3[3]が生成され、出力許可パルスＰL[3]が出力された後の最初の水平走査期間Ｈd3[7]において、画像信号ＤGB3[3]を出力し、画像信号ＤGA3[4]が生成され、出力許可パルスＰL[4]が出力された後の最初の水平走査期間Ｈd3[9]において、画像信号ＤGB3[4]を出力する。なお、この場合、タイミングジェネレータ３２は、水平走査期間Ｈd3[1]、Ｈd3[2]、Ｈd3[4]、Ｈd3[6]、及び、Ｈd3[8]を、無効水平走査期間Ｈd-Ｄとする。
このように、図１５に例示する第３の状態では、画像処理に起因する表示の遅延が生じているため、垂直走査期間Ｆd3の垂直有効データ期間ＤＶＩには、無効水平走査期間Ｈd-Ｄが挿入される。この結果、第３の状態では、表示部４０が、垂直走査期間Ｆsに出力される撮像信号ＤSに同期した表示を行うことができるように、垂直走査期間Ｆdの時間長が水平走査期間Ｈdの精度で調整される。つまり、第３の状態では、概略的に見れば、垂直走査期間Ｆdは、垂直走査期間Ｆsと略同じ時間となるように調整される。
また、第３の状態では、線Ｌ3が線Ｌ2よりも時間的に先行する場合、画像処理部２１が画像信号Ｄ[m]を生成した後の最初の水平走査期間Ｈdにおいて、表示部４０が画像信号Ｄ[m]の示す画像を表示する。このため、撮像部１０が撮像信号ＤS3を出力してから、表示部４０が画像信号Ｄ3の示す画像を表示するまでの遅延時間ΔＴ3は、画像信号生成部２０における画像処理に要する時間（画像処理時間ＵA）と略同じになる。具体的には、第３の状態では、撮像部１０が撮像信号ＤS[p]の出力を開始してから表示部４０が画像信号Ｄ[m]の示す画像の表示を開始するまでの遅延時間ΔＴ3と、画像処理部２１が画像信号Ｄ[m]の生成に要する画像処理時間ＵAと、を水平走査期間Ｈdの精度で等しくする。
このため、第３の状態では、撮像部１０による撮像から表示部４０による表示までの遅延を、水平走査期間Ｈdの精度で最小化することができる。この場合、遅延時間ΔＴ3は、第１の状態に係る遅延時間ΔＴ1よりも短くなり、且つ、第２の状態に係る遅延時間ΔＴ2以下となる。
このため、第３の状態では、撮像部１０による撮像から表示部４０による表示までの遅延を、水平走査期間Ｈdの精度で最小化することができる。この場合、遅延時間ΔＴ3は、第１の状態に係る遅延時間ΔＴ1よりも短くなり、且つ、第２の状態に係る遅延時間ΔＴ2以下となる。
また、上述のとおり、表示部４０で１つの画面を表示するために必要な時間（周期）は、撮像部１０で１つの画面を撮像するために必要な時間（周期）よりも短い。このため、撮像表示装置１が第１の状態で動作して、表示部４０側における表示準備がボトルネックとなる表示の遅延が生じている場合であっても、垂直走査期間Ｆs毎に当該表示の遅延は縮小する。つまり、撮像表示装置１は、当初、第１の状態で動作する場合であっても、最終的には第３の状態での動作に移行し、第３の状態での動作が開始された後は、第３の状態での動作を維持することができる。この結果、表示部４０側の表示タイミングを、画像処理部２１における画像処理の完了タイミングに、水平走査期間Ｈdの精度で追従させることができる。
このため、撮像表示装置１がライブビューモードでの動作を開始すると、ライブビューモードでの動作を開始した直後を除き、撮像部１０による撮像から表示部４０での画像表示までの遅延時間を最小化した状態を維持することができる。
このため、撮像表示装置１がライブビューモードでの動作を開始すると、ライブビューモードでの動作を開始した直後を除き、撮像部１０による撮像から表示部４０での画像表示までの遅延時間を最小化した状態を維持することができる。
＜４．第１実施形態の効果＞
以上において説明したように、本実施形態に係る撮像表示装置１では、画像信号Ｄ[m]の出力タイミングを調整することで、表示部４０側の表示タイミングを、画像処理部２１における画像処理の完了タイミングに、水平走査期間Ｈdの精度で追従させる。
以下、このような撮像表示装置１の利点をより明確化するために、図１６に示す、対比例に係る撮像表示装置について説明する。
以上において説明したように、本実施形態に係る撮像表示装置１では、画像信号Ｄ[m]の出力タイミングを調整することで、表示部４０側の表示タイミングを、画像処理部２１における画像処理の完了タイミングに、水平走査期間Ｈdの精度で追従させる。
以下、このような撮像表示装置１の利点をより明確化するために、図１６に示す、対比例に係る撮像表示装置について説明する。
図１６は、対比例に係る撮像表示装置における、画像信号Ｄ[m]の出力タイミングを説明するためのタイミングチャートである。この図に示すように、対比例に係る撮像表示装置では、垂直走査期間Ｆdの時間長を固定長として（標準垂直走査時間Ｔdに固定して）、ライブビューモードによる動作を実行する点で、図１２に示すような動作を実行する本実施形態に係る撮像表示装置１と相違する。
図１６に示すように、対比例に係る撮像表示装置では、垂直走査期間Ｆdの時間長が一定である。そして、対比例では、例えば、垂直走査期間Ｆsの終了後に開始される垂直走査期間Ｆdにおいて、垂直走査期間Ｆsにおいて出力される撮像信号ＤSに基づいて生成された画像信号ＤGBの示す画像を表示させる場合を想定している。具体的には、対比例に係る撮像表示装置は、垂直走査期間Ｆs1に出力される撮像信号ＤS1に応じた画像を垂直走査期間Ｆs1よりも後に開始される垂直走査期間Ｆd2において表示し、垂直走査期間Ｆs2に出力される撮像信号ＤS2に応じた画像を垂直走査期間Ｆs2よりも後に開始される垂直走査期間Ｆd4において表示し、また、垂直走査期間Ｆs3に出力される撮像信号ＤS3に応じた画像を垂直走査期間Ｆs3よりも後に開始される垂直走査期間Ｆd5において表示する。また、この図に示す例では、垂直走査期間Ｆd3は、垂直走査期間Ｆs2の終了前に開始される。このため、この図に示す例では、垂直走査期間Ｆd3において、垂直走査期間Ｆd２で表示した撮像信号ＤS１に応じた画像（画像信号ＤGB1の示す画像）を表示することとしている。
このように、図１６に例示する対比例に係る撮像表示装置では、撮像部１０が撮像信号ＤSを出力してから、表示部４０が画像信号ＤGBの示す画像を表示するまでの遅延時間が、垂直走査期間Ｆd以上の時間長となる。
さらに、図１６に示す例の場合には、垂直走査期間Ｆd2で表示した画像（画像信号ＤGB1の示す画像）を、垂直走査期間Ｆd3で再度表示させている。この場合、各画像の表示時間が、垂直走査期間Ｆdの単位で変動するため、画面のちらつきとして視認される可能性が生じる。この結果、表示部４０の表示品位が大きく劣化することとなる。また、仮に、垂直走査期間Ｆd3においていかなる画像も表示しない場合には、画像が表示される垂直走査期間Ｆdと、画像が表示されない垂直走査期間Ｆdとが存在することとなるため、これが画面のちらつきとして撮像表示装置１の利用者に視認される惧れがある。
さらに、図１６に示す例の場合には、垂直走査期間Ｆd2で表示した画像（画像信号ＤGB1の示す画像）を、垂直走査期間Ｆd3で再度表示させている。この場合、各画像の表示時間が、垂直走査期間Ｆdの単位で変動するため、画面のちらつきとして視認される可能性が生じる。この結果、表示部４０の表示品位が大きく劣化することとなる。また、仮に、垂直走査期間Ｆd3においていかなる画像も表示しない場合には、画像が表示される垂直走査期間Ｆdと、画像が表示されない垂直走査期間Ｆdとが存在することとなるため、これが画面のちらつきとして撮像表示装置１の利用者に視認される惧れがある。
これに対して、本実施形態に係る撮像表示装置１では、第１条件及び第２条件が充足された場合に画像信号出力部２３から画像信号Ｄ[m]を出力し、第１条件または第２条件が充足されない場合には、無効水平走査期間Ｈd-Ｄを挿入することで、画像信号出力部２３からの画像信号Ｄ[m]の出力タイミングを水平走査期間Ｈdの精度で調整する。すなわち、本実施形態に係る撮像表示装置１では、画像処理部２１が画像信号Ｄ[m]を生成した後の最初の水平走査期間Ｈdにおいて、表示部４０が画像信号Ｄ[m]の示す画像を表示することができる。これにより、撮像部１０による撮像から表示部４０による表示までの遅延を、水平走査期間Ｈdの精度で最小化することができる。
また、本実施形態に係る撮像表示装置１では、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄを挿入することで、垂直走査期間Ｆdの時間長を可変とするとともに、垂直走査期間Ｆsの時間長と略同じとなる状態を維持することができる。このため、表示のちらつき等を抑えた、高品位な表示を実現できる。
また、本実施形態によれば、例えば、画像処理の手法の変更等に伴う画像処理時間の変更がある場合や、ライン毎に画像処理時間ＵAが変動する場合、撮像部１０をフレームレートが異なるものに交換する場合、または、表示部４０をフレームレートが異なるものに交換する場合等、撮像部１０及び表示部４０の位相差、撮像部１０のフレームレート、並びに、表示部４０で表示可能な最高のフレームレートのうち、一部または全部が変化する場合であっても、位相差ＰDを画像処理時間ＵA以下の長さに自動的に収束させることが可能となる。
＜Ｂ．第２実施形態＞
また、本実施形態に係る撮像表示装置１では、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄを挿入することで、垂直走査期間Ｆdの時間長を可変とするとともに、垂直走査期間Ｆsの時間長と略同じとなる状態を維持することができる。このため、表示のちらつき等を抑えた、高品位な表示を実現できる。
また、本実施形態によれば、例えば、画像処理の手法の変更等に伴う画像処理時間の変更がある場合や、ライン毎に画像処理時間ＵAが変動する場合、撮像部１０をフレームレートが異なるものに交換する場合、または、表示部４０をフレームレートが異なるものに交換する場合等、撮像部１０及び表示部４０の位相差、撮像部１０のフレームレート、並びに、表示部４０で表示可能な最高のフレームレートのうち、一部または全部が変化する場合であっても、位相差ＰDを画像処理時間ＵA以下の長さに自動的に収束させることが可能となる。
＜Ｂ．第２実施形態＞
上述した第１実施形態では、図６に示すように、垂直有効データ期間ＤＶＩに無効水平走査期間Ｈd-Ｄを挿入することにより、画像信号Ｄ[m]の出力タイミングを、水平走査期間Ｈdの精度で調整し、水平走査期間Ｈdの時間長は固定長としていた。
これに対して、第２実施形態に係る撮像表示装置では、水平走査期間Ｈdの時間長を可変長として、画像信号Ｄ[m]の出力タイミングを、例えば表示ドットクロック信号ＤCLKの周期で調整する点において、第１実施形態に係る撮像表示装置１と相違する。
以下、図１７乃至図１９を参照しつつ、第２実施形態に係る撮像表示装置について説明する。なお、以下に例示する第２実施形態において作用や機能が第１実施形態と同等である要素については、以上の説明で参照した符号を流用して各々の詳細な説明を適宜に省略する（以下で説明する変形例についても同様）。
これに対して、第２実施形態に係る撮像表示装置では、水平走査期間Ｈdの時間長を可変長として、画像信号Ｄ[m]の出力タイミングを、例えば表示ドットクロック信号ＤCLKの周期で調整する点において、第１実施形態に係る撮像表示装置１と相違する。
以下、図１７乃至図１９を参照しつつ、第２実施形態に係る撮像表示装置について説明する。なお、以下に例示する第２実施形態において作用や機能が第１実施形態と同等である要素については、以上の説明で参照した符号を流用して各々の詳細な説明を適宜に省略する（以下で説明する変形例についても同様）。
図１７は、第２実施形態に係る撮像表示装置が備えるタイミング制御部３０（出力制御部３１及びタイミングジェネレータ３２）が生成する、出力制御信号ＣTRと、イネーブル信号ＤＥnbと、表示水平同期信号ＤＨsync2との関係を説明するための説明図である。
第２実施形態に係る撮像表示装置が備えるタイミング制御部３０は、タイミングジェネレータ３２が、表示水平同期信号ＤＨsyncの代わりに、可変な周期の水平同期パルスＰlsＨを有する表示水平同期信号ＤＨsync2を生成し、表示垂直同期信号ＤＶsyncの変わりに、可変な周期の垂直同期パルスＰlsＶを有する表示垂直同期信号ＤＶsync2を生成する点を除き、第１実施形態に係る撮像表示装置１（図６参照）と同様に構成されている。
第２実施形態に係る撮像表示装置が備えるタイミング制御部３０は、タイミングジェネレータ３２が、表示水平同期信号ＤＨsyncの代わりに、可変な周期の水平同期パルスＰlsＨを有する表示水平同期信号ＤＨsync2を生成し、表示垂直同期信号ＤＶsyncの変わりに、可変な周期の垂直同期パルスＰlsＶを有する表示垂直同期信号ＤＶsync2を生成する点を除き、第１実施形態に係る撮像表示装置１（図６参照）と同様に構成されている。
図１７に示すように、第２実施形態に係る出力制御部３１は、第１実施形態と同様に、画像処理判定時刻ＴA[m]及び表示準備判定時刻ＴB[m]のうち遅い方の時刻（この図では、上述した第２の態様を採用しているため、画像処理判定時刻ＴA[m]）において、出力制御信号ＣTRに出力許可パルスＰL[m]を設定する。
また、図１７に示すように、第２実施形態に係るタイミングジェネレータ３２は、出力制御部３１が出力する出力制御信号ＣTRに出力許可パルスＰL[m]が設定されたタイミングから、固定の時間長である基準フロントポーチ時間ＴPの経過後に、表示水平同期信号ＤＨsync2として水平同期パルスＰlsＨを出力する。
また、図１７に示すように、第２実施形態に係るタイミングジェネレータ３２は、出力制御部３１が出力する出力制御信号ＣTRに出力許可パルスＰL[m]が設定されたタイミングから、固定の時間長である基準フロントポーチ時間ＴPの経過後に、表示水平同期信号ＤＨsync2として水平同期パルスＰlsＨを出力する。
このため、表示準備判定時刻ＴB[m]までに画像信号Ｄ[m]の生成が完了し、画像信号生成時刻ＴC[m]が経過している場合（Ｃase-1）には、水平フロントポーチ期間ＤＨfの時間長は、基準フロントポーチ時間ＴPとなる。
一方、表示準備判定時刻ＴB[m]までに画像信号Ｄ[m]の生成が完了していない場合、すなわち、表示準備判定時刻ＴB[m]よりも後に画像信号生成時刻ＴC[m]が到来する場合（Ｃase-2）には、水平フロントポーチ期間ＤＨfの時間長は、基準フロントポーチ時間ＴPと、表示準備判定時刻ＴB[m]から画像信号生成時刻ＴC[m]（画像処理判定時刻ＴA[m]）までの時間長である延長フロントポーチ時間ＴPXとの合計となる。
一方、表示準備判定時刻ＴB[m]までに画像信号Ｄ[m]の生成が完了していない場合、すなわち、表示準備判定時刻ＴB[m]よりも後に画像信号生成時刻ＴC[m]が到来する場合（Ｃase-2）には、水平フロントポーチ期間ＤＨfの時間長は、基準フロントポーチ時間ＴPと、表示準備判定時刻ＴB[m]から画像信号生成時刻ＴC[m]（画像処理判定時刻ＴA[m]）までの時間長である延長フロントポーチ時間ＴPXとの合計となる。
このように、第２実施形態に係るタイミングジェネレータ３２は、出力制御部３１が、画像信号Ｄ[m]の出力準備が完了したと判定し、出力制御信号ＣTRとして出力許可パルスＰL[m]を出力するのを待ち、出力許可パルスＰL[m]が出力されてから基準フロントポーチ時間ＴPだけ後に、水平走査期間Ｈd[m]を開始させる。換言すれば、第２実施形態に係るタイミングジェネレータ３２は、画像信号Ｄ[m]の出力準備が完了するまで、水平フロントポーチ期間ＤＨfを延長する。
このため、画像信号出力部２３は、たとえ画像処理部２１における画像信号Ｄ[m]の画像処理が遅延した場合であっても、水平走査期間Ｈd[m]において画像信号Ｄ[m]を出力することが可能となる。この場合、撮像部１０が撮像信号ＤGS[m]を出力してから、表示部４０が画像信号Ｄ[m]に基づく画像を表示するまでの遅延時間は、表示ドットクロック信号ＤCLKの精度で最小化されることになる。
このため、画像信号出力部２３は、たとえ画像処理部２１における画像信号Ｄ[m]の画像処理が遅延した場合であっても、水平走査期間Ｈd[m]において画像信号Ｄ[m]を出力することが可能となる。この場合、撮像部１０が撮像信号ＤGS[m]を出力してから、表示部４０が画像信号Ｄ[m]に基づく画像を表示するまでの遅延時間は、表示ドットクロック信号ＤCLKの精度で最小化されることになる。
図１８は、表示部４０における表示準備がボトルネックとなる表示の遅延が解消されるに至る状態（すなわち、図１４で説明した第２の状態）における、第２実施形態に係る撮像表示装置の動作を説明するためのタイミングチャートである。また、図１９は、画像処理部２１の画像処理がボトルネックとなって表示に遅延が生じている状態（すなわち、図１５で説明した第３の状態）における、第２実施形態に係る撮像表示装置の動作を説明するためのタイミングチャートである。なお、図１８及び図１９では、図１２乃至図１５で説明した符号を流用する。
図１８では、例えば、水平走査期間Ｈd2[2]におけるイネーブル信号ＤＥnbの立下りのタイミングまでに、画像信号ＤGA2[3]が生成される。このため、水平走査期間Ｈd2[2]におけるイネーブル信号ＤＥnbの立下りのタイミングにおいて、出力許可パルスＰL[3]が出力される。この場合、水平走査期間Ｈd2[2]の水平フロントポーチ期間ＤＨfの時間長は、基準フロントポーチ時間ＴPとなる。
一方、この図に示す例では、画像信号ＤGA2[4]が生成されるタイミングは、水平走査期間Ｈd2[3]におけるイネーブル信号ＤＥnbの立下りのタイミングよりも後である。このため、画像信号ＤGA2[4]が生成されるタイミングにおいて、出力許可パルスＰL[4]が出力される。この場合、水平走査期間Ｈd2[3]の水平フロントポーチ期間ＤＨfの時間長は、基準フロントポーチ時間ＴPと、延長フロントポーチ時間ＴPX（水平走査期間Ｈd2[3]におけるイネーブル信号ＤＥnbの立下りのタイミングから、出力許可パルスＰL[4]が出力されまでの時間）との、合計の時間長となる。すなわち、表示部４０における表示準備がボトルネックとなる表示の遅延が解消される時刻Ｔth以降は、画像処理の状況に応じて水平走査期間Ｈdが延長されることになる。
一方、この図に示す例では、画像信号ＤGA2[4]が生成されるタイミングは、水平走査期間Ｈd2[3]におけるイネーブル信号ＤＥnbの立下りのタイミングよりも後である。このため、画像信号ＤGA2[4]が生成されるタイミングにおいて、出力許可パルスＰL[4]が出力される。この場合、水平走査期間Ｈd2[3]の水平フロントポーチ期間ＤＨfの時間長は、基準フロントポーチ時間ＴPと、延長フロントポーチ時間ＴPX（水平走査期間Ｈd2[3]におけるイネーブル信号ＤＥnbの立下りのタイミングから、出力許可パルスＰL[4]が出力されまでの時間）との、合計の時間長となる。すなわち、表示部４０における表示準備がボトルネックとなる表示の遅延が解消される時刻Ｔth以降は、画像処理の状況に応じて水平走査期間Ｈdが延長されることになる。
また、図１９では、画像信号ＤGA3[m]が生成されるタイミングは、水平走査期間Ｈd3[m-1]におけるイネーブル信号ＤＥnbの立下りのタイミングよりも後である。このため、画像信号ＤGA3[m]が生成されるタイミングにおいて、出力許可パルスＰL[m]が出力される。この場合、水平走査期間Ｈd3[m]の水平フロントポーチ期間ＤＨfの時間長は、基準フロントポーチ時間ＴPと、延長フロントポーチ時間ＴPX（水平走査期間Ｈd3[m]におけるイネーブル信号ＤＥnbの立下りのタイミングから、出力許可パルスＰL[m]が出力されまでの時間）との、合計の時間長となる。すなわち、画像処理部２１の画像処理がボトルネックとなって表示に遅延が生じている状態（第３の状態）においては、画像処理の状況に応じて水平走査期間Ｈdが延長されることになる。
なお、図１８及び図１９からも明らかなように、第２実施形態においては、無効水平走査期間Ｈd-Ｄは存在せず、全ての水平走査期間Ｈdは有効水平走査期間Ｈd-Ａとなる。
また、第２実施形態では、水平走査期間Ｈdが例えば表示ドットクロック信号ＤCLKの単位で可変となるため、垂直走査期間Ｆdも可変の時間長を有することとなる。
また、第２実施形態では、水平走査期間Ｈdが例えば表示ドットクロック信号ＤCLKの単位で可変となるため、垂直走査期間Ｆdも可変の時間長を有することとなる。
＜Ｃ．変形例＞
以上の各形態は多様に変形され得る。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様は、相互に矛盾しない範囲内で適宜に併合され得る。なお、以下において説明する変形例では、説明の重複を避けるため、上述した本発明の実施形態との共通点については説明を省略する。
以上の各形態は多様に変形され得る。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様は、相互に矛盾しない範囲内で適宜に併合され得る。なお、以下において説明する変形例では、説明の重複を避けるため、上述した本発明の実施形態との共通点については説明を省略する。
＜変形例１＞
上述した実施形態では、表示部４０が液晶パネル４２を備える場合を例示したが、本発明はこのような態様に限定されるものではなく、ＯＬＥＤ（organic light emitting diode）パネル、プラズマ表示パネル等の表示素子を用いてもよい。
上述した実施形態では、表示部４０が液晶パネル４２を備える場合を例示したが、本発明はこのような態様に限定されるものではなく、ＯＬＥＤ（organic light emitting diode）パネル、プラズマ表示パネル等の表示素子を用いてもよい。
＜変形例２＞
上述した実施形態及び変形例では、画像処理回路１００と表示部４０との間のデータ伝送をパラレルインタフェースによって行うが、低電圧差動（ＬＶＤＳ）のシリアルインタフェースによって行うようにしてもよい。
上述した実施形態及び変形例では、画像処理回路１００と表示部４０との間のデータ伝送をパラレルインタフェースによって行うが、低電圧差動（ＬＶＤＳ）のシリアルインタフェースによって行うようにしてもよい。
＜変形例３＞
上述した実施形態及び変形例では、撮像垂直同期信号ＳＶsyncにより規定される垂直走査期間Ｆsが、表示垂直同期信号ＤＶsync（またはＤＶsync2）により規定される垂直走査期間Ｆd以上の時間長を有しているが、本発明はこのような態様に限定されるものではなく、垂直走査期間Ｆsは、垂直走査期間Ｆdよりも短い時間長を有していてもよい。
上述した実施形態及び変形例では、撮像垂直同期信号ＳＶsyncにより規定される垂直走査期間Ｆsが、表示垂直同期信号ＤＶsync（またはＤＶsync2）により規定される垂直走査期間Ｆd以上の時間長を有しているが、本発明はこのような態様に限定されるものではなく、垂直走査期間Ｆsは、垂直走査期間Ｆdよりも短い時間長を有していてもよい。
＜変形例４＞
上述した実施形態及び変形例では、出力制御部３１は、画像処理部２１が出力する書込完了信号ＰtAと、画像信号出力部２３が出力する出力完了信号ＰtBと、に基づいて、画像信号Ｄ[m]を出力する準備が完了したか否かを判定するが、本発明はこのような態様に限定されるものではなく、出力制御部３１がラインバッファ２２を周期的に参照することで、ラインバッファ２２に画像信号Ｄ[m]が記録されていること、及び、ラインバッファ２２から画像信号Ｄ[m-1]が読み出されたことを判定することにより、画像信号Ｄ[m]を出力する準備が完了したか否かを判定してもよい。
上述した実施形態及び変形例では、出力制御部３１は、画像処理部２１が出力する書込完了信号ＰtAと、画像信号出力部２３が出力する出力完了信号ＰtBと、に基づいて、画像信号Ｄ[m]を出力する準備が完了したか否かを判定するが、本発明はこのような態様に限定されるものではなく、出力制御部３１がラインバッファ２２を周期的に参照することで、ラインバッファ２２に画像信号Ｄ[m]が記録されていること、及び、ラインバッファ２２から画像信号Ｄ[m-1]が読み出されたことを判定することにより、画像信号Ｄ[m]を出力する準備が完了したか否かを判定してもよい。
＜変形例５＞
上述した実施形態及び変形例では、撮像表示装置１に表示部４０が内蔵されているが、本発明はこのような態様に限定されるものではなく、表示部４０をデジタルカメラの外部に接続するファインダー（表示装置）等として構成してもよい。
上述した実施形態及び変形例では、撮像表示装置１に表示部４０が内蔵されているが、本発明はこのような態様に限定されるものではなく、表示部４０をデジタルカメラの外部に接続するファインダー（表示装置）等として構成してもよい。
＜変形例６＞
上述した実施形態及び変形例では、ライン毎に画像処理時間ＵA[m]が変動する場合を例示して説明したが、本発明はこのような態様に限定されるものではなく、画像処理時間ＵA[m]はライン間で同一であってもよい。
上述した実施形態及び変形例では、ライン毎に画像処理時間ＵA[m]が変動する場合を例示して説明したが、本発明はこのような態様に限定されるものではなく、画像処理時間ＵA[m]はライン間で同一であってもよい。
＜Ｄ．応用例＞
以上の各形態に例示した撮像表示装置１は、各種の電子機器に利用されうる。例えば、撮像表示装置１は、プロジェクター装置、ＨＵＤ（ヘッドアップディスプレイ）、ＨＭＤ（ヘッドマウントディスプレイ）等の電子機器（表示装置）等として構成してもよい。また、ライブビューを行う表示装置であれば、例えば電子双眼鏡、電子めがね、電子顕微鏡、医療用電子めがねのファインダ、車載のバックモニタ、車載のサイドミラーのモニタ等にも適用することができ、撮像から表示までの遅延を低減させることができる。くわえて、表示装置の態様においては、撮像部１０を必ずしも備えてなくてもよい。すなわち、撮像信号ＤSが供給される画像処理回路１００、及び、表示部４０を表示装置として捉えてもよい。
以上の各形態に例示した撮像表示装置１は、各種の電子機器に利用されうる。例えば、撮像表示装置１は、プロジェクター装置、ＨＵＤ（ヘッドアップディスプレイ）、ＨＭＤ（ヘッドマウントディスプレイ）等の電子機器（表示装置）等として構成してもよい。また、ライブビューを行う表示装置であれば、例えば電子双眼鏡、電子めがね、電子顕微鏡、医療用電子めがねのファインダ、車載のバックモニタ、車載のサイドミラーのモニタ等にも適用することができ、撮像から表示までの遅延を低減させることができる。くわえて、表示装置の態様においては、撮像部１０を必ずしも備えてなくてもよい。すなわち、撮像信号ＤSが供給される画像処理回路１００、及び、表示部４０を表示装置として捉えてもよい。
１……撮像表示装置、１０……撮像部、１１……撮像光学系、１２……イメージセンサ、１３……タイミングジェネレータ、２０……画像信号生成部、２１……画像処理部、２２……ラインバッファ、２３……画像信号出力部、３０……タイミング制御部、３１……出力制御部、３２……タイミングジェネレータ、３３……パラメーター送信部、４０……表示部、４１……ＥＶＦコントローラ、４２……液晶パネル、５０……ＣＰＵ、６０……操作部、１００……画像処理回路。
Claims (7)
- 被写体を撮像する撮像部が出力する撮像信号に基づいて、前記撮像部よりも高いフレームレートで画像表示が可能な表示部の各ラインで表示すべき画像を示す画像信号を生成し、生成した前記画像信号を前記表示部に出力する画像処理方法であって、
前記撮像部が前記撮像信号を出力してから、前記画像信号を生成するまでの時間を画像処理時間とし、
前記撮像信号のフレームの開始から、前記表示部に出力する前記画像信号のフレームの開始までの時間を位相差とし、
前記撮像部のフレームレートを第１フレームレートとし、
前記表示部で表示可能な最高のフレームレートを第２フレームレートとしたとき、
前記位相差が、前記画像処理時間より長い場合には、
前記表示部のフレームレートが前記第２フレームレートとなるように前記画像信号を前記表示部に出力することにより、前記位相差を次第に小さくし、
前記位相差が、前記画像処理時間以下となった後は、
前記表示部のフレームレートが前記第１フレームレートとなるように前記画像信号を前記表示部に出力する、
ことを特徴とする画像処理方法。 - 前記位相差が前記画像処理時間より長い場合には、
前記画像信号を生成した後、生成した画像信号の示す画像が前記表示部で表示可能となるまで待機して、生成した画像信号を前記表示部に出力する、
ことを特徴とする請求項１に記載の画像処理方法。 - 前記表示部は一定周期で出力される水平同期パルスに同期して動作し、
生成された前記画像信号を前記水平同期パルスに同期して前記表示部に出力し、
前記位相差が前記画像処理時間以下となった後において、前記画像信号を生成する画像信号生成時刻が、前記表示部において前記画像信号の示す画像を表示可能となる表示可能時刻以降となる場合、
前記画像信号生成時刻の後に最初に出力される水平同期パルスに同期して前記画像信号を前記表示部出力する、
ことを特徴とする、請求項１または２に記載の画像処理方法。 - 前記表示部は水平同期パルスに同期して動作し、
生成された前記画像信号を前記水平同期パルスに同期して前記表示部に出力し、
前記位相差が前記画像処理時間以下となった後において、前記画像信号を生成する画像信号生成時刻が、前記表示部において前記画像信号の示す画像を表示可能となる表示可能時刻以降となる場合、
前記画像信号生成時刻までは、前記水平同期パルスの出力を停止するとともに、前記画像信号の出力を停止し、
前記画像信号生成時刻の後は、前記水平同期パルスを出力するとともに、当該出力される水平同期パルスに同期して前記画像信号を出力する、
ことを特徴とする、請求項１または２に記載の画像処理方法。 - 被写体を撮像して撮像信号を出力する撮像部と、
前記撮像信号に基づいて、前記撮像部よりも高いフレームレートで画像表示が可能な表示部の各ラインで表示すべき画像を示す画像信号を生成し、生成した前記画像信号を前記表示部に出力する画像信号生成部と、
前記画像信号生成部が前記画像信号を出力するタイミングを制御するタイミング制御部と、
を備え、
前記撮像部が前記撮像信号を出力してから、前記画像信号生成部が前記画像信号を生成するまでの時間を画像処理時間とし、
前記撮像信号のフレームの開始から、前記表示部に出力する前記画像信号のフレームの開始までの時間を位相差とし、
前記撮像部のフレームレートを第１フレームレートとし、
前記表示部で表示可能な最高のフレームレートを第２フレームレートとしたとき、
前記タイミング制御部は、
前記位相差が、前記画像処理時間より長い場合において、
前記表示部のフレームレートが前記第２フレームレートとなるように前記画像信号生成部に前記画像信号を出力させることにより、前記位相差を次第に小さくする第１のタイミング制御と、
前記位相差が、前記画像処理時間以下となった後において、
前記表示部のフレームレートが前記第１フレームレートとなるように前記画像信号生成部に前記画像信号を出力させる第２のタイミング制御と、
を実行可能である、
ことを特徴とする撮像装置。 - 被写体を撮像する撮像部が出力する撮像信号に基づいて、前記撮像部よりも高いフレームレートで画像表示が可能な表示部の各ラインで表示すべき画像を示す画像信号を生成し、生成した前記画像信号を前記表示部に出力する画像信号生成部と、
前記画像信号生成部が前記画像信号を出力するタイミングを制御するタイミング制御部と、
を備え、
前記撮像部が前記撮像信号を出力してから、前記画像信号生成部が前記画像信号を生成するまでの時間を画像処理時間とし、
前記撮像信号のフレームの開始から、前記表示部に出力する前記画像信号のフレームの開始までの時間を位相差とし、
前記撮像部のフレームレートを第１フレームレートとし、
前記表示部で表示可能な最高のフレームレートを第２フレームレートとしたとき、
前記タイミング制御部は、
前記位相差が、前記画像処理時間より長い場合において、
前記表示部のフレームレートが前記第２フレームレートとなるように前記画像信号生成部に前記画像信号を出力させることにより、前記位相差を次第に小さくする第１のタイミング制御と、
前記位相差が、前記画像処理時間以下となった後において、
前記表示部のフレームレートが前記第１フレームレートとなるように前記画像信号生成部に前記画像信号を出力させる第２のタイミング制御と、
を実行可能である、
ことを特徴とする画像処理装置。 - 前記表示部と、
請求項５に記載の撮像装置と、
を備える、
ことを特徴とする撮像表示装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014162104A JP6365097B2 (ja) | 2014-08-08 | 2014-08-08 | 画像処理方法、撮像装置、画像処理装置、及び、撮像表示装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014162104A JP6365097B2 (ja) | 2014-08-08 | 2014-08-08 | 画像処理方法、撮像装置、画像処理装置、及び、撮像表示装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016039517A JP2016039517A (ja) | 2016-03-22 |
| JP6365097B2 true JP6365097B2 (ja) | 2018-08-01 |
Family
ID=55530270
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014162104A Active JP6365097B2 (ja) | 2014-08-08 | 2014-08-08 | 画像処理方法、撮像装置、画像処理装置、及び、撮像表示装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6365097B2 (ja) |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5195818B2 (ja) * | 2010-06-01 | 2013-05-15 | セイコーエプソン株式会社 | 表示制御装置 |
| JP6044317B2 (ja) * | 2012-11-21 | 2016-12-14 | セイコーエプソン株式会社 | 撮影装置、撮影装置の制御方法 |
-
2014
- 2014-08-08 JP JP2014162104A patent/JP6365097B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016039517A (ja) | 2016-03-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6601020B2 (ja) | 撮像表示装置 | |
| US8529069B2 (en) | Projection apparatus and control method thereof | |
| US10347171B2 (en) | Imaging device including timing generator that generates vertical synchronization signal after number of lines of valid image signal reaches number of valid lines of vertical scanning period | |
| RU2570354C2 (ru) | Захват и отображение изображений в реальном времени | |
| KR20080064719A (ko) | 화상 표시 제어 장치 | |
| JP6515455B2 (ja) | 撮像装置及び撮像表示装置 | |
| US10044912B2 (en) | Imaging device and image processing device for outputting image signal to be displayed, and display control device and imaging display apparatus for displaying image signal | |
| US9658815B2 (en) | Display processing device and imaging apparatus | |
| JP6565326B2 (ja) | 撮像表示装置及びその制御方法 | |
| JP6645047B2 (ja) | 撮像装置、画像処理装置、及び、撮像表示装置 | |
| JP6365097B2 (ja) | 画像処理方法、撮像装置、画像処理装置、及び、撮像表示装置 | |
| JP2008270937A (ja) | 画像処理コントローラ、電子機器及び画像処理方法 | |
| CN112929512B (zh) | 控制电路及其控制方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170719 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180528 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180605 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180618 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6365097 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |