JP2011252993A - 表示制御装置 - Google Patents

Abstract

【課題】画像データの準備に要する期間がラインに応じて変動する場合において表示遅延を短縮する。
【解決手段】画像データを生成する生成処理を、ラインごとに所定の処理順序で行う画像データ生成部と、前記画像データに基づく表示処理を、前記ラインごとに前記処理順序で表示部に行わせるとともに、前記処理順序がＮ（Ｎは自然数）番目の前記ラインについての前記生成処理の終了から前記処理順序が（Ｎ＋１）番目の前記ラインについての前記生成処理の終了までの期間が短いほど、前記Ｎ番目の前記ラインについての前記生成処理の終了から前記（Ｎ＋１）番目の前記ラインについての前記表示処理の開始までの期間を短くする制御部と、を備える。
【選択図】図１

Description

本発明は、ラインごとに表示処理を行う表示制御装置に関する。

従来、イメージセンサーで撮影した画像を液晶ディスプレイで表示する撮影装置が知られており、液晶ディスプレイに表示される表示画像が、現実の被写体に対して遅延することを防止するために各種の技術が開発されている。例えば、特許文献１には、１フレーム分の画像信号を記録するＶＲＡＭを備える撮影装置において、ＶＲＡＭに対して１フレーム分の画像信号の書き込みが終了する前に画像信号を読み出して液晶ディスプレイで表示させる技術が開示されている。具体的には、イメージセンサーが１フレーム分の画像信号を記録するために要する撮影周期と液晶ディスプレイに１フレーム分の画像を表示させるための再生周期とを共通とするとともに、各フレームについて撮影周期の開始から位相差ΔＴだけ遅延したタイミングで再生周期を開始させる構成が記述されている。

特開２００７−２４３６１５号公報

特許文献１の技術において、各フレームに対して一定の位相差ΔＴが定義される。すなわち、特許文献１では、モードごとに位相差ΔＴを定義することが記述され（特許文献１、００５７段落）、また、位相差ΔＴは、ＶＲＡＭに対する画像データの読み出しが書き込みに先行しないように決められることが記述されている（特許文献１、００５５，００５６段落）。従って、モードごとに変動し得るものの、同一モードにおいて位相差ΔＴは、各フレームに対して共通の値であり、表示対象となる画像の全ラインについて共通の位相差ΔＴが与えられていることになる。

しかし、イメージセンサーの出力データに基づいて被写体像を表示部に表示させるための画像処理を行う構成において、各種の画像処理に要する期間はラインごとに異なり得る。このため、共通の位相差ΔＴを設けることによって表示対象となる画像の全ラインにおいて画像データの読み出しが書き込みに先行しないようにするためには、当該読み出しの先行が発生しないように余裕を持って位相差ΔＴを定義する必要がある。例えば、全ラインについて画像データの準備に要する期間の最大値を要するとみなして位相差ΔＴを定義するなどの配慮が必要になる。すなわち、全ラインについて画像データの準備に要する期間の最大値を要するとしても、いずれのラインにおいても画像データの読み出しが書き込みに先行しないように十分長い位相差ΔＴを定義する必要がある。
従って、画像データの準備に要する期間がラインに応じて変動し得る構成において、画像データの準備に要する期間が短いラインでは画像データの準備が終了してから液晶ディスプレイに表示されるまでの遅延が不必要に長くなるという問題があった。
本発明は上記課題にかんがみてなされたもので、画像データの準備に要する期間がラインに応じて変動する場合において表示遅延を短縮することを目的の１つとする。

上記目的を達成するため、本発明においては、画像データ生成部は、画像データを生成する生成処理を、ラインごとに所定の処理順序で行う。また、制御部は、画像データの生成処理が終了するのと共通の処理順序で、複数のラインについての表示処理を行わせる。ここで、処理順序がＮ（Ｎは自然数）番目のラインについての生成処理の終了から処理順序が（Ｎ＋１）番目のラインについての生成処理の終了までの期間が短いほど、Ｎ番目のラインについての生成処理の終了から（Ｎ＋１）番目のラインについての表示処理の開始までの期間を短くする。すなわち、（Ｎ＋１）番目のラインの生成処理の終了が早ければ早いほど、（Ｎ＋１）番目のラインについての表示処理の開始を早くする。このようにすることにより、画像データの準備に要する期間がラインに応じて変動する場合において、画像データの準備に要する期間が短いラインについても、画像データの生成処理が終了してから表示処理の開始までの遅延が不必要に長くなることが防止できる。

また、処理順序がＮ番目のラインについての生成処理の終了から処理順序が（Ｎ＋１）番目のラインについての生成処理の終了までの期間が短いほど、Ｎ番目のラインについての表示処理の開始から（Ｎ＋１）番目のラインについての表示処理の開始までの期間を短くする場合も、（Ｎ＋１）番目のラインの生成処理の終了が早ければ早いほど、（Ｎ＋１）番目のラインについての表示処理の開始が早くなる。

また、各ラインのそれぞれについて生成処理の終了を、表示処理を開始させるためのトリガーとすることにより、各ラインについての表示処理の開始が生成処理の終了に先行することが防止できる。なお、生成処理の終了を表示処理の開始のトリガーとするとは、生成処理の終了が表示処理を開始させるための必須条件となっており、かつ、生成処理の終了と同時または所定期間経過後に表示処理を開始させることを意味する。

ここで、画像データの準備に要する期間がラインに応じて大きく変動するほど、本発明の効果は顕著となる。本発明によれば、画像データの準備に要する期間のライン間の格差に対応する遅延を防止することができるからである。画像データの準備に要する期間がラインに応じて変動する処理の例として、前工程において前工程ラインごとに生成されたデータを用いて行う処理であって、処理対象のラインの位置に応じた数の前工程ラインについてのデータを用いる処理が挙げられる。この場合、前工程ラインの数に応じて使用するデータが準備されるまでに待機する時間が変動することとなるため、処理対象のラインの位置に応じて画像データの準備に要する期間が異なることとなる。さらに、画像データの準備に要する期間がラインに応じて変動する処理のより具体的な例として、歪曲収差を解消する歪曲補正を行ってもよい。この歪曲補正においては、撮影センサー（例えば、エリアイメージセンサー。）から取得した出力データに基づいて各ラインについての画像データを生成するとともに、各ラインの位置に応じて必要な出力データのデータ量が変動する。すなわち、各ラインの位置に応じて必要な出力データが供給されるまでに待機する時間が変動するために、画像データの準備に要する期間がラインに応じて変動することとなる。歪曲収差は、画像における位置に強く依存するものであり、歪曲収差が大きい位置のラインであるほど、撮影センサーにおける広範囲の画像が必要となるからである。

また、ラインが示す画像の更新頻度の高さに応じて所要期間が変動する生成処理を画像データ生成部が実行してもよい。第１画像と、当該第１画像よりも更新頻度の高い第２画像とでは、第２画像を示すラインについての画像データの準備に時間を要する。更新頻度が高い第２画像については、画像データを新たに生成しなければならない確率が高くなるからである。一方、更新頻度が低い第１画像については、すでに生成した画像データをメモリから読み出せば済む確率が高くなるため、画像データの準備に要する時間は短くなる。従って、第１画像と第２画像とを合成する場合において、第１画像のみを含むラインと、第２画像を含むラインとでは、画像データの準備に要する時間が変動することとなる。なお、第１画像と第２画像とに透明度を設定して両者を重ね合わせる場合には、第２画像が不透明（透明度が１００％よりも小さい。）で重畳される画素を含むラインについての画像データの準備に要する時間が長くなる。

ここで、第１画像は第２画像よりも相対的に更新頻度が少ないものであればよい。例えば、カメラの撮影条件等を示し操作時にのみ画像が更新されるＯＳＤ（On Screen Display）画像と、撮影センサーの出力信号に基づく被写体像とを合成する場合においては、ＯＳＤ画像が第１画像となる。なお、第２画像としての被写体像は上述の歪曲補正を行ったものであってもよい。

また、コンピューターグラフィックスを表示する場合において、比較的動きの少ない背景画像と、動きの多いオブジェクトとを個別に描画しておき、当該背景画像と当該オブジェクトを描画した画像とを合成することが行われる。この場合、動きの多いオブジェクトを描画した画像は更新頻度が高い第２画像となり、特にオブジェクトとして３次元オブジェクトを描画する場合には第２画像を含むラインについての画像データの準備に要する時間が長期化する。このような場合おいても、本発明によれば、画像データの準備に要する時間が短い第１画像のみを含むラインについて早期に表示処理を開始させることができる。特に、本発明を適用して、コンピューターゲームの表示する場合には、応答性の高い表示を実現することができる。

また、ラインに属する画素が示す階調値に応じて画像データの準備に要する時間が変動する生成処理を画像データ生成部が実行してもよい。例えば、ガマットの外縁から所定範囲の階調値にのみガマットマッピングやガマットクリッピング等を実行する場合には、当該範囲の階調値を示す画素を含むラインの方が、当該範囲の階調値を示す画素を含まないラインよりも画像データの準備に要する時間が長くなる。さらに、例えば、記憶色の色域に属する階調値にのみ記憶色補正等を実行する場合には、当該色域の階調値を示す画素を含むラインの方が、当該色域の階調値を示す画素を含まないラインよりも画像データの準備に要する時間が長くなる。

さらに、本発明のように、ラインの生成処理の終了が早ければ早いほど表示処理の開始を早くする手法は、プログラムや方法としても適用可能である。また、以上のような装置、プログラム、方法は、単独の装置として実現される場合もあれば、複合的な機能を有する装置において共有の部品を利用して実現される場合もあり、各種の態様を含むものである。

本発明の実施形態にかかるブロック図である。 エリアイメージセンサーと液晶パネルの画素数を示す図である。 エリアイメージセンサーの出力データの出力法を例示する図である。 （４Ａ）は樽型収差の場合のリサイズを説明する模式図、（４Ｂ）は糸巻型収差の場合のリサイズを説明する模式図である。 リサイズのタイミングチャートである。 本実施形態にかかる表示部に印加される信号のタイミングチャートである。 本発明の他の実施形態にかかるタイミングチャートである。 本発明の他の実施形態にかかるブロック図である。

ここでは、下記の順序に従って本発明の実施の形態について説明する。
（１）撮影装置の構成：
（２）水平同期信号の制御：
（３）他の実施形態：

（１）撮影装置の構成：
図１は本発明の一実施形態にかかる表示制御装置を含む撮影装置１には、交換レンズユニット１０、シャッター１３、ローパスフィルター１４、エリアイメージセンサー１５、ＡＳＩＣ２００、タイミングジェネレーター３０、表示部４０、ＣＰＵ５０、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＯＭ５３、ＲＡＭ５４、操作部５５が備えられている。ＣＰＵ５０は、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＡＭ５４を適宜利用してＲＯＭ５３に記録されたプログラムを実行可能であり、当該プログラムによりＣＰＵ５０は、操作部５５に対する操作に応じてエリアイメージセンサー１５にて撮影された被写体を示す画像データを生成する機能を実行する。なお、操作部５５はシャッターボタンと、モードを切り換えるためのモード切換手段としてのダイヤルスイッチと、絞りとシャッター速度を切り換えるためのダイヤルスイッチと、各種の設定メニューを操作するためのプッシュボタンとを備えており、利用者は当該操作部５５に対する操作によって撮影装置１に対して各種の指示を与えることができる。

表示部４０は、撮影対象となる被写体を示す画像を表示して利用者に撮影前の被写体の様子および撮影条件を把握させるＥＶＦ（Electronic View Finder）であり、本実施形態にかかる撮影装置１はＥＶＦを備えたミラーレスデジタルカメラである。表示部４０は、図示しないインターフェース回路、液晶パネルドライバー４１、液晶パネル４２、図示しない接眼レンズ等を備えている。本実施形態において液晶パネル４２は、画素ごとに３色のカラーフィルターに対応する３つのサブピクセルを備える高温ポリシリコンＴＦＴ（Thin Film Transistor）であり、画素の位置は直交座標系における座標で規定される。また、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼び、液晶パネル４２の全画素によって構成される１画面を１フレームと呼ぶ。

液晶パネルドライバー４１は、各サブピクセルに電圧を印加して液晶を駆動するための信号を液晶パネル４２に対して出力する。液晶パネル４２は、図示しないゲートドライバおよびソースドライバを備えており、液晶パネルドライバー４１から出力される信号に応じてゲートドライバが各ラインの各画素における表示タイミングを制御し、ソースドライバが表示タイミングとされているラインの各画素に対して各画素の画像データに対応した電圧を印加することによって表示を行う。すなわち、液晶パネルドライバー４１は、液晶パネル４２における表示を行うための各種信号、例えば、１フレーム分の表示を行うための期間を規定する垂直同期信号（ＤＶ_sync）、１ライン分の表示を行うための期間を規定する水平同期信号（ＤＨ_sync）、各ライン内での画像データの取り込み期間を規定するデータアクティブ信号（ＤＤ_active）、各画素の画像データの取り込みタイミング等を規定するデータクロック信号（DDotclock）、各画素の画像データ（Data）を出力するように構成されている。

なお、本実施形態にかかる撮影装置１は、制御部としてのタイミングジェネレーター３０を備えており、上述の垂直同期信号ＤＶ_sync、水平同期信号ＤＨ_sync、データアクティブ信号ＤＤ_active、データクロック信号DDotclockは当該タイミングジェネレーター３０によって生成される。すなわち、タイミングジェネレーター３０は、クロック信号発生手段から出力される所定周期のクロック信号の変化タイミングに同期して信号レベルが変化する信号を生成する分周回路等を備えた表示制御部３０ｂを備えている。そして、タイミングジェネレーター３０は、表示制御部３０ｂの制御により、予め決められたタイミングで信号レベルが変化する垂直同期信号ＤＶ_sync、データアクティブ信号ＤＤ_active、データクロック信号DDotclockを生成する。なお、本実施形態において水平同期信号ＤＨ_syncの出力タイミングは可変であり、後述するようにリサイズ処理部２０ｅの処理結果に依存して出力タイミングが決定される。

また、本実施形態における液晶パネル４２は、水平方向に１０２４個、垂直方向に７６８個の有効画素を備えた画素数がＸＧＡサイズのパネルであり、液晶パネルドライバー４１が出力する画像データDataの内容および出力タイミングを調整することによって、任意の位置に画像データDataに対応した階調の表示を行うことができる。本実施形態においては、液晶パネル４２の予め決められた領域にエリアイメージセンサー１５の出力データに基づいて被写体像を表示し、また、予め決められた領域に撮影条件を示す文字を表示する構成となっている。すなわち、液晶パネル４２には、被写体像とともに、撮影条件を示す文字がＯＳＤ表示される。なお、液晶パネル４２は水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。

交換レンズユニット１０は、エリアイメージセンサー１５に被写体像を結像させるレンズ１１と絞り１２とを備える。交換レンズユニット１０は、図示しない筐体に交換可能に取り付けられる。エリアイメージセンサー１５としては、ベイヤー配列されたカラーフィルターと、光量に応じた電荷を光電変換によって画素ごとに蓄積する複数のフォトダイオードとを備えるＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサー、ＣＣＤ（Charge Coupled Device）イメージセンサー等の固体撮像素子が用いられる。エリアイメージセンサー１５の画素の位置は直交座標系における座標で規定され、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。エリアイメージセンサー１５のエリアイメージセンサー１５の一部の画素によって構成される１画面を１フレームと呼ぶ。

本実施形態においては、エリアイメージセンサー１５もタイミングジェネレーター３０が出力する各種信号に同期した動作を行う。すなわち、タイミングジェネレーター３０は、１フレーム分のフォトダイオードの検出結果を読み出すための期間を規定する垂直同期信号（ＳＶ_sync）、１ライン分のフォトダイオードの検出結果を読み出すための期間を規定する水平同期信号（ＳＨ_sync）、各画素の画像データの読み出しタイミング等を規定するデータクロック信号（SDotclock）を出力する。エリアイメージセンサー１５は、垂直同期信号SV_syncに応じて１フレーム分の出力データの出力を開始し、水平同期信号ＳＨ_syncにて規定される期間内にデータクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の一部の画素に対応するフォトダイオードの検出結果を示す出力データを逐次読み出す。

ＡＳＩＣ２００は、ＳＤ−ＲＡＭ５２に予め確保された複数ライン分のラインバッファー５２ａ〜５２ｄを利用し、表示部４０にて被写体像を表示するための画像データをパイプライン処理によって生成する処理を行う回路によって構成される画像データ生成部２０を備えている。このＡＳＩＣ２００は、画像処理用ＤＳＰ（Digital Signal Processor）であっても良い。なお、複数ライン分のラインバッファー５２ａ〜５２ｄは画像データ生成部２０などに設けられていても良い。表示部４０は生成された画像データに基づいて被写体像を液晶パネル４２において表示する。すなわち、利用者は、表示部４０をＥＶＦとして利用しながら被写体を確認することが可能である。

また、利用者が操作部５５を操作して撮影指示を行った場合には、撮影指示に応じてエリアイメージセンサー１５は、垂直同期信号ＳＶ_syncに応じて１フレーム分の出力データの出力を開始し、水平同期信号ＳＨ_syncにて規定される期間内にデータクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の全有効画素に対応するフォトダイオードの検出結果を示す出力データを逐次読み出す。そして画像データ生成部２０は、ＳＤ−ＲＡＭ５２等を利用しＪＰＥＧ等の形式の画像データを生成して、当該画像データを図示しないリムーバブルメモリ等に記録する。すなわち、利用者は、被写体像を示す画像データを生成することが可能である。

（２）水平同期信号の制御：
被写体を示す画像データをリムーバブルメモリ等に記録し、印刷すること等を考慮した場合、高品質の画像データを得るためにはエリアイメージセンサー１５の画素数が所定数より多いことが望まれる。そこで、本実施形態におけるエリアイメージセンサー１５の有効画素数は図２に示すように、水平方向に５４００画素、垂直方向に３６００画素となっている。エリアイメージセンサー１５は水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。

一方、上述のように、液晶パネル４２は水平方向に１０２４個、垂直方向に７６８個の画素を備え、予め決められた領域（図２に示す被写体像表示領域Ｒ₁）に被写体像を表示する構成となっている。本実施形態においては、エリアイメージセンサー１５の縦横比（２：３）を維持したままできるだけ大きく被写体像を表示するため、液晶パネル４２の上辺および左右の辺に対して上辺及び左右の辺が接する縦横比２：３の矩形領域を被写体像を表示する被写体像表示領域Ｒ₁としている。また、残りの領域（図２に示す情報表示領域Ｒ₂）が撮影条件を示す文字の表示領域である。従って、液晶パネル４２における被写体の被写体像表示領域Ｒ₁は、水平方向に１０２４個、垂直方向に６８２個の画素にて構成される。以上のように、本実施形態においては、エリアイメージセンサー１５の画素数と液晶パネル４２の画素数とは一致していない。

さらに、表示部４０における表示は利用者による被写体の確認に利用されるため、エリアイメージセンサー１５にて被写体が撮影されたタイミングから表示部４０にて当該撮影された被写体像が表示されるタイミングまでの遅延が利用者によって認識可能な程度の長さであると、ＥＶＦで視認した被写体と記録される被写体像とがずれるなど、極めて使いづらいＥＶＦとなってしまう。従って、表示部４０がＥＶＦとして利用される際には、遅延が少ないことが要求される。

そこで、エリアイメージセンサー１５にて撮影した画像を人間が視認しづらい極めて短い遅延にて表示部４０に表示させるため、本実施形態においては、エリアイメージセンサー１５および画像データ生成部２０で各種の処理を行い、表示部４０は、この処理の結果生成された画像データを高速に表示させるための構成を備えている。

すなわち、本実施形態にかかるエリアイメージセンサー１５は、垂直方向に並ぶラインのうちｎ個（ｎは奇数）に１個の割合でフォトダイオードの検出結果を読み出す飛び越し走査を実行可能な回路が設けられている。また、同色のカラーフィルターを介して光電変換を行うフォトダイオードのうち水平方向に並ぶｍ個（ｍは自然数）の検出結果を加算して、その和をｍ分の１にして（すなわちｍ個の検出結果の相加平均を）出力するための加算器が設けられている。本実施形態において、表示部４０をＥＶＦとして機能させる際、エリアイメージセンサー１５においては、飛び越し走査および加算器による処理を実行することにより、水平方向および垂直方向の画素を間引き、エリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力することで、高速に被写体を撮影する構成としている。

すなわち、エリアイメージセンサー１５は、表示部４０をＥＶＦとして機能させるライブビューモードにおいて、ｎ個に１個の割合で垂直方向のラインを読み出し対象とした読み出しを水平同期信号ＳＨ_syncに応じて行う。また、ｍ個のフォトダイオードの検出結果を加算器で加算した結果を出力データとして出力する処理をデータクロック信号SDotclockに応じて行う。図３は、本実施形態においてエリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力する方法の一例を示している。同図３において、Ｒが付された矩形は赤の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｇが付された矩形は緑の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｂが付された矩形は青の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示している。

同図３に示すように、矩形で示す各画素のカラーフィルターがベイヤー配列である場合、各画素に１色のカラーフィルターのみが対応しているため、各画素の色は周囲の画素を利用して補間する必要がある。このため、ラインを間引いて出力データを取得する際に、間引き後に隣接するラインのカラーフィルターが異なる色となるように間引きを行う必要がある。このため、本実施形態においては、ｎを奇数とし、ｎラインに１ラインの割合で各ラインのフォトダイオードでの検出値を出力データとして取得すれば、補間によって各画素の色を特定可能な出力データを取得することができる。本実施形態においては、エリアイメージセンサー１５の垂直方向のライン数をできるだけ液晶パネル４２の被写体像表示領域Ｒ₁の垂直方向のライン数に近づけるため、５ラインに１ラインの割合で出力データを取得する構成としている。図３においては、５ラインに１ラインの割合で出力データを取得することを左向きの矢印で示しており、この例においては垂直方向のライン数が１／５、すなわち、７２０となる。

さらに、カラーフィルターがベイヤー配列である場合、水平方向に隣接する画素の色は異なるとともに、１個おきに同色のカラーフィルターが並ぶことになる。このため、水平方向に並ぶ画素について１個おきにｍ個加算し、その和をｍ分の１にすることで（すなわちｍ個の検出結果の相加平均を求めることで）実質的に間引き処理を行うことができる。本実施形態においては、加算器による加算を行った場合の画質上の制約等により、ｍを３と設定している。図３においては、最も下に記したラインのうち、緑色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオード検出結果を加算器Ｓ₁によって加算し、赤色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオードの検出結果を加算器Ｓ₂によって加算する構成を示している。この例においては水平方向の画素数が１／３、すなわち、１８００画素となる。図２には、エリアイメージセンサー１５における間引き後のデータサイズを破線の矩形１５ａによって示している。

以上のように、エリアイメージセンサー１５においては、垂直方向のライン数を７２０ライン、水平方向の画素数を１８００画素とすることができる。しかし、このような間引きにおいては、垂直方向においてｎが奇数であり、水平方向においてｍが自然数である等画質上の制約があるため、間引き後の画素数と液晶パネル４２の被写体表示領域Ｒ₁の画素数とを一致させることは困難である。また、上述のようにｎとｍとが異なる場合には縦横比が被写体と液晶パネル４２の被写体像とで異なるものになってしまう。

そこで、本実施形態においては、画像データ生成部２０において、間引き後の出力データに対してさらにリサイズを行って液晶パネル４２の被写体像表示領域Ｒ₁に表示させるための画像データを生成する構成としている。すなわち、画像データ生成部２０は、画素補間部２０ａ、色再現処理部２０ｂ、フィルター処理部２０ｃ、ガンマ補正部２０ｄ、リサイズ処理部２０ｅ、画像データ出力部２０ｆを備えている。そして、画像データを生成する過程でリサイズ処理部２０ｅによって垂直方向および水平方向の画素数を変更することにより、液晶パネル４２の被写体像表示領域Ｒ₁の画素数と等しい画像データを生成する構成としている。また、本実施形態においては、リサイズを行う際に、交換レンズユニット１０のレンズ１１の光学特性に起因した歪曲収差を解消する歪曲補正を行う。

ラインバッファー５２ａは、エリアイメージセンサー１５から出力される間引き後の出力データを一時記録するバッファーメモリであり、エリアイメージセンサー１５から間引き後の出力データが出力されると画像データ生成部２０の処理によって当該出力データがラインバッファー５２ａに一時記録される。画素補間部２０ａは、ラインバッファー５２ａからベイヤー配列において各画素で欠落している２チャネルの色を生成するために必要な画素数のデータを取り込みながら補間処理によって当該２チャネルの色を生成する。この結果、各画素において３チャネルのデータが生成される。次に、色再現処理部２０ｂは、生成されたデータに基づいて３×３の行列演算を行うことによってカラーマッチングのための色変換処理を行う。色変換処理によって静止されたデータはラインバッファー５２ｂに一時記録される。次にフィルター処理部２０ｃは、シャープネス調整やノイズ除去処理などをフィルター処理によって実行する。次にガンマ補正部２０ｄはエリアイメージセンサー１５の出力データの階調値が示す色と表示部４０で扱う画像データの階調値が示す色との特性差を解消する補正を行うガンマ補正を実行する。ガンマ補正によって生成された出力データはラインバッファー５２ｃに一時記録される。

当該ラインバッファー５２ｃに線順次で記録されていくデータの画素数は、エリアイメージセンサー１５において間引きが行われた画素数である。すなわち、垂直方向に７２０ライン、水平方向に１８００画素のデータが線順次で記録されていくことになる。リサイズ処理部２０ｅは当該ラインバッファー５２ｃに記録されていくデータを逐次参照して補間演算処理を行うことにより、間引き後の出力データを、被写体表示領域Ｒ₁の画素数（水平方向に１０２４個、垂直方向に６８２個）の画像データへと変換するとともに、レンズ１１の光学特性に起因する歪曲収差を解消する補正を行う。

リサイズは、被写体表示領域Ｒ₁の各画素に対応する各チャネルの階調値を線順次に決定していく処理である。具体的には、間引き後の出力データにおいて被写体表示領域Ｒ₁の各画素に対応する参照領域を特定し、当該参照領域に属する参照画素が示す各チャネルの階調値に基づく補間演算処理を実行する。例えば補間演算処理として、バイキュービック法やバイリニア法等を採用することができる。被写体表示領域Ｒ₁の各画素と、間引き後の出力データにおける参照領域の位置との対応関係は、交換レンズユニット１０が備えるＲＯＭ１６から読み出した歪曲収差データに基づいて特定される。なお、歪曲収差データを単一の交換レンズユニット１０について複数用意しておき、交換レンズユニット１０におけるズームやフォーカスの状態に応じたものを読み出してもよい。さらに、交換レンズユニット１０が備えるＲＯＭ１６からは交換レンズユニット１０の機種情報のみを読み出し、ＣＰＵ５０が機種情報に対応する歪曲収差データを生成したり、ＲＯＭ５３から読み出したりしてもよい。

図４Ａ，４Ｂはそれぞれ樽型収差と糸巻型収差とを説明する図である。樽型収差の場合には画像が外側に向かって膨脹することを示す歪曲曲線（撮影装置１を水平に構えて水平直線を撮影した像を示す水平歪曲曲線、および、鉛直直線を撮影した像を示す垂直歪曲曲線）が見られ、糸巻型収差の場合には画像が中央に向かって収縮することを示す歪曲曲線が見られる。本実施形態では、垂直方向および水平方向のそれぞれの中央軸に関して線対称の歪曲収差が発生することとして以下説明する。樽型収差の場合も糸巻型収差の場合も、水平歪曲曲線の中央ほど垂直方向の収差幅が大きくなる。また、樽型収差の場合も糸巻型収差の場合も、垂直方向の端の水平歪曲曲線ほど垂直方向の収差幅が大きくなる。水平歪曲曲線の中央における垂直方向の収差幅をβと表記し、特に垂直方向の両端の水平歪曲曲線についての収差幅βをβ_maxと表記する。

ＲＯＭ１６から読み出される歪曲収差データは、被写体表示領域Ｒ₁の各画素と、間引き後の出力データにおいて設定される参照領域Ｒ_aNの位置との関係を示すデータである。図４Ａ，４Ｂは、被写体表示領域Ｒ₁における最初の（Ｎ＝１）番目のラインと中間の（Ｎ＝３４１）番目のラインと最終の（Ｎ＝６８２）番目のラインに属するリサイズ後の各画素に対応して設定される参照領域Ｒ_aN（Ｒ _a1，Ｒ _a341，Ｒ _a682）の重心位置を示している。被写体表示領域Ｒ₁における各ラインにおいてリサイズ対象の画素を矢印Ａ₁，Ａ₃₄₁，Ａ₆₈₂のようにシフトさせた場合に、参照領域Ｒ_aN（Ｒ _a1，Ｒ _a341，Ｒ _a682）の重心位置は矢印Ａ₁，Ａ₃₄₁，Ａ₆₈₂のような軌跡に沿ってシフトする。この軌跡の形状が水平歪曲曲線の形状と一致するように、歪曲収差データは、被写体表示領域Ｒ₁の各画素と参照領域Ｒ_aNの位置との関係を規定している。なお、Ｎは１〜６８２の整数であり、被写体表示領域Ｒ₁における各ラインについての生成処理および表示処理の処理順序を示すライン番号を意味する。また、参照領域Ｒ_aNは垂直方向と水平方向の幅がα（画素）の正方形とされる。また、Ｍは補間演算処理前の垂直方向のライン数に相当する１〜７２０の整数であり、１フレーム分の間引き後の各ラインの出力データがラインバッファー５２ｃにバッファーされる順序を示すライン番号を意味する。補間演算処理前の垂直方向のラインは、前工程ラインに相当し、前工程ラインごとに出力データを生成するガンマ補正部２０ｄは前工程に相当する。

補間演算処理においては、被写体表示領域Ｒ₁の各画素が示す階調値が対応する位置の参照領域Ｒ_aNの各画素が示す階調値に近い階調値に決定される。すなわち、概念的には、出力データが示す画像における歪曲曲線上の各画素が被写体表示領域Ｒ₁における直線状のライン上に配列されていくこととなる。このように水平歪曲曲線に沿った位置に参照領域Ｒ_aNを設定することにより、歪曲収差を解消する補正が施された上で、被写体表示領域Ｒ₁の画素数の画像データへと変換することができる。

上述のように間引き後の出力データがラインバッファー５２ｃに垂直方向上端のライン（Ｍ＝１）から線順次でバッファーされていくのと並行して、リサイズも垂直方向上端のライン（Ｎ＝１）から線順次で行われる。ここで、被写体表示領域Ｒ₁におけるあるラインについてリサイズを行うにあたり、当該ラインについて設定される各参照領域Ｒ_aNに属する参照画素のうち垂直方向において最下方の参照画素（以下、最下方参照画素と表記し、図４Ａ，４Ｂにおいて最下方参照画素が属する参照領域Ｒ_aN（Ｒ _a1，Ｒ _a341，Ｒ _a682）をハッチングで示す。なお、樽型収差の場合のＮ＝１のように水平歪曲曲線が上側に凸となるラインでは、最下方参照画素が属する参照領域Ｒ_aNが左右両端に１つずつ生じるが、図４では、簡単のために右側の最下方参照画素が属する参照領域Ｒ_aNの図示を省略する。）の間引き後の出力データがラインバッファー５２ｃにバッファーされていることが必要となる。参照領域Ｒ_aNに属する画素の間引き後の出力データがすべてバッファーされていない限り、当該ラインのすべての画素について補間演算処理を実行することができないからである。そのため、各ラインについて補間演算処理を実行するにあたり、各ラインの補間演算処理に必要な出力データがラインバッファー５２ｃにバッファーされるまでのバッファー待機期間が発生する。

以下、樽型収差の場合のバッファー待機期間について説明する。図４Ａに図示するように、樽型収差の場合、出力データが示す画像の外縁から参照領域Ｒ_aNの半幅（α／２）だけ内側の矩形（二点鎖線で示す。）の四辺にそれぞれ内接する左右一対の垂直歪曲曲線および上下一対の水平歪曲曲線によって囲まれた樽型領域内において参照領域Ｒ_aNの重心位置が設定される。樽型収差の場合、出力データが示す画像の上半分の領域において水平歪曲曲線は上側に凸となるため、被写体表示領域Ｒ₁における最初（Ｎ＝１）のラインについての最下方参照画素は、水平歪曲曲線の端に設定される参照領域Ｒ _a1に属する画素うち最下方の画素となる。従って、被写体表示領域Ｒ₁における最初（Ｎ＝１）のラインについての最下方参照画素は、間引き後の出力データにおいてＭ₁＝（α＋β_max）番目のラインに属する。従って、Ｍ＝１〜Ｍ₁だけの出力データがラインバッファー５２ｃにバッファーされるまで待機した後に、最初（Ｎ＝１）のラインについての補間演算処理が可能となる。なお、被写体表示領域Ｒ₁における最初と最終の（Ｎ＝１，６８２）番目のラインにおいて、バッファーすべき間引き後の出力データのライン数が最大（α＋β_max）となり、最低限、（α＋β_max）ラインの出力データをバッファーする容量をラインバッファー５２ｃが備えていることが望ましい。

Ｎ番目のラインについての補間演算処理が終了すると、（Ｎ＋１）番目のラインについての最下方参照画素を含むラインについての出力データがラインバッファー５２ｃにバッファーされるまでバッファー待機期間が発生する。なお、Ｎ番目のラインについての最下方参照画素が属するライン、および、当該ラインよりも垂直方向上方のラインについての出力データは、すでにラインバッファー５２ｃにバッファーされているため、（Ｎ＋１）番目のラインについての補間演算処理において即座に参照することができる。すなわち、（Ｎ＋１）番目のラインについての最下方参照画素の垂直位置と、Ｎ番目のラインについての最下方参照画素の垂直位置との差分に相当するラインについての出力データがラインバッファー５２ｃに新たにバッファーされた段階で、（Ｎ＋１）番目のラインについてのバッファー待機時間が終了する。
本実施形態では、図４Ａの拡大図に示すようにＮ番目のラインについて参照領域Ｒ_aNの重心位置が設定される水平歪曲曲線と、（Ｎ＋１）番目のラインについての参照領域Ｒ _aN+1の重心位置が設定される水平歪曲曲線とが、垂直方向に一定の垂直変位ΔＹを有することとする。すなわち、Ｎ番目のラインに対応する水平歪曲曲線から垂直変位ΔＹだけ下方の水平歪曲曲線が（Ｎ＋１）番目のラインに対応する水平歪曲曲線となる。また、樽型収差において、垂直変位ΔＹは、水平歪曲曲線の水平方向の端の垂直位置を基準とする。

ここで、樽型収差の場合、出力データが示す画像の上半分の領域において水平歪曲曲線が上側に凸となるため、最下方参照画素は水平歪曲曲線の端に設定される参照領域Ｒ_aN（Ｒ _a1〜Ｒ _a341）に属することとなる。すなわち、垂直変位ΔＹが与えられた水平歪曲曲線の端に設定される参照領域Ｒ_aN（Ｒ _a1〜Ｒ _a341）に最下方参照画素が属する。従って、（Ｎ＋１）番目のラインについての最下方参照画素の垂直位置は、Ｎ番目のラインについての最下方参照画素の垂直位置から垂直変位ΔＹだけ下方にシフトすることとなる。
すなわち、被写体表示領域Ｒ₁の上半分の領域における（Ｎ＋１）番目（Ｎ＝２〜３４１）のラインについて補間演算処理を行うために、垂直変位ΔＹに対応するライン数の出力データがラインバッファー５２ｃにバッファーされるのを待機するバッファー待機期間が発生する。

一方、出力データが示す画像の下半分の領域において水平歪曲曲線は下側に凸となるため、最下方参照画素は、水平歪曲曲線の中央に設定される参照領域Ｒ_aN（Ｒ _a342〜Ｒ _a682）に属することとなる。この場合、（Ｎ＋１）番目のラインについての最下方参照画素の垂直位置は、Ｎ番目のラインについての最下方参照画素の垂直位置から垂直変位ΔＹだけ下方にシフトするに留まらない。すなわち、Ｎ番目のラインに対応する水平歪曲曲線と（Ｎ＋１）番目のラインに対応する水平歪曲曲線についての収差幅βの差分Δβを垂直変位ΔＹに加えた垂直変位（ΔＹ＋Δβ）だけ、最下方参照画素の垂直位置が下方にシフトする。垂直変位ΔＹが与えられた水平歪曲曲線の端よりも収差幅βだけ下方に位置する水平歪曲曲線の中央に設定されるＲ_aN（Ｒ _a342〜Ｒ _a682）に最下方参照画素が属するからである。
従って、被写体表示領域Ｒ₁の下半分の領域における（Ｎ＋１）番目（Ｎ＝３４２〜６８２）のラインについて補間演算処理を行うために、垂直変位（ΔＹ＋Δβ）に対応するライン数の出力データがラインバッファー５２ｃにバッファーされるのを待機するバッファー待機期間が発生する。ここで、樽型収差の場合、下半分の領域において水平歪曲曲線の垂直位置が下方になるほど収差幅βは単調的に増加するため、収差幅βの差分Δβは常に正である。従って、最下方参照画素の垂直変位（ΔＹ＋Δβ）＞ΔＹとなる。すなわち、被写体表示領域Ｒ₁の下半分の各ラインについて補間演算処理を行うためのバッファー待機期間は、被写体表示領域Ｒ₁の上半分の各ラインについて補間演算処理を行うためのバッファー待機期間よりも長くなる。

次に、糸巻型収差の場合のバッファー待機期間について説明する。糸巻型収差の場合、出力データが示す画像の外縁から参照領域Ｒ_aNの半幅（α／２）だけ内側の矩形（二点鎖線で示す。）の四頂点を交点とする左右一対の垂直歪曲曲線および上下一対の水平歪曲曲線によって囲まれた糸巻型領域内において参照領域Ｒ_aNの重心位置が設定される。糸巻型収差の場合、出力データが示す画像の上半分の領域において水平歪曲曲線は下側に凸となるため、被写体表示領域Ｒ₁における最初（Ｎ＝１）のラインについての最下方参照画素は、水平歪曲曲線の中央に設定される参照領域Ｒ _a1に属する画素うち最下方の画素となる。従って、被写体表示領域Ｒ₁における最初（Ｎ＝１）のラインについての最下方参照画素は、樽型収差の場合と同様に間引き後の出力データにおいてＭ₁＝（α＋β_max）番目のラインに属する。従って、糸巻型収差の場合も、Ｍ＝１〜Ｍ₁だけの出力データがラインバッファー５２ｃにバッファーされるまで待機した後に、最初（Ｎ＝１）のラインについての補間演算処理が可能となる。

Ｎ番目のラインについての補間演算処理が終了すると、（Ｎ＋１）番目のラインについての最下方参照画素を含むラインについての出力データがラインバッファー５２ｃにバッファーされるまでバッファー待機期間が発生する。
糸巻型収差の場合も、図４Ｂの拡大図に示すように、Ｎ番目のラインについて参照領域Ｒ_aNの重心位置が設定される水平歪曲曲線と、（Ｎ＋１）番目のラインについての参照領域Ｒ _aN+1の重心位置が設定される水平歪曲曲線とが、垂直方向に一定の垂直変位ΔＹを有することとする。ただし、糸巻型収差において、垂直変位ΔＹは、水平歪曲曲線の水平方向中央の垂直位置を基準とする。

ここで、糸巻型収差の場合、出力データが示す画像の上半分の領域において水平歪曲曲線が下側に凸となるため、最下方参照画素は水平歪曲曲線の中央に設定される参照領域Ｒ_aN（Ｒ _a1〜Ｒ _a341）に属することとなる。従って、（Ｎ＋１）番目のラインについての最下方参照画素の垂直位置は、Ｎ番目のラインについての最下方参照画素の垂直位置から垂直変位ΔＹだけ下方にシフトすることとなる。
従って、樽型収差の場合と同様に、被写体表示領域Ｒ₁の上半分の領域における（Ｎ＋１）番目（Ｎ＝２〜３４１）のラインについて補間演算処理を行うために、垂直変位ΔＹに対応するライン数の出力データがラインバッファー５２ｃにバッファーされるのを待機するバッファー待機期間が発生する。

一方、出力データが示す画像の下半分の領域において水平歪曲曲線は上側に凸となるため、最下方参照画素は、水平歪曲曲線の端に設定される参照領域Ｒ_aN（Ｒ _a342〜Ｒ _a682）に属することとなる。この場合、Ｎ番目のラインに対応する水平歪曲曲線と（Ｎ＋１）番目のラインに対応する水平歪曲曲線についての収差幅βの差分Δβを垂直変位ΔＹに加えた垂直変位（ΔＹ＋Δβ）だけ、最下方参照画素の垂直位置は下方にシフトすることとなる。糸巻型収差の場合も、下半分の領域において下方の水平歪曲曲線ほど収差幅βは単調的に増加するため、収差幅βの差分Δβは常に正である。従って、糸巻型収差の場合も、最下方参照画素の垂直変位（ΔＹ＋Δβ）＞ΔＹとなり、被写体表示領域Ｒ₁の下半分の各ライン（Ｎ＝３４２〜６８２）について補間演算処理を行うためのバッファー待機期間は、被写体表示領域Ｒ₁の上半分の各ライン（Ｎ＝２〜３４１）について補間演算処理を行うためのバッファー待機期間よりも長くなる。

以上説明したように、樽型収差の場合も糸巻型収差の場合も、最初（Ｎ＝１）のラインについてのバッファー待機時間が最も長くなり、被写体表示領域Ｒ₁の下半分の各ライン（Ｎ＝３４２〜６８２）について補間演算処理を行うためのバッファー待機期間は、被写体表示領域Ｒ₁の上半分（Ｎ＝２〜３４１）の各ラインについて補間演算処理を行うためのバッファー待機期間よりも長くなる。すなわち、本実施形態のリサイズにおいては、被写体表示領域Ｒ₁におけるラインの位置に応じてバッファー待機期間が変動する。

なお、垂直変位ΔＹが一定であり、収差幅βの差分Δβが一定（収差幅βがＮに関する線形関数）である場合には、上半分の各ラインについてのバッファー待機期間と、下半分の各ラインについてのバッファー待機期間はそれぞれ一定となり、Ｎ＝３４１→３４２となった場合にバッファー待機期間が増加する。また、垂直変位ΔＹが非一定である場合や、収差幅βが非線形的に変化する場合には、各ラインについてバッファー待機期間が連続的に変化することとなる。いずれにしても、歪曲補正をともなうリサイズを行う場合には、被写体表示領域Ｒ₁におけるラインの位置に応じてバッファー待機期間が変動することとなる。なお、参照領域Ｒ_aNの垂直方向と水平方向の幅αは一定でなくてもよく、例えば収差幅βに比例してもよい。この場合、Ｎ番目のラインについての参照領域Ｒ_aNの幅αと、（Ｎ＋１）番目のラインについての参照領域Ｒ_aNの幅αの差分もバッファー待機期間に影響を与える。

図５は、リサイズが終了するタイミングを説明するタイミングチャートである。同図に示すように、各ラインのバッファー待機期間Ｔ_Wにおいて間引き後の出力データの生成、および、当該生成した出力データのラインバッファー５２ｃに対する出力データの書き込みが行われ、バッファー待機期間Ｔ_Wの経過後にラインバッファー５２ｃから出力データの読み出すための読出期間Ｔ_Rが開始する。この読出期間Ｔ_Rは、各ラインについて一定である。読出期間Ｔ_Rが終了とすると、補間演算期間Ｔ_Iにおいて補間演算処理が行われる。被写体表示領域Ｒ₁の各ラインに属する画素の個数は同じであり補間演算処理に要する補間演算期間Ｔ_iは実質的に不変である。図示するように、Ｎ番目のラインについての読み出しが終了したタイミングで、次の（Ｎ＋１）番目のラインについてのバッファー待機期間Ｔ_Wが開始する。本実施形態では、補間演算期間Ｔ_Iがバッファー待機期間Ｔ_Wと読み出し期間Ｔ_Rの合計に比べて短いため、バッファー待機期間Ｔ_Wが各ラインについてのリサイズの所要期間全体を支配する。図５に示すように、３４２〜３４３番目のラインについてのバッファー待機期間Ｔ_Wは、３４０〜３４１番目のラインについてのバッファー待機期間Ｔ_Wよりも長くなっている。以上説明したバッファー待機期間Ｔ_Wの傾向は、交換レンズユニット１０のレンズ１１の歪曲特性やズーム倍率等の動作状況に大きく依存する。特に、収差幅βが大きいレンズ１１であるほど、バッファー待機期間Ｔ_Wの不均一さは顕著となる。
以上のようにして、リサイズ処理部２０ｅによるリサイズによって生成された画像データはラインバッファー５２ｄに線順次で記録される。

ＡＳＩＣ２００は画像データ出力部２０１を備えており、画像データ出力部２０１は、液晶パネル４２の被写体表示領域Ｒ₁に属する１〜６８２番目の各ラインについての画像データ（Data）を表示部４０に出力し、被写体像表示領域Ｒ₁における最終の（Ｎ＝６８２）番目のラインについての画像データを表示部４０に出力すると、ＶＲＡＭ５１に記録されているＯＳＤデータを線順次で読み出し、当該ＯＳＤデータを６８３〜７６８番目のラインについての画像データとして線順次で表示部４０に出力する。画像データ出力部２０１は、１〜６８２番目のラインについての画像データを加工することなく後段の表示部４０に出力するに過ぎないため、図５に示したリサイズが終了するタイミングから極めて短い一定の遅延をもって、画像データ出力部２０１が１〜６８２番目のラインについての画像データを順次出力することとなる。従って、１〜６８２番目のラインについて画像データ出力部２０１が最終的に生成処理を終了させるタイミングと、図５に示すリサイズが終了するタイミングとは同視できる。すなわち、本実施形態では、画像データの生成処理の最終工程（画像データ出力部２０１による処理）の処理時間が無視できるほど高速であり、かつ、当該処理時間が各ラインについて一定であるため、最終工程の前の工程であるリサイズについての進捗情報を取得するようにしている。むろん、本実施形態において、画像データの生成処理においてラインごとの生成処理の所要期間を変動させる主要因をなす工程はリサイズであるため、リサイズ以降のいずれかの工程において進捗情報を取得すればよい。

一方、６８３〜７６８番目のラインについて画像データ出力部２０１が生成処理を終了させるタイミングはリサイズとは無関係である。撮影条件を示す文字等を描画した画像を示すＯＳＤデータは、エリアイメージセンサー１５が撮影する被写体によらず予め作成しＶＲＡＭ５１に記録される。ＯＳＤデータは、液晶パネル４２における情報表示領域Ｒ₂に対応しており、水平方向に１０２４個、垂直方向に８５個の画素にて構成される。合成出力部２０ｆが、６８３〜７６８番目のラインについての画像データとして線順次で表示部４０に出力するために必要な時間は、実質的にＶＲＡＭ５１から１ライン分のデータを読み出す時間のみであり、情報表示領域Ｒ₂の各ラインにつき一定であり、被写体像表示領域Ｒ₁よりも短い。

なお、撮影条件等が変化した場合はＯＳＤデータも更新されるが、エリアイメージセンサー１５の出力データに基づく被写体像よりも更新頻度の低い画像である。また、合成出力部２０ｆは、１〜６８２番目のラインについて被写体像を示す画像データを出力し、６８３〜７６８番目のラインとして撮影条件等を示す画像データを出力するため、被写体像と撮影条件等を示す画像とが合成される。

本実施形態においては、以上の処理によってエリアイメージセンサー１５の出力データに基づいて液晶パネル４２の被写体像表示領域Ｒ₁に表示可能な画像データを生成する生成処理を行うが、エリアイメージセンサー１５の間引き後の出力データは垂直方向に７２０ラインであり、画像データ（被写体表示領域Ｒ₁）の垂直方向のライン数である６８２ラインや液晶パネル４２の垂直方向のライン数である７６８ラインとは異なっている。すなわち、１フレーム分の撮影及び表示を行うために必要なライン数が異なっている。

そこで、本実施形態においては、エリアイメージセンサー１５の水平同期信号ＳＨ_sync、垂直同期信号ＳＶ_sync、データアクティブ信号ＳＤ_activeおよびデータクロック信号SDotclockは、エリアイメージセンサー１５を駆動するために必要な周期に設定される。すなわち、タイミングジェネレーター３０は、エリアイメージセンサー１５において上述のような垂直方向の間引きやリサイズを行って垂直同期信号ＳＶ_syncで規定される期間内に１フレーム分のライン数（Ｎ＝１〜６８２）のリサイズ後の画像データを取得できるようなタイミングおよび出力回数で水平同期信号ＳＨ_syncを出力している。また、タイミングジェネレーター３０は、以上のような水平同期信号ＳＨ_syncで規定される期間内に１ライン分の画素数の画像データを取得できるようなタイミングおよび出力回数でデータクロック信号SDotclockを出力している。

一方、当該エリアイメージセンサー１５から線順次に出力される出力データに基づいて遅延期間を最小化して液晶パネル４２における表示を行うため、本実施形態においては、液晶パネル４２の被写体表示領域Ｒ₁に属する各ラインに対して表示を行うための画像データの生成処理が終了したタイミングで水平同期信号ＤＨ_syncが出力されるように構成されている。すなわち、本実施形態において液晶パネル４２は、画像データ出力部２０１による処理が終了したラインの表示を行うことが可能である。そこで、タイミングジェネレーター３０は、液晶パネル４２の垂直方向におけるＮ番目（Ｎ＝１〜６８２）のラインについての画像データの生成処理が終了したタイミングでＮ番目のラインについての表示処理を行うための水平同期信号ＤＨ_syncを出力する。すなわち、Ｎ番目（Ｎ＝１〜６８２）のラインについての画像データの生成処理の終了が、Ｎ番目のラインについての表示処理を開始するトリガーを構成する。

具体的には、タイミングジェネレーター３０は、進捗情報取得部３０ａを備えており、当該進捗情報取得部３０ａは、リサイズ処理部２０ｅからリサイズが終了したラインを示す進捗情報を取得することが可能である。上述のようにリサイズが終了のタイミングと、画像データ出力部２０１が最終的に生成処理を終了させるタイミングとは同視できるため、当該進捗情報に基づいて液晶パネル４２における表示が可能になったラインを特定することが可能である。そこで、タイミングジェネレーター３０が、各ラインの画像データの生成処理が終了したタイミングに同期して水平同期信号ＤＨ_syncを出力することにより、液晶パネル４２において当該画像データの生成処理が終了したラインの表示を開始させる構成とする。この構成によれば、画像データの生成処理が終了する前に各ラインの表示を開始することはなく、各ラインの生成処理が終了すると即座に各ラインの表示をすることが可能になる。

なお、液晶パネル４２においては、水平同期信号ＤＨ_syncの出力タイミングで規定される水平同期期間内に液晶パネル４２の各ラインの画素表示を行うことができればよいため、タイミングジェネレーター３０は、水平同期信号ＤＨ_syncの出力タイミングで規定される水平同期期間が最短となる期間として想定される期間内に１ライン分の画素表示を行うことができるようにデータアクティブ信号ＤＤ_activeおよびデータクロック信号DDotclockを出力する。

また、本実施形態においては、エリアイメージセンサー１５からの出力データと液晶パネル４２での表示とがフレーム単位で整合しなくなることを防止するため、エリアイメージセンサー１５の垂直同期信号ＳＶ_syncと液晶パネル４２の垂直同期信号ＤＶ_syncとが同期するように設定されている。すなわち、タイミングジェネレーター３０は、エリアイメージセンサー１５の垂直同期信号ＳＶ_syncを出力したタイミングから所定の期間後に表示部４０の垂直同期信号ＤＶ_syncを出力する。この結果、本実施形態において垂直同期信号ＳＶ_sync，ＤＶ_syncの周期は同一かつ一定となる。従って、エリアイメージセンサー１５にて撮影された被写体が１垂直同期期間以上遅れて液晶パネル４２に表示されることはなく、また、同一タイミングで撮影された被写体像が複数フレーム期間に渡って液晶パネル４２に表示されることもない。

一方、本実施形態において液晶パネル４２の水平同期信号ＤＨ_syncで規定される水平同期期間は可変長であるため、水平同期期間が変化しても垂直同期信号ＳＶ_sync，ＤＶ_syncの周期が同一かつ一定である状態を維持するように構成してある。具体的には、タイミングジェネレーター３０は、予め決められた基準の期間Ｔ_Hに対して水平同期期間を長期化あるいは短期化することによって基準の期間Ｔ_Hからの時間変動を相殺することによって、１フレームを表示するための垂直同期期間が一定となるように出力信号を制御している。基準の期間Ｔ_Hは、例えば、垂直同期期間内に液晶パネル４２の全ライン数について均等な期間で各ラインの表示を行う場合の水平同期期間によって構成される。

そして、被写体表示領域Ｒ₁においては、各ラインの画像データの生成処理が終了するまで水平同期信号ＤＨ_syncの出力を待機する。すなわち、各ラインについて画像データの生成処理の終了が表示処理の開始のトリガーとなり、これにより水平同期期間（表示処理の期間）が可変長となる。また、各ラインについて画像データの生成処理の終了を表示処理の開始のトリガーとするため、Ｎ番目のラインについての生成処理の終了と実質的に同時にＮ番目のラインについての表示処理が開始し、その後、（Ｎ＋１）番目のラインについての生成処理の終了と実質的に同時に（Ｎ＋１）番目のラインについての表示処理が開始することとなる。従って、Ｎ番目のラインについての生成処理の終了から（Ｎ＋１）番目のラインについての生成処理の終了までの期間が短いほど、Ｎ番目のラインについての生成処理の終了から（Ｎ＋１）番目のラインについての表示処理の開始までの期間が短くなる。反対に、Ｎ番目のラインについての生成処理の終了から（Ｎ＋１）番目のラインについての生成処理の終了までの期間が長いほど、Ｎ番目のラインについての生成処理の終了から（Ｎ＋１）番目のラインについての表示処理の開始までの期間が長くなる。

図６はタイミングジェネレーター３０から出力される水平同期信号ＤＨ_syncを示しており、データアクティブ信号ＤＤ_activeおよびデータクロック信号DDotclock、進捗情報を合わせて示している。なお、本実施形態においてリサイズ処理部２０ｅから出力される進捗情報は、１ライン分の画像データの生成処理を実行している過程においてローレベルの出力が維持され、１ライン分の画像データの生成処理を終了した時点で所定期間ハイレベルとなる１回のパルスによって構成される。

タイミングジェネレーター３０が進捗情報取得部３０ａによって当該進捗情報を取得すると、表示制御部３０ｂの処理により、当該進捗情報のパルスに同期して水平同期信号ＤＨ_syncを出力する。このため、仮に、基準の期間Ｔ_H内に、あるラインの画像データの生成処理が間に合わなかった場合には、生成処理が終了するまで水平同期信号ＤＨ_syncが出力されず、水平同期期間Ｔ_DHは基準の期間Ｔ_Hより長くなる。従って、基準の期間Ｔ_H内に、あるラインの画像データの生成処理が間に合わなかった場合、生成処理が終了するまで液晶パネル４２にて当該ラインの表示処理は開始されない。また、各ラインの画像データの準備が終了する前に表示処理が開始されることはない。さらに、あるラインの画像データの生成処理が終了すると水平同期信号ＤＨ_syncが出力されるため、各ラインの画像データの準備が終了すると遅滞なく表示処理が開始される。以上のように、水平同期期間Ｔ_DHが基準の期間Ｔ_Hから変動し得る状態で液晶パネル４２を駆動するため、本実施形態のように、歪曲補正を行うことにより液晶パネル４２の被写体表示領域Ｒ₁で表示すべき１ライン分の画像データの生成処理が終了するタイミングの周期が一定とならない態様に適用して好適である。

生成処理が終了するタイミングの周期が一定とならない主要因となるリサイズにおけるバッファー待機期間Ｔ_Wの変動は、交換レンズユニット１０のレンズ１１の歪曲特性やズーム倍率等の動作状況に大きく依存する。このような状況においても、各ラインについて画像データの生成処理の終了を表示処理の開始のトリガーとするようにタイミングジェネレーター３０を構成しておけば、交換レンズユニット１０が交換されたりズーム倍率等が変更されたりして、バッファー待機期間Ｔ_Wの変動傾向が変化した場合でも、当該変動傾向の変化に追従した水平同期期間Ｔ_DHの設定が可能となる。従って、交換レンズユニット１０が交換可能な撮影装置１は、本実施形態の構成を適用する対象として好適である。むろん、撮影条件に依存して処理速度がラインごとに相違し得る態様に本発明を適用しても良い。例えば、利用者が操作部５５を操作することによってエリアイメージセンサー１５の垂直同期期間や水平同期期間が変動し、あるいは画像データの生成処理が終了するタイミングの周期が一定とならない構成に対して本発明を適用することが可能である。さらに、着脱式ＥＶＦを変更することによってエリアイメージセンサー１５の垂直同期期間や水平同期期間が変動し、あるいは画像データの生成処理に要する期間が変動する構成に対して本発明を適用することが可能である。

一方、上述のように、本実施形態においては垂直同期信号ＤＶ_syncで規定される垂直同期期間を一定とするため、被写体表示領域Ｒ₁において水平同期期間Ｔ_DHが長期化された場合であっても、液晶パネル４２の全ラインの表示が一定の垂直同期期間内に終了するようにしなければならない。そのための構成として、タイミングジェネレーター３０は、撮影条件等の情報を示す文字を表示する液晶パネル４２の情報表示領域Ｒ₂においては、被写体表示領域Ｒ₁のラインにおいて長期化された水平同期期間と基準の期間Ｔ_Hとの差分の累計を相殺するように基準の期間Ｔ_Hよりも水平同期期間を短期化する。

すなわち、撮影条件等の情報を示すＯＳＤデータは、エリアイメージセンサー１５の動作によらず予め作成しＶＲＡＭ５１に記録しておくことが可能であるため、情報表示領域Ｒ₂の各ラインについての画像データの生成処理の所要期間は実質的にＶＲＡＭ５１から１ライン分のデータを読み出す期間だけで済むこととなる。従って、ＯＳＤデータに基づく表示を短い水平同期期間によって実行したとしても、データ読み出しの追い越しを発生させることなく適正な表示を行うことが可能である。

具体的には、タイミングジェネレーター３０が水平同期信号ＤＨ_syncの出力タイミングを調整することにより、被写体表示領域Ｒ₁において長期化された水平同期期間Ｔ_DHと基準の期間Ｔ_Hとの差分の総和と情報表示領域Ｒ₂において短期化された水平同期期間Ｔ _DH2と基準の期間Ｔ_Hとの差分の総和とが一致するように水平同期期間Ｔ _DH2を短期化する。この結果、水平同期期間Ｔ _DH2＜基準の期間≦水平同期期間Ｔ_DHとなる。ここで、情報表示領域Ｒ₂において、上述の水平同期期間Ｔ_Hよりも短い水平同期期間Ｔ _DH2となるように水平同期信号ＤＨ_syncを出力するための構成としては、種々の構成を採用可能である。例えば、図６に示すように、被写体表示領域Ｒ₁にて発生した水平同期期間Ｔ_Hに対する遅延ΔＴ₁の総和（ΣΔＴ₁）を情報表示領域Ｒ₂のライン数Ｌ₂で除した値ΔＴ₂を各ラインで短縮すべき期間とする構成等を採用可能である。すなわち、水平同期期間Ｔ_H−ΔＴ₂が情報表示領域Ｒ₂における水平同期期間Ｔ _DH2であるとする構成等を採用可能である。

この構成によれば、被写体表示領域Ｒ₁においては遅延を最小化した状態でエリアイメージセンサー１５にて撮影した被写体を表示しつつ、情報表示領域Ｒ₂において短い水平同期期間内でＯＳＤデータによる撮影条件等の情報の表示が行われる状態となる。そして、上述のように、被写体表示領域Ｒ₁において長期化された水平同期期間Ｔ_DHと基準の期間Ｔ_Hとの差分の総和と情報表示領域Ｒ₂において短期化された水平同期期間Ｔ _DH2と基準の期間Ｔ_Hとの差分の総和とが一致するように水平同期期間が制御されるため、垂直同期信号ＳＶ_sync，ＤＶ_syncの周期が同一かつ一定の状態で表示部４０による表示を行うことができる。従って、エリアイメージセンサー１５にて撮影された被写体が１フレーム期間以上遅れて液晶パネル４２に表示されることはなく、また、複数フレーム期間に渡って同じ画像が液晶パネル４２に表示されることもない。

（３）他の実施形態：
以上の実施形態は本発明を実施するための一例であり、進捗情報に基づいて画像データの生成処理が終了したか否かをラインごとに特定し、当該生成処理が終了したラインを表示する限りにおいて、他にも種々の実施形態を採用可能である。

前記実施形態では、画像データ出力部２０１が被写体像とＯＳＤデータが示す画像とを合成することとしたが、各ラインについての画像データの準備に要する期間が変動し得る例として、第１画像としての背景画像データと第２画像としての３Ｄオブジェクトを描画したオブジェクト画像とを合成するものが挙げられる。例えば、コンピューターゲームにおいて、動きが少なく更新頻度の低い背景画像と、動きが多く更新頻度の高いオブジェクト画像とを個別に描画しておき、背景画像にオブジェクト画像を重畳することにより、表示部に表示させる画像データを生成することが行われている。このような場合において、背景画像のみを示すラインについての画像データは更新頻度が低いため、過去にメモリに記憶したものを読み出せば取得できる。一方、オブジェクト画像を示す画素を含むラインについての画像データは短い周期でオブジェクト画像を描画しなければならず、背景画像のみを示すラインについての生成処理よりも所要期間が長くなる。このような場合においても、本発明を適用することにより、遅延を小さくすることができるとともに、表示処理が生成処理よりも先行するラインが生じることが防止できる。

例えば、水平同期期間を基準の期間Ｔ_Hよりも長期化する際には、水平同期信号ＤＨ_syncのバックポーチを長期化しても良い。この構成は、例えば、図１に示す構成にて、進捗情報取得部３０ａにおいてリサイズ処理部２０ｅからの進捗情報の出力期間を検出する構成とする。すなわち、処理順序が（Ｎ−１）番目のラインについての画像データの生成処理が終了したタイミングで出力される進捗情報からＮ番目のラインについての画像データの生成処理が終了したタイミングで出力される進捗情報までの期間Ｔ _S(N-1)を検出する。そして、タイミングジェネレーター３０は、当該期間Ｔ _S(N-1)に基づいてＮ番目のラインについての水平同期信号ＤＨ_syncのバックポーチの長さを決定して各種の信号を出力する。

すなわち、タイミングジェネレーター３０は、表示制御部３０ｂの処理により、図７に示すように、Ｎ番目のラインについての水平同期信号ＤＨ_syncを出力した後、期間Ｔ _S(N-1)の長さから基準の期間Ｔ_Hの長さを減じて得られる期間ΔＴ₁が経過した時点でプリチャージ期間を示す信号ＤＨ _sync2を出力する。さらに、タイミングジェネレーター３０は、表示制御部３００ｂの処理により、当該信号ＤＨ _sync2を出力した後、所定のプリチャージ期間が経過した時点でＤＤ_activeを出力し、１ライン分の画素数のDDotclockが出力されるまでＤＤ_activeのレベルを維持した後に所定期間のフロントポーチを設けて（Ｎ＋１）番目のラインについての水平同期信号ＤＨ_syncを出力する。ここで、プリチャージ期間の開始時点からフロントポーチの終了時点までの期間は基準の期間Ｔ_Hと一致する。従って、Ｎ番目のラインについての水平同期信号ＤＨ_syncと（Ｎ＋１）番目のラインについての水平同期信号ＤＨ_syncとの間の期間である水平同期期間Ｔ_DHが基準の期間Ｔ_HとΔＴ₁との和となる。この結果、液晶パネル４２にて信号ＤＨ _sync2に同期してプリチャージや極性反転等を行ってＮ番目のラインの表示が可能になるとともに、水平同期期間Ｔ_DHを基準の期間Ｔ_Hよりも長期化することが可能になる。

なお、上述の第１実施形態においては、水平同期信号ＤＨ_syncのフロントポーチを長期化していたため、バックポーチ期間は一定の期間とすることができ、通常の規定通りにプリチャージや極性反転等を行う期間を設けることができる。

さらに、上述の実施形態においては、エリアイメージセンサー１５の垂直同期信号ＳＶ_syncの周期と液晶パネル４２の垂直同期信号ＤＶ_syncの周期とを一致させるため、液晶パネル４２の情報表示領域Ｒ₂において被写体像表示領域Ｒ₁よりも短い水平同期期間となるように水平同期信号ＳＨ_syncを出力したが、他の手法によって垂直同期信号ＳＶ_syncの周期と液晶パネル４２の垂直同期信号ＤＶ_syncの周期とを一致させても良い。例えば、通常の撮影装置において、エリアイメージセンサー１５のライン数は液晶パネル４２のライン数よりも多いため、特定の垂直同期期間内に確保すべき水平同期期間が均等であると仮定した場合、エリアイメージセンサー１５の水平同期信号ＳＨ_syncよりも液晶パネル４２の水平同期信号ＤＨ_syncの方が短くなる。従って、液晶パネル４２の水平同期信号ＤＨ_syncを長期化した場合であっても、当該長期化によって液晶パネル４２の垂直同期期間を長くする必要が生じることは少ない。なお、水平同期信号ＤＨ_syncを長期化することによって液晶パネル４２の垂直同期信号ＤＶ_syncがエリアイメージセンサー１５の垂直同期信号ＳＶ_syncより長くなる場合、エリアイメージセンサー１５の垂直同期信号ＳＶ_syncを長期化して垂直同期信号ＤＶ_syncと垂直同期信号ＳＶ_syncとを同期させても良い。

図８は、複数のラインのデータを参照して１ライン分のデータを生成する複数の画像処理工程について進捗情報を取得する構成を備えた撮影装置１を示す図である。図８において、図１と同様の構成は同様の符号で示している。図８に示す撮影装置１のタイミングジェネレーター３００は、エリアイメージセンサー１５からの出力データの出力が終了したラインおよびＡＳＩＣ２００の色再現処理部２０ｂ、ガンマ補正部２０ｄ、リサイズ処理部２０ｅのそれぞれにおけるデータの生成処理が終了したラインを示す進捗情報を取得することが可能である。また、タイミングジェネレーター３００は、表示制御部３００ｂの処理により、画素補間部２０ａ、フィルター処理部２０ｃ、リサイズ処理部２０ｅのそれぞれに対して１ライン分のデータの生成処理を開始させるためのトリガー信号（例えば、水平同期信号）を出力することが可能である。

すなわち、図８に示す実施形態においては、エリアイメージセンサー１５からＫ番目のラインについての出力データが出力されると画素補間部２０ａにおいてＬ番目のラインについてのデータの処理を実行可能になり、画素補間部２０ａおよび色再現処理部２０ｂによる線順次の処理の結果、Ｌ番目のラインについてのデータの処理が終了するとフィルター処理部２０ｃにおいてＭ番目のラインについてのデータの処理を実行可能になることが予め特定される。また、フィルター処理部２０ｃおよびガンマ補正部２０ｄによる線順次の処理の結果、Ｍ番目のラインについてのデータの処理が終了するとリサイズ処理部２０ｅにおいてＮ番目のラインについての画像データの生成処理が開始可能になることが予め特定される。

そして、タイミングジェネレーター３００は、タイミングジェネレーター３００が出力する規定の周期の水平同期信号ＳＨ_syncに基づいてエリアイメージセンサー１５からＫ番目のラインについての出力データが出力されたことを特定する。エリアイメージセンサー１５からＫ番目のラインについての出力データが出力されたことが特定された場合、タイミングジェネレーター３００は、画素補間部２０ａに対してトリガー信号を出力してＬ番目のラインについてのデータ処理を開始させる。さらに、進捗情報取得部３００ａによって色再現処理部２０ｂにおいてＬ番目のラインについてのデータの処理が終了したことが特定された場合に、タイミングジェネレーター３００は、フィルター処理部２０ｃに対してトリガー信号を出力してＭ番目のラインについてのデータ処理を開始させる。さらに、進捗情報取得部３００ａによってガンマ補正部２０ｄにおいてＭ番目のラインについてのデータの処理が終了したことが特定された場合に、タイミングジェネレーター３００は、リサイズ処理部２０ｅに対してトリガー信号を出力してＮ番目のラインについての画像データの生成処理を開始させる。

そして、リサイズ処理部２０ｅによってＮ番目のラインについての画像データの生成処理が終了したことが特定されると、タイミングジェネレーター３００は、上述の実施形態と同様にＮ番目のラインについての表示を行うための水平同期信号ＤＨ_syncを出力する。すなわち、ＡＳＩＣ２００において、２以上のラインのデータをラインバッファーに対して記録した後にあるラインのデータの生成が開始可能な画像処理工程においては、最低限必要なライン数のデータの生成処理が終了したか否かを判定し、当該生成処理が終了したタイミングで次の画像処理工程を開始する。この構成により、各工程を実行するために必要なデータの生成処理が終了する前に各ラインについての処理を開始することはなく、各ラインのデータが整うと即座に各ラインについて処理を開始することが可能になる。この結果、各画像処理工程を実行する際の待ち時間が最小化される。なお、本実施形態においては、最低限必要なライン数のデータをラインバッファー５２ａ〜５２ｄに一時記録すればよいため、ラインバッファー５２ａ〜５２ｄの容量を最小化することが可能である。

さらに、上述の実施形態において表示部４０は液晶パネルを用いたＥＶＦであったが、表示部４０はＥＶＦ以外の表示部、例えば、撮影装置１の背面に取り付けられる液晶パネルを用いた表示部であっても良いし、液晶パネル以外の方式を用いたものであっても良い。また、撮影装置１はミラーを備えた一眼レフカメラでも良く、さらにムービーカメラであっても良いし、撮影機能を備えた携帯電話等の装置であっても良い。さらに、上述のエリアイメージセンサー１５において、カラーフィルターはベイヤー配列であったが、ベイヤー配列以外の配列で構成されたセンサーを利用した撮影装置に本発明を適用しても良い。さらに、ラインバッファー５２ｄはラインバッファーでも良いが、１フレーム分の画像データを記録するための記録容量を備えるＶＲＡＭであってもよい。この構成によれば、表示対象となる画像データに基づく各種処理を行うことが可能になる。さらに、水平同期期間は基準の期間に対して長期化されれば良く、当該基準の期間としては、各種の期間を想定可能である。例えば、エリアイメージセンサー１５の水平同期信号ＳＨ_syncの周期、画像データの生成周期などを基準の期間としてもよい。さらに、タイミングジェネレーター３０から表示部４０への各種信号の転送形態は種々の形態を採用可能であり、HDMI（High-Definition Multimedia Interface）等によって転送しても良い。また、上述の実施形態における方向を逆にしてもよく、例えば水平方向において、左から右に表示しても、右から左に表示しても良い。

さらに、ＯＳＤデータは表示部の情報表示領域において表示対象となる所定の情報を示した画像データであれば良く、撮影条件以外の各種情報、例えば、撮影装置１に搭載されたバッテリの残量を示す情報等を表示対象となる所定の情報とする構成としても良い。さらに、垂直同期信号ＳＶ_sync，ＤＶ_syncの周期が同一かつ一定の状態とするための構成は、上述の構成以外にも種々の構成を採用可能である。例えば、被写体表示領域Ｒ₁における表示を行った後、情報表示領域Ｒ₂でＯＳＤデータを表示するために設定可能な最小の期間を情報表示領域Ｒ₂における水平同期期間とすることによって垂直同期信号ＤＶ_syncの出力タイミング以前に液晶パネル４２の全ラインの表示を終了し、残余の期間待機した後に規定の出力タイミングで垂直同期信号ＤＶ_syncが出力されるように構成してもよい。この場合、前記実施形態の情報表示領域Ｒ₂に対応する６８３〜７６８番目のラインにおいて、Ｎ番目のラインについての生成処理の終了から（Ｎ＋１）番目のラインについての表示処理の開始までの期間が短期化することとなる。また、ＯＳＤデータは第１画像に相当し、被写体像は第２画像に相当することとなる。さらには、ＯＳＤデータを表示しない場合に適用しても良い。

１…撮影装置、１０…交換レンズユニット、１１…レンズ、１２…絞り、１３…シャッター、１４…ローパスフィルター、１５…エリアイメージセンサー、１６…ＲＯＭ、２０…画像データ生成部、２０ａ…画素補間部、２０ｂ…色再現処理部、２０ｃ…フィルター処理部、２０ｄ…ガンマ補正部、２０ｅ…リサイズ処理部、２０１…画像データ出力部、３０…タイミングジェネレーター、３０ａ…進捗情報取得部、３０ｂ…表示制御部、４０…表示部、４１…液晶パネルドライバー、４２…液晶パネル、５２ａ…ラインバッファー、５２ｂ…ラインバッファー、５２ｃ…ラインバッファー、５２ｄ…ラインバッファー、５５…操作部

Claims (7)

1. 画像データを生成する生成処理を、ラインごとに所定の処理順序で行う画像データ生成部と、
   前記画像データに基づく表示処理を、前記ラインごとに前記処理順序で表示部に行わせるとともに、
   前記処理順序がＮ（Ｎは自然数）番目の前記ラインについての前記生成処理の終了から前記処理順序が（Ｎ＋１）番目の前記ラインについての前記生成処理の終了までの期間が短いほど、前記Ｎ番目の前記ラインについての前記生成処理の終了から前記（Ｎ＋１）番目の前記ラインについての前記表示処理の開始までの期間を短くする制御部と、
   を備える表示制御装置。
2. 画像データを生成する生成処理を、ラインごとに所定の処理順序で行う画像データ生成部と、
   前記画像データに基づく表示処理を、前記ラインごとに前記処理順序で表示部に行わせるとともに、
   前記処理順序がＮ（Ｎは自然数）番目の前記ラインについての前記生成処理の終了から前記処理順序が（Ｎ＋１）番目の前記ラインについての前記生成処理の終了までの期間が短いほど、前記Ｎ番目の前記ラインについての前記表示処理の開始から前記（Ｎ＋１）番目の前記ラインについての前記表示処理の開始までの期間を短くする制御部と、
   を備える表示制御装置。
3. 前記制御部は、前記ラインのそれぞれについて前記生成処理の終了を前記表示処理の開始のトリガーとする、
   請求項１または請求項２のいずれかに記載の表示制御装置。
4. 前記画像データ生成部は、
   前記生成処理の少なくとも一工程として、前工程において前工程ラインごとに生成されたデータを用いて行う処理であって、処理対象の前記ラインの位置に応じた数の前記前工程ラインについての前記データを用いる処理を行う、
   請求項１から請求項３のいずれか一項に記載の表示制御装置。
5. 前記画像データ生成部は、
   撮影センサーから被写体像を示す出力データを取得するとともに、
   前記生成処理の少なくとも一工程として、前記ラインの位置に応じて前記画像データを生成するために必要な前記出力データのデータ量が変動する歪曲補正を行う、
   請求項１から請求項４のいずれか一項に記載の表示制御装置。
6. 前記画像データ生成部は、
   前記生成処理の少なくとも一工程として、第１画像と、当該第１画像よりも更新頻度の高い第２画像とを合成することにより前記画像データを生成する処理を行う、
   請求項１から請求項５のいずれか一項に記載の表示制御装置。
7. 前記第２画像は、３次元オブジェクトを描画した画像である、
   請求項６に記載の表示制御装置。
   

Images