JP5163728B2 - タイミングジェネレーター、撮影装置、ドットクロック出力方法 - Google Patents

Description

本発明は、表示部に被写体の像を表示するためのタイミングジェネレーター、当該タイミングジェネレーターを備え表示部に被写体の像を表示する撮影装置、および、ドットクロック出力方法に関する。

従来、撮影センサーで撮影した画像を液晶ディスプレイで表示する撮影装置が知られており、液晶ディスプレイにおいて被写体の像が被写体から遅延して表示されることを防止するために各種の技術が開発されている。例えば、特許文献１には、１フレーム分の画像信号を記録するＶＲＡＭを備える撮影装置において、ＶＲＡＭに対して１フレーム分の画像信号の書き込みが完了する前に画像信号を読み出して液晶ディスプレイで表示させる技術が開示されている。具体的には、撮影センサーの駆動タイミングからΔＴだけ遅延した再生タイミングで液晶ディスプレイでの画像表示を開始する構成が記述されている。

特開２００７−２４３６１５号公報

特許文献１の技術において、駆動タイミング及び再生タイミングの周期は１フレームの画像を処理するための周期であり、各フレームに対して一定のΔＴが定義される。すなわち、特許文献１の技術では、モードごとにΔＴを定義することが記述され（特許文献１、００５７段落）、また、ΔＴは、画像データの読み出しが書き込みに先行しないように決められることが記述されている（特許文献１、００５５，００５６段落）。従って、モードごとに変動し得るものの、同一モードにおいてΔＴは、各フレームに対して共通の値であり、表示対象となる画像の全ラインについて共通の位相差ΔＴが与えられていることになる。

しかし、撮影センサーの出力データに基づいて被写体の像を表示部に表示するための画像処理を行う構成において、各種の画像処理に要する期間はラインごとに異なり得る。各種の画像処理に要する期間がラインごとに異なり得る構成の場合に、表示対象となる画像の全ラインについて共通の位相差ΔＴが与えられていると、例えばあるラインについては画像データの読み出しが書き込みに先行する可能性がある。また別のラインについては書き込みから読み出しの間に遅延が発生する可能性がある。したがって上記のような構成の場合に共通の位相差ΔＴが与えられると、表示効率が悪いと言える。
本発明は上記課題にかんがみてなされたもので、表示効率を向上させることを目的とする。

各種の画像処理に要する期間がラインごとに異なり得る構成の場合に、画像データの生成処理の進捗に応じてラインごとにΔＴを可変にすることで、前述の表示効率を向上させることができる。ΔＴを延長する場合、すなわち水平同期期間を延長する場合、水平同期信号より短い周期で出力される同期信号であるドットクロックの水平同期期間内における出力数は増加する。
ところで、例えばライブビューを撮影装置の表示部に表示する際に、撮影センサーのフレームレートが遅いレートに切り換えられた場合（例えば、明るい環境から暗い環境に変わったため露光時間を延長する場合など）は、撮影センサーと表示部とのフレームを同期させるのであれば、表示側のフレームレートも遅いレートに切り換える必要がある。その結果、表示側の水平同期期間も長くなる。水平同期期間が長くなると、水平同期期間内のドットクロックの出力数も多くなる。そのため例えば、フレームレートが遅くなった場合や上記のように画像データの生成処理の進捗に応じてΔＴが延長される場合、ドットクロックの出力数が、当該出力数を水平同期期間ごとにカウントしているカウンターの上限値を超え、オーバーフローしてしまう可能性がある。

そのため、本発明のタイミングジェネレーターは、水平同期期間内に第一の周期でドットクロックを出力する場合のドットクロックの出力数がカウンターの上限値を超える可能性があるか否かを判定し、可能性があると判定される場合にドットクロックの周期を第一の周期から第二の周期に切り換えて出力する構成とする。第二の周期は第一の周期より長い周期として定義される。なおかつ第二の周期は、ドットクロックを第二の周期に切り換えることによって水平同期期間内のドットクロックの出力数がカウンターの上限値を超えない値としてとして定義される。同一の長さの期間内において、第一の周期より長い第二の周期でドットクロックを出力した場合のドットクロックの出力数は、第一の周期でドットクロックを出力した場合のドットクロックの出力数より少なくなる。そのため、第一の周期でドットクロックを出力するとカウンターの上限を超える可能性があると判定された場合に、ドットクロックの周期を第二の周期に切り換えることにより、カウンターのオーバーフローを回避することができる。その結果、カウンターのオーバーフローによる表示部の誤動作を防止することができる。

なお、第一の周期および第二の周期は、固定値を表しているわけではなく、周期延長前のドットクロックの周期を第一の周期と称し、周期延長後のドットクロックの周期を第二の周期と称しているに過ぎない。

フレームレート情報取得部は、被写体を撮影する撮影センサーのフレームレートを示す情報を取得することができればよく、どのような方法で取得できてもよい。本発明において、表示部の水平同期期間は、少なくとも撮影センサーのフレームレートに依存して長さが変動する。まず、撮影センサーのフレームレートに応じて、表示部のフレームレートを設定することができる。そして表示部のフレームレートが決まると、表示部における基準水平同期期間を設定することができる。基準水平同期期間とは、表示部のフレームレートに応じて設定される垂直同期期間と、１フレームあたりのライン数（表示部の表示領域に対応するラインと、当該表示領域の垂直方向の前後の非表示領域に対応するラインを含む）と、に基づいて設定される基準となる水平同期期間を意味しており、例えば当該垂直同期期間を当該ライン数で除した値として定義することができる。本発明においては、撮影センサーの出力データに基づく画像データを表示する際に、実際の水平同期期間が基準水平同期期間と同じ長さになるラインもあれば、画像データ生成処理の進捗が遅れることによって実際の水平同期期間が基準水平同期期間より長期化されるラインもある構成を想定している。

表示部が備えるカウンターは、表示制御部が出力したドットクロックの出力数を水平同期期間の１周期ごとに数えるカウンターである。ドットクロックは、画像データを表示する際の同期信号の一つであって、ライン単位の同期信号である水平同期信号の周期よりも短い周期で出力される信号である。なお「水平同期期間の１周期ごとにドットクロックの出力数を数える」とは、水平同期期間ごとにカウント値がリセットされることを意味する。なお、本発明では、当該カウンターで数えることができる数の上限値は予め決まっており動的に変動しないことを想定している。

表示制御部は、表示部に対して垂直同期信号や水平同期信号やドットクロック信号などの同期信号を出力する手段である。また、表示制御部は、水平同期期間内に第一の周期でドットクロックを出力する場合のドットクロックの出力数がカウンターの上限値を超える可能性があるか否かを判定し、可能性があると判定される場合にドットクロックの周期を第一の周期から第二の周期に切り換えて表示部に対して出力する。カウンターの上限値を超えてオーバーフローする状況は後述するように様々な場合が考えられる。

例えば、撮影センサーのフレームレートが切り換えられる場合にオーバーフローが発生する可能性がある。すなわち、撮影センサーのフレームレートが切り換わることによって、切り換え後のフレームレートに応じて設定される表示部の基準水平同期期間内に第一の周期でドットクロックを出力する場合の出力数がカウンターの上限値を超える場合がある。撮影センサーの出力データに基づく画像データを表示するラインにおいては、実際の水平同期期間が基準水平同期期間より長期化されることはあっても短期化されることはない構成であると、上記の場合は撮影センサーのフレームレートが切り替わることによって確実にカウンターのオーバーフローは発生してしまう。そのため、切り換え後のフレームレートに応じた基準水平同期期間を第一の周期で除した値がカウンターの上限値を超える場合は、ドットクロックの周期を第一の周期から第二の周期に切り換える。その結果、撮影センサーのフレームレートが切り換えられる場合に、カウンターのオーバーフローを回避することができる。

さらに、撮影センサーのフレームレートが切り換えられることによって、次のような条件を満たす場合にもオーバーフローが発生する可能性があるとしてもよい。すなわち、切り換え後の撮影センサーのフレームレートに応じて設定される表示部の基準水平同期期間より延長されうる最長の水平同期期間内に第一の周期でドットクロックを出力する場合のドットクロックの出力数がカウンターの上限値を超える場合は、オーバーフローの可能性があるということである。実際の水平同期期間が基準水平同期期間より延長されるのは、表示対象ラインの画像データの生成処理に通常より時間を要している場合であり、どの程度延長されるかはラインごとに不定であるが、延長されうる最長の水平同期期間を想定し、当該最長の水平同期期間を第一の周期で除した値がカウンターの上限値を超える場合は、オーバーフローが発生する可能性があるとする。したがって基準水平同期期間より実際の水平同期期間が延長されない場合や延長されたとしても最長の水平同期期間までは延長されない場合はオーバーフローが発生しないが、想定する最長の長さまで実際の水平同期期間が延長された場合にオーバーフローが発生するのであれば、オーバーフローが発生する可能性があるとして、ドットクロックの周期を第二の周期に切り換える。その結果、カウンターのオーバーフローを回避することができる。

また次のような状況の場合にもオーバーフローが発生する可能性があると判定してもよい。すなわち、基準水平同期期間より実際の水平同期期間が延長されている場合であって、当該水平同期期間中に第一の周期で既に出力されたドットクロックの出力数が後述する閾値を超えた場合にオーバーフローの可能性があるとしてドットクロックの周期を第二の周期に切り換える。その閾値とは例えば、基準水平同期期間内において第一の周期で出力されるドットクロックの出力数よりも大きい値であって、カウンターの上限値よりも小さい値として予め決められた値とする。基準水平同期期間より実際の水平同期期間が延長されている間にもカウントアップされていくドットクロックの出力数が当該閾値を超えるか否かを表示制御部は監視しておき、超えた場合に、ドットクロックの周期を延長することで、オーバーフローを回避することができる。なお、この構成の場合、表示制御部にも自身が出力したドットクロックの出力数を水平同期期間ごとに数えるカウンターを備えておく必要がある。また、この構成の場合複数回にわたり、段階的にドットクロックの周期を延長するようにしてもよい。
さらに、本発明において表示制御部は、フレームの切り替わりのタイミングでドットクロックの周期を切り換えるようにしてもよい。すなわち、１フレームの表示が完了し次のフレームの表示が開始されるまでの間にドットクロックの周期を切り換えるようにしてもよい。

さらに、本発明のように、水平同期期間内に第一の周期でドットクロックを出力する場合のドットクロックの出力数がカウンターの上限値を超える可能性があると判定される場合にドットクロックを第一の周期よりも長い第二の周期に切り換えて出力する手法は、プログラムや方法としても適用可能である。また、以上のような装置、プログラム、方法は、単独の装置として実現される場合もあれば、複合的な機能を有する装置において共有の部品を利用して実現される場合もあり、各種の態様を含むものである。

本発明の実施形態にかかるブロック図である。 エリアイメージセンサーと液晶パネルの画素数を示す図である。 エリアイメージセンサーの出力データの出力法を例示する図である。 （４Ａ）〜（４Ｄ）は本発明の実施形態を説明するためのタイミングチャートである。 本発明の実施形態にかかるドットクロック周期切り換え処理を示すフローチャートである。 本発明の実施形態にかかるタイミングチャートである。 本発明の実施形態にかかるタイミングチャートである。 本発明の実施形態にかかる分周回路部を示すブロック図である。

ここでは、下記の順序に従って本発明の実施の形態について説明する。
（１）撮影装置の構成：
（２）水平同期信号の制御：
（３）他の実施形態：

（１）撮影装置の構成：
図１は本発明の一実施形態にかかる撮影装置１には、光学系１０、エリアイメージセンサー１５、ＡＳＩＣ２００、タイミングジェネレーター３０、表示部４０、ＣＰＵ５０、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＯＭ５３、ＲＡＭ５４、操作部５５が備えられている。ＣＰＵ５０は、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＡＭ５４を適宜利用してＲＯＭ５３に記録されたプログラムを実行可能であり、当該プログラムによりＣＰＵ５０は、操作部５５に対する操作に応じてエリアイメージセンサー１５にて撮影された被写体を示す画像データを生成する機能を実行する。なお、操作部５５はシャッターボタンと、モードを切り換えるためのモード切換手段としてのダイヤルスイッチと、絞りとシャッター速度を切り換えるためのダイヤルスイッチと、各種の設定メニューを操作するためのプッシュボタンとを備えており、利用者は当該操作部５５に対する操作によって撮影装置１に対して各種の指示を与えることができる。

表示部４０は、撮影対象となる被写体を示す画像を表示して利用者に撮影前の被写体の様子および撮影条件等の情報を把握させるＥＶＦ（Electronic View Finder）であり、本実施形態にかかる撮影装置１はＥＶＦを備えたミラーレスデジタルカメラである。表示部４０は、図示しないインターフェース回路、液晶パネルドライバー４１、カウンター４１ａ、液晶パネル４２、図示しない接眼レンズ等を備えている。本実施形態において液晶パネル４２は、画素ごとに３色のカラーフィルターに対応する３つのサブピクセルを備える高温ポリシリコンＴＦＴ（Thin Film Transistor）であり、画素の位置は直交座標系における座標で規定される。また、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼び、液晶パネル４２の全画素によって構成される１画面を１フレームと呼ぶ。

液晶パネルドライバー４１は、各サブピクセルに電圧を印加して液晶を駆動するための信号を液晶パネル４２に対して出力する。液晶パネル４２は、図示しないゲートドライバおよびソースドライバを備えており、液晶パネルドライバー４１から出力される信号に応じてゲートドライバが各ラインの各画素における表示タイミングを制御し、ソースドライバが表示タイミングとされているラインの各画素に対して各画素の画像データに対応した電圧を印加することによって表示を行う。すなわち、液晶パネルドライバー４１は、液晶パネル４２における表示を行うための各種信号、例えば、１フレーム分の表示を開始するタイミングを規定する表示開始信号、１フレーム分の表示が完了したことを示す表示終了信号、１フレーム分の表示を行うための期間を規定する垂直同期信号（DV_sync）、１ライン分の表示を行うための期間を規定する水平同期信号（DH_sync）、各ライン内での画像データの取り込み期間を規定するデータアクティブ信号（DD_active）、各画素の画像データの取り込みタイミング等を規定するドットクロック信号（DDotclock）、各画素の画像データ（Data）を出力するように構成されている。

なお、本実施形態にかかる撮影装置１は、タイミングジェネレーター３０を備えており、上述の垂直同期信号DV_sync、水平同期信号DH_sync、データアクティブ信号DD_active、ドットクロック信号DDotclock、表示開始信号、表示終了信号は当該タイミングジェネレーター３０によって生成される。すなわち、タイミングジェネレーター３０は、クロック信号発生手段から出力される所定周期のクロック信号の変化タイミングに同期して信号レベルが変化する信号を生成する分周回路等を備えた表示制御部３０ｂを備えている。そして、タイミングジェネレーター３０は、表示制御部３０ｂの制御により、予め決められたタイミングで信号レベルが変化する垂直同期信号DV_sync、データアクティブ信号DD_active、ドットクロック信号DDotclock、表示開始信号、表示終了信号を生成する。本実施形態においてドットクロックDDotclockの周期は可変である。図８は複数種類の周期のドットクロックを生成するための分周回路部の具体的構成例を示すブロック図である。分周回路部は、クロック信号発生手段CLKから出力されるクロック信号を複数種類の分周比で分周する複数の分周器DIV1〜DIVnと、出力対象の信号を生成する分周器を切り換えるセレクターSELとを備えている。表示制御部３０ｂはセレクターSELで分周器の選択を切り換えることによって表示部４０に対して出力するドットクロックDDotclockの周期を切り換える。なお、本実施形態において水平同期信号DH_syncの出力タイミングは可変であり、後述するように画像データ出力部２０１の処理結果に依存して出力タイミングが決定される。

液晶パネルドライバー４１は、表示制御部３０ｂの制御によりタイミングジェネレーター３０から出力されたドットクロック信号DDotclockの出力数を水平同期信号DH_syncの１周期ごとに数えるカウンター４１ａを備えている。カウンター４１ａで数えられたドットクロックの出力数は、表示部４０における表示タイミング制御に用いられる。具体的には例えば表示部４０は、ドットクロックがＮ（Ｎは自然数）個出力されるたびにＮ画素分の表示を一括して行うために、ドットクロックの出力数を１水平同期期間ごとに数えている。カウンター４１ａの上限値C_{dd_MAX}は、表示部４０に依存して予め決められている。上限値C_{dd_MAX}より多くのドットクロックが表示制御部３０ｂによって１水平同期期間内に生成されると、カウンター４１ａにおいてオーバーフローが発生し、表示部４０が誤動作しうる。

また、本実施形態における液晶パネル４２は、水平方向に１０２４個、垂直方向に７６８個の有効画素を備えた画素数がＸＧＡサイズのパネルであり、液晶パネルドライバー４１が出力する画像データDataの内容および出力タイミングを調整することによって、任意の位置にDataに対応した階調の表示を行うことができる。本実施形態においては、液晶パネル４２の予め決められた被写体像表示領域にエリアイメージセンサー１５の出力データに基づいて被写体の画像を表示し、また、当該被写体像表示領域以外の情報表示領域に撮影条件等の情報を示す文字を表示する構成となっている。すなわち、液晶パネル４２には、被写体の画像とともに撮影条件等の情報を示す文字がＯＳＤ（On Screen Display）表示される。なお、液晶パネル４２は水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。

光学系１０は、エリアイメージセンサー１５に被写体画像を結像させるレンズ１１、絞り１２、シャッター１３およびローパスフィルター１４を備える。このうち、レンズ１１と絞り１２とは図示しない筐体に交換可能に取り付けられる。エリアイメージセンサー１５としては、ベイヤー配列されたカラーフィルターと、光量に応じた電荷を光電変換によって画素ごとに蓄積する複数のフォトダイオードとを備えるＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサー、ＣＣＤ（Charge Coupled Device）イメージセンサー等の固体撮像素子が用いられる。エリアイメージセンサー１５の画素の位置は直交座標系における座標で規定され、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。エリアイメージセンサー１５の全画素によって構成される１画面を１フレームと呼ぶ。

本実施形態においては、エリアイメージセンサー１５もタイミングジェネレーター３０が出力する各種信号に同期した動作を行う。すなわち、タイミングジェネレーター３０は、１フレーム分の処理の開始タイミングを規定するフレーム開始信号、１フレーム分のフォトダイオードの検出結果を読み出すための期間を規定する垂直同期信号（SV_sync）、１ライン分のフォトダイオードの検出結果を読み出すための期間を規定する水平同期信号（SH_sync）、各画素の画像データの読み出しタイミング等を規定するドットクロック信号（SDotclock）を出力する。エリアイメージセンサー１５は、垂直同期信号SV_syncに応じて１フレーム分の出力データの出力を開始し、水平同期信号SH_syncにて規定される期間内にドットクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の一部の画素に対応するフォトダイオードの検出結果を示す出力データを逐次読み出す。

ＡＳＩＣ２００は、ＳＤ−ＲＡＭ５２に予め確保された複数ライン分のラインバッファー５２ａ〜５２ｄを利用し、表示部４０にて被写体の像を表示するための画像データをパイプライン処理によって生成する処理を行う回路によって構成される画像データ生成部２０を備えている。なお、複数ライン分のラインバッファー５２ａ〜５２ｄは画像データ生成部２０などに設けられていても良い。表示部４０は生成された画像データに基づいて被写体を液晶パネル４２に対して表示する。すなわち、利用者は、表示部４０をＥＶＦとして利用しながら被写体を確認することが可能である。

また、利用者が操作部５５を操作して撮影指示を行った場合には、撮影指示に応じてエリアイメージセンサー１５は、垂直同期信号SV_syncに応じて１フレーム分の出力データの出力を開始し、水平同期信号SH_syncにて規定される期間内にドットクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の全有効画素に対応するフォトダイオードの検出結果を示す出力データを逐次読み出す。そして画像データ生成部２０は、ＳＤ−ＲＡＭ５２等を利用しＪＰＥＧ等の形式の画像データを生成して図示しないリムーバブルメモリ等に記録される。すなわち、利用者は、被写体を示す画像データを生成することが可能である。

（２）水平同期信号の制御：
被写体を示す画像データをリムーバブルメモリ等に記録し、印刷すること等を考慮した場合、高品質の画像データを得るためにはエリアイメージセンサー１５の画素数が所定数より多いことが望まれる。そこで、本実施形態におけるエリアイメージセンサー１５の有効画素数は図２に示すように、水平方向に５４００画素、垂直方向に３６００画素となっている。エリアイメージセンサー１５は水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。

一方、上述のように、液晶パネル４２は水平方向に１０２４個、垂直方向に７６８個の画素を備え、被写体像表示領域（図２に示すＲ_１）に被写体の画像を表示する構成となっている。本実施形態においては、エリアイメージセンサー１５の縦横比（２：３）を維持したままできるだけ大きく被写体の画像を表示するため、液晶パネル４２の上辺および左右の辺に対して上辺及び左右の辺が接する縦横比２：３の矩形領域を被写体の画像を表示する被写体像表示領域Ｒ_１としている。また、残りの領域が撮影条件等の情報を示す文字を表示する情報表示領域（図２に示す領域）である。従って、液晶パネル４２における被写体像表示領域Ｒ_１は、水平方向に１０２４個、垂直方向に６８２個の画素にて構成される。以上のように、本実施形態においては、エリアイメージセンサー１５の画素数と液晶パネル４２の画素数とは一致していない。

さらに、表示部４０における表示は利用者による被写体の確認に利用されるため、エリアイメージセンサー１５にて被写体が撮影されたタイミングから表示部４０にて当該撮影された被写体の像が表示されるタイミングまでの遅延が利用者によって認識可能な程度の長さであると、ＥＶＦで視認した被写体と記録される被写体の像とがずれるなど、極めて使いづらいＥＶＦとなってしまう。従って、表示部４０がＥＶＦとして利用される際には、遅延が少ないことが要求される。

そこで、エリアイメージセンサー１５にて撮影した画像を人間が視認できない極めて短い遅延にて表示部４０に表示させるため、本実施形態においては、エリアイメージセンサー１５および画像データ生成部２０で各種の処理を行い、表示部４０は、この処理の結果生成された画像データを高速に表示させるための構成を備えている。

すなわち、本実施形態にかかるエリアイメージセンサー１５は、垂直方向に並ぶラインのうちｎ個（ｎは奇数）に１個の割合でフォトダイオードの検出結果を読み出す飛び越し走査を実行可能な回路が設けられている。また、同色のカラーフィルターを介して光電変換を行うフォトダイオードのうち水平方向に並ぶｍ個（ｍは自然数）の検出結果を加算してその和をｍ分の１にして（すなわちｍ個の検出結果の相加平均を）出力するための加算器が設けられている。本実施形態において、表示部４０をＥＶＦとして機能させる際、エリアイメージセンサー１５においては、飛び越し走査および加算器による処理を実行することにより、水平方向および垂直方向の画素を間引き、エリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力することで、高速に被写体を撮影する構成としている。

すなわち、エリアイメージセンサー１５は、表示部４０をＥＶＦとして機能させるライブビューモードにおいて、ｎ個に１個の割合で垂直方向のラインを読み出し対象とした読み出しを水平同期信号SH_syncに応じて行う。また、ｍ個のフォトダイオードの検出結果を加算器で加算した結果を出力データとして出力する処理をドットクロック信号SDotclockに応じて行う。図３は、本実施形態においてエリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力する方法の一例を示している。同図３において、Ｒが付された矩形は赤の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｇが付された矩形は緑の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｂが付された矩形は青の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示している。

同図３に示すように、矩形で示す各画素のカラーフィルターがベイヤー配列である場合、各画素に１色のカラーフィルターのみが対応しているため、各画素の色は周囲の画素を利用して補間する必要がある。このため、ラインを間引いて出力データを取得する際に、間引き後に隣接するラインのカラーフィルターが異なる色となるように間引きを行う必要がある。このため、本実施形態においては、ｎを奇数とし、ｎラインに１ラインの割合で各ラインのフォトダイオードでの検出値を出力データとして取得すれば、補間によって各画素の色を特定可能な出力データを取得することができる。本実施形態においては、エリアイメージセンサー１５の垂直方向のライン数をできるだけ液晶パネル４２の被写体像表示領域Ｒ_１の垂直方向のライン数に近づけるため、５ラインに１ラインの割合で出力データを取得する構成としている。図３においては、５ラインに１ラインの割合で出力データを取得することを左向きの矢印で示しており、この例においては垂直方向のライン数が１／５、すなわち、７２０となる。

さらに、カラーフィルターがベイヤー配列である場合、水平方向に隣接する画素の色は異なるとともに、１個おきに同色のカラーフィルターが並ぶことになる。このため、水平方向に並ぶ画素について１個おきにｍ個加算しその和をｍ分の１にすることで（すなわちｍ個の検出結果の相加平均を求めることで）実質的に間引き処理を行うことができる。本実施形態においては、加算器による加算を行った場合の画質上の制約等により、ｍを３と設定している。図３においては、最も下に記したラインのうち、緑色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオード検出結果を加算器Ｓ_１によって加算して１／３にし、赤色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオードの検出結果を加算器Ｓ_２によって加算して１／３にする構成を示している。この例においては水平方向の画素数が１／３、すなわち、１８００画素となる。図２には、エリアイメージセンサー１５における間引き後のデータサイズを破線の矩形１５ａによって示している。

以上のように、エリアイメージセンサー１５においては、垂直方向のライン数を７２０ライン、水平方向の画素数を１８００画素とすることができる。しかし、このような間引きにおいては、垂直方向においてｎが奇数であり、水平方向においてｍが自然数である等画質上の制約があるため、間引き後の画素数と液晶パネル４２の被写体像表示領域Ｒ_１の画素数とを一致させることは困難である。また、上述のようにｎとｍとが異なる場合には縦横比が被写体と液晶パネル４２の被写体像とで異なるものになってしまう。

そこで、本実施形態においては、画像データ生成部２０において、間引き後の出力データに対してさらにリサイズを行って液晶パネル４２の被写体像表示領域Ｒ_１に表示させるための画像データを生成する構成としている。すなわち、画像データ生成部２０は、画素補間部２０ａ、色再現処理部２０ｂ、フィルター処理部２０ｃ、ガンマ補正部２０ｄ、リサイズ処理部２０ｅを備えている。そして、画像データを生成する過程でリサイズ処理部２０ｅによって垂直方向および水平方向の画素数を変更することにより、液晶パネル４２の被写体像表示領域Ｒ_１の画素数と等しい画像データを生成する構成としている。

ラインバッファー５２ａは、エリアイメージセンサー１５から出力される間引き後の出力データを一時記録するバッファーメモリーであり、エリアイメージセンサー１５から間引き後の出力データが出力されると画像データ生成部２０の処理によって当該出力データがラインバッファー５２ａに一時記録される。画素補間部２０ａは、ラインバッファー５２ａからベイヤー配列において各画素で欠落している２チャネルの色を生成するために必要な画素数のデータを取り込みながら補間処理によって当該２チャネルの色を生成する。この結果、各画素において３チャネルのデータが生成される。次に、色再現処理部２０ｂは、生成されたデータに基づいて３×３の行列演算を行うことによってカラーマッチングのための色変換処理を行う。色変換処理によって生成されたデータはラインバッファー５２ｂに一時記録される。次にフィルター処理部２０ｃは、シャープネス調整やノイズ除去処理などをフィルター処理によって実行する。次にガンマ補正部２０ｄはエリアイメージセンサー１５の出力データの階調値が示す色と表示部４０で扱う画像データの階調値が示す色との特性差を補償するガンマ補正を実行する。ガンマ補正によって生成されたデータはラインバッファー５２ｃに一時記録される。

当該ラインバッファー５２ｃに線順次で記録されていくデータはエリアイメージセンサー１５において間引きが行われた画素数である。すなわち、垂直方向に７２０ライン、水平方向に１８００画素のデータが線順次で記録されていくことになる。リサイズ処理部２０ｅは当該ラインバッファー５２ｃに記録されていくデータを逐次参照して補間演算処理を行い、画素の間の位置における各チャネルの階調値を特定することによってリサイズを行う。本実施形態において、上述のエリアイメージセンサー１５における間引きは垂直方向に１／５，水平方向に１／３であるため、図２の矩形１５ａにて示すように間引き後のデータの縦横比はエリアイメージセンサー１５の出力データの縦横比と異なっている。そこで、リサイズ処理部２０ｅは、まず、ラインバッファー５２ｃに記録されたデータに基づいて水平方向に約５７％のサイズに縮小する縮小処理を行う。この結果、水平方向の画素数を１０２４画素とする。さらに、リサイズ処理部２０ｅは、垂直方向に約９５％に縮小する縮小処理を行う。この結果、水平方向に１０２４画素、垂直方向に６８２ラインの画像データを生成する。生成された画像データはラインバッファー５２ｄに線順次で記録される。

本実施形態においては、以上の処理によってエリアイメージセンサー１５の出力データに基づいて液晶パネル４２の被写体像表示領域Ｒ_１に表示可能な画像データを生成する生成処理を行うが、エリアイメージセンサー１５の出力データは垂直方向に７２０ラインであり、画像データの垂直方向のライン数である６８２ラインや液晶パネル４２の垂直方向のライン数である７６８ラインとは異なっている。すなわち、１フレーム分の撮影及び表示を行うために必要なライン数が異なっている。

そこで、本実施形態においては、エリアイメージセンサー１５のフレーム開始信号、水平同期信号SH_sync、垂直同期信号SV_sync、データアクティブ信号SD_activeおよびドットクロック信号SDotclockは、エリアイメージセンサー１５を駆動するために必要な周期に設定される。すなわち、タイミングジェネレーター３０は、エリアイメージセンサー１５において上述のような垂直方向の間引きを行って垂直同期信号SV_syncで規定される期間内に１フレーム分のライン数の出力データを取得できるようなタイミングおよび出力回数で水平同期信号SH_syncを出力している。また、タイミングジェネレーター３０は、以上のような水平方向の間引きを行って水平同期信号SH_syncで規定される期間内に１ライン分の画素数の出力データを取得できるようなタイミングおよび出力回数でドットクロック信号SDotclockを出力している。

一方、当該エリアイメージセンサー１５から線順次に出力される出力データに基づいて液晶パネル４２における表示を行うため、画像データ出力部２０１とＶＲＡＭ５１とタイミング情報取得部３０ａと表示制御部３０ｂとを備えている。画像データ出力部２０１は、ラインバッファー５２ｄに記録された画像データ（Data）をＶＲＡＭ５１に対して線順次に出力する。１ライン分の画像データのＶＲＡＭ５１への出力が完了した時点で画像データ出力部２０１はメモリー書き込み終了信号をタイミング情報取得部３０ａに出力する。

タイミング情報取得部３０ａがメモリー書き込み終了信号を取得すると、表示制御部３０ｂは当該メモリー書き込み終了信号に対応するラインを表示するための水平同期信号DH_syncを表示部４０に対して出力する。液晶パネルドライバー４１は水平同期信号DH_syncに同期して当該ラインの画像データをＶＲＡＭ５１から読み出し液晶パネル４２に表示する。具体的には例えば、液晶パネルドライバー４１は、カウンター４１ａが数えたドットクロックDDotclockの出力数を参照し、ドットクロックがＮ個出力されるたびにＮ画素分の表示を一括して行う。ここでｎは自然数である。そしてこの結果、エリアイメージセンサー１５で撮影された被写体の像が被写体像表示領域Ｒ_１（液晶パネル４２の１〜６８２ライン）に表示される。また、ＣＰＵ５０は、少なくとも情報表示領域Ｒ_２での表示を行う以前においてＶＲＡＭ５１に対してＯＳＤデータを記録しておく。そして、液晶パネル４２の６８３ライン〜７６８ラインの表示を行う際に、ＶＲＡＭ５１に記録されたＯＳＤデータはDataとして液晶パネルドライバー４１から線順次に読み出される。この結果、撮影条件等の文字が情報表示領域Ｒ_２に表示される。

被写体像表示領域Ｒ_１においては、画像データ生成部２０の進捗状況が通常より遅れているためにＶＲＡＭ５１への出力も遅れている場合は、基準水平同期期間T_Hよりも実際の水平同期期間T_DHが長期化する。ここで、基準水平同期期間とは、垂直同期期間DV_syncと、１フレームあたりのライン数（垂直方向のバックポーチ期間に出力するライン数と液晶パネル４２のライン数と垂直方向のフロントポーチ期間に出力するライン数とを含む）と、に基づいて設定される基準となる水平同期期間を意味しており、例えば当該垂直同期信号DV_syncの周期を当該ライン数で除した値として定義することができる。

図４Ａは、実際の水平同期期間T_DHが基準水平同期期間T_H1より延長されない場合の水平同期期間T_DHと周期T_dd1のドットクロックDDotclockとの関係を示している。図４Ｂは実際の水平同期期間T_DHが基準水平同期期間T_H1よりΔTだけ延長される場合の水平同期期間T_DHと周期T_dd1のドットクロックDDotclockとの関係を示している。図４Ａの場合の水平同期期間T_DH内のドットクロックDDotclockの出力数は（T_H1/T_dd1）で表される。図４Ｂの場合の水平同期期間T_DH内のドットクロックDDotclockの出力数は｛（T_H1+ΔT）/T_dd1｝で表される。したがって、水平同期期間T_DHが基準水平同期期間T_H1より延長される場合はされない場合よりも、水平同期期間T_DH内のドットクロックDDotclockの出力数は増加する。

フレームレート情報取得部３０ｃは、エリアイメージセンサー１５のフレームレートを示す情報をＣＰＵ５０から取得する機能を備えている。例えば、利用者が操作部５５を操作することによってエリアイメージセンサー１５のフレームレートが変更される場合、フレームレート情報取得部３０ｃは、変更後のフレームレートを示す情報を取得することができる。あるいは、撮影環境が明るい環境から暗い環境に変化したときに撮影装置１が自動的にフレームレートを変更する場合にも、フレームレート情報取得部３０ｃは変更後のフレームレートを示す情報を取得することができる。

そして本実施形態では、エリアイメージセンサー１５のフレームレートに応じて、ライブビュー画像を液晶パネル４２に表示する際のフレームレートが設定される。したがってエリアイメージセンサー１５のフレームレートが変更される場合、フレームレート情報取得部３０ｃは変更後のフレームレートを示す情報を取得し、表示制御部３０ｂはエリアイメージセンサー１５のフレームレートに応じて垂直同期信号DV_syncの周期および水平同期信号DH_syncの周期を変更する。例えばエリアイメージセンサー１５のフレームレートが遅いレートに変更される場合、基準水平同期期間の長さも延長される。

図４Ｃは、エリアイメージセンサー１５のフレームレートが図４Ａにおけるフレームレートの（1/X）倍（ただしX＞1とする）に切り換えられた場合に、基準水平同期期間T_H2が基準水平同期期間T_H1のＸ倍に延長されるという例を示している。基準水平同期期間T_H2内に図４Ａと同じ周期（T_dd1）でドットクロックDDotclockを出力する場合、ドットクロックDDotclockの出力数は（X・T_H1/T_dd1）となり図４Ａの場合よりも増加する。そしてドットクロックの出力数（X・T_H1/T_dd1）が表示部４０のカウンター４１ａの上限値C_{dd_MAX}を超えるのであれば、カウンター４１ａは確実にオーバーフローしてしまう（本実施形態では被写体像表示領域R₁のラインにおいては実際の水平同期期間T_DHは基準同期期間よりも短期化されることはないことを前提としている）。そこで、表示制御部３０ｂはドットクロックDDotclockの周期を変更前の周期T_dd1（第一の周期に相当）から周期T_dd1より長い周期T_dd2（第二の周期に相当）に切り換えることでカウンター４１ａのオーバーフローを回避する。具体的には例えば、延長しうる最長の水平同期期間T_{DH_MAX}を想定し、（T_{DH_MAX}/C_{dd_MAX}）≦T_dd2≦（T_{DH_MAX}/d_MIN）を満たすように周期T_dd2を設定する（もちろんC_{dd_MAX}＞d_MINである）。ここでd_MINは、１水平期間中に生成すべきドットクロックDDotclock数の最小値（例えば、水平方向のバックポーチ期間に出力するドットクロックDDotclockの最小値と、液晶パネル４２の１ラインを構成する全画素を表示するためのドットクロックDDotclock数の最小値と、水平方向のフロントポーチ期間に出力するドットクロックDDotclockの最小値とを加算した値）とする。C_{dd_MAX}に関しては例えば、タイミングジェネレーター３０の設計段階において、画像データ生成部２０が１ライン分の画像データの生成を開始してから当該ラインのメモリー書き込み終了信号が出力されるまでの時間を計測する。そして統計的に有意なサンプル数分の当該時間のデータに基づいて、画像データ生成部での処理によって延長されうる最長の水平同期期間T_{DH_MAX}を定めるようにしてもよい。なお、最長の水平同期期間T_{DH_MAX}はフレームレートに応じて異なる値である。

出力数（X・T_H1/T_dd1）がカウンター４１ａの上限値C_{dd_MAX}を超えない場合であっても、実際の水平同期期間T_DHが基準水平同期期間T_H2（=X・T_H1）より延長される場合は、出力数（T_DH/T_dd1）は上限値C_{dd_MAX}を超える可能性がある。図４Ｄは、エリアイメージセンサー１５のフレームレートが図４Ａにおけるフレームレートの（1/X）倍に切り換えられた場合であって、実際の水平同期期間T_DHが、想定される最長の水平同期期間T_{DH_MAX}まで延長されると仮定した場合の水平同期期間T_DHを示している。最長の水平同期期間T_{DH_MAX}内に変更前の周期T_dd1でドットクロックDDotclockを出力する場合のドットクロックDDotclockの出力数は（T_{DH_MAX}/T_dd1）で表される。表示制御部３０ｂは、ドットクロックの出力数（T_{DH_MAX}/T_dd1）が上限値C_{dd_MAX}を超える場合に、オーバーフローの可能性があるとしてドットクロックDDotclockの周期を周期T_dd2に切り換える。その結果、カウンター４１ａのオーバーフローを回避することができる。なお周期T_dd2は前述と同様に、（T_{DH_MAX}/C_{dd_MAX}）≦T_dd2≦（T_{DH_MAX}/d_MIN）を満たすように設定する。

図５はドットクロックの切り換えタイミングを示すフローチャート、図６はドットクロックの切り換えを示すタイミングチャートを示している。図６において「VRAM(LiveViewData)」は、エリアイメージセンサー１５からの出力データに基づいて画像データ生成部２０が生成し画像データ出力部２０１によってＶＲＡＭ５１に１ラインずつ出力される画像データの出力タイミングを示すもので、実際にこのような波形の信号が生成されるわけではない。数字はラインを示しており、立ち上がりが当該ラインの画像データのＶＲＡＭ５１への出力開始、立ち下がりが出力完了のタイミングを示している。また、本実施形態においてメモリー書き込み終了信号は、１ライン分の画像データの生成処理を実行している過程においてローレベルの出力が維持され、１ライン分の画像データの生成処理を終了しＶＲＡＭ５１に出力した時点で所定期間ハイレベルとなる１回のパルスによって構成される。

フレームレート情報取得部３０ｃは、エリアイメージセンサー１５のフレームレートの切り換え要求の有無を監視しており（ステップＳ１００）、フレームレートの切り換え要求があると表示制御部３０ｂは前述のようにオーバーフローの可能性を判定する（ステップＳ１０５）。すなわち表示制御部３０ｂは、図４Ｃを用いて説明したように（X・T_H1/T_dd1）＞C_{dd_MAX}となるか否かを判定する。また、表示制御部３０ｂは図４Ｄを用いて説明したように、（T_{DH_MAX}/T_dd1）＞C_{dd_MAX}となるか否かを判定する。なお、図４Ｃで説明した判定を行わずに図４Ｄで説明した判定のみを行っても良い。オーバーフローの可能性があると判定された場合は、表示制御部３０ｂは１フレームの表示が完了するタイミングまで待機し（ステップＳ１１０）、１フレームの表示が完了したタイミングでドットクロックの周期を切り換える（ステップＳ１１５）。１フレームの表示が完了したタイミングとは、本実施形態では、図６に示す表示終了信号を表示制御部３０ｂが表示部４０に出力した後であって、次のフレームの表示開始信号を出力する前を意味する。

ステップＳ１１５におけるドットクロックの周期の切り換えについて説明する。ステップＳ１１５では具体的には表示制御部３０ｂは、図８のセレクターSELによって分周器の切り換えを行う。例えば、撮影装置１ではエリアイメージセンサー１５のフレームレートは１２０fpsと６０fpsと３０fpsの３種類に対応しているとする。その場合、それら３種類のフレームレートごとに、カウンター４１ａがオーバーフローせずにすむドットクロックの周期（（T_{DH_MAX}/C_{dd_MAX}）≦T_dd2≦（T_{DH_MAX}/d_MIN）を満たす周期）であって、かつ、クロック信号発生手段CLKのクロック信号を分周することで生成可能な周期が、タイミングジェネレーター３０の設計段階において予め計算されている。そして各分周器DIV1〜DIVnは、それらの周期のドットクロックを生成可能な分周回路として設計されている。そのため、例えばフレームレートが１２０fpsの場合にオーバーフローしない周期でドットクロックを生成できるのは分周器DIV1であり、フレームレートが６０fpsの場合にオーバーフローしない周期でドットクロックを生成できるのは分周器DIV2である、というようにフレームレートごとに分周器が対応付けられることになる。したがってステップＳ１１５において表示制御部３０ｂは、切り換え後のフレームレートに対応する分周器をセレクターSELによって選択する。

このように、本実施形態ではエリアイメージセンサー１５のフレームレートが切り換えられる場合に、切り換え後において１水平同期期間中に出力されるドットクロックDDotclockの出力数がカウンター４１ａの上限値C_{dd_MAX}を超える可能性があるか否かを判定し、当該可能性がある場合に、ドットクロックDDotclockの周期を長期化する。その結果カウンター４１ａのオーバーフローを回避することができる。

一方、上述したように本実施形態において液晶パネル４２の水平同期信号DH_syncで規定される水平同期期間は可変長であるため、水平同期期間が変化しても垂直同期信号SV_sync，DV_syncの周期が同一かつ一定である状態を維持するように構成してある。上述のように被写体像表示領域Ｒ_１において水平同期期間は基準水平同期期間T_Hよりも長期化する可能性がある。そのため、例えば情報表示領域Ｒ_２においては水平同期期間を基準水平同期期間T_Hよりも短期化することによって基準水平同期期間T_Hからの時間変動を相殺することによって、１フレームを表示するための垂直同期期間が一定となるように出力信号を制御している。

すなわち、撮影条件等の情報を示す文字を表示する液晶パネル４２の情報表示領域Ｒ_２においては、被写体像表示領域Ｒ_１で長期化された水平同期期間と基準水平同期期間T_Hとの差分の累計を相殺するように基準水平同期期間T_Hよりも水平同期期間を短期化する。

図７はこのように構成されたタイミングジェネレーター３０から出力される水平同期信号DH_syncを示しており、データアクティブ信号DD_activeおよびドットクロック信号DDotclock、メモリー書き込み終了信号を合わせて示している。タイミングジェネレーター３０がタイミング情報取得部３０ａによって当該メモリー書き込み終了信号を取得すると、表示制御部３０ｂの処理により、当該メモリー書き込み終了信号のパルスに同期して水平同期信号DH_syncを出力する。このため、仮に、基準水平同期期間T_H内に、あるラインの画像データの生成処理が間に合わなかった場合には、生成処理が終了するまで水平同期信号DH_syncが出力されず、水平同期期間T_DHは基準水平同期期間T_Hより長くなる。従って、基準水平同期期間T_H内に、あるラインの画像データの生成処理が間に合わなかった場合、生成処理が終了するまで液晶パネル４２にて当該ラインの表示は開始されない。また、各ラインの画像データの準備が終了する前に表示がなされることはない。さらに、Ｎラインの画像データの生成処理が終了しＶＲＡＭ５１への出力が完了すると水平同期信号DH_syncが出力されるため、Ｎラインの画像データが遅滞なく表示される。以上のように、本実施形態は、水平同期期間T_DHが基準水平同期期間T_Hよりも長くなり得る状態で液晶パネル４２を駆動するため、液晶パネル４２で表示すべき１ライン分の画像データの生成期間がラインごとに変動し得る態様に適用して好適である。このような態様は、エリアイメージセンサー１５のデータ出力処理や画像データ生成部２０による画像データの生成処理の速度がラインごとに相違し得る態様が想定し得る。むろん、撮影条件や撮影に利用するハードウェアに依存して処理速度がラインごとに相違し得る態様に本発明を適用しても良い。例えば、利用者が操作部５５を操作することによってエリアイメージセンサー１５の垂直同期期間や水平同期期間が変動し、あるいは画像データの生成処理に要する期間が変動する構成に対して本発明を適用することが可能である。さらに、着脱式ＥＶＦや着脱式レンズを変更することによってエリアイメージセンサー１５の垂直同期期間や水平同期期間が変動し、あるいは画像データの生成処理に要する期間が変動する構成に対して本発明を適用することが可能である。

以上のように、本実施形態では被写体像表示領域Ｒ_１において、画像データ出力部２０１から出力されるメモリー書き込み終了信号に応じてタイミングジェネレーター３０が水平同期期間T_DHを調整する。このため、被写体像表示領域Ｒ_１に表示すべき画像データの生成処理の進捗に応じて水平同期信号DH_syncが長期化され得ることとなり、液晶パネル４２の水平同期信号DH_syncで規定される水平同期期間T_DHが一定になるとは限らない。一方、上述のように、本実施形態においては垂直同期信号DV_syncで規定される垂直同期期間が一定であるため、被写体像表示領域Ｒ_１において水平同期期間T_DHが長期化された場合であっても、液晶パネル４２の全ラインの表示が垂直同期期間内に終了するように、タイミングジェネレーター３０は情報表示領域Ｒ_２において上述の基準水平同期期間T_Hよりも短い水平同期期間T_DH2となるように水平同期信号DH_syncの出力タイミングを設定する。

すなわち、撮影条件等の情報を示す文字のデータ（ＯＳＤデータと呼ぶ）は、エリアイメージセンサー１５の動作によらず予め作成しＶＲＡＭ５１に記録しておくことが可能であるため、ＯＳＤデータに基づく表示を短い水平同期期間によって実行したとしても、データ読み出しの追い越しを発生させることなく適正な表示を行うことが可能である。そこで、本実施形態においては、エリアイメージセンサー１５の出力データに基づく表示を行うための被写体像表示領域Ｒ_１よりも、撮影条件等の情報を示す文字を表示する情報表示領域Ｒ_２における水平同期期間が短くなるように設定する。

具体的には、タイミングジェネレーター３０が水平同期信号DH_syncの出力タイミングを調整することにより、被写体像表示領域Ｒ_１において長期化された水平同期期間T_DHと基準水平同期期間T_Hとの差分の総和と情報表示領域Ｒ_２において短期化された水平同期期間T_DH2と基準水平同期期間T_Hとの差分の総和とが一致するように水平同期期間T_DH2を短期化する。この結果、水平同期期間T_DH2＜基準水平同期期間T_H≦水平同期期間T_DHとなる。ここで、情報表示領域Ｒ_２において、上述の基準水平同期期間T_Hよりも短い水平同期期間T_DH2となるように水平同期信号DH_syncを出力するための構成としては、種々の構成を採用可能である。例えば、図７に示すように、被写体像表示領域Ｒ_１にて発生した基準水平同期期間T_Hに対する遅延ΔT₁の総和（ΣΔT₁）を情報表示領域Ｒ_２のライン数L₂で除した値ΔT₂を各ラインで短縮すべき期間とする構成等を採用可能である。すなわち、基準水平同期期間T_H−ΔT₂が情報表示領域Ｒ_２における水平同期期間T_DH2であるとする構成等を採用可能である。

以上のように、本実施形態においては、液晶パネル４２の領域毎に調整された水平同期信号に基づいて各領域にて適切な表示を行わせるため、液晶パネル４２の被写体像表示領域Ｒ_１および情報表示領域Ｒ_２に相当する部分のライン番号が予め決められている。例えば、図２に示す例においては、１〜６８２ラインが被写体像表示領域Ｒ_１、６８３ライン〜７６８ラインが情報表示領域Ｒ_２である。そこで、タイミングジェネレーター３０は、１〜６８２ラインに相当する被写体像表示領域Ｒ_１に対して表示を行う際に、上述のメモリー書き込み終了信号に応じたタイミングで水平同期信号DH_syncを出力しつつ、６８３ライン〜７６８ラインに相当する情報表示領域Ｒ_２に対して表示を行う際に、上述の基準水平同期期間T_Hよりも短い水平同期期間T_DH2となるように水平同期信号DH_syncを出力する。

この構成によれば、被写体像表示領域Ｒ_１においては遅延を最小化した状態でエリアイメージセンサー１５にて撮影した被写体を表示しつつ、情報表示領域Ｒ_２において短い水平同期期間内でＯＳＤデータによる撮影条件等の情報の表示が行われる状態となる。そして、上述のように、被写体表示領域Ｒ_１において長期化された水平同期期間T_DHと基準水平同期期間T_Hとの差分の総和と情報表示領域Ｒ_２において短期化された水平同期期間T_DH2と基準水平同期期間T_Hとの差分の総和とが一致するように水平同期期間が制御されるため、垂直同期信号SV_sync，DV_syncの周期が同一かつ一定の状態で表示部４０による表示を行うことができる。従って、エリアイメージセンサー１５にて撮影された被写体が１フレーム期間以上遅れて液晶パネル４２に表示されることはなく、また、複数フレーム期間に渡って同じ画像が液晶パネル４２に表示されることもない。

（３）他の実施形態：
以上の実施形態は本発明を実施するための一例であり、水平同期期間内に第一の周期でドットクロックを出力する場合のドットクロックの出力数がカウンターの上限値を超える可能性があると判定される場合にドットクロックを第一の周期よりも長い第二の周期に切り換えて出力する限りにおいて、他にも種々の実施形態を採用可能である。

上記実施形態においては、ドットクロックの周期を変更するのは、エリアイメージセンサー１５のフレームレートが切り換えられる場合である例を説明したが、次のような場合にドットクロックDDotclockの周期を長い周期に切り換えてもよい。例えば、表示制御部３０ｂ側にもドットクロックDDotclockの水平同期期間ごとの出力数をカウントするカウンターを備える構成とする。その場合、表示制御部３０ｂが備えるカウンターの上限値は表示部４０が備えるカウンター４１ａの上限値より多いこととする。そして表示制御部３０ｂのカウンターは、水平同期期間中に自身が表示部４０に対して出力したにドットクロックDDotclockの出力数をカウントしておく。そして、表示制御部３０ｂのカウンターが数えたドットクロックの出力数が予め決められた閾値thr1を超えた場合に、これまでと同じ周期T_dd1でドットクロックをこのまま出力し続けると表示部４０のカウンター４１ａの上限値C_{dd_MAX}を超える可能性があると表示制御部３０ｂは判断する。そしてその場合に、ドットクロックDDotclockの周期を変更前の周期T_dd1からT_dd1より長い周期T_dd2に切り換えてドットクロックDDotclockを出力するようにする。具体的には例えば、T_dd1≦T_dd2≦（T_{DH_MAX}/d_MIN）を満たす周期であって、図８に示す分周器が生成することができる周期に切り換えてドットクロックDDotclockを出力する。T_{DH_MAX}は前述したように延長しうる最長の水平同期期間を示しており、d_MINは１水平期間中に生成すべきドットクロック数の最小値を示している。

図４Ｂを用いて上述の予め決められた閾値thr1について説明する。例えば、閾値thr1は、基準水平同期期間T_H1内において変更前の周期T_dd1で出力されるドットクロックの出力数（T_H1/T_dd1）よりも大きい値であり、かつ、カウンター４１ａの上限値C_{dd_MAX}よりも小さい値として定められる。すなわち、（T_H1/T_dd1）＜thr1＜C_{dd_MAX}を満たすように閾値thr1を設定する。なおこの場合、複数回にわたり、段階的にドットクロックの周期を延長するようにしてもよい。
また、ドットクロックの周期の切り換えは、一フレームの表示が完了したタイミングで行われても良い。すなわち、閾値thr1を超えたことがＭフレームの垂直同期期間中に確認されると、Ｍフレーム（Ｍは自然数）の表示を終了した後Ｍ＋１フレームの表示を開始する前にドットクロックの周期を切り換えるようにしてもよい。

上述の実施形態においては、エリアイメージセンサー１５の垂直同期信号SV_syncの周期と液晶パネル４２の垂直同期信号DV_syncの周期とを一致させるため、液晶パネル４２の情報表示領域Ｒ_２において被写体像表示領域Ｒ_１よりも短い水平同期期間となるように水平同期信号SH_syncを出力したが、他の手法によって垂直同期信号SV_syncの周期と液晶パネル４２の垂直同期信号DV_syncの周期とを一致させても良い。例えば、通常の撮影装置において、エリアイメージセンサー１５のライン数は液晶パネル４２のライン数よりも多いため、特定の垂直同期期間内に確保すべき水平同期期間が均等であると仮定した場合、エリアイメージセンサー１５の水平同期信号SH_syncよりも液晶パネル４２の水平同期信号DH_syncの方が短くなる。従って、液晶パネル４２の水平同期信号DH_syncを長期化した場合であっても、当該長期化によって液晶パネル４２の垂直同期期間を長くする必要が生じることは少ない。なお、水平同期信号DH_syncを長期化することによって液晶パネル４２の垂直同期信号DV_syncがエリアイメージセンサー１５の垂直同期信号SV_syncより長くなる場合、エリアイメージセンサー１５の垂直同期信号SV_syncを長期化して垂直同期信号DV_syncと垂直同期信号SV_syncとを同期させても良い。

さらに、上述の実施形態において表示部４０は液晶パネルを用いたＥＶＦであったが、表示部４０はＥＶＦ以外の表示部、例えば、撮影装置１の背面に取り付けられる液晶パネルを用いた表示部であっても良いし、液晶パネル以外の方式を用いたものであっても良い。また、撮影装置１はミラーを備えた一眼レフカメラでも良く、さらにムービーカメラであっても良いし、撮影機能を備えた携帯電話等の装置であっても良い。さらに、上述のエリアイメージセンサー１５において、カラーフィルターはベイヤー配列であったが、ベイヤー配列以外の配列で構成されたセンサーを利用した撮影装置に本発明を適用しても良い。さらに、ラインバッファー５２ｄはラインバッファーでも良いが、１フレーム分の画像データを記録するための記録容量を備えるＶＲＡＭであってもよい。この構成によれば、表示対象となる画像データに基づく各種処理を行うことが可能になる。さらに、水平同期期間は基準水平同期期間に対して長期化されれば良く、当該基準水平同期期間としては、各種の期間を想定可能である。例えば、エリアイメージセンサー１５の水平同期信号SH_syncの周期、画像データの生成周期などを基準水平同期期間としてもよい。さらに、タイミングジェネレーター３０から表示部４０への各種信号の転送形態は種々の形態を採用可能であり、HDMI（High-Definition Multimedia Interface）等によって転送しても良い。また、上述の実施形態における方向を逆にしてもよく、例えば水平方向において、左から右に表示しても、右から左に表示しても良い。

さらに、ＯＳＤデータは表示部の情報表示領域において表示対象となる所定の情報を示した画像データであれば良く、撮影条件以外の各種情報、例えば、撮影装置１に搭載されたバッテリーの残量を示す情報等を表示対象となる所定の情報とする構成としても良い。さらに、垂直同期信号SV_sync，DV_syncの周期が同一かつ一定の状態とするための構成は、上述の構成以外にも種々の構成を採用可能である。例えば、被写体像表示領域Ｒ_１における表示を行った後、情報表示領域Ｒ_２でＯＳＤデータを表示するために設定可能な最小の期間を情報表示領域Ｒ_２における水平同期期間とすることによって垂直同期信号DV_syncの出力タイミング以前に液晶パネル４２の全ラインの表示を終了し、残余の期間待機した後に規定の出力タイミングで垂直同期信号DV_syncが出力されるように構成してもよい。

１：撮影装置、１０：光学系、１１：レンズ、１３：シャッター、１４：ローパスフィルター、１５：エリアイメージセンサー、２０：画像データ生成部、２０ａ：画素補間部、２０ｂ：色再現処理部、２０ｃ：フィルター処理部、２０ｄ：ガンマ補正部、２０ｅ：リサイズ処理部、３０：タイミングジェネレーター、３０ａ：タイミング情報取得部、３０ｂ：表示制御部、３０ｃ：フレームレート情報取得部、４０：表示部、４１：液晶パネルドライバー、４１ａ：カウンター、４２：液晶パネル、５２ａ〜５２ｄ：ラインバッファー、５５：操作部、２０１：画像データ出力部、C_{dd_MAX}：カウンター４１ａの上限値、Ｒ_１：被写体像表示領域、Ｒ_２：情報表示領域

Claims (9)

1. 被写体を撮影する撮影センサーのフレームレートを示す情報を取得するフレームレート情報取得部と、
   前記撮影センサーの出力データに基づいて生成された前記被写体の像を示す画像データを表示する際の同期信号であるドットクロックの出力数をラインごとの表示周期である水平同期期間ごとに数えるカウンターを有する表示部に、前記ドットクロックを出力する表示制御部であって、
   少なくとも前記撮影センサーのフレームレートに応じて長さが変動する前記水平同期期間内に第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、前記可能性があると判定される場合に前記ドットクロックの周期を前記第一の周期から前記第一の周期より長い周期である第二の周期に切り換えて出力する表示制御部と、を備え、
   前記表示制御部は、前記撮影センサーのフレームレートが切り換えられる場合、切り換え後の前記フレームレートに応じて設定される前記表示部の基準水平同期期間内に前記第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、超える可能性があると判定される場合に前記ドットクロックを前記第一の周期から前記第二の周期に切り換えて出力する、タイミングジェネレーター。
2. 被写体を撮影する撮影センサーのフレームレートを示す情報を取得するフレームレート情報取得部と、
   前記撮影センサーの出力データに基づいて生成された前記被写体の像を示す画像データを表示する際の同期信号であるドットクロックの出力数をラインごとの表示周期である水平同期期間ごとに数えるカウンターを有する表示部に、前記ドットクロックを出力する表示制御部であって、
   少なくとも前記撮影センサーのフレームレートに応じて長さが変動する前記水平同期期間内に第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、前記可能性があると判定される場合に前記ドットクロックの周期を前記第一の周期から前記第一の周期より長い周期である第二の周期に切り換えて出力する表示制御部と、を備え、
   前記表示制御部は、前記撮影センサーのフレームレートが切り換えられる場合、前記基準水平同期期間より延長されうる最長の前記水平同期期間内に前記第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、超える可能性があると判定される場合に前記ドットクロックを前記第一の周期から前記第二の周期に切り換えて出力する、タイミングジェネレーター。
3. 被写体を撮影する撮影センサーのフレームレートを示す情報を取得するフレームレート情報取得部と、
   前記撮影センサーの出力データに基づいて生成された前記被写体の像を示す画像データを表示する際の同期信号であるドットクロックの出力数をラインごとの表示周期である水平同期期間ごとに数えるカウンターを有する表示部に、前記ドットクロックを出力する表示制御部であって、
   少なくとも前記撮影センサーのフレームレートに応じて長さが変動する前記水平同期期間内に第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、前記可能性があると判定される場合に前記ドットクロックの周期を前記第一の周期から前記第一の周期より長い周期である第二の周期に切り換えて出力する表示制御部と、を備え、
   前記表示制御部は、前記撮影センサーのフレームレートに応じて設定される基準水平同期期間より実際の水平同期期間が延長されている場合、当該水平同期期間中に前記第一の周期で既に出力された前記ドットクロックの出力数が、所定の閾値を超えたか否かを判定し、超えると判定される場合に前記ドットクロックを前記第一の周期から前記第二の周期に切り換えて出力する、タイミングジェネレーター。
4. 前記閾値は、前記基準水平同期期間内において前記第一の周期で出力される前記ドットクロックの出力数よりも大きい値であって前記カウンターの上限値よりも小さい値として予め決められた値である、請求項３に記載のタイミングジェネレーター。
5. 前記表示制御部は、前記表示部におけるフレームの切り替わりのタイミングで前記ドットクロックの周期を切り換える、請求項１〜請求項４のいずれかに記載のタイミングジェネレーター。
6. 請求項１〜請求項５のいずれかに記載のタイミングジェネレーターと、
   前記撮影センサーと、
   前記ドットクロックに同期して動作する前記表示部と、を備える撮影装置。
7. 被写体を撮影する撮影センサーのフレームレートを示す情報を取得するフレームレート情報取得工程と、
   前記撮影センサーの出力データに基づいて生成された前記被写体の像を示す画像データを表示する際の同期信号であるドットクロックの出力数をラインごとの表示周期である水平同期期間ごとに数えるカウンターを有する表示部に、前記ドットクロックを出力する工程であって、
   前記撮影センサーのフレームレートが切り換えられる場合、切り換え後の前記フレームレートに応じて設定される前記表示部の前記水平同期期間内に第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、
   前記可能性があると判定される場合に前記ドットクロックの周期を前記第一の周期から前記第一の周期より長い周期である第二の周期に切り換えて出力する表示制御工程と、を含むドットクロック出力方法。
8. 被写体を撮影する撮影センサーのフレームレートを示す情報を取得するフレームレート情報取得工程と、
   前記撮影センサーの出力データに基づいて生成された前記被写体の像を示す画像データを表示する際の同期信号であるドットクロックの出力数をラインごとの表示周期である水平同期期間ごとに数えるカウンターを有する表示部に、前記ドットクロックを出力する工程であって、
   前記撮影センサーのフレームレートが切り換えられる場合、前記基準水平同期期間より延長されうる最長の前記水平同期期間内に第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、
   前記可能性があると判定される場合に前記ドットクロックの周期を前記第一の周期から前記第一の周期より長い周期である第二の周期に切り換えて出力する表示制御工程と、を含むドットクロック出力方法。
9. 被写体を撮影する撮影センサーのフレームレートを示す情報を取得するフレームレート情報取得工程と、
   前記撮影センサーの出力データに基づいて生成された前記被写体の像を示す画像データを表示する際の同期信号であるドットクロックの出力数をラインごとの表示周期である水平同期期間ごとに数えるカウンターを有する表示部に、前記ドットクロックを出力する工程であって、
   前記撮影センサーのフレームレートに応じて設定される基準水平同期期間より実際の水平同期期間が延長されている場合、当該水平同期期間内に第一の周期で前記ドットクロックを出力する場合の前記ドットクロックの出力数が前記カウンターの上限値を超える可能性があるか否かを判定し、
   前記可能性があると判定される場合に前記ドットクロックの周期を前記第一の周期から前記第一の周期より長い周期である第二の周期に切り換えて出力する表示制御工程と、を含むドットクロック出力方法。

Images