JP2016226015A

JP2016226015A - 撮像装置

Info

Publication number: JP2016226015A
Application number: JP2016157171A
Authority: JP
Inventors: 塩原　隆一; Ryuichi Shiobara; 隆一塩原
Original assignee: Seiko Epson Corp
Current assignee: Seiko Epson Corp
Priority date: 2016-08-10
Filing date: 2016-08-10
Publication date: 2016-12-28

Abstract

【課題】フレーム周期の長さの異なる複数の表示部を備える撮影装置においてライブビューを表示させる表示部を択一的に切り換える場合に、いずれの表示部においても被写体の動きを滑らかに表示する。
【解決手段】第一の表示部と、前記第一の表示部とフレーム周期が異なる第二の表示部と、被写体の撮像を行う撮像部と、前記第一の表示部と前記第二の表示部とのうちのいずれかを、前記撮像部の撮像による画像を表示させる対象である対象表示部として決定する対象表示部決定部と、前記対象表示部のフレーム周期に同期するフレーム周期で前記撮像部を動作させ、前記撮像部の出力に基づいて前記対象表示部においてライブビュー表示を行わせる制御部と、を備える。
【選択図】図１

Description

本発明は、複数の表示部を備える撮影装置、撮影方法に関する。

従来、撮影センサーで撮影した画像を液晶ディスプレイで表示する撮影装置が知られており、液晶ディスプレイにおいて被写体の像が被写体の動きから遅延して表示される遅延幅を抑制するために各種の技術が開発されている。例えば、特許文献１には、１フレーム分の画像信号を記録するＶＲＡＭを備える撮影装置において、ＶＲＡＭに対して１フレーム分の画像信号の書き込みが完了する前に画像信号を読み出して液晶ディスプレイで表示させる技術が開示されている。具体的には、撮影センサーの駆動タイミングからΔＴだけ遅延した再生タイミングで液晶ディスプレイでの画像表示を開始する構成が記述されている。

特開２００７−２４３６１５号公報

ＥＶＦ（Electronic View Finder）として用いられる表示部（以下、第一の表示部という）と、撮影装置の背面側に設けられた表示部（以下、第二の表示部という）の二つの表示部を備えた撮影装置が知られている。第一の表示部は、被写体の像を撮影してから被写体の像を表示するまでの遅延をなるべく短くするために撮影センサーのフレーム周期と近いフレーム周期のものを用いたい。一方、コストを抑えるために、第二の表示部については第一の表示部よりもフレーム周期が低速でコストの低いものを用いることが考えられる。すなわち、二つの表示部のフレーム周期が互いに異なる場合がある。そのような場合に例えば、第一の表示部のフレーム周期の長さが撮影センサーのフレーム周期の長さの整数倍であれば第一の表示部においては前述の遅延は均一である。しかし、第二の表示部のフレーム周期の長さがフレーム周期の長さの整数倍でない場合、第二の表示部においては前述の遅延が不均一となる。
具体的には例えば、撮影センサーのフレーム周期の長さが１／１００秒であり、表示部のフレーム周期の長さがそれよりも長い１／９０秒である場合、Ｎ番目（Ｎは自然数）のフレームの画像を撮影センサーが撮影するフレーム周期の開始からＮ番目のフレームの画像を表示部が表示するフレーム周期の開始までの期間ΔＴは変動する。また、ユーザーが違和感を感じる程度にΔＴが長くなることを防止するために、Ｎ番目のフレームの画像を表示した後（Ｎ＋１）番目のフレームの画像を飛ばして（Ｎ＋２）番目のフレームの画像を表示する等の処置が必要になる。また仮に撮影センサーのフレーム周期の長さが１／９０秒であり、表示部のフレーム周期の長さがそれよりも短い１／１００秒である場合もΔＴは変動する。またこの場合、表示部のフレーム周期の方が短いため、Ｎ番目のフレームの画像を表示部に表示した後、表示部の次のフレーム周期のタイミングに（Ｎ＋１）番目のフレームの画像を準備できない場合がある（撮影センサーが撮影したデータに基づいて表示部で表示するための画像データの生成処理が間に合わないため）。その場合は、Ｎ番目のフレームの画像を表示したあと次のフレーム周期でも再びＮ番目のフレームを表示する等の処置が必要になる。このように、ΔＴが変動したり、フレームを飛ばして表示したり、同じフレームの画像を複数フレーム周期に渡って表示するようなことがあると、被写体の動きが滑らかでないように見える。
本発明は、上記課題にかんがみてなされたもので、フレーム周期の長さの異なる複数の表示部を備える撮影装置においてライブビューを表示させる表示部を択一的に切り換える場合に、いずれの表示部においても被写体の動きを滑らかに表示することを目的とする。

上記目的を達成するための撮影装置は、第一の表示部と、第二の表示部と、撮像部と、対象表示部決定部と、制御部と、を備える。第一の表示部と第二の表示部とはフレーム周期の長さが異なる。撮像部は、被写体の撮像を行う。対象表示部決定部は、第一の表示部と第二の表示部とのうちのいずれかを、撮像部の撮像による画像を表示させる対象である対象表示部として決定する。対象表示部の決定は、ユーザーが撮影装置に手動で入力した指示に応じて行われても良いし、あるいは、表示先の切換タイミングを示す予め決められた所定の条件を満たした場合に当該条件と対応する表示部を対象表示部として決定するようにしてもよい。

制御部は、対象表示部のフレーム周期に同期するフレーム周期で撮像部を動作させ、撮像部の出力に基づいて対象表示部においてライブビュー表示を行わせる。すなわち、対象表示部が第一の表示部と第二の表示部とで切りかわる場合に、切換後の表示部のフレーム周期の長さの整数倍の長さに撮像部を駆動するフレーム周期の長さを切り換える。ここで対象表示部のフレーム周期とは、対象表示部（第一の表示部または第二の表示部）が動画像であるライブビューを表示する際に１フレーム分の画像を表示するための期間を示している。すなわち対象表示部のフレーム周期の長さは当該表示部のフレームレートの逆数で表される。撮像部におけるフレーム周期は、１フレーム分の画像を撮像するための期間であり、その長さは撮像部のフレームレートの逆数で表される。「同期する」とは、対象表示部のフレーム周期の長さと撮像部におけるフレーム周期の長さとが整数倍の関係にあるようにすることを意味する。すなわち、対象表示部のフレーム周期の長さが撮像部におけるフレーム周期の長さの整数倍であるか、または、撮像部におけるフレーム周期の長さが対象表示部のフレーム周期の長さの整数倍の関係であることを意味する。

本発明の撮影装置が以上の構成を備えることにより、フレーム周期の長さの異なる複数の表示部を備える撮影装置において、いずれの表示部にライブビューを表示させる場合にも、被写体を撮影してから被写体の像を表示するまでの期間である表示遅延を均一にすることができる。その結果、いずれの表示部においても被写体の動きを滑らかに表示することができる。表示遅延は、あるフレームの画像を撮影する撮像部のフレーム周期の開始から当該フレームの画像を表示する対象表示部のフレーム周期の開始までの期間として定義されてもよい。またあるいは、あるフレームの画像を撮影する撮像部のフレーム周期の開始から当該フレームの画像を表示する対象表示部のフレーム周期の終了までの期間として定義されてもよい。本発明の撮影装置は、いずれの表示部に表示させる場合も表示遅延を均一にすることができるので、いずれの表示部においてもライブビューモードにおいて被写体の実際の動きに滑らかに追従するように被写体の像を表示することができる。

さらに本発明の撮影装置において、制御部は、対象表示部のフレーム周期の長さよりも短い長さのフレーム周期で撮像部を動作させてもよい。すなわち、撮像部が１フレーム分の出力データを読み込むフレーム周期Ｔｓの長さが、対象表示部のフレーム周期Ｔｄの長さの（１／Ｍ）倍（Ｍは正の整数）となるようにしてもよい。
この場合、撮像部は、フレーム周期Ｔｄの長さ（フレーム周期Ｔｓの長さ×Ｍ）の期間のうち、１フレーム分の出力データを読み込むのに要する長さ（フレーム周期Ｔｓの長さ）の期間を除く残りの期間（Ｔｄ−Ｔｓで表される長さの期間）、撮像部は撮像動作をする必要がない。なぜなら表示部で表示するための画像データを生成するために用いる１フレーム分の撮像部からの出力データはフレーム周期Ｔｓにおいて取得済みであるためである。そのため、前述の残りの期間も撮像部を動作させて撮像を行う場合と比較して、消費電力を低減することができる。

さらに本発明の撮影装置において、制御部は、対象表示部のフレーム周期と同じ長さの期間内に撮像部を動作させて２フレーム以上の画像を撮像させてもよい。その場合に当該２フレーム以上の画像のうち少なくとも一つの画像に基づいて対象表示部において表示を行わせ、当該２フレーム以上の画像のうちの残りの画像に基づいて自動フォーカス処理を行っても良い。当該残りの画像は、表示用の画像よりもライン数の少ない画像であってもよい。すなわちその場合、撮像部は、表示用の画像のうちの一部分である測距エリアに相当するラインの撮像を行えばよい。自動フォーカス処理は、被写体を撮像し、撮像によって得た画像に基づいて被写体の合焦度合いを判定し、判定内容に応じてレンズを光軸方向に移動させて焦点を調整するというサイクルを繰り返して、自動で被写体の所定の部分に焦点を合わせる処理である。

この構成を採用すると、対象表示部の１フレーム周期と同じ長さの期間内に、表示用の画像の撮像と、自動フォーカス処理とを行うことができる。したがって例えば対象表示部のフレーム周期と同一の長さの期間内に１フレーム分の撮像を行って、撮像によって得た画像に基づいて自動フォーカス処理を行う場合と比較して、合焦までの時間を短くすることができる。

なお、請求項に記載された各部の機能は、構成自体で機能が特定されるハードウェア資源、プログラムにより機能が特定されるハードウェア資源、又はそれらの組み合わせにより実現される。また、これら各部の機能は、各々が物理的に互いに独立したハードウェア資源で実現されるものに限定されない。さらに、本発明は撮影方法としても、撮影装置を制御するプログラムとしても、プログラムの記録媒体としても成立する。むろん、そのコンピュータプログラムの記録媒体は、磁気記録媒体であってもよいし光磁気記録媒体であってもよいし、今後開発されるいかなる記録媒体であってもよい。

本発明の実施形態にかかる撮影装置のブロック図。エリアイメージセンサーと液晶パネルの画素数を示す図。エリアイメージセンサーの出力データの出力法を例示する図。（４Ａ）および（４Ｂ）は本発明の実施形態にかかるタイミングチャート。（５Ａ）および（５Ｂ）は本発明の実施形態にかかるタイミングチャート。（６Ａ）および（６Ｂ）は本発明の実施形態にかかるタイミングチャート。（７Ａ）および（７Ｂ）は本発明の実施形態にかかるタイミングチャート。（８Ａ）および（８Ｂ）は本発明の実施形態にかかるタイミングチャート。他の実施形態にかかるタイミングチャート。他の実施形態にかかる測距エリアを含む画像領域を示す模式図。

ここでは、下記の順序に従って本発明の実施の形態について説明する。
（１）撮影装置の構成：
（２）ライブビュー表示制御：
（３）ライブビュー表示先の切り換え：
（４）他の実施形態：

（１）撮影装置の構成：
図１は本発明の一実施形態にかかる撮影装置１の構成を示すブロック図である。撮影装置１には、光学系１０、エリアイメージセンサー１５（「撮像部」に相当する）、ＡＳＩＣ２００、タイミングジェネレーター３０、切換制御部３１、第一の表示部４０、第二の表示部４１、ＣＰＵ５０、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＯＭ５３、ＲＡＭ５４、操作部５５、アイセンサー５６が備えられている。ＣＰＵ５０は、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＡＭ５４を適宜利用してＲＯＭ５３に記録されたプログラムを実行可能であり、当該プログラムによりＣＰＵ５０は、操作部５５に対する操作に応じてエリアイメージセンサー１５にて撮影された被写体を示す画像データを生成する機能を実行する。なお、操作部５５はシャッターボタンと、モードを切り換えるためのモード切換手段としてのダイヤルスイッチと、絞りとシャッター速度を切り換えるためのダイヤルスイッチと、各種の設定メニューを操作するためのプッシュボタンとを備えており、ユーザーは当該操作部５５に対する操作によって撮影装置１に対して各種の指示を与えることができる。

第一の表示部４０は、撮影対象となる被写体を示す画像を表示してユーザーに本撮影前の被写体の様子および撮影条件等の情報を把握させるＥＶＦ（Electronic View Finder）であり、本実施形態にかかる撮影装置１はＥＶＦを備えたミラーレスデジタルカメラである。第二の表示部４１は、撮影装置１の背面に設けられた背面表示部である。第二の表示部４１は、本撮影前の被写体の様子及び撮影条件等の情報を表示する。また、第二の表示部４１は本撮影後の画像や、各種のメニュー画面を表示する。

アイセンサー５６は第一の表示部４０を含むファインダーにユーザーの顔などの物体が接近したことを検知するセンサーである。物体がファインダーに接近するとアイセンサー５６は接近したことを示す信号を出力する。物体がファインダーから離れるとアイセンサー５６は離れたことを示す信号を出力する。ＲＯＭ５３に記録されたプログラムの中にはアイセンサー５６の出力する信号に応じて表示先を決定するプログラムが含まれている。
当該プログラムを実行することによってＣＰＵ５０は画像の表示先である対象表示部として第一の表示部４０または第二の表示部４１を決定する。具体的にはアイセンサー５６から出力された信号が、物体が接近したことを示す場合、第一の表示部４０を対象表示部として決定し、当該信号が、物体が離れたことを示す場合、第二の表示部４１を対象表示部として決定する。ＣＰＵ５０、ＲＡＭ５４、ＲＯＭ５３、アイセンサー５６は「対象表示部決定部」として機能する。ＣＰＵ５０は対象表示部が変化する場合に、新しく決定した対象表示部への切換指示を示す表示先切換指示情報を切換制御部３１に出力する。

第一の表示部４０、第二の表示部４１はそれぞれ、図示しないインターフェース回路、液晶パネルドライバー４０ａ，４１ａ、液晶パネル４０ｂ，４１ｂ、図示しない接眼レンズ等を備えている。本実施形態において液晶パネル４０ｂ，４１ｂは、画素ごとに３色のカラーフィルターに対応する３つのサブピクセルを備える高温ポリシリコンＴＦＴ（Thin
Film Transistor）であり、画素の位置は直交座標系における座標で規定される。また、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。また本実施形態においては、液晶パネル４０ｂ，４１ｂの全画素によって構成される１画面を１フレームと呼ぶ。

液晶パネルドライバー４０ａ，４１ａは、各サブピクセルに電圧を印加して液晶を駆動するための信号を液晶パネル４０ｂに対して出力する。液晶パネル４０ｂ，４１ｂは、図示しないゲートドライバおよびソースドライバを備えており、液晶パネルドライバー４０ａ，４１ａから出力される信号に応じてゲートドライバが各ラインの各画素における表示タイミングを制御し、ソースドライバが表示タイミングとされているラインの各画素に対して各画素の画像データに対応した電圧を印加することによって表示を行う。すなわち、液晶パネルドライバー４０ａ，４１ａは、液晶パネル４０ｂ，４１ｂにおける表示を行うための各種信号、例えば、１フレーム分の表示を行うための期間を規定する垂直同期信号（DVsync）、１ライン分の表示を行うための期間を規定する水平同期信号（DHsync）、各ライン内での画像データの取り込み期間を規定するデータアクティブ信号（DDactive）、各画素の画像データの取り込みタイミング等を規定するドットクロック信号（DDotclock）、各画素の画像データ（DD）を出力するように構成されている。

なお、本実施形態にかかる撮影装置１は、タイミングジェネレーター３０を備えており、上述の垂直同期信号DVsync、水平同期信号DHsync、データアクティブ信号DDactive、ドットクロック信号DDotclockは当該タイミングジェネレーター３０によって生成される。
すなわち、タイミングジェネレーター３０は、クロック信号発生手段から出力される所定周期のクロック信号の変化タイミングに同期して信号レベルが変化する信号を生成する分周回路等を備えている。そして、タイミングジェネレーター３０は、予め決められたタイミングで信号レベルが変化する垂直同期信号DVsync、水平同期信号DHsync、データアクティブ信号DDactive、ドットクロック信号DDotclockを生成する。

本実施形態において第一の表示部４０と第二の表示部４１とはフレーム周期（垂直同期信号DVsyncで規定される垂直同期期間）の長さが互いに異なる。さらに、第一の表示部４０のフレーム周期の長さと第二の表示部４１のフレーム周期の長さとは一方が他方の整数倍の関係にあるわけではない。そのためタイミングジェネレーター３０は、第一の表示部４０の仕様に準拠するフレーム周期を実現するための垂直同期信号DVsync・水平同期信号DHsync・データアクティブ信号DDactive・ドットクロック信号DDotclockと、第二の表示部４１の仕様に準拠するフレーム周期を実現するための垂直同期信号DVsync・水平同期信号DHsync・データアクティブ信号DDactive・ドットクロック信号DDotclockの少なくとも２系統の垂直同期信号DVsync・水平同期信号DHsync・データアクティブ信号DDactive・ドットクロック信号DDotclockを生成し切換制御部３１に出力することができる。タイミングジェネレーター３０は、切換制御部３１から出力される信号切換指示情報に応じて切換制御部３１に出力する信号を切り換える。具体的には、タイミングジェネレーター３０は、信号切換指示情報が、第一の表示部４０に対応する系統の上述の信号への切換を指示する場合は、第一の表示部４０に対応する系統の上述の信号を切換制御部３１に出力する。
またタイミングジェネレーター３０は、信号切換指示情報が、第二の表示部４１に対応する系統の上述の信号への切換を指示する場合は、第二の表示部４１に対応する系統の上述の信号を切換制御部３１に出力する。

切換制御部３１は、表示先切換指示情報に応じて、タイミングジェネレーター３０に信号切換指示情報を出力する。具体的には、表示先切換指示情報が第一の表示部４０への切換を示している場合は、第一の表示部４０に対応する系統の上述の信号への切換を指示する信号切換指示情報を切換制御部３１は出力する。表示先切換指示情報が第二の表示部４１への切換を示している場合は、第二の表示部４１に対応する系統の上述の信号への切換を指示する信号切換指示情報を切換制御部３１は出力する。また切換制御部３１は、信号切換指示情報に応じてタイミングジェネレーター３０から出力された垂直同期信号DVsyncと水平同期信号DHsyncとデータアクティブ信号DDactiveとドットクロック信号DDotclockとを、表示先切換指示情報に応じて第一の表示部４０または第二の表示部４１のいずれかに出力する。ＣＰＵ５０、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＡＭ５４、ＲＯＭ５３、タイミングジェネレーター３０、切換制御部３１は、「制御部」として機能する。

また、本実施形態における液晶パネル４０ｂ，４１ｂはそれぞれ、水平方向に１０２４個、垂直方向に７６８個の有効画素を備えた画素数がＸＧＡサイズのパネルであり、液晶パネルドライバー４０ａ，４１ａが液晶パネル４０ｂ，４１ｂに出力する画像データDDの内容および出力タイミングを調整することによって、任意の位置に画像データに対応した階調の表示を行うことができる。本実施形態においては、液晶パネル４０ｂ、４１ｂの予め決められた被写体像表示領域にエリアイメージセンサー１５の出力データに基づいて被写体の画像を表示し、また、当該被写体像表示領域以外の情報表示領域に撮影条件等の情報を示す文字を表示する構成となっている。すなわち、液晶パネル４０ｂ，４１ｂには、被写体の画像とともに撮影条件等の情報を示す文字がＯＳＤ（On Screen Display）表示される。なお、液晶パネル４０ｂ，４１ｂは水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。

光学系１０は、エリアイメージセンサー１５に被写体画像を結像させるレンズ１１、絞り１２、シャッター１３およびローパスフィルター１４を備える。このうち、レンズ１１と絞り１２とは図示しない筐体に交換可能に取り付けられる。レンズ１１は図１では簡略化して１枚のレンズで表しているが、光軸方向に並べられた複数枚のレンズを含み、各レンズは外縁部で支持されるとともに、光軸方向に少なくとも１枚のレンズが移動可能である。シャッター１３はフォーカルプレーン型のメカニカルシャッターであり、前幕と後幕とを備える。ＣＰＵ５０の指示に従ってシャッター１３が駆動することで、レンズ１１を通過した光がエリアイメージセンサー１５に結像する状態と、レンズ１１を通過した光をシャッター１３の前幕と後幕との少なくとも一方が遮光することでエリアイメージセンサー１５に結像しない状態と、を切り替えることができる。エリアイメージセンサー１５としては、例えばベイヤー配列されたカラーフィルターと、光量に応じた電荷を光電変換によって画素ごとに蓄積する複数のフォトダイオードとを備えるＣＭＯＳ（ComplementaryMetal Oxide Semiconductor）イメージセンサー、ＣＣＤ（Charge Coupled Device）イメージセンサー等の固体撮像素子が用いられる。エリアイメージセンサー１５の画素の位置は直交座標系における座標で規定され、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。また本実施形態においてエリアイメージセンサー１５の全画素によって構成される１画面を１フレームと呼ぶ。

本実施形態においては、エリアイメージセンサー１５もタイミングジェネレーター３０が出力する各種信号に同期した動作を行う。すなわち、タイミングジェネレーター３０は、１フレーム分のフォトダイオードの検出結果を読み出すための期間を規定する垂直同期信号（SVsync）、１ライン分のフォトダイオードの検出結果を読み出すための期間を規定する水平同期信号（SHsync）、各画素の画像データの読み出しタイミング等を規定するドットクロック信号（SDotclock）を所定のタイミングで繰り返し出力する。なお、フォトダイオードの検出結果を読み出した直後に次のフレーム分の露光を行わないのであれば、タイミングジェネレーター３０は、１ライン分のフォトダイオードに蓄積されている電荷をリセットする水平リセット信号（SHreset）等のリセット信号を所定のタイミングで繰り返し出力するようにしてもよい。エリアイメージセンサー１５は、垂直同期信号SVsyncに応じて１フレーム分の出力データSDの出力を開始し、水平同期信号SHsyncにて規定される期間内にドットクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の一部の画素に対応するフォトダイオードの検出結果を示す出力データSDを逐次読み出す。

本実施形態においてタイミングジェネレーター３０は、二つの表示部のそれぞれに対して同期してエリアイメージセンサー１５を動作させるために、第一の表示部４０のフレーム周期と同期する垂直同期信号SVsync・水平同期信号SHsync・データアクティブ信号SDactive・ドットクロック信号SDotclockと、第二の表示部４１のフレーム周期と同期する垂直同期信号SVsync・水平同期信号SHsync・データアクティブ信号SDactive・ドットクロック信号SDotclockの少なくとも２系統の垂直同期信号SVsync・水平同期信号SHsync・データアクティブ信号SDactive・ドットクロック信号SDotclockを生成しエリアイメージセンサー１５に出力することができる。タイミングジェネレーター３０は、切換制御部３１から取得した信号切換指示情報に応じて垂直同期信号SVsync、水平同期信号SHsync、データアクティブ信号SDactive、ドットクロック信号SDotclockの周期を切り換える。具体的には、信号切換指示情報が第一の表示部４０に同期する系統の信号への切換を示している場合、タイミングジェネレーター３０は第一の表示部４０のフレーム周期と同期する系統の上述の信号をエリアイメージセンサー１５に出力する。また信号切換指示情報が第二の表示部４１に同期する系統の信号への切換を示している場合、タイミングジェネレーター３０は第二の表示部４１のフレーム周期と同期する系統の上述の信号をエリアイメージセンサー１５に出力する。

ＡＳＩＣ２００は、ＳＤ−ＲＡＭ５２に予め確保された複数ライン分のラインバッファー５２ａ〜５２ｄを利用し、第一の表示部４０または第二の表示部４１にて被写体の像を表示するための画像データをパイプライン処理によって生成する処理を行う回路によって構成される画像データ生成部２０を備えている。なお、複数ライン分のラインバッファー５２ａ〜５２ｄは画像データ生成部２０などに設けられていても良い。第一の表示部４０は生成された画像データに基づいて被写体の像を液晶パネル４０ｂに対して表示する。また第二の表示部４１は生成された画像データに基づいて被写体の像を液晶パネル４１ｂに表示する。すなわち、ユーザーは、第一の表示部４０または第二の表示部４１を見ながら被写体を確認することが可能である。

また、ユーザーが操作部５５を操作して本撮影指示を行った場合には、本撮影指示に応じてエリアイメージセンサー１５は、垂直同期信号SVsyncに応じて１フレーム分の出力データSDの出力を開始し、水平同期信号SHsyncにて規定される期間内にドットクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の全有効画素に対応するフォトダイオードの検出結果を示す出力データSDを逐次読み出す。そして画像データ生成部２０は、ＳＤ−ＲＡＭ５２等を利用しＪＰＥＧ等の形式の画像データを生成する。生成された画像データは図示しないリムーバブルメモリ等に記録される。

（２）ライブビュー表示制御：
被写体を示す画像データをリムーバブルメモリ等に記録し、印刷すること等を考慮した場合、高品質の画像データを得るためにはエリアイメージセンサー１５の画素数が所定数より多いことが望まれる。そこで、本実施形態におけるエリアイメージセンサー１５の有効画素数は図２に示すように、水平方向に５４００画素、垂直方向に３６００画素となっている。エリアイメージセンサー１５は水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。

一方、上述のように、液晶パネル４０ｂおよび液晶パネル４１ｂは水平方向に１０２４個、垂直方向に７６８個の画素を備え、被写体像表示領域（図２に示すＲ_１）に被写体の画像を表示する構成となっている。本実施形態においては、エリアイメージセンサー１５の縦横比（２：３）を維持したままできるだけ大きく被写体の画像を表示するため、液晶パネル４０ｂ，４１ｂの上辺および左右の辺に対して上辺及び左右の辺が接する縦横比２：３の矩形領域を被写体の画像を表示する被写体像表示領域Ｒ_１としている。また、残りの領域が撮影条件等の情報を示す文字を表示する情報表示領域（図２に示すＲ_２）である。従って、液晶パネル４０ｂ，４１ｂにおける被写体像表示領域Ｒ_１は、水平方向に１０２４個、垂直方向に６８２個の画素にて構成される。以上のように、本実施形態においては、エリアイメージセンサー１５の画素数と液晶パネル４０ｂ，４１ｂの画素数とは一致していない。

さらに、第一の表示部４０および第二の表示部４１における表示はユーザーによる被写体の確認に利用されるため、エリアイメージセンサー１５にて被写体が撮影されたタイミングから第一の表示部４０または第二の表示部４１にて当該撮影された被写体の像が表示されるタイミングまでの遅延がユーザーによって認識可能な程度の長さであると、第一の表示部４０または第二の表示部４１で視認した被写体と記録される被写体の像とがずれるなど、ライブビューを確認するための表示部として極めて使いづらくなってしまう。従って、第一の表示部４０と第二の表示部４１がライブビューを確認するために利用される際には、遅延が少ないことが要求される。

そこで、エリアイメージセンサー１５にて撮影した画像を人間が視認できない極めて短い遅延にて第一の表示部４０または第二の表示部４１に表示させるため、本実施形態においては、エリアイメージセンサー１５および画像データ生成部２０で各種の処理を行い、第一の表示部４０および第二の表示部４１は、この処理の結果生成された画像データを表示する。

すなわち、本実施形態にかかるエリアイメージセンサー１５は、垂直方向に並ぶラインのうちｎ個（ｎは奇数）に１個の割合でフォトダイオードの検出結果を読み出す飛び越し走査を実行可能な回路が設けられている。また、同色のカラーフィルターを介して光電変換を行うフォトダイオードのうち水平方向に並ぶｍ個（ｍは自然数）の検出結果を加算してその和をｍ分の１にして（すなわちｍ個の検出結果の相加平均を）出力するための加算器が設けられている。本実施形態において、第一の表示部４０や第二の表示部４１をライブビューモードで機能させる際、エリアイメージセンサー１５においては、飛び越し走査および加算器による処理を実行することにより、水平方向および垂直方向の画素を間引き、エリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力することで、高速に被写体を撮影する構成としている。

すなわち、エリアイメージセンサー１５は、ライブビューモードにおいて、ｎ個に１個の割合で垂直方向のラインを読み出し対象とした読み出しを水平同期信号SHsyncに応じて行う。また、ｍ個のフォトダイオードの検出結果を加算器で加算した結果を出力データとして出力する処理をドットクロック信号SDotclockに応じて行う。図３は、本実施形態においてエリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力する方法の一例を示している。同図３において、Ｒが付された矩形は赤の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｇが付された矩形は緑の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｂが付された矩形は青の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示している。

同図３に示すように、矩形で示す各画素のカラーフィルターがベイヤー配列である場合、各画素に１色のカラーフィルターのみが対応しているため、各画素の色は周囲の画素を利用して補間する必要がある。このため、ラインを間引いて出力データを取得する際に、間引き後に隣接するラインのカラーフィルターが異なる色となるように間引きを行う必要がある。このため、本実施形態においては、ｎを奇数とし、ｎラインに１ラインの割合で各ラインのフォトダイオードでの検出値を出力データとして取得すれば、補間によって各画素の色を特定可能な出力データを取得することができる。本実施形態においては、エリアイメージセンサー１５の垂直方向のライン数をできるだけ液晶パネル４０ｂおよび液晶パネル４１ｂの被写体像表示領域Ｒ_１の垂直方向のライン数に近づけるため、５ラインに１ラインの割合で出力データを取得する構成としている。図３においては、５ラインに１ラインの割合で出力データを取得することを左向きの矢印で示しており、この例においては垂直方向のライン数が１／５、すなわち、７２０となる。

さらに、カラーフィルターがベイヤー配列である場合、水平方向に隣接する画素の色は異なるとともに、１個おきに同色のカラーフィルターが並ぶことになる。このため、水平方向に並ぶ画素について１個おきにｍ個加算しその和をｍ分の１にすることで（すなわちｍ個の検出結果の相加平均を求めることで）実質的に間引き処理を行うことができる。本実施形態においては、加算器による加算を行った場合の画質上の制約等により、ｍを３と設定している。図３においては、最も下に記したラインのうち、緑色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオード検出結果を加算器Ｓ１によって加算して１／３にし、赤色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオードの検出結果を加算器Ｓ２によって加算して１／３にする構成を示している。この例においては水平方向の画素数が１／３、すなわち、１８００画素となる。図２には、エリアイメージセンサー１５における間引き後のデータサイズを破線の矩形１５ａによって示している。

以上のように、エリアイメージセンサー１５においては、垂直方向のライン数を７２０ライン、水平方向の画素数を１８００画素とすることができる。しかし、このような間引きにおいては、垂直方向においてｎが奇数であり、水平方向においてｍが自然数である等画質上の制約があるため、間引き後の画素数と液晶パネル４０ｂおよび液晶パネル４１ｂの被写体像表示領域Ｒ_１の画素数とを一致させることは困難である。また、上述のようにｎとｍとが異なる場合には縦横比が被写体と液晶パネル４０ｂ，４１ｂの被写体像とで異なるものになってしまう。

そこで、本実施形態においては、画像データ生成部２０において、間引き後の出力データに対してさらにリサイズを行って液晶パネル４０ｂ，４１ｂの被写体像表示領域Ｒ_１に表示させるための画像データを生成する構成としている。すなわち、画像データ生成部２０は、画素補間部２０ａ、色再現処理部２０ｂ、フィルター処理部２０ｃ、ガンマ補正部２０ｄ、リサイズ処理部２０ｅを備えている。そして、画像データを生成する過程でリサイズ処理部２０ｅによって垂直方向および水平方向の画素数を変更することにより、液晶パネル４０ｂ，４１ｂの被写体像表示領域Ｒ_１の画素数と等しい画像データを生成する構成としている。

ラインバッファー５２ａは、エリアイメージセンサー１５から出力される間引き後の出力データを一時記録するバッファーメモリーであり、エリアイメージセンサー１５から間引き後の出力データが出力されると画像データ生成部２０の処理によって当該出力データがラインバッファー５２ａに一時記録される。画素補間部２０ａは、ラインバッファー５２ａからベイヤー配列において各画素で欠落している２チャネルの色を生成するために必要な画素数のデータを取り込みながら補間処理によって当該２チャネルの色を生成する。
この結果、各画素において３チャネルのデータが生成される。次に、色再現処理部２０ｂは、生成されたデータに基づいて３×３の行列演算を、対象表示部に応じて行うことによって色再現処理とカラーマッチングのための色変換処理を同時に行う。これら一連の色変換処理によって生成されたデータはラインバッファー５２ｂに一時記録される。次にフィルター処理部２０ｃは、シャープネス調整やノイズ除去処理などをフィルター処理によって実行する。次にガンマ補正部２０ｄはエリアイメージセンサー１５の出力データの階調値が示す色と表示部４０で扱う画像データの階調値が示す色との特性差を補償するガンマ補正を実行する。ガンマ補正によって生成されたデータはラインバッファー５２ｃに一時記録される。

当該ラインバッファー５２ｃに線順次で記録されていくデータはエリアイメージセンサー１５において間引きが行われた画素数である。すなわち、垂直方向に７２０ライン、水平方向に１８００画素のデータが線順次で記録されていくことになる。リサイズ処理部２０ｅは当該ラインバッファー５２ｃに記録されていくデータを逐次参照して補間演算処理を行い、画素の間の位置における各チャネルの階調値を特定することによってリサイズを行う。本実施形態において、上述のエリアイメージセンサー１５における間引きは垂直方向に１／５（２０％），水平方向に１／３（約３３％）であるため、図２の矩形１５ａにて示すように間引き後のデータの縦横比はエリアイメージセンサー１５の出力データの縦横比と異なっている。そこで、リサイズ処理部２０ｅは、まず、ラインバッファー５２ｃに記録されたデータに基づいて水平方向に約５７％のサイズに縮小する縮小処理を行う。
この結果、水平方向の画素数を１０２４画素とする。さらに、リサイズ処理部２０ｅは、垂直方向に約９５％に縮小する縮小処理を行う。この結果、水平方向には約３３％×約５７％で約１９％のサイズにリサイズされ、垂直方向には２０％×約９５％で約１９％のサイズにリサイズされることで、水平方向に１０２４画素、垂直方向に６８２ラインの画像データが生成される。すなわち、エリアイメージセンサー１５の受光画素数（５４００×３６００）に対して縦横同等の比率で縮小されるため、エリアイメージセンサー１５の画素のアスペクト比（５４００：３６００）と画像データの画素のアスペクト比（１０２４：６８２）は同等となる。生成された画像データはラインバッファー５２ｄに線順次で記録される。

本実施形態においては、以上の処理によってエリアイメージセンサー１５の出力データに基づいて液晶パネル４０ｂ，４１ｂの被写体像表示領域Ｒ_１に表示可能な画像データを生成する生成処理を行うが、エリアイメージセンサー１５の出力データは垂直方向に７２０ラインであり、画像データの垂直方向のライン数である６８２ラインや液晶パネル４０ｂ，４１ｂの垂直方向のライン数である７６８ラインとは異なっている。すなわち、１フレーム分の撮影及び表示を行うために必要なライン数が異なっている。

そこで、本実施形態においては、エリアイメージセンサー１５の水平同期信号SHsync、データアクティブ信号SDactiveおよびドットクロック信号SDotclockは、エリアイメージセンサー１５を駆動するために必要な周期に設定される。すなわち、タイミングジェネレーター３０は、エリアイメージセンサー１５において上述のような垂直方向の間引きを行って垂直同期信号SVsyncで規定される期間内に１フレーム分のライン数の出力データを取得できるようなタイミングおよび出力回数で水平同期信号SHsyncを出力している。また、タイミングジェネレーター３０は、以上のような水平方向の間引きを行って水平同期信号SHsyncで規定される期間内に１ライン分の画素数の出力データを取得できるようなタイミングおよび出力回数でドットクロック信号SDotclockを出力している。

一方、当該エリアイメージセンサー１５から線順次に出力される出力データSDに基づいて液晶パネル４０ｂまたは液晶パネル４１ｂにおける表示を行うため、タイミングジェネレーター３０は、表示部の垂直同期信号DVsyncで規定される期間内に１フレーム分のライン数の画像データDDが表示できるようなタイミングおよび出力回数で水平同期信号DHsyncを出力する。また、タイミングジェネレーター３０は、水平同期信号DHsyncで規定される期間内に１ライン分の画素数の画像データDDを表示できるようなタイミングおよび出力回数でドットクロック信号DDotclockを出力する。

また、ＡＳＩＣ２００は画像データ出力部２０１を備えており、画像データ出力部２０１は、液晶パネル４０ｂ，４１ｂの１〜６８２ラインの表示を行う際に、ラインバッファー５２ｄに記録された画像データ（DD）を表示部４０に対して線順次に出力する。この結果、エリアイメージセンサー１５で撮影された被写体の像が被写体像表示領域Ｒ_１に表示される。また、ＣＰＵ５０は、少なくとも情報表示領域Ｒ_２での表示を行う以前においてＶＲＡＭ５１に対してＯＳＤデータを記録しておく。そして、画像データ出力部２０１は、液晶パネル４０ｂ，４１ｂの６８３ライン〜７６８ラインの表示を行う際に、ＶＲＡＭ５１に記録されたＯＳＤデータを画像データ（DD）として表示部４０に対して線順次に出力する。この結果、撮影条件等の文字が情報表示領域Ｒ_２に表示される。

（３）ライブビュー表示先の切り換え：
さて本実施形態においては、アイセンサー５６から出力される信号に応じて、ライブビューを表示する対象である対象表示部を切り換え可能である。また、本実施形態におけるタイミングジェネレーター３０は、対象表示部のフレーム周期に同期するフレーム周期でエリアイメージセンサー１５を駆動する。

例えば、撮影装置１が、フレームレートが１００ｆｐｓである第一の表示部４０とフレームレートが９０ｆｐｓである第二の表示部４１とを備えている場合の動作を説明する。
アイセンサー５６の出力に基づいてＣＰＵ５０が第一の表示部４０への切換を示す表示先切換指示情報を切換制御部３１に出力すると、切換制御部３１はタイミングジェネレーター３０に第一の表示部４０に対応する系統の信号への切換を指示する信号切換指示情報を出力する。タイミングジェネレーター３０は当該信号切換指示情報を受けて、フレームの切り替えのタイミングに合わせて、エリアイメージセンサー１５を第一の表示部４０と同一の１００ｆｐｓで駆動するために垂直同期信号SVsync・水平同期信号SHsync・データアクティブ信号SDactive・ドットクロック信号SDotclockを生成し、エリアイメージセンサー１５に出力を開始する。また、タイミングジェネレーター３０は当該信号切換指示情報を受けて、第一の表示部４０のフレームレートを実現するための垂直同期信号DVsync・水平同期信号DHsync・データアクティブ信号DDactive・ドットクロック信号DDotclockを生成し、切換制御部３１に出力する。そして切換制御部３１は周期切換後の上述の信号を第一の表示部４０に出力する。

図４Ａは、この場合の垂直同期信号SVsyncと出力データSDと垂直同期信号DVsyncと画像データDDとを示すタイミングチャートである。図４Ａにおいて水平同期信号SHsync、ドットクロック信号Sdotclock、データアクティブ信号SDactive、水平同期信号SHsync、ドットクロック信号Ddotclock、データアクティブ信号DDactiveは図示を省略している（後述する４Ｂ、図５〜図８についても同様に図示を省略している）。出力データSDごとに付されている番号や画像データDDごとに付されている番号は、フレームを識別するための番号である。出力データSDと同じ番号が付された画像データDDは、当該出力データSDから生成された表示用の画像データであることを示す。期間ｔ１は、あるフレームの出力データを取り込む垂直同期期間の開始から当該フレームの表示を行う垂直同期期間の開始までに少なくとも必要な期間（以下、表示準備期間という）であって、エリアイメージセンサー１５を１００ｆｐｓで動作させる場合にＡＳＩＣ２００における処理に要する時間等に応じてその長さが決まる。なお本実施形態では、ＡＳＩＣ２００はエリアイメージセンサー１５を動作させるフレーム周期（垂直同期期間）以内に１フレーム分の処理を実行することができる。すなわちエリアイメージセンサー１５が１００ｆｐｓで動作する場合には、ＡＳＩＣ２００は１フレーム分の処理を１／１００秒以内で終了することができる。また後述するようにエリアイメージセンサー１５が９０ｆｐｓで動作する場合には、ＡＳＩＣ２００は１フレーム分の処理を１／９０秒以内で終了することができる。

第一の表示部４０にライブビューを表示させる場合、図４Ａに示すように垂直同期信号SVsyncで規定される垂直同期期間（フレーム周期Ｔｓ）の長さは１／１００秒で常に一定であり、垂直同期信号DVsyncで規定される垂直同期期間（フレーム周期Ｔｄ１）の長さも１／１００秒で常に一定である。したがって、あるフレームの出力データSDを取得する垂直同期期間の開始を示す垂直同期信号SVsyncから、当該フレームの画像データDDの表示を行う垂直同期期間の開始を示す垂直同期信号DVsyncまでの時間は常に期間ｔ１の長さと同じになり一定である。また、あるフレームの出力データSDを取得する垂直同期期間の開始を示す垂直同期信号SVsyncから、当該フレームの画像データDDの表示を行う垂直同期期間の終了を示す垂直同期信号DVsyncまでの時間は常に｛（期間ｔ１の長さ）＋（１／１００秒）｝となり一定である。そのため、表示遅延が常に均一であると言える。

続いてアイセンサー５６の出力に基づいてＣＰＵ５０が第二の表示部４１を示す表示先切換指示情報を切換制御部３１に出力すると、切換制御部３１はタイミングジェネレーター３０に第二の表示部４１に対応する系統の信号への切換を指示する信号切換指示情報を出力する。タイミングジェネレーター３０は当該信号切換指示情報を受けて、フレームの切り替えのタイミングに合わせて、エリアイメージセンサー１５を第二の表示部４１と同一の９０ｆｐｓで駆動するために垂直同期信号SVsync・水平同期信号SHsync・データアクティブ信号SDactive・ドットクロック信号SDotclockを生成し、エリアイメージセンサー１５に出力を開始する。また、タイミングジェネレーター３０は当該信号切換指示情報を受けて、第二の表示部４１のフレームレートを実現するための垂直同期信号DVsync・水平同期信号DHsync・データアクティブ信号DDactive・ドットクロック信号DDotclockを生成し切換制御部３１に出力する。

図４Ｂはこの場合の垂直同期信号SVsyncと出力データSDと垂直同期信号DVsyncと画像データDDとを示すタイミングチャートである。期間ｔ２は、エリアイメージセンサー１５を９０ｆｐｓで動作させる場合の表示準備期間である。垂直同期信号SVsyncで規定される垂直同期期間（フレーム周期Ｔｓ）は１／９０秒で常に一定であり、垂直同期信号DVsyncで規定される垂直同期期間（フレーム周期Ｔｄ２）も１／９０秒で常に一定である。したがって、１フレーム分の出力データSDの取得を開始してから当該１フレーム分の画像データDDを表示し終わるまでの期間が常に期間ｔ２の長さで一定である。また、あるフレームの出力データSDを取得する垂直同期期間の開始を示す垂直同期信号SVsyncから、当該フレームの画像データDDの表示を行う垂直同期期間の終了を示す垂直同期信号DVsyncまでの時間は常に｛期間ｔ２の長さ＋（１／９０秒）｝となり一定である。そのため、常に表示遅延が均一である。

なお、以上の例のように表示部のフレーム周期と同一のフレーム周期でエリアイメージセンサー１５を駆動することに限らず、表示部のフレーム周期がエリアイメージセンサー１５のフレーム周期の整数倍であれば、表示部における１フレーム分の表示のタイミングとエリアイメージセンサー１５における１フレーム分のデータ取り込みのタイミングとを同期させることができる。例えば、撮影装置１が、フレームレートが１００ｆｐｓの第一の表示部４０と、フレームレートが３０ｆｐｓの第二の表示部４１を備えている場合の動作について説明する。第一の表示部４０にライブビューを表示させる場合は上述の例と同様である。第二の表示部４１にライブビューを表示させる場合、タイミングジェネレーター３０は９０ｆｐｓで１フレーム分の出力データSDをエリアイメージセンサー１５から取得するように信号を出力する。

図５Ａはこの場合の垂直同期信号SVsyncと出力データSDと垂直同期信号DVsyncと画像データDDとを示すタイミングチャートである。出力データSDは各垂直同期信号SVsyncに同期して取得される。垂直同期信号SVsyncで規定される垂直同期期間（フレーム周期Ｔｓ）は１／９０秒で常に一定であり、垂直同期信号DVsyncで規定される垂直同期期間（フレーム周期Ｔｄ２）は１／３０秒で常に一定である。第二の表示部４１のフレーム周期の長さは第一の表示部４０のフレーム周期の長さの３倍である。そのため、エリアイメージセンサー１５が撮影する全フレームのうちの３フレームに１フレームを第二の表示部４１に表示させる。第二の表示部４１のフレーム周期の長さは第一の表示部４０のフレーム周期の長さの３倍であるので、（１＋３ｑ）番目（ｑは０以上の整数）のフレームの出力データSDの取得を行う垂直同期期間の開始から当該（１＋３ｑ）番目のフレームの画像データDDの表示を行う垂直同期期間の開始までの期間が常に期間ｔ２の長さで一定である。また、（１＋３ｑ）番目のフレームの出力データSDを取得する垂直同期期間の開始から当該フレームの画像データDDを表示する垂直同期期間の終了までの期間は｛期間ｔ２の長さ＋（１／３０）秒｝である。そのため、表示遅延が常に均一であると言える。

なお、フレームレートが３０ｆｐｓの第二の表示部４１にライブビューを表示させる場合に、表示されないフレームの出力データをエリアイメージセンサー１５から取得しなくてもよい。すなわち図５Ｂに示すように、（２＋３ｑ）番目のフレームの出力データSDを取得する期間と（３＋３ｑ）番目のフレームの出力データSDを取得する期間とはエリアイメージセンサー１５が動作しないように（出力データSDを出力しないように）してもよい。そうすることによって、図５Ａに示す例と比較して消費電力を低減することができる。

さらに、３０ｆｐｓの第二の表示部４１にライブビューを表示させるためにエリアイメージセンサー１５のフレーム周期も３０ｆｐｓに低速化してもよい。図６Ａはその場合に、出力データSDを図５Ａおよび図５Ｂで示した９０ｆｐｓと同等の期間（１／９０秒）で取り込む例を示している。図６Ｂは、３０ｆｐｓの第二の表示部４１にライブビューを表示させるためにエリアイメージセンサー１５のフレーム周期も３０ｆｐｓに低速化し、出力データSDの取得も１／３０秒の期間中に１フレーム分が取得できるように図６Ａの例よりも低速（取得期間を長期化）にした例を示している。期間ｔ３はエリアイメージセンサー１５を６０ｆｐｓで動作させる場合の表示準備期間である。図６Ａ及び図６Ｂのいずれの場合も、図５Ａおよび図５Ｂの例と同様に表示遅延は均一となる。なお、図６Ａの例の場合は、図６Ｂの例の場合よりもエリアイメージセンサー１５を動作させる期間が短いので消費電力を低減することができる。

また、フレームレートが３０ｆｐｓの第二の表示部４１にライブビューを表示させる場合、タイミングジェネレーター３０は６０ｆｐｓでエリアイメージセンサー１５を動作させてもよい。図７Ａは、この場合の垂直同期信号SVsyncと出力データSDと垂直同期信号DVsyncと画像データDDとを示すタイミングチャートである。期間ｔ４はエリアイメージセンサー１５を６０ｆｐｓで動作させる場合の表示準備期間である。垂直同期信号SVsyncで規定される垂直同期期間（フレーム周期Ｔｓ）は１／６０秒で常に一定であり、垂直同期信号DVsyncで規定される垂直同期期間（フレーム周期Ｔｄ２）はその２倍の１／３０秒で常に一定である。したがって、（１＋２ｑ）番目のフレームの出力データSDの取得を行う垂直同期期間の開始から当該フレームの画像データDDの表示を行う垂直同期期間の開始（または終了）までの期間が常に一定である。そのため、表示遅延が均一である。

なお、フレームレートが３０ｆｐｓの第二の表示部４１にライブビューを表示させる場合に、表示されないフレームの出力データをエリアイメージセンサー１５から取得しなくてもよい。すなわち図７Ｂに示すように、（２＋２ｑ）番目のフレームの出力データSDを取得する期間はエリアイメージセンサー１５が出力データSDを出力しないようにしてもよい。そうすることによって図７Ａの例と比較して消費電力を低減することができる。

さらに、３０ｆｐｓの第二の表示部４１にライブビューを表示させるためにエリアイメージセンサー１５のフレーム周期も３０ｆｐｓに低速化してもよい。図８Ａはその場合に、出力データSDを図７Ａおよび図７Ｂで示した６０ｆｐｓと同等の期間（１／６０秒）で取得する例を示している。図８Ｂは、３０ｆｐｓの第二の表示部４１にライブビューを表示させるためにエリアイメージセンサー１５のフレーム周期も３０ｆｐｓに低速化し、出力データSDの取得も１／３０秒の期間中に１フレーム分が取得できるように図８Ａの例よりも低速（取得期間を長期化）している例を示している。図８Ａ及び図８Ｂのいずれの場合も、表示遅延は均一となる。なお、図８Ａの例の場合は、図８Ｂの例の場合よりもエリアイメージセンサー１５を動作させる期間が短いので消費電力を低減することができる。

（４）他の実施形態
尚、本発明の技術的範囲は、上述した実施例に限定されるものではなく、以下の変形例を組み合わせる等、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。図９は、他の実施形態にかかるタイミングチャートである。図９に示すように、対象表示部のフレーム周期と同じ長さの期間に、表示に用いる出力データSDとＡＦ処理に用いる部分画像領域の出力データAFとを取得するようにし、出力データSDに基づいて表示を行い、出力データAFに基づいて自動フォーカス処理を行うようにしてもよい。図１０は出力データAFに対応する画像の領域Ｒ_１０を示す模式図である。出力データAFとして取得される画像の領域は、１フレームに含まれる被写体像表示領域Ｒ１の高さの１／１６〜１／４程度の高さの領域である。領域Ｒ_１０に複数の測距エリアＲ_１０１が含まれている。対象表示部が３０ｆｐｓで動作する場合、出力データSDは９０ｆｐｓの１周期に相当する１／９０秒の期間内に取り込み、各出力データAFは１８０ｆｐｓの１周期に相当する１／１８０秒の期間内にそれぞれ読み込む。

ＣＰＵ５０は、測距エリアＲ_１０１を含む領域Ｒ_１０の出力データAFを取得すると、領域Ｒ_１０の次の出力データAFを取得するまでの１／１８０秒間に、当該領域Ｒ_１０に含まれる測距エリアＲ_１０１の被写体の合焦度合いを評価するめの評価値（例えば、コントラストの大きさを示す値等）を算出し、レンズ１１を駆動する図示しない焦点調整部に出力する。そして焦点調整部は、当該評価値に基づいてレンズ１１を駆動し、焦点を調整する。焦点を調整した状態で次の出力データAFを取り込み、上述の評価値算出焦点調整を繰り返すことによって、自動フォーカス処理を行う。その結果、対象表示部のフレーム周期と同一の期間に１フレーム分の出力データSDを取り込み、当該出力データSDに基づいて自動フォーカス処理を行う場合と比較して、ライブビューモードにおいて合焦までに要する時間を短くすることができる。また、出力データSDは対象表示部のフレーム周期に同期して読み込まれるので、表示遅延も均一である。

なお、液晶パネル４０ｂ，４１ｂについては、画素数は任意であり互いに画素数が異なっていても良い。液晶パネルの画素数に応じて表示する画像の画素数を変化させる変倍処理を行っても良い。さらには、液晶パネルの個数が３つ以上であっても２つの場合と同様に液晶パネルの切り替えを行えばよい。また、液晶以外の方式の表示部品を用いてもよい。

１…撮影装置、１０…光学系、１１…レンズ、１３…シャッター、１４…ローパスフィルター、１５…エリアイメージセンサー、１５ａ…矩形、２０…画像データ生成部、２０ａ…画素補間部、２０ｂ…色再現処理部、２０ｃ…フィルター処理部、２０ｄ…ガンマ補正部、２０ｅ…リサイズ処理部、３０…タイミングジェネレーター、３１…切換制御部、４０…第一の表示部、４０ａ…液晶パネルドライバー、４０ｂ…液晶パネル、４１…第二の表示部、４１ａ…液晶パネルドライバー、４１ｂ…液晶パネル、５２ａ〜５２ｄ…ラインバッファー、５５…操作部、５６…アイセンサー、２０１…画像データ出力部、AF…出力データ、DD…画像データ、DDactive…データアクティブ信号、DDotclock…ドットクロック信号、DHsync…水平同期信号、DVsync…垂直同期信号、Ｒ_１…被写体像表示領域、Ｒ_１０…領域、Ｒ_２…情報表示領域、SD…出力データ、SDactive…データアクティブ信号、SDotclock…ドットクロック信号、SHsync…水平同期信号、SVsync…垂直同期信号

Claims

第一の表示部と、
前記第一の表示部とフレーム周期の長さが異なる第二の表示部と、
被写体の撮像を行う撮像部と、
前記第一の表示部と前記第二の表示部とのうちのいずれかを、前記撮像部の撮像による画像を表示させる対象である対象表示部として決定する対象表示部決定部と、
前記対象表示部のフレーム周期に同期するフレーム周期で前記撮像部を動作させ、前記撮像部の出力に基づいて前記対象表示部においてライブビュー表示を行わせる制御部と、
を備える撮影装置。
前記制御部は、前記対象表示部のフレーム周期の長さよりも短い長さのフレーム周期で前記撮像部を動作させる、
請求項１に記載の撮影装置。
前記制御部は、前記対象表示部のフレーム周期と同じ長さの期間内に前記撮像部を動作させて２フレーム以上の画像を撮像させ、前記２フレーム以上の画像のうち少なくとも一つの画像に基づいて前記対象表示部において表示を行わせ、前記２フレーム以上の画像のうちの残りの画像に基づいて自動フォーカス処理を行う、
請求項２に記載の撮影装置。
撮像部が被写体の撮像を行う撮像工程と、
第一の表示部と、当該第一の表示部とフレーム周期が異なる第二の表示部と、のうちのいずれかを、前記撮像部の撮像による画像を表示させる対象である対象表示部として決定する対象表示部決定工程と、
前記対象表示部のフレーム周期に同期するフレーム周期で前記撮像部を動作させ、前記撮像部の出力に基づいて前記対象表示部においてライブビュー表示を行わせる制御部と、
を含む撮影方法。