JP2010199776A - 撮像装置、画像表示方法および画像表示プログラム - Google Patents

Abstract

【課題】表示される画像の視野率が低下したり、オートフォーカスにかかる時間が長くなったりすること無く、ライブビューによる画像をより適切に表示できるようにする。
【解決手段】撮影用撮像素子５を通じて取り込んだ視野率１００％の静止画像を、画像メモリ５６の画像記憶領域Ｘに一時記憶する。表示用撮像素子７を通じて取り込む視野率１００％未満の動画像を、光学ファインダーの視野率と同等に縮小し、この縮小した動画像を、画像記憶領域Ｘに一時記憶した撮影用撮像素子５からの視野率１００％の静止画像と合成し、この合成した画像を表示装置１２に表示する。
【選択図】図６

Description

この発明は、いわゆるライブビュー機能を備えた、例えば、レンズ交換式デジタル一眼レフレックスカメラ等の装置、当該装置において用いられる方法、プログラムに関する。

近年、レンズ交換式デジタル一眼レフレックスカメラ（ＤＳＬＲ：Digital Single Lens Reflex Camera）においても、コンパクトデジタルカメラと同様に、いわゆるライブビュー（スルー画表示）を用いた構図合わせを行えるようにしたいとするニーズが高まっている。

ライブビューは、撮影レンズが捉えている被写体の画像を、リアルタイムにＬＣＤ（Liquid Crystal Display）等の表示素子の比較的に大きな表示画面に表示して構図決め（構図合わせ）を行えるようにするものである。

ライブビューを行う方法として、撮影用撮像素子を用いる方法と、表示用撮像素子を用いる方法とがある。しかし、いずれの方法にも、長所と短所とが存在する。

図３０に、撮影用撮像素子を用いてライブビューを行うことが可能なレンズ交換式デジタル一眼レフレックスカメラ（以下、ＤＳＬＲと略称する。）２００の光学系等の構成を説明するための横断面図を示す。

図３０（Ａ）に示すように、ＤＳＬＲ２００においては、レンズ群２０１を通じて取り込まれる被写体の画像は、シャッター２０７を介して撮影用撮像素子２０８のセンサー面に結像するようにされる。この撮影用撮像素子２０８のセンサー面に結像した画像を取り込んで記録媒体に記録することができる。

そして、ＤＳＬＲ２００においては、図３０（Ａ）に示したように、撮影用撮像素子２０８を用いて取り込んだ画像をＬＣＤ２０９に表示させるので、ＬＣＤ２０９の表示画面に表示される画像は視野率１００％の画像となる。

したがって、撮影用撮像素子２０８を用いる方法の場合、ユーザーは、撮影されて記録される範囲の画像をそのままＬＣＤ２０９を通じて確認し、構図合わせを行うことができると言う長所がある。

しかし、撮影用撮像素子２０８を用いてライブビューを行う方法の場合、図３０（Ａ）に示したように、撮影用撮像素子２０８へ光束を導くために、主ミラー２０２及びサブミラー２０３を撮影光学系から退避（ミラーアップ）させる必要がある。

この場合、レンズ群２０１を通じて取り込んだ光束を、位相差検出方式のオートフォーカス（以下、位相差ＡＦ（Automatic Focus）と略称する。）を行うオートフォーカスモジュール（図３０ではＡＦＭと記載）２１０へ導くことができない。

したがって、図３０（Ａ）に示したように、撮影用撮像素子２０８を用いる方法の場合、後述もするように、高速に焦点を合わせることが可能な位相差ＡＦを用いることができなくなると言う短所がある。

すなわち、位相差ＡＦを行うためには、図３０（Ｂ）に示したように、撮影光学系に対し進退可能な（可動可能な）主ミラー２０２及びサブミラー２０３を光学ファインダー２０６側へ光束を導くように位置させる（ミラーダウンさせる）必要がある。

しかし、この場合には、撮影用撮像素子２０８へ光束を導くことができないので、視野率１００％の画像によるライブビューを行うことができなくなるのである。

そして、図３０（Ａ）にしたように、撮影用撮像素子を用いるライブビュー時においては、画像のコントラストが最も高くなる点を合焦点として探し出すコントラストオートフォーカス（以下、コントラストＡＦと略称する。）を用いることになる。

コントラストＡＦは、コンパクトデジタルカメラにおいて用いられているものであり、レンズの位置を調整しながら徐々にピントを合わせる方式であり、位相差ＡＦと比較すると低速な焦点合わせ手段である。

このため、図３０（Ａ）に示したように、ミラーアップ状態で行うことになる撮影用撮像素子２０８を使用したライブビュー時においては、位相差ＡＦを用いることができず、高速な焦点合わせを行うことができないと言う短所が生じてしまうのである。

なお、位相差ＡＦを行うためのオートフォーカスモジュール（ＡＦＭ）２１０は、例えば、図３１に示すように、集光レンズＣＬと、一対のセパレータレンズＬ１と、Ｌ２と、その後方に配置される１つのラインセンサＬＳとから構成されるものである。

そして、位相差ＡＦは、ラインセンサＬＳのセンサー面に結像する画像の入射位置は、焦点板等価面Ｓに正確に結像している場合（合焦時）、前方に結像している場合（前ピン時）、後方に結像している場合（後ピン時）とで異なることを利用している。すなわち、ピントのずれ量は、一対のラインセンサＬＳのセンサー面上における画像の結像位置によって判断できる。

したがって、ラインセンサＬＳからの出力を解析（演算）することにより、合焦か非合焦か、前ピンか後ピンか、ピントのずれ量はどの位かを正確に検出し、これに応じて１回のレンズ位置調整により、迅速かつ正確にピントを合わせることができるのである。

これに対して、図３２に、光学ビューファインダー内に設けられる表示用撮像素子を用いてライブビューを行うことが可能なＤＳＬＲ３００の光学系等の構成を説明するための横断面図を示す。

ＤＳＬＲ３００は、図３２の横断面図に示したように、撮影用撮像素子２０８の他に光学ファインダー内に表示用撮像素子２１１を設けるようにしたものもある。表示用撮像素子２１１が設けられている点を除いて、ＤＳＬＲ３００は、図３０に示したＤＳＬＲ２００と同様の構成を有している。

図３２に示したように、表示用撮像素子２１１を用いてライブビューを行う方法では、ライブビュー画像の取得に光学ファインダー内の表示用撮像素子２１１を使用する。このため、主ミラー２０２及びサブミラー２０３をミラーダウンさせたままのライブビューが可能となる。

したがって、図３２に示したように、表示用撮像素子２１１を用いてライブビューを行う方法では、レンズ群２０１を通じて取り込んだ光束を、位相差ＡＦを行うＡＦＭ２１０に導くことができる。すなわち、表示用撮像素子２１１を用いてライブビューを行う方法の場合、位相差ＡＦによる高速な焦点合わせを行うことができると言う長所がある。

しかし、図３２に示したように、光学ファインダー内の表示用撮像素子２１１を用いてライブビューを行う場合、ＬＣＤ２０９に表示される画像の視野率は光学ファインダーの視野率に依存してしまう。

ほとんどの場合、光学ファインダーの視野率は１００％未満のため、表示用撮像素子２１１を通じて取り込み、ＬＣＤ２０９の表示画面に表示されるライブビュー画像の視野率も１００％未満となってしまうという短所がある。この場合、視野率が１００％の画像を表示することができないために、本体の撮影可能範囲を正確に把握することができず、構図の確認を行うのに支障をきたす可能性がある。

これを改善する１つの方法が、特許文献１（特開２００７−２８１９５２号公報）に開示されている。当該特許文献１に開示された方法は、視野率が１００％未満の光学ファインダー内に表示用撮像素子を持つＤＳＬＲに適用されるものである。

特許文献１に開示された方法は、ＬＣＤ等の表示素子の表示領域の大きさに対して、表示用撮像素子を通じて取り込んだライブビュー画像を光学ファインダーの視野率と同等の大きさに縮小して表示するようにする。そして、縮小することにより、画像情報が存在しなくなる周辺部を全黒で補うようにするものである。

例えば、表示用撮像素子を通じて取り込んだライブビュー画像が、視野率９０パーセントの画像であるとする。この場合には、図３３（Ａ）に示すように、表示用撮像素子を通じて取り込んだライブビュー画像を表示素子の表示画面に対して９０パーセントの表示画像になるように縮小して、当該表示素子の表示画面の中央に表示する。

そして、縮小によって画像情報が存在しなくなった周辺部については、図３３（Ａ）に示すように、全黒画像で補うことにより、表示画面に、視野率１００％での構図(撮影範囲)の画像を簡略表示する。

そして、視野率１００％の画像である図３３（Ｂ）と比較すると分るように、特許文献１に記載された発明を適用した場合のライブビュー画像である図３３（Ａ）に示した画像は、周辺部は全黒で補われるものの、視野率１００％の画像を簡略表示したものとなる。

したがって、特許文献１の発明を用いることにより、全黒の周辺部分も本来の撮影可能領域であることをユーザーに明確に示すことができ、構図の確認を行う際にきたす支障を防止することができる。

特開２００７−２８１９５２号公報

上述した特許文献１に開示された方法を用いた場合、視野率１００％未満のライブビュー画像に対し、その周辺部にどの程度実際に記録される領域があるかを把握することは可能である。しかし、周辺部は黒枠（全黒画像）で表示されているため実際の構図を確認できるわけではない。

このように、ライブビューを実現する場合、撮影用撮像素子を用いる方法と、表示用撮像素子を用いる方法とがあるが、いずれの方法を用いた場合であっても、長所と短所がある。そして、短所を除去する方法も、現段階においては、当該短所を確実に除去できるものではない。

以上のことに鑑み、この発明は、表示される画像の視野率が低下したり、オートフォーカスにかかる時間が長くなったりすること無く、いわゆるライブビューによる画像をより適切に表示できるようにすることを目的とする。

上記課題を解決するため、請求項１に記載の発明の撮像装置は、
撮影用撮像素子と、
視野率が１００％未満の光学ファインダー内に配設される表示用撮像素子と、
前記撮影用撮像素子を通じて取り込んだ静止画像を一時記憶する画像記憶手段と、
前記表示用撮像素子を通じて取り込む動画像を前記光学ファインダーの視野率と同等に縮小した上で、予め取り込んで前記画像記憶手段に一時記憶されている前記撮影用撮像素子からの静止画像と合成する合成手段と、
前記合成手段で合成された画像を表示する表示手段と
を備える。

この請求項１に記載の発明の撮像装置によれば、撮影用撮像素子を通じて取り込んだ視野率１００％の静止画像が、予め画像記憶手段に一時記憶される。そして、表示用撮像素子を通じて取り込む視野率１００％未満の動画像が、光学ファインダーの視野率と同等に縮小されて、この縮小された動画像が、画像記憶手段に一時記憶されている撮影用撮像素子からの視野率１００％の静止画像と合成される。この合成手段により合成された画像が表示手段に表示される。

このように、先に取り込まれた撮影用撮像素子からの視野率１００％の静止画像と、視野率に応じてその大きさが調整される表示用撮像素子からの動画像とが合成されて表示される。

したがって、視野率１００％未満の表示用撮像素子を用いているにもかかわらず、視野率１００％相当のライブビュー画像を表示することができる。また、光学ファインダー内の表示用撮像素子を用いてライブビューを行うようにできるので、その構造上、位相差ＡＦを用いることも可能になり、高速なＡＦ（Automatic Focus）機能をも用いることができる。

この発明によれば、表示される画像の視野率が低下したり、オートフォーカスにかかる時間が長くなったりすること無く、いわゆるライブビューによる画像をより適切に表示できるようにすることができる。

この発明の一実施形態が適用された撮像装置の正面外観図である。 この発明の一実施形態が適用された撮像装置の背面外観図である。 第１の実施形態の撮像装置１を説明するためのブロック図である。 実施形態の撮像装置のミラー機構等を説明するための撮像装置の断面図である。 実施形態の撮像装置のミラー機構等を説明するための撮像装置の断面図である。 実施形態の撮像装置のミラー機構等を説明するための撮像装置の断面図である。 第１の実施形態のライブビュー処理の第１の例のメインルーチンのフローチャートである。 図７のメインルーチン等において実行されるサブルーチンのフローチャートである。 図７のメインルーチン等において実行されるサブルーチンのフローチャートである。 図７のメインルーチン等において実行されるサブルーチンのフローチャートである。 図７のメインルーチン等において実行されるサブルーチンのフローチャートである。 図７のメインルーチン等において実行されるサブルーチンのフローチャートである。 第１の実施形態のライブビュー処理の第１の例を適用した撮像装置で表示されるライブビュー画像の表示例を説明するための図である。 表示用撮像素子を用いた撮像装置において、第１の実施形態の第１の例を適用しない場合のライブビュー画像の表示例を説明するための図である。 第１の実施形態のライブビュー処理の第２の例のメインルーチンのフローチャートである。 図１５のメインルーチン等において実行されるサブルーチンのフローチャートである。 図１５のメインルーチン等において実行されるサブルーチンのフローチャートである。 図１５のメインルーチン等において実行されるサブルーチンのフローチャートである。 図１５のメインルーチン等において実行されるサブルーチンのフローチャートである。 第１の実施形態のライブビュー処理の第２の例を適用した撮像装置で表示されるライブビュー画像の表示例を説明するための図である。 表示用撮像素子を用いた撮像装置において、第１の実施形態の第２の例を適用しない場合のライブビュー画像の表示例を説明するための図である。 第２の実施形態の撮像装置１Ａを説明するためのブロック図である。 ジャイロセンサー１３４ａの検出出力（出力波形）の一例について説明するための図である。 ジャイロセンサーの検出出力に応じて、ライブビュー画像を適切に変えるタイミングを検出できるようにすることについて説明するための図である。 第２の実施形態のライブビュー処理の第１の例のメインルーチンのフローチャートである。 第２の実施形態のライブビュー処理で実行されるタイマー割込処理を説明するためのフローチャートである。 第２の実施形態のライブビュー処理の第２の例のメインルーチンのフローチャートである。 解像度変換された表示用撮像素子７からのライブビュー用画像と、撮影画像用の画像記憶領域から読み出された画像との合成処理の別の方法を説明するための図である。 この発明の実施形態の効果を説明するための図である。 従来のＤＳＬＲの構成例を説明するための図である。 位相差検出方式のオートフォーカスの原理を説明するための図である。 表示用撮像素子を搭載した従来のＤＳＬＲの構成例を説明するための図である。 視野率が１００％未満と視野率が１００％のライブビュー画像の従来の表示例を説明するための図である。

以下、図を参照しながら、この発明の装置、方法、プログラムの一実施形態について説明する。以下に説明する実施形態においては、この発明を、レンズ交換式デジタル一眼レフレックスカメラ（ＤＳＬＲ）の構成とされ、光学ファインダーの視野率が１００％未満の撮像装置に適用した場合を例にして説明する。

＜第１の実施形態＞
［撮像装置１の外観］
図１、図２は、この第１の実施形態の撮像装置１の外観を説明するための図であり、図１は撮像装置１の正面外観図、図２は撮像装置１の背面外観図である。

まず、撮像装置１の正面側の外観について説明する。図１に示すように、撮像装置１はカメラ本体部（カメラボディ）２を備えている。このカメラ本体部２に対して交換式の撮影レンズユニット（交換レンズ）３が着脱可能にされている。

撮影レンズユニット３は、主として鏡筒３６ならびに鏡筒３６の内部に設けられたレンズ群３７および絞り機構等によって構成される。レンズ群（撮影光学系）３７には、光軸方向に移動することによって焦点位置を変更するフォーカスレンズ等が含まれる。

カメラ本体部２は、撮影レンズユニット３が装着される円環状のマウント部Ｍｔを正面略中央に備え、撮影レンズユニット３を着脱するための着脱ボタン８９を円環状のマウント部Ｍｔ付近に備えている。

また、カメラ本体部２は、その正面左上部にモード設定ダイヤル８２を備え、その正面右上部に制御値設定ダイヤル８６を備えている。モード設定ダイヤル８２を操作することによって、撮像装置１の各種のモードの設定動作（切替動作）を行うことができるようにされる。

ここで、撮像装置１の種々のモードは、各種撮影モード（人物撮影モード、風景撮影モード、およびフルオート撮影モード等）、撮影した画像を再生する再生モード、および外部機器との間でデータ交信を行う通信モード等を含む。

また、制御値設定ダイヤル８６を操作することにより、各種撮影モードにおける制御値を設定することができる。

また、カメラ本体部２は、正面左端部に撮影者が把持するためのグリップ部１４を備えている。グリップ部１４の上面には露光開始を指示するためのレリーズボタン１１が設けられている。

グリップ部１４の内部には電池収納室とカード収納室とが設けられている。電池収納室には撮像装置１の電源として、例えば４本の単３形乾電池が収納される。また、カード収納室には、後述もするが、撮影画像の画像データを記録するためのメモリカード９０が着脱可能に収納されるようになっている。

レリーズボタン１１は、半押し状態（Ｐ１状態）と全押し状態（Ｐ２状態）の２つの状態を検出可能な２段階検出ボタンである。レリーズボタン１１が半押しされＰ１状態になると、被写体に関する記録用静止画像（本撮影画像）を取得するための準備動作が行われる。ここで、準備動作は、例えば、ＡＦ（Automatic Focus）制御動作、ＡＥ（Automatic Exposure）制御動作等である。

また、レリーズボタン１１がさらに押し込まれてＰ２状態になると、当該本撮影画像の撮影動作が行われる。撮影動作は、詳しくは後述もするが、撮像素子５を用いて被写体像（被写体の光像）に関する露光動作を行い、その露光動作によって得られた画像信号に所定の画像処理を施す一連の動作である。

次に、撮像装置１の背面側の外観について説明する。図２に示すように、カメラ本体部２の背面略中央上部には、ファインダー窓（接眼窓）１０が設けられている。撮影者は、ファインダー窓１０を覗くことによって、撮影レンズユニット３から導かれた被写体の光像を視認して構図決定を行うことができる。すなわち、光学ファインダーを用いて構図決め（構図合わせ）を行うことができる。

なお、この第１の実施形態に係る撮像装置１は、ライブビュー機能をも備え、背面の表示装置１２に表示されるライブビュー画像を用いて構図決めを行うことも可能である。また、光学ファインダーによる構図決め動作とライブビュー表示による構図決め動作との切換操作は、操作者が切換ダイヤル８７を回転させることによって実現される。

図２に示したように、カメラ本体部２の背面の略中央には、表示装置１２が設けられている。表示装置１２は、例えばカラーＬＣＤとして構成される。表示装置１２には、撮影条件等を設定するためのメニュー画面や、再生モードにおいてメモリカード９０に記録された撮影画像などを表示させることができるようにされている。

また、操作者が光学ファインダーによる構図決めではなく、ライブビュー表示による構図決めを選択した場合には、表示装置１２には、後述する表示用撮像素子７によって取得される時系列の複数の画像（すなわち動画像）がライブビュー画像として表示される。

また、図２に示したように、背面の表示装置１２の左上部にはメインスイッチ８１が設けられている。メインスイッチ８１は２点スライドスイッチからなり、接点を左方の「ＯＦＦ」位置に設定すると、電源がオフになり、接点の右方の「ＯＮ」位置に設定すると、電源がオンになる。

また、背面の表示装置１２の右側には方向選択キー８４が設けられている。この方向選択キー８４は円形の操作ボタンを有するものである。当該方向選択キー８４の操作ボタンにおいては、図２において、三角のマークで示したように、上下左右の４方向の押圧操作と、右上、左上、右下及び左下の4方向の押圧操作とが、それぞれ検出されるようになっている。また、方向選択キー８４は、上記８方向の押圧操作とは別に、中央部のプッシュボタンの押圧操作も検出されるようになっている。

さらに、背面の表示装置１２の左側には、メニュー画面の設定、画像の削除などを行うための複数のボタンからなる設定ボタン群８３が設けられている。

［撮像装置１の構成］
次に、図３を参照しながら、この第１の実施形態の撮像装置１の機能の概要について説明する。図３は、撮像装置１を説明するためのブロック図である。

図３に示すように、撮像装置１は、大きく分けると、カメラ本体部２と、カメラ本体部２に対して着脱可能とされた撮影レンズユニット３とからなっている。

図３に示したように、カメラ本体部２は、シャッター４、撮影用撮像素子５、ミラー機構６、表示用撮像素子７、信号処理部５１、Ａ／Ｄ（Analog/Digital）変換回路５２、デジタル信号処理回路５０を備えている。

なお、後述もするが、撮影用撮像素子５、表示用撮像素子７は、いずれもＣＣＤ（Charge Coupled Device）で構成されたものであり、図３においては、ＣＣＤ５、ＣＣＤ７と示している。）
また、図３に示すように、フォーカス制御部１２１及びフォーカス機構の駆動モータＭ１、ミラー制御部１２２及びミラー機構６の駆動モータＭ２、シャッター制御部１２３及びシャッター機構の駆動モータＭ３、タイミング制御回路１２６を備えている。

また、図３に示すように、フラッシュライト４１、フラッシュ回路４２、ＡＦ（Automatic Focus）補助光発光部４３、ＡＦ（Automatic Focus）モジュール２０を備えている。

また、カメラ本体部２は、図３に示すように、ＶＲＡＭ（Video Random Access Memory）１３１、表示装置（ＬＣＤ）１２、カードＩ／Ｆ１３２、通信用Ｉ／Ｆ１３３を備えている。ここで、Ｉ／Ｆはインターフェイスの略称である。そして、カードＩ／Ｆ１３２に対しては、これに着脱可能とされたメモリカード９０が装着されている。

さらに、カメラ本体部２は、ＥＥＰＲＯＭ（Electrically Erasable and Programmable ROM）６０、操作部８０を備えている。そして、カメラ本体部２は、全体制御部１０１を備え、これに接続された各部を制御することができるようにされている。

また、撮影レンズユニット３は、レンズ群３７、レンズ位置検出部３９を備えると共に、図３には図示しないが、絞り機構や、レンズ群３７のフォーカスレンズの位置を調整するフォーカス機構などをも備えるものである。

そして、カメラ本体部２の操作部８０は、上述したレリーズボタン１１を含む各種ボタンおよびスイッチ等を備えて構成される。操作部８０に対する操作者の入力操作に応答して、全体制御部１０１が各部を制御し、入力操作に応じた各種動作を実現することができるようにされる。

全体制御部１０１は、図３に示したように、ＣＰＵ（Central Processing Unit）１０１１、ＲＯＭ（Read Only Memory）１０１２、ＲＡＭ（Random Access Memory）１０１３等がＣＰＵバスを通じて接続されて構成されたマイクロコンピュータである。

全体制御部１０１においては、ＣＰＵ１０１１が、ＲＯＭ内に格納されるプログラムを読み出して実行することによって、各部を制御し、各種機能を実現する。例えば、全体制御部１０１は、ＡＦモジュール２０およびフォーカス制御部１２１と協動して、フォーカスレンズの位置を制御する合焦制御動作を行う。

つまり、全体制御部１０１は、ＡＦモジュール２０によって検出される被写体の合焦状態に応じて、フォーカス制御部１２１を用いてＡＦ動作を実現する。なお、この実施形態において、ＡＦモジュール２０は、ミラー機構６を介して進入してきた光を用いて、位相差方式の合焦状態検出手法により被写体の合焦状態を検出することができるものである。

ＥＥＰＲＯＭ６０は、いわゆる不揮発性メモリであり、撮像装置１の電源が落とされても保持しておくべき種々の情報、例えば、種々の調整値や設定条件などのパラメータを記憶保持するものである。

なお、この第１の実施形態においては、ＥＥＰＲＯＭを用いるようにしたが、これに限るものではなく、例えばフラッシュメモリーなどの種々の不揮発性メモリを用いるようにすることもできる。

フォーカス制御部１２１は、全体制御部１０１から入力される信号に基づいて制御信号を生成しモータＭ１を駆動することによって、撮影レンズユニット３のレンズ群３７に含まれるフォーカスレンズを移動させる。

また、フォーカスレンズの位置は、撮影レンズユニット３のレンズ位置検出部３９によって検出され、フォーカスレンズの位置を示すデータが全体制御部１０１に送られる。このように、フォーカス制御部１２１および全体制御部１０１は、フォーカスレンズの光軸方向の動きを制御する。

ミラー制御部１２２は、ミラー機構６が光路から退避した状態（ミラーアップ状態）とミラー機構６が光路を遮断した状態（ミラーダウン状態）との状態切替を制御する。すなわち、ミラー制御部１２２は、全体制御部１０１から入力される信号に基づいて制御信号を生成しモータＭ２を駆動することによって、ミラー機構６のミラーアップ状態とミラーダウン状態とを切り替える。

シャッター制御部１２３は、全体制御部１０１から入力される信号に基づいて制御信号を生成しモータＭ３を駆動することによって、シャッター４の開閉を制御する。

タイミング制御回路１２４は、図３に示したように、ＣＣＤ５、信号処理部５１、Ａ／Ｄ変換回路５２、ＣＣＤ７の駆動タイミングを制御するものである。タイミング制御回路１２４は、撮像素子５や撮像素子７を通じて画像を取り込む場合のタイミング等に対するタイミング制御を行う。

撮像素子５は、上述もしたように、ＣＣＤによって構成され、光電変換作用により被写体の光像を電気的信号に変換して、本撮影画像に係る画像信号（記録用の画像信号）を生成する。なお、撮像素子５（ＣＣＤ５と言う場合もある。）は、上述もしたように、撮影用撮像素子である。

そして、撮影用撮像素子５は、タイミング制御回路１２４から入力される駆動制御信号（蓄積開始信号および蓄積終了信号）に応答して、受光面に結像された被写体像の露光（光電変換による電荷蓄積）を行い、当該被写体像に係る画像信号を生成する。また、撮影用撮像素子５は、タイミング制御回路１２４から入力される読出制御信号に応答して、当該画像信号を信号処理部５１へ出力する。

図３にも示したように、タイミング制御回路１２４からのタイミング信号（同期信号）は、信号処理部５１及びＡ／Ｄ変換回路５２にも入力される。

そして、撮影用撮像素子５を通じて取得された画像信号は、信号処理部５１において、例えば、ＣＤＳ（Correlated Double Sampling）処理やＡＧＣ（Automatic Gain Control）処理が行われ、Ｓ／Ｎ比や利得が制御される。

信号処理部５１において、上述の所定のアナログ信号処理が施された画像信号は、Ａ／Ｄ変換回路５２に供給される。Ａ／Ｄ変換回路５２は、これに供給されたアナログ画像信号をデジタル画像データに変換し、これをデジタル信号処理回路５０に供給する。

デジタル信号処理回路５０は、図３に示したように、黒レベル補正回路５３、ＷＢ（White Balance）補正回路５４、γ（ガンマ）補正回路５５、画像メモリ５６を備えたものである。そして、デジタル信号処理回路５０は、Ａ／Ｄ変換回路５２から入力される画像データに対してデジタル信号処理を行い、撮像画像に係る画像データを生成する。

すなわち、デジタル信号処理回路５０において、黒レベル補正回路５３は、Ａ／Ｄ変換回路５２からの画像データを構成する各画素データの黒レベルを基準の黒レベルに補正する。

また、デジタル信号処理回路５０において、ＷＢ補正回路５４は、画像のホワイトバランス調整を行う。γ補正回路５５は、撮像画像の階調変換を行う。画像メモリ５６は、生成された画像データを一時的に記憶するための、高速アクセス可能な画像メモリであり、複数フレーム分の画像データを記憶可能な容量を有する。

そして、本撮影時には、上述したように、デジタル信号処理回路５０の各補正回路において補正処理された画像データは、画像メモリ５６に一時記憶される。この画像メモリ５６に一時記憶された画像データは、全体制御部１０１において、適宜、圧縮処理や解像度変換等の画像処理が施された後、カードＩ／Ｆ１３２を介してメモリカード９０に記憶される。

また、画像メモリ５６に一時記憶された画像データは、全体制御部１０１によって適宜ＶＲＡＭ１３１に転送され、本体背面の表示装置１２の表示画面に、当該画像データに基づく画像を表示することもできるようにされる。これによって、撮影画像を確認するための確認表示（アフタービュー）、および撮影済みの画像を再生する再生表示が実現される。

また、図３に示したように、撮像装置１は、撮影用撮像素子５とは別の撮像素子（ＣＣＤ）７をも備えている。撮像素子７は、いわゆるライブビュー画像取得用（動画像取得用）の撮像素子、すなわち表示用撮像素子としての役割を果たす。

表示用撮像素子７も、撮影用撮像素子５と同様の構成を有している。ただし、表示用撮像素子７は、ライブビュー用の画像信号（動画像）を生成するための解像度を有していればよく、通常、撮影用撮像素子５よりも少ない数の画素で構成される。この実施形態の表示用撮像素子７も、撮影用撮像素子５よりも少ない数の画素で構成されているものである。

そして、表示用撮像素子７を通じて取得される画像信号に対しても、撮影用撮像素子５を通じて取得される画像信号と同様の信号処理が施される。すなわち、表示用撮像素子７を通じて取得される画像信号は、信号処理部５１で上述もしたように、ＣＤＳ処理やＡＧＣ処理等の所定のアナログ信号処理が施された後にＡ／Ｄ変換回路５２に供給される。

Ａ／Ｄ変換回路５２は、これに供給されたアナログ画像信号をデジタル画像データに変換した後に、デジタル信号処理回路５０に供給する。デジタル信号処理回路５０は、これに供給されたデジタル画像データに対して、上述もしたように、所定の補正処理を施す。

この場合、表示用撮像素子７を通じて取得され、デジタル信号処理回路５０で処理されたデジタル画像データ（動画像データ）は、全体制御部１０１の制御によってＶＲＡＭ１３１に順次に転送される。そして、表示用撮像素子７からの動画像データに基づく画像が本体背面の表示装置１２に表示される。

これによって、レンズ群３７を通じて現在取り込まれている画像が、表示装置１２の表示画面にリアルタイムに表示され、構図決め（構図合わせ）を行うための画像表示（ライブビュー表示（スルー画表示））が実現される。

さらに、撮像装置１は、通信用Ｉ／Ｆ１３３を有しており、当該インターフェイス１３３の接続先の機器（例えば、パーソナルコンピュータ等）とデータ通信をすることが可能である。

また、撮像装置１は、フラッシュライト４１、フラッシュ制御回路４２、およびＡＦ補助光発光部４３を備えている。フラッシュライト４１は、被写体の輝度不足時等に利用される光源である。

フラッシュライトの点灯の有無および点灯時間等は、フラッシュ制御回路４２および全体制御部１０１によって制御される。ＡＦ補助光発光部４３は、ＡＦ用の補助光源である。

ＡＦ補助光発光部４３の点灯の有無および点灯時間等は、全体制御部１０１によって制御される。

［撮像装置１における撮影動作］
次に、この第１の実施形態の撮像装置１における構図決め動作（フレーミング動作)を含む撮影動作について説明する。

この実施形態の撮像装置１においては、ファインダー光学系等で構成される光学ファインダー（ＯＶＦ：Optical View Finder）を用いて構図決めを行うことができる。また、撮像装置１は、本体背面の表示装置１２に表示されるライブビュー画像を用いて構図決めを行うこともできる。

なお、表示用撮像素子７および本体背面の表示装置１２を利用して実現されるファインダー機能は、被写体の光像を電子データに変換した後に可視化するものであることから電子ビューファインダー（ＥＶＦ：Electronic View Finder）とも称される。

撮像装置１の操作者は、上述もしたように、切換ダイヤル８７を操作することによって、光学ビューファインダーを用いて構図決めを行うか、ライブビュー機能により表示装置１２を用いて構図決めを行うかを選択することができる。

図４〜図６は、撮像装置１の断面図である。この内、図４は、光学ビューファインダーを用いるようにしている場合のミラー機構６等の状態を示す図である。また、図５は、ライブビュー（電子ビューファインダー）を用いるようにしている場合のミラー機構６等の状態を示す図である。また、図６は、露光動作時のミラー機構６等の状態を示す図である。

図４〜図６のそれぞれに示すように、撮影レンズユニット３のレンズ群３７から撮影用撮像素子５に至る光路（撮影光路）上、及び、ファインダー窓１０に至る光路上にはミラー機構６が設けられている。

ミラー機構６は、以下に説明するように、複数のミラーを有する構成になっている。すなわち、ミラー機構６は、撮影光学系からの光を上方に向けて反射する主ミラー６１（主反射面）を有している。この主ミラー６１は、例えばその一部または全部がハーフミラーとして構成され、撮影光学系からの光の一部を透過する。

また、ミラー機構６は、主ミラー６１を透過した光を下方に反射させるサブミラー６２（副反射面）をも有している。サブミラー６２で下方に反射された光は、ＡＦモジュール２０へと導かれて入射し、位相差変換方式のＡＦ動作に利用される。

撮影モードにおいてレリーズボタン１１が全押し状態（Ｐ２状態）にされるまで、すなわち、構図決めの際には、主ミラー６１及びサブミラー６２は、図４、図５に示したように、光束を反射させる状態（ミラーダウン状態）となるようにされている。

そして、図４、図５に示すように、ミラーダウン状態においては、撮影レンズユニット３からの被写体像（光束）は、主ミラー６１で上方に反射され観察用光束としてペンタミラー６５に入射する。ペンタミラー６５は、複数のミラー（反射面）６５ａ〜６５ｅを有しており、被写体像（光束）の向き（進路）を調整する機能を有している。

そして、ペンタミラー６５に入射した後の、観察用光束の進路は、光学ビューファインダーとライブビュー（電子ビューファインダー）とのいずれを用いて構図決めを行うようにするかに応じて異なってくる。これについては後で詳述する。

なお、上述もしたように、操作者が、光学ビューファインダーを用いるか、ライブビュー（電子ビューファインダー）を用いるかを切り換えることができるようになっている。

一方、レリーズボタン１１が全押し状態（Ｐ２状態）にされると、ミラー機構６の主ミラー６１とサブミラー６２とは、図６に示すように、光束を反射しないようにする状態（ミラーアップ状態）となるように駆動され、露光動作が開始される。

被写体に係る記録用静止画像（本撮影画像）を取得する際の動作、すなわち、露光の際の動作は、光学ビューファインダーを用いた場合であっても、また、ライブビュー（電子ビューファインダ）を用いた場合であっても同じである。

具体的には、図６に示すように、露光時には、ミラー機構６は、撮影光路から待避する。詳細には、撮影光学系からの光束（被写体像）を遮らないように主ミラー６１とサブミラー６２とが上方に待避し、撮影レンズユニット３からの光束がシャッター４の開放タイミングに合わせて撮影用撮像素子５に到達する。

撮影用撮像素子５は、光電変換によって、受光した光束に基づいて被写体の画像信号を生成する。このように、被写体からの光が撮影レンズユニット３を介して撮影用撮像素子５に導かれることによって、被写体に係る撮影画像（撮影画像データ）が得られる。

［光学ビューファインダーによる構図決め動作（フレーミング動作）］
次に、光学ビューファインダーを用いて構図決め（構図合わせ）を行う場合の撮像装置１の動作について説明する。

上述したように、操作者により切換ダイヤル８７が操作され、光学ビューファインダーを用いるようにされると、図４に示したように、ミラー機構６の主ミラー６１およびサブミラー６２が、ミラーダウン状態となる。

これにより、主ミラー６１およびサブミラー６２が撮影レンズユニット３からの被写体像（光束）の光路上に配置され、被写体像（光束）が主ミラー６１とペンタミラー６５と接眼レンズ６７とを介してファインダー窓１０へと導かれる。

このように、主ミラー６１とペンタミラー６５と接眼レンズ６７とを含むファインダー光学系は、撮影光学系からの光束であって、主ミラー６１で反射された光束である観察用光束をファインダー窓１０へと導くことが可能である。

具体的には、図４において、ファインダー窓１０に至る点線で示した光路ＰＡが示すように、撮影レンズユニット３からの光は、主ミラー６１で反射されて上方に進路を変更し、焦点板６３において結像し、焦点板６３を通過する。そして、焦点板６３を通過した光は、ペンタミラー６５でその進路をさらに変更した後に接眼レンズ６７を通ってファインダー窓１０へ向かう。

このようにして、ファインダー窓１０を通過した被写体像は撮影者（観察者）の眼へ到達して視認される。すなわち、撮影者は、ファインダー窓１０を覗くことによって、被写体像を確認することができる。

ペンタミラー６５は、三角屋根状に形成された２面のミラー（ダハミラー）６５ａ、６５ｂと、当該ダハミラー（ダハ面）６５ａ、６５ｂに対して固定された面６５ｃと、もう１つのミラー（反射面）６５ｅとを有している。

また、三角屋根状の２面のミラー６５ａ、６５ｂは、プラスチック成型により一体部品６５ｄとして形成されている。そして、主ミラー６１で反射されて上方に進路を変更した光束は、ダハミラー６５ａ、６５ｂで反射され、ここで左右反転されて進行し、さらにミラー６５ｅでも反射されることによって上下も反転されて撮影者の眼に到達する。

このように、撮影レンズユニット３において左右上下が反転されていた光像は、ペンタミラー６５でさらに左右上下が反転される。これにより、撮影者は、光学ファインダーにおいて、その上下左右が実際の被写体と同じ状態で被写体像を観察することができる。

また、主ミラー６１を透過した光束は、サブミラー６２で反射されて下方に進路を変更しＡＦモジュール２０へと進入する。ＡＦモジュール２０およびフォーカス制御部１２１等は、主ミラー６１およびサブミラー６２を介して進入してきた光束を用いて、位相差検出方式のＡＦ動作を実現する。

［ライブビュー（電子ビューファインダー）による構図決め動作（フレーミング動作）］
次に、ライブビュー（電子ビューファインダー）による構図決め動作について説明する。

上述したように、操作者により切換ダイヤル８７が操作され、ライブビューを行うようにされると、この場合にも、図５に示したように、ミラー機構６の主ミラー６１およびサブミラー６２が、ミラーダウン状態となる。

これにより、図４に示した場合と同様に、ライブビューを用いる場合にも、ミラー機構６の主ミラー６１およびサブミラー６２が、撮影レンズユニット３からの被写体像（光束）の光路上に配置される。そして、撮影レンズユニット３からの光束は、主ミラー６１で反射されて上方に進路を変更し、焦点板６３において結像し、焦点板６３を通過する。

ただし、ライブビューを用いるようにしている場合、図５に示すように、焦点板６３を通過した光束は、ペンタミラー６５でその進路がさらに変更された後に、結像レンズ６９（結像光学系）を通過して表示用撮像素子７の撮像面上で再結像する。

つまり、ライブビュー（電子ビューファインダー）を用いるようにしている場合には、図５において表示用撮像素子７に至る点線で示した光路ＰＢに示すように、撮影レンズユニット３を通じて取り込まれた光束が導かれる。

なお、この場合にも、主ミラー６１で反射されて上方に進路を変更した光は、ダハミラー６５ａ，６５ｂで反射されて左右反転されて進行し、さらにミラー６５ｅでも反射されることによって上下も反転される。この後、ミラー６５ｅで反射された光束は、さらに結像レンズ６９で上下左右反転されて撮像素子７に到達する。

より詳細には、図４と図５とを比較すると判るように、図５においてはミラー６５ｅの
角度（カメラ本体部２に対する設置角度）が変更されている。具体的には、ミラー６５ｅは、図４の状態から、その下端側の軸ＡＸ１を中心に矢印ＡＲ１の向きに所定角度α分、回動している。

なお、ミラー６５ｅは、ライブビューを行うようにするために、操作者により切換ダイヤル８７が操作された場合に、自動的に回動し、光束を表示用撮像素子７に導くようにすることができる。

そして、このミラー６５ｅの角度変更によって、上述のように、ミラー６５ｅで反射される光（観察用光束）の反射角度が変更され、当該ミラー６５ｅによる反射光の進行経路が変更される。

具体的には、図４に示した状態に比べて、ミラー６５ｅへの入射角度θ１が比較的小さくなり、反射角度θ２も比較的小さくなる。その結果、ミラー６５ｅの反射光は、接眼レンズ６７に向かう光路からダハミラー６５ａ、６５ｂ寄りの光路へとその進路を上方に変更し、結像レンズ６９を通過して表示用撮像素子７に到達するようにされる。

なお、結像レンズ６９および表示用撮像素子７は、接眼レンズ６７よりも上方に配置されており、且つ、光学ビューファインダーを用いる際にミラー６５ｅから接眼レンズ６７へと進行する光束を遮らない位置に配置されている。

また、ミラー６５ｅで反射された光束の進路は、ミラー６５ｅの変更角度αに応じて、その２倍の大きさの角度β（＝２×α）に変更される。逆に言えば、反射光路の進行角度を角度β変更するために、ミラー６５ｅの回転角度は、当該角度βの半分の角度αで済む。

すなわち、ミラー６５ｅの比較的小さな回転角度でミラー６５ｅの反射光の進路を比較的大きく変更することが可能である。

また、ミラー６５ｅと撮像素子７とは比較的離れて配置されているため、ミラー６５ｅの回転角度を小さく変更するだけで、ミラー６５ｅによる２つの反射光を、互いに離れて配置された接眼レンズ６７および表示用撮像素子７へと確実に導くことが可能である。

すなわち、ミラー６５ｅの回転角度を小さく変更することによってミラー６５ｅによる反射光の光束を良好に２つの光路に選択的に進行させることが可能である。したがって、ミラー６５ｅの回転によるスペースの増大は最小限に止められる。

表示用撮像素子７は、ミラー６５ｅで反射され結像レンズ６９を通過して表示用撮像素子７に到達した被写体像に基づいて、ライブビュー画像を生成する。具体的には、微小時間間隔（例えば、１／６０秒）で複数の画像を順次に生成する。そして、取得された時系列の画像（動画像）は本体背面の表示装置１２において順次に表示される。

これによって、撮影者は、カメラ本体２の背面の表示装置１２の表示画面に表示される動画像（ライブビュー画像）を視認し、当該動画像を用いて構図決め（構図合わせ）を行うことが可能になる。

また、この場合も、図４を用いて説明した光学ファインダーによる構図決めの際と同様に、主ミラー６１とサブミラー６２とを介してＡＦモジュール２０に入射した光を用いてＡＦ動作が実現される。

以上のように、ミラー６５ｅで反射した後の観察用光束の進路は、ミラー６５ｅの反射角度の変更によって切り換えられる。すなわち、ミラー６５ｅから接眼レンズ６７およびファインダー窓１０に向かう光路ＰＡ（図４）と、ミラー６５ｅから結像レンズ６９および表示用撮像素子７に向かう光路ＰＢ（図５）との間で切り換えられる。

換言すれば、当該観察用光束の進路は、ミラー６５ｅの反射角度の変更によって、ミラー６５ｅで反射されてファインダー窓１０に向かう第１の光路ＰＡと、ミラー６５ｅで反射されて表示用撮像素子７に向かう第２の光路ＰＢとの間で切り換えられる。

［第１の実施形態のライブビュー処理の第１の例］
図１〜図６を用いて説明したこの第１の実施形態の撮像装置１においては、上述したように、ライブビューにより構図決め（構図合わせ）を行うことができる。しかし、上述もしたように、通常、光学ファインダーの視野率は１００％未満であり、この実施の形態の撮像装置１の光学ファインダーの視野率も１００％未満となっている。

このため、この第１の実施形態の撮像装置１においても、図３３（Ａ）を用いて説明したように、表示用撮像素子７を通じて取り込むようにした画像をそのまま視野率１００％の画像として表示装置１２の表示画面いっぱいに表示することができない。

そこで、この第１の実施形態の撮像装置１においては、以下に説明するライブビュー処理により、視野率１００％のライブビュー画像を表示装置１２の表示画面に表示することができるようにしている。

すなわち、表示用撮像素子７を通じて取り込んだ視野率が１００％未満の画像を用いるようにした場合であっても、以下に説明する処理により、視野率１００％のライブビュー画像を表示装置１２の表示画面に表示することができるようにしている。

図７に、この第１の実施形態のライブビュー処理の第１の例のメインルーチンのフローチャートを、また、図８〜図１２に、図７のメインルーチンにおいて用いられるサブシーケンス（サブルーチン）のフローチャートを示す。

図７に示すライブビュー処理の第１の例のメインルーチンは、上述もしたように、切換ダイヤル８７が操作され、ライブビュー機能（電子ビューファインダー）を用いるようにされた場合に、主に全体制御部１０１において実行される。

図７に示すメインルーチンが実行されると、全体制御部１０１は、まず、表示用撮像素子７を用いたライブビューを開始するための初期化ルーチンを実行する（ステップＳ１）。

このステップＳ１の初期化ルーチンは、図８に示す処理である。図８に示すように、初期化ルーチンにおいては、この第１の実施形態のライブビュー処理の第１の例において、ライブビュー表示で合成画像を生成する際に用いる撮影用撮像素子５側の撮影画像を保存する画像メモリ５６の画像記憶領域Ｘに全黒画像を書き込む（ステップＳ１０１）。この後、表示用撮像素子側の撮影準備動作ルーチンを実行する（ステップＳ１０２）。

図８に示した初期化ルーチンのステップＳ１０２において行われる表示用撮像素子側撮影準備動作ルーチンは、図９に示す処理である。この表示用撮像素子側撮影準備動作ルーチンにおいては、まず、光学ファインダー側へ光束を導くために主ミラー６１及びサブミラー６２を、図４、図５に示したようにダウンさせる（ステップＳ２０１）。この後、表示用撮像素子７の電源をオン（Ｏｎ）にして（ステップＳ２０２）、図９に示す表示用撮像素子側撮影準備動作ルーチンを終了する。

この図９に示す表示用撮像素子側撮影準備動作ルーチンの終了により、図８に示した初期化ルーチンも終了し、図７に示したメインルーチンに戻る。そして、全体制御部１０１は、表示用撮像素子側ライブビュー動作ルーチンを実行し（ステップＳ２）、ライブビューを行うようにする。

このステップＳ２において実行される表示用撮像素子側ライブビュー動作ルーチンは、図１０に示す処理である。表示用撮像素子側ライブビュー動作ルーチンにおいては、全体制御部１０１は、各部を制御し、まず、表示用撮像素子７への露光を行うようにする（ステップＳ３０１）。これにより、表示用撮像素子７、信号処理部５１、Ａ／Ｄ変換回路５２を通じて被写体の画像（ライブビュー用画像の画像データ）を取り込む。

次に、全体制御部１０１は、デジタル信号処理回路５０を制御し、ステップＳ３０１において取り込んだ画像に対して、所定のデジタル信号処理（画像処理１）を施す（ステップＳ３０２）。

この後、全体制御部１０１は、画像メモリ５６の撮影用撮像素子５を通じて取得した撮影画像の記憶領域である画像記憶領域Ｘに記録されている画像（画像データ）を読み出す（ステップＳ３０３）。

そして、全体制御部１０１は、ステップＳ３０３において読み出した撮影画像の画像と、表示用撮像素子７を通じて取り込んだライブビュー用画像とを合成するなどの処理（画像処理２）を実行する（ステップＳ３０４）。

この後、全体制御部１０１は、ステップＳ３０４において形成した合成画像をＶＲＡＭ１３１に書き込み、表示装置１２の表示画面にライブビュー表示を行う（ステップＳ３０５）。

なお、図１０のステップＳ３０２に行われる画像処理１では、ステップＳ３０１の表示用撮像素子７への露光で得られたライブビュー用画像の画像データに対して黒レベル補正、ＷＢ補正、ガンマ補正等の各種画像処理（各種補正処理）を実行する。

また、図１０のステップＳ３０４において行われる画像処理２では、ステップＳ３０２において画像処理１を施したライブビュー用画像と、画像メモリ５６の撮影画像用の画像記憶領域Ｘから読み出した撮影画像とを処理する。

具体的にステップＳ３０４においては、画像処理１を施したライブビュー用画像の画像データと、撮影画像用の画像記憶領域Ｘから読み出した画像データの解像度変換およびそれら２つの画像の合成を行う。

なお、この時点において、撮影画像用の画像記憶領域Ｘから読み出した撮影画像は、図８に示した初期化ルーチンのステップＳ１０１において書き込んだ全黒画像である。

そして、撮像装置においては、一般的に、撮像素子の解像度の方が表示装置１２の解像度より高い解像度となっている。このように撮像素子の解像度と表示装置の解像度が異なる場合、表示用撮像素子７からの画像を表示装置１２に表示する際に表示装置１２の解像度に適合するように解像度変換を行う。

しかし、この実施形態の撮像装置１においては、表示用撮像素子７を通じて取り込んだ画像について、表示装置１２の解像度に対し光学ファインダーの視野率と同じ大きさまで縮小した解像度変換を行う。

例えば、表示用撮像素子７の解像度がＵＸＧＡ（横１６００ドット×縦１２００ドット）、表示装置１２の解像度がＷＶＧＡ（横７２０ドット×縦４８０ドット）、光学ファインダーの視野率が９０％であるとする。

このとき、この発明が適用されていない撮像装置においては、表示用撮像素子からの１６００×１２００の画像を７２０×４８０に解像度変換する。しかし、この発明が適用されたこの実施形態の撮像装置１においては、表示用撮像素子７からの１６００×１２００の画像を６４８×４３２（７２０×４８０の０．９倍）へ解像度変換する。

これに対し、本来、撮影用撮像素子５を通じて撮影した撮影画像用の画像記憶領域Ｘに格納されている画像に対しては、表示装置１２の解像度に適合するように解像度変換を行う。

そして、解像度変換された表示用撮像素子７からのライブビュー用画像と、撮影画像用の画像記憶領域Ｘから読み出された画像との合成処理は、その一例として以下のようにして行う。

すなわち、撮影画像用の画像記憶領域Ｘから読み出されて解像度変換された画像の重心（２つの対角線の交点）に対し、光学ファインダーの視野率にあわせて解像度変換された表示用撮像素子７を通じて取り込んだライブビュー用画像を、その重心を合わせて上書きする。

このように合成処理することで、表示用撮像素子７を通じて取り込んだライブビュー画像は、表示装置１２の表示画面の中央部分のファインダー視野率に相当する大きさの部分（領域）に表示され、その周囲が、この時点においては黒枠表示となる。

なお、解像度変換された表示用撮像素子７からのライブビュー用画像と、撮影画像用の画像記憶領域Ｘから読み出された画像との合成処理の別の方法として、例えば、図２８に示す方法がある。

この方法は、図２８に示すように、撮影用撮影素子５側の撮影画像の左上隅を基準とし、縮小した表示用撮像素子７側のライブビュー用画像の左上隅を合わせる位置をｘ−ｙ座標（ｘ，ｙ）として、撮像装置１のＥＥＰＲＯＭ６０に記憶する。

そして、撮影用撮影素子５側の撮影画像（撮影画像用の画像記憶領域Ｘの画像）に対して、ＥＥＰＲＯＭ６０に記憶したｘ−ｙ座標（ｘ，ｙ）に基づく位置に、表示用撮像素子７からのライブビュー用画像を合わせ込んで上書きする。

このようにして、解像度変換された表示用撮像素子７からのライブビュー用画像と、撮影画像用の画像記憶領域Ｘから読み出された画像との合成処理を行うことができる。

なお、この図２８に示す方法の場合、画一的に基準位置（ｘ，ｙ）を決めても、両画像の中心位置がずれる場合もあると考えられる。そこで、製造時に、撮像装置毎に個別に調整することで、光学的またはメカ的な撮影範囲のずれを吸収することができる。

このようにして、図１０に示した表示用撮像素子側ライブビュー動作ルーチンのステップＳ３０４の画像処理２により、解像度変換されて合成処理された画像が、上述もしたように、ステップＳ３０５においてＶＲＡＭ１３１へ書き込まれる。これにより、撮像装置１の背面に設けられている表示装置１２の表示画面に、ライブビュー画像の表示が開始するようにされる。

そして、図１０に示した表示用撮像素子側ライブビュー動作ルーチンが終了すると、全体制御部１０１は、図７に示したライブビュー処理のメインルーチンに戻り、レリーズボタン１１が半押状態（Ｐ１状態）となったか否かを判断する（ステップＳ３）。

ステップＳ３の判断処理において、レリーズボタン１１が半押しされていないと判断したときには、全体制御部１０１は、ステップＳ２からの処理を繰り返し、図１０を用いて説明した表示用撮像素子側ライブビュー動作ルーチンを実行し続ける。

ステップＳ３の判断処理において、レリーズボタン１１が半押しされたと判断したときには、全体制御部１０１は、ＡＦモジュール２０やフォーカス制御部１２１等の関係各部を制御し、位相差ＡＦによる自動焦点合わせを実行する（ステップＳ４）。

次に、全体制御部１０１は、図１には図示しなかったが、撮像装置１内に設けられる測光センサーによる測光を実行し、露出値を決定する（ステップＳ５）。

次に、全体制御部１０１は、表示用撮像素子側の撮影終了動作ルーチンを実行する（ステップＳ６）。このステップＳ６で実行される表示用撮像素子側撮影終了動作ルーチンは、図１１に示す処理である。

図１１に示すように、表示用撮像素子側撮影終了動作ルーチンにおいては、全体制御部１０１は、まず、表示用撮像素子７の電源をＯｆｆ（オフ）にする（ステップＳ４０１）。この後、全体制御部１０１は、ミラー機構６を制御し、撮影用撮像素子５側へ光束を導くために主ミラー６１、サブミラー６２をアップさせる（ステップＳ４０２）。そして、図７に示したメインルーチンに戻る。

次に、全体制御部１０１は、撮影用撮像素子側撮影動作ルーチンを実行する（ステップＳ７）。このステップＳ７で実行される撮影用撮像素子側の撮影動作ルーチンは、図１２に示す処理である。

図１２に示すように、撮影用撮像素子側の撮影動作ルーチンにおいては、全体制御部１０１は、まず、撮影用撮像素子５の電源をＯｎ（オン）にし（ステップＳ５０１）、シャッター４を解放する（ステップＳ５０２）。

これにより、レンズ群３７を通じて集光された光束は、撮影用撮像素子５に到達するので、全体制御部１０１は、露出値に応じた撮影用撮像素子５への露光を行うようにし、信号処理部５１、Ａ／Ｄ変換回路５２等を通じて撮影画像を取り込む（ステップＳ５０３）。

そして、全体制御部１０１は、シャッター４を閉鎖し（ステップＳ５０４）、撮影用撮像素子５の電源をＯｆｆ（オフ）にする（ステップＳ５０５）。この後、全体制御部１０１は、デジタル信号処理部５０を制御し、撮影用撮像素子５を通じて取り込まれた撮影画像の画像に対して、各種の補正処理などのデジタル信号処理を行う（ステップＳ５０６）。

そして、全体制御部１０１は、撮影用撮像素子５を通じて取り込み、デジタル信号処理した撮影画像の画像を画像メモリ５６の撮影画像用の画像記憶領域Ｘに記録する（ステップＳ５０７）。そして、図７に示したメインルーチンに戻る。

なお、ステップＳ５０６において実行される画像処理１は、図１０に示した表示用撮像素子側ライブビュー動作ＲＴＮのステップＳ３０２で実行した画像処理１と同様の処理である。すなわち、撮影用撮像素子５からの画像データに対して黒レベル補正、ＷＢ補正、ガンマ補正等の各種画像処理を実行する。

そして、全体制御部１０１は、図９のステップＳ１０２で実行した表示用撮像素子側撮影準備動作ルーチンを再度実行する（ステップＳ８）。すなわち、光学ファインダー側へ光束を導くために主ミラー６１、サブミラー６２をダウンさせ（ステップＳ２０１）、表示用撮像素子７の電源をＯｎ（オン）にする（ステップＳ２０２）。

この後、図７のメインルーチンに戻り、全体制御部１０１は、図１０に示した表示用撮像素子側ライブビュー動作ルーチンを再度実行する（ステップＳ９）。

そして、図１０を用いて上述したように、表示用撮像素子７への露光（ステップＳ３０１）、画像処理１（ステップＳ３０２）、撮影画像用の画像記憶領域Ｘからの撮影画像の読み出し（ステップＳ３０３）が順次に行われる。

これに続き、全体制御部１０１は、画像処理２を実行する（ステップＳ３０４）。このステップＳ３０４の処理は、ステップＳ３０１、ステップＳ３０２において処理された表示用撮像素子７からのライブビュー画像と、ステップＳ３０３において読み出された撮影用撮像素子５を通じて取得した撮影画像とを解像度変換して合成するものである。

この後、ステップＳ３０４の画像処理２により形成された画像データが、ＶＲＡＭ１３１に記録されて、表示装置１２の表示画面にライブビュー画像が表示される（ステップＳ３０５）。

この場合、画像メモリ５６の撮影画像用の画像記憶領域Ｘに記録されている画像データが、図７のステップＳ２で実行した処理で用いた全黒画像とは異なり、ステップＳ７の処理で撮影用撮像素子５通じて撮影された撮影画像の画像データである。

このため、当該撮影画像は実際に撮影される範囲となっているため、この時のライブビュー画像は視野率１００％の表示となる。

つまり、この場合、表示素子の表示画面の中央部分に、表示用撮像素子７を通じて取得したライブビュー画像が表示され、その周囲に、ステップＳ７において、撮影用撮像素子５を通じて取得した撮影画像が表示される。

このように、表示用撮像素子７からの画像と、撮影用撮像素子５からの画像とが、解像度変換されて合成されることにより、視野率１００％のライブビュー画像が合成により形成されて表示されることになる。

そして、全体制御部１０１は、レリーズボタン１１が全押し状態（Ｐ２状態）になったか否かを判断する（ステップＳ１０）。ステップＳ１０の判断処理において、全押しされていないと判断したときには、レリーズボタン１１１は半押し状態（Ｐ１状態）か否かを判断する（ステップＳ１１）。

ステップＳ１１の判断処理において、半押し状態であると判断したときには、全体制御部１０１は、ステップＳ９からの処理を繰り返すようにする。したがって、ステップＳ９の処理の後、レリーズボタン１１を半押ししている間は、ステップＳ９の処理により、表示用撮像素子７による露光および表示装置１２への画像表示が一定周期で実行される。

また、ステップＳ１１の判断処理において、半押し状態でもない、すなわち、レリーズボタン１１の半押し状態から全押しせずに半押しを解除した場合には、図７のステップＳ１の初期化ルーチンからの処理を繰り返すようにする。すなわち、主ミラー６１、サブミラー６２はミラーダウンしたまま初期状態へ移行する。

そして、ステップＳ１０の判断処理において、レリーズボタン１１が全押し状態（Ｐ２状態）になったと判断したときには、図１１に示した表示用撮像素子側撮影終了動作ルーチンを再度実行する（ステップＳ１２）。これにより、表示用撮像素子の電源Ｏｆｆ（オフ）（ステップＳ４０１）、主ミラー６１、サブミラー６２のミラーアップ（ステップＳ４０２）が行われる。

そして、全体制御部１０１は、図１２に示した撮影用撮像素子側撮影動作ルーチンを再度実行する（ステップＳ１３）。これにより、撮影用撮像素子５の電源Ｏｎ（ステップＳ５０１）、シャッター４の開放（ステップＳ５０２）、露出値に応じた撮影用撮像素子５への露光（ステップＳ５０３）、シャッター４の閉鎖（ステップＳ５０４）が実行される。

さらに、撮影用撮像素子５の電源Ｏｆｆ（ステップＳ５０５）、撮影された撮影画像の画像データに対する画像処理１（ステップＳ５０６）、撮影画像用の画像記憶領域Ｘへの画像処理された撮影画像データの記録（ステップＳ５０７）が実行される。

そして、最後に、図７に示すように、全体制御部１０１は、デジタル信号処理部５０、カードＩ／Ｆ１３２を制御し、画像メモリ５６の撮影画像用の画像記憶領域Ｘに記録された撮影画像の不画像データをメモリカード９０に記録する（ステップＳ１４）。この後、全体制御部１０１は、図７に示した処理のステップＳ１からの処理を繰り返すようにする。

これにより、このライブビュー処理の第１の例の場合、表示用撮像素子７を通じて取り込むようにしている視野率が１００％未満の動画像を主に用いてライブビュー表示を行うようにしているにもかかわらず、視野率１００％のライブビュー画像を表示装置１２の表示画面に表示することができる。

［第１の実施形態のライブビュー処理の第１の例の効果］
図１３は、上述した第１の実施形態のライブビュー処理の第１の例を適用した撮像装置１で表示されるライブビュー画像の表示例を説明するための図である。また、図１４は、表示用撮像素子を用いた撮像装置において、当該第１の例を適用しない場合のライブビュー画像の表示例を説明するための図である。

図７〜図１２を用いて説明したように、この第１の実施形態の撮像装置１で行われるライブビュー処理の第１の例の場合、ライブビュー機能が用いるようにされると、表示用撮像素子７を通じて取得するライブビュー画像の表示が行われる。

この場合、図７に示したステップＳ１、ステップＳ２の処理により、表示装置１２の表示画面に表示される画像は、図１３（ａ）に示すように表示される。この場合、光学ファインダーの視野率に応じた画像の周囲を、全黒で埋めることにより、当該全黒部分の画像も撮影可能であることも示すことができるようにされる。この全黒でライブビュー画像の周囲を埋める技術は、従来からの手法である。

そして、図７のステップＳ２の処理により、図１３（ａ）に示したように表示装置１２の表示画面に表示されるライブビュー画像を見ながら構図決めを行い、ユーザーがレリーズボタン１１を半押したとする。

この場合には、図７のステップＳ４〜ステップＳ９の処理が行われ、視野率１００％の画像を取得する撮影用撮像素子５を通じて取得する画像に対して、表示用撮像素子７からのライブビュー画像が合成される。

これにより、図１３（ｂ）に示すように、表示装置１２の表示画面には、その中央部分（内側）に、表示用撮像素子７からのライブビュー画像（動画像）が表示される。そして、当該ライブビュー画像の周囲（外側）に、撮影用撮像素子５からの撮影画像の該当部分が表示される。

この場合、表示装置１２の表示画面に表示されるライブビュー画像は、その外側と内側とで異なる撮像素子からの画像が表示するようにされるが、レリーズボタン１１の半押し状態のときに合成するようにしている。したがって、撮影の直前において、視野率１００％のライブビュー画像を表示装置１２の表示画面に表示して確認することができる。

すなわち、この第１の例を用いない場合、撮影用撮像素子５からの画像と、表示用撮像素子７からの画像とを合成することは無い。このため、図１４（ａ）、（ｂ）に示すように、この第１の例を用いない場合、表示用撮像素子を用いたライブビュー画像の表示時には、レリーズボタンの半押し前も、半押し状態となった後においても、ライブビュー画像の周囲には全黒部分が存在してしまうことになる。

しかし、この第１の実施形態のライブビュー処理の第１の例の場合には、図１３（ａ）、（ｂ）に示したように、半押し状態にすると、視野率１００％の画像を表示装置１２の表示画面に表示すことができる。

これにより、ライブビューを用いた場合であっても、表示装置の表示画面に表示される画像によって、撮影可能範囲を確実に認識し、適切に構図決めを行って、写真撮影を行うことができるようにされる。

また、ライブビュー画像は、表示用撮像素子７を通じて取得するので、レンズ群３７を通じて集光される光束は、図５を用いて説明したようにＡＦモジュール２０にも到達し、位相差ＡＦを行って、迅速に焦点を合わせるようにすることもできる。

［構図の微調整を行った場合の処理］
なお、ズームの焦点距離を１ｍｍ〜２ｍｍ程度変化させる等、構図の微調整を行った場合には、撮影画像用の画像記憶領域Ｘの記録画像(撮影用撮像素子５による撮影画像)と表示用撮像素子７からの画像とを比較して変化量を検出する。

そして、検出した当該変化量に基づいて、撮影画像用の画像記憶領域Ｘの記録画像を、例えば、アフィン変換等を用いて変形させて構図の微調整を行った後の画像を簡易生成する。つまり、画像記憶領域Ｘの記録画像を微調整する。なお、アフィン変換は、線形変換と平行移動の組み合わせによる図形や形状を移動させる場合の方式であり、この他の方式を用いるようにしてももちろんよい。

このようにすることで、表示装置１２の表示画面に表示されるライブビュー画像で、光学ファインダーの視野枠に相当する動画像と視野枠外に相当する静止画との境界で不自然な画像となるのを緩和することが可能となる。

なお、ズーム焦点距離を調整したか否かの判別、撮影画像用の画像記憶領域Ｘの記録画像と表示用撮像素子７からの画像との変化量の検出は、全体制御部１０１が行うことができる。また、アフィン変換等を用いて画像記憶領域Ｘの画像を変形させて構図の微調整を行った後の画像の生成についても、全体制御部１０１が行うことができる。

［第１の実施形態のライブビュー処理の第２の例］
図７〜図１２を用いて説明したように、上述した第１の実施形態のライブビュー処理の第１の例の場合、レリーズボタン１１の半押し時と、全押し時との両方において、主ミラー６１、サブミラー６２のアップダウンとシャッター４の開閉が行われる。

つまり、上述した第１の例の場合、半押し時と全押し時とで、合計２往復の主ミラー６１等のアップダウンおよびシャッター４の開閉が行われるので、できればよりスムーズにライブビュー処理を行えるようにすることも望まれる。

そこで、主ミラー等のアップダウンやシャッターの開閉を少なくし、全体的な動作をよりスムーズにするようにしたのが、この第１の実施形態のライブビュー処理の第２の例である。

図１５に、この第１の実施形態のライブビュー処理の第２の例のメインルーチンのフローチャートを、また、図１６〜図１９に、図１５のメインルーチンにおいて用いられるサブシーケンス（サブルーチン）のフローチャートを示す。なお、図１５、図１６に示した処理においては、図９〜図１１を用いて説明したサブルーチンも用いられる。

図１５に示すライブビュー処理の第２の例のメインルーチンもまた、上述の第１の例の場合と同様に、切換ダイヤル８７が操作され、ライブビュー機能（電子ビューファインダー）を用いるようにされた場合に、主に全体制御部１０１において実行される。

図１５に示すメインルーチンが実行されると、全体制御部１０１は、まず、撮影用撮像素子５を用いたライブビューを開始するための初期化ルーチンを実行する（ステップＸ１）。

このステップＸ１の初期化ルーチンは、図１６に示す処理である。図１６に示した初期化ルーチンでは、合成画像を生成する際に用いる撮影用撮像素子５側の撮影画像を保存する画像メモリ５６の画像記憶領域Ｘに全黒画像を書き込む（ステップＸ１０１）。この後、表示用撮像素子側撮影終了動作ルーチンを実行する（ステップＸ１０２）。

図１６に示した初期化ルーチンのステップＸ１０２において行われる表示用撮像素子側撮影終了動作ルーチンは、上述の第１の例において用いた図１１に示した処理である。表示用撮像素子側撮影終了動作ルーチンにおいては、図１１に示したように、まず、表示用撮像素子７の電源をＯｆｆ（オフ）にする（ステップＳ４０１）。そして、主ミラー６１及びサブミラー６２を、図６に示したようにアップさせる（ステップＳ４０２）。

そして、全体制御部１０１は、図１１に示す処理を終了し、図１６の初期化ルーチンに戻って、撮影用撮像素子側撮影準備動作ルーチンを実行する（ステップＸ１０３）。このステップＸ１０３において行われる撮影用撮像素子側撮影準備動作ルーチンは、図１７に示す処理である。

図１７に示すように、撮影用撮像素子側撮影準備動作ルーチンにおいて、全体制御部１０１は、まず、撮影用撮像素子５の電源をＯｎ（オン）にする（ステップＸ２０１）。そして、全体制御部１０１は、シャッター４を開放する（ステップＸ２０２）。

これにより、レンズ群３７を通じて集光された光束が、撮影用撮像素子５に導かれるようにされる。そして、図１７の撮影用撮像素子側撮影準備動作ルーチンを終了し、図１６に示した初期化ルーチンに戻る。

そして、初期化ルーチンにおいては、図１６のステップＸ１０３の処理の後、当該初期化ルーチンを終了して、図１５に示すメインルーチンに戻り、撮影用撮像素子側ライブビュー動作ルーチンを実行する（ステップＸ２）。

このステップＸ２において行われる撮影用撮像素子側ライブビュー動作ルーチンは、図１８に示す処理であり、撮影用撮像素子５を用いたライブビューが開始される。すなわち、ステップＸ２の撮影用撮像素子側ライブビュー動作ルーチンにおいては、図１８に示すように、撮影用撮像素子５への露光（ステップＸ３０１）、画像処理１（ステップＸ３０２）、表示装置１２への画像表示（ステップＸ３０３）が行われる。また、ステップＸ３０３の処理の後、露出条件更新処理も行う（ステップＸ３０４）。

ステップＸ３０２の画像処理１では、ステップＸ３０１の撮影用撮像素子５への露光で得られた画像データに対して黒レベル補正、ＷＢ補正、ガンマ補正等の各種画像処理を実行する。

そして、全体制御部１０１は、ステップＸ２の処理の後、レリーズボタン１１が半押し状態（Ｐ１状態）になったか否かを判断する（ステップＸ３）。ステップＸ３の判断処理において、半押し状態になっていないと判断したときには、ステップＸ２からの処理を繰り返す。つまり、レリーズボタン１１が押されない限りは撮影用撮像素子側ライブビュー動作ルーチンを繰り返し実行し続ける。

ステップＸ３の判断処理において、レリーズボタン１１が半押し状態（Ｐ１状態）になったと判断したときには、撮影用撮像素子側撮影終了動作ルーチンを実行する（ステップＸ４）。このステップＸで実行される撮影用撮像素子側撮影動作終了動作ルーチンは、図１９に示す処理である。

図１９に示すように、撮影用撮像素子側撮影動作終了動作ルーチンにおいて、全体制御部１０１は、露出値に応じた撮影用撮像素子５への露光を行うようにし（ステップＸ４０１）、シャッター４を閉鎖する（ステップＸ４０２）。

この後、全体制御部１０１は、撮影用撮像素子５の電源をＯｆｆ（オフ）にし（ステップＸ４０３）、撮影用撮像素子５を通じて撮影された撮影画像の画像データに対して、画像処理１を施す（ステップＸ４０４）。そして、全体制御部１０１は、ステップＸ４０４において処理された画像データを画像メモリ５６の撮影画像用の画像記憶領域Ｘに記録し（ステップＸ４０５）、この図１９に示す処理を終了する。

そして、図１５に示したメインルーチンに戻り、表示用撮像素子側撮影準備動作ルーチンを実行する（ステップＸ５）。このステップＸ５で実行される処理は、上述した第１の例において用いた図９に示した処理である。

図９に示した表示用撮像素子側撮影準備動作ルーチンにおいては、上述もしたように、全体制御部１０１は、光学ファインダー側へ光束を導くために主ミラー６１、サブミラー６２をダウンさせる（ステップＳ２０１）。この後、全体制御部１０１は、表示用撮像素子７の電源をＯｎ（オン）にして（ステップＳ２０２）、図９に示す処理を終了し、図１５に示したメインルーチンに戻る。

そして、全体制御部１０１は、ＡＦモジュール２０やフォーカス制御部１２１等の関係各部を制御し、位相差ＡＦによる自動焦点合わせを実行する（ステップＸ６）。次に、全体制御部１０１は、図１には図示しなかったが、撮像装置１内に設けられる測光センサーによる測光を実行し、露出値を決定する（ステップＸ７）。

この後、全体制御部１０１は、表示用撮像素子側ライブビュー動作ルーチンを実行し（ステップＸ８）、表示用撮像素子７を用いたライブビューを開始する。このステップＸ８において実行される表示用撮像素子側ライブビュー動作ルーチンは、上述した第１の例において用いた図１０に示した処理である。

図１０に示した表示用撮像素子側ライブビュー動作ルーチンにおいては、上述もしたように、全体制御部１０１は、表示用撮像素子７への露光を行ってライブビュー用の画像を取り込むようにする（ステップＳ３０１）。そして、表示用撮像素子７を介して取得したライブビュー画像に対する画像処理１を行うようにする（ステップＳ３０２）。

この後、全体制御部１０１は、画像メモリ５６の撮影画像用の画像記憶領域Ｘから撮影画像を読み出す（ステップＳ３０３）。そして、全体制御部１０１は、表示用撮像素子７からの画像の画像データと、ステップＳ３０３において読み出した画像データとを用いて、画像処理２を実行する（ステップＳ３０４）。

この後、後述もするが、ステップＳ３０４の画像処理２により形成されたライブビュー用画像の画像データが、ＶＲＡＭ１３１に書き込まれ、表示装置１２の表示画面に、ライブビュー画像が表示される（ステップＳ３０５）。

なお、ステップＳ３０２の画像処理１では、ステップＳ３０１の表示用撮像素子７への露光で得られた画像データに対して黒レベル補正、ＷＢ補正、ガンマ補正等の各種画像処理を実行する。

また、ステップＳ３０４の画像処理２では、画像処理１で画像処理を施した表示用撮像素子７からのライブビュー用画像と、ステップＳ３０３において読み出した撮像用撮像素子５を通じて取得した撮影画像とについて、解像度変換および画像合成を行う。

この場合、ステップＳ３０３において画像記憶領域Ｘから読み出された画像は、上述のように撮影用撮像素子５を用いた撮影画像であり、その撮影画像は実際に撮影される範囲となっているため、この時のライブビュー画像は視野率１００％の表示となる。

そして、全体制御部１０１は、レリーズボタン１１が全押し状態（Ｐ２状態）になったか否かを判断する（ステップＸ９）。ステップＸ９の判断処理において、全押しされていないと判断したときには、レリーズボタン１１１は半押し状態（Ｐ１状態）か否かを判断する（ステップＸ１０）。

ステップＸ１０の判断処理において、半押し状態であると判断したときには、全体制御部１０１は、ステップＸ８からの処理を繰り返すようにする。したがって、ステップＸ８の処理の後、レリーズボタン１１を半押ししている間は、ステップＸ８の処理が繰り返され、表示用撮像素子７による露光および表示装置１２への画像表示が一定周期で実行される。

また、ステップＸ１０の判断処理において、半押し状態でもない、すなわち、レリーズボタン１１の半押し状態から全押しせずに半押しを解除した場合には、図１５のステップＸ１の初期化ルーチンからの処理を繰り返すようにする。すなわち、主ミラー６１、サブミラー６２はミラーダウンしたまま初期状態へ移行する。

そして、ステップＸ９の判断処理において、レリーズボタン１１が全押し状態（Ｐ２状態）になったと判断したときには、図１１に示した表示用撮像素子側撮影終了動作ルーチンを再度実行する（ステップＸ１１）。これにより、表示用撮像素子の電源Ｏｆｆ（オフ）（ステップＳ４０１）、主ミラー６１、サブミラー６２のミラーアップ（ステップＳ４０２）が行われる。

そして、全体制御部１０１は、上述した第１の例でも用いた図１２に示した撮影用撮像素子側撮影動作ルーチンを実行する（ステップＸ１２）。これにより、撮影用撮像素子５の電源Ｏｎ（ステップＳ５０１）、シャッター４の開放（ステップＳ５０２）、露出値に応じた撮影用撮像素子５への露光（ステップＳ５０３）、シャッター４の閉鎖（ステップＳ５０４）が実行される。

さらに、撮影用撮像素子５の電源Ｏｆｆ（ステップＳ５０５）、撮影された撮影画像の画像データに対する画像処理１（ステップＳ５０６）、撮影画像用の画像記憶領域Ｘへの画像処理された撮影画像データの記録（ステップＳ５０７）が実行される。

そして、最後に、図１５に示すように、全体制御部１０１は、デジタル信号処理部５０、カードＩ／Ｆ１３２を制御し、画像メモリ５６の撮影画像用の画像記憶領域Ｘに記録された撮影画像の画像データをメモリカード９０に記録する（ステップＸ１３）。この後、全体制御部１０１は、図１５に示した処理のステップＸ１からの処理を繰り返すようにする。

これにより、図１５に示したこの第２の例の場合にも、表示用撮像素子７を通じて取り込むようにしている視野率が１００％未満の動画像を主に用いてライブビュー表示を行うようにしているにもかかわらず、視野率１００％のライブビュー画像を表示装置１２の表示画面に表示することができる。

しかも、始めに、撮影用撮像素子５を用いてライブビューを開始するようにしている。このため、上述した第１の実施形態のライブビュー処理の第１の例の場合よりも、主ミラー６１、サブミラー６２のアップダウンやシャッターの開閉の回数を抑制し、よりスムーズに、視野率１００のライブビュー表示を行うことができる。

［第１の実施形態のライブビュー処理の第２の例の効果］
図２０は、上述した第１の実施形態のライブビュー処理の第２の例を適用した撮像装置１で表示されるライブビュー画像の表示例を説明するための図である。また、図２１は、表示用撮像素子を用いた撮像装置において、当該第２の例を適用しない場合のライブビュー画像の表示例を説明するための図である。

図１５〜図１９、図９〜図１２を用いて説明したように、この第１の実施形態の撮像装置１で行われるライブビュー処理の第２の例の場合、ライブビューが用いるようにされると、まず、撮影用撮像素子５を用いてライブビュー画像を表示するようにする。

この場合、図１５に示したステップＸ１、ステップＸ２の処理により、表示装置１２の表示画面に表示される画像は、図２０（ａ）に示すように表示される。この場合、撮影用撮像素子５を用いているので、ライブビュー画像は視野率１００％の画像（動画）である。

そして、図１５のステップＳ２の処理により、図２０（ａ）に示したように表示装置１２の表示画面に表示されるライブビュー画像を見ながら構図決め（構図合わせ）を行い、ユーザーがレリーズボタン１１を半押したとする。

この場合には、図１５のステップＳ４〜ステップＳ８の処理が行われ、視野率１００％の画像を取得する撮影用撮像素子５を通じて取得して画像記憶領域Ｘに記憶した画像に対して、表示用撮像素子７からのライブビュー画像（動画）が合成される。

これにより、図２０（ｂ）に示すように、表示装置１２の表示画面には、その中央部分（内側）に、表示用撮像素子７からのライブビュー画像（動画像）が表示される。そして、当該ライブビュー画像の周囲（外側）に、撮影用撮像素子５からの撮影画像の該当部分が表示される。

この場合、表示装置１２の表示画面に表示されるライブビュー画像は、その外側と内側とで異なる撮像素子からの画像が表示するようにされるが、レリーズボタン１１の半押し状態のときに合成するようにしている。したがって、撮影の直前において、視野率１００％のライブビュー画像を表示装置１２の表示画面に表示して確認することができる。

そして、この第２の例を用いない場合、ライブビュー機能が用いられるようにされ、レリーズボタン１１が半押しされるまでは、図２１（ａ）に示すように、視野率１００％のライブビュー画像を表示することができる。

しかし、この第２の例を用いない場合、レリーズボタン１１が半押しされると、表示用撮像素子７からのライブビュー用画像を用いたライブビュー表示が行われるが、撮影用撮像素子５からの画像と合成することはない。このため、図２１（ｂ）に示したように、ライブビュー画像の周囲には例えば全黒の画像部分ができ、視野率１００％のライブビュー画像の表示は行えない。

しかし、このライブビュー処理の第２の例の場合には、図２０（ａ）、（ｂ）に示したように、半押し状態にすると、視野率１００％の画像を表示装置１２の表示画面に表示すことができる。

これにより、ライブビューを用いた場合であっても、表示装置の表示画面に表示される画像によって、撮影可能範囲を確実に認識し、適切に構図決めを行って、写真撮影を行うことができるようにされる。

また、ライブビュー画像は、基本的に表示用撮像素子７を通じて取得するので、レンズ群３７を通じて集光される光束は、ＡＦモジュール２０にも到達し、位相差ＡＦを行って、迅速に焦点を合わせるようにすることもできる。

しかも、主ミラー６１等のアップダウンの回数、シャッターの開閉の回数も、第１の実施形態のライブビュー処理の第１の例に比べて少なくすることができるので、よりスムーズなライブビュー処理を実現することができる。

また、この第１の実施形態のライブビュー処理の第２の例の場合にも、上述した第１の例の場合と同様に、構図の微調整を行った場合には、アフィン変換等を用いて、表示画像の微調整を行うこともできる。

＜第２の実施形態＞
［第２の実施形態の概要］
上述した第１の実施形態の撮像装置１においては、ライブビュー処理の第１の例、第２の例を用いてライブビューを行うようにすると、構図を大きく変更した場合に不都合が生じる場合がある。

例えば、被写体が人物でその人物が歩いたのを追尾する場合を考える。このように、構図を決定しレリーズボタン１１を半押しした状態（Ｐ１状態）で構図を大きく変更した場合、撮影用撮像素子５を通じて撮影画像用の画像記憶領域Ｘに記録した撮影画像と、表示用撮像素子７を通じて取得したライブビュー用画像とは大きく異なったものとなる。

例えば、レリーズボタン１１を半押しし、図７のステップＳ７で取得して画像記録領域Ｘに記録した撮影画像と、構図を大きく変更した後、再度構図を決定し、図７のステップＳ９で表示用撮像素子７を通じて取得する画像とは全く異なったものとなる場合がある。

つまり、上述した第１の実施形態の撮像装置１においては、表示装置１２の表示画面に表示されるライブビュー画像では、光学ファインダーの視野枠に相当する部分は構図変更後の動画像が表示されている。

しかし、視野枠外に相当する静止画は構図変更前の撮影画像用の画像記憶領域Ｘに記憶した撮影画像となっているために、全体として不自然な表示画像となってしまう場合があると考えられる。そこで、このような不具合を解消するための第２の実施形態について以下に説明する。

［撮像装置１Ａの構成］
図２２は、この第２の実施形態の撮像装置１Ａを説明するためのブロック図である。この第２の実施形態の撮像装置１Ａは、図２２に示すように、ジャイロセンサー１３４ａ、１３４ｂを備える点を除き、その他の部分は、図３に示した第１の実施形態の撮像装置１と同様に構成されたものである。

このため、図２２において、図３に示した第１の実施形態の撮像装置１と同様に構成される部分には、同じ参照符号を付し、その部分についての詳細な説明は重複するので省略する。

また、この第２の実施形態の撮像装置１Ａもまた、その外観及びミラー機構等は、図１、図２、図４〜図６を用いて説明した第１の実施形態の撮像装置１と同様に構成されたものである。すなわち、この第２の実施形態の撮像装置１Ａもまた、光学ファインダーの視野率は１００％未満となっている。

そして、図２２に示した第２の実施形態の撮像装置１Ａにおいて、ジャイロセンサー１３４ａは、撮影レンズユニット（交換レンズ）３の光軸方向に対して、横軸方向（左右に直交する方向）の加速度変化を検出するものである。また、ジャイロセンサー１３４ｂは、撮影レンズユニット（交換レンズ）３の光軸方向に対して、縦軸方向（上下に直交する方向）の加速度変化を検出するものである。

これらジャイロセンサー１３４ａ、１３４ｂからの検出出力は、図２２に示したように、全体制御部１０１に供給され、全体制御部１０１が撮像装置１Ａの挙動（動き）を監視することができるようにしている。

ジャイロセンサー１３４ａ、１３４ｂの出力伝達関数Ｖ０［Ｖ］は、基準電圧Ｖｒｅｆ［Ｖ］、角速度ω［ｄｅｇ／ｓ］、感度ＳＦ［Ｖ・ｓ／ｄｅｇ］（固定値）とすると、
Ｖ０ ＝ ＳＦ・ω＋Ｖｒｅｆ［Ｖ］ …式（１）
と表される。

そして、撮像装置１Ａを地面に対して水平を保つようにする。この場合に、ジャイロセンサー１３４ａの検知方向を撮影レンズユニット３の光軸方向に対して、撮像装置１Ａを右方向に動かした場合を基準電圧Ｖｒｅｆに対して正、左方向に動かした場合を基準電圧Ｖｒｅｆに対して負とする。

図２３は、この場合のジャイロセンサー１３４ａの検出出力（出力波形）の一例について説明するための図である。

図２３において、（１）および（５）、（９）は、撮像装置１Ａを固定させている状態のときの出力電圧（検出出力）を示している。また、（２）は、撮像装置１Ａを右方向に徐々に移動速度を上げながら移動させた場合の出力電圧を示している。

また、図２３において、（３）は撮像装置１Ａを右方向へ一定速度で移動させた場合の出力電圧を示し、（４）は撮像装置１Ａを右方向に徐々に移動速度を下げて移動させ最後に停止させた場合の出力電圧を示している。

また、図２３において、（６）は撮像装置１Ａを左方向へ徐々に移動速度を上げて移動させた場合の出力電圧を示し、（７）は撮像装置１Ａを左方向へ一定速度で移動させた場合の出力電圧を示している。

また、図２３において、（８）は撮像装置１Ａを左方向へ徐々に移動速度を下げて移動させ、最後に停止させた場合の出力電圧を示している。また、図２３において、（２）、（４）、（６）、（８）の傾きは撮像装置１Ａの角速度（移動速度）が速いほど大きくなる。

なお、ここでは、撮像装置１Ａを光軸方向に対して左右に振る場合を例にして説明したが、光軸方向に対して上下に振るようにした場合には、ジャイロセンサー１３４ｂによって、同様に撮像装置１Ａの挙動（動き）を検出することができる。

次に、実際に構図は変更された場合において、ジャイロセンサーの検出出力に応じて、ライブビュー画像を適切に変えるようにする場合の処理について説明する。図２４は、ジャイロセンサーの検出出力に応じて、ライブビュー画像を適切に変えるタイミングを検出できるようにすることについて説明するための図である。

ジャイロセンサー１３４ａ、３４ｂは、手振れ程度の揺れも検知可能である。このため、手振れ程度の揺れに伴う電圧変動を構図が変更されたと誤検出しないように、正側および負側に閾値（Ｔｈ＋、Ｔｈ−）を設定する。この閾値Ｔｈ＋、Ｔｈ−は、手振れ程度の揺れは検出せず、同時に構図が変更されたことは検知できるような電圧レベルに設定する。

さらに、出力電圧が閾値を連続して越える回数をカウントし、ある一定回数連続して閾値を越えた場合のみ構図が変更されたと解釈するようにする。これは、ノイズ等により突発的に閾値をこえる電圧出力が発生することで構図が変更されたと誤認識する不具合を避けるためである。このような処理をすることで、構図が変更されたことを正確に検知することが可能となる。

したがって、図２４において、符号Ａを付した部分は、ジャイロセンサーの検出出力は閾値以下であるので、構図変化ではなく、手振れであると判別することができる。

また、図２４において、符号Ｂを付した部分は、ジャイロセンサーの検出出力は閾値（Ｔｈ＋）以上であり、さらに所定時間（所定カウント数）以上、閾値（Ｔｈ＋）を超えているので、構図変化が発生したと判別することができる。なお、ここで、所定時間は、例えば図２４における時間方向のメモリ３つ分に相当する時間などと言うように予め決められるものである。

また、図２４において、符号Ｃを付した部分は、閾値（Ｔｈ−）を超えているが、超えている期間が、所定時間（所定カウント数）より小さいため、構図変化ではなく、単なるノイズであると判別することができる。

そして、図２４の符号Ｂで示した部分のように、構図変化が発生したことを検出した場合に、撮影用撮像素子５を通じて撮影画像を取り込み直すようにする。このようにすることにより、上述したように、ライブビュー機能を用いている場合に、構図変化が発生した場合であっても、視野率１００％のライブビュー画像が不自然なものとなることもないようにされる。

［第２の実施形態のライブビュー処理の第１の例］
そして、この第２の実施形態の撮像装置１Ａにおいても、上述した第１の実施形態の撮像装置１の場合と同様にして、視野率１００％のライブビュー画像を表示して構図決めを行うことができるものである。

この第２の実施形態の撮像装置１Ａにおいては、撮像装置１Ａが大きくパーンするなどして構図変化が発生した場合を正確に検出する。そして、構図変化が発生した場合に、ライブビュー画像を形成するための撮影用撮像素子５を通じての撮影画像の取り込み直しを行うことができるようにしている。

図２５に、この第２の実施形態のライブビュー処理の第１の例のメインルーチンのフローチャートを示す。

この図２５に示したメインルーチンにおいては、割込発生（ステップＳ２１）、タイマー割込処理を開始するタイマー割込開始（ステップＳ２２）、タイマー割込処理を停止するタイマー割込解除（ステップＳ２３、ステップＳ２４）が追加されている。

これらステップＳ２１〜ステップＳ２４以外の処理は、図７に示した第１の実施形態のライブビュー処理の第１の例のメインルーチンと同じである。すなわち、図２５のステップＳ１、ステップＳ２、ステップＳ６〜ステップＳ９、ステップＳ１１、ステップＳ１２で実行されるサブルーチンは、図８〜図１２を用いて説明したものである。

このため、図２５のフローチャートにおいて、図７に示したフローチャートと同様の処理が行われるステップには同じ参照符号を付し、その部分の詳細な説明については重複するので省略する。

そして、この図２５に示す第２の実施形態のライブビュー処理の第１の例のメインルーチンもまた、切換ダイヤル８７が操作され、ライブビュー機能（電子ビューファインダー）を用いるようにされた場合に、主に全体制御部１０１において実行される。

そして、この第２の実施形態のライブビュー処理の第１の例においては、図２５に示したように、ステップＳ３の判断処理において、レリーズボタン１１が半押し状態（Ｐ１状態）になったと判断すると、タイマー割込処理を開始させる（ステップＳ２１）。

すなわち、図２５に示したメインルーチンの実行と平行して、ステップＳ２１において開始するようにされたタイマー割込処理が実行される。このステップＳ２１において実行されるタイマー割込処理が、図２６に示すフローチャートの処理である。

図２６は、この第２の実施形態のライブビュー処理の第１の例で実行されるタイマー割込処理を説明するためのフローチャートである。この図２６に示すタイマー割込処理もまた、全体制御部１０１において実行される処理である。

図２６に示すタイマー割込処理においては、まず、ジャイロセンサー１３４ａ、１３４ｂからの出力電圧（検出出力）ｊが、閾値Ｔｈ＋、Ｔｈ−を超えている期間を計測（カウント）するための変数Ｃｏｕｎｔを０（ゼロ）に初期化する（ステップＳ６０１）。

次に、ジャイロセンサー１３４ａ、１３４ｂからの出力電圧ｊを、一定周期で検出するようにするために、一定時間待つようにし（ステップＳ６０２）、ジャイロセンサー１３４ａ、１３４ｂからの出力電圧ｊを取得する（ステップＳ６０３）。

この後、全体制御部１０１は、取得した出力電圧ｊが、予め定められる閾値Ｔｈ＋、又は、閾値Ｔｈ−を超えているか否かを判断する（ステップＳ６０４）。ステップＳ６０４の判断処理において、出力電圧ｊが、閾値Ｔｈ＋、又は、閾値Ｔｈ−を超えていないと判断したときには、ステップＳ６０１からの処理を繰り返すようにする。

ステップＳ６０４の判断処理において、出力電圧ｊが、閾値Ｔｈ＋、又は、閾値Ｔｈ−を超えていると判断したときには、全体制御部１０１は、変数Ｃｏｕｎｔを１インクリメントする（ステップＳ６０５）。

そして、全体制御部１０１は、出力電圧ｊが閾値Ｔｈ＋、または、閾値Ｔｈ−を超えている期間を示す変数Ｃｏｕｎｔの値が、値ｎが示す予め決められた期間を超えているか否かを判断する（ステップＳ６０６）。

ステップＳ６０６の判断処理において、出力電圧ｊが閾値Ｔｈ＋、または、閾値Ｔｈ−を超えている期間が、予め決められた期間を超えていないと判断したときには、ステップＳ６０１からの処理を繰り返す。すなわち、出力電圧ｊが閾値を超えている期間の計測（出力電圧ｊの監視）を続行する。

ステップＳ６０６の判断処理において、出力電圧ｊが閾値Ｔｈ＋、または、閾値Ｔｈ−を超えている期間が、予め決められた期間を超えていると判断したときには、構図変更が発生したと判断し、割込みを発生させる（ステップＳ６０７）。

ステップＳ６０７で割込みが発生した場合、全体制御部１０１は、図２５のメインルーチンにおいて、ステップＳ４〜ステップＳ１１のいずれの処理が行われていても、図２５のステップＳ１からの処理を行うようにする。

また、図２５に示したように、ステップＳ１０の判断処理において全押しされたと判断された場合には、平行して実行されているタイマー割込処理を解除（終了）する（ステップＳ２３）。

同様に、ステップＳ１１の判断処理において全押しされず、しかも、半押し状態も解除された判断された場合には、平行して実行されているタイマー割込処理を解除（終了）する（ステップＳ２４）。

したがって、この第２の実施形態のライブビュー処理の第１の例においては、図２５に示したように、図２５の処理が開始され、レリーズボタン１１が半押し状態（Ｐ１状態）になるまでの動作は、図７に示したステップＳ１〜ステップＳ３までと同様である。

そして、撮像装置１Ａの背面の表示装置１２の表示画面に表示されるライブビュー画像により被写体の構図を確認し、構図決定後、レリーズボタン１１を半押し状態（Ｐ１状態）にすると、割込処理を開始する（ステップＳ２２）。

この後、図７に示した処理と同様に、ステップＳ４〜ステップＳ１１の処理を実行する。そして、レリーズボタン１１を全押し状態（Ｐ２状態）にするか、レリーズボタン１１の半押し状態（Ｐ１状態）から全押し状態にせずに半押しを解除した場合には、タイマー割込処理を解除する（ステップＳ２３、ステップＳ２４）。

前者の場合は、図７に示した処理と同様に、ステップＳ１２〜ステップＳ１４の処理を実行した後、初期化処理（ステップＳ１）からの処理を繰り返すようにし、後者の場合はそのまま初期化処理（ステップＳ１）からの処理を繰り返すようにする。

このような処理を行うことで、構図決定後レリーズボタン１１を半押しした状態で構図を変更した場合、再度構図が決定されるまでは、表示装置１２のライブビュー画像は内側が表示用撮像素子７の画像で、その外側は黒枠の動画表示となる。

そして、再度構図が決定されれば、上述した第１の実施形態のライブビュー処理の第１の例の場合と同様に、視野率１００％のライブビュー画像を表示することができるようにされる。

したがって、レリーズボタン１１を半押ししているときに、撮像装置１Ａを大きくパーンさせるようにした場合には、その直後において、撮影用撮像素子５からの画像を用いたライブビューを行うことは無い。したがって、ライブビュー画像が不自然なものとなることもない。

なお、この第２の実施形態のライブビュー処理の第１の例の場合には、レリーズボタン半押し前、または、レリーズボタン半押し状態で、かつ、構図変更中の場合には、図１３（ａ）に示した態様で、ライブビュー画像を表示することができる。

また、この第２の実施形態のライブビュー処理の第１の例の場合には、レリーズボタン半押し状態で、かつ、構図固定時においては、図１３（ｂ）に示した態様で、視野率１００％のライブビュー画像を表示することができる。

［第２の実施形態のライブビュー処理の第２の例］
図２７に、この第２の実施形態のライブビュー処理の第２の例のメインルーチンのフローチャートを示す。

この図２７に示したメインルーチンにおいては、割込発生（ステップＸ２１）、タイマー割込処理を開始するタイマー割込開始（ステップＸ２２）、タイマー割込処理を停止するタイマー割込解除（ステップＸ２３、ステップＸ２４）が追加されている。

これらステップＸ２１〜ステップＸ２４以外の処理は、図１５に示した第１の実施形態のライブビュー処理の第２の例のメインルーチンと同じである。すなわち、図２７のステップＸ１、ステップＳ２、ステップＸ４、ステップＸ５、ステップＸ８、ステップＸ１０、ステップＸ１１で実行されるサブルーチンは、図１６〜図１９、図９〜図１２を用いて説明したものである。

このため、図２７のフローチャートにおいて、図１５に示したフローチャートと同様の処理が行われるステップには同じ参照符号を付し、その部分の詳細な説明については重複するので省略する。

そして、この図２７に示す第２の実施形態のライブビュー処理の第２の例のメインルーチンもまた、切換ダイヤル８７が操作され、ライブビュー機能（電子ビューファインダー）を用いるようにされた場合に、主に全体制御部１０１において実行される。

そして、この第２の実施形態のライブビュー処理の第２の例においては、図２７に示したように、ステップＸ３の判断処理において、レリーズボタン１１が半押し状態（Ｐ１状態）になったと判断すると、タイマー割込処理を開始させる（ステップＸ２１）。

すなわち、図２７に示したメインルーチンの実行と平行して、ステップＸ２１において開始するようにされたタイマー割込処理が実行される。このステップＸ２１において実行されるタイマー割込処理が、上述の図２６に示したフローチャートの処理である。

したがって、ステップＸ２２で実行されるタイマー割込処理については、第２の実施形態のライブビュー処理の第１の例と同様であるので、ここでは図２６のタイマー割込処理の詳細な説明は省略する。

そして、図２６に示したタイマー割込処理のステップＳ６０７で割込みが発生した場合、全体制御部１０１は、図２７のメインルーチンにおいて、ステップＸ４〜ステップＸ１０のいずれの処理が行われていても、図２７のステップＸ１からの処理を行うようにする。

また、図２７に示したように、ステップＸ９の判断処理において全押しされたと判断された場合には、平行して実行されているタイマー割込処理を解除（終了）する（ステップＸ２３）。

同様に、ステップＸ１０の判断処理において全押しされず、しかも、半押し状態も解除された判断された場合には、平行して実行されているタイマー割込処理を解除（終了）する（ステップＸ２４）。

したがって、この第２の実施形態のライブビュー処理の第２の例においては、図２７に示したように、図２７の処理が開始され、レリーズボタン１１が半押し状態（Ｐ１状態）になるまでの動作は、図１５に示したステップＸ１〜ステップＸ３までと同様である。

そして、撮像装置１Ａの背面の表示装置１２の表示画面に表示されるライブビュー画像により被写体の構図を確認し、構図決定後、レリーズボタン１１を半押し状態（Ｐ１状態）にすると、割込処理を開始する（ステップＸ２２）。

この後、図１５に示した処理と同様に、ステップＸ４〜ステップＸ１０の処理を実行する。そして、レリーズボタン１１を全押し状態（Ｐ２状態）にするか、レリーズボタン１１の半押し状態（Ｐ１状態）から全押し状態にせずに半押しを解除した場合には、タイマー割込処理を解除する（ステップＸ２３、ステップＸ２４）。

前者の場合は、図１５に示した処理と同様に、ステップＸ１１〜ステップＸ１３の処理を実行した後、初期化処理（ステップＸ１）からの処理を繰り返すようにし、後者の場合はそのまま初期化処理（ステップＸ１）からの処理を繰り返すようにする。

このように、この図２７に示した第２の実施形態のライブビュー処理の第２の例においても、レリーズボタン１１を半押ししている状態（Ｐ１状態）で構図を大きく変更すると、図２６に示した処理により割り込みが発生し、図２７のステップＸ１に戻る。

このような処理を行うことで、構図決定後レリーズボタン１１を半押しした状態で構図を変更した場合、再度構図が決定されるまでは、表示装置１２のライブビュー画像は、撮影用撮像素子５の画像で視野率１００％の表示となる。そして、再度構図が決定されても、上述した第１の実施形態のライブビュー処理の第２の例の場合と同様に、視野率１００％想到のライブビュー表示（動画表示）を行うことができるようにされる。

したがって、レリーズボタン１１を半押ししているときに、撮像装置１Ａを大きくパーンさせるようにした場合には、その直後において、既に取り込まれている撮影用撮像素子５からの画像を用いたライブビューを行うことは無い。したがって、ライブビュー画像が不自然なものとなることもない。

なお、この第２の実施形態のライブビュー処理の第２の例の場合には、レリーズボタン半押し前、または、レリーズボタン半押し状態で、かつ、構図変更中の場合には、図２０（ａ）に示した態様で、ライブビュー画像を表示することができる。

また、この第２の実施形態のライブビュー処理の第２の例の場合には、レリーズボタン半押し状態で、かつ、構図固定時においては、図２０（ｂ）に示した態様で、視野率１００％のライブビュー画像を表示することができる。

［この発明の方法、プログラム］
なお、上述した実施形態から明らかなように、この発明の方法、プログラムは、図７、図１５、図２５、図２７を用いて説明した方法、プログラムとして実現可能である。なお、図７、図１５、図２５、図２７においては、図８〜図１２、図１６〜図１９に示したサブルーチンか用いられ、図２５、図２７においては、平行して、図２６に示したタイマー割込み処理が実行さされる。

そして、上述の図７〜図１２、図１５〜図１９、図２５、図２６、図２７のフローチャートを用いて説明した方法は、この発明の方法である。

また、上述の図７〜図１２、図１５〜図１９、図２５、図２６、図２７のフローチャートに応じて形成可能なプログラムは、この発明のプログラムである。

［実施形態の効果］
上述したように、撮影用撮像素子に加えて光学ファインダー内に表示用撮像素子を備え、光学ファインダーの視野率が１００％未満であるレンズ交換式デジタル一眼レフカメラ（ＤＳＬＲ)において、表示用撮像素子を用いたライブビュー時に、あらかじめ撮影用撮像素子の画像を記憶しておき、表示用撮像素子側の動画像を光学ファインダーの視野率と同等に縮小した上で撮影用撮像素子の画像と合成し表示することで、高速な焦点合わせが可能な位相差ＡＦを使用できるとともに、ライブビュー画像の視野率を１００％で表示することができる。

また、撮像装置の姿勢変化を検出する手段を備え、姿勢の変化量および変化時間から構図の変化を判断し、その判断結果に基づいて、すでに記憶している撮影用撮像素子側の静止画像を再度取得し、表示装置の画像を更新することで、構図が大きく変更された場合にライブビュー画像が不自然な画像となることを防止することができる。

すなわち、光学ファインダー内に表示用撮像素子を備え、かつ光学ファインダーの視野率が１００％未満のＤＳＬＲにおいて、表示用撮像素子を用いたライブビュー時、ライブビューの視野率がファインダー視野率に依存してしまう欠点を解消することができる。そして、光学ファインダー内に備えた表示用撮像素子を用いたライブビューで、視野率１００％のライブビュー画像を表示することができ、その結果正確な構図の確認が可能となる。

図２９は、この発明の実施形態の効果を説明するための図である。図２９において、図２９（ａ）は、光学ファインダー内に表示用撮像素子を備え、かつ光学ファインダーの視野率が１００％未満のＤＳＬＲにおいて、この発明を適用した場合のライブビュー画像を示す図である。また、図２９において、図２９（ｂ）は、視野率１００％の撮影用撮像素子を用いた場合のライブビュー画像を示す図である。

この発明を適用することにより、ライブビュー画像は、図２９（ａ）に示すように、表示用撮像素子７からの画像と、撮影用撮像素子５からの画像とを、解像度変換して合成処理することにより、視野率１００％のライブビュー画像として表示することができる。

したがって、図２９（ｂ）に示すように、視野率が１００％である撮影用撮像素子５からの画像を用いてライブビューを行うようにした場合と同様のライブビュー画像を表示することができる。

そして、撮影用撮像素子５を用いてライブビューを行うようにした場合には、ＤＳＬＲの構造上、位相差ＡＦを使用することができず、コントラストＡＦを使用するためＡＦ速度が遅くなる。

しかし、この発明を用いることにより、ライブビューは、表示用撮像素子７からの画像と、既に取り込んである撮影用撮像素子５からの画像とを合成することにより行い、基本的には、表示用撮像素子７からの画像を用いて行うようにする。したがって、この発明では、位相差ＡＦを用いることが可能である。つまり、ライブビュー画像の視野率を１００％にすることを実現しつつ、位相差ＡＦにより、高速なＡＦも可能である。

また、レリーズボタン１１の半押し中に構図が大きく変更されたことを検知し、合成する画像の再取得および再合成を行うことで、構図を大きく変更した場合にライブビュー画像の表示がおかしくなることを防止することができる。すなわち、合成する２つの画像の境界部分で極端な不連続が発生することを防止することができる。

［その他］
なお、上述した実施の形態においては、撮影用撮像素子の機能は、撮影用撮像素子５が実現し、表示用撮像素子の機能は、表示用撮像素子７が実現している。また、画像記憶手段の機能は、主に画像メモリ５６の画像記憶領域Ｘが実現し、合成手段の機能は、主に全体制御部１０１が実現している。また、表示手段の機能は、表示装置１２が実現している。

また、上述した実施の形態において、撮像装置の姿勢を検出する検出手段の機能は、ジャイロセンサー１３４ａ、１３４ｂが実現し、判断手段、制御手段の機能は、全体制御部１０１が実現している。

また、上述した実施の形態において、判別手段、変化量検出手段、調整手段の各機能は、主に全体制御部１０１が実現している。

また、上述した実施の形態においては、ライブビューを用いるようにし、レリーズボタン１１を半押しした場合に、撮影用撮像素子５を通じて取り込んだ視野率１００％の静止画像に対して、表示用撮像素子７からの動画像のサイズを調整して合成するようにした。

しかし、これに限るものではない。ライブビューを用いるようにした直後に、撮影用撮像素子５を通じて視野率１００％の静止画像を取り込み、これに表示用撮像素子７からの動画像のサイズを調整して合成するようにすることもできる。

また、上述した実施形態においては、ＤＳＬＲに、この発明を適用した場合を例にして説明したが、これに限るものではない。撮影用撮像素子と、表示用撮像素子と、位相差ＡＦを行うモジュールを有する種々の撮像装置に対して、この発明を適用することができる。

また、表示用撮像素子を設ける位置は、上述した実施形態の撮像装置のおいて示した場合に限るものではなく、光学ファインダー内の適宜の位置に表示用撮像素子を設ける構成が可能である。

また、撮像素子は、ＣＣＤに限るものではなく、例えば、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどを用いるようにしてもよい。

また、表示装置もＬＣＤに限るものではなく、有機ＥＬパネル（Organic Electroluminescence Panel）等の表示素子を用いるようにしてもよい。

１、１Ａ…撮像装置、２…カメラ本体部、３…撮影レンズユニット、４…シャッター、５…撮影用撮像素子、６…ミラー機構、７…表示用撮像素子、１２…表示装置、２０…ＡＦモジュール、４１…フラッシュライト、３７…レンズ群、３９…レンズ位置検出部、４２…フラッシュ回路、４３…ＡＦ補助光発光部、５０…デジタル信号処理回路、５１…信号処理部、５２…Ａ／Ｄ変換回路、５３…黒レベル補正回路、５４…ＷＢ補正回路、５５…γ補正回路、５６…画像メモリ、６０…ＥＥＰＲＯＭ、８０…操作部、９０…メモリカード、１０１…全体制御部、１２１…フォーカス制御回路、１２２…ミラー制御回路、１２３…シャッター制御回路、１２４…タイミング制御回路、１３１…ＶＲＡＭ、１３２…カードＩ／Ｆ、１３３…通信用Ｉ／Ｆ、１３４ａ…ジャイロセンサ（横軸）、１３４ｂ…ジャイロセンサ（縦軸）

Claims (5)

1. 撮影用撮像素子と、
   視野率が１００％未満の光学ファインダー内に配設される表示用撮像素子と、
   前記撮影用撮像素子を通じて取り込んだ静止画像を一時記憶する画像記憶手段と、
   前記表示用撮像素子を通じて取り込む動画像を前記光学ファインダーの視野率と同等に縮小した上で、予め取り込んで前記画像記憶手段に一時記憶されている前記撮影用撮像素子からの静止画像と合成する合成手段と、
   前記合成手段で合成された画像を表示する表示手段と
   を備える撮像装置。
2. 請求項１に記載の撮像装置であって、
   自機の姿勢変化を検出する検出手段と、
   前記検出手段の検出結果に基づいて、構図が変化したか否かを判断する判断手段と、
   前記判断手段が、構図が変化したと判断した場合に、前記撮影用撮像素子を通じて新たに取り込んだ静止画像を前記画像記憶手段に記録し直すように制御する制御手段と
   を備える撮像装置。
3. 請求項１に記載の撮像装置であって、
   構図の微調整を行ったか否かを判別する判別手段と、
   前記判別手段により構図の微調整が行われたと判別された場合に、前記画像記憶手段に一時記憶されている静止画像と、前記表示用撮像素子を通じて取り込まれる動画画像との変化量を検出する変化量検出手段と、
   前記変化量検出手段で検出された変化量に基づいて、前記画像記憶手段に一時記憶されている静止画像について構図の微調整を行うようにする調整手段と
   を備える撮像装置。
4. 前記撮影用撮像素子を通じて取り込んだ静止画像を画像記憶手段に一時記憶する静止画像取り込み工程と、
   視野率が１００％未満の光学ファインダー内に配設される表示用撮像素子を通じて動画像を取り込むと共に、当該動画像を前記光学ファインダーの視野率と同等に縮小した上で、前記画像記憶手段に一時記憶されている前記撮影用撮像素子からの静止画像と合成する合成工程と、
   前記合成工程で合成した画像を表示手段に表示する表示工程と
   を有する画像表示方法。
5. 前記撮影用撮像素子を通じて取り込んだ静止画像を画像記憶手段に一時記憶する静止画像取り込みステップと、
   視野率が１００％未満の光学ファインダー内に配設される表示用撮像素子を通じて動画像を取り込むと共に、当該動画像を前記光学ファインダーの視野率と同等に縮小した上で、前記画像記憶手段に一時記憶されている前記撮影用撮像素子からの静止画像と合成する合成ステップと、
   前記合成ステップで合成した画像を表示手段に表示する表示ステップと
   を撮像装置に搭載されたコンピュータが実行するコンピュータ読み取り可能な画像表示プログラム。

Images