JP2018007016A - 撮像装置、撮像方法、およびプログラム - Google Patents

Abstract

【課題】深度合成を行う場合に、深度拡大効果の確認を高速かつ容易に行うようにした撮像装置、撮像方法、およびプログラムを提供する。
【解決手段】合焦位置を移動する焦点位置変更部３と、被写体像を撮像し、画像データを取得する撮像部１と、取得した画像データからピーキング信号を生成するピーキング信号生成部５と、複数のピーキング信号を合成し、合成ピーキング信号を生成するピーキング信号合成部７と、合成ピーキング信号を画像データに重畳して表示用画像データを生成する表示用画像生成部９と、合焦位置を異なる焦点位置に移動させて撮像部により画像データを取得させ、この画像データに対してピーキング信号を生成させ、第１のピーキング信号と第２のピーキング信号とを合成し合成ピーキング信号を生成させ、合成ピーキング信号を第２の画像データに重畳して生成させる指示を行う制御部１５を有する。
【選択図】 図1

Description

本発明は、フォーカス位置を変更しながら、複数の画像データを取得し、この複数の画像データを合成する撮像装置、撮像方法、およびプログラムに関する。

全焦点位置においてピントの合った写真を撮影することは困難である。そこで、撮影によって画像データを取得した後に、焦点位置を移動させて再度撮影を行って画像データを取得し、これを繰り返すことにより、複数の画像データを取得することができる。そして、この複数の画像データを合成することにより、広範囲の被写体距離についてピントの合った画像データを提供することが提案されている（例えば、特許文献１参照）。なお、この合成処理を、深度合成処理と称する。

また、撮影画像中でピントの合っている部分を表示するためのピーキング処理が知られている（例えば、特許文献２参照）。このピーキング処理は、画像信号に対し、高周波成分の信号を低周波成分の信号に対して強調し、画像のコントラストの高い部分を見やすくする処理である。

特開２００１−２９８７５５号公報 特開２００１−１３６４２９号公報

深度合成処理によって生成される合成画像についても、ピーキング処理を施すことにより、画像のコントラストの高い部分、すなわちピントの合っている部分を簡単に確認することができる。特に、ライブビュー表示の際には、ピーキング処理が施された深度合成画像を確認することにより、合焦範囲を容易に確認することができる。しかし、深度合成処理は、複数の画像データを取得後に行われ、しかも複雑な画像処理を必要とすることから、深度合成用に撮影を開始してから実際にピーキング処理が施された画像が生成されるまでに相当の時間が掛かってしまう。

本発明は、このような事情を鑑みてなされたものであり、深度合成を行う場合に、深度拡大効果の確認を高速かつ容易に行うようにした撮像装置、撮像方法、およびプログラムを提供することを目的とする。

上記目的を達成するため第１の発明に係る撮像装置は、合焦位置を移動する焦点位置変更部と、被写体像を撮像し、画像データを取得する撮像部と、上記取得した画像データからピーキング信号を生成するピーキング信号生成部と、複数の上記ピーキング信号を合成し、合成ピーキング信号を生成するピーキング信号合成部と、上記合成ピーキング信号を画像データに重畳して表示用画像データを生成する表示用画像生成部と、上記焦点位置変更部により上記合焦位置を異なる焦点位置に移動させて上記撮像部により第１の画像データ、第２の画像データを取得させ、上記第１の画像データ、第２の画像データに対して上記ピーキング信号生成部により第１のピーキング信号、第２のピーキング信号を生成させ、上記ピーキング信号合成部により、上記第１のピーキング信号と上記第２のピーキング信号とを合成し合成ピーキング信号を生成させ、上記表示用画像生成部により上記合成ピーキング信号を上記第２の画像データに重畳して生成させる指示を行う制御部と、を有する。

第２の発明に係る撮像装置は、上記第１の発明において、さらに上記表示用画像を表示する表示部と、を有し、上記制御部は、上記表示用画像生成部により生成した表示用画像を上記表示部に表示させる指示を行う。
第３の発明に係る撮像装置は、上記第２の発明において、上記制御部は、上記焦点位置変更部により第１の焦点位置に合焦位置を移動し、上記撮像部により第１の画像を取得し、上記ピ−キング信号生成部により第１のピーキング信号を生成し、上記焦点位置変更部により上記第１の焦点位置とは異なる第２の焦点位置に合焦位置を移動し、上記撮像部により第２の画像を取得し、上記ピ−キング信号生成部により第２のピーキング信号を生成し、上記ピーキング信号合成部により上記第１のピーキング信号と、上記第２のピーキング信号を合成して合成ピーキング信号を生成し、上記表示用画像生成部にて上記合成ピーキング信号と、上記第２の画像に重畳して生成した表示用画像を上記表示部に表示させる指示を繰り返し行うようにする。

第４の発明に係る撮像装置は、上記第１ないし第３の発明のいずれかにおいて、さらに上記ピーキング信号を記憶するピーキング信号記憶部と、を有し、上記ピーキング信号記憶部は、手ぶれ量、撮像面上の被写体の移動量、焦点距離、絞り値の全ての値が、予め設定された閾値未満の場合には、上記ピーキング信号を記憶し、一方、手ぶれ量、撮像面上の被写体の移動量、焦点距離、絞り値のうち、少なくとも１つの値が予め設定された閾値以上に変動した場合にはピーキング信号を記録しない。

第５の発明に係る撮像装置は、上記第３または第４の発明において、上記焦点位置変更部は、ライブビュー表示の場合と静止画撮影の場合とで焦点位置移動の制御を変更する。
第６の発明に係る撮像装置は、上記第５の発明において、上記焦点位置変更部は、ライブビュー表示の場合に合焦位置を移動する範囲の中心の焦点位置から遠い無限遠側または至近側いずれかの焦点位置の画像から取得するように制御する。
第７の発明に係る撮像装置は、上記第５の発明において、上記焦点位置変更部は、ライブビュー表示の場合は、静止画記憶の場合に対して、焦点位置の間隔を広くする。

第８の発明に係る撮像装置は、上記第７の発明において、さらに、ピーキング信号の強度を変更するピーキング強度変更部と、を有し、上記複数の焦点位置の間隔に応じてピーキング信号の強度を変更する。
第９の発明に係る撮像装置は、上記第８の発明において、上記ピーキング強度変更部は、上記複数の焦点位置の間隔が広いほどピーキング信号の強度を強くする。

第１０の発明に係る撮像装置は、上記第２の発明において、さらに、撮影者がカメラ動作を指示するために表示指示部材の操作状態を検知する操作部と、を有し、上記操作部が上記操作状態を検知した場合に上記合成ピーキング信号を重畳した画像を上記表示部にライブビュー表示する。
第１１の発明に係る撮像装置は、上記第１０の発明において、上記操作部が上記操作状態の解除を検知した場合には、ピーキング信号を重畳しない画像をライブビュー画像として表示する。

第１２の発明に係る撮像方法は、被写体像を撮像し、画像データを取得する撮像部を有する撮像装置における撮像方法において、合焦位置を第１の焦点位置に移動させて上記撮像部によって第１の画像データを取得し、上記合焦位置を第１の焦点位置に移動させて上記撮像部によって第２の画像データを取得し、上記第１の画像データを用いて、第１のピーキング信号を生成し、上記第２の画像データを用いて第２のピーキング信号を生成し、上記第１のピーキング信号と上記第２のピーキング信号とを合成し合成ピーキング信号を生成し、上記合成ピーキング信号を上記第２の画像データに重畳させる。

第１３の発明に係るプログラムは、被写体像を撮像し、画像データを取得する撮像部を有する撮像装置のコンピュータを実行させるプログラム、合焦位置を第１の焦点位置に移動させて上記撮像部によって第１の画像データを取得し、上記合焦位置を第１の焦点位置に移動させて上記撮像部によって第２の画像データを取得し、上記第１の画像データを用いて、第１のピーキング信号を生成し、上記第２の画像データを用いて第２のピーキング信号を生成し、上記第１のピーキング信号と上記第２のピーキング信号とを合成し合成ピーキング信号を生成し、上記合成ピーキング信号を上記第２の画像データに重畳させる、ことを上記コンピュータに実行させる。

本発明によれば、深度合成を行う場合に、深度拡大効果の確認を高速かつ容易に行うようにした撮像装置、撮像方法、およびプログラムを提供することができる。

本発明の一実施形態に係るカメラの主として電気的構成を示すブロック図である。 本発明の一実施形態に係るカメラのより詳細な電気的構成を示すブロック図である。 本発明の一実施形態に係るカメラの深度合成の動作を示すフローチャートである。 本発明の一実施形態に係るカメラの深度合成の動作を示すフローチャートである。 本発明の一実施形態に係るカメラのＬＶ表示画像生成の動作を示すフローチャートである。 本発明の一実施形態に係るカメラのピーキング信号記憶の動作を示すフローチャートである。 本発明の一実施形態に係るカメラにおいて、焦点位置の移動の順番を示す図である。 本発明の一実施形態に係るカメラにおいて、焦点位置分割数とピーキング強度の関係を示すグラフである。 本発明の一実施形態に係るカメラにおいて、ピーキング処理を施した画像の生成過程を示す図である。 本発明の一実施形態に係るカメラの深度合成の変形例の動作を示すフローチャートである。

以下、本発明の実施形態としてデジタルカメラに適用した例について説明する。このカメラは、撮像部を有し、この撮像部によって被写体像を画像データに変換し、この変換された画像データに基づいて、被写体像を本体に配置した表示部にライブビュー表示する。撮影者はライブビュー表示を観察することにより、構図やシャッタチャンスを決定する。レリーズ操作時には、画像データが記録媒体に記録される。記録媒体に記録された画像データは、再生モードを選択すると、表示部に再生表示することができる。

また、ライブビュー表示中に深度合成モードが設定されている場合には、撮影レンズのフォーカス位置を順次移動させ、深度合成用に画像データを取得する毎に、ピーキング処理を施し、ライブビュー画像にピーキング処理を施した画像を重畳して表示する（図４のＳ３５、図５のＳ６３〜Ｓ７７、図９参照）。

図１は、本発明の一実施形態に係るカメラの概略を示す主として電気的構成を示すブロック図である。撮像部１は、撮影レンズと撮像素子を有し、被写体像を光電変換し画像データを出力する。この撮像部１は、被写体像を撮像し、画像データを取得する撮像部として機能する。

焦点位置変更部３は、撮影レンズ中のフォーカスレンズ（合焦用レンズ）の焦点位置を移動させる。この焦点位置変更部３は、合焦用レンズの焦点位置を移動する焦点位置変更部として機能する。この焦点位置変更部は、ライブビュー表示の場合と静止画撮影の場合とで焦点位置移動の制御を変更する（例えば、図７参照）。また、焦点位置変更部は、ライブビュー表示の場合に合焦用レンズの焦点位置を移動する範囲の中心の焦点位置から遠い無限遠側または至近側いずれかの焦点位置の画像から取得するように制御する（例えば、図７のＬＶ１、ＬＶ２参照）。また、焦点位置変更部は、ライブビュー表示の場合は、静止画記憶の場合に対して、焦点位置の間隔を広くする。固定焦点位置の撮像装置、例えば、デジタル顕微鏡のようにピント位置を変化させる合焦用レンズを備えない場合には、被写体を固定しているステージを上下させることで撮影レンズと被写体との距離を調節し、合焦位置を移動させるようにする。

ピーキング信号生成部５は、撮像部１によって取得した画像データに対してピーキング処理を施し、ピーキング信号を生成する。焦点位置変更部３によってフォーカスレンズが移動する毎に画像データを取得し、この画像データが取得されると、ピーキング信号生成部５はピーキング処理を行う。従って、それぞれの焦点位置に対応するピーキング信号が生成される。ピーキング信号は、画像データの高周波成分（エッジ）を検出し、増幅することによって生成する。ピーキング信号生成部５は、取得した画像データからピーキング信号を生成するピーキング信号生成部として機能する。

ピーキング信号合成部７は、ピーキング信号生成部５によって生成されたピーキング信号の合成を行う。上述したように、それぞれの焦点位置に対応するピーキング信号が生成されるので、この複数のピーキング信号を合成する。合成されたピーキング信号は、各焦点位置におけるエッジを加算したものであり、各焦点位置においてピントの合っている部分に対応する。ピーキング信号合成部７は、複数の上記ピーキング信号を合成し、合成ピーキング信号を生成するピーキング信号合成部として機能する。

表示用画像生成部９は、撮像部１によって取得された画像データに、ピーキング信号合成部７で合成された合成ピーキング信号を重畳した画像を生成する。すなわち、表示用画像生成部９は、複数の焦点位置におけるピーキング信号に基づく合成ピーキング信号の画像を、最新のライブビュー画像に重畳する。この重畳画像は、深度合成によって生成される画像において、ピントのあっている部分を示す。表示画像生成部９は、合成ピーキング信号を画像データに重畳して表示用画像データを生成する表示用画像生成部として機能する。

表示部１１は、液晶パネルや有機ＥＬパネル等、カメラ本体の外装部に設けられた、ライブビュー画像等の画像を表示する。この表示部１１は、表示用画像生成部９によって生成された合成ピーキング信号に基づく画像が重畳されたライブビュー画像の表示も行うことができる。なお、表示部１１は、カメラ本体の外装部以外にも、電子ビューファインダ（ＥＶＦ）のように、接眼部を通して観察するタイプであってもよい。表示部１１は、表示用画像を表示する表示部として機能する。

制御部１５は、ＣＰＵ（Central Processing Unit）、その周辺回路、メモリ等を有する。制御部１５は、上述の撮像部１、焦点位置変更部３、ピーキング信号生成部５、ピーキング信号合成部７、表示用画像生成部９、表示部１１に接続されている。制御部１５のＣＰＵは、メモリに記憶されたプログラムに従って、各部を制御することにより、カメラの全体制御を行う。

また、制御部１５は、焦点位置変更部により合焦レンズを異なる焦点位置に移動させて撮像部により第１の画像データ、第２の画像データを取得させ、第１の画像データ、第２の画像データに対してピーキング信号生成部により第１のピーキング信号、第２のピーキング信号を生成させ、ピーキング信号合成部により、第１のピーキング信号と第２のピーキング信号とを合成し合成ピーキング信号を生成させ、表示用画像生成部により合成ピーキング信号を第２の画像に重畳して生成させる指示を行う制御部として機能する。この制御部は、表示用画像生成部により生成した表示用画像を表示部に表示させる指示を行う。

また、上述の制御部は、焦点位置変更部により第１の焦点位置に合焦用レンズを移動し（例えば図５のＳ６５）、撮像部により第１の画像を取得し（例えば図５のＳ６７）、ピ−キング信号生成部により第１のピーキング信号を生成し（例えば図５のＳ７１）、焦点位置変更部により第１の焦点位置とは異なる第２の焦点位置に合焦用レンズを移動し（例えば、リターン後の図５のＳ６５）、撮像部により第２の画像を取得し（例えば、リターン後の図５のＳ６７）、ピ−キング信号生成部により第２のピーキング信号を生成し（例えば、リターン後のＳ７１）、ピーキング信号合成部により第１のピーキング信号と、第２のピーキング信号を合成して合成ピーキング信号を生成し（例えば、リターン後の図５のＳ７５）、表示用画像生成部にて合成ピーキング信号と、第２の画像に重畳して生成した表示用画像を表示部に表示させる指示を繰り返し行うようにする（例えば、図４のＳ３５）。

次に、図２を用いて、本実施形態に係るカメラの電気的構成の詳細について説明する。このカメラは、カメラ本体１００と、これに脱着できるような交換式レンズ２００とから構成される。なお、本実施形態においては、撮影レンズは交換レンズ式としたが、これに限らず、カメラ本体に撮影レンズが固定されるタイプのデジタルカメラであっても勿論かまわない。

交換式レンズ２００は、撮影レンズ２０１、絞り２０３、ドライバ２０５、マイクロコンピュータ２０７、フラッシュメモリ２０９から構成され、後述するカメラ本体１００との間にインターフェース（以後、Ｉ／Ｆと称す）１９９を有する。

撮影レンズ２０１は、被写体像を形成するための複数の光学レンズ（ピント調節用のフォーカスレンズ（合焦用レンズ）を含む）から構成され、単焦点レンズまたはズームレンズである。この撮影レンズ２０１の光軸の後方には、絞り２０３が配置されており、絞り２０３は開口径が可変であり、撮影レンズ２０１を通過した被写体光束の光量を制御する。

また、撮影レンズ２０１はドライバ２０５によって光軸方向に移動できるようになっており、マイクロコンピュータ２０７からの制御信号に基づいて、撮影レンズ２０１内のフォーカスレンズを移動させることによりフォーカス位置が制御され、ズームレンズの場合には、焦点距離も制御される。また、ドライバ２０５は、絞り２０３の開口径の制御も行う。撮影レンズ２０１、ドライバ２０５、および焦点位置制御部１２９は、図１における焦点位置変更部３に相当する。

ドライバ２０５に接続されたマイクロコンピュータ２０７は、Ｉ／Ｆ１９９およびフラッシュメモリ２０９に接続されている。マイクロコンピュータ２０７は、フラッシュメモリ２０９に記憶されているプログラムに従って動作し、後述するカメラ本体１００内のマイクロコンピュータ１３１と通信を行い、マイクロコンピュータ１３１からの制御信号に基づいて交換式レンズ２００の制御を行う。

マイクロコンピュータ２０７は、フォーカスレンズのフォーカス位置をフォーカス位置検出部（不図示）から取得し、またズームレンズのズーム位置をズーム位置検出部（不図示）から取得する。この取得したフォーカス位置やズーム位置を、カメラ本体１００内のマイクロコンピュータ１３１に送信する。

フラッシュメモリ２０９には、前述したプログラムの他、交換式レンズ２００の光学的特性や調整値等の種々の情報が記憶されている。マイクロコンピュータ２０７は、これらの種々の情報をカメラ本体１００内のマイクロコンピュータ１３１に送信する。Ｉ／Ｆ１９９は、交換式レンズ２００内のマイクロコンピュータ２０７とカメラ本体１００内のマイクロコンピュータ１３１の相互間の通信を行うためのインターフェースである。

カメラ本体１００内であって、撮影レンズ２０１の光軸上には、メカシャッタ１０１が配置されている。このメカシャッタ１０１は、被写体光束の通過時間を制御し、公知のフォーカルプレーンシャッタ等が採用される。このメカシャッタ１０１の後方であって、撮影レンズ２０１によって被写体像が形成される位置には、撮像素子１０３が配置されている。

撮像素子１０３は、各画素を構成するフォトダイオードが二次元的にマトリックス状に配置されており、各フォトダイオードは受光量に応じた光電変換電流を発生し、この光電変換電流は各フォトダイオードに接続するキャパシタによって電荷蓄積される。各画素の前面には、ベイヤ―配列のＲＧＢフィルタが配置されている。また、撮像素子１０３は電子シャッタを有している。電子シャッタは、撮像素子１０３の電荷蓄積から電荷読出までの時間を制御することにより露光時間の制御を行う。なお、撮像素子１０３はベイヤ配列に限定されず、例えばＦｏｖｅｏｎ（登録商標）のような積層形式でも勿論かまわない。撮像素子１０３は、図１における撮像部に相当する。

撮像素子１０３はアナログ処理部１０５に接続されており、このアナログ処理部１０５は、アナログ処理回路を有し、撮像素子１０３から読み出した光電変換信号（アナログ画像信号）に対し、リセットノイズ等を低減した上で波形整形を行い、さらに適切な輝度になるようにゲインアップを行う。

アナログ処理部１０５はＡ／Ｄ変換部１０７に接続されており、このＡ／Ｄ変換部１０７は、Ａ／Ｄ変換回路を有し、アナログ画像信号をアナログ―デジタル変換し、デジタル画像信号（以後、画像データという）をバス１１０に出力する。なお、本明細書においては、画像処理部１２１において画像処理される前の生の画像データをＲＡＷデータと称する。

バス１１０は、カメラ本体１００の内部で読み出され若しくは生成された各種データをカメラ本体１００の内部に転送するための転送路である。バス１１０には、前述のＡ／Ｄ変換部１０７の他、ＡＥ（Auto Exposure）処理部１１１、ＡＦ（Auto Focus）処理部１１３、ピーキング信号生成部１１５、ピーキング信号合成部１１７、ピーキング信号記憶部１１８、ピーキング強度制御部１１９、画像処理部１２１、画像合成部１２３、画像圧縮部１２５、画像伸張部１２７、マイクロコンピュータ１３１、フラッシュメモリ１３５、ＳＤＲＡＭ１３７、メモリインターフェース（以後、メモリＩ／Ｆという）１３９、表示ドライバ１４３が接続されている。

ＡＥ処理部１１１は、ＡＥ処理回路を有し、バス１１０を介して入力した画像データに基づいて被写体輝度を測定し、この被写体輝度情報を、バス１１０を介してマイクロコンピュータ１３１に出力する。被写体輝度の測定のために専用の測光センサを設けても良いが、本実施形態においては、画像データに基づいて被写体輝度を算出する。

ＡＦ処理部１１３は、ＡＦ処理回路を有し、画像データから高周波成分の信号を抽出し、積算処理により合焦評価値を取得し、バス１１０を介してマイクロコンピュータ１３１に出力する。本実施形態においては、いわゆるコントラスト法によって撮影レンズ２０１のピント合わせを行う。この実施形態では、コントラスト法によるＡＦ制御を例にとって説明したが、被写体光束を分割し、その光路上に位相差センサを設け、または撮像素子上に位相差センサを設け、位相差ＡＦによるＡＦ制御によりピント合わせを行ってもよい。

ピーキング信号生成部１１５は、ピーキング信号発生回路を有し、撮影素子１０３からの画像データに基づいてピーキング信号を生成する。ピーキング信号生成部１１５は、画像データの高周波成分（エッジ）を検出し、増幅することでピーキング信号を生成する。ピーキング信号生成部１１５で生成されたピーキング信号は、ピーキング信号記憶部１１８に記憶される。ピーキング信号生成部１１５は、図１のピーキング信号生成部５に相当する。

ピーキング信号記憶部１１８は、電気的に書き換えできる揮発性メモリ、または電気的に書き換えできる不揮発性メモリを有し、後述するＳＤＲＡＭ１３７が、ピーキング信号記憶部１１８の機能を兼用するようにしてもよい。ピーキング信号記憶部１１８は、深度合成の１枚目の撮影の際には、ピーキング信号生成部１１５で生成したピーキング信号を記憶する。２枚目以降は、ピーキング信号合成部１１７で合成されたピーキング信号を記憶する（図５のＳ７９参照）。

また、ピーキング信号記憶部１１８は、所定の条件を満たす場合にのみ、ピーキング信号生成部１１５によって生成されたピーキング信号、またはピーキング信号合成部１１７によって生成された合成後のピーキング信号を記憶し、一方、所定の条件を満たさない場合には、ピーキング信号を消去する。所定の条件については、図６に示すフローチャートを用いて後述する。

ピーキング信号記憶部１１８は、ピーキング信号を記憶するピーキング信号記憶部として機能する。ピーキング信号記憶部は、手ぶれ量、撮像面上の被写体の移動量、焦点距離、絞り値の全ての値が、予め設定された閾値未満の場合には、ピーキング信号を記憶し、一方、手ぶれ量、撮像面上の被写体の移動量、焦点距離、絞り値のうち、少なくとも１つの値が予め設定された閾値以上に変動した場合にはピーキング信号を記録しない（図５のＳ７９、図６参照）

ピーキング信号合成部１１７は、ピーキング信号合成回路を有し、ピーキング信号記憶部１１８に記憶しているピーキング信号を読み出し、この読み出したピーキング信号とピーキング信号生成部１１５で生成したピーキング信号を合成する。したがって、撮像素子１０３から画像データが読み出され、ピーキング信号生成部１１５でピーキング信号が生成されるたびに、ピーキング信号は更新される。ピーキング信号合成部１１７は、いわゆる単純加算合成を行うので、合成を繰り返すたびに、各画像データにおけるエッジ部分が残るような合成画像データを生成する。ピーキング信号合成部１１７は、図１のピーキング信号合成部７に相当する。

ピーキング強度制御部１１９は、ピーキング強度制御回路を有し、検出したエッジの強調度を変更することによりピーキングの見え方を変える。エッジの強調度の変更は、ピーキング信号生成部１１５で生成される際に変更してもよく、またピーキング信号合成部１１７で合成される際に変更してもよい。また、エッジの強調度の表し方としては、エッジの太さ、エッジの透明度、エッジの色等を変更するようにしてもよく、また実線に限らず、破線、点線、一点鎖線、二点鎖線等の線種を変更するようにしてもよい。いずれにしても、ピーキングの強度が分かるようなエッジを表す線等の属性の変更であればよい。

ピーキング強度制御部１１９は、ピーキング信号の強度を変更するピーキング強度変更部として機能する。このピーキング強度制御部は、複数の焦点位置の間隔に応じてピーキング信号の強度を変更してもよい（例えば、図８参照）。ピーキング強度変更部は、複数の焦点位置の間隔が広いほどピーキング信号の強度を強くしてもよい（例えば、図８参照）。

画像処理部１２１は、画像処理回路を有し、撮像素子１０３からのＲＡＷデータに対して、オプティカルブラック（ＯＢ）減算処理、ホワイトバランス（ＷＢ）補正、ベイヤデータの場合に行う同時化処理、色再現処理、ガンマ補正処理、カラーマトリックス演算、ノイズリダクション（ＮＲ）処理、エッジ強調処理等を行う。１枚撮影で、かつ深度合成等の特殊効果等が設定されていない場合には、この画像処理部１２１による処理のみで画像処理が完了する。

画像合成部１２３は、画像合成回路を有し、設定されている合成モード等応じて種々の画像合成を行う。画像合成部１２３は、焦点位置等、異なる状態で取得した複数の画像データを用い、画像データの合成を行う。本実施形態においては、被写界の深度を深くする深度合成等の合成モードが設定できる。深度合成モードが設定されている場合には、画像合成部１２３は、複数のフォーカス位置で撮影した複数の画像データに対し、位置合わせを行い、画像の先鋭度（コントラスト）の高い領域を抽出し、先鋭度が高い領域を合成することで、単写よりも深い被写界深度の画像データを生成する。

また、画像合成部１２３は、撮像素子１０３からのライブビュー画像の画像データに、ピーキング信号合成部１１７によって合成されたピーキング信号に基づく画像データを重畳した画像データを生成する。この画像データは、ライブビュー表示中に、表示ドライバ１４３を介して表示部１４５に表示される（例えば、図３のＳ１５、図９参照）。画像合成部１２３は、図１の表示用画像生成部９に相当する。

画像圧縮部１２５は、画像圧縮回路を有し、画像データの記録媒体１４１への記録時に、ＳＤＲＡＭ１３７から読み出した画像データを、静止画の場合にはＪＰＥＧ圧縮方式等、また動画の場合にはＭＰＥＧ等の各種圧縮方式に従って圧縮する。また、画像伸張部１２７は、画像圧縮回路を有し、画像再生表示用にＪＰＥＧ画像データやＭＰＥＧ画像データの伸張も行う。伸張にあたっては、記録媒体１４１に記録されているファイルを読み出し、画像伸張部おいて伸張処理を施した上で、伸張した画像データをＳＤＲＡＭ１３７に一時記憶する。なお、本実施形態においては、画像圧縮方式としては、ＪＰＥＧ圧縮方式やＭＰＥＧ圧縮方式を採用するが、圧縮方式はこれに限らずＴＩＦＦ、Ｈ．２６４等、他の圧縮方式でも勿論かまわない。また、圧縮方式は、可逆圧縮でも、非可逆圧縮でもよい。

焦点位置制御部１２９は、異なる焦点位置で撮影をするため次の撮影の焦点位置を決定する。決定された情報はレンズ側のマイクロコンピュータ２０７に送信し、レンズ２０１のドライバ２０５が焦点位置の変更を行う。なお、焦点位置制御部１２９は、マイクロコンピュータ１３１内のＣＰＵによって、その機能を実現してもよい。

マイクロコンピュータ１３１は、ＣＰＵ（Central Processing Unit）、その周辺回路、メモリ等を有する。マイクロコンピュータは、このカメラ全体の制御部としての機能を果たし、フラッシュメモリ１３５に記憶されているプログラムに従って、カメラの各種シーケンスを総括的に制御する。マイクロコンピュータ１３１には、前述のＩ／Ｆ１９９以外にも操作部１３３が接続されている。

操作部１３３は、電源釦、レリーズ釦、動画釦、再生釦、メニュー釦、十字キー、ＯＫ釦等、各種入力釦や各種入力キー等の操作部材を有し、これらの操作部材の操作状態を検知し、検知結果をマイクロコンピュータ１３１に出力する。マイクロコンピュータ１３１は、操作部１３３からの操作部材の検知結果に基づいて、ユーザの操作に応じた各種シーケンスを実行する。電源釦は、当該デジタルカメラの電源のオン／オフを指示するための操作部材である。電源釦が押されると当該デジタルカメラの電源はオンとなり、再度、電源釦が押されると当該デジタルカメラの電源はオフとなる。

レリーズ釦は、半押しでオンになるファーストレリーズスイッチと、半押しから更に押し込み全押しとなるとオンになるセカンドレリーズスイッチからなる。マイクロコンピュータ１３１は、ファーストレリーズスイッチがオンとなると、ＡＥ動作やＡＦ動作等の撮影準備シーケンスを実行する。また、セカンドレリーズスイッチがオンとなると、メカシャッタ１０１等を制御し、撮像素子１０３等から被写体画像に基づく画像データを取得し、この画像データを記録媒体１３１に記録する一連の撮影シーケンスを実行して撮影を行う。

動画釦は、動画撮影の開始と終了を指示するための操作釦であり、最初に動画釦を操作すると動画撮影を開始し、再度、操作すると動画撮影を終了する。再生釦は、再生モードの設定と解除するための操作釦であり、再生モードが設定されると、記録媒体１４１から撮影画像の画像データを読み出し、表示パネル１４５に撮影画像を再生表示する。

メニュー釦は、メニュー画面を表示パネル１４５に表示させるための操作釦である。メニュー画面上では、各種のカメラ設定を行うことができる。カメラ設定としては、例えば、深度合成等の合成モードがあり、合成モードとしては、これ以外にも、ＨＤＲ合成、超解像合成等のモードを有してもよい。また、深度合成モード設定時に、ピーキング処理を行ってピントの合っている範囲の確認を行うための被写界深度調整モードも設定することができる。

操作部１３３は、撮影者がカメラ動作を指示するための表示指示部材の操作状態を検知する操作部として機能する。この操作部が操作状態を検知した場合に合成ピーキング信号を重畳した画像を表示部にライブビュー表示する（例えば、図３、図４参照）。操作部１３３には、動作の開始、終了を指示するパワースイッチや、ピント調節、適正露光量調節、画像処理の調節等を開始する、いわゆる撮影準備を指示する撮影準備スイッチや、撮影を指示する撮影指示スイッチが含まれる。カメラ特有の撮影準備を指示するスイッチや、撮影開始を指示するスイッチは２段階スイッチで構成されていることが多く、１段目（１ｓｔ）で撮影準備指示スイッチがオンとなる半押し状態や２段目（２ｎｄ）で撮影開始指示スイッチがオンとなる全押し状態となるが、これらのスイッチを備えない他の撮像装置では、別々に指示するスイッチが設けられていることで代用ができるようになっている。操作部１３３の一部は表示部１４５の表示パネルに重畳されるタッチパネルも含む。また、操作部が操作状態の解除を検知した場合には、ピーキング信号を重畳しない画像をライブビュー画像として表示する（例えば、図３、図４参照）。

フラッシュメモリ１３５は、マイクロコンピュータ１３１の各種シーケンスを実行するためのプログラムを記憶している。マイクロコンピュータ１３１はこのプログラムに基づいてカメラ全体の制御を行う。

ＳＤＲＡＭ１３７は、画像データ等の一時記憶用の電気的書き換えできる揮発性メモリである。このＳＤＲＡＭ１３７は、Ａ／Ｄ変換部１０７から出力された画像データや、画像処理部１２１や画像合成部１２３等において処理された画像データを一時記憶する。

メモリＩ／Ｆ１３９は、記録媒体１４１に接続されており、画像データや画像データに添付されたヘッダ等のデータを、記録媒体１４１に書き込みおよび読出しの制御を行う。記録媒体１４１は、例えば、カメラ本体１００に着脱自在なメモリカード等の記録媒体であるが、これに限らず、カメラ本体１００に内蔵されたハードディスク等であっても良い。記録媒体１４１は、合成画像データを記録する画像記録部として機能する。

表示ドライバ１４３は、表示部１４５に接続されており、ＳＤＲＡＭ１３７や記録媒体１４１から読み出され、画像伸張部１２７によって伸張された画像データに基づいて画像を表示部１４５において表示させる。

表示部１４５は、表示パネルを有し、カメラ本体１００の背面等に配置され、画像表示を行う。表示部１４５は、背面等のカメラ本体の外装部に表示面が配置されることから、外光の影響を受け易い表示部であるが、大型の表示パネルを設定することができる。なお、表示部１４５としては、液晶表示パネル（ＬＣＤ、ＴＦＴ）、有機ＥＬ等、種々の表示パネルを採用できる。また、電子ビューファインダ（ＥＶＦ）のように、接眼部を通して観察するタイプであってもよい。表示部１４５は、図１の表示部１１に相当する。

表示部１４５における画像表示としては、撮影直後、記録される画像データを短時間だけ表示するレックビュー表示、記録媒体１４１に記録された静止画や動画の画像ファイルの再生表示、およびライブビュー表示等の動画表示が含まれる。ライブビュー表示時に、深度合成モードが設定されている場合には、深度合成された画像が表示され、更に、被写界深度調整モードが設定されている場合には、ピーキング処理がなされた画像がライブビュー画像に重畳して表示される。

次に、図３ないし図６に示すフローチャートを用いて、本実施形態におけるカメラの処理、特に深度合成モード処理について説明する。なお、図３ないし図６に示すフローチャート（後述する図１０に示すフローチャートも同様）は、フラッシュメモリ１３５に記憶されているプログラムに従ってマイクロコンピュータ１３１が各部を制御し実行する。

図３に示すフローは、ユーザが操作部１３３を操作することによって、パワースイッチがオンにされた際に動作をスタートする。なお、パワースイッチがオンとなった際に限らず、例えば、カメラの撮影準備を指示するレリーズ釦の半押しや、タッチパネルを伴う表示部１４５にタッチ操作された際等、他のタイミングで図３のフローをスタートさせるようにしてもよい。また、ユーザが操作部１３３を操作することによって、図３のフローを停止させるようにしてもよい。

図３に示すフローがスタートすると、まず、被写界深度調整モード（深度合成モード）か否かを判定する（Ｓ１）。ユーザは、メニュー画面において深度合成モードを設定することができる。このステップでは、深度合成モードが設定されているか否かについて判定する。

ステップＳ１における判定の結果、被写界深度調整モードが設定されていない場合には、撮影指示を示すスイッチがオンになったか（２ｎｄ押下げか否か）を判定する（Ｓ３）。ユーザが静止画記録用に本撮影を行う場合には、操作部１３３の撮影指示（レリーズ）釦を全押しする。

ステップＳ３における判定の結果、撮影指示を示すスイッチがオン（２ｎｄ押下げ）でない場合には、ステップＳ５〜Ｓ１５において、深度合成処理を行わず、通常のライブビュー表示を行う。まず、撮影を行う（Ｓ５）。ここでの撮影は、ライブビュー表示用に１フレーム分の画像データの取得を行う。具体的には、シャッタ１０１を開放した状態で、撮像素子１０３の電子シャッタによって所定時間の間、露光を行い、露光時間が経過すると、画像データを読み出す。露光時間は、ＡＥ処理部１１１によって算出される時間を用いる。読出しの際に、間引き処理を行ってもよい。

ステップＳ５において撮影を行うと、次に、画像処理を行う（Ｓ７）。ここでは、ステップＳ５において取得した画像データに対して、画像処理部１２１等において、基本画像処理やライブビュー表示用の画像処理を施す。基本画像処理としては、一般的な、デモザイキング、ホワイトバランス補正、カラーマトリクス、ガンマ補正、エッジ強調、ノイズリダクション等を行う。

画像処理を行うと、次に、ピーキングがオンか否かを判定する（Ｓ９）。ユーザはメニュー画面等において、ピーキング処理の設定を行うことができる。このステップでは、この設定がなされているか否かを判定する。なお、ピーキングがオンに設定されると、画像データにピーキング処理を施し、コントラストの高いエッジ部分を表示部１４５に強調表示するので、ピントの合っている範囲を確認することができる。

ステップＳ９における判定の結果、ピーキングがオン（設定）の場合には、ピーキング信号を生成する（Ｓ１１）。ここでは、ステップＳ７において画像処理された画像データを用いて、ピーキング信号生成部１１５がピーキング信号を生成する。ピーキング信号生成は、画像処理後の画像のエッジを抽出してそれを強調処理する。深度合成でも画像の先鋭度（コントラスト）の高い領域を抽出するので、同様の処理とすることもできる。ピーキング用に深度合成の処理を、簡略化したり、また先鋭度の高い領域を抽出するための閾値を変更したりしてもよい。ピーキング信号が生成できれば画像処理前の画像を用いても構わないし、被写体抽出などエッジ抽出以外の方法を用いても構わない。

ピーキング信号を生成すると、次に、重畳処理を行う（Ｓ１３）。ここでは、ステップＳ７で画像処理されたライブビュー表示用の画像データに、ステップＳ１１で生成されたピーキング信号に基づく画像データを重畳する。重畳処理は画像処理後の画像データに、ピーキング信号に基づく画像データを、例えば、単純加算すればよい。

ステップＳ１３において重畳処理を行うと、またはステップＳ９における判定の結果、ピーキングがオフの場合には、次に、ライブビュー（ＬＶ）表示を行う（Ｓ１５）。ピーキングがオン（設定）の場合には、ライブビュー画像にコントラストの高い部分を強調した画像を表示部１４５に表示する。一方、ピーキングがオフ（未設定）の場合には、ライブビュー画像のみを表示部１４５に表示する。

ステップＳ３に戻り、このステップにおける判定の結果、撮影指示を示すスイッチがオン（２ｎｄ押下げ）であった場合には、静止画撮影用の本撮影を行う（Ｓ２１）。ここでは、絞り２０３の絞り値は、ＡＥ処理部１１１によって算出された絞り値となるように制御する。また、シャッタ１０１を一旦閉じた後に、ＡＥ処理部１１１によって算出された露光時間の間、シャッタ１０１を開き、露光時間の経過後、シャッタ１０１を閉じる。この後、撮像素子１０３から画像データを読み出す。

ステップＳ２１において撮影を行うと、次に画像処理を行う（Ｓ２３）。ここでは、ステップＳ２１において取得した画像データに対して、画像処理部１２１等において、記録用の画像処理を施し、また、画像圧縮部１２５が画像データの圧縮処理を施す。この圧縮処理が施された画像データは、メモリＩ／Ｆ１３９を介して記録媒体１４１に記録される。

ステップＳ２３において画像処理を行うと、レックビュー表示を行う（Ｓ２５）。ここでは、ステップＳ２３において画像処理が施された画像データを用いて、表示部１４５に所定時間の間、レックビュー表示を行う。この表示によって、ユーザは記録用の撮影された画像を確認することができる。確認の結果、意図通りの撮影でない場合には、再撮影を行うことができる。

ステップＳ１に戻り、このステップの判定の結果、被写界深度調整モード（深度合成モード）が設定されている場合には、次に、撮影指示を示すスイッチがオンかどうか（２ｎｄ押下げか否か）を判定する（Ｓ３１）。前述したように、ユーザが静止画記録用に本撮影を行う場合には、操作部１３３のレリーズ釦を全押しする。

ステップＳ３１における判定の結果、撮影指示を示すスイッチがオン（２ｎｄ押下げ）でない場合には、ステップＳ３３、Ｓ３５において、通常のライブビュー表示を行うと共に、ピーキング処理を行って重畳表示を行う。まず、ライブビュー表示画像生成を行う（Ｓ３３）。ピーキングがオフの場合には、通常のライブビュー表示を行う。

一方、ピーキングが設定されている場合には、フォーカスレンズを予め決められている焦点位置に移動させ、その位置で画像データを取得する。そして、次の焦点位置に移動させて、その位置で画像データを取得する。フォーカスレンズ移動と画像データの取得を繰り返し行うことにより、複数の画像データを取得する。予め決められた焦点位置で画像データを取得する毎に、ピーキング処理を施し、ピーキング信号を取得する。また、それまでに取得したピーキング信号を合成し、合成したピーキング信号に基づく画像データを、ライブビュー表示用に取得した画像データに重畳し、重畳処理に基づく画像データを生成する。このライブビュー表示画像生成の詳しい動作については、図５を用いて後述する。

ステップＳ３３において、ライブビュー表示画像生成を行うと、次にライブビュー表示を行う（Ｓ３５）。ステップＳ３３において、深度合成用に予め決められた焦点位置で画像データを取得するので、画像データを取得する毎に、表示部１４５にライブビュー表示を行う。また、ステップＳ３３のライブビュー表示画像生成において、ピーキングオンであった場合には、ピーキング処理された画像も重畳してライブビュー表示を行う。

ステップＳ３１に戻り、このステップにおける判定の結果、撮影指示を示すスイッチがオン（２ｎｄ押下げ）であった場合には、ステップＳ４１以下において、深度合成のための撮影と合成処理等を行う。まず、Ｎ回繰り返しを設定し（Ｓ４１）、焦点位置の移動を行う（Ｓ４３）。ここでは、フォーカスレンズを予め決められている焦点位置に移動させ、その位置で停止する。

焦点位置移動を行うと、撮影を行う（Ｓ４５）。ここでは、移動した位置で画像データを取得し、この画像データをＳＤＲＡＭ１３７に一時記憶する。撮影を行うと、Ｎ回繰り返したか否かを判定する（Ｓ４７）。この判定の結果、Ｎ回繰り返しが終わっていない場合には、次の焦点位置に移動させて、その位置で画像データを取得し一時記憶する。フォーカスレンズ移動と画像データの取得をＮ回繰り返し行うことにより、Ｎ個の画像データを取得する。

Ｎ回繰り返しを行うと、次に、画像処理を行う（Ｓ４９）。ここでは、ステップＳ４５で取得し、一時記憶したＮ個の画像データに対して、画像処理部１２１が画像処理を施す。画像処理を施すと、次に、画像合成を行う（Ｓ５１）。ここでは、Ｎ個の画像データを用いて、画像合成部１２３が深度合成を行う。この深度合成は、Ｎ個の画像データについて位置合わせを行い、画像の先鋭度（コントラスト）の高い領域を抽出し、抽出された先鋭度が高い領域を合成し、合成画像の画像データを生成する。この生成された合成画像の画像データは、記録媒体１４１に記録される。

画像合成を行うと、次に、レックビュー表示を行う（Ｓ５３）。ここでは、ステップＳ５１において合成処理された画像データを用いて、表示部１４５に所定時間の間、レックビュー表示を行う。この表示によって、ユーザは記録用の深度合成画像を確認することができる。確認の結果、意図通りの合成画像でない場合には、再撮影を行う。

ステップＳ５３においてレックビュー表示を行うと、またはステップＳ３５においてライブビュー表示を行うと、またはステップＳ２５においてレックビュー表示を行うと、またはステップＳ１５においてライブビュー表示を行うと、次に、電源オフか否かを判定する（Ｓ１７）。ここでは、電源釦が操作され、電源オフとなったか否かを判定する。この判定の結果、電源がオンの場合には、ステップＳ１に戻り、前述の動作を実行する。一方、電源がオフの場合には、このフローを終了する。

このように、本フローにおいては、深度合成モード（被写界深度調整モード）が設定されていない場合であって、レリーズ釦の全押しがない場合には、通常のライブビュー表示がなされる（Ｓ１→Ｓ３→Ｓ５→Ｓ７→Ｓ９Ｎｏ→Ｓ１５）。また、このときピーキングが設定されている場合には、通常のライブビュー表示にピーキング表示を重畳したライブビュー画像が表示される（Ｓ１→Ｓ３→Ｓ５→Ｓ７→Ｓ９Ｙｅｓ→Ｓ１１→Ｓ１３→Ｓ１５）。

また、深度合成モード（被写界深度調整モード）が設定されている場合であって、レリーズ釦の全押しがない場合には、ライブビュー表示がなされる（Ｓ１Ｙｅｓ→Ｓ３１Ｎｏ→Ｓ３３→Ｓ３５）。このときのライブビュー表示については、図５を用いて後述する。深度合成モード（被写界深度調整モード）が設定されている場合であって、レリーズ釦の全押しがなされると、予め決められた焦点位置で、順次撮影を行い、この撮影によって取得した複数の画像データを用いて深度合成処理を施し、表示を行う（Ｓ１Ｙｅｓ→Ｓ３１Ｙｅｓ→Ｓ４１〜Ｓ５３）。

なお、このフローチャートは静止画撮影もできる。しかし、静止画撮影をできないようにしてもよく、その場合には、Ｓ３，Ｓ２１〜Ｓ２５、Ｓ３１、Ｓ４１〜Ｓ４３を省略すればよい。また、静止画撮影に代えて、または静止画撮影に加えて、動画撮影をできるようにしてもよい。

次に、図５に示すフローチャートを用いて、ライブビュー表示画像生成（図４のＳ３３）の詳しい動作について説明する。

ライブビュー表示画像生成のフローに入ると、まず、ステップ９と同様に、ピーキングがオン（設定）か否かを判定する（Ｓ６１）。この判定の結果、ピーキングがオンの場合には、次に、焦点位置移動が終了したか否かについて判定する（Ｓ６３）。深度合成モードの場合には、手動または自動的に、予め撮影を行うフォーカスレンズの焦点位置が決められている。このステップでは、予め決められた焦点位置に移動したか否かについて判定する。

ステップＳ６３における判定の結果、焦点位置に移動していない場合には、焦点位置移動を行う（Ｓ６５）。ここでは、予め決められた位置に、決められた順番に従って、フォーカスレンズの移動を行う。焦点位置および移動の順番については、図７を用いて後述する。

ステップＳ６５において焦点位置に移動させると、撮影を行う（Ｓ６７）。ここでの撮影は、ステップＳ５と同様に、ライブビュー表示用に１フレーム分の画像データの取得を行う。

撮影を行うと、次に、画像処理を行う（Ｓ６９）。ここでは、ステップＳ７と同様に、ステップＳ６７において取得した画像データに対して、画像処理部１２１等において、ライブビュー表示用の画像処理を施す。

画像処理を行うと、次に、ピーキング信号生成を行う（Ｓ７１）。ここでは、ステップＳ１１と同様に、ステップＳ６９において画像処理された画像データを用いて、ピーキング信号生成部１１５がピーキング信号を生成する。

ピーキング信号を生成すると、次に、ピーキング信号の読み込みを行う（Ｓ７３）。合成したピーキング信号は、後述するステップＳ７９において、ピーキング信号記憶部１１８に記憶している。このステップでは、この記憶されたピーキング信号を読み出す。

ピーキング信号の読み込みを行うと、次に、ピーキング信号の合成を行う（Ｓ７５）。ここでは、ステップＳ７３において生成したピーキング信号と、ステップＳ７３において読み出した合成ピーキング信号を、合成する。合成は、両信号を単純加算すればよい。なお、深度合成を始めて１回目の撮影の際には、ピーキング信号合成を行わず、１回目の撮影の際に取得した画像データに基づいて生成したピーキング信号を、ステップＳ７９においてピーキング信号記憶部１１８に記憶する。

ピーキング信号の合成を行うと、次に、重畳処理を行う（Ｓ７５）。ここでは、ステップＳ６７において取得したライブビュー用の画像データに、ステップＳ７５において合成したピーキング信号に基づく画像データを重畳する。ここで、生成した画像データに基づいて、ステップＳ３５（図４参照）においてライブビュー表示を行う。なお、毎回、ステップＳ６７において取得した最新の画像データを重畳用の画像データとして使用する以外にも、例えば、最初に基本となる焦点位置において画像データを取得して記憶し、この記憶画像を毎回読み出して使用するようにしてもよい。

ステップＳ６３に戻り、このステップにおける判定の結果、焦点位置移動が終了した場合には、ステップＳ６７と同様に、撮影を行う（Ｓ８１）。ここでは、焦点位置に移動しており、ピーキング処理を重複して行わず、単にライブビュー表示を行うための撮影を行う。撮影を行うと、ステップＳ６９と同様に、画像処理を行う（Ｓ８３）。ここで、ステップＳ８１において取得した画像データに対して画像処理を行う。

画像処理を行うと、ピーキング信号読込みを行う（Ｓ８５）。ここでは、ステップＳ７１において生成し、ピーキング信号記憶部１１８に記憶したピーキング信号を読み出す。ピーキング信号の読み込みを行うと、重畳処理を行う（Ｓ８７）。ここでは、ステップＳ８１において取得した画像データに、ステップＳ８５で読み出したピーキング信号に基づく画像データを重畳する。

ステップＳ７７またはＳ８７において、重畳処理を行うと、次にピーキング信号記憶を行う（Ｓ７９）。ステップＳ７５において合成したピーキング信号をピーキング信号記憶部１１８に記憶する。なお、１回目の撮影の場合には、ステップＳ７１において生成したピーキング信号を記憶しておく。ピーキング処理を行っている最中や焦点位置を変えた撮影の間に、被写体が大きく動いたり、手ぶれ等が発生したりすると、ピーキング処理によって抽出した画像のエッジが不連続になってしまう。そこで、画像のエッジが不連続となってしまう状態になった場合には、ピーキング信号記憶部１１８に記憶したピーキング信号を消去するようにしている。このピーキング信号記憶の詳細な動作については、図６を用いて後述する。

ステップＳ６１に戻り、このステップにおける判定の結果、ピーキングがオンでない場合には、撮影を行う（Ｓ９１）。ピーキングが設定されていない場合であることから、ステップＳ９１およびＳ９３において、通常のライブビュー表示を行うための処理を行う。ステップＳ９１においては、ここでの撮影は、ライブビュー表示用に１フレーム分の画像データの取得を行う。

撮影を行うと、次に、画像処理を行う（Ｓ９３）。ここでは、ステップＳ９１において取得した画像データに対して、画像処理部１２１等において、基本画像処理やライブビュー表示用の画像処理を施す。

ステップＳ９３において、画像処理を行うと、またはステップＳ７９においてピーキング信号記憶を行うと、ライブビュー表示画像生成のフローを終了し、元のフローにもどる。このライブビュー表示画像生成のフローにおいて生成された画像データに基づいて、ステップＳ３５（図４）において、ライブビュー表示が行われる。

このように、ライブビュー表示画像生成のフローにおいては、１回目の撮影において、フォーカスレンズを予め決められた焦点位置に移動させ（Ｓ６５）、この位置で撮影、画像処理を行い（Ｓ６７、Ｓ６９）。ここで生成された画像データに基づいてピーキング信号を生成し（Ｓ７１）、画像データにピーキング信号を重畳し（Ｓ７７）、ピーキング信号を記憶する（Ｓ７９）。

また、２回目の撮影以降において、フォーカスレンズを予め決められた焦点位置に移動させ（Ｓ６５）、この位置で撮影、画像処理を行い（Ｓ６７、Ｓ６９）、生成された画像データに基づいてピーキング信号を生成する（Ｓ７１）。そして、記憶されたピーキング信号を読み出し（Ｓ７３）、このピーキング信号とステップＳ７１で生成したピーキング信号を合成する。合成ピーキング信号とステップＳ６７で取得した画像データの重畳処理を行い（Ｓ７７）、この合成ピーキング信号を記憶する（Ｓ７９）。この重畳処理された画像データに基づいてライブビュー表示を行う（図４のＳ３５）。

次に、図６に示すフローチャートを用いて、ピーキング信号記憶（図５のＳ７９）の詳しい動作について説明する。ここでは、画像のエッジが不連続となってしまう状態になった場合には、ピーキング信号記憶部１１８に記憶したピーキング信号を消去し、一方、エッジが不連続とならない場合には、ピーキング信号を記憶するようにしている。また、撮影者が意図的にピーキング処理を終了した場合には、ピーキング信号を消去するようにしている。

ピーキング信号記憶のフローに入ると、まず、手ぶれが発生したか否かを判定する（Ｓ１０１）。カメラ本体１００にジャイロ等のカメラ本体に加えられた動きを検出する手ぶれセンサが搭載されている場合には、この手ぶれセンサの出力に基づいて判定する。また、画像データに基づいて手ぶれを検出するようにしてもよい。

ステップＳ１０１における判定の結果、手ぶれが発生していない場合には、次に、被写体の動きが大きいか否かについて判定する（Ｓ１０３）。ここでは、現在と所定時間前の画像データに基づいて、撮像面上の被写体の移動量が予め設定された閾値以上、変動した否かに基づいて判定する。

ステップＳ１０３における判定の結果、被写体の動きが大きくない場合には、次に、焦点距離が変更したか否かについて判定する（Ｓ１０５）。ここでは、交換レンズ２００から現在設定されている焦点距離に関する情報を取得し、焦点距離が予め決められた値以上、変動したか否かを判定する。焦点距離が変化すると画角が変化し、ピーキング処理によって得られるエッジが不連続となるからである。

ステップＳ１０５における判定の結果、焦点距離が変化していない場合には、次に、絞り値が変更したか否かについて判定する（Ｓ１０７）。ここでは、交換レンズ２００から現在設定されている絞り値に関する情報を取得し、絞り値が予め決められた値以上、変動したか否かを判定する。絞り値が変わると、被写界深度が変わるからである。なお、カメラ本体１００から交換レンズ２００に対して指示している絞り値に基づいて判定してもよい。また、被写体輝度に連動して絞り値が変化する場合には、被写体輝度に基づいて判定してもよい。

ステップＳ１０７における判定の結果、絞り値が変更していない場合には、次に、リセット指示があるか否かについて判定する（Ｓ１０９）。撮影者がピーキング処理を終了したい場合に行う。リセット指示は、撮影者が所定の動作をすることでカメラ本体に指示するようにしてもよい。例えば、操作釦（レリーズ釦等）の押下、タッチパネル上でタッチ操作、フォーカスリングの高速回転、焦点位置を所定量以上の移動等、種々の動作によって指示を行う。

ステップＳ１０９における判定の結果、リセット指示がない場合には、ピーキング信号を行う（Ｓ１１１）。ステップＳ１０１〜Ｓ１０９に示したいずれの条件にも当てはまらない場合、次のライブビュー表示画像生成時にピーキング信号を使用するために、合成または読み込みをしたピーキング信号を記憶する。

一方、ステップＳ１０１〜Ｓ１０９における判定の結果がＹｅｓの場合には、ピーキング信号記憶の記憶を消去する（Ｓ１１３）。この場合には、ステップＳ１０１〜Ｓ１０９における、いずれかの条件に当てはまった場合であり、記憶したピーキング信号を生成した状況から変化があるため、記憶しているピーキング信号を破棄する。

このように、ピーキング信号記憶のフローでは、中止するための所定の条件を満たすとピーキング信号を消去し、ピーキング処理を中止できるようにしている。また、中止するための所定の条件を満たしていない場合には、ピーキング信号を記憶し、ピーキング処理を続行できるようにしている。

次に、図７を用いて、前述のステップＳ４３（図４）、Ｓ６５（図５）における焦点位置移動制御について説明する。図７に示す例は、深度合成のための撮影枚数を５枚としているが、撮影枚数は５枚よりも多くてもよく、また少なくても構わない。

図７において、位置Ｌｒは、基準焦点位置であり、深度合成を行う際の焦点位置中心であり、また合成中心となる焦点位置（被写体距離）である。また、位置Ｌ１〜Ｌ４は、至近側から無限遠側までの間の焦点位置（被写体距離）である。図７には、撮影順番として静止画の場合には、静止画１と静止画２の２つの例を示す。この例は、図４のＳ４３において実行される。

静止画１は、まず、基準焦点位置Ｌｒにおいて撮影し、以後、Ｌ２、Ｌ３、Ｌ１、Ｌ４の順に撮影を行う。この方法では、基準焦点位置Ｌｒに近い焦点位置の時間的変化を少なくすることができ、深度合成処理時の位置あわせが容易になり、画質面で有利である。静止画２は、至近側から無限遠側に掛けて、Ｌ１、Ｌ２、Ｌｒ、Ｌ３、Ｌ４と順次撮影を行う。この方法では、焦点位置移動の移動速度と焦点位置の停止位置のバラつきを考慮することができる。また、トータルの移動時間を最小限にすることができる。

また、図７には、ライブビュー（ＬＶ）表示の場合の撮影順番の例として、ＬＶ１とＬＶ２の２つの例を示す。この例は、図５のＳ６５において実行される。ＬＶ１は、深度拡大幅を早く確認できるように、基準焦点位置から最も遠い焦点位置から順に撮影する。Ｌ３まで撮影した後はＬｒの位置で保持すればよい。リセット処理後や撮影準備指示スイッチがオン（１ｓｔレリーズ押下）後は、再度、最初から撮影する。また、ＬＶ２は、深度拡大幅を迅速に確認できるように、３点のみすなわち、Ｌ１、Ｌｒ、Ｌ４で撮影を行っている。

なお、図７では静止画撮影時とライブビュー表示時で同じ分割数にしている。しかし、ライブビュー表示の場合は静止画の場合よりも焦点位置間隔を租にして撮影枚数を減らしても良い。すなわち、焦点位置変更部３は、ライブビュー表示の場合は、静止画記憶の場合に対して、焦点位置の間隔を広くしてもよい。撮影枚数を減らすことにより、短時間で深度拡大幅の確認を行うことができる。

次に、図８を用いて、焦点位置の分割数と、ピーキング強度の関係について説明する。表示部１４５にピーキング処理の結果を表示する際に、焦点位置の分割数に応じてピーキング表示のパラメータを変更してもよい。図８において、横軸は焦点位置の分割数を示し、縦軸はピーキング強度を示している。

分割数を多くし、焦点位置の間隔を細かくする場合には、ピーキングの強度を弱くする。分割数が多い場合、画面内で広くピーキング信号を取得できるのでピーキングの強度を強くすると被写体が見づらくなってしまう。一方、分割数を少なくする場合（焦点位置の間隔が広い）にはピーキングの強度を強くする。分割数が少ない場合、ピーキング信号を取得できるのが画像の一部になることが多いのでピーキングの強度を強くしてピーキング信号を見やすくする。

このピーキング信号の強度の変更は、ピーキング強度制御部１１９が、ステップＳ７１（図５）におけるピーキング信号生成を行う際に併せて実行する。すなわち、ステップＳ７１において生成されたピーキング信号に対して、ピーキング強度制御部１１９がピーキングの強度を変更すればよい。このように、複数の焦点位置の間隔に応じてピーキング信号の強度を変更してもよく、さらに、複数の焦点位置の間隔が広いほどピーキング信号の強度を強くしてもよい。

次に、図９を用いて、本実施形態における撮影画像とピーキング信号付きの撮影画像の例を説明する。図９に示す例は、図７のＬＶ２の例と類似しており、撮影回数は、時刻Ｔ１、Ｔ２、Ｔ３に行われた３回であり、焦点位置は、Ｌｒ、Ｌ１、Ｌ４の順に撮影している。

撮影画像Ｐｈ１は、時刻Ｔ１、焦点位置Ｌｒにおいて、撮影した画像である。Ｆｏｎの範囲について、ピントが合っている。また、ピーキング信号付き撮影画像ＰＰｈ１は、撮影画像Ｐｈ１の画像データを用いて、ステップＳ７１〜Ｓ７７（図５）のピーキング処理を行って生成した画像である。ピーキング処理を行うことにより、画像のエッジＬｐ１もライブビュー画像に重畳して表示される。

撮影画像Ｐｈ２は、時刻Ｔ２、焦点位置Ｌ１において、撮影した画像である。Ｆｏｎの範囲について、ピントが合っている。また、ピーキング信号付き撮影画像ＰＰｈ２は、撮影画像Ｐｈ２の画像データを用いて、ステップＳ７１〜Ｓ７７（図５）のピーキング処理を行って生成した画像である。焦点位置Ｌ１に変更されたことから、画像のエッジＬｐ２が表示される。また、ピーキング処理の際に、ピーキング信号の合成を行っていることから、画像のエッジＬｐ１に加えて、エッジＬｐ２も表示される。従って、画像のエッジＬｐ１、Ｌｐ２がライブビュー画像に重畳して表示される。

撮影画像Ｐｈ３は、時刻Ｔ３、焦点位置Ｌ２において、撮影した画像である。Ｆｏｎの範囲について、ピントが合っている。また、ピーキング信号付き撮影画像ＰＰｈ３は、撮影画像Ｐｈ３の画像データを用いて、ステップＳ７１〜Ｓ７７（図５）のピーキング処理を行って生成した画像である。焦点位置Ｌ２に変更されたことから、画像のエッジＬｐ３が表示される。また、ピーキング処理の際に、ピーキング信号の合成を行っていることから、画像のエッジＬｐ１、Ｌｐ２に加えて、エッジＬｐ３も表示される。従って、画像のエッジＬｐ１、Ｌｐ２、Ｌｐ３がライブビュー画像に重畳して表示される。エッジＬｐ１〜Ｌｐ３を確認することにより、コントラストが高く、ピントの合っている部分が簡単に分かる。

このように、本実施形態においては、ライブビュー表示の際に、深度合成モードおよびピーキング設定を行っておくと、本撮影の際（２ｎｄ押下げの際）に、深度合成処理によって生成される深度合成画像のピントの合っている範囲を予測することができる。意図通りの被写界深度となっていない場合には、焦点位置間隔、焦点距離、絞り値等、種々の撮影条件を変更して、再度、ライブビュー表示で確認すればよい。

次に、図１０に示すフローチャートを用いて、本実施形態の深度合成の制御フローの変形例について説明する。本発明の一実施形態に係る図３および図４に示すフローチャートにおいては、ユーザが操作部１３３を操作することによって、処理をスタートさせた後、ユーザが操作部１３３を再度操作することによって処理を停止させるまで繰り返し実行されていた。これに対して、本変形例においては、レリーズ釦の半押し操作中のみピーキング処理を実行し、半押しが解除されるとピーキング処理も解除する。

本変形例は、図３および図４において、ステップＳ３０（図１０）を追加する点が相違し、他の処理は図３および図４のフローチャートと同じである。そこで、相違点を中心に説明し、同じ処理を実行するステップについては同一のステップ番号を付し、詳しい説明を省略する。

図１０に示すフローに入ると、深度合成モード（被写界深度調整モード）であるか否かを判定する（Ｓ１）。この判定の結果、深度合成モードが設定されている場合には、撮影準備指示スイッチがオン（１ｓｔ押下げ、即ち、レリーズ釦の半押し）操作がなされたか否かを判定する（Ｓ３１）。

ステップＳ３０における判定の結果、撮影準備指示スイッチがオン（１ｓｔ押下げ）でない場合には、ステップＳ５に進み撮影を行う。以下、図３に示す処理と同じである。一方、撮影準備指示スイッチがオン（１ｓｔ押下げ）であった場合には、ステップＳ３１（図４）に進み、撮影指示を示すスイッチがオン（２ｎｄ押下げ）であるか否かを判定する。従って、撮影準備指示スイッチがオン（１ｓｔ押下げ）であり、撮影指示を示すスイッチがオン（２ｎｄ押下げ）で無い場合に、すなわち、撮影準備指示（レリーズ釦の半押し）操作が継続している間だけ、ステップＳ３３、Ｓ３４において、深度合成時のピーキング信号付きのライブビュー表示を行う。また、レリーズ釦の半押し操作が解除されている場合には、通常のライブビュー表示が行われ（Ｓ５、Ｓ１５）、ピーキングが設定されている場合には、１枚の撮影がなされる毎にピーキング信号付きのライブビュー表示が行われる（Ｓ９Ｙｅｓ、Ｓ１１〜Ｓ１５）。

なお、図１０に示すフローチャートにおいては、撮影準備指示（レリーズ釦の半押し）操作中に、ピーキング信号付きのライブビュー表示を行うようにしていた。しかし、ピーキング信号付きのライブビュー表示を指示する操作部材としては、レリーズ釦に限らず他の操作部材、例えば、ファンクション釦、タッチパネル等であっても構わない。

このように、本変形例においては、撮影者がカメラ動作を指示するために表示指示部材の操作状態を検知する操作部（例えば、操作部１３３）を有し、操作部が操作状態を検知した場合に、合成ピーキング信号を重畳した画像を表示部にライブビュー表示するようにしている（例えば、図１０のＳ３０Ｙｅｓ→図４のＳ３３）。また、操作部が操作状態の解除を検知した場合には、ピーキング信号を重畳しない画像をライブビュー画像として表示する（例えば、図１０のＳ３０Ｎｏ→Ｓ５）。このため、撮影者が必要なときのみ、ピーキング処理を行わせることができる。

以上説明したように、本発明の一実施形態や変形例においては、焦点位置変更部により合焦レンズを異なる焦点位置に移動させて（例えば、図５のＳ６５参照）、撮像部により第１の画像データ、第２の画像データを取得させ（例えば、図５のＳ６７参照）、第１の画像データ、第２の画像データに対してピーキング信号生成部により第１のピーキング信号、第２のピーキング信号を生成させ（例えば、図５のＳ７１参照）、ピーキング信号合成部により、第１のピーキング信号と第２のピーキング信号とを合成し合成ピーキング信号を生成させ（例えば、図５のＳ７５参照）、表示用画像生成部により合成ピーキング信号を第２の画像に重畳して生成させる指示を行っている（例えば、図５のＳ７７参照）。

このため、深度拡大効果の確認を高速かつ容易に行うことができる。すなわち、本発明の一実施形態や変形例においては、ピーキング信号の生成を、撮像部から画像データを取得する毎に行い、かつ画像データが取得される毎にピーキング信号の合成を行っている。このため、深度合成処理を行ってからピーキング信号を生成するのに比較し、短時間で処理を行うことができ、深度拡大効果が容易に確認することができる。

なお、本発明の一実施形態や変形例においては、ＡＥ処理部１１１、ＡＦ処理部１１３、ピーキング信号生成部１１５、ピーキング信号合成部１１７、ピーキング強度制御部１１９、画像処理部１２１、画像合成部１２３、焦点位置制御部１２９等を、マイクロコンピュータ１３１とは別体に構成していた。しかし、これに限らず、これらの各部の全部または一部を、各部の全部または一部をソフトウエアで構成し、マイクロコンピュータ１３１内のＣＰＵによって実現するようにしてもよい。また、上述の各部の全部または一部を、ヴェリログ（Verilog）によって記述されたプログラム言語に基づいて生成されたゲート回路等のハードウエア構成でもよく、またＤＳＰ（Digital Signal Processor）等のソフトを利用したハードウエア構成を利用してもよい。これらは適宜組み合わせてもよいことは勿論である。また、マクロコンピュータ１３１内のＣＰＵによってソフトウエア的に実現され機能をハードウエア回路、ヴェリログ、ＤＳＰ等によって実現するようにしても構わない。

また、本実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもミラーレスカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話、スマートフォン、携帯情報端末、パーソナルコンピュータ（ＰＣ）、タブレット型コンピュータ、ゲーム機器等に内蔵されるカメラ、医療用カメラ、顕微鏡等の科学機器用のカメラ、自動車搭載用カメラ、監視用カメラでも構わない。いずれにしても、ピーキング処理を行う機器であれば、本発明を適用することができる。

また、本明細書において説明した技術のうち、主にフローチャートで説明した制御に関しては、プログラムで設定できるように工夫してあることが多く、記録媒体や記録部に収められる場合もある。この記録媒体、記録部への記録の仕方は、製品出荷時に記録してもよく、配布された記録媒体を利用してもよく、インターネットを介してダウンロードしたものでもよい。

また、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず」、「次に」等の順番を表現する言葉を用いて説明したとしても、特に説明していない箇所では、この順で実施することが必須であることを意味するものではない。

本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

１・・・撮像部、３・・・焦点位置変更部、５・・・ピーキング信号生成部、７・・・ピーキング信号合成部、９・・・表示用画像生成部、１１・・・表示部、１５・・・制御部、１００・・・カメラ本体、１０１・・・メカシャッタ、１０３・・・撮像素子、１０５・・・アナログ処理部、１０７・・・Ａ／Ｄ変換部、１１０・・・バス、１１１・・・ＡＥ処理部、１１３・・・ＡＦ処理部、１１５・・・ピーキング信号生成部、１１７・・・ピーキング信号合成部、１１８・・・ピーキング信号記憶部、１１９・・・ピーキング強度制御部、１２１・・・画像処理部、１２３・・・画像合成部、１２５・・・画像圧縮部、１２７・・・画像伸張部、１３１・・・マイクロコンピュータ、１３３・・・操作部、１３５・・・フラッシュメモリ、１３７・・・ＳＤＲＡＭ、１３９・・・メモリＩ／Ｆ、１４１・・・記録媒体、１４３・・・表示ドライバ、１４５・・・表示部、１９９・・・Ｉ／Ｆ、２００・・・交換式レンズ、２０１・・・撮影レンズ、２０３・・・絞り、２０５・・・ドライバ、２０７・・・マイクロコンピュータ、２０９・・・フラッシュメモリ

Claims (13)

1. 合焦位置を移動する焦点位置変更部と、
   被写体像を撮像し、画像データを取得する撮像部と、
   上記取得した画像データからピーキング信号を生成するピーキング信号生成部と、
   複数の上記ピーキング信号を合成し、合成ピーキング信号を生成するピーキング信号合成部と、
   上記合成ピーキング信号を画像データに重畳して表示用画像データを生成する表示用画像生成部と、
   上記焦点位置変更部により上記合焦位置を異なる焦点位置に移動させて上記撮像部により第１の画像データ、第２の画像データを取得させ、上記第１の画像データ、第２の画像データに対して上記ピーキング信号生成部により第１のピーキング信号、第２のピーキング信号を生成させ、上記ピーキング信号合成部により、上記第１のピーキング信号と上記第２のピーキング信号とを合成し合成ピーキング信号を生成させ、上記表示用画像生成部により上記合成ピーキング信号を上記第２の画像データに重畳して生成させる指示を行う制御部と、
   を有することを特徴とする撮像装置。
2. さらに上記表示用画像を表示する表示部と、
   を有し、
   上記制御部は、上記表示用画像生成部により生成した表示用画像を上記表示部に表示させる指示を行うことを特徴とする請求項１に記載の撮像装置。
3. 上記制御部は、
   上記焦点位置変更部により第１の焦点位置に合焦位置を移動し、上記撮像部により第１の画像を取得し、上記ピ−キング信号生成部により第１のピーキング信号を生成し、
   上記焦点位置変更部により上記第１の焦点位置とは異なる第２の焦点位置に合焦位置を移動し、上記撮像部により第２の画像を取得し、上記ピ−キング信号生成部により第２のピーキング信号を生成し、
   上記ピーキング信号合成部により上記第１のピーキング信号と、上記第２のピーキング信号を合成して合成ピーキング信号を生成し、
   上記表示用画像生成部にて上記合成ピーキング信号と、上記第２の画像に重畳して生成した表示用画像を上記表示部に表示させる指示を繰り返し行うようにする、
   ことを特徴とする請求項２に記載の撮像装置。
4. さらに上記ピーキング信号を記憶するピーキング信号記憶部と、
   を有し、
   上記ピーキング信号記憶部は、手ぶれ量、撮像面上の被写体の移動量、焦点距離、絞り値の全ての値が、予め設定された閾値未満の場合には、上記ピーキング信号を記憶し、一方、手ぶれ量、撮像面上の被写体の移動量、焦点距離、絞り値のうち、少なくとも１つの値が予め設定された閾値以上に変動した場合にはピーキング信号を記録しないことを特徴とする請求項１ないし３のいずれか１項に記載の撮像装置。
5. 上記焦点位置変更部は、ライブビュー表示の場合と静止画撮影の場合とで焦点位置移動の制御を変更することを特徴とする請求項３または４に記載の撮像装置。
6. 上記焦点位置変更部は、ライブビュー表示の場合に合焦位置を移動する範囲の中心の焦点位置から遠い無限遠側または至近側いずれかの焦点位置の画像から取得するように制御することを特徴とする請求項５に記載の撮像装置。
7. 上記焦点位置変更部は、ライブビュー表示の場合は、静止画記憶の場合に対して、焦点位置の間隔を広くすることを特徴とする請求項５に記載の撮像装置。
8. さらに、ピーキング信号の強度を変更するピーキング強度変更部と、
   を有し、
   上記複数の焦点位置の間隔に応じてピーキング信号の強度を変更することを特徴とする請求項７に記載の撮像装置。
9. 上記ピーキング強度変更部は、上記複数の焦点位置の間隔が広いほどピーキング信号の強度を強くすることを特徴とする請求項８に記載の撮像装置。
10. さらに、撮影者がカメラ動作を指示するために表示指示部材の操作状態を検知する操作部と、
    を有し、
    上記操作部が上記操作状態を検知した場合に上記合成ピーキング信号を重畳した画像を上記表示部にライブビュー表示することを特徴とする請求項２に記載の撮像装置。
11. 上記操作部が上記操作状態の解除を検知した場合には、ピーキング信号を重畳しない画像をライブビュー画像として表示することを特徴とする請求項１０に記載の撮像装置。
12. 被写体像を撮像し、画像データを取得する撮像部を有する撮像装置における撮像方法において、
    合焦位置を第１の焦点位置に移動させて上記撮像部によって第１の画像データを取得し、上記合焦位置を第１の焦点位置に移動させて上記撮像部によって第２の画像データを取得し、
    上記第１の画像データを用いて、第１のピーキング信号を生成し、上記第２の画像データを用いて第２のピーキング信号を生成し、
    上記第１のピーキング信号と上記第２のピーキング信号とを合成し合成ピーキング信号を生成し、
    上記合成ピーキング信号を上記第２の画像データに重畳させる、
    ことを特徴とする撮像方法。
13. 被写体像を撮像し、画像データを取得する撮像部を有する撮像装置のコンピュータを実行させるプログラム、
    合焦位置を第１の焦点位置に移動させて上記撮像部によって第１の画像データを取得し、上記合焦位置を第１の焦点位置に移動させて上記撮像部によって第２の画像データを取得し、
    上記第１の画像データを用いて、第１のピーキング信号を生成し、上記第２の画像データを用いて第２のピーキング信号を生成し、
    上記第１のピーキング信号と上記第２のピーキング信号とを合成し合成ピーキング信号を生成し、
    上記合成ピーキング信号を上記第２の画像データに重畳させる、
    ことを上記コンピュータに実行させること特徴とするプログラム。

Images