JP5163446B2 - 撮像装置、撮像方法及びプログラム - Google Patents

Description

本発明は、撮像装置、撮像方法及びプログラムに関する。

デジタルスチルカメラは、撮像素子に入射された被写体像（光学像）を電気信号に変換することによって、デジタル画像データを生成し、撮影者のレリーズ操作に応じて、該デジタル画像データをメモリカード等の記録媒体に記録する。一般的に、デジタルスチルカメラは、焦点合わせを容易にするために、オートフォーカス（自動焦点）機構が搭載されるとともに、Ｆ値が大きく被写界深度が深い光学系が採用されている。これにより、撮影者は、デジタルスチルカメラを被写体に向けてレリーズボタンを操作するだけで、オートフォーカス機構により該被写体に合焦した被写体像を撮像して、その被写体像のデジタル画像データを記録することができる。

また、特許文献１には、撮影後に焦点が合った範囲（合焦点）を任意に変更可能なデジタル画像データを生成可能なデジタルスチルカメラを提供するために、１回のレリーズ操作に応じて、マルチフォーカス撮像を行うデジタルスチルカメラが開示されている。この特許文献１のマルチフォーカス撮像では、１回のレリーズ操作に応じて、最短距離側の焦点位置から無限遠側の焦点位置まで、焦点位置を自動的に変更しながら、段階的に撮像することで、合焦点位置が相異なる複数枚の画像データを得ている。

特開２００３−１４３４６１号公報

しかしながら、従来のオートフォーカス機構を搭載したカメラでは、撮影後にユーザが異なる被写体（焦点位置）に焦点を合わせなおした画像を望んでも、撮影時に、マルチフォーカス画像が記録されていないので、希望に沿った画像を提供し得なかった。また、複数枚の画像を合成することにより、焦点を合わせなおした画像を生成する方法もあるが、合成処理で生成した画像では、違和感のない画像を得ることが非常に困難であった。

一方、特許文献１記載のカメラでは、マルチフォーカス撮像により、１つの被写体像について合焦点位置が異なる複数枚の画像データを得ることができるので、これらの問題を解決できる。

ところが、マルチフォーカス撮像は、焦点位置を変えながら複数枚の画像を撮像して記録するため、瞬時に行うことは現実的には不可能である。例えば、焦点位置を変更するために撮像光学系を駆動するのに要する時間や、撮像素子における画像信号の読み出しに要する時間などを考慮すると、マルチフォーカス撮像では、通常撮像と比べて、どうしても時間（例えば数秒程度）がかかってしまう。従って、マルチフォーカス撮像の後半に得られる画像は、レリーズ操作から所定時間経過した後に撮像されたものであるので、この間に被写体が動く場合もあり、シャッターチャンスを逃してしまうという問題があった。

つまり、特許文献１記載のマルチフォーカス撮像では、レリーズ操作前にオートフォーカス機構によって合焦された被写体の焦点位置などとは無関係に、レリーズ操作に応じて、単に最短距離側から無限遠側まで焦点位置を変更させて複数枚の画像を撮像している。このため、レリーズ操作直後には最短距離側に焦点が合った画像が得られ、レリーズ操作から所定時間（例えば数秒程度）経過した後に、無限遠側に焦点が合った画像が得られることとなる。そうすると、無限遠側に撮影者の望む被写体が存在し、該被写体に焦点を合わせてレリーズ操作を行った場合でも、無限遠側に焦点が合った画像は、レリーズ操作から所定時間遅れたタイミングで撮像された、シャッターチャンスを逃した画像となってしまう可能性があった。

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、シャッターチャンスを逃すことなく、マルチフォーカス撮像を行うことが可能な、新規かつ改良された撮像装置、撮像方法及びプログラムを提供することにある。

上記課題を解決するために、本発明のある観点によれば、受光した被写体像を撮像して画像信号を出力する撮像素子と、前記撮像素子に前記被写体像を結像させるための撮像光学系とを有する撮像部と、焦点位置を変更するために前記撮像光学系又は前記撮像素子の少なくとも一方を駆動させる駆動部と、前記撮像素子から出力された前記画像信号を処理することにより前記被写体像の画像データを生成する画像データ生成部と、前記撮像部、前記駆動部及び前記画像データ生成部を制御する制御部と、を備え、前記制御部は、検出指示に応じて、撮像範囲内の所定の被写体に焦点を合わせるためのオートフォーカス処理を行うことで、前記撮像範囲内の所定の被写体に合焦する合焦点位置を検出し、前記検出指示からレリーズ指示までの間に、前記オートフォーカス処理により検出された前記合焦点位置を中心とする所定の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行い、前記レリーズ指示に応じて、前記合焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するとともに、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲内で、前記合焦点位置を基準として焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行い、前記全域フォーカス撮像処理では、前記制御部は、前記レリーズ指示に応じて、前記合焦可能範囲内で焦点位置が前記合焦点位置から近距離側又は遠距離側に徐々に離れていくように焦点位置を変更する、撮像装置が提供される。

前記制御部は、前記ブラケット撮像処理により取得された前記保存用画像データのうち、前記レリーズ指示の直前の少なくとも１周期分の保存用画像データをストレージ部に保存するようにしてもよい。

前記制御部は、前記撮像光学系の被写界深度に応じて、焦点位置の変更位置を前記合焦可能範囲内に段階的に複数設定し、前記全域フォーカス撮像処理では、前記制御部は、前記レリーズ指示に応じて、前記複数の変更位置のうち前記合焦点位置に近い変更位置から順に焦点位置を段階的に変更するようにしてもよい。

前記制御部は、前記レリーズ指示に応じて、前記合焦点位置を基点として前記複数の変更位置を設定し、当該設定した複数の変更位置に焦点位置を段階的に変更するようにしてもよい。

前記制御部は、前記検出指示に応じて、焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを解析することにより、前記撮像範囲内に存在する１又は２以上の被写体と、当該被写体に合焦する前記合焦点位置の範囲を検出する被写体検出処理を行うようにしてもよい。

前記制御部は、前記検出指示に応じて前記被写体検出処理を実行してから前記レリーズ指示までの間に、前記被写体検出処理により検出された前記合焦点位置の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行うようにしてもよい。

前記制御部は、前記ブラケット撮像処理により取得された前記保存用画像データのうち、前記レリーズ指示の直前の少なくとも１周期分の保存用画像データをストレージ部に保存するようにしてもよい。

前記ブラケット撮像処理では、前記制御部は、前記被写体検出処理により検出された複数の被写体の中から選択された１の被写体に合焦する前記合焦点位置の範囲内で、焦点位置を変更するようにしてもよい。

前記制御部は、前記レリーズ指示に応じて、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲のうち、前記被写体検出処理により検出された前記合焦点位置の範囲内で、焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する被写体撮像処理を行うようにしてもよい。

前記制御部は、前記レリーズ指示に応じて、前記被写体撮像処理を行った後に、前記合焦可能範囲内で焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行うようにしてもよい。

前記被写体撮像処理では、前記制御部は、前記被写体検出処理により検出された前記被写体の中から選択された１又は２以上の被写体に合焦する前記合焦点位置の範囲内で、焦点位置を変更するようにしてもよい。

前記被写体撮像処理では、前記制御部は、前記被写体検出処理により検出された前記合焦点位置の範囲に応じて、前記撮像光学系の絞りを制御するようにしてもよい。

前記制御部は、前記被写体検出処理により検出された前記被写体に対応する焦点位置における被写界深度が、当該被写体に合焦する前記合焦点位置の範囲以上となるように、前記撮像光学系の絞りを制御するようにしてもよい。

前記撮像光学系は、断面形状を凸状又は凹状に変形可能に構成された変形ミラーを備え、前記駆動部は、前記制御部の指示に基づいて前記変形ミラーを変形駆動させることにより、前記焦点位置を変更するようにしてもよい。

また、上記課題を解決するために、本発明の別の観点によれば、受光した被写体像を撮像して画像信号を出力する撮像素子と、前記撮像素子に前記被写体像を結像させるための撮像光学系とを有する撮像部と、焦点位置を変更するために前記撮像光学系又は前記撮像素子の少なくとも一方を駆動させる駆動部と、前記撮像素子から出力された前記画像信号を処理することにより前記被写体像の画像データを生成する画像データ生成部と、前記撮像部、前記駆動部及び前記画像データ生成部を制御する制御部と、を備えた撮像装置における撮像方法であって、検出指示に応じて、撮像範囲内の所定の被写体に焦点を合わせるためのオートフォーカス処理を行うことで、前記撮像範囲内の所定の被写体に合焦する合焦点位置を検出するステップと、前記検出指示からレリーズ指示までの間に、前記オートフォーカス処理により検出された前記合焦点位置を中心とする所定の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行うステップと、前記レリーズ指示に応じて、前記合焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するとともに、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲内で、前記合焦点位置を基準として焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行うステップと、を含み、前記全域フォーカス撮像処理では、前記レリーズ指示に応じて、前記合焦可能範囲内で焦点位置が前記合焦点位置から近距離側又は遠距離側に徐々に離れていくように焦点位置を変更する、撮像方法が提供される。

また、上記課題を解決するために、本発明の別の観点によれば、受光した被写体像を撮像して画像信号を出力する撮像素子と、前記撮像素子に前記被写体像を結像させるための撮像光学系とを有する撮像部と、焦点位置を変更するために前記撮像光学系又は前記撮像素子の少なくとも一方を駆動させる駆動部と、前記撮像素子から出力された前記画像信号を処理することにより前記被写体像の画像データを生成する画像データ生成部と、前記撮像部、前記駆動部及び前記画像データ生成部を制御する制御部と、を備えた撮像装置のコンピュータに、検出指示に応じて、撮像範囲内の所定の被写体に焦点を合わせるためのオートフォーカス処理を行うことで、前記撮像範囲内の所定の被写体に合焦する合焦点位置を検出するステップと、前記検出指示からレリーズ指示までの間に、前記オートフォーカス処理により検出された前記合焦点位置を中心とする所定の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行うステップと、前記レリーズ指示に応じて、前記合焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するとともに、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲内で、前記合焦点位置を基準として焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行うステップと、を実行させるためのプログラムであって、前記全域フォーカス撮像処理では、前記レリーズ指示に応じて、前記合焦可能範囲内で焦点位置が前記合焦点位置から近距離側又は遠距離側に徐々に離れていくように焦点位置を変更する、プログラムが提供される。

上記構成により、検出指示に応じて、撮像範囲内の所定の被写体に合焦する合焦点位置が検出され、レリーズ指示に応じて、前記合焦点位置において前記被写体像を撮像して得た前記画像データが保存用画像データとして取得されるとともに、前記合焦点位置を基準として焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データが保存用画像データとして取得される。これにより、レリーズ指示前に検出指示に応じて検出した合焦点位置を検出し、レリーズ指示後に当該合焦点位置を基準として焦点位置を変更しながら、変更された焦点位置で被写体像を撮像して画像データが順次得られる。従って、レリーズ指示で表されるシャッターチャンスに近いときに、予め検出された合焦点位置及びその近傍に合焦した画像データが得られる。

以上説明したように本発明によれば、シャッターチャンスを逃すことなく、マルチフォーカス撮像を行うことができる。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．第１の実施形態（レリーズ後の全域フォーカス撮像）
２．第２の実施形態（レリーズ前のブラケット撮像とレリーズ後の全域フォーカス撮像の組合せ）
３．第３の実施形態（レリーズ前の被写体検出とレリーズ後の全域フォーカス撮像の組合せ）
４．第４の実施形態（レリーズ前の被写体検出とレリーズ後の被写体撮像の組合せ）
５．第５の実施形態（レリーズ前の被写体検出とレリーズ後の被写体撮像及び全域フォーカス撮像の組合せ）
６．第６の実施形態（レリーズ後の被写体撮像において絞りを制御）

＜用語の定義＞
まず、本発明の各実施形態の説明に先立ち、本明細書で用いる各種の用語を定義する。

「撮像装置」は、被写体像を撮像して画像データを取得するための装置である。撮像装置は、主として静止画像（写真）データを取得するためのデジタルスチルカメラと、主として動画像データを取得するためのデジタルビデオカメラを含む。デジタルスチルカメラは、動画像データを取得する機能を兼備してもよいし、デジタルビデオカメラは、静止画像データを取得する機能を兼備してもよい。以下の実施形態では、本発明の撮像装置の例として、主としてデジタルスチルカメラの例を挙げて説明するが、本発明の撮像装置は、デジタルビデオカメラなど、任意のカメラであってもよい。
「撮像」とは、撮像装置において、撮像素子により受光した被写体像を画像信号に変換することを意味する。
「撮像範囲」は、撮像装置により撮像可能な撮像空間の範囲であり、画角に対応する。
「被写体像」は、撮像装置の撮像光学系を介して撮像素子に入射される光学像であって、撮像装置の撮像範囲内に存在する被写体を表す光学像である。
「画像データ」は、撮像素子により被写体像を撮像して得た画像信号を、信号処理にすることにより得られるデジタルデータである。

「焦点位置」は、撮像装置の撮像光学系の焦点の位置（Ｆｏｒｃｕｓ Ｐｏｉｎｔ）である。詳細には、「焦点位置」は、撮像空間において該撮像光学系の焦点が存在する、撮像光学系の光軸上の位置である。撮像装置の撮像光学系又は撮像装置を駆動することにより、焦点位置を変更できる。撮像装置の撮像光学系のレンズ中心から焦点位置までの距離を、「焦点距離」と称する。
「合焦」は、撮像装置の撮像光学系の焦点が撮像範囲内の所定の被写体に合うことをいう。
「合焦点位置」は、撮像装置の撮像光学系の焦点が撮像範囲内の所定の被写体に合ったときの焦点位置である。
「合焦範囲」は、焦点位置がある合焦点位置にあるときに、撮像光学系の被写界深度により焦点が合う、合焦点位置の前後の焦点位置の範囲である。ここで、「合焦点位置の前後」とは、撮像光学系の光軸（Ｚ軸）上における、合焦点位置の近距離側（手前側）及び遠距離側（奥側）である。この合焦範囲の説明から分かるように、ある被写体に合焦するときの焦点位置には幅がある。このため、本発明における「所定の被写体に合焦する合焦点位置の検出」とは、当該被写体に合焦する合焦範囲内の任意の焦点位置を検出することを意味する。
「合焦可能範囲」は、最短距離側の焦点位置（マクロ）から無限遠側の焦点位置まで、撮像装置の撮像光学系が物理的に合焦可能な焦点位置の範囲である。
「Ｘ軸方向」は、撮像空間の水平方向、「Ｙ軸方向」は撮像空間の垂直方向、「Ｚ軸方向」は、撮像空間の奥行き方向（撮像光学系の光軸方向）である。Ｘ軸方向及びＹ軸方向は、撮像装置で得られた画像の撮像平面を定め、Ｚ軸方向は、撮像光学系の焦点を変更する方向となる。

「検出指示」は、合焦点位置を検出するための契機となる指示である。検出指示は、例えば、ユーザによるレリーズボタン（シャッターボタン）の半押し操作が代表的である。しかし、その他にも、例えば、撮像装置の電源をオンにする操作、撮像装置の動作モードを撮像モードに切り替える操作、その他のユーザ操作、撮像により得た画像データに対する顔検出処理による顔検出、などを契機として、検出指示とすることもできる。
「レリーズ指示」は、被写体像を撮像して得た画像データを保存用画像データとして取得するための契機となる指示である。一般的なデジタルスチルカメラでは、「レリーズ」は、被写体像を撮像して得た画像データを記録媒体に記録することを意味し、レリーズボタンの全押し操作が代表的である。しかし、本明細書における「レリーズ指示」は、当該レリーズボタンの全押し操作に限られず、例えば、撮像装置に対するその他のユーザ操作、撮像により得た画像データに対するスマイル検出処理による被写体人物の笑顔の検出、などを契機として、レリーズ指示とすることもできる。
「保存用画像データ」は、撮像素子により撮像された被写体像の画像信号を信号処理して得られる画像データのうち、撮像装置又は外部機器で記録媒体に保存される画像データである。例えば、デジタルスチルカメラでは、撮像モード中は、撮像素子により常時被写体像を撮像して画像データを生成し、撮像装置のモニタに該画像データをライブビュー画像として表示している。このように経時的に得られる全ての画像データが記録媒体に保存される訳ではなく、上述のレリーズ指示などが生じたタイミングの画像データが記録媒体に保存される。一方、デジタルビデオカメラでは、経時的に得られる全ての画像データが保存用画像データとして記録媒体に保存される。

「オートフォーカス処理」は、撮像装置が撮像範囲内の任意の被写体に合焦する焦点位置を自動的に検出する処理である。オートフォーカス（以下「ＡＦ」という。）処理は、所定の被写体に合焦する焦点位置を検出する検出処理と、当該被写体に焦点を追従させるよう焦点位置を変更する追従処理とを含んでも良い。ＡＦ対象の被写体は、例えば、撮像範囲内に設けられた所定のＡＦ領域（例えば画像中央エリア）若しくは基準点に存在する被写体であってもよいし、ユーザがタッチパネル等のＡＦ位置指定手段を用いて撮像範囲内でＡＦ対象の被写体を自由に選択できるようにしてもよい。
「被写体検出処理」は、焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを分析することにより、撮像範囲内に存在する１又は２以上の被写体を検出する処理である。この被写体検出処理により、撮像範囲内に存在する被写体と、当該被写体に合焦する合焦点位置の範囲を検出できる。

「ブラケット撮像処理」は、検出された合焦点位置を含む所定の範囲内で焦点位置を周期的に変更しながら、当該変更された複数の焦点位置において被写体像を撮像して得た画像データを保存用画像データとして取得する処理である。ブラケット撮像は、フォーカスブラケット撮像とも称される。かかるブラケット撮像処理では、例えば、上記ＡＦ処理で検出された合焦点位置を中心とする所定の範囲内で、焦点位置を変更してもよいし、或いは、上記被写体検出処理で検出された被写体に合焦する合焦点位置の範囲内で、焦点位置を変更してもよい。このブラケット処理により、合焦点位置の近傍に焦点位置を変更して撮像できるので、合焦点位置の位置ずれを補償できる。
「マルチフォーカス撮像処理」は、所定の範囲内で焦点位置を段階的又は連続的に変更させながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを保存用画像データとして取得する処理である。このマルチフォーカス処理の一例として、上記合焦可能範囲の全域を焦点位置の変更範囲とする「全域フォーカス撮像処理」や、被写体検出処理により検出された被写体に合焦する合焦点位置の範囲を焦点位置の変更範囲とする「被写体撮像処理」などがある。
「全域フォーカス撮像処理」は、上記合焦可能範囲内で焦点位置を段階的又は連続的に変更させながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを保存用画像データとして取得する処理である。全域フォーカス撮像処理は、マルチフォーカス処理の一例である。
「被写体撮像処理」は、上記被写体検出処理で検出された１又は２以上の被写体のうちの少なくとも１つの被写体に合焦する合焦点位置の範囲内で、焦点位置を段階的又は連続的に変更させながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを保存用画像データとして取得する処理である。被写体撮像処理は、マルチフォーカス処理の一例である。

＜第１の実施形態＞
次に、本発明の第１の実施形態に係る撮像装置及び撮像方法について説明する。第１の実施形態に係る撮像装置は、検出指示に応じて、ＡＦ処理を行って所定の被写体に対する合焦点位置を検出し、その後のレリーズ指示に応じて、検出された合焦点位置を基準として焦点位置を変更させながら全域フォーカス撮像を行うことを特徴としている。

即ち、本実施形態に係る撮像装置は、検出指示に応じて、撮像範囲内の所定の被写体に焦点を合わせるためのＡＦ処理を行うことで、所定の被写体に焦点を合わせた合焦点位置を検出する。その後、該撮像装置は、レリーズ指示に応じて、上記検出された合焦点位置において被写体像を撮像して得た画像データを保存用画像データとして記録媒体に記録する。さらに、該撮像装置は、上記検出された合焦点位置を基準として、合焦可能範囲内において焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを保存用画像データとして記録する全域フォーカス撮像を行う。

かかる全域フォーカス撮像により、合焦可能範囲内で異なる位置に焦点が合った複数枚の保存用画像データを得ることができる。撮影後に、撮影後に合焦点位置を任意に変更可能なデジタル画像データを得ることができるので、撮影後にユーザが異なる被写体（焦点位置）に焦点を合わせなおした画像を容易に取得できる。以下に、本実施形態に係る撮像装置について詳述する。

［撮像装置の構成］
まず、図１を参照して、本実施形態に係る撮像装置１の構成について説明する。図１は、本実施形態に係る撮像装置１の構成を示すブロック図である。

図１に示すように、撮像装置１は、例えば、静止画像及び動画像の撮像記録が可能なデジタルスチルカメラとして構成されている。撮像装置１は、撮像光学系（Ｌ１、Ｌ２、２、３）と、撮像素子４と、前処理部５と、信号処理部６と、ＡＦ素子７と、ミラー駆動回路８と、絞り制御部９と、撮像制御部１０と、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、メモリ部１２と、操作入力部１３と、バス１４と、表示部１５と、圧縮／伸張処理部１６と、ストレージ部１７を備える。

このうち、撮像光学系及び撮像素子４は、本発明の撮像部の具現例であり、撮像光学系により撮像素子４に被写体像を結像させ、撮像素子４により、受光した被写体像を撮像して画像信号を出力する。また、前処理部５及び信号処理部６は、本発明の画像データ生成部の具現例であり、撮像素子４から出力された画像信号を処理することにより被写体像の画像データを生成する。また、ミラー駆動回路８は、本発明の駆動部の具現例であり、変形ミラー装置２を駆動させて、焦点位置を変更する。また、ＣＰＵ１１及びメモリ部１２は、本発明の制御部の具現例であり、撮像装置１の各部を制御する。以下に、撮像装置１の各部について説明する。

撮像光学系は、レンズＬ１、変形ミラー装置２、レンズＬ２、絞り３を備える。レンズＬ１、レンズＬ２は、撮像素子４に被写体像（光学像）を結像させるための撮像光学系におけるレンズ群を模式的に示している。レンズＬ１は、変形ミラー装置２に被写体像を導くためのレンズ群、レンズＬ２は上記レンズＬ１を介して変形ミラー装置２のミラー面にて反射された被写体像を撮像素子４に導くためのレンズ群を模式的に示している。なお、実際の撮像光学系は、被写体像を撮像素子４に結像させるものであれば、例えば、より多数のレンズ、不要な波長を除去する光学フィルタ、その他の光学素子などを備えてもよい。

変形ミラー装置２は、断面形状を凸状又は凹状に変形可能な変形ミラーを備えた装置である。変形ミラー装置２は、その表面側に可撓性を有する部材（後述する可撓性部材）が形成されていると共に、該可撓性部材に例えばアルミニウム等の金属膜が成膜されてミラー面が形成されている。図中のミラー駆動回路８からの駆動信号に応じて可撓性部材の形状が変形されることで、ミラー面の形状が凸状又は凹状に変形し、これによって焦点位置を変更させることができる。なお、変形ミラー装置２の構成、及びその動作については後述する。

絞り３は、上記変形ミラー装置２とレンズＬ２との間に挿入され、後述する絞り制御部９の制御に基づき入射光の通過範囲を変化させることで撮像素子４に結像される被写体像の露光量を調整する。

撮像素子４は、例えば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などの固体撮像素子で構成される。撮像素子４は、入射された被写体像を撮像して、撮像画像信号を生成する。つまり、撮像素子４は、上記撮像光学系を介して導かれた光（被写体像）を光電変換し、Ｒ（赤）、Ｇ（緑）、Ｂ（青）による画像信号としての電気信号を出力する。この撮像素子４の画像信号の読み出し制御は、後述するＣＰＵ１１の指示に基づき撮像制御部１０が行う。

前処理部５は、露光画像信号を前処理する所謂アナログフロントエンドであり、サンプルホールド／ＡＧＣ（Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路や、ビデオＡ／Ｄコンバータを備える。例えば、前処理部５は、撮像素子４から出力される画像信号としてのアナログ電気信号に対して、ＣＤＳ（ｃｏｒｒｅｌａｔｅｄ ｄｏｕｂｌｅ ｓａｍｐｌｉｎｇ：相関２重サンプリング）処理、プログラマブルゲインアンプ（ＰＧＡ）によるゲイン処理、Ａ／Ｄ変換処理などを行う。また、前処理部５は、画像信号に上記各種の処理を施して得られた撮像画像データに対して、感度バラツキ補正処理やホワイトバランス処理などを行う。

信号処理部６は、上記前処理部５を介して得られる撮像画像データ（Ｒ、Ｇ、Ｂ）に
対し、各種の画像信号処理を施して、最終的な画像データを得る。

ここで、図２を参照して、信号処理部６の内部構成例を説明する。図２に示すように、信号処理部６は、例えば、画素補間処理部２０、階調補正処理部２１Ｒ、２１Ｇ、２１Ｂ、シェーディング補正処理部２２Ｒ、２２Ｇ、２２Ｂ、ＲＧＢ／ＹＵＶ変換処理部２３、撮像フレーム補間処理部２４、Ｙシェーディング補正処理部２５、周波数特性補正処理部２６、及び合焦評価値計算部２７を備える。

図２の画素補間処理部２０は、上記前処理部５を介して得られるＲ、Ｇ、Ｂによる各撮像画像データ（それぞれＲ画像データ、Ｇ画像データ、Ｂ画像データとする）に対し画素補間処理を施す。この画素補間処理部２０による画素補間処理が施されたＲ画像データは階調補正処理部２１Ｒへ、Ｇ画像データは階調補正処理部２１Ｇへ、Ｂ画像データは階調補正処理部２１Ｂへそれぞれ供給される。

階調補正処理部２１Ｒ、２１Ｇ、２１Ｂは、供給された画像データに対し階調補正処理（例えば１２ｂｉｔから８ｂｉｔへの圧縮処理など）を施す。階調補正処理部２１Ｒによって処理されたＲ画像データはシェーディング補正処理部２２Ｒへ、Ｇ画像データはシェーディング補正処理部２２Ｇへ、Ｂ画像データはシェーディング補正処理部２２Ｂへ供給される。

シェーディング補正処理部２２Ｒ、２２Ｇ、２２Ｂは、供給された画像データに対し、例えば画像周辺光量の低下などとして現れる、撮像光学系や撮像素子４の特性に起因した輝度ムラ（シェーディング）を補正する処理を施す。

ＲＧＢ／ＹＵＶ変換処理部２３は、上記シェーディング補正処理部２２Ｒ、２２Ｇ、２２Ｂでそれぞれ処理されたＲ画像データ、Ｇ画像データ、Ｂ画像データに基づき、Ｙ信号（輝度信号）としての画像データ（Ｙ画像データ）、Ｕ信号（Ｂ−Ｙ）としての画像データ（Ｕ画像データ）、Ｖ信号（Ｒ−Ｙ）としての画像データ（Ｖ画像データ）を生成する。この場合、Ｙ、Ｕ、Ｖのサンプリング比は例えばＹ：Ｕ：Ｖ＝４：２：２など、Ｙに対しＵ、Ｖの方が小さくなるように設定される。

撮像フレーム補間処理部２４は、上記ＲＧＢ／ＹＵＶ変換処理部２３で得られたＹ画像データ、Ｕ画像データ、Ｖ画像データに対しフレーム補間処理を施す。この撮像フレーム補間処理部２４で処理されたＵ画像データ、Ｖ画像データは、それぞれ図１に示されるバス１４に出力される。また、撮像フレーム補間処理部２４で処理されたＹ画像データはＹシェーディング補正処理部２５へ供給される。

Ｙシェーディング補正処理部２５は、上記撮像フレーム補間処理部２４で処理されたＹ画像データに対しシェーディング補正処理を施す。周波数特性補正処理部２６は、上記Ｙシェーディング補正処理部２５で処理されたＹ画像データに対し、例えば高域補正（輪郭補正）処理としての周波数特性補正処理を施す。この周波数特性補正処理部２６で処理されたＹ画像データは、合焦評価値計算部２７に供給される。

合焦評価値計算部２７は、上記周波数特性補正処理部２６で処理されたＹ画像データから、合焦点位置の探索を行うにあたっての評価指標となる合焦評価値Ｅｖを計算する。具体的には、合焦評価値計算部２７は、例えば、上記Ｙ画像データの高周波成分の大きさを合焦評価値Ｅｖとして計算する。この合焦評価値計算部２７にて計算された合焦評価値Ｅｖは、図１に示すようにＣＰＵ１１に対して供給される。

図１に戻り説明を続ける。ＡＦ素子７は、例えばラインセンサなどで構成され、被写体に対して焦点が合っているか否かを検出するために用いられる。ＡＦ素子７の検出信号はＣＰＵ１１に入力され、ＣＰＵ１１は、該検出信号に基づいてＡＦ処理を制御して、所定の被写体に焦点が合うようにミラー駆動回路８に指示して変形ミラーの変形状態を制御する。なお、ＡＦ素子７は、一般的に一眼レフカメラなどの高性能カメラに設けられるが、デジタルスチルカメラでは、かかるＡＦ素子７を省略してもよい。この場合、ＣＰＵ１１は、上記信号処理部６により撮像画像信号を処理することで得られた合焦評価値Ｅｖに基づいて、ＡＦ処理を制御してもよい。

ミラー駆動回路８は、ＣＰＵ１１からの指示に基づいて、変形ミラー装置２を駆動させて変形ミラー装置２の変形状態を変えることで、焦点位置を調整する。かかる変形ミラー装置２を駆動の詳細については後述する。

絞り制御部９は、ＣＰＵ１１からの指示に基づいて、絞り３の開度を制御して、被写体像の露光量を適正値に調整する。

撮像制御部１０は、例えばタイミングジェネレータ（ＴＧ）で構成され、ＣＰＵ１１からの指示に基づき、撮像素子４の電子シャッタースピードを制御する。撮像制御部１０は、撮像素子４に必要な動作パルスを生成する。例えば、撮像制御部１０は、垂直転送のための４相パルス、フィールドシフトパルス、水平転送のための２相パルス、シャッタパルスなどの各種パルスを生成し、撮像素子４に供給する。この撮像制御部１０により撮像素子４を駆動（電子シャッタ機能）させることが可能となる。

ＣＰＵ１１は、撮像装置１の各部を制御する制御部として機能する。このＣＰＵ１１に対してはメモリ部１２が設けられ、メモリ部１２は、例えば、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリなどを備える。

ＣＰＵ１１は、当該メモリ部１２内に格納されるプログラムに従って各種演算処理や、絞り制御部９、撮像制御部１０、ミラー駆動回路８及びバス１４を介した各部と制御信号等のやりとりを行って、これら各部に所要の動作を実行させる。

例えば、前処理部５にて検出された撮像信号の光量の情報に基づき、絞り制御部９に指示して絞り３を駆動することで、適正な絞り値が得られるように制御する。また、先に説明した信号処理部６内の合焦評価値計算部２７から取得した合焦評価値Ｅｖに基づきミラー駆動回路８に指示して、変形ミラー装置２の変形状態を制御する。これにより、撮像光学系の焦点位置を変更したり、上述したＡＦ処理、被写体検出処理、マルチフォーカス撮像処理、全域フォーカス撮像処理、被写体撮像処理、ブラケット撮像処理などの撮像処理を制御したりできるが、これについては後述する。

ＣＰＵ１１に付随して設けられるメモリ部１２（例えばＲＯＭ）には、ＣＰＵ１１に上記各種の制御処理を実行させるためのプログラムが格納されており、ＣＰＵ１１は、該プログラムに基づいて、上記各制御のための必要な演算・制御処理を実行する。

本実施形態に係るプログラムは、上述したＣＰＵ１１の各種制御を、ＣＰＵ１１に実行させるためのプログラムである。このプログラムは、撮像装置１に内蔵された記憶装置（ＨＤＤ、ＲＯＭ、フラッシュメモリ等）に予め格納しておくことができる。また、当該プログラムは、ＣＤ、ＤＶＤ、ブルーレイディスク等の光ディスク、メモリカードなどのリムーバブル記録媒体に格納されて、撮像装置１に提供されてもよいし、或いは、ＬＡＮ、インターネット等のネットワークを介して撮像装置１にダウンロードされてもよい。

操作入力部１３は、例えばキー、ボタン、ダイヤル、タッチパネル等の操作子を有する例えば、操作入力部１３は、電源オン／オフを指示するための操作子や、撮像画像の記録の開始を指示するためのレリーズ操作子（レリーズボタン）、ズーム調整用の操作子、合焦させる被写体の選択等のように画像位置指定手段として用いられるタッチパネルなど、各種の動作指示や情報入力を行うための操作子を具備する。このうち、レリーズボタンは、ユーザが上記ＡＦ用又は被写体検出用の検出指示やレリーズ指示を入力するための手段として機能する。例えば、シャッターボタンを途中まで押下（半押し）することで、検出指示が入力され、シャッターボタンを最後まで押下（全押し）することで、レリーズ指示が入力される。操作入力部１３は、このような操作子から得られる情報をＣＰＵ１１に供給し、ＣＰＵ１１はこれらの情報に対応した必要な演算処理や制御を行う。

圧縮／伸張処理部１６は、バス１４を介して入力される画像データについての圧縮／伸張処理、例えば、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式に従った画像圧縮／伸張処理を行う。撮像により得られた画像データをストレージ部１７に記録するときには、圧縮／伸張処理部１６は、当該画像データを圧縮して、データ量を低減する。一方、ストレージ部１７に記録された画像データを再生するときには、圧縮／伸張処理部１６は、当該画像データを伸張して、表示部１５等に送る。

ストレージ部１７は、画像データその他の各種データの保存に用いられる。このストレージ部１７は、フラッシュメモリなどの半導体メモリにより構成されてもよいし、例えばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などにより構成されてもよい。また、ストレージ部１７は、撮像装置１に内蔵された記録媒体ではなく、撮像装置１に着脱可能なリムーバブル記録媒体、例えば、半導体メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなどの記録媒体に対応する記録再生ドライブなどで構成されてもよい。もちろん、内蔵タイプのメモリと、リムーバブル記録媒体に対する記録再生ドライブの両方が搭載されてもよい。かかるストレージ部１７は、ＣＰＵ１１の制御に基づき、バス１４を介して入力される画像データ、その他の各種データについての記録／再生を行う。

表示部１５は、液晶ディスプレイ等の表示パネル部と、該表示パネル部を表示駆動する表示駆動部が設けられる。上記表示駆動部は、バス１４を介して入力される各種の表示データを上記表示パネル部に表示させるための画素駆動回路で構成されている。画素駆動回路は、上記表示パネル部においてマトリクス状に配置されている各画素について、それぞれ所定の水平／垂直駆動タイミングで画像信号に基づく駆動信号を印加し、表示を実行させる。また、表示部１５の表示パネルには、上述したタッチパネル等の画像位置指定手段を併設してもよい。

ここで、撮像時においては、レリーズ指示に応じて、ＣＰＵ１１の制御に基づき、信号処理部６から出力された画像データが上記圧縮／伸張処理部１６に供給され、該圧縮／伸張処理部１６において圧縮処理された画像データが生成される。すると、ストレージ部１７は、ＣＰＵ１１の制御に基づき、圧縮処理された圧縮画像データを記録媒体に記録する。また、撮像時においてＣＰＵ１１は、信号処理部６から出力された画像データが表示部１５に供給されるように制御し、これによって、撮像素子４で撮像された画像信号から得た撮像画像データが、表示部１５にリアルタイムで表示される（ライブビュー画像）。ユーザは、このライブビュー画像をみることで、撮像範囲（画角）や被写体の模様などを確認して、適切なシャッターチャンスを判断できる。

また、ストレージ部１７に記録された圧縮画像データの再生指示が行われた場合、ＣＰＵ１１は、ストレージ部１７を制御して、指定された圧縮画像データを再生させた上で、当該再生された圧縮画像データを圧縮／伸張処理部１６で伸張させるように制御する。そして、ＣＰＵ１１は、当該伸張された画像データが表示部１５上に表示されるように制御する。

[変形ミラーの構成]
次に、図３を参照して、図１に示した変形ミラー装置２の構成、及びその動作について説明する。図３は本実施形態に係る変形ミラー装置２の構成を示す断面図である。なお、図３には変形ミラー装置２と共に図１に示したミラー駆動回路８も併せて示している。

図３に示すように、変形ミラー装置２は、可撓性部材３２と、その表面に形成された反射膜３１と、この反射膜３１が形成されたミラー面とは逆側の面において可撓性部材３２に固着されるマグネット３６と、ベース基板３４と、このベース基板３４側に固着される駆動コイル３５と、可撓性部材３２とベース基板３４との間に挿入されるように設けられた強度確保部材３３とを有する。

可撓性部材３２は、可撓性を有する部材であり、その材質として例えばシリコンを使用できる。可撓性部材３２は、例えば、略楕円状の平面形状を有する。この可撓性部材３２のミラー面となるべき面に対しては、反射膜３１が膜付けされている。そして、この可撓性部材３２は、図示反しないが、上記ミラー面の裏側となる面において、同じ中心を有する複数の楕円部３２Ａ、３２Ｂ、３２Ｃ、３２Ｄ、３２Ｅが形成されている。これら複数の楕円部３２Ａ〜３２Ｅは、中心部の楕円部３２Ａが最も厚みがあり、次いで外周側に形成される楕円部３２Ｂ、さらに外周側となる楕円部３２Ｃ、さらに外周側の楕円部３２Ｄ、さらに外周側の楕円部３２Ｅとなるに従って厚さが薄くなるようにされている。つまり、可撓性部材３２の断面形状としては、その中心から外周方向にかけて階段状にその厚さが薄くなるような形状である。

そして、上記楕円部３２Ｅの外周には、リブ状のフレーム３２Ｆが環状に形成されており、可撓性部材３２に垂直方向（図３の上下方向）の駆動力が印加された場合でも当該フレーム３２Ｆが変形しないように充分な強度を確保できるようになっている。

ここで、可撓性部材３２は、上記楕円部３２Ａ〜楕円部３２Ｅが、変形ミラーとして変形する部分（可変部）である。つまり、これら厚さの相異なる楕円部３２Ａ〜楕円部３２Ｅの形成パターンによって、ミラー面の形状が中心の楕円部３２Ａに対して一様に印加される垂直方向への駆動力に応じて、可撓性部材３２が所定の形状となる。このように断面厚の異なるパターンを形成することによって、可撓性部材３２に所要の強度分布を与えることができる。その意味で、このように断面厚を異ならせるようにして形成したパターンを、強度分布パターンと呼ぶ。この場合、上記楕円部３２Ａ〜３２Ｅによるパターンについては、強度分布パターンと称する。

なお、上記可変部としての楕円部３２Ａ〜楕円部３２Ｅの外周部には、フレーム３２Ｆが形成されており、フレーム３２Ｆは、上述した駆動力の印加に対しても変形しない十分な強度を有する。このように可撓性部材３２における最外周部分が、フレーム３２Ｆにより、駆動力の印加に対しても変形はせず強度が保たれている。これにより、楕円部３２Ａ〜楕円部３２Ｅからなる可変部の駆動力に応じた形状変化態様を、より理想の形状変化態様に合わせ易くすることができる。つまり、可撓性部材３２の最外周部分が変形してしまう場合と比較すれば、フレーム３２Ｆを有する可撓性部材３２は、より高精度に駆動力に対する形状変化態様を理想の態様に近づけることができるものである。

なお、この場合において、強度分布パターンが楕円形状により形成される理由は、先の図１に示されるように、変形ミラー装置２としてはそのミラー面が４５度に傾斜された状態で用いられるためである。この場合、ミラー面における入射光のスポットは、楕円形状となる。具体的には、スポットの長手方向の直径と、当該長手方向と直交する方向の直径との比率が、およそ１：√２の楕円形状となる。このようにミラー面上での入射光のスポット形状が楕円形状となることから、フォーカス制御を良好に行うために、上記強度分布パターンを楕円形状としている。

また、先の説明によると、強度分布パターンとしては、各楕円部３２Ａ〜３２Ｅが同じ中心を有するように配置している。これによって、可撓性部材３２に対し駆動力が印加されたときに、応力が一部に集中してしまうことを防止することができ、可撓性部材３２の割れや疲労破壊を効果的に防止できる。

ここで、ミラー面を変形させるために、可撓性部材３２に所定の駆動力が印加されると、可撓性部材３２では内部応力が発生する。この際、仮に可撓性部材３２において応力が一点に集中するような部分があると、本例のように可撓性部材３２が等質等方性な材質により構成される場合、この部分は急激に寸法が変化する箇所となる。例えば、各楕円部が同じ中心を持たない場合のパターンは、特定の方向で間隔が狭まったり広がったりすることになる。そして、この間隔が狭まった部分が、他の部分に比べて応力が集中しやすい部分となり、よって一様な駆動力の印加に対して急激に寸法が変化する部分となる。

このように応力が集中する部分が存在すると、その部分において可撓性部材３２の許容応力を超える可能性が高まり、これに伴って割れが発生する可能性が高くなる。また、可撓性部材３２の変形が繰り返し行われることで、この部分での疲労破壊を招く虞もある。

そこで、本例のように各楕円部３２Ａ〜３２Ｅが同じ中心を持つようにパターンニングを行うことで、パターンの間隔は均等となり、上記のように応力が一部に集中する部分が生じないようにできる。これによって上記割れや疲労破壊の防止を図ることができる。

説明を図３に戻す。図３において、可撓性部材３２は、その中央部に形成された楕円部３２Ａに対し、円柱状のマグネット３６が固着される。このマグネット３６の中央部には、上記楕円部３２Ａを嵌合して位置決め可能にする凹部が形成され、当該凹部が楕円部３２Ａに嵌合された状態で例えば接着などによって強固に固着される。

そして、可撓性部材３２は、図示のようにその最外周部に形成されるフレーム３２Ｆが、強度確保部材３３に対して固着される。強度確保部材３３の材料には、例えばパイレックスガラス（パイレックス：登録商標）が選定される。すなわち、可撓性部材３２よりも高剛性による材料が選定される。この強度確保部材３３は、その中央部にテーパー状の孔部が貫通している四角柱状の外形形状を有する。強度確保部材３３は、このようなテーパー状の孔部によってくり抜かれた部分を有する上下二面の外径寸法が、可撓性部材３２のミラー面が形成される面の外周寸法と一致している。これら二面のうち一方の面に、可撓性部材３２のフレーム３２Ｆが固着される。この場合、可撓性部材３２と強度確保部材３３とは、互いの中心軸が同軸に配置されるようにして固着される。これにより、上記フレーム３２Ｆが、強度確保部材３３における上記孔部の周囲の部分に対して固着される。

ベース基板３４は、その外形寸法が上記可撓性部材３２のミラー面が形成される面と同寸法となる面を有する。そして当該同寸法となる面においては、その最外周部に、上記強度確保部材３３の上記可撓性部材３２と固着される面とは逆側の面を位置決め固着するための溝部が形成されている。具体的には、強度確保部材３３の上記可撓性部材３２とは逆側の面におけるテーパー孔の内径と略等しい直径を有する円形の凸部が、ベース基板３３に形成されている。そして、当該凸部の形成に伴う上記溝部において、強度確保部材３３が位置決め固着されることで、ベース基板３４の中心と強度確保部材３３の中心とが同軸に配置されるようになっている。

さらに、ベース基板３４には、その中心部において、駆動コイル３５の内壁を嵌合するための円形の位置決め凸部が形成されている。具体的にこの凸部は、その中心がベース基板３４の中心と同軸となるように形成され、外径が駆動コイル３５の内壁を嵌合できる大きさに設定されている。このような凸部によって駆動コイル３５がベース基板３４側に嵌合し固着される。これにより、マグネット３６の外面と駆動コイル３５の内面とが全周にわたって均等距離で離間し、且つマグネット３６の中心と駆動コイル３５の中心とが同軸上に配置されるようになる。また、図示するように駆動コイル３５に対しては、ミラー駆動回路８からの駆動信号の供給ラインが接続される。

本実施形態では、図３に示される可撓性部材３２のフレーム３２Ｆの縦方向の厚さ（高さ）ｐと、可撓性部材３２の中心部に形成される楕円部３２Ａの縦方向の厚さ（高さ）を同値に設定している。また、同じ縦方向の厚さ（高さ）として、強度確保部材３３の高さｆは、上記可撓性部材３２のフレーム３２Ｆの高さｐよりも長くなるように設定している。

さらに、横方向の厚さ（幅）については、フレーム３２Ｆの幅をｑ、強度確保部材３３の幅（この場合の強度確保部材３３の孔はテーパー状としているので狭い方の幅の値とする）をｇとしたとき、少なくともｑ＜ｇとなるように設定している。ここで、縦方向とは、ミラー面に対して直交する方向を指す。また、横方向とは、上記縦方向と直交し、ミラー面と平行な方向を指す。

なお、言うまでもないが、強度確保部材３３に形成するテーパー孔の寸法は、予め駆動コイル３５を挿入できるスペースを確保できるようにして設定されるべきものとなる。また、可撓性部材３２の変形時において、可撓性部材３２と駆動コイル３５とが干渉してしまうとミラー面の所定の形状変化を得ることができなくなってしまう。このため、駆動コイル３５と可撓性部材３２との間に充分なクリアランスが確保されるように強度確保部材３３の縦方向の厚さｆが設定される。

ここで、以上のような構成の変形ミラー装置２の動作を説明する。変形ミラー装置２においては、ミラー駆動回路８からの駆動信号が駆動コイル３５に供給される。かかる駆動信号が供給されて駆動コイル３５が通電されることで、その通電レベルに応じた磁界が発生し、当該発生磁界に応じて駆動コイル３５の内側に配置されるマグネット３６が反発力を受ける。この場合、マグネット３６は円柱の軸方向に着磁されているので、上記反発力は垂直方向に生じる。これにより、当該マグネット３６が固着された可撓性部材３２の中心部に対して、上記駆動信号のレベルに応じた垂直方向への一様な駆動力が印加されることになる。

このようにして、ミラー駆動回路８から駆動コイル３５に駆動信号を供給して、当該駆動コイル３５によりマグネット３６を、可撓性部材３２のミラー面に対して垂直方向に移動させることで、可撓性部材３２の中心部に駆動力を印加する。これにより、当該駆動力の大きさ及び向きに応じて、変形ミラー装置２の変形ミラー（即ち、楕円部３２Ａ〜３２Ｅの部分）のミラー面を、凸状又は凹状に変形させることができる。このような凸状、凹
状の変化は、駆動コイル３５に供給する駆動信号の極性を変化させることで得られる。

このような変形ミラー装置２を用いてフォーカス制御を行う場合には、可撓性部材３２に印加させる駆動力（つまり駆動コイル３５に与える駆動信号のレベル：駆動信号値）を変化させた際に、それぞれ駆動状態で目標とする焦点に調整されるようにしておく必要がある。つまり、それぞれの駆動状態で、目標とする変形ミラーの変形形状が得られるようにしておく必要がある。

上記構成の変形ミラー装置２では、各駆動状態で（つまり可撓性部材３２の中心の楕円部３２Ａの垂直方向の変形量に応じて）どのようにミラー面が変化するかの設定は、強度分布パターンの形成パターンの設定によって行うことができる。それぞれの駆動状態で目標とする焦点に調整されるようにするための強度分布パターンの割り出しは、例えばＦＥＭ（Ｆｉｎｉｔｅ Ｅｌｅｍｅｎｔ Ｍｅｔｈｏｄ：有限要素法）シミュレーションツールを用いて行うことができる。

以上、本実施形態に係る変形ミラー装置２の構成及び動作を説明した。かかる変形ミラー装置２を用いてフォーカス制御（焦点位置の変更）を行うことで、通常のフォーカスレンズを撮像素子に接近／離隔させるフォーカス制御機構と比べて、焦点位置を高速かつ正確に調整することができる。

上述したように、本実施形態では、マルチフォーカス撮像処理を行うために、焦点位置を高速で変更する必要がある。このとき、従来のフォーカス機構のようにフォーカスレンズをモータ駆動して焦点位置を調整する場合には、焦点位置の変更を瞬時に行うことは困難である。

これに対し、本実施形態に係る変形ミラー装置２は、従来のメカニカルなフォーカス機構と比べて、小さく軽いので、高速動作可能である。このため、フォーカス機構として変形ミラー装置２を用いれば、ミラー面（可撓性部材３２）の断面形状を微少に変化させることで焦点位置を調整できるので、焦点位置の変更を非常に高速に行うことができる。従って、マルチフォーカス撮像処理において、レリーズ指示に応じて、合焦可能範囲内で焦点位置を多数の変更位置に段階的に変更させるときに、高速に変更できる。よって、ユーザがシャッターチャンスを意識して、１回のレリーズ指示を行ったタイミングで、相異なる多数の焦点位置の画像データを高速に取得することができるので、マルチフォーカス撮像処理でシャッターチャンスを逃さないようにできる。

［焦点位置の変更方法］
次に、本実施形態に係る撮像装置１における焦点位置の変更方法について詳細に説明する。

まず、図４を参照して、本実施形態に係る撮像装置１を用いた撮像処理の概要について説明する。図４は、本実施形態に係る撮像装置１による撮像処理を概略的に示す模式図である。

図４に示すように、本実施形態に係る撮像装置１は、通常の撮像処理と、全域フォーカス撮像処理と、ブラケット撮像処理を実行できる。ユーザは、例えば、撮像装置１の撮像モードを、通常撮像モードと、マルチフォーカス撮像モード（より詳細には、全域フォーカス撮像モード、ブラケット撮像モード）との間で切り替えることで、撮像装置１が行う撮像処理を設定変更できるようにしてもよい。

通常の撮像処理では、撮像装置１は、検出指示（例えば、レリーズボタンの半押し）に応じて、ユーザが所望する被写体（撮像ポイント）に焦点を合わせるＡＦ処理を行う。その後、撮像装置１は、レリーズ指示（例えば、レリーズボタンの全押し）に応じて、当該被写体に焦点が合った被写体像を撮像して、画像データを１枚だけ記録する。このとき、当該焦点を合わせた被写体に対応する焦点位置が合焦点位置となる。この合焦点位置は、最短距離側（マクロ）から無限遠側（∞）までの合焦可能範囲内の任意の位置に合わせることができる。

一方、全域フォーカス撮像処理では、撮像装置１は、１回のレリーズ指示に応じて、合焦可能範囲全域に渡って焦点位置を段階的（ステップ状）に自動的に変更しながら被写体像を順次に撮像して、複数枚の画像データを記録する。このマルチフォーカス撮像処理は、どの被写体に対しても焦点を合わせずに行ってもよいが、予めＡＦ処理等により所定の被写体に対する合焦点位置を検出した状態で行ってもよい。かかるマルチフォーカス撮像処理により、撮像範囲内でマクロ側から無限遠側まで全ての被写体に合焦した複数枚の画像データを得ることができる。

また、ブラケット撮像処理では、撮像装置１は、検出指示（例えばレリーズボタンの半押し）に応じて、ユーザ所望の被写体に焦点を合わせるＡＦ処理を行って、合焦点位置を検出する。そして、撮像装置１は、その合焦点位置の近傍で細かいステップで焦点位置を自動的にずらしつつ被写体像を周期的に撮像して、複数枚の画像データを記録する。その後、撮像装置１は、レリーズ指示に応じて、上記合焦点位置で撮像して、１枚の画像データを記録する。かかるブラケット撮像処理により、ＡＦ処理を行ってからレリーズまでの間に、その合焦点位置近傍の焦点位置において撮像した画像データを得ることができる。従って、ＡＦ処理により検出された合焦点位置にずれがあったとしても、所望の被写体に対して的確に合焦した画像データをミスなく取得できる。

以上のように、全域フォーカス撮像処理及びブラケット撮像処理、さらには不図示の被写体撮像処理では、焦点位置を多段階で変更しながら撮像を行う。よって、焦点位置を正確かつ高速に変更する必要がある。

次に、図５を参照して、図３で説明した変形ミラー装置２を用いた焦点位置の変更について説明する。図５は、本実施形態に係る変形ミラー装置２を用いた焦点位置の変更を示す模式図である。

図５に示すように、変形ミラー装置２のミラー面（反射面）２ａの形状を変えることで、焦点位置を変更することができる。例えば、ミラー面２ａの凹形状を深くすることで、焦点位置を近距離側（マクロ側）に変更でき、逆に、ミラー面２ａの凹形状を浅くすることで、焦点位置を遠距離側（無限遠側）に変更できる。焦点位置を遠距離側に変更することで、撮像装置１から遠くにある被写体に合焦させ、焦点位置を近距離側に変更することで、撮像装置１の近くにある被写体に合焦させることができる。このとき、変形ミラー装置２が物理的に変更可能なミラー面２ａの形状には制約があり、この制約により、焦点位置を変更できる範囲、即ち、合焦可能範囲が定まる。

上述したように、従来のフォーカス機構を用いて、モータ駆動されるフォーカスレンズを撮像素子に対して接近／離隔させることで、焦点位置を変更することも可能である。しかし、従来のフォーカス機構では、焦点位置を最短距離側から無限遠側まで移動させるには、数秒程度の長い時間を要していた。これに対し、本実施形態では、フォーカス機構として変形ミラー装置２を用いることで、従来のフォーカス機構と比較して格段に高速に焦点位置を変更することができる。例えば、焦点位置を最短距離側から無限遠側まで移動させるには、１秒未満の短い時間で済み、この短時間内に数十枚（例えば３０枚）のマルチフォーカス画像を所得することができる。

次に、図６及び図７を参照して、本実施形態に係る焦点位置を段階的に変更するフォーカス制御の詳細について説明する。図６は、本実施形態に係る焦点位置の変更を示す説明図である。図７は、図６の下図の部分拡大図である。

図６に示すように、本実施形態に係る撮像装置１では、上記変形ミラー装置２を用いて、焦点位置が段階的（ステップ状）に変更される。図６の例では、焦点位置が、撮像空間の奥行き方向（Ｚ軸方向）の無限遠側に向かって、位置Ｐ１、Ｐ２、Ｐ３、Ｐ４、Ｐ５、Ｐ６の順に６段階で変更されている。撮像装置１は、このように焦点位置を１段階ずつ変更する度に、焦点位置を固定した状態で撮像素子４により被写体像が撮像して、その焦点位置に合焦した画像データを記録する。

詳細には、図７に示すように、焦点位置を段階的に変更する１ステップごとに、撮像素子４のシャッター動作を行って、所定の露光時間で被写体像を撮像する。このとき、焦点位置を変更する１ステップの時間は、撮像素子４の電子シャッタースピードと、整定時間と、露光時間の和に相当する。ここで、整定時間は、焦点位置の変更に伴い変動した被写体像の光量（図７の点線で示す。）が所定のズレ許容範囲ｋ以下に整定するまでに要する時間である。また、露光時間は、撮像装置１による撮像の露光に要する時間である。

以上、本実施形態に係るフォーカス制御において焦点位置を段階的に変更する方法について詳述した。なお、本発明は、本実施形態のように焦点位置を段階的に変更する例に限定されない。例えば、焦点位置を連続的（無段階で）に変更しながら、その変更途中に所定のタイミングで撮像素子４により被写体像を複数回撮像してもよい。このように焦点位置を連続的に変更しながら、相異なる焦点位置で撮像された複数枚の画像データを得るようにして、マルチフォーカス撮像を行ってもよい。

次に、図８を参照して、本実施形態に係る撮像装置１において段階的に焦点位置を段階的に変更するときの焦点位置の変更位置の設定について説明する。図８は、本実施形態に係る撮像装置１における焦点位置の変更位置の設定を説明するための模式図である。

図８に示すように、マクロから無限遠までの合焦可能範囲内に、複数の被写体Ｈ１〜Ｈ４が存在する場合を考える。この場合、マルチフォーカス撮像により焦点位置が異なる複数枚の画像データを取得するときには、それぞれの被写体Ｈ１〜Ｈ４について少なくとも１枚の画像データで焦点が合っている必要がある。

合焦可能範囲内で焦点位置を段階的に変更する場合、例えば図８のＡに示すように、焦点位置を等間隔でリニアに変更させてもよいし、或いは、図８のＢに示すように、焦点位置の変更量を可変にして焦点位置を変更してもよい。

図８のＡの例では、焦点位置は、変更位置Ｐ１、Ｐ２、Ｐ３、Ｐ４、Ｐ５、Ｐ６に段階的に変更されており、焦点位置の変更量（即ち、隣接する焦点位置間の距離）は一定値ｄである。このように、焦点位置をＺ軸方向に等間隔で変更することにより、焦点位置の位置制御が容易になるという利点があるが、後述のように、合焦可能範囲内の全ての被写体Ｈ１〜Ｈ４に焦点が合うようにするためには、焦点位置の変更回数が増加するという問題がある。

これに対し、図８のＢの例では、焦点位置は、変更位置Ｐ１、Ｐ２、Ｐ３、Ｐ４、Ｐ５、Ｐ６に段階的に変更されており、焦点位置の変更量（即ち、隣接する焦点位置間の距離）は、可変値ｄ１〜ｄ５となっている。このとき、遠距離側ほど焦点位置の変更量が大きくなっている（ｄ１＜ｄ２＜ｄ３＜ｄ４＜ｄ５）。この理由は、撮像光学系の被写界深度は、近距離側では浅く、遠距離側で大きいため、遠距離側で焦点位置の変更量を大きくしても、任意の位置の被写体に合焦した画像が得られるからである。この被写界深度に応じて焦点位置の設定について、以下に詳述する。

ここで、図９を参照して、被写界深度について詳述する。図９は、本実施形態に係る焦点位置ごとの被写界深度を説明するための模式図である。

図９に示すように、焦点位置を位置Ｐ１〜位置Ｐ６まで段階的に変更するとき、例えば、位置Ｐ３が合焦点位置であったとする。このとき、位置Ｐ３の近距離側（マクロ側）で合焦する範囲を後方被写界深度と称し、その位置Ｐ３の遠距離側（無限遠側）で合焦する範囲を前方被写界深度と称する。この前方被写界深度と後方被写界深度を合わせた範囲が被写界深度である。合焦点位置が位置Ｐ３であるときに、被写界深度により合焦する範囲が、合焦点位置Ｐ３における合焦範囲である。つまり、位置Ｐ３に焦点を合わせたときには、その位置Ｐ３にある被写体のみならず、当該位置Ｐ３の前後の合焦範囲内にある被写体（近距離側の後方被写界深度及び遠距離側の前方被写界深度に含まれる被写体）にも焦点が合った画像が得られる。勿論、位置Ｐ３を合焦点位置としたときには、厳密に焦点が合っているのは位置Ｐ３のみであるが、実際の画像ではその位置Ｐ３の前後（近距離側及び遠距離側）の合焦範囲内の被写体に対しても焦点が合っているように見える。焦点ボケは、合焦点位置である位置Ｐ３から離れるにつれて大きくなるが、被写界深度に応じて定まる合焦範囲内であれば、焦点ボケが許容範囲内であると考える。

上述した撮像装置１の撮像光学系などの光学装置では、焦点位置が近距離側であるほど被写界深度が浅く、遠距離側であるほど被写界深度が深いという特性を有している。このため、焦点位置を段階的に変化させたときには、近距離側の焦点位置であるほど合焦範囲が狭くなり、遠距離側の焦点位置であるほど合焦範囲が広くなる。従って、合焦可能範囲内の全域に合焦させるためには、図８のＢで示したように、被写界深度が浅い近距離側では、焦点位置を細かい変更量で密に変更し、被写界深度が深い遠距離側では、焦点位置を大きな変更量で粗く変更すればよい。つまり、焦点位置を段階的に変更するときの変更位置は、撮像装置１からの距離により変動する被写界深度に応じて、設定されることが好ましい。

このように被写界深度に応じて焦点位置の変更位置を設定する方法について、図１０を参照して更に詳細に説明する。図１０は、本実施形態に係る被写界深度に応じた焦点位置の変更位置を説明するための模式図である。図１０のＡ及び図１０のＢは、合焦可能範囲全域に合焦するように焦点位置の変更位置が設定された例であり、一方、図１０のＣは、合焦可能範囲内で合焦しない範囲が生じるように焦点位置の変更位置が設定された例である。

図１０のＡの例では、図８のＡの例と同様に、焦点位置の変更位置は、位置Ｐ１、Ｐ２、Ｐ３、Ｐ４、Ｐ５、Ｐ６に段階的に設定されており、変更位置Ｐ１〜Ｐ６の相互の間隔は、遠距離側ほど広くなっている。撮像装置１からそれぞれの変更位置Ｐ１〜Ｐ６までの距離が遠いほど、それぞれの変更位置Ｐ１〜Ｐ６における被写界深度は、深くなる。このため、それぞれの変更位置Ｐ１〜Ｐ６を合焦点位置としたときの合焦範囲ｈ１〜ｈ６は、遠距離側ほど広くなる（ｈ１＜ｈ２＜ｈ３＜ｈ４＜ｈ５＜ｈ６）。

図１０のＡの例では、相隣接する変更位置Ｐ１〜Ｐ６の差がそれらの被写界深度以内となるように、変更位置Ｐ１〜Ｐ６が設定されている。つまり、それぞれの変更位置Ｐ１〜Ｐ６における合焦範囲ｈ１〜ｈ６の両端が、相互に重なるか、或いは、少なくとも接するように、変更位置Ｐ１〜Ｐ６が設定されている。これにより、全ての変更位置Ｐ１〜Ｐ６における合焦範囲ｈ１〜ｈ６の和は、合焦可能範囲全域をカバーしている。従って、焦点位置を変更位置Ｐ１〜Ｐ６に段階的に変更することで、合焦可能範囲の全域に対して合焦させることができる。よって、このように焦点位置の変更位置Ｐ１〜Ｐ６を適正に設定することで、合焦可能範囲全域において任意の被写体に合焦した画像データを得ることができる。

また、図１０のＢの例は、合焦精度を高めるため、合焦範囲ｈ（即ち、被写界深度により焦点ボケを許容する範囲）をより狭い範囲で考えた場合に、焦点位置をより細かい変更量で段階的に変更する例である。この図１０のＢの例では、焦点位置の変更位置は、位置Ｐ１、Ｐ２、Ｐ３、Ｐ４、Ｐ５、Ｐ６、Ｐ７、Ｐ８に段階的に設定されており、図１０のＡの例よりも、焦点位置の変更位置Ｐの数が多く、変更位置Ｐ１〜Ｐ８の相互間隔が狭くなっている。これにより、図１０のＢの例は、図１０のＡの例よりも、焦点位置の変更時間は増えるが、合焦可能範囲全域に渡って、より合焦精度が高い画像データを得ることができるという利点がある

一方、図１０のＣの例では、焦点位置の変更位置Ｐ１、Ｐ２、Ｐ３、Ｐ４、Ｐ５は、図１０のＡの例よりも相互に離隔した位置に設定されている。このため、それぞれの変更位置Ｐ１〜Ｐ５における合焦範囲ｈ１〜ｈ５は相互に重複しておらず、合焦可能範囲内には、いずれの合焦範囲ｈ１〜ｈ５にも含まれない範囲が生じている。従って、図１０のＣの例では、合焦可能範囲内の全域に合焦させることはできないため、マルチフォーカス撮像で得られた複数の画像データのいずれにおいても、合焦していない被写体が生じる恐れがある。この図１０のＣの例のように焦点位置の変更位置Ｐ１、Ｐ２、Ｐ３、Ｐ４、Ｐ５を離隔して設定する場合も、本発明に含まれるが、合焦可能範囲全域に合焦した画像データを得るという観点からは、図１０のＡや図１０のＢの例の方が好ましい。ただし、図１０のＣの例では、焦点位置の変更位置Ｐ１〜５の数（即ち、焦点位置の変更回数）が、図１０のＡや図１０のＣの例よりも少なくて済むので、より高速に焦点位置を変更できるという利点がある。

以上、図１０を参照して、被写界深度に応じて、焦点位置の変更位置Ｐを設定する例について説明した。

ところで、被写界深度は撮像光学系の絞り３の開度によって変化するので、絞り３の開度（例えばＦ値）に応じて、焦点位置の変更位置Ｐを設定してもよい。また、被写界深度は撮像光学系のレンズの焦点距離によっても変化するので、撮像装置１に搭載されたレンズの種類に応じて、焦点位置の変更位置Ｐを設定してもよい。さらに、上述したように、被写界深度は撮像装置１から焦点位置までの距離によっても変化するので、当該距離に応じて焦点位置の変更位置Ｐを設定してもよい（ズームレンズの特徴に依存）。このように、本実施形態に係る撮像装置１では、例えば、絞り３の開度、レンズの種類、焦点位置から撮像装置１までの距離に応じて、焦点位置の変更位置Ｐを設定する。これにより、焦点位置を効率的かつ適切に変更できるとともに、合焦可能範囲内の任意の位置に存在する全ての被写体に対して漏れなく合焦させることができる。

ここで、焦点位置の変更位置Ｐを設定するタイミングについて説明する。撮像装置１は、マルチフォーカス撮像処理を行う前に予め、焦点位置の変更位置Ｐを設定しておいてもよい。この場合、撮像装置１のＣＰＵ１１は、予め設定された焦点位置の変更位置Ｐのデータを保持しておき、マルチフォーカス撮像時に、当該データを用いて、焦点位置を段階的に変更するように変形ミラー装置２を制御する。

或いは、撮像装置１のＣＰＵ１１は、マルチフォーカス撮像処理を行うときに、焦点位置の変更位置Ｐをリアルタイムで計算して、当該変更位置Ｐを動的に設定し、当該設定した変更位置Ｐに焦点位置を段階的に変更するように変形ミラー装置２を制御してもよい。この場合、ＣＰＵ１１は、被写界深度と焦点位置との相関を表すデータや、上述した絞り３の開度、レンズの種類、焦点位置から撮像装置１までの距離などのパラメータを用いて、撮像状態に応じた適切な位置に焦点位置の変更位置Ｐを動的に設定することができる。

次に、図１１を参照して、本実施形態に係る焦点位置の変更位置Ｐを設定する基点について説明する。図１１は、本実施形態に係る焦点位置の変更位置Ｐを設定する基点を説明するための模式図である。

図１１のＡは、例えばＡＦ処理により検出された合焦点位置ＭＰを基点として、焦点位置の変更位置Ｐ１〜Ｐ５を設定する例である。後述するように、本実施形態に係る撮像装置１は、検出指示に応じて、ＡＦ処理により合焦点位置ＭＰを検出した後に、レリーズ指示に応じて、当該検出された合焦点位置ＭＰを基準として焦点位置を段階的に変更してマルチフォーカス撮像処理を行う。そこで、レリーズ指示後に、ＣＰＵ１１は、レリーズ指示前に検出された合焦点位置ＭＰを基点として、焦点位置の変更位置Ｐ１〜Ｐ５をリアルタイムで動的に設定することができる。

ここで、図１１のＡの例において、合焦点位置ＭＰを基点として変更位置Ｐ１〜Ｐ５を設定する処理の詳細を説明する。まず、ＣＰＵ１１は、基点となる合焦点位置ＭＰ（＝変更位置Ｐ３）における被写界深度と、その隣の変更位置Ｐ２、Ｐ４における被写界深度に基づいて、変更位置Ｐ２、Ｐ４を設定する。次いで、ＣＰＵ１１は、設定された変更位置Ｐ２、Ｐ４における被写界深度と、その隣の変更位置Ｐ１、Ｐ５における被写界深度に基づいて、変更位置Ｐ１、Ｐ５を設定する。これによって、合焦点位置ＭＰを基点として、合焦可能範囲全域をカバーする変更位置Ｐ１〜Ｐ５を動的に設定できる。この場合、最も近距離（マクロ）側にある変更位置Ｐ１における合焦範囲ｈ１の下限は、最短距離（マクロ）側の焦点位置ＮＰ（以下「マクロ位置ＮＰ」）とは一致しない。

このようにして、レリーズ指示後にリアルタイムで合焦点位置ＭＰを基点として変更位置Ｐ１〜Ｐ５を設定できる。これにより、レリーズ指示後に合焦点位置ＭＰにおいて撮像済みであるので、マルチフォーカス撮像処理において、改めて焦点位置を変更位置Ｐ３（＝合焦点位置ＭＰ）に変更して撮像しなくてもよいので、マルチフォーカス撮像処理を迅速に実行できる。

一方、図１１のＢは、例えば、マクロ位置ＮＰを基点として、焦点位置の変更位置Ｐ１〜Ｐ５を設定する例である。詳細には、ＣＰＵ１１は、基点となるマクロ位置ＮＰの隣の変更位置Ｐ１における被写界深度に基づいて、変更位置Ｐ１を設定する。次いで、ＣＰＵ１１は、設定された変更位置Ｐ１における被写界深度と、その隣の変更位置Ｐ２における被写界深度に基づいて、変更位置Ｐ２を設定し、同様にして、変更位置Ｐ３、Ｐ４、Ｐ５を順次設定する。これによって、マクロ位置ＮＰを基点として、合焦可能範囲全域をカバーする変更位置Ｐ１〜Ｐ５を設定できる。この場合、最も近距離（マクロ）側にある変更位置Ｐ１における合焦範囲ｈ１の下限は、マクロ位置ＮＰとは一致する。

このような、マクロ位置ＮＰを基点とした変更位置Ｐ１〜Ｐ５の設定は、合焦点位置ＭＰの検出の有無に関わらず実行できるので必ずしもマルチフォーカス撮像処理とともにリアルタイムで行わなくてもよい。従って、変更位置Ｐ１〜Ｐ５を予め設定して、その設定データを撮像装置１が保持しておき、マルチフォーカス撮像処理では、当該設定データを用いて焦点位置を段階的に変更できる。よって、マルチフォーカス撮像処理時のＣＰＵ１１の処理負荷を低減できる。

［フォーカス制御の詳細］
次に、図１２及び図１３を参照して、本実施形態に係る撮像装置１によるフォーカス制御について詳細に説明する。

本実施形態に係る撮像装置１は、検出指示（例えば、レリーズボタンの半押し操作）に応じて、ＡＦ処理を行って合焦点位置を検出する。その後、撮像装置１は、１回のレリーズ指示（例えば、レリーズボタンの全押し操作）に応じて、合焦点位置で撮像して得た画像データをストレージ部１７に記録するとともに、全域フォーカス撮像処理を行う。この全域フォーカス撮像処理では、撮像装置１は、ＡＦ処理で検出された合焦点位置を基準として、合焦可能範囲内で焦点位置を段階的に変更しながら、当該変更された焦点位置で撮像して得られた複数枚の画像データをストレージ部１７に順次、記録する。

このように、本実施形態に係る撮像装置１は、ＡＦ処理で合焦点位置を検出するためにフォーカスを制御し、また、全域フォーカス撮像処理で焦点位置を変更するためにフォーカスを制御する。以下に、本実施形態に係るフォーカス制御の具体例について、図１２、図１３を参照して詳細に説明する。なお、図１２、図１３において、縦軸（Ｚ軸）は焦点位置、横軸は時間を示す。

まず、図１２に示すフォーカス制御の例について説明する。図１２は、本実施形態に係るマルチフォーカス撮像処理において、焦点位置を合焦点位置ＭＰから無限遠側まで段階的に変更した後に、合焦点位置ＭＰからマクロ側まで段階的に変更するフォーカス制御の例を示す模式図である。

図１２に示すように、まず、撮像装置１のＣＰＵ１１は、検出指示（ＡＦ開始指示）を受けると、ＡＦ処理を行って、撮像範囲内の所定の被写体に合焦する合焦点位置ＭＰを検出する（ｔ１〜ｔ２）。ＡＦ処理で合焦させる対象となる被写体は、例えば、検出指示を受けた時点で撮像範囲の所定位置（例えば画像中央）に存在する被写体であってもよいし、タッチパネル等でユーザ指定された被写体であってもよい。

また、ＡＦ処理としては、例えば、一般的な山登り法による合焦点位置の探索（山登りＡＦ）を使用できる。この山登りＡＦは、例えば、焦点位置をマクロ側（マクロ位置ＮＰ）から無限遠側に移動させながら、その焦点位置で得られた画像データを分析して所定の評価パラメータを取得し、当該評価パラメータを評価して、合焦点位置ＭＰを探索する。なお、当該山登りＡＦは、焦点位置を無限遠（無限遠位置ＦＰ）からマクロ側に移動させながら行うことも勿論可能である。

かかる山登り法による合焦点位置ＭＰの探索は、ＣＰＵ１１が、上記図２の合焦評価値計算部２７にて逐次計算される合焦評価値Ｅｖを取得して行う。山登り法による合焦点位置ＭＰの探索の具体的な手法については種々存在するが、基本的には、例えば、以下のような手法を採用できる。

まず、ＣＰＵ１１は、焦点位置をマクロ（Ｓｎとする）に設定し、その状態で計算された合焦評価値Ｅｖの値を取得する。そして、マクロＳｎから、予め定められた距離ｔだけ遠い焦点位置（Ｓｎ＋１とする）に設定し、その状態で計算された合焦評価値Ｅｖの値を取得する。このように距離ｔだけ離間するそれぞれの焦点位置での評価値Ｅｖを取得した上で、どちらで良好な評価値Ｅｖの値が得られているかを判別する。マクロＳｎでの評価値Ｅｖの値の方が高ければ、合焦点位置はマクロＳｎであるとして決定する。逆に、焦点距離Ｓｎ＋１での評価値Ｅｖの値の方が高ければ、合焦点位置は当該焦点位置Ｓｎ＋１以降の焦点位置にあると判断できる。この場合はさらに距離ｔだけ遠い焦点位置Ｓｎ＋２での合焦評価値Ｅｖを取得し、焦点位置Ｓｎ＋１と焦点位置Ｓｎ＋２の何れでの評価値Ｅｖの値が良好かを判別する。焦点位置Ｓｎ＋１の方が評価値Ｅｖの値が高ければ、合焦点位置は当該焦点位置Ｓｎ＋１に決定する。焦点位置Ｓｎ＋２での評価値Ｅｖの値の方が高ければ、合焦点位置は当該焦点位置Ｓｎ＋２以降の焦点位置にあると判断できるので、さらに距離ｔだけ遠い焦点位置Ｓｎ＋３での合焦評価値Ｅｖを取得し、焦点位置Ｓｎ＋２と焦点位置Ｓｎ＋３の何れでの評価値Ｅｖの値が良好かを判別する。

以降も、距離ｔだけ遠い近い焦点位置の方が良好な評価値Ｅｖの値が得られる場合は、ＣＰＵ１１は、さらに距離ｔだけ遠い焦点位置に振って取得した評価値Ｅｖとの比較を行うそして、新たに振った焦点位置での評価値Ｅｖの値の方が低くなったときに、ＣＰＵ１１は、直前に振った焦点位置を合焦点位置として決定する。

以上のようにして、山登りＡＦにより合焦点位置ＭＰが検出される。なお、ＡＦ処理の方式としては、上記山登りＡＦ以外にも、例えば、位相差検出法、コントラスト検出法など、任意の方式を使用できる。

位相差検出法では、撮像光学系を通じて入射される被写体像から撮像素子内のセパレータレンズで２つの像を生成し、その像間隔をラインセンサ（ＡＦ素子７）で計測して、ピントのズレ量を検出し、当該ピントのズレ量に基づいて、合焦点位置を求める。一方、コントラスト検出法は、合焦しているときに、撮像により得られた画像のコントラストが最も高くなるという考え方に基づく検出法である。このコントラスト検出法では、撮像素子４により被写体像を撮像して得た画像データを解析し、焦点位置を動かしながら画像のコントラスト値が最も高くなるレンズ位置を探索する。このとき、焦点位置を動かしながらコントラスト値を計算し、その変化の軌跡から合焦点位置を求める。従って、コントラスト検出法では、位相差検出法より探索時間を要するが、撮像用のイメージセンサ（撮像素子４）でＡＦ処理を実行できるという利点がある。

次いで、上記合焦点位置ＭＰの検出完了からレリーズ指示を受け付けるまでの間、ＣＰＵ１１は、ＡＦ追従動作を制御する（ｔ２〜ｔ３）。この追従動作は、当該期間ｔ２〜ｔ３中に、合焦させた被写体が移動したときに、当該被写体に焦点を合わせ直す動作である。かかるＡＦ追従動作は、デジタルビデオカメラ等で多用されるが、デジタルスチルカメラで用いてもよい。なお、当該期間ｔ２〜ｔ３に、ＡＦの追従動作を行わずに、検出当初の合焦点位置に固定してもよい。

以上までの期間ｔ１〜ｔ３中は、撮像素子４による撮像処理は常時行われており、この撮像により得た画像データは、ライブビュー画像として表示部１５に表示されている。ユーザは、かかるライブビュー画像を見ながら、シャッターチャンスと判断する時点で、レリーズボタンを全押し操作するなどして、撮像装置１のレリーズ指示を入力する。なお、レリーズ指示は、スマイル検出等により撮像装置１が自動で行ってもよい。

ＣＰＵ１１は、レリーズ指示を受け付けると、その受け付け時点で、撮像素子４によって合焦点位置ＭＰ（焦点位置の変更位置Ｐ６に相当する。）において被写体像を撮像して得た画像データＤ６を、ストレージ部１７に記録する（ｔ３）。これにより、上記ＡＦ処理にて検出された合焦点位置ＭＰの被写体に焦点が合っている画像データＤ６を、保存用画像データとして記録できる。さらに、かかる合焦点位置ＭＰの画像データＤ６の記録後すぐに、ＣＰＵ１１は、全域フォーカス撮像処理を実行する（ｔ３〜ｔ４）。

具合的には、図１２に示すように、まず、ＣＰＵ１１は、変形ミラー装置２を制御して、焦点位置を合焦点位置ＭＰから無限遠側に段階的に変更する。これにより、焦点位置は、所定の変更位置Ｐ７、Ｐ８、Ｐ９、Ｐ１０、Ｐ１１に順次変更される。このように焦点位置を変更しながら、ＣＰＵ１１は、撮像素子４によってそれぞれの変更位置Ｐ７、Ｐ８、Ｐ９、Ｐ１０、Ｐ１１において被写体像を撮像して得られた画像データＤ７、Ｄ８、Ｄ９、Ｄ１０、Ｄ１１をストレージ部１７に記録する。この結果、合焦可能範囲のうち、合焦点位置から無限遠までの範囲の被写体に合焦した複数枚の画像データＤ６〜Ｄ１１が記録される。

さらに、ＣＰＵ１１は、変形ミラー装置２を制御して、焦点位置を合焦点位置ＭＰからマクロ側に段階的に変更する。これにより、焦点位置は、所定の変更位置Ｐ５、Ｐ４、Ｐ３、Ｐ２、Ｐ１に順次変更される。このように焦点位置を変更しながら、ＣＰＵ１１は、撮像素子４によってそれぞれの変更位置Ｐ５、Ｐ４、Ｐ３、Ｐ２、Ｐ１において被写体像を撮像して得られた画像データＤ５、Ｄ４、Ｄ３、Ｄ２、Ｄ１をストレージ部１７に記録する。この結果、合焦可能範囲のうち、合焦点位置からマクロまでの範囲の被写体に合焦した複数枚の画像データＤ５〜Ｄ１が記録される。

以上のようにして、撮像装置１は、全域フォーカス撮像処理（ｔ３〜ｔ４）を行うことで、マクロ側から無限遠側までの合焦可能範囲全域の被写体に合焦した複数枚の画像データＤ１〜Ｄ１１を記録できる。このとき、合焦点位置ＭＰから無限遠側（又はマクロ側）に徐々に遠くなるような順序で焦点位置を段階的に変更する（変更位置Ｐ７→Ｐ８→Ｐ９→Ｐ１０→Ｐ１１）。これにより、合焦点位置ＭＰの無限遠側において、合焦点位置ＭＰに近い焦点位置に合焦した画像データほど、レリーズ指示（ｔ３）に近いタイミングで取得することができる。例えば、合焦点位置ＭＰに最も近い位置Ｐ７に合焦した画像データＤ７を、合焦点位置ＭＰに次に近い位置Ｐ８に合焦した画像データＤ８よりも先に取得できる。従って、合焦点位置ＭＰに近い焦点位置に合焦した画像データほど、シャッターチャンス（即ち、レリーズ指示ｔ３）に近いタイミングで優先的に取得することができる。

通常、合焦可能範囲のうち合焦点位置ＭＰに近い焦点位置（例えば、Ｐ７、Ｐ８）ほど、ユーザが望む被写体が存在する可能性が高い。従って、上記のような順で画像データを取得することによって、ユーザが望む被写体に合焦した画像データ（例えば、Ｄ７、Ｄ８）を、シャッターチャンスに近いタイミングで優先的に得ることができる。つまり、ユーザが所望する被写体に合焦した画像データ（例えば、Ｄ７、Ｄ８）を最初に取得し、その後、その他の被写体に合焦した画像データ（例えば、Ｄ１０、Ｄ１１）を予備的に確保しておくことができる。よって、全域フォーカス撮像処理において、シャッターチャンスを逃さないようにできる。

なお、図１２の例では、まず、焦点位置を合焦点位置ＭＰから無限遠側に変更（Ｐ７〜Ｐ１１）した後に、焦点位置を合焦点位置ＭＰからマクロ側に変更（Ｐ５〜Ｐ１）して、全域フォーカス撮像処理を行ったが、かかる例に限定されない。上記の例とは逆に、まず、焦点位置を合焦点位置ＭＰからマクロ側に変更（Ｐ５〜Ｐ１）した後に、焦点位置を合焦点位置ＭＰから無限遠側に変更（Ｐ７〜Ｐ１１）して、全域フォーカス撮像処理を行ってもよい。

次に、図１３に示すフォーカス制御の例について説明する。図１３は、本実施形態に係るマルチフォーカス撮像処理において、合焦点位置ＭＰに近い変更位置Ｐから順に、焦点位置を無限遠側及びマクロ側に交互に変更するフォーカス制御の例を示す模式図である。

図１３に示すように、まず、撮像装置１のＣＰＵ１１は、検出指示（ＡＦ開始指示）を受けると、例えば上記山登りＡＦ処理を行って、撮像範囲内の所定の被写体に合焦する合焦点位置ＭＰを検出する（ｔ１〜ｔ２）。次いで、上記合焦点位置ＭＰの検出完了からレリーズ指示を受け付けるまでの間、ＣＰＵ１１は、ＡＦの追従動作を制御する（ｔ２〜ｔ３）。以上までの処理（ｔ１〜ｔ３）は、上述した図１２の処理（ｔ１〜ｔ３）と略同一であるので、その詳細説明は省略する。

その後、ＣＰＵ１１は、レリーズ指示を受け付けた時点で、撮像素子４によって合焦点位置ＭＰ（焦点位置の変更位置Ｐ６に相当する。）において被写体像を撮像して得た画像データＤ６を、ストレージ部１７に記録する（ｔ３）。これにより、上記ＡＦ処理にて検出された合焦点位置ＭＰの被写体に焦点が合っている画像データを、保存用画像データとして記録できる。さらに、かかる合焦点位置ＭＰの画像データＤ６の記録後すぐに、ＣＰＵ１１は、全域フォーカス撮像処理を実行する（ｔ３〜ｔ４）。

具合的には、図１３に示すように、まず、ＣＰＵ１１は、変形ミラー装置２を制御して、焦点位置を合焦点位置ＭＰに近い順に無限遠側及びマクロ側に交互に振りながら段階的に変更する。これにより、焦点位置は、所定の変更位置Ｐ７、Ｐ５、Ｐ８、Ｐ４、Ｐ９、Ｐ３、Ｐ１０、Ｐ２、Ｐ１１、Ｐ１の順で変更される。このように焦点位置を限遠側及びマクロ側に交互に変更しながら、ＣＰＵ１１は、撮像素子４によってそれぞれの変更位置Ｐ７、Ｐ５、Ｐ８、Ｐ４、Ｐ９、Ｐ３、Ｐ１０、Ｐ２、Ｐ１１、Ｐ１において被写体像を撮像して得られた画像データＤ７、Ｄ５、Ｄ８、Ｄ４、Ｄ９、Ｄ３、Ｄ１０、Ｄ２、Ｄ１１、Ｄ１をストレージ部１７に記録する。

以上のようにして、撮像装置１は、全域フォーカス撮像処理（ｔ３〜ｔ４）を行うことで、マクロ側から無限遠側までの合焦可能範囲全域の被写体に合焦した複数枚の画像データＤ１〜Ｄ１１を記録できる。このとき、合焦点位置ＭＰに近い変更位置から順に、無限遠側及びマクロ側に交互に焦点位置を変更する（変更位置Ｐ７→Ｐ５→Ｐ８→Ｐ４→Ｐ９→Ｐ３→Ｐ１０→Ｐ２→Ｐ１１→Ｐ１）。これにより、合焦点位置ＭＰのマクロ側及び無限遠側の双方において、合焦点位置ＭＰに近い焦点位置に合焦した画像データほど、レリーズ指示（ｔ３）に近いタイミングで取得することができる。例えば、合焦点位置ＭＰに最も近い位置Ｐ７、Ｐ５に合焦した画像データＤ７、Ｄ５を、合焦点位置ＭＰに次に近い位置Ｐ８、Ｐ４に合焦した画像データＤ８、Ｄ４よりも先に取得できる。従って、マクロ側及び無限遠側の双方において、合焦点位置ＭＰに近い焦点位置に合焦した画像データほど、シャッターチャンス（即ち、レリーズ指示ｔ３）に近いタイミングで優先的に取得することができる。

従って、図１３のような順で画像データを取得することによって、図１２の例よりもさらに、ユーザが望む被写体に合焦した画像データ（例えば、Ｄ７、Ｄ５）を、シャッターチャンスに近いタイミングで優先的に得ることができる。つまり、ユーザが所望する被写体に合焦した画像データ（例えば、Ｄ７、Ｄ５）を最初に取得し、その後、その他の被写体に合焦した画像データ（例えば、Ｄ１１、Ｄ１）を予備的に確保しておくことができる。よって、全域フォーカス撮像処理において、シャッターチャンスを更に逃さないようにできる。

なお、図１３の例では、焦点位置を合焦点位置ＭＰから無限遠側（Ｐ７）、マクロ側（Ｐ５）、無限遠側（Ｐ８）、・・の順に交互に変更しながら全域フォーカス撮像処理を行ったが、かかる例に限定されない。上記の例とは逆に、焦点位置を合焦点位置ＭＰからマクロ側（Ｐ５）、無限遠側（Ｐ７）、マクロ側（Ｐ４）、・・の順に交互に変更しながら全域フォーカス撮像処理を行ってもよい。即ち、焦点位置を最初に無限遠側又はマクロ側のどちらに変更するかは任意である。

［撮像装置の動作］
次に、図１４を参照して、本実施形態に係る撮像装置１による撮像動作について説明する。図１４は、本実施形態に係る撮像装置１による撮像動作を示すフローチャートである。

図１４に示すように、撮像装置１が撮像モードに設定されているときは、撮像装置１のＣＰＵ１１は、ＡＦ開始指示等の検出指示があるまで待機する（Ｓ１０２）。この待機中にも、撮像素子４は撮像光学系から入射される被写体像を撮像し、前処理部５及び信号処理部６は、該撮像素子４から出力された画像信号に基づき画像データを生成しており、この画像データは、表示部１５にライブビュー画像として表示される。ユーザは、このライブビュー画像を見ながら所望の被写体に撮像装置１を向けて、所望のタイミングでレリーズボタンを半押し操作するなどして、撮像装置１に検出指示を入力する。

ＣＰＵ１１は、かかる検出指示の入力を検知すると（Ｓ１０２）、撮像装置１の各部を制御して、当該被写体に焦点を合わせるためのＡＦ処理を実行する（Ｓ１０４）。このＡＦ処理としては、図１２及び図１３で説明したように、例えば山登りＡＦを使用できる。次いで、かかるＡＦ処理により、上記被写体に合焦する合焦点位置を検出した場合（Ｓ１０６）、ＣＰＵ１１は、レリーズ指示を受けるまでの間、その被写体に焦点を合わせ続けるためのＡＦ追従動作を制御する（Ｓ１０８）。なお、このＡＦ追従動作は必ずしも実行されなくてもよく、この場合には、レリーズ指示を受けるまでの間、上記検出された合焦点位置に焦点位置が固定される。

その後、撮像装置１のＣＰＵ１１は、レリーズ指示があるまで待機する（Ｓ１１０）。この待機中に、ユーザは、このライブビュー画像を見ながら所望のシャッタータイミングで、レリーズボタンを全押し操作するなどして、撮像装置１にレリーズ指示を入力する。

ＣＰＵ１１は、かかるレリーズ指示の入力を検知すると（Ｓ１１０）、撮像装置１の各部を制御して、撮像素子４により合焦点位置において被写体像を撮像して得た画像データを、ストレージ部１７に記録する（Ｓ１１２）。その直後に、ＣＰＵ１１は、撮像装置１の各部を制御して、全域フォーカス撮像処理を実行する（Ｓ１１４）。この全域フォーカス撮像処理では、ＣＰＵ１１は、変形ミラー装置２を制御して、例えば図１２又は図１３に示したように、合焦点位置を基準として焦点位置を複数の変更位置に段階的に変更する。そして、ＣＰＵ１１は、撮像装置１の各部を制御して、当該変更位置のそれぞれにおいて被写体像を撮像して、複数枚の画像データを順次生成し、当該画像データをストレージ部１７に記録する。

このような全域フォーカス撮像処理を行うことで、１回のレリーズ指示に応じて、マクロ側から無限遠側までの合焦可能範囲全域に合焦した複数枚の画像データを自動的に取得できる。

また、かかる全域フォーカス撮像処理では、上述したようにして得た複数枚の画像データに関連づけて、当該画像データに関するメタデータをストレージ部１７に記録してもよい。これにより、撮像後に、複数枚の画像データの中からユーザの所望する焦点位置の画像データをユーザに提示したり、複数枚の画像データを合成処理したり、ブラウジング処理したりすることができる。

［効果］
以上、本実施形態に係る撮像装置１とその撮像方法について説明した。本実施形態によれば、次の効果がある。

撮像装置１のユーザは、撮像装置１のＡＦ機能を用いて、或いは、手動で、所望の被写体に焦点を合わせて撮影する。特に、１眼レフカメラなどでは、所望の被写体に正確に焦点を合わせる必要がある。このような焦点合わせを行う場合、手動の場合は勿論、ＡＦ機能を用いた場合であっても、所望の被写体に焦点を合わせ損ねる場合がある。しかし、本実施形態に係る撮像装置１は、レリーズ操作に応じて、合焦点位置の被写体に合焦した画像データを取得する通常の撮像処理を行うとともに、焦点位置を変更しながら複数枚の画像データを取得する全域フォーカス撮像処理を行う。従って、この全域フォーカス撮像処理で得られた複数枚の画像データの中には、所望の被写体に合焦した画像データが必ず存在する。よって、ユーザは、所望の被写体に合焦した画像データを確実に取得でき、ＡＦ処理等の焦点合わせの成否をケアしないで撮影を行うことができる。

また、ユーザは、ある被写体に焦点を合わせて撮影した画像データを得た後に、同じ画角で他の被写体に焦点を合わせた画像が欲しくなる場合がある。かかる場合であっても、本実施形態によれば、事後的な画像処理に依らずとも、実際に撮像光学系を調整して当該他の被写体に焦点を合わせて撮像した高精度の画像データを事後的に取得できる。
まず、撮像装置１は、上述した全域フォーカス撮像処理を行うことで、１回のレリーズ指示に応じて、マクロ側から無限遠側までの合焦可能範囲全域に渡って、任意の被写体に合焦した複数枚の画像データを自動的に取得できる。この全域フォーカス撮像処理では、図１２及び図１３に示したように、ＡＦ処理で検出された合焦点位置を基準として、焦点位置を段階的に変更する。従って、合焦点位置ＭＰに近い焦点位置に合焦した画像データほど、シャッターチャンス（即ち、レリーズ指示）に近いタイミングで優先的に取得することができるので、合焦点位置の近くに存在する所望の被写体のシャッターチャンスを逃さないようにできる。

さらに、撮像装置１は、上述した全域フォーカス撮像処理を行うことで、１回のレリーズ指示に応じて、マクロ側から無限遠側までの合焦可能範囲全域に渡って、任意の被写体に合焦した複数枚の画像データを自動的に取得できる。この全域フォーカス撮像処理では、図１２及び図１３に示したように、ＡＦ処理で検出された合焦点位置を基準として、焦点位置を段階的に変更する。従って、合焦点位置ＭＰに近い焦点位置に合焦した画像データほど、シャッターチャンス（即ち、レリーズ指示）に近いタイミングで優先的に取得することができるので、合焦点位置の近くに存在する所望の被写体のシャッターチャンスを逃さないようにできる。

例えば、ユーザが、被写体の人物が笑ったときの写真を撮影したい場合を考える。この場合、上述した特許文献１記載のマルチフォーカス撮像のように、合焦点位置にかかわらず、単純にマクロ側から無限遠側に焦点位置を変更して順番に撮像していくと、シャッターチャンスを逃してしまい、当該人物が笑顔であるときに撮像できない恐れがある。このように、シャッターチャンスがあるような被写体をマルチフォーカス撮像するときに、特許文献１記載の方法では、シャッターチャンスを逃すという問題がある。

これに対して、本実施形態では、ＡＦ処理で所望の被写体を検出し、レリーズ指示に応じて、その合焦点位置での画像を撮像し、かつ、当該被写体を含む合焦可能範囲全域を、合焦点位置の近傍の焦点位置から順に撮像する。従って、シャッターチャンスが有るような被写体（例えば、人物の笑顔）をマルチフォーカス撮像する場合であっても、当該被写体及びその近傍に合焦した画像をレリーズ指示の直後に撮像できるので、シャッターチャンスを逃すことがない。

また、マルチフォーカス撮像で複数枚の画像データを記録した場合には、事後的に複数枚の画像データをユーザに提示する際に、ユーザがどの被写体を狙って撮像したかをユーザに提示する必要があるという課題がある。かかる課題に関しても、本実施形態に係るマルチフォーカス撮像は、特許文献１記載の手法よりも優れる。つまり、本実施形態に係るマルチフォーカス撮像によれば、記録される複数枚の画像データのうち、ＡＦ処理で合焦させたときの画像データは、ユーザ自身がどの被写体を狙って撮像したかを表すインデックスとなる。従って、ユーザが事後的に複数枚の画像データを見る際に、撮像装置１は、最初に、ＡＦ処理で合焦させたときの画像データを提示することで、ユーザ自身がどの被写体を狙って撮像したかを提示できる。従って、ユーザはこの提示を確認した上で、複数枚の画像データの中から、所望する被写体に真に焦点が合った画像を選択できるようになる。

また、本実施形態に係る撮像装置１では、焦点位置を調整するためのフォーカス機構として、変形ミラー装置２を用いるので、マルチフォーカス撮像処理において焦点位置を高速に変更することができる。よって、従来よりもマルチフォーカス撮像処理を迅速に（例えば１秒以内で）遂行できる。

＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。第２の実施形態は、上述した第１の実施形態と比べて、検出指示からレリーズ指示までの間にブラケット撮像を行う点で相違し、その他の機能構成は第１の実施形態と略同一であるので、その詳細説明は省略する。

まず、図１５を参照して、本実施形態に係る撮像装置１によるフォーカス制御について詳細に説明する。

第２の実施形態に係る撮像装置１は、検出指示に応じて、ＡＦ処理を行って合焦点位置を検出し、当該合焦点位置の検出が完了してからレリーズ指示までの間は、ブラケット撮像を行う。ブラケット撮像では、撮像装置１は、ＡＦ処理により検出された合焦点位置を中心とする所定の範囲内で、焦点位置を周期的に変更しながら、当該変更された複数の焦点位置において被写体像を撮像して得た画像データをストレージ部１７に記録する。その後、撮像装置１は、１回のレリーズ指示に応じて、合焦点位置で撮像して得た画像データをストレージ部１７に記録するとともに、全域フォーカス撮像処理を行う。この全域フォーカス撮像処理では、撮像装置１は、ＡＦ処理で検出された合焦点位置を基準として、合焦可能範囲内で焦点位置を段階的に変更しながら、当該変更された焦点位置で撮像して得られた複数枚の画像データをストレージ部１７に順次、記録する。

このように、第２の実施形態に係る撮像装置１は、ＡＦ処理で合焦点位置を検出するためにフォーカスを制御し、また、ブラケット撮像及び全域フォーカス撮像処理で焦点位置を変更するためにフォーカスを制御する。以下に、本実施形態に係るフォーカス制御の具体例について、図１５を参照して詳細に説明する。

図１５は、本実施形態に係るＡＦ処理、ブラケット撮像処理及び全域フォーカス撮像処理におけるフォーカス制御の例を示す模式図である。なお、図１５において、縦軸（Ｚ軸）は焦点位置、横軸は時間を示す。

図１５に示すように、まず、撮像装置１のＣＰＵ１１は、検出指示（ＡＦ開始指示）を受けると、例えば上記山登りＡＦ処理を行って、撮像範囲内の所定の被写体に合焦する合焦点位置ＭＰを検出する（ｔ１〜ｔ２）。このＡＦ処理（ｔ１〜ｔ２）は、上述した第１の実施形態にかかる図１２の処理（ｔ１〜ｔ２）と略同一であるので、その詳細説明は省略する。

次いで、上記合焦点位置ＭＰの検出完了からレリーズ指示を受け付けるまでの間、ＣＰＵ１１は、ブラケット撮像処理を行う（ｔ２〜ｔ３）。このように第２の実施形態では、第１の実施形態に係るＡＦ追従動作の代わりに、ブラケット撮像処理を行う。

このブラケット撮像処理について詳細に説明する。ブラケット撮像処理では、撮像装置１のＣＰＵは、上記ＡＦ処理で検出した合焦点位置ＭＰを中心として、焦点位置を無限遠側の位置Ｐ７と、マクロ側の位置Ｐ５に交互に変更する。これにより、焦点位置は、合焦点位置ＭＰを中心とする所定の範囲内（図示の例では、Ｐ５〜Ｐ７の範囲内）で、位置Ｐ７→Ｐ５→ＭＰ（＝Ｐ６）→Ｐ７→Ｐ５→ＭＰ（＝Ｐ６）→・・・といったように周期的かつ段階的に変更される。撮像装置１は、このように焦点位置を周期的かつ段階的に変更しながら、それぞれの変更位置Ｐ７、Ｐ５、ＭＰ・・・において撮像素子４により被写体像を撮像し、当該撮像素子４から出力された画像信号に基づいて画像データＤ７、Ｄ５、ＤＭ（＝Ｄ６）・・・を生成する。ＣＰＵ１１は、このように生成した画像データＤ７、Ｄ５、ＤＭ・・・を、不図示のキャッシュメモリ等に一時的に保存しておく。

以上のようにして、撮像装置１は、ブラケット撮像処理（ｔ２〜ｔ３）を行うことで、合焦点位置ＭＰの近傍（無限遠側及びマクロ側）の焦点位置に合焦した複数枚の画像データＤ７、Ｄ５、ＤＭ・・・を周期的に取得できる。かかる画像データＤ７、Ｄ５、ＤＭ・・・は、ＡＦ処理にミスがあった場合、即ち、ＡＦ処理によりユーザ所望の被写体に合焦していない場合を補償するための画像データとして利用できる。つまり、ＡＦ処理で検出された合焦点位置ＭＰの近傍で前後に焦点位置を周期的に変更することで、当該合焦点位置ＭＰの近傍に位置する被写体は、当該合焦点位置ＭＰを中心とする合焦範囲内に含まれない場合でも、変更位置Ｐ５又はＰ７を中心とする合焦範囲内に含まれる可能性が高い。よって、ＡＦ処理によりユーザ所望の被写体に合焦できなかったとしても、上記のようなブラケット撮像処理で得た画像データＤ７又はＤ５において当該被写体に合焦させることができる。

なお、図１５の例では、焦点位置を合焦点位置ＭＰから無限遠側（Ｐ７）、マクロ側（Ｐ５）、無限遠側（Ｐ７）、・・の順に交互に変更しながらブラケット撮像処理を行ったが、かかる例に限定されない。上記の例とは逆に、焦点位置を合焦点位置ＭＰから、マクロ側（Ｐ５）、無限遠側（Ｐ７）、マクロ側（Ｐ５）、・・の順に交互に変更しながらブラケット撮像処理を行ってもよい。即ち、焦点位置を最初に無限遠側又はマクロ側のどちらに変更するかは任意である。

また、図１５の例では、合焦点位置ＭＰの近傍で焦点位置を１段階分だけ交互に変更したが、かかる例に限定されず、焦点位置を２段階分以上、交互に変更してもよい。例えば、焦点位置を、合焦点位置ＭＰを中心とするＰ４〜Ｐ８の範囲内で、位置Ｐ７→Ｐ８→Ｐ４→Ｐ５→ＭＰ→Ｐ７→Ｐ８→Ｐ４→Ｐ５→ＭＰ→・・・といったように周期的に変化させてもよい。

以上のようなブラケット撮像処理は、レリーズ指示（ｔ３）があるまで繰り返される。ＣＰＵ１１は、上記ブラケット撮像処理により取得されて、キャッシュメモリに一時的に保存されていた複数の画像データＤ７、Ｄ５、ＤＭ・・・のうち、レリーズ指示の直前の１周期分Ｓの画像データＤ７、Ｄ５、ＤＭをストレージ部１７に保存し、その他の保存用画像データＤ７、ＤＭ、Ｄ５・・・は、重複した画像データであるので削除する。ブラケット撮像処理では、同一の焦点位置Ｐ５、Ｐ７、ＭＰで繰り返し撮像しているので、保存されるデータ量を削減するため、重複している古い画像データＤ７、ＤＭ、Ｄ５・・・を削除し、レリーズ指示直前に得られた最新の画像データＤ７、ＤＭ、Ｄ５を残せばよい。これは、レリーズ指示直前に得られた最新の画像データＤ７、ＤＭ、Ｄ５が、シャッターチャンスをより反映したものであるからである。

なお、本実施形態では、ブラケット撮像された全ての画像データを一時記憶用記憶部（例えばキャッシュメモリ）に一時保存しておき、レリーズ指示に応じて、上記レリーズ指示直前の少なくとも１周期分Ｓの画像データを、格納用記憶部（例えばストレージ部１７）に保存し、その他の画像データを一時用記憶部から能動的に削除して無効化した。しかし、本発明は、かかる例に限定されず、上記少なくとも１周期分Ｓの画像データを有効化し、その他の画像データを無効化する手法は任意である。例えば、全ての画像データを当初からストレージ部１７に保存して、レリーズ操作に応じて、少なくとも１周期分Sの画像データ以外の他の画像データをストレージ部１７から能動的に削除してもよい。また、レリーズ指示に応じて、当該他の画像データを能動的に記憶部から削除しないで残しておき、ユーザが当該他の画像データにアクセスできないように設定（無効化）してもよい。また、レリーズ指示に応じて、上記少なくとも１周期分Ｓの画像データのみに対してユーザがアクセスできるよう設定（有効化）してもよい。いずれしろ、レリーズ指示直前の画像データは、レリーズ指示直前のシャッターチャンスに近いタイミングで撮像された重要な画像データである。従って、ブラケット撮像で周期的に撮像された複数周期の画像データのうち、当該レリーズ指示直前の１周期分の画像データのみを有効化して、ユーザに提示することで、画像データを効率的に管理・提示できる。

上記のブラケット撮像処理中に、ＣＰＵ１１は、レリーズ指示を受け付けると、その受け付け時点で、撮像素子４によって合焦点位置ＭＰ（焦点位置の変更位置Ｐ６に相当する。）において被写体像を撮像して得た画像データＤ６を、ストレージ部１７に記録する（ｔ３）。これにより、上記ＡＦ処理にて検出された合焦点位置ＭＰの被写体に焦点が合っている画像データＤ６を、保存用画像データとして記録できる。さらに、かかる合焦点位置ＭＰの画像データＤ６の記録後すぐに、ＣＰＵ１１は、全域フォーカス撮像処理を実行して、マクロ側から無限遠側までの合焦可能範囲全域の被写体に合焦した複数枚の画像データＤ１〜Ｄ１１をストレージ部１７に記録する（ｔ３〜ｔ４）。かかる全域フォーカス撮像処理（ｔ３〜ｔ４）は、図１３で説明した全域フォーカス撮像処理と略同一であるので詳細説明は省略する。また、かかる全域フォーカス撮像処理は、図１２で説明した全域フォーカス撮像処理に代えてもよい。

［撮像装置の動作］
次に、図１６を参照して、本実施形態に係る撮像装置１による撮像動作について説明する。図１６は、本実施形態に係る撮像装置１による撮像動作を示すフローチャートである。

図１６に示すように、撮像装置１のＣＰＵ１１は、検出指示の入力を検知すると（Ｓ２０２）、撮像装置１の各部を制御して、当該被写体に焦点を合わせるためのＡＦ処理を実行する（Ｓ２０４）。これらＳ２０２、Ｓ２０４は、上述した第１の実施形態に係る図１４のＳ１０２、Ｓ１０４と略同一であるので、詳細説明は省略する。

次いで、Ｓ２０４でのＡＦ処理により、上記被写体に合焦する合焦点位置を検出した場合（Ｓ２０６）、ＣＰＵ１１は、レリーズ指示を受けるまでの間、撮像装置１の各部を制御して、合焦点位置ＭＰの前後に焦点を合わせた画像を得るためのブラケット撮像処理を行う（Ｓ２０８）。このブラケット撮像処理では、ＣＰＵ１１は、変形ミラー装置２を制御して、例えば図１５に示したように、合焦点位置を中心とした所定範囲内で焦点位置をマクロ側及び無限遠側の位置Ｐ７、Ｐ５に交互に変更する。そして、ＣＰＵ１１は、撮像装置１の各部を制御して、当該変更位置Ｐ７、Ｐ５、ＭＰのそれぞれにおいて被写体像を撮像して、複数枚の画像データＤ７、Ｄ５、ＤＭを順次生成し、当該画像データＤ７、Ｄ５、ＤＭをキャッシュメモリに一時的に保存する。そして、レリーズ指示（Ｓ２１０）に応じて、キャッシュメモリからレリーズ指示直前の１周期分Ｓの画像データＤ７、Ｄ５、ＤＭを読み出し、ストレージ部１７に記録し、その他の画像データＤ７、Ｄ５、ＤＭをキャッシュメモリから削除する。これにより、必要な画像データのみをストレージ部１７に格納できるので、保存する画像データ量を削減できる。

さらに、撮像装置１のＣＰＵ１１は、レリーズ指示の入力を検知すると（Ｓ２１０）、撮像装置１の各部を制御して、撮像素子４により合焦点位置において被写体像を撮像して得た画像データを、ストレージ部１７に記録する（Ｓ２１２）。その直後に、ＣＰＵ１１は、撮像装置１の各部を制御して、全域フォーカス撮像処理を実行する（Ｓ２１４）。これらＳ２１０〜Ｓ２１４は、上述した第１の実施形態に係る図１４のＳ２１０〜Ｓ２１４と略同一であるので、詳細説明は省略する。

［効果］
以上、第２の実施形態に係る撮像装置１とその撮像方法について説明した。第２の実施形態によれば、上記第１の実施形態に係る効果に加えて、次の効果がある。

第２の実施形態によれば、シャッターチャンスにおける合焦画像を得るために、ＡＦ処理完了後、レリーズ指示までの間に、ブラケット撮像処理を行う、これにより、ユーザ所望の被写体に合焦した画像データをミス無く取得できる。

つまり、ＡＦ処理により目標の被写体に完全に焦点が合っているなら、レリーズ前のブラケット撮像処理は不要である。しかし、ＡＦ処理で目標の被写体に焦点が合わない場合がある。そこで、本実施形態では、レリーズ指示前にブラケット撮像処理することで、ＡＦ処理のミスを補償して、目標の被写体に合焦した画像データを確実に得られるようになる。

さらに、現実には、ユーザがシャッターチャンスと判断してから、レリーズボタンを押下して、合焦点位置の画像データが記録されるまでには、時間差がある。そこで、本実施形態では、その時間差を補償するために、レリーズ指示前に、合焦点位置の近傍をブラケット撮像処理する。これにより、あるシャッターチャンスの前に予め、ユーザが所望する被写体に合焦した画像データを記録しておくことができる。よって、上記時間差があったとしても、シャッターチャンスを逃すことなく、所望の被写体に正確に合焦した画像データを取得できる。

また、レリーズ指示前に取得した画像データは、撮像装置１に設定された所定時間分（例えば、レリーズ直前の１周期分Ｓ）のみ有効となるので、撮像装置１のストレージ部１７に記録される画像データのデータ量を必要最小限に抑えることができる。

＜第３の実施形態＞
次に、本発明の第３の実施形態について説明する。第３の実施形態は、上述した第２の実施形態と比べて、検出指示に応じて被写体検出処理を行い、その被写体検出処理で検出された合焦点位置の範囲内でブラケット撮像を行う点で相違し、その他の機能構成は第２の実施形態と略同一であるので、その詳細説明は省略する。

第３の実施形態に係る撮像装置１は、検出指示（例えば、レリーズボタンの半押し操作）に応じて、被写体検出処理を行う。この検出処理では、合焦可能範囲内で焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを分析して、被写体検出用の評価パラメータを求める。これにより、撮像装置１は、撮像範囲内に存在する１又は２以上の被写体を検出するとともに、当該検出された被写体に合焦する合焦点位置の範囲を検出する。そして、当該被写体検出処理が完了してからレリーズ指示までの間は、上記検出された合焦点位置の範囲内で、焦点位置を変更させながら、ブラケット撮像を行う。ブラケット撮像では、撮像装置１は、当該合焦点位置の範囲内で、焦点位置を周期的に変更しながら、当該変更された複数の焦点位置において被写体像を撮像して得た画像データをストレージ部１７に記録する。その後、撮像装置１は、１回のレリーズ指示（例えば、レリーズボタンの全押し操作）に応じて、合焦点位置の範囲内の任意の焦点位置で撮像して得た画像データをストレージ部１７に記録するとともに、第２の実施形態と同様にして全域フォーカス撮像処理を行う。

このように、第３の実施形態に係る撮像装置１は、被写体検出処理で撮像範囲内の被写体及びその合焦点位置の範囲を検出するためにフォーカスを制御し、また、ブラケット撮像及び全域フォーカス撮像処理で焦点位置を変更するためにフォーカスを制御する。以下に、本実施形態に係るフォーカス制御の具体例について、図１７を参照して詳細に説明する。

図１７は、本実施形態に係る被写体検出処理、ブラケット撮像処理及び全域フォーカス撮像処理におけるフォーカス制御の例を示す模式図である。なお、図１７において、縦軸（Ｚ軸）は焦点位置、横軸は時間を示す。

図１７に示すように、撮像装置１の撮像範囲内に１つの被写体Ｈが存在し、この被写体Ｈは奥行き方向（Ｚ軸方向）に所定以上の厚みを有する物体であるときに、撮像装置１で被写体Ｈを検出して、マルチフォーカス撮像する場合を考える。

まず、撮像装置１のＣＰＵ１１は、検出指示（被写体検出開始指示）を受けると、被写体検出処理を行って、撮像範囲内に存在する被写体Ｈを検出するとともに、当該被写体Ｈに合焦する合焦点位置の範囲ｒを検出する（ｔ１〜ｔ４）。この被写体検出処理は、例えば、上述した山登りＡＦ法、位相差検出法、コントラスト検出法など、任意のＡＦ方式を利用して実現できる。

ここで、図１８を参照して、コントラスト検出法により被写体検出する例を説明する。図１８（ａ）に示すように、被写体Ｈ１、Ｈ２が図示の位置関係で存在する撮像空間を、撮像装置１で撮像した場合を考える。この場合、図１８（ｂ）に示すように、撮像素子４により被写体Ｈ１、Ｈ２を撮像して得た画像１９上では、被写体Ｈ１に対応する像と、被写体Ｈ１に対応する像との位置関係は図示のようになる。ＣＰＵ１１は、かかる画像１９の画像データを解析し、焦点位置を移動させながら画像のコントラスト値が最も高くなる焦点位置を探索する。このとき、焦点位置をマクロから無限遠まで移動させたときのコントラスト値は、図１８（ｃ）に示すようになる。図１８（ｃ）で左側のピークは、被写体Ｈ１に対応する像の近傍の画素から求められるコントラスト出力であり、右側のピークは、被写体Ｈ２に対応する像の近傍の画素から求められるコントラスト出力である。これにより、ＣＰＵ１１は、かかるコントラスト出力が最大となるときの焦点位置ＭＰ１、ＭＰ２を、それぞれ被写体Ｈ１、Ｈ２の合焦点位置であると特定できる。さらに、ＣＰＵ１１は、コントラスト出力のピークの幅から、被写界深度に応じた許容ボケにより被写体Ｈ１、Ｈ２に合焦しうる合焦点位置の範囲ｒ１、ｒ２を求めることができる。

図１７に戻り説明を続ける。上記のような被写体検出処理（ｔ１〜ｔ４）により、ＣＰＵ１１は、焦点位置をマクロ位置ＮＰから無限遠位置ＦＰまで変更する途中の時間ｔ２〜ｔ３で検出されたコントラスト出力に基づいて、被写体Ｈに合焦する合焦点位置の範囲ｒを求めることができる。図示の例では、合焦点位置の範囲ｒは、焦点位置Ｐ４〜焦点位置Ｐ６までの範囲である。なお、撮像装置１により被写体Ｈの手前側は撮像できるが、奥側は撮像できないので、合焦点位置の範囲ｒは、被写体Ｈの手前側の部分に対応する焦点位置の範囲となる。

次いで、上記被写体Ｈ及び合焦点位置の範囲ｒの検出を完了してから、レリーズ指示を受け付けるまでの間、ＣＰＵ１１は、ブラケット撮像処理を行う（ｔ４〜ｔ５）。

このブラケット撮像処理について詳細に説明する。ブラケット撮像処理では、撮像装置１のＣＰＵは、上記被写体検出処理で検出した合焦点位置の範囲ｒ内で、焦点位置を周期的に変更する。図示の例では、焦点位置は、当該合焦点位置の範囲ｒ内で、位置Ｐ４→Ｐ５→Ｐ６→Ｐ４→Ｐ５→Ｐ６→・・・といったように周期的かつ段階的に変更される。撮像装置１は、このように焦点位置を周期的かつ段階的に変更しながら、それぞれの変更位置Ｐ４、Ｐ５、Ｐ６・・・において撮像素子４により被写体像を撮像し、当該撮像素子４から出力された画像信号に基づいて画像データＤ４、Ｄ５、Ｄ６・・・を生成する。ＣＰＵ１１は、このように生成した画像データＤ４、Ｄ５、Ｄ６・・・を、不図示のキャッシュメモリ等に一時的に保存しておく。

以上のようにして、撮像装置１は、ブラケット撮像処理（ｔ４〜ｔ５）を行うことで、奥行き方向に厚みのある被写体Ｈに合焦した複数枚の画像データＤ４、Ｄ５、Ｄ６・・・を周期的に取得できる。かかる画像データＤ４、Ｄ５、Ｄ６・・・を得ることで、厚みのある被写体Ｈの手前側部分、中央部分、奥側部分にそれぞれ正確に合焦した画像データを取得できる。

なお、図１７の例では、焦点位置を合焦点位置の範囲ｒ内でＰ４→Ｐ５→Ｐ６の順に変更しながらブラケット撮像処理を行ったが、かかる例に限定されず、当該合焦点位置の範囲ｒ内であれば焦点位置を任意の順（例えば、Ｐ６→Ｐ５→Ｐ４）で変更してもよい。

以上のようなブラケット撮像処理は、レリーズ指示（ｔ５）があるまで繰り返される。ＣＰＵ１１は、上記ブラケット撮像処理により取得されて、キャッシュメモリに一時的に保存されていた複数の画像データＤ４、Ｄ５、Ｄ６・・・のうち、レリーズ指示の直前の１周期分Ｓの画像データＤ４、Ｄ５、Ｄ６をストレージ部１７に保存し、その他の保存用画像データＤ４、Ｄ５、Ｄ６・・・は、重複した画像データであるので削除する。ブラケット撮像処理では、同一の焦点位置Ｐ４、Ｐ５、Ｐ６で繰り返し撮像しているので、保存されるデータ量を削減するため、重複している古い画像データＤ４、Ｄ５、Ｄ６・・・を削除し、レリーズ指示直前に得られた最新の画像データＤ４、Ｄ５、Ｄ６・・・を残せばよい。これは、レリーズ指示直前に得られた最新の画像データＤ４、Ｄ５、Ｄ６・・・が、シャッターチャンスをより反映したものであるからである。

かかるブラケット撮像処理中に、ＣＰＵ１１は、レリーズ指示を受け付けると、その受け付け時点で、撮像素子４によって合焦点位置の範囲ｒ内の任意の焦点位置（例えば、図示の例では位置Ｐ６）において被写体像を撮像して得た画像データＤ６を、ストレージ部１７に記録する（ｔ５）。これにより、上記被写体検出処理にて検出された被写体Ｈに焦点が合っている画像データＤ６を、保存用画像データとして記録できる。さらに、かかる画像データＤ６の記録後すぐに、ＣＰＵ１１は、全域フォーカス撮像処理を実行して、マクロ側から無限遠側までの合焦可能範囲全域の被写体に合焦した複数枚の画像データＤ１〜Ｄ１１をストレージ部１７に記録する（ｔ５〜ｔ６）。かかる全域フォーカス撮像処理（ｔ５〜ｔ６）は、図１３で説明した全域フォーカス撮像処理と略同一であるので詳細説明は省略する。また、かかる全域フォーカス撮像処理は、図１２で説明した全域フォーカス撮像処理に代えてもよい。

［撮像装置の動作］
次に、図１９を参照して、本実施形態に係る撮像装置１による撮像動作について説明する。図１９は、本実施形態に係る撮像装置１による撮像動作を示すフローチャートである。

図１９に示すように、撮像装置１のＣＰＵ１１は、検出指示の入力を検知すると（Ｓ３０２）、撮像装置１の各部を制御して、合焦可能範囲内に存在する被写体Ｈと、該被写体Ｈに合焦する合焦点位置の範囲ｒを検出するための被写体検出処理を実行する（Ｓ３０４）。

被写体検出処理では、ＣＰＵ１１は、例えば図１８に示したようにコントラスト検出法を用いて、焦点位置を合焦可能範囲全域で変更しながら、撮像装置１により被写体像を撮像して得た画像データを解析し、画像のコントラスト値の推移を求める。そして、ＣＰＵ１１は、このコントラスト値の推移に基づいて、撮像範囲内に存在する被写体Ｈと、当該被写体Ｈに合焦する合焦点位置の範囲ｒを検出する。

次いで、Ｓ３０４での被写体検出処理により、上記被写体Ｈと、合焦点位置の範囲ｒを検出した場合（Ｓ３０６）、ＣＰＵ１１は、レリーズ指示（Ｓ３１０）を受けるまでの間、撮像装置１の各部を制御して、上記被写体Ｈの奥行き方向全体に渡って焦点を合わせるためのブラケット撮像処理を行う（Ｓ３０８）。このブラケット撮像処理では、ＣＰＵ１１は、変形ミラー装置２を制御して、例えば図１７に示したように、合焦点位置の範囲ｒ内で焦点位置をマクロ側及び無限遠側に交互に振りながら、位置Ｐ４、Ｐ５、Ｐ６に周期的に変更する。そして、ＣＰＵ１１は、撮像装置１の各部を制御して、当該変更位置Ｐ４、Ｐ５、Ｐ６のそれぞれにおいて被写体像を撮像して、複数枚の画像データＤ４、Ｄ５、Ｄ６を順次生成し、当該画像データＤ４、Ｄ５、Ｄ６をキャッシュメモリに一時的に保存する。そして、レリーズ指示（Ｓ３１０）に応じて、キャッシュメモリからレリーズ指示直前の１周期分Ｓの画像データＤ４、Ｄ５、Ｄ６を読み出し、ストレージ部１７に記録し、その他の画像データＤ４、Ｄ５、Ｄ６をキャッシュメモリから削除する。これにより、必要な画像データＤ４、Ｄ５、Ｄ６のみをストレージ部１７に格納できるので、保存する画像データ量を削減できる。

さらに、撮像装置１のＣＰＵ１１は、レリーズ指示の入力を検知すると（Ｓ３１０）、撮像装置１の各部を制御して、撮像素子４により合焦点位置の範囲ｒ内の任意の焦点位置Ｐ６において被写体像を撮像して得た画像データを、ストレージ部１７に記録する（Ｓ３１２）。その直後に、ＣＰＵ１１は、撮像装置１の各部を制御して、全域フォーカス撮像処理を実行する（Ｓ３１４）。これらＳ３１０〜Ｓ３１４は、上述した第１の実施形態に係る図１４のＳ１１０〜Ｓ１１４と略同一であるので、詳細説明は省略する。

［効果］
以上、第３の実施形態に係る撮像装置１とその撮像方法について説明した。第３の実施形態によれば、上記第２の実施形態に係る効果に加えて、次の効果がある。

第３の実施形態によれば、ＡＦ処理ではなく、被写体検出処理を行うので、撮像範囲内に存在する１又は２以上の被写体Ｈのみならず、その被写体Ｈに対する合焦焦点位置の範囲ｒをも検出できる。

例えば、奥行き方向に厚みのある大きな被写体Ｈを撮像する場合、ＡＦ処理で焦点を合わせて撮像すると、被写体Ｈの手前側、奥側、中央部のうちどの部分に合焦するかは調整しにくい。これに対して、本実施形態では、被写体検出処理で検出された合焦焦点位置の範囲ｒ内で焦点位置を変更しながら、ブラケット撮像するので、被写体Ｈの手前側、奥側、中央部の全ての位置に精度良く合焦した複数枚の画像データを得ることができる。つまり、本実施形態では、厚みのある被写体Ｈの奥行き方向をスキャンして、１つの被写体Ｈについて多焦点画像を得ることができる。よって、撮像後に、ユーザは、被写体Ｈの所望の部分に正確に合焦した画像データを容易に取得できる。また、かかる１つの被写体Ｈについての複数枚の画像データを得ることで、画像合成による３次元画像を高精度かつ容易に作成できるようになる。

さらに、本実施形態では、撮像範囲内から被写体Ｈを抽出して、最良のシャッターチャンスのときにその被写体を撮像し、残った時間で全域フォーカス撮影を行う。これにより、被写体抽出を正確に実行できるとともに、ユーザが所望する被写体Ｈの多焦点画像データをシャッターチャンス内で取得できる。

＜第４の実施形態＞
次に、本発明の第４の実施形態について説明する。第４の実施形態は、上述した第３の実施形態と比べて、被写体検出処理で複数の被写体を検出する点と、レリーズ後に、被写体検出処理で検出された被写体に対してのみ被写体撮像を行う点で相違し、その他の機能構成は第３の実施形態と略同一であるので、その詳細説明は省略する。

第４の実施形態に係る撮像装置１は、検出指示（例えば、レリーズボタンの半押し操作）に応じて、被写体検出処理を行う。この検出処理では、合焦可能範囲内で焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを分析して、被写体検出用の評価パラメータを求める。これにより、撮像装置１は、撮像範囲内に存在する複数の被写体を検出するとともに、当該検出されたそれぞれの被写体に合焦する合焦点位置の範囲を検出する。そして、当該被写体検出処理が完了してからレリーズ指示までの間は、上記検出された複数の被写体の中から選択された１の被写体に合焦する合焦点位置の範囲内で、焦点位置を変更させながら、ブラケット撮像を行う。ブラケット撮像では、撮像装置１は、当該合焦点位置の範囲内で、焦点位置を周期的に変更しながら、当該変更された複数の焦点位置において被写体像を撮像して得た画像データをストレージ部１７に記録する。

その後、撮像装置１は、１回のレリーズ指示（例えば、レリーズボタンの全押し操作）に応じて、合焦点位置の範囲内の任意の焦点位置で撮像して得た画像データをストレージ部１７に記録する。さらに、撮像装置１は、上述した合焦可能範囲全域をスキャンする全域フォーカス撮像処理の代わりに、上記被写体検出処理で検出された複数の被写体に合焦する合焦点位置の範囲内のみをスキャンする被写体撮像処理を行う。この被写体撮像処理では、上記被写体検出処理により検出された複数の被写体に合焦する合焦点位置の範囲内で、焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において被写体像を撮像して得た画像データを保存用画像データとして取得して、ストレージ部１７に記録する。

このように、第４の実施形態に係る撮像装置１は、被写体検出処理で撮像範囲内の被写体及びその合焦点位置の範囲を検出するためにフォーカスを制御し、また、ブラケット撮像及び被写体撮像処理で焦点位置を変更するためにフォーカスを制御する。以下に、本実施形態に係るフォーカス制御の具体例について、図２０を参照して詳細に説明する。

図２０は、本実施形態に係る被写体検出処理、ブラケット撮像処理及び被写体撮像処理におけるフォーカス制御の例を示す模式図である。なお、図２０において、縦軸（Ｚ軸）は焦点位置、横軸は時間を示す。

図２０に示すように、撮像装置１の撮像範囲内に３つの被写体Ｈ１、Ｈ２、Ｈ３が存在するときに、撮像装置１で被写体Ｈ１、Ｈ２、Ｈ３を検出して、マルチフォーカス撮像する場合を考える。なお、被写体Ｈ３は、建物の壁等であり、撮像装置１側から見ると、被写体Ｈ３の奥側は見えないものとする。

まず、撮像装置１のＣＰＵ１１は、検出指示（被写体検出開始指示）を受けると、被写体検出処理を行って、撮像範囲内に存在する被写体Ｈ１〜Ｈ３を検出するとともに、被写体Ｈ１〜Ｈ３に合焦する合焦点位置の範囲ｒ１〜ｒ３を検出する（ｔ１〜ｔ６）。なお、被写体Ｈ１は時間ｔ２〜ｔ３で検出され、被写体Ｈ１は時間ｔ４〜ｔ５で検出される。この被写体検出処理は、例えば、上述した山登りＡＦ法、位相差検出法、コントラスト検出法など、任意のＡＦ方式を利用して実現できるが、その詳細は第３の実施形態と略同一であるので詳細説明を省略する。

上記のような被写体検出処理（ｔ１〜ｔ６）により、ＣＰＵ１１は、焦点位置をマクロ位置ＮＰから無限遠位置ＦＰまで変更する途中の時間ｔ２〜ｔ３、ｔ４〜ｔ５で検出されたコントラスト出力に基づいて、被写体Ｈ１、Ｈ２に合焦する合焦点位置の範囲ｒ１、ｒ２を求めることができる。図示の例では、合焦点位置の範囲ｒ１は、焦点位置Ｐ２〜Ｐ４までの範囲であり、合焦点位置の範囲ｒ２は、焦点位置Ｐ６〜Ｐ８までの範囲である。なお、被写体Ｈ３の合焦点位置の範囲ｒ３は、焦点位置Ｐ１０のみである。

次いで、上記被写体Ｈ１〜Ｈ３及び合焦点位置の範囲ｒ１〜ｒ３の検出を完了してから、レリーズ指示を受け付けるまでの間、ＣＰＵ１１は、ブラケット撮像処理を行う（ｔ６〜ｔ７）。図示の例では、検出された複数の被写体Ｈ１〜Ｈ３の中から選択された１つの被写体Ｈ１に対してのみブラケット撮像処理を行っている。この被写体Ｈ１の選択は、ユーザにより手動で行ってもよいし、或いは、予め設定された基準に従いＣＰＵ１１が自動的に行ってもよい。例えば、ユーザは、ライブビュー画像に表示された被写体Ｈ１〜Ｈ３の中から所望の被写体Ｈ１を選択して、その選択指示を撮像装置１のタッチパネル等に入力することで、重要な被写体Ｈ１だけをブラケット撮像処理させることができる。

この結果、撮像装置１のＣＰＵは、上記選択された被写体Ｈ１の合焦点位置の範囲ｒ１内で、焦点位置を周期的に変更する。図示の例では、焦点位置は、当該合焦点位置の範囲ｒ１内で、位置Ｐ２→Ｐ３→Ｐ４→Ｐ２→Ｐ３→Ｐ４→・・・といったように周期的かつ段階的に変更される。撮像装置１は、このように焦点位置を周期的かつ段階的に変更しながら、それぞれの変更位置Ｐ２、Ｐ３、Ｐ４・・・において被写体像を撮像して得た画像データＤ２、Ｄ３、Ｄ４・・・を、記録媒体に記録する。なお、かかるブラケット撮像処理は、図１７に示す第３の実施形態のブラケット撮像処理と略同一であるので詳細説明は省略する。

なお、図２０の例では、選択された１つの被写体Ｈ１に対してブラケット撮像処理を行ったが、複数の被写体Ｈ１〜Ｈ３に対してブラケット撮像処理を行ってもよい。この場合、焦点位置は、当該合焦点位置の範囲ｒ１、ｒ２、ｒ３内で、位置Ｐ２→Ｐ３→Ｐ４→Ｐ６→Ｐ７→Ｐ８→Ｐ１０→Ｐ２・・・といったように周期的かつ段階的に変更される。

かかるブラケット撮像処理中に、ＣＰＵ１１は、レリーズ指示を受け付けると、その受け付け時点で、ブラケット撮像されている被写体Ｈ１の合焦点位置の範囲ｒ１内の任意の焦点位置（例えば、図示の例では位置Ｐ４）において被写体像を撮像して得た画像データＤ４を、ストレージ部１７に記録する（ｔ７）。これにより、上記のように選択された被写体Ｈ１に焦点が合っている画像データＤ４を、保存用画像データとして記録できる。さらに、かかる画像データＤ４の記録後すぐに、ＣＰＵ１１は、上記検出された被写体Ｈ１、Ｈ２、Ｈ３に対する被写体撮像処理を実行する（ｔ７〜ｔ８）。

詳細には、かかる被写体検出処理では、ＣＰＵ１１は、上記検出された被写体Ｈ１、Ｈ２、Ｈ３の合焦点位置の範囲ｒ１、ｒ２、ｒ３内において、焦点位置を位置Ｐ２、Ｐ３、Ｐ４、Ｐ６、Ｐ７、Ｐ８、Ｐ１０に段階的に変更しながら、当該変更された焦点位置にて被写体像を撮像して得た複数枚の画像データＤ２、Ｄ３、Ｄ４、Ｄ６、Ｄ７、Ｄ８、Ｄ１０を、ストレージ部１７に記録する（ｔ７〜ｔ８）。

以上のように、本実施形態に係る撮像装置１は、まず、検出指示に応じて、合焦可能範囲全域をスキャンする被写体検出処理を行って、撮影したい被写体Ｈ１〜Ｈ３がどの焦点位置にあるかを検出する。次いで、撮像装置１は、レリーズ指示に応じて、被写体Ｈ１〜Ｈ３がある部分（焦点位置Ｐ２〜Ｐ４、Ｐ６〜Ｐ８、Ｐ１０）のみを撮像し、被写体Ｈ１〜Ｈ３が無い不要な部分（焦点位置Ｐ１、Ｐ５、Ｐ９、Ｐ１１）を撮像しない。従って、被写体撮像処理は、被写体が存在する必要な部分のみを撮像するので、上述した全域フォーカス撮像処理よりも短時間で効率的に実行できる。

［撮像装置の動作］
次に、図２１を参照して、本実施形態に係る撮像装置１による撮像動作について説明する。図２１は、本実施形態に係る撮像装置１による撮像動作を示すフローチャートである。

図２１に示すように、撮像装置１のＣＰＵ１１は、検出指示の入力を検知すると（Ｓ４０２）、撮像装置１の各部を制御して、合焦可能範囲内に存在する複数の被写体Ｈ１〜Ｈ３と、該被写体Ｈ１〜Ｈ３に合焦する合焦点位置の範囲ｒ１〜ｒ３を検出するための被写体検出処理を実行する（Ｓ４０４）。この被写体検出処理Ｓ４０４は、上述した図１９の被写体検出処理Ｓ３０４と略同一であるので、詳細説明は省略する。

次いで、Ｓ４０４での被写体検出処理により、上記被写体Ｈ１〜Ｈ３の検出が完了すると（Ｓ４０６）、ＣＰＵ１１は、例えば、ユーザ入力に基づいて、複数の被写体Ｈ１〜Ｈ３の中から、重要な被写体Ｈ１を１つ選択する（Ｓ４０７）。この選択処理で選択された被写体Ｈ１が、次のブラケット撮像処理Ｓ４０８による撮像対象となる。よって、ブラケット撮像を行う被写体を重要な被写体Ｈ１に限定できるので、当該重要な被写体Ｈ１に正確に合焦した画像データを確実に取得できる。なお、かかる被写体選択処理Ｓ４０６では、２以上の被写体を選択してもよい。また、被写体選択処理Ｓ４０６を行わずに、検出された全ての被写体Ｈ１〜Ｈ３をブラケット撮像処理Ｓ４０８による撮像対象にしてもよい。

その後、ＣＰＵ１１は、レリーズ指示（Ｓ４１０）を受けるまでの間、撮像装置１の各部を制御して、上記被写体Ｈの奥行き方向全体に渡って焦点を合わせるためのブラケット撮像処理を行う（Ｓ４０８）。このブラケット撮像処理では、ＣＰＵ１１は、変形ミラー装置２を制御して、例えば図２０に示したように、合焦点位置の範囲ｒ内で焦点位置をマクロ側及び無限遠側に交互に振りながら、位置Ｐ２、Ｐ３、Ｐ４に周期的に変更する。そして、ＣＰＵ１１は、撮像装置１の各部を制御して、当該変更位置Ｐ２、Ｐ３、Ｐ４のそれぞれにおいて被写体像を撮像して、複数枚の画像データＤ２、Ｄ３、Ｄ４を順次生成し、当該画像データＤ２、Ｄ３、Ｄ４をキャッシュメモリに一時的に保存する。そして、レリーズ指示（Ｓ４１０）に応じて、キャッシュメモリからレリーズ指示直前の１周期分Ｓの画像データＤ２、Ｄ３、Ｄ４を読み出し、ストレージ部１７に記録し、その他の画像データＤ２、Ｄ３、Ｄ４をキャッシュメモリから削除する。これにより、必要な画像データＤ２、Ｄ３、Ｄ４のみをストレージ部１７に格納できるので、保存する画像データ量を削減できる。

さらに、撮像装置１のＣＰＵ１１は、レリーズ指示の入力を検知すると（Ｓ４１０）、撮像装置１の各部を制御して、撮像素子４により被写体Ｈ１の合焦点位置の範囲ｒ１内の任意の焦点位置Ｐ４において被写体像を撮像して得た画像データを、ストレージ部１７に記録する（Ｓ４１２）。その直後に、ＣＰＵ１１は、撮像装置１の各部を制御して、被写体撮像処理を実行する（Ｓ４１４）。

詳細には、図２０のｔ７〜ｔ８で示したように、ＣＰＵ１１は、上記Ｓ４０４で検出された被写体Ｈ１、Ｈ２、Ｈ３の合焦点位置の範囲ｒ１、ｒ２、ｒ３内に含まれる位置Ｐ２〜Ｐ４、Ｐ６〜Ｐ８、Ｐ１０に焦点位置を段階的に変更しながら、当該変更された焦点位置にて被写体像を撮像して得た複数枚の画像データＤ２〜Ｄ４、Ｄ６〜Ｄ８、Ｄ１０を、ストレージ部１７に記録する。

［効果］
以上、第４の実施形態に係る撮像装置１とその撮像方法について説明した。第４の実施形態によれば、上記第３の実施形態に係る効果に加えて、次の効果がある。

本実施形態によれば、検出指示に応じて、合焦可能範囲全域をスキャンする被写体検出処理を行って、被写体Ｈ１〜Ｈ３がどの焦点位置にあるかを検出しておき、レリーズ指示に応じて、マルチフォーカス撮像として被写体撮像処理を行う。この被写体撮像処理では、被写体Ｈ１〜Ｈ３が存在する重要な部分（焦点位置Ｐ２〜Ｐ４、Ｐ６〜Ｐ８、Ｐ１０）のみを撮像し、被写体Ｈ１〜Ｈ３が存在しない不要な部分（焦点位置Ｐ１、Ｐ５、Ｐ９、Ｐ１１）を撮像しない。従って、被写体が存在する必要な部分や、ユーザ指定された重要な部分のみを撮像できるので、全域フォーカス撮像処理よりも高速に実行でき、処理効率を向上できるとともに、無駄な画像データが記録されることを防止できるため、メモリ資源を有効活用できる。

＜第５の実施形態＞
次に、本発明の第５の実施形態について説明する。第５の実施形態は、上述した第４の実施形態と比べて、被写体検出処理で検出した複数の被写体の中から被写体撮像する被写体を選択する点と、被写体撮像後に全域フォーカス撮像を行う点で相違し、その他の機能構成は第４の実施形態と略同一であるので、その詳細説明は省略する。

第５の実施形態に係る撮像装置１は、検出指示（例えば、レリーズボタンの半押し操作）に応じて、被写体検出処理を行う。これにより、撮像装置１は、撮像範囲内に存在する複数の被写体を検出するとともに、当該検出されたそれぞれの被写体に合焦する合焦点位置の範囲を検出する。次いで、撮像装置１は、ユーザ入力に基づいて、被写体検出処理で検出された複数の被写体の中から、１又は２以上の重要な被写体を選別する被写体選別処理を行う。そして、当該被写体検出処理が完了してからレリーズ指示までの間は、上記選別された１又は２以上の被写体の中から選択された１の被写体に合焦する合焦点位置の範囲内で、焦点位置を変更させながら、ブラケット撮像を行う。

その後、撮像装置１は、１回のレリーズ指示（例えば、レリーズボタンの全押し操作）に応じて、第４の実施形態と同様にして、合焦点位置の範囲内の任意の焦点位置で撮像して得た画像データをストレージ部１７に記録する。さらに、撮像装置１は、上記被写体選別処理で選別された１又は２以上の被写体に合焦する合焦点位置の範囲内のみをスキャンする被写体撮像処理を行う。その被写体撮像処理の完了後、撮像装置１は、第２の実施形態と同様にして全域フォーカス撮像処理を行う。

このように、第５の実施形態に係る撮像装置１は、被写体検出処理で撮像範囲内の被写体及びその合焦点位置の範囲を検出するためにフォーカスを制御し、また、ブラケット撮像、被写体撮像処理及び全域フォーカス撮像処理で焦点位置を変更するためにフォーカスを制御する。以下に、本実施形態に係るフォーカス制御の具体例について、図２２を参照して詳細に説明する。

図２２は、本実施形態に係る被写体検出処理、ブラケット撮像処理、被写体撮像処理及び全域フォーカス撮像処理におけるフォーカス制御の例を示す模式図である。なお、図２２において、縦軸（Ｚ軸）は焦点位置、横軸は時間を示す。

図２２に示すように、撮像装置１の撮像範囲内に５つの被写体Ｈ１、Ｈ２、Ｈ３、Ｈ４、Ｈ５が存在するときに、撮像装置１で被写体Ｈ１〜Ｈ５を検出して、このうちから重要な被写体Ｈ１〜Ｈ３を選択してマルチフォーカス撮像する場合を考える。なお、第５の実施形態では、第４の実施形態に係る重要な被写体Ｈ１〜Ｈ３（図２０参照）の他に、重要度の低い被写体Ｈ４、Ｈ５（例えば、人物以外のオブジェクトなど）が追加されている。

まず、撮像装置１のＣＰＵ１１は、検出指示（被写体検出開始指示）を受けると、被写体検出処理を行って、撮像範囲内に存在する被写体Ｈ１〜Ｈ５を検出するとともに、被写体Ｈ１、Ｈ２に合焦する合焦点位置の範囲ｒ１〜ｒ５を検出する（ｔ１〜ｔ６）。この被写体検出処理は、例えば、上述した山登りＡＦ法、位相差検出法、コントラスト検出法など、任意のＡＦ方式を利用して実現できるが、その詳細は第３の実施形態と略同一であるので詳細説明を省略する。

また、ＣＰＵ１１は、検出された５つの被写体Ｈ１〜Ｈ５を、重要な被写体Ｈ１〜Ｈ３と、重要度の低い被写体Ｈ４、Ｈ５とに選別し、重要な被写体Ｈ１〜Ｈ３を被写体撮像処理（ｔ７〜ｔ８）での撮像対象として選択する。この選択は、例えば、タッチパネル等に対するユーザ入力に基づいて手動で行ってもよいし、撮像により得た画像データを画像処理した結果（例えば顔認識等）に基づいて、ＣＰＵ１１が自動的に行ってもよい。例えば、顔認識がされた被写体は人物であり重要度が高いので、被写体撮像処理の撮像対象として選択する。

その後、撮像装置１は、上述した第４の実施形態と同様に、ブラケット撮像処理（ｔ６〜ｔ７）と、レリーズ操作に応じた被写体撮像処理（ｔ７〜ｔ８）を実行する。ただし、被写体撮像処理（ｔ７〜ｔ８）では、上記５つの被写体Ｈ１〜Ｈ５のうちから選択された重要な被写体Ｈ１〜Ｈ３のみを撮像する。

さらに、被写体撮像処理（ｔ７〜ｔ８）の完了後に、第２の実施形態と同様に、焦点位置を段階的に変更しながら合焦可能範囲全域にわたって全域フォーカス撮像を行う（ｔ８〜ｔ９）。この全域フォーカス撮像により、重要でないと選択した被写体Ｈ４，Ｈ５についても、念のため焦点を合わせた画像データを確保しておくことができる。

以上のように、本実施形態に係る撮像装置１は、検出した全ての被写体Ｈ１〜Ｈ５に対してではなく、重要な被写体Ｈ１〜Ｈ３のみを選択して、被写体撮像処理を行う。これにより、ユーザが所望しない被写体Ｈ４、Ｈ５に対する被写体撮像処理を省略できるので、処理速度及び効率が向上するとともに、画像データの保存データ量も低減できる。

［撮像装置の動作］
次に、図２３を参照して、本実施形態に係る撮像装置１による撮像動作について説明する。図２３は、本実施形態に係る撮像装置１による撮像動作を示すフローチャートである。

図２３に示すように、撮像装置１のＣＰＵ１１は、検出指示の入力を検知すると（Ｓ５０２）、撮像装置１の各部を制御して、合焦可能範囲内に存在する複数の被写体Ｈ１〜Ｈ５と、該被写体Ｈ１〜Ｈ３に合焦する合焦点位置の範囲ｒ１〜ｒ５を検出するための被写体検出処理を実行する（Ｓ５０４）。この被写体検出処理Ｓ５０４は、上述した図１９の被写体検出処理Ｓ３０４と略同一であるので、詳細説明は省略する。

次いで、Ｓ５０４での被写体検出処理により、上記被写体Ｈ１〜Ｈ５の検出が完了すると、ＣＰＵ１１は、例えば、ユーザ入力に基づいて、複数の被写体Ｈ１〜Ｈ５の中から、重要な被写体を選択する第１及び第２の選択処理を行う（Ｓ５０７）。

第１の選択処理では、第４の実施形態と同様に、次のブラケット撮像処理Ｓ５０８による撮像対象となる被写体Ｈ１が例えば１つ選択される。これによって、ブラケット撮像を行う被写体を重要な被写体Ｈ１に限定できるので、当該重要な被写体Ｈ１に正確に合焦した画像データを確実に取得できる。

第２の選択処理では、後の被写体撮像処理Ｓ５０８による撮像対象となる１又は２以上の被写体が選択される。これによって、被写体撮像を行う被写体を重要な被写体Ｈ１〜Ｆ３に限定できるので、当該重要な被写体Ｈ１〜Ｈ３に正確に合焦した画像データを、シャッターチャンスに近いタイミングで、取得できる。また、不要な被写体Ｈ４，Ｈ５の画像データを取得しないようにできる。

次いで、ＣＰＵ１１は、第４の実施形態と同様に、ブラケット撮像処理を行い（Ｓ５０８）、レリーズ指示（Ｓ５１０）に応じて、撮像装置１の各部を制御して、撮像素子４により被写体Ｈ１の合焦点位置の範囲ｒ１内の任意の焦点位置Ｐ４において被写体像を撮像して得た画像データを、ストレージ部１７に記録する（Ｓ５１２）。その直後に、ＣＰＵ１１は、撮像装置１の各部を制御して、第４の実施形態と同様に、被写体撮像処理を実行する（Ｓ５１４）。

その後、ＣＰＵ１１は、第２の実施形態と同様にして合焦可能範囲全域にわたって焦点位置を段階的に変更しながら全域フォーカス撮像を行う（Ｓ５１６）。

［効果］
以上、第５の実施形態に係る撮像装置１とその撮像方法について説明した。第５の実施形態によれば、上記第４の実施形態に係る効果に加えて、次の効果がある。

本実施形態によれば、撮像装置１の撮像範囲内に多数の被写体Ｈ１〜Ｈ５がある場合でも、その中から重要な被写体やユーザ所望の被写体などの優先度の高い被写体を選択して、当該選択した被写体についてのみ、被写体撮像処理を行う。これにより、被写体撮像処理の対象を重要な被写体Ｈ１〜Ｈ３に限定できるので、当該被写体Ｈ１〜Ｈ３に正確に合焦した画像データを、シャッターチャンスに近いタイミングで取得できる。また、全ての被写体Ｈ１〜Ｈ５を撮像するときと比べて、被写体撮像処理の処理負荷及び処理時間、データ保存量を低減できる。さらに、被写体撮像処理後に全域フォーカス撮像処理を行うことで、被写体撮像処理で撮像されなかった優先度の低い被写体Ｈ４，Ｈ５についても、念のため、合焦させた画像データを確保しておくことができる。

＜第６の実施形態＞
次に、本発明の第６の実施形態について説明する。第６の実施形態は、上述した第４の実施形態と比べて、撮像装置１の絞り３を制御して被写界深度を調整することで、被写体撮像処理において各被写体を１ステップで撮像できるようにする点で相違し、その他の機能構成は第４の実施形態と略同一であるので、その詳細説明は省略する。

第６の実施形態に係る撮像装置１のＣＰＵ１１は、被写体検出処理により検出された複数の被写体Ｈに合焦する合焦点位置ｒの範囲に応じて、撮像光学系の絞り３を制御することで、各焦点位置における被写界深度を調整する。被写界深度を調整することで、図１０に示したように段階的に変更する焦点位置Ｐの粗密を調整できる。

例えば、奥行き方向に厚さのある被写体Ｈを撮像する場合、その被写体Ｈの奥行き方向全体を撮像するためには、焦点位置を段階的に変更して複数ステップで撮像しなければならないときがある。しかし、かかる場合であっても、絞り３の開度（例えばＦ値）を調整すれば、同一の焦点距離であっても、その焦点位置での被写界深度を深くすることができ、これにより、１ステップで当該被写体Ｈを撮像できるようになる。

そこで、本実施形態では、被写体撮像処理において、被写体Ｈに合焦する合焦点位置の範囲ｒが広いため、焦点位置を変更して複数ステップで撮像しなければ、その被写体Ｈの奥行き方向全体の合焦画像を得ることができない場合に、絞り３を調整して被写界深度を深くする。これにより、被写体に対応する焦点位置における被写界深度が、当該被写体に合焦する合焦点位置の範囲ｒ以上となるので、当該被写体Ｈを１ステップで撮像できるようになる。

ここで、絞り３の開度（Ｆ値）と被写界深度との関係について説明する。上述したように、被写界深度は、前方被写界深度と後方被写界深度との和である。前方被写界深度Ｌｆと後方被写界深度Ｌｒはそれぞれ以下の式１、式２で表される。

ここで、δは許容錯乱円の直径、ＦはレンズのＦ値、Ｌは被写体までの距離、ｆはレンズの焦点距離である。Ｌは、変形ミラー装置２の変位量から算出できる。

撮像装置１のＣＰＵ１１は、上記式１、式２から求めた被写界深度が、被写体の奥行き方向（Ｚ方向）の厚さになるように、レンズのＦ値（絞り）を調整する。これにより、１ステップで被写体の奥行き方向全体に合焦させた状態で撮像できる。

次に、本実施形態に係るフォーカス制御について説明する。第６の実施形態に係る撮像装置１は、被写体検出処理で撮像範囲内の被写体Ｈ及びその合焦点位置の範囲ｒを検出するためにフォーカスを制御し、また、ブラケット撮像及び被写体撮像処理で焦点位置を変更するためにフォーカスを制御する。以下に、本実施形態に係るフォーカス制御の具体例について、図２４を参照して詳細に説明する。

図２４は、本実施形態に係る被写体検出処理、ブラケット撮像処理及び被写体撮像処理におけるフォーカス制御の例を示す模式図である。なお、図２２において、縦軸（Ｚ軸）は焦点位置、横軸は時間を示す。

図２４に示すように、第６の実施形態に係る被写体検出処理（ｔ１〜ｔ６）、ブラケット撮像処理（ｔ７〜ｔ８）は、上述した第４の実施形態（図２０参照。）と略同一である。ところが、図２０に示したように、第４の実施形態にかかる被写体撮像処理（ｔ７〜ｔ８）では、それぞれの被写体Ｈ１、Ｈ２を３ステップ（Ｐ２→Ｐ３→Ｐ４、Ｐ６→Ｐ７→Ｐ８）で撮像している。

これに対し、図２４に示すように、第６の実施形態にかかる被写体撮像処理（ｔ７〜ｔ８）では、それぞれの被写体Ｈ１、Ｈ２を１ステップ（Ｐ３、Ｐ７）のみで撮像している。これは、被写体検出処理（ｔ１〜ｔ６）で検出した被写体Ｈ１、Ｈ２を、被写体撮像処理（ｔ７〜ｔ８）にて１ステップで撮像できるように、被写体Ｈ１、Ｈ２の合焦点位置の範囲ｒ１、ｒ２に応じて、絞り３のＦ値を調整し、焦点位置Ｐ３、Ｐ７での被写界深度を深くしたからである。このとき、焦点位置Ｐ３、Ｐ７での被写界深度が、合焦点位置の範囲ｒ１、ｒ２以上となっている。

絞り３を調整するタイミングは、被写体検出処理（ｔ１〜ｔ６）の後であれば、レリーズ指示（〜ｔ７）前、又は、レリーズ指示直後の被写体撮像処理開始前（ｔ７）などであってよい。また、撮像装置１は、絞り３のＦ値と焦点位置との関係を表すテーブルをメモリ部１２内に保持し、ＣＰＵ１１は、このテーブルに基づいて、被写体検出処理の検出結果に応じて適切な絞り３の値に調整するようにしてもよい。

［効果］
以上、第６の実施形態に係る撮像装置１とその撮像方法について説明した。第６の実施形態によれば、上記第４の実施形態に係る効果に加えて、次の効果がある。

本実施形態によれば、被写体検出処理での検出結果に応じて、撮像装置１の絞り３を調整することによって、それぞれの焦点位置Ｐでの被写界深度を深くすることができる。従って、被写体撮像処理では、被写体Ｈ１〜Ｈ３が存在する重要な部分を１ステップ（焦点位置Ｐ３、Ｐ７、Ｐ１０）で撮像できるので、被写体撮像処理を更に高速に実行でき、処理効率を向上できるとともに、無駄な画像データが記録されることを更に防止できるため、メモリ資源を有効活用できる。

以上、本発明の第１〜第６の実施形態にかかる撮像装置１とこれを用いた撮像方法について説明した。本実施形態によれば、予めレリーズ指示前にＡＦ処理や被写体検出処理等によって、所定の被写体に焦点が合った合焦点位置を検出しておき、レリーズ指示に応じて、当該合焦点位置を基準として焦点位置を変更して、マルチフォーカス撮像する。これにより、レリーズ指示があったらすぐに、シャッターチャンスに近いときに、合焦点位置とその近傍の被写体を撮像できる。従って、シャッターチャンスを逃さずに、ユーザ所望の焦点位置に合焦した画像を得ることができる。

また、本実施形態では、マルチフォーカス撮影時に、１回のレリーズ操作に応じて、相異なる焦点位置に合焦した複数枚の画像を取得する。このため、通常の撮像装置と比較して多くの画像データを持つため、撮影後に取り込んだ画像データを信号処理や合成処理して新たな画像を得る際にも、従来の撮像装置と比べて非常に有利となる。このため、通常の撮像装置で得られる画像を合成したものよりも、自然で高品位な画像を得ることができる。

また、撮像装置で所望の被写体に焦点を合わせた画像を得ることは、時には非常に難しいが、本実施形態によれば、より正確かつ容易に当該画像を得ることができる。

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

本発明の第１の実施形態に係る撮像装置の構成を示すブロック図である。 同実施形態に係る信号処理部の内部構成例を示すブロック図である。 同実施形態に係る変形ミラー装置の構成を示す断面図である 同実施形態に係る撮像装置による撮像処理を概略的に示す模式図である。 同実施形態に係る変形ミラー装置を用いた焦点位置の変更を示す模式図である。 同実施形態に係る焦点位置の変更を示す説明図である。 図６の下図の部分拡大図である。 同実施形態に係る撮像装置における焦点位置の変更位置の設定を説明するための模式図である。 同実施形態に係る焦点位置ごとの被写界深度を説明するための模式図である。 同実施形態に係る被写界深度に応じた焦点位置の変更位置を説明するための模式図である。 同実施形態に係る焦点位置の変更位置Ｐを設定する基点を説明するための模式図である。 同実施形態に係るフォーカス制御の一例を示す模式図である。 同実施形態に係るフォーカス制御の別の例を示す模式図である。 同実施形態に係る撮像装置による撮像動作を示すフローチャートである。 本発明の第２の実施形態に係るフォーカス制御の例を示す模式図である。 同実施形態に係る撮像装置による撮像動作を示すフローチャートである。 本発明の第３の実施形態に係るフォーカス制御の例を示す模式図である。 同実施形態に係るコントラスト検出法により被写体を検出する例を示す模式図である。 同実施形態に係る撮像装置による撮像動作を示すフローチャートである。 本発明の第４の実施形態に係るフォーカス制御の例を示す模式図である。 同実施形態に係る撮像装置による撮像動作を示すフローチャートである。 本発明の第５の実施形態に係るフォーカス制御の例を示す模式図である。 同実施形態に係る撮像装置による撮像動作を示すフローチャートである。 本発明の第６の実施形態に係るフォーカス制御の例を示す模式図である。

符号の説明

１ 撮像装置
２ 変形ミラー装置
２ａ ミラー面
３ 絞り
４ 撮像素子
５ 前処理部
６ 信号処理部
７ ＡＦ素子
８ ミラー駆動回路
９ 絞り制御部
１０ 撮像制御部
１１ ＣＰＵ
１２ メモリ部
１３ 操作入力部
１４ バス
１５ 表示部
１６ 圧縮／伸張処理部
１７ ストレージ部

Claims (16)

1. 受光した被写体像を撮像して画像信号を出力する撮像素子と、前記撮像素子に前記被写体像を結像させるための撮像光学系とを有する撮像部と、
   焦点位置を変更するために前記撮像光学系又は前記撮像素子の少なくとも一方を駆動させる駆動部と、
   前記撮像素子から出力された前記画像信号を処理することにより前記被写体像の画像データを生成する画像データ生成部と、
   前記撮像部、前記駆動部及び前記画像データ生成部を制御する制御部と、
   を備え、
   前記制御部は、
   検出指示に応じて、撮像範囲内の所定の被写体に焦点を合わせるためのオートフォーカス処理を行うことで、前記撮像範囲内の所定の被写体に合焦する合焦点位置を検出し、
   前記検出指示からレリーズ指示までの間に、前記オートフォーカス処理により検出された前記合焦点位置を中心とする所定の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行い、
   前記レリーズ指示に応じて、前記合焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するとともに、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲内で、前記合焦点位置を基準として焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行い、
   前記全域フォーカス撮像処理では、前記制御部は、前記レリーズ指示に応じて、前記合焦可能範囲内で焦点位置が前記合焦点位置から近距離側又は遠距離側に徐々に離れていくように焦点位置を変更する、撮像装置。
2. 前記制御部は、前記ブラケット撮像処理により取得された前記保存用画像データのうち、前記レリーズ指示の直前の少なくとも１周期分の保存用画像データをストレージ部に保存する、請求項１に記載の撮像装置。
3. 前記制御部は、前記撮像光学系の被写界深度に応じて、焦点位置の変更位置を前記合焦可能範囲内に段階的に複数設定し、
   前記全域フォーカス撮像処理では、前記制御部は、前記レリーズ指示に応じて、前記複数の変更位置のうち前記合焦点位置に近い変更位置から順に焦点位置を段階的に変更する、請求項１に記載の撮像装置。
4. 前記制御部は、前記レリーズ指示に応じて、前記合焦点位置を基点として前記複数の変更位置を設定し、当該設定した複数の変更位置に焦点位置を段階的に変更する、請求項３に記載の撮像装置。
5. 前記制御部は、前記検出指示に応じて、焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを解析することにより、前記撮像範囲内に存在する１又は２以上の被写体と、当該被写体に合焦する前記合焦点位置の範囲を検出する被写体検出処理を行う、請求項１に記載の撮像装置。
6. 前記制御部は、前記検出指示に応じて前記被写体検出処理を実行してから前記レリーズ指示までの間に、前記被写体検出処理により検出された前記合焦点位置の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行う、請求項５に記載の撮像装置。
7. 前記制御部は、前記ブラケット撮像処理により取得された前記保存用画像データのうち、前記レリーズ指示の直前の少なくとも１周期分の保存用画像データをストレージ部に保存する、請求項６に記載の撮像装置。
8. 前記ブラケット撮像処理では、前記制御部は、前記被写体検出処理により検出された複数の被写体の中から選択された１の被写体に合焦する前記合焦点位置の範囲内で、焦点位置を変更する、請求項６に記載の撮像装置。
9. 前記制御部は、前記レリーズ指示に応じて、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲のうち、前記被写体検出処理により検出された前記合焦点位置の範囲内で、焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する被写体撮像処理を行う、請求項５に記載の撮像装置。
10. 前記制御部は、前記レリーズ指示に応じて、前記被写体撮像処理を行った後に、前記合焦可能範囲内で焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行う、請求項９に記載の撮像装置。
11. 前記被写体撮像処理では、前記制御部は、前記被写体検出処理により検出された前記被写体の中から選択された１又は２以上の被写体に合焦する前記合焦点位置の範囲内で、焦点位置を変更する、請求項９に記載の撮像装置。
12. 前記被写体撮像処理では、前記制御部は、前記被写体検出処理により検出された前記合焦点位置の範囲に応じて、前記撮像光学系の絞りを制御する、請求項９に記載の撮像装置。
13. 前記制御部は、前記被写体検出処理により検出された前記被写体に対応する焦点位置における被写界深度が、当該被写体に合焦する前記合焦点位置の範囲以上となるように、前記撮像光学系の絞りを制御する、請求項１２に記載の撮像装置。
14. 前記撮像光学系は、断面形状を凸状又は凹状に変形可能に構成された変形ミラーを備え、
    前記駆動部は、前記制御部の指示に基づいて前記変形ミラーを変形駆動させることにより、前記焦点位置を変更する、請求項１に記載の撮像装置。
15. 受光した被写体像を撮像して画像信号を出力する撮像素子と、前記撮像素子に前記被写体像を結像させるための撮像光学系とを有する撮像部と、焦点位置を変更するために前記撮像光学系又は前記撮像素子の少なくとも一方を駆動させる駆動部と、前記撮像素子から出力された前記画像信号を処理することにより前記被写体像の画像データを生成する画像データ生成部と、前記撮像部、前記駆動部及び前記画像データ生成部を制御する制御部と、を備えた撮像装置における撮像方法であって、
    検出指示に応じて、撮像範囲内の所定の被写体に焦点を合わせるためのオートフォーカス処理を行うことで、前記撮像範囲内の所定の被写体に合焦する合焦点位置を検出するステップと、
    前記検出指示からレリーズ指示までの間に、前記オートフォーカス処理により検出された前記合焦点位置を中心とする所定の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行うステップと、
    前記レリーズ指示に応じて、前記合焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するとともに、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲内で、前記合焦点位置を基準として焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行うステップと、
    を含み、
    前記全域フォーカス撮像処理では、前記レリーズ指示に応じて、前記合焦可能範囲内で焦点位置が前記合焦点位置から近距離側又は遠距離側に徐々に離れていくように焦点位置を変更する、撮像方法。
16. 受光した被写体像を撮像して画像信号を出力する撮像素子と、前記撮像素子に前記被写体像を結像させるための撮像光学系とを有する撮像部と、焦点位置を変更するために前記撮像光学系又は前記撮像素子の少なくとも一方を駆動させる駆動部と、前記撮像素子から出力された前記画像信号を処理することにより前記被写体像の画像データを生成する画像データ生成部と、前記撮像部、前記駆動部及び前記画像データ生成部を制御する制御部と、を備えた撮像装置のコンピュータに、
    検出指示に応じて、撮像範囲内の所定の被写体に焦点を合わせるためのオートフォーカス処理を行うことで、前記撮像範囲内の所定の被写体に合焦する合焦点位置を検出するステップと、
    前記検出指示からレリーズ指示までの間に、前記オートフォーカス処理により検出された前記合焦点位置を中心とする所定の範囲内で、焦点位置を変更しながら、当該変更された複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するブラケット撮像処理を行うステップと、
    前記レリーズ指示に応じて、前記合焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得するとともに、前記撮像光学系における最短距離側の焦点位置から無限遠側の焦点位置までの合焦可能範囲内で、前記合焦点位置を基準として焦点位置を変更しながら、当該変更された相異なる複数の焦点位置において前記被写体像を撮像して得た前記画像データを保存用画像データとして取得する全域フォーカス撮像処理を行うステップと、
    を実行させるためのプログラムであって、
    前記全域フォーカス撮像処理では、前記レリーズ指示に応じて、前記合焦可能範囲内で焦点位置が前記合焦点位置から近距離側又は遠距離側に徐々に離れていくように焦点位置を変更する、プログラム。