JP6598028B2 - 撮像装置 - Google Patents

Description

本開示は、合焦距離を変化させながら複数の画像を連続して撮影し、撮影された複数の画像から一の静止画を生成する撮像装置に関する。

デジタルカメラの機能において、焦点位置（フォーカス距離）を移動させながら連続撮影を行うフォーカスブラケット機能がある。この機能によれば、ユーザは画像撮影後に所望の合焦状態（フォーカス距離）の画像を選択することができる。

特許文献１は、フォーカスブラケット機能を有するデジタルカメラを開示する。このデジタルカメラは、フォーカスブラケット撮影機能による撮影で連続撮影された複数の画像各々の合焦状態を表す合焦評価値を算出する算出手段と、算出手段により算出された複数の画像各々の合焦評価値に基づいて、合焦状態が良好な画像を選択し、当該選択した画像を表す画像データを記録媒体に記録するように記録手段の動作を制御する制御手段と、を有する。これにより、撮影された複数の画像から合焦状態が良好な画像を選択して記録することを可能にしている。

特開２００４−１３５０２９号公報

本開示は、合焦距離を変化させながら複数の画像を連続して撮影し、撮影された複数の画像から一の静止画を生成する機能を有する撮像装置を提供する。

本開示の一態様において、合焦距離を変化させながら複数の画像を連続して撮影し、撮影された複数の画像から一の静止画を生成する機能を備えた撮像装置が提供される。

撮像装置は、フォーカスレンズを含む光学系と、ユーザ操作を受け付ける操作部と、光学系を介して入力した光学情報から画像信号を生成する撮像部と、撮像部により生成された画像信号に所定の処理を行い、画像データを生成する画像処理部と、所定の情報を表示する表示部と、撮像部及び／または画像処理部を制御する制御部と、を備える。

画像データが示す画像の領域に対して複数のＡＦ領域が設定される。制御部は、フォーカスレンズを移動させながらフレーム画像を撮影し、ＡＦ領域毎に、そのＡＦ領域に合焦したフレーム画像を求めるサーチ処理を実行する。サーチ処理の終了後、制御部は、フォーカスレンズを移動させながら動画を記録する動画撮影処理を実行する。動画撮影処理の後、制御部は、サーチ処理の結果を参照して、記録した動画データを構成する複数のフレーム画像から、静止画を生成する静止画生成処理を実行する。制御部は、サーチ処理が終了してから動画撮影処理が終了するまでの間に、ユーザにより被写体に対する合焦位置が変更される操作がなされた場合、ユーザの注意を喚起するメッセージを表示部に表示する。

本開示における撮像装置は、サーチ処理後にユーザにより画角等が変更された場合に、ユーザに対して、注意を喚起するメッセージを表示する。これにより、ユーザは所望の機能が実現されないことを認識することができ、所望の機能を実現するための対応をとることができる。

本開示に係るデジタルカメラの構成を示す図 デジタルカメラの背面図 （Ａ）フォーカスセレクト機能におけるフォーカスレンズの移動を説明した図、（Ｂ）画像においてユーザによる合焦領域の指定を説明した図 動画データからの静止画の切り出しを説明した図 （Ａ）画像領域に設定されたＡＦ領域を説明した図、（Ｂ）一つのＡＦ領域におけるコントラスト値の変化を説明した図 合焦情報テーブルの例を示した図 フォーカスサーチ時のフォーカスレンズの移動範囲を説明した図 動画記録時のフォーカスレンズの移動範囲を説明した図 フォーカスセレクト動作を示すフローチャート フォーカスセレクトによる画像撮影中に表示されるアイコン等を示した図 動画データ記録の終了直後に表示される画面（合焦領域指定画面）の例を示す図 ユーザによる所望の合焦領域を指定する操作を説明するための図 （Ａ）合焦位置変更禁止期間を説明した図、（Ｂ）及び（Ｃ）メッセージの表示例を示す図 メッセージ表示動作を示すフローチャート

以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、発明者（ら）は、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって特許請求の範囲に記載の主題を限定することを意図するものではない。

以下、図面を用いて本開示に係る撮像装置の実施の形態を説明する。

（実施の形態１）
［１．デジタルカメラの構成］
実施の形態１に係るデジタルカメラの電気的構成について図１を用いて説明する。図１は、デジタルカメラ１００の構成を示すブロック図である。デジタルカメラ１００は、１又は複数のレンズからなる光学系１１０により形成された被写体像をＣＣＤ１４０で撮像する撮像装置である。ＣＣＤ１４０で生成された画像データは、画像処理部１６０で各種処理が施され、メモリカード２００に格納される。以下、デジタルカメラ１００の構成を詳細に説明する。

光学系１１０は、フォーカスレンズ１１１及びズームレンズ１１２を含む。ズームレンズ１１２を光軸に沿って移動させることにより、被写体像の拡大又は縮小をすることができる。また、フォーカスレンズ１１１を光軸に沿って移動させることにより、被写体像のピント（合焦状態）を調整することができる。また、光学系１１０は、デジタルカメラ１００のブレによる画像のブレを補正する手振れ補正レンズ１１３を含む。

レンズ駆動部１２０は、光学系１１０に含まれる各種レンズを駆動させる。レンズ駆動部１２０は、例えばズームレンズ１１２を駆動するズームモータや、フォーカスレンズ１１１を駆動するフォーカスモータを含む。

絞り部３００は、ユーザの設定に応じて又は自動で開口部の大きさを調整し、開口部を透過する光の量を調整する。

シャッタ部１３０は、ＣＣＤ１４０に透過させる光を遮光するための手段である。シャッタ部１３０は、光学系１１０及び絞り部３００とともに、被写体像を示す光学情報を制御する。また、光学系１１０及び絞り部３００はレンズ鏡筒（図示せず）内に収納される。

ＣＣＤ１４０は、光学系１１０で形成された被写体像を撮像して、画像データを生成する。ＣＣＤ１４０は、カラーフィルタと、受光素子と、ＡＧＣ（Ａｕｔｏ Ｇａｉｎ Ｃｏｎｔｒｏｌｌｅｒ）とを含む。受光素子は、光学系１１０によって集光された光学的信号を電気信号に変換し、画像情報を生成する。ＡＧＣは、受光素子から出力された電気信号を増幅する。ＣＣＤ１４０はさらに、露光、転送、電子シャッタなどの各種動作を行うための駆動回路等を含む。

ＡＤＣ（Ａ／Ｄコンバータ：アナログ−デジタル変換器）１５０は、ＣＣＤ１４０で生成されたアナログ画像データをデジタル画像データに変換する。

画像処理部１６０は、ＣＣＤ１４０で生成され、ＡＤＣ１５０で変換されたデジタル画像データに対して、コントローラ１８０の制御を受け、各種処理を施す。画像処理部１６０は、表示モニタ２２０に表示するための画像データを生成したり、メモリカード２００に格納するための画像データを生成したりする。例えば、画像処理部１６０は、ＣＣＤ１４０で生成された画像データに対して、ガンマ補正、ホワイトバランス補正、傷補正などの各種処理を行う。また、画像処理部１６０は、ＣＣＤ１４０で生成された画像データを、Ｈ．２６４規格やＭＰＥＧ２規格に準拠した圧縮形式等により圧縮する。画像処理部１６０は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）やマイコンなどで実現可能である。また、画像処理部１６０は、ＣＣＤ１４０で生成された画像データに基づいて、画素数４０００×２０００前後の動画の画像データ（４Ｋ動画データ）を生成することができる。画像処理部１６０は、生成した４Ｋ動画データに対して後述する種々の処理を行うことができる。

コントローラ１８０は、デジタルカメラ１００の全体を制御する制御手段である。コントローラ１８０は、半導体素子などで実現可能である。コントローラ１８０は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。コントローラ１８０は、マイコン、ＣＰＵ、ＭＰＵ、ＤＳＰ、ＡＳＩＣ、ＦＰＧＡなどで実現できる。

バッファ１７０は、画像処理部１６０及びコントローラ１８０のワークメモリとして機能する。バッファ１７０は、例えば、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、強誘電体メモリなどで実現できる。

カードスロット１９０は、メモリカード２００をデジタルカメラ１００に装着するための手段である。カードスロット１９０は、機械的及び電気的にメモリカード２００とデジタルカメラ１００を接続可能である。

メモリカード２００は、フラッシュメモリや強誘電体メモリなどを内部に含み、画像処理部１６０で生成された画像ファイル等のデータを格納可能である。

内蔵メモリ２４０は、フラッシュメモリや強誘電体メモリなどで構成される。内蔵メモリ２４０は、デジタルカメラ１００全体を制御するための制御プログラムやデータ等を記憶している。

操作部材２１０は、ユーザからの操作を受け付けるユーザーインターフェースの総称である。操作部材２１０は、ユーザからの操作を受け付けるボタン、レバー、ダイヤル、タッチパネル、スイッチ等を含む。また、操作部材２１０は、レンズ鏡筒の外周に設けられたフォーカスリングを含む。フォーカスリングは、フォーカスレンズ１１１を移動させるためにユーザにより回転操作される部材である。

表示モニタ２２０は、ＣＣＤ１４０で生成した画像データが示す画像（スルー画像）や、メモリカード２００から読み出した画像データが示す画像を表示可能である。また、表示モニタ２２０は、デジタルカメラ１００の各種設定を行うための各種メニュー画面等も表示可能である。表示モニタ２２０は、液晶表示デバイスや有機ＥＬ表示デバイスで構成される。

ジャイロセンサ２５０は、デジタルカメラ１００のブレ（動き）を検出するセンサである。

図２は、デジタルカメラ１００の背面を示した図である。図２では、操作部材２１０の例として、レリーズボタン２１１、選択ボタン２１３、決定ボタン２１４、タッチパネル２２２が示されている。操作部材２１０は、ユーザによる操作を受け付けると、コントローラ１８０に種々の指示信号を送信する。

レリーズボタン２１１は、二段押下式の押下式ボタンである。レリーズボタン２１１がユーザにより半押し操作されると、コントローラ１８０はオートフォーカス制御（ＡＦ制御）やオート露出制御（ＡＥ制御）などを実行する。また、レリーズボタン２１１がユーザにより全押し操作されると、コントローラ１８０は、押下操作のタイミングに撮像された画像データを記録画像としてメモリカード２００等に記録する。

選択ボタン２１３は、上下左右方向に設けられた押下式ボタンである。ユーザは、上下左右方向のいずれかの選択ボタン２１３を押下することにより、カーソルを移動したり、表示モニタ２２０に表示される各種条件項目を選択したりすることができる。

決定ボタン２１４は、押下式ボタンである。デジタルカメラ１００が撮影モードあるいは再生モードにあるときに、決定ボタン２１４がユーザにより押下されると、コントローラ１８０は表示モニタ２２０にメニュー画面を表示する。メニュー画面は、撮影/再生のための各種条件を設定するための画面である。決定ボタン２１４が各種条件の設定項目が選択されているときに押下されると、コントローラ１８０は、選択された項目の設定を確定する。

タッチパネル２２２は、表示モニタ２２０の表示画面と重畳して配置され、ユーザの指による表示画面上へのタッチ操作を検出する。これにより、ユーザは、表示モニタ２２０に表示された画像に対する領域の指定等の操作を行える。

［２．動作］
［２．１ フォーカスセレクト機能］
本実施形態のデジタルカメラ１００は、それぞれ異なる合焦位置で同時に撮影された複数フレームの画像の中からユーザが選択した１つのフレームの画像を記録するフォーカスセレクト機能を有する。この機能により、ユーザが撮影後に合焦位置を選択することができる。フォーカスセレクト機能のＯＮ（有効）／ＯＦＦ（無効）はユーザ操作によりメニュー上で設定できるようになっている。

フォーカスセレクト機能では、合焦位置を変化させながら動画を撮影し、撮影した動画を構成する複数フレームの画像の中から、ユーザが選択した１つのフレームの画像を記録する。フォーカスセレクト機能では、画素数４０００×２０００前後の高解像度の４Ｋ動画が記録され、この４Ｋ動画から、ユーザの指定に基づき選択された１つのフレーム画像が切り出されて静止画が得られる。このようにして得られた静止画は４Ｋ動画から切り出されるため、高い画質を有している。

具体的には、フォーカスセレクト機能では、図３（Ａ）に示すように至近端側から無限端側（またはその逆）に向かってフォーカスレンズ１１１を移動させながら、すなわち、合焦位置を変化させながら動画撮影を行う。その後、図３（Ｂ）に示すように、ユーザ５０は、撮影された画像においてピントを合わせたい被写体５２（すなわち領域）を指定する。デジタルカメラ１００は、図４に示すように、動画を構成する複数フレーム画像の中から、ユーザの指定に基づき１つのフレーム画像を選択して、静止画として切り出して記録する。これにより、ユーザが指定した被写体（領域）に合焦した高画質の静止画を得ることができる。

本実施形態のデジタルカメラ１００においては、オートフォーカス動作に関して、画像領域４００において図５（Ａ）に示すような複数（７行×７列＝４９個）のＡＦ領域が設定される。そして、ＡＦ領域毎に、動画を構成する複数フレームの中から、その領域にピントが合っているフレーム（以下「合焦フレーム」という）を求め、求めた合焦フレームに関する情報を合焦情報テーブルに記録する。なお、デジタルカメラ１００は、フォーカスセレクト動作において動画を記録（撮影）する前にフォーカスサーチ動作を行い、各ＡＦ領域の合焦フレームを検出して合焦情報テーブルを生成する。

図６Ａは、合焦情報テーブルのデータ構造を示した図である。合焦情報テーブル６０は、動画記録動作におけるフォーカスレンズ１１１の駆動範囲を示す情報を含む。具体的には、合焦情報テーブル６０は、フォーカスレンズ１１１の駆動範囲を示す情報として、最も至近端側のフォーカスレンズ位置（Pnear）を示す情報（最近合焦レンズ位置）と、最も無限端側のフォーカスレンズ位置（Pfar）を示す情報（最遠合焦レンズ位置）（図６Ｂ参照）とを格納する。さらに、合焦情報テーブル６０は、各ＡＦ領域に対して、各ＡＦ領域に対するフォーカス位置（各ＡＦ領域にて合焦するときのフォーカスレンズ１１１の位置）と、各ＡＦ領域において合焦状態を有するフレームのフレーム番号とを対応づけて管理する。

例えば、フォーカスレンズ１１１を移動させながらＡＦ領域毎にコントラスト値を求める。このとき、図５（Ａ）に示す第１９ＡＦ領域４１について、図５（Ｂ）に示すように、フォーカスレンズ位置Ｐにおいてコントラスト値のピークが検出された場合、そのフォーカスレンズ位置Ｐのときに撮影されたフレーム（この例では、第５０フレーム）を、第１９ＡＦ領域４１に対する合焦フレームとする。そして、合焦情報テーブル６０において、第１９ＡＦ領域に対して、合焦フレームのフレーム番号として「５０」が、フォーカスレンズ１１１の位置として「Ｐ」が記録される。合焦情報テーブル６０は、例えば動画撮影により得られた動画データのヘッダ部に格納される。

図７のフローチャートを参照し、デジタルカメラ１００のフォーカスセレクト動作を説明する。

デジタルカメラ１００において予めフォーカスセレクト機能が有効に設定された状態で、ユーザによりレリーズボタン２１１が半押しされると（Ｓ１１でＹＥＳ）、コントローラ１８０は、画像のＡＦ領域のそれぞれについて合焦位置を検出して合焦情報テーブル６０を作成するためのフォーカスサーチを行う（Ｓ１２）。

フォーカスサーチでは、コントローラ１８０は、フォーカスレンズ１１１を至近端から無限端に（またはその逆に）移動させながら、ＡＦ領域毎にコントラスト値を検出する（図５（Ａ）（Ｂ）参照）。

そして、コントローラ１８０は、検出したコントラスト値に基づき合焦情報テーブル６０を作成する。具体的には、コントローラ１８０は、フォーカスレンズ１１１を至近端から無限端に移動させたときに、ＡＦ領域毎に、複数の画像の中でコントラスト値が最大となるときのフォーカスレンズ１１１の位置を求め（図５（Ｂ）参照）、そのフォーカスレンズ１１１の位置を合焦情報テーブル６０に記録する（図６Ａのｃ参照）。一の領域について、いずれの画像のコントラスト値も所定の閾値よりも低い場合、当該ＡＦ領域については、合焦位置が定まらないとし、合焦情報テーブル６０には合焦位置が不明であることを示す所定の値が記録される。

コントローラ１８０はさらに、フォーカスレンズ１１１を至近端から望遠端に移動させたときに求まった合焦位置において、最も至近端に近い合焦位置（Pnear）と、最も望遠端に近い合焦位置（Pfar）とを合焦情報テーブル６０に記録する（図６Ａのａ参照）。以上によりフォーカスサーチは終了する。なお、この状態では、合焦情報テーブル６０において未だフレーム番号の情報は含まれていない。

その後、ユーザによりレリーズボタン２１１が全押しされると（Ｓ１３でＹＥＳ）、動画を記録する画像撮影動作が開始される。

すなわち、コントローラ１８０は、フォーカスレンズ１１１を至近端側に戻し、フォーカスレンズ１１１を所定の範囲内を移動させながら動画記録を行う（Ｓ１４）。ここで、所定の範囲とは、図６Ｃに示すように、最も至近端に近いフォーカスレンズ１１１の合焦位置（Pnear）から、最も無限端に近いフォーカスレンズ１１１の合焦位置（Pfar）までの範囲である。コントローラ１８０は合焦情報テーブル６０を参照してこの所定の範囲を決定する。フォーカスレンズ１１１の移動範囲をこのような所定の範囲に制限することにより、フォーカスレンズ１１１をその可動範囲の全範囲を移動させる場合と比較して動画記録にかかる時間を短縮できる。なお、動画記録は、動画データ用の所定のフォーマットに従い動画が記録される。例えば、ＭＰ４規格（H.264/MPEG-4 AVC方式）に従い動画が記録される。動画記録実行中、表示モニタ２２０には、例えば、動画記録中であることを示すアイコンやメッセージ等を表示してもよい。

また、コントローラ１８０は、動画記録中、フォーカスレンズ１１１の位置と、動画を構成する各フレームのフレーム番号との対応づけを行う。これにより、合焦情報テーブル６０において各ＡＦ領域に対してフレーム番号の対応づけがなされる（図６Ａのｂ参照）。

動画記録実行中、表示モニタ２２０には、記録中の画像に重畳して、図８に示すような種々のアイコン等が表示される。例えば、表示モニタ２２０には、動画記録中であることを示すアイコン７１、フォーカスセレクト機能による画像撮影中であることを示すメッセージ７２、動画記録の残り時間を示す情報７３、動画記録の進捗状況を示すプログレスバー７５が表示される。さらに、表示モニタ２２０には、合焦しているＡＦ領域を示す枠７４、及び動画をメモリカード２００に記録中であることを示すアイコン７６が表示される。これらの情報を参照することで、ユーザは現在フォーカスセレクトによる撮影動作が実行中であること、及び、その進捗状況等を把握することができる。

図７に戻り、動画記録が終了すると、ヘッダ部に合焦情報テーブル６０が記録された動画データをメモリカード２００に記録する（Ｓ１５）。これにより画像撮影動作が終了する。

画像撮影動作の終了後、ユーザの指示にしたがい静止画を生成する処理が実行される（Ｓ１６）。具体的には、画像撮影動作において記録された動画から、ユーザが指定する被写体または画像の領域に合焦された静止画が生成される（切り出される）。以下、この静止画生成動作を詳細に説明する。

画像撮影動作の終了後、コントローラ１８０は、直前に記録した動画におけるフレーム画像を表示モニタ２２０に表示する。例えば、図９に示すように、直前に記録した動画の１つのフレーム画像が表示モニタ２２０に表示される。このとき、例えば、記録した動画を構成する複数のフレーム画像において、最初または最後に記録されたフレーム画像（静止画）を表示してもよい。

ユーザは、カメラ背面に設けられたタッチパネル２２２を操作して、表示されている画像上で、ピントを合わせたい被写体（すなわち領域）を指定する。例えば、図１０（Ａ）に示すように、ユーザ５０は、被写体５２（すなわち、被写体５２の領域）をタッチすることで、合焦させたい対象（領域）として被写体５２を指定する。

ユーザにより被写体（すなわち領域）が指定されると、コントローラ１８０は、合焦情報テーブル６０を参照して、ユーザにより指定された被写体の領域に対応するＡＦ領域に関する合焦フレームを特定する。例えば、図１０（Ａ）に示すように、被写体５２がユーザにより指定された場合、図１０（Ｂ）に示すように、コントローラ１８０は被写体５２に対応するＡＦ領域４２を特定し、合焦情報テーブル６０を参照して、そのＡＦ領域４２に関する合焦フレームのフレーム番号を取得する。

そして、コントローラ１８０は、特定したフレーム番号のフレーム画像を表示モニタ２２０に表示する。例えば、図１０（Ａ）に示す画像において被写体５２がユーザ５０により指定されると、図１０（Ｃ）に示すように、指定された被写体５２にピントが合った画像が表示される。

ユーザは、表示モニタ２２０に表示された画像が所望のものである場合、決定ボタン２１４の押下により、その画像を記録すべき静止画として確定することができる。一方、ユーザは表示モニタ２２０に表示された画像が所望のものでない場合、選択ボタン２１３やフォーカスリングの操作により、表示モニタ２２０に表示させる画像を切り替えることができる。

ユーザにより決定ボタン２１４が押下されると、表示中の画像（フレーム画像）が静止画として切り出されて、メモリカード２００に記録される。なお、静止画データは、メモリカード２００に代えて又はそれに加えて、内蔵メモリ２４０や他の記録媒体に記録されてもよい。

動画データは動画用フォーマット（ＭＰ４）により記録されており、フレーム間圧縮が行われている。このため、動画データのフレームを切り出して静止画として切り出す際に、コントローラ１８０は、フレーム画像のデータを静止画用のフォーマット（例えば、ＪＰＥＧ）に変換して記録する。

以上のようなフォーカスセレクト機能により、ユーザは、画像撮影後に、所望の被写体または領域に合焦した静止画を得ることができる。換言すれば、ユーザは撮影後に合焦位置を選択することができる。

［２．２ メッセージ表示］
上記のフォーカスセレクト機能では、フォーカスサーチが実行され、合焦情報テーブル６０が作成される。その後、動画記録が実行される。このため、フォーカスサーチ及び動画記録は同じ撮影条件（画角、視野、合焦位置等）で行われる必要がある。すなわち、フォーカスサーチ後に、被写体に対する合焦位置が変更されるような操作、例えば、ズーム操作のような画角が変更される操作、カメラの向きを変更する操作（例えば、パン操作、カメラのブレ）のような視野が変更される操作がなされた場合、そのようなユーザ操作の前にフォーカスサーチで生成された合焦情報テーブル６０が示す状況に対して合焦位置が変化する。このため、そのようなユーザ操作の前に生成された合焦情報テーブル６０を参照して、記録された動画から静止画を生成したときに、ユーザが望む被写体すなわち領域に合焦した画像が得られない場合がある。

そこで、本実施形態では、図１１（Ａ）に示すように、フォーカスサーチが終了してから、動画記録が終了するまでの間は、合焦位置が変更される操作を禁止する。そのため、フォーカスセレクト実行中において、フォーカスサーチが終了してから動画記録が終了するまでの間に、ユーザにより、合焦位置が変更される操作がなされた場合（すなわち、合焦情報テーブル６０の内容が現状に合致しなくなった場合）に、フォーカスセレクト機能のための動画の記録を禁止または停止する。さらに、フォーカスセレクト機能を継続して実行できない旨を示す警告メッセージを表示モニタ２２０に表示してユーザに報知する。これにより、フォーカスセレクト機能において、ピントが合っていない静止画が生成されることを防止する。

図１２のフローチャートを参照して、フォーカスセレクト実行中における警告メッセージの表示処理を説明する。以下の処理はフォーカスセレクト実行中においてコントローラ１８０により実行される。

コントローラ１８０はフォーカスサーチが終了したか否かを判断する（Ｓ２１）。フォーカスサーチが終了した場合（Ｓ２１でＹＥＳ）、コントローラ１８０は、ユーザによる、被写体に対する合焦位置が変更される操作がなされたか否かを判断する（Ｓ２２）。ここで、被写体に対する合焦位置が変更される操作には、ズーム操作（画角が変更される操作）、カメラの姿勢を変化させるパン操作やチルト操作が含まれる。パン操作やチルト操作は、デジタルカメラ１００に搭載されたジャイロセンサ２５０により検出できる。また、フォーカスレンズ１１１が、オートフォーカス動作時における、フォーカスレンズ１１１の可動範囲が変更できるレンズである場合には、合焦位置が変更される操作に、フォーカスレンズ１１１の可動範囲の設定変更の操作が含まれる。

ユーザによる合焦位置が変更される操作を検出しなかった場合（Ｓ２２でＮＯ）、コントローラ１８０は、動画の記録動作を継続する。

一方、ユーザによる、被写体の合焦位置が変更される操作がなされたことを検出した場合（Ｓ２２でＮＯ）、コントローラ１８０は、動画の記録動作中か否かを判断する（Ｓ２４）。動画記録中でない場合（Ｓ２４でＮＯ）、すなわち、動画記録開始前の場合、コントローラ１８０は、動画の記録動作を禁止する（Ｓ２７）とともに、表示モニタ２２０に第１メッセージを表示させる（Ｓ２７）。動画記録中である場合（Ｓ２４でＹＥＳ）、コントローラ１８０は、動画の記録動作を停止する（Ｓ２５）とともに、表示モニタ２２０に第２メッセージを表示させる（Ｓ２６）。

図１１（Ｂ）、（Ｃ）は表示モニタ２２０に表示される第１及び第２メッセージの表示例を示した図である。フォーカスサーチが終了してから動画記録が開始されるまでの間に、ユーザによる合焦位置が変化する操作が検出された場合、例えば、図１１（Ｂ）に示すような第１メッセージ７０ａが表示される。フォーカスサーチが終了後、動画記録中に、ユーザによる合焦位置が変化する操作が検出された場合、例えば、図１１（Ｃ）に示すような第２メッセージ７０ｂが表示される。これらのメッセージを表示することで、ユーザに、フォーカスサーチをやり直す必要があることを認識させることができる。なお、図１１（Ｂ）、（Ｃ）に示すメッセージの内容は一例である。

［３．効果、等］
本実施形態のデジタルカメラ１００（撮像装置の一例）は、複数の合焦距離で連続して撮影された画像の中からユーザ所望の合焦距離で撮影された画像を選択できるフォーカスセレクト機能（画像選択機能の一例）を有する。デジタルカメラ１００は、フォーカスレンズ１１１を含む光学系１１０と、ユーザ操作を受け付ける操作部材２１０（操作部の一例）と、光学系を介して入力した光学情報から画像信号を生成するＣＣＤ１４０（撮像部の一例）と、ＣＣＤ１４０により生成された画像信号に所定の処理を行い、画像データを生成する画像処理部１６０と、所定の情報を表示する表示モニタ２２０（表示部の一例）と、ＣＣＤ１４０及び／または画像処理部１６０を制御するコントローラ１８０（制御部の一例）と、を備える。

画像データが示す画像の領域に対して複数のＡＦ領域が設定される。フォーカスセレクト機能において、コントローラ１８０は、フォーカスレンズ１１１を移動させながらフレーム画像を生成し、ＡＦ領域毎に、そのＡＦ領域に合焦したフレーム画像を求めるフォーカスサーチ処理（サーチ処理の一例）を実行する（Ｓ１２）。コントローラ１８０は、フォーカスサーチ処理の終了後に、フォーカスレンズ１１１を移動させながら動画を記録する動画撮影処理を実行する（Ｓ１４−Ｓ１５）。動画撮影処理の後、コントローラ１８０は、フォーカスサーチ処理の結果（合焦情報テーブル６０）を参照して、記録した動画データを構成する複数のフレーム画像から、静止画を生成する静止画生成処理を実行する（Ｓ１６）。具体的には、コントローラ１８０は、記録した動画データを構成する複数のフレーム画像の中から、ユーザにより指定された画像上の領域に対応するＡＦ領域に合焦した一のフレーム画像を静止画として抽出する。コントローラ１８０は、フォーカスサーチ処理が終了してから動画撮影処理が終了するまでの間に、ユーザにより被写体に対する合焦位置が変更される操作がなされた場合、ユーザに注意を喚起するメッセージ（７０ａ、７０ｂ）を表示モニタ２２０に表示する（Ｓ２４−Ｓ２８）。

以上のように、本実施形態のデジタルカメラ１００は、フォーカスセレクト機能において、ズーム操作やパン操作等の、被写体に対する合焦位置が変更される操作がなされた場合、フォーカスセレクト機能が継続して実現されない旨のユーザに注意を喚起するメッセージを表示モニタ２２０に表示する（図１１（Ｂ）、（Ｃ）参照）。これにより、ユーザは、再度フォーカスサーチを行う必要があることやフォーカスセレクトのための動画撮影が停止されたことを認識することができ、フォーカスセレクト機能を実現するための操作をやり直す必要があることを認識できる。

（他の実施の形態）
以上のように、本出願において開示する技術の例示として、実施の形態１を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態１で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。そこで、以下、他の実施の形態を例示する。

（１）上記の実施形態では、合焦情報テーブル６０は、最も至近端に近い合焦位置（Pnear）と最も無限端に近い合焦位置（Pfar）とを格納した。しかし、これらの合焦位置（Pnear、Pfar）は、必ずしも合焦情報テーブル６０に格納される必要はなく、合焦情報テーブル６０とは独立して保持されてもよい。

（２）上記の実施形態では、合焦情報テーブル６０は、画像の領域毎に、その領域に合焦したフレーム（合焦フレーム）を示す情報（フレーム番号）を格納した。しかし、合焦情報テーブル６０の構成はこれに限定されない。合焦情報テーブルは、画像の領域毎に、各領域にピントがあったときのフォーカスレンズ１１１の位置を格納してもよい。この場合は、さらに、動画記録時にフォーカスレンズ位置と、各フレームとの関係を示す第２のテーブルを作成すればよい。静止画切り出し時には、合焦情報テーブルと第２のテーブルとを参照することで、動画から切り出すフレーム画像を特定できる。

（３）上記の実施の形態では、動画データからユーザ所望の画像領域に合焦した静止画を生成するフォーカスセレクト機能について説明した。上述したメッセージの表示制御は、他の機能を有する撮像装置に対しても適用することができる。すなわち、上述したメッセージの表示制御は、フォーカスサーチと動画記録を行い、フォーカスサーチの結果を参照して、記録された動画を構成するフレーム画像を用いて静止画を生成する機能を実行する撮像装置に対して有効である。このような機能を実行する場合、フォーカスサーチと動画記録との間で、ユーザにより、被写体に対する合焦位置が変更される操作がなされると、フォーカスサーチの結果が正しいものではなくなる。よって、上述のメッセージを表示することで、ユーザに対して、再度フォーカスサーチを行う必要があること等を認識させることができる。なお、このような機能としては、例えば、深度合成（焦点合成）機能がある。深度合成（焦点合成）とは、複数の合焦距離で記録した画像（静止画または動画のフレーム画像）を合成して、擬似的に深い被写界深度を有する静止画を生成する処理である。この場合の撮像装置は、上記の実施形態の場合と同様にフォーカスサーチ及び動画記録を行い、その後に、動画を構成するフレーム画像の中から深度合成に用いる画像をフォーカスサーチの結果を参照して決定し、決定した画像を用いて深度合成処理を行う。

（４）上記の実施の形態では、デジタルカメラ１００（撮像装置の例）は、フォーカスレンズの位置を移動しながら動画を記録した。デジタルカメラ１００は、フォーカスレンズの位置を移動しながら動画を記録する代わりに、フォーカスレンズの位置を移動しながら連続して静止画を記録してもよい（連写機能）。この場合、デジタルカメラ１００は、連続して記録された複数の静止画からユーザ所望の一の静止画を抽出（生成）すればよい。

（５）上記の実施形態では、オートフォーカス方式としてコントラストＡＦを用いたが、位相差ＡＦを用いてもよい。

（６）上記の実施形態に開示したフォーカスセレクト機能は、レンズ交換式カメラ及びレンズ一体型カメラの双方の種類のデジタルカメラに対して適用できる。

（７）上記の実施形態では、撮像装置の一例としてデジタルカメラを用いて説明したが、撮像装置はこれに限定されない。本開示の思想は、デジタルビデオカメラ、スマートフォン、ウェアラブルカメラ等の動画が撮影できる種々の撮像装置に対して適用することができる。

（８）上記の実施形態では、撮像素子をＣＣＤで構成したが、撮像素子はこれに限定されない。撮像素子はＮＭＯＳイメージセンサやＣＭＯＳイメージセンサで構成してもよい。

以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。また、上述の実施の形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。

本開示は、動画（または連続した静止画）を撮影できる撮像装置に対して適用可能である。具体的には、デジタルビデオカメラ、スマートフォン、ウェアラブルカメラ等の動画（または連続した静止画）が撮影できる種々の撮像装置に対して適用することができる。

１００ デジタルカメラ
１１０ 光学系
１１１ フォーカスレンズ
１１２ ズームレンズ
１１３ 手振れ補正レンズ
１２０ レンズ駆動部
１３０ シャッタ部
１４０ ＣＣＤ
１５０ Ａ／Ｄコンバータ
１６０ 画像処理部
１７０ バッファ
１８０ コントローラ
１９０ カードスロット
２００ メモリカード
２１０ 操作部材
２２０ 表示モニタ
２４０ 内蔵メモリ
２５０ ジャイロセンサ
３００ 絞り部

Claims (8)

1. 合焦距離を変化させながら複数の画像を連続して撮影し、撮影された複数の画像から一の静止画を生成する撮像装置であって、
   フォーカスレンズを含む光学系と、
   ユーザ操作を受け付ける操作部と、
   前記光学系を介して入力した光学情報から画像信号を生成する撮像部と、
   前記撮像部により生成された画像信号に所定の処理を行い、画像データを生成する画像処理部と、
   所定の情報を表示する表示部と、
   前記撮像部及び／または前記画像処理部を制御する制御部と、を備え、
   前記画像データが示す画像の領域に対して複数のＡＦ領域が設定され、
   前記制御部は、
   前記フォーカスレンズを移動させながらフレーム画像を撮影し、ＡＦ領域毎に、そのＡＦ領域に合焦したフレーム画像を求めるサーチ処理を実行し、
   前記サーチ処理の終了後に、前記フォーカスレンズを移動させながら動画を記録する動画撮影処理を実行し、
   前記動画撮影処理の後、前記サーチ処理の結果を参照して、記録した動画データを構成する複数のフレーム画像から、静止画を生成する静止画生成処理を実行し、
   前記制御部は、前記サーチ処理が終了してから前記動画撮影処理が終了するまでの間に、ユーザにより、被写体に対する合焦位置が変更される操作がなされた場合、ユーザに注意を喚起するメッセージを前記表示部に表示する、
   撮像装置。
2. 前記合焦位置が変更される操作は、ズーム操作、前記撮像装置の姿勢を変更する操作及び／又はオートフォーカス動作における前記フォーカスレンズの可動範囲を変更する操作を含む、
   請求項１記載の撮像装置。
3. 前記制御部は、前記動画撮影処理中に、ユーザにより合焦位置が変更される操作がなされた場合、当該動画撮影処理を中止する、
   請求項１記載の撮像装置。
4. 前記制御部は、前記サーチ処理の終了後であって前記動画撮影処理の開始前に、ユーザにより合焦位置が変更される操作がなされた場合、前記動画撮影処理の実行を禁止する、
   請求項１記載の撮像装置。
5. 前記制御部は、前記サーチ処理が終了してから前記動画撮影処理が開始されるまでの間に、ユーザにより合焦位置が変更される操作がなされた場合に、第１メッセージを表示し、前記サーチ処理が終了してから前記動画撮影処理中に、ユーザにより合焦位置が変更される操作がなされた場合に、前記第１メッセージとは異なる第２メッセージを表示する、
   請求項１記載の撮像装置。
6. 前記制御部は、
   前記サーチ処理において、画像データの各ＡＦ領域と、各ＡＦ領域に合焦したフレーム画像を示す情報とを関連づけて管理するテーブルを生成し、
   前記静止画生成処理において、前記テーブルを参照して静止画を抽出する、
   請求項１ないし５のいずれかに記載の撮像装置。
7. 前記制御部は、記録した動画データを構成する複数のフレーム画像の中から、ユーザにより指定された画像上の領域に対応するＡＦ領域に合焦した一のフレーム画像を前記静止画として抽出する、請求項１ないし５のいずれかに記載の撮像装置。
8. 前記操作部はレリーズボタンを含み、
   前記制御部は、前記レリーズボタンの半押し操作がなされたときに、前記サーチ処理を開始し、その後に前記レリーズボタンの全押し操作がなされたときに、前記動画撮影処理を開始する、
   請求項１ないし５のいずれかに記載の撮像装置。

Images