JP6347056B2 - 撮像装置および静止画像生成方法 - Google Patents

Description

本開示は、ユーザが指定した画像領域に合焦した画像を記録可能な撮像装置および静止画像生成方法に関する。

デジタルカメラの機能において、焦点位置を移動させながら連続撮影を行うフォーカスブラケット機能がある。この機能によれば、ユーザは画像撮影後に所望の合焦状態の画像を選択することができる。

特許文献１は、フォーカスブラケット機能を有するデジタルカメラを開示する。このデジタルカメラは、算出手段と、制御手段と、を有する。算出手段は、フォーカスブラケット撮影機能による撮影で連続撮影された複数の画像各々の合焦状態を表す合焦評価値を算出する。制御手段は、算出手段により算出された複数の画像各々の合焦評価値に基づいて、合焦状態が良好な画像を選択し、当該選択した画像を表す画像データを記録媒体に記録するように記録手段の動作を制御する。これにより、撮影された複数の画像から合焦状態が良好な画像を選択して記録することを可能にしている。

特開２００４−１３５０２９号公報

本開示は、所望の画像領域（被写体）にピントがあった静止画像をユーザが容易に取得することができる撮像装置および静止画像生成方法を提供する。

本開示の第一の態様において撮像装置が提供される。撮像装置は、光学系と、撮像素子と、画像処理部と、入力部と、制御部と、を備える。光学系は、フォーカスレンズを含む。撮像素子は、光学系を介して入力した光学情報から画像信号を生成する。画像処理部は、撮像素子により生成された画像信号に所定の処理を行い、複数のフレーム画像を含む動画データを生成する。入力部は、ユーザによる画像上の指定領域の入力を受け付ける。制御部は、光学系のフォーカス位置を移動させながら画像処理部に動画データを生成させ、動画データに含まれる複数のフレーム画像の中から指定領域にピントが合った静止画像を抽出する。

本開示の第二の態様において、撮像装置における静止画像生成方法が提供される。その静止画像生成方法は、フォーカス位置を移動させながら複数のフレーム画像を含む動画データを生成するステップと、ユーザによる画像上の指定領域の入力を受け付けるステップと、動画データに含まれる複数のフレーム画像の中から、指定領域にピントが合った静止画像を抽出するステップと、を含む。

図１は、本開示に係るデジタルカメラの構成を示す図である。 図２は、デジタルカメラの背面図である。 図３Ａは、ブラケット動作におけるフォーカスレンズの移動を説明した図である。 図３Ｂは、画像においてユーザによる合焦領域の指定を説明した図である。 図４は、動画データからの静止画の切り出しを説明した図である。 図５は、複数に分割された画像の領域を説明した図である。 図６Ａは、合焦情報テーブルを説明した図である。 図６Ｂは、動画データのヘッダを説明した図である。 図７は、フォーカスブラケット動作を示すフローチャートである。 図８は、フォーカスブラケット撮影における動画記録動作を示すフローチャートである。 図９は、フォーカスブラケット撮影におけるフォーカスレンズの移動範囲を説明した図である。 図１０は、動画データからの静止画生成処理を示すフローチャートである。 図１１は、動画データの記録後に表示される画面を示す図である。 図１２Ａは、ユーザによる所望の合焦領域を指定する操作を説明した図である。 図１２Ｂは、ユーザによる所望の合焦領域を指定する操作を説明した図である。 図１３は、ユーザにより指定された領域に合焦した画像の表示例を示す図である。 図１４は、コマ送り／コマ戻しによる画像の切替え原理を説明するための図である。 図１５は、コマ送り／コマ戻しによる画像の切替え（コマ送り）処理を示すフローチャートである。 図１６は、合焦フレーム（合焦位置）が明確でない分割領域に対する合焦フレームの決定処理を示すフローチャートである。 図１７は、合焦フレーム（合焦位置）が明確でない分割領域に対する合焦フレームの決定方法を説明するための図である。

以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、発明者は、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって請求の範囲に記載の主題を限定することを意図するものではない。

以下、図面を用いて本開示に係る撮像装置の実施の形態を説明する。

（第１の実施の形態）
１．デジタルカメラの構成
第１の実施の形態に係るデジタルカメラの電気的構成例について図１を用いて説明する。図１は、デジタルカメラ１００の構成を示すブロック図である。デジタルカメラ１００は、１又は複数のレンズからなる光学系１１０により形成された被写体像をＣＣＤ１４０で撮像する撮像装置である。ＣＣＤ１４０で生成された画像データは、画像処理部１６０で各種処理が施され、メモリカード２００に格納される。以下、デジタルカメラ１００の構成を詳細に説明する。

光学系１１０は、ズームレンズやフォーカスレンズ１１１を含む。ズームレンズを光軸に沿って移動させることにより、被写体像の拡大、又は縮小をすることができる。また、フォーカスレンズ１１１を光軸に沿って移動させることにより、被写体像のピント（合焦状態）を調整することができる。

レンズ駆動部１２０は、光学系１１０に含まれる各種レンズを駆動させる。レンズ駆動部１２０は、例えばズームレンズを駆動するズームモータや、フォーカスレンズ１１１を駆動するフォーカスモータを含む。

絞り部３００は、ユーザの設定に応じて又は自動で開口部の大きさを調整し、開口部を透過する光の量を調整する。

シャッタ１３０は、ＣＣＤ１４０に透過させる光を遮光するための手段である。シャッタ１３０は、光学系１１０及び絞り部３００とともに、被写体像を示す光学情報を制御する光学系部を構成する。また、光学系１１０及び絞り部３００はレンズ鏡筒（図示せず）内に収納される。

ＣＣＤ１４０は、光学系１１０で形成された被写体像を撮像して、画像データを生成する。ＣＣＤ１４０は、カラーフィルタと、受光素子と、ＡＧＣ（Ａｕｔｏ Ｇａｉｎ Ｃｏｎｔｒｏｌｌｅｒ）とを含む。受光素子は、光学系１１０によって集光された光学的信号を電気信号に変換し、画像情報を生成する。ＡＧＣは、受光素子から出力された電気信号を増幅する。ＣＣＤ１４０はさらに、露光、転送、電子シャッタなどの各種動作を行うための駆動回路等を含む。詳細については、後述する。

ＡＤＣ（Ａ／Ｄコンバータ：アナログ−デジタル変換器）１５０は、ＣＣＤ１４０で生成されたアナログ画像データをデジタル画像データに変換する。

画像処理部１６０は、ＣＣＤ１４０で生成され、変換されたデジタル画像データに対して、コントローラ１８０の制御を受け、各種処理を施す。画像処理部１６０は、表示モニタ２２０に表示するための画像データを生成したり、メモリカード２００に格納するための画像データを生成したりする。例えば、画像処理部１６０は、ＣＣＤ１４０で生成された画像データに対して、ガンマ補正、ホワイトバランス補正、傷補正などの各種処理を行う。また、画像処理部１６０は、ＣＣＤ１４０で生成された画像データを、Ｈ．２６４規格やＭＰＥＧ２規格に準拠した圧縮形式等により圧縮する。画像処理部１６０は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）やマイコンなどで実現可能である。また、画像処理部１６０は、ＣＣＤ１４０で生成された画像データに基づいて、例えば、画素数４０００×２０００前後の動画の画像データ（４Ｋ動画データ）を生成することができる。画像処理部１６０は、生成した４Ｋ動画データに対して後述する種々の処理を行うことができる。

コントローラ１８０は、デジタルカメラ１００の全体を制御する制御手段である。画像処理部１６０やコントローラ１８０は、半導体素子などで実現可能である。コントローラ１８０は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。画像処理部１６０やコントローラ１８０は、マイコン、ＣＰＵ、ＭＰＵ、ＤＳＰ、ＡＳＩＣ、ＦＰＧＡなどで実現できる。

バッファ１７０は、画像処理部１６０及びコントローラ１８０のワークメモリとして機能する。バッファ１７０は、例えば、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、強誘電体メモリなどで実現できる。

カードスロット１９０は、メモリカード２００をデジタルカメラ１００に装着するための手段である。カードスロット１９０は、機械的及び電気的にメモリカード２００とデジタルカメラ１００を接続可能である。

メモリカード２００は、フラッシュメモリや強誘電体メモリなどを内部に含み、画像処理部１６０で生成された画像ファイル等のデータを格納可能である。

内蔵メモリ２４０は、フラッシュメモリや強誘電体メモリなどで構成される。内蔵メモリ２４０は、デジタルカメラ１００全体を制御するための制御プログラムやデータ等を記憶している。

操作部材２１０は、ユーザからの操作を受け付けるユーザーインターフェースの総称である。操作部材２１０は、ユーザからの操作を受け付けるボタン、レバー、ダイヤル、タッチパネル、スイッチ等を含む。また、操作部材２１０は、レンズ鏡筒の外周に設けられたフォーカスリングを含む。フォーカスリングは、フォーカスレンズ１１１を移動させるためにユーザにより回転操作される部材である。

表示モニタ２２０は、ＣＣＤ１４０で生成した画像データが示す画像（スルー画像）や、メモリカード２００から読み出した画像データが示す画像を表示可能である。また、表示モニタ２２０は、デジタルカメラ１００の各種設定を行うための各種メニュー画面等も表示可能である。表示モニタ２２０は、液晶表示デバイスや有機ＥＬ表示デバイスで構成される。

図２は、デジタルカメラ１００の背面を示した図である。図２では、操作部材２１０の例として、レリーズボタン２１１、選択ボタン２１３、決定ボタン２１４、タッチパネル２２２が示されている。操作部材２１０は、ユーザによる操作を受け付けると、コントローラ１８０に種々の指示信号を送信する。

ユーザによる画像上の指定領域の入力は、タッチパネル２２２等の操作部材２１０を用いて、受け付けることができる。なお、ユーザによる画像上の指定領域の入力は、操作部材２１０を用いて受け付けることに代えて、図示しないＷｉ−Ｆｉ等の無線通信部の無線通信機能を利用してデジタルカメラ１００の外部から受け付けてもよい。この場合、無線通信部の受信部が、画像上の指定領域の入力を受信する。ユーザによる画像上の指定領域の入力を受け付ける、これらのタッチパネル２２２等の操作部材２１０とＷｉ−Ｆｉ等の無線通信部を総称して入力部と呼ぶ。

レリーズボタン２１１は、二段押下式の押下式ボタンである。レリーズボタン２１１がユーザにより半押し操作されると、コントローラ１８０はオートフォーカス制御（ＡＦ制御）やオート露出制御（ＡＥ制御）などを実行する。また、レリーズボタン２１１がユーザにより全押し操作されると、コントローラ１８０は、押下操作のタイミングに撮像された画像データを記録画像としてメモリカード２００等に記録する。また、レリーズボタン２１１がユーザにより半押し操作された後、全押し操作を行わず、レリーズボタン２１１の押下を解除することで、操作を取りやめることも出来る。

選択ボタン２１３は、上下左右方向に設けられた押下式ボタンである。ユーザは、上下左右方向のいずれかの選択ボタン２１３を押下することにより、カーソルを移動したり、表示モニタ２２０に表示される各種条件項目を選択したりすることができる。

決定ボタン２１４は、押下式ボタンである。デジタルカメラ１００が撮影モードあるいは再生モードにあるときに、決定ボタン２１４がユーザにより押下されると、コントローラ１８０は表示モニタ２２０にメニュー画面を表示する。メニュー画面は、撮影／再生のための各種条件を設定するための画面である。決定ボタン２１４が各種条件の設定項目が選択されているときに押下されると、コントローラ１８０は、選択された項目の設定を確定する。

タッチパネル２２２は、表示モニタ２２０の表示画面と重畳して配置され、ユーザの指による表示画面上へのタッチ操作を検出する。これにより、ユーザは、表示モニタ２２０に表示された画像に対する領域の指定等の操作を行える。

１．１ ブラケットフォーカス機能
本実施形態のデジタルカメラ１００は、合焦位置を変化させながら動画を撮影し、撮影した動画を構成する複数フレームの画像の中から１つのフレームを選択して記録するブラケットフォーカス機能を有する。ブラケットフォーカス機能では、例えば、画素数４０００×２０００前後の４Ｋ動画が記録される。このように４Ｋで記録された動画から、ユーザの指定に基づき選択された１つのフレーム画像を切り出して静止画を得る。

具体的には、ブラケットフォーカス機能では、図３Ａに示すように至近端側から無限端側（またはその逆）に向かってフォーカスレンズ１１１を移動させながら、すなわち、合焦位置を変化させながら動画撮影を行う。その後、図３Ｂに示すように、ユーザ５０は、撮影された画像においてピントを合わせたい被写体５２（すなわち領域）を指定する。デジタルカメラ１００は、図４に示すように、動画を構成する複数フレーム画像の中から、ユーザの指定に基づき１つのフレーム画像を選択して、静止画として切り出して記録する。これにより、ユーザが指定した被写体（領域）に合焦した高画質の静止画を得ることができる。

以上のようなブラケットフォーカスのために、本実施形態では、画像領域４００を図５に示すような複数の領域に分割する。そして、分割した領域毎に、動画を構成する複数フレームの中から、その領域にピントが合っているフレーム（以下「合焦フレーム」という）を求め、求めた合焦フレームに関する情報を合焦情報テーブルに記録する。なお、デジタルカメラ１００は、ブラケットフォーカス動作において動画を記録（撮影）する前にプリスキャン動作を行い、分割した各領域の合焦フレームを検出して合焦情報テーブルを生成する。

図６Ａは、合焦情報テーブルのデータ構造を示した図である。合焦情報テーブル６０は、プリスキャン動作において最も至近端側でピントがあったときのフォーカスレンズ位置（Ｐｎｅａｒ）と、最も無限端側でピントがあったときのフォーカスレンズ位置（Ｐｆａｒ）と、分割した各領域に対する合焦フレームのフレーム番号とを格納する。合焦情報テーブル６０は、図６Ｂに示すように、動画撮影により得られた動画データ６５のヘッダ部６３に格納される。

２．ブラケットフォーカス動作
以上のような構成を有するデジタルカメラ１００のブラケットフォーカス動作を以下に説明する。

図７のフローチャートを参照して、デジタルカメラ１００のブラケットフォーカス動作における動画記録動作を説明する。デジタルカメラ１００において予めフォーカスブラケット機能が有効に設定された状態で、ユーザによりレリーズボタン２１１が全押しされると、フォーカスブラケット動作が開始される。フォーカスブラケット動作は、動画記録動作（Ｓ０１）と、静止画生成動作（Ｓ０２）とを含む。動画記録動作では、フォーカスレンズ１１１を移動させながら動画を記録（撮影）する。静止画生成動作では、動画記録動作にて記録した動画データから、ユーザが指定する被写体（領域）に合焦された静止画を生成する。以下、それぞれの動作について詳細を説明する。

２．１ 動画記録動作
図８は、動画記録動作（ステップＳ０１）を説明したフローチャートである。コントローラ１８０はまず、画像における分割した領域のそれぞれについて合焦位置を検出して合焦情報テーブルを作成するためのプリスキャン動作を行う（Ｓ１１）。

プリスキャン動作では、コントローラ１８０は、フォーカスレンズ１１１を至近端から無限端に（またはその逆に）移動させながら、画像の分割した領域毎にコントラスト値を検出する（図５参照）。

そして、コントローラ１８０は、プリスキャンの結果に基づき合焦情報テーブル６０を作成する。具体的には、コントローラ１８０は、フォーカスレンズ１１１を至近端から無限端に移動させたときに、領域毎に、得られる複数のフレーム画像においてコントラスト値が最大となるフレームを合焦フレームとして求める。そして、コントローラ１８０は、その合焦フレームを示すフレーム番号を合焦情報テーブル６０に記録する。なお、一の領域について、いずれのフレームのコントラスト値も所定の閾値よりも低い場合、当該領域については、合焦フレーム（すなわち合焦位置）が定まらないとし、合焦情報テーブル６０には、合焦位置が不明であることを示す所定の値を記録する。

コントローラ１８０はさらに、フォーカスレンズ１１１を至近端から無限端に移動させたときの、最も至近端側のフォーカスレンズ１１１の合焦位置（Ｐｎｅａｒ）と、最も無限端側のフォーカスレンズ１１１の合焦位置（Ｐｆａｒ）とを求める。そして、コントローラ１８０は、それらの値を合焦情報テーブル６０に記録する。

プリスキャン動作終了後、コントローラ１８０は、フォーカスレンズ１１１を至近端側に戻し、フォーカスレンズ１１１を所定の範囲内を移動させながら動画記録を行う（Ｓ１２）。ここで、所定の範囲とは、図９に示すように、最も至近端側のフォーカスレンズ１１１の合焦位置（Ｐｎｅａｒ）から、最も無限端側のフォーカスレンズ１１１の合焦位置（Ｐｆａｒ）までの範囲である。フォーカスレンズ１１１の移動範囲をこのような範囲に制限することにより、合焦が得られない範囲においての動画記録が行われなくなり、動画記録の時間を低減できる。なお、動画記録は、動画データ用の所定のフォーマットに従い動画が記録される。例えば、ＭＰ４規格（Ｈ．２６４／ＭＰＥＧ−４ ＡＶＣ方式）に従い動画が記録される。

動画記録が終了すると、ヘッダ部６３に合焦情報テーブル６０を記録した動画データ６５をメモリカード２００に記録して（Ｓ１３）、動画記録動作を終了する。

２．２ 動画データからの静止画生成
図１０のフローチャートを用いて、静止画生成動作（ステップＳ０２）について説明する。静止画生成動作では、動画記録動作にて撮影した動画から、ユーザが指定する被写体（領域）に合焦された静止画が生成される。

コントローラ１８０は、直前に記録した動画を表示モニタ２２０に表示する（Ｓ２１）。例えば、図１１に示すように、直前に記録した動画が表示モニタ２２０に表示される。このとき、記録した動画を構成する複数のフレーム画像の中の１つ（静止画）を表示してもよい。

ユーザは、カメラ背面に設けられたタッチパネル２２２を操作して、表示されている画像上で、ピントを合わせたい被写体（すなわち領域）を指定する。例えば、図１２Ａに示すように、ユーザ５０は被写体５２をタッチすることで、合焦させたい対象（領域）として被写体５２を指定する。

ユーザにより被写体（すなわち領域）が指定されると（Ｓ２２でＹＥＳ）、コントローラ１８０は、合焦情報テーブル６０を参照して、ユーザにより指定された領域に対する合焦フレームを特定する（Ｓ２３）。例えば、図１２Ａに示すように、被写体５２がユーザにより指定された場合、図１２Ｂに示すように、コントローラ１８０は被写体５２に対応する領域４２を特定し、合焦情報テーブル６０を参照して、その領域４２に対する合焦フレームのフレーム番号を取得する。

そして、コントローラ１８０は、特定したフレーム番号のフレーム画像を表示モニタ２２０に表示する（Ｓ２４）。例えば、図１３の（Ａ）に示す画像において被写体５２がユーザ５０により指定されると、図１３の（Ｂ）に示すように、指定された被写体５２に合焦した画像が表示される。

ユーザは、表示モニタ２２０に表示された画像が所望のものである場合、決定ボタン２１４の押下により、その画像を記録すべき静止画として確定することができる。一方、ユーザは表示モニタ２２０に表示された画像が所望のものでない場合、選択ボタン２１３やフォーカスリングの操作により、表示モニタ２２０に表示させる画像を切り替えることができる。

ユーザによる画像を切り替える操作がなされると（Ｓ２７）、コントローラ１８０は、表示モニタ２２０に表示される画像を操作に応じて切り替える（Ｓ２８）。ユーザは、切り替え操作を適宜行うことで所望の画像を表示モニタ２２０に表示させることができる。この表示画像の切り替え動作の詳細は後述する。

ユーザにより決定ボタン２１４が押下されると（Ｓ２５）、表示中の画像（フレーム画像）が静止画として切り出されて、メモリカード２００に記録される（Ｓ２６）。例えば、決定ボタン２１４が押下されると、表示モニタ２２０にユーザに対する確認メッセージが表示されるようにしてもよい。そして、確認メッセージに対してユーザの指示（「はい」）が入力されると、コントローラ１８０は、動画データから表示中のフレーム画像のデータを抽出し、静止画としてメモリカード２００に記録するようにしてもよい。なお、静止画データは、メモリカード２００に代えて又はそれに加えて、内蔵メモリ２４０や他の記録媒体に記録されてもよい。また、静止画データは、メモリカード２００等の記録媒体に記録されることに代えて又はそれに加えて、図示しないＷｉ−Ｆｉ等の無線通信部の無線通信機能を利用してデジタルカメラ１００の外部に送信されてもよい。この場合、静止画データは、無線通信部の送信部からデジタルカメラ１００の外部に送信される。

動画データは動画用コーデック（Ｈ．２６４やＨ．２６５など）により記録されており、フレーム間圧縮が行われている。このため、動画データのフレームを切り出して静止画として切り出す際に、コントローラ１８０は、フレーム画像のデータを静止画用のフォーマット（例えば、ＪＰＥＧ）に変換して記録する。

以上のようにして、ユーザが指定した領域にピントが合った静止画データを動画データから切り出すことができる。すなわち、ユーザは所望の被写体に合焦した画像を得ることができる。

２．２．１ 画像の切り替え（コマ送り）
図１０のフローチャートにおけるステップＳ２７〜Ｓ２８の表示画像の切り替え（コマ送り）動作について説明する。

ユーザによる合焦領域の指定後、表示モニタ２２０に表示された画像がユーザの所望のものでない場合、ユーザは選択ボタン２１３やフォーカスリングの操作により、表示モニタ２２０に表示させる画像を切り替えることができる（Ｓ２７〜Ｓ２８）。例えば、フォーカスリングを時計回りに回転させることで表示画像を時間的に前後のフレームの画像に切り替える、すなわち、コマ送りすることができる。

特に、本実施形態では、図１４に示すように、順方向に（時間的に後に）コマ送りする場合は、１フレームずつコマ送りするが、逆方向に（時間的に前に）コマ送りする場合は、直前のＩピクチャ（Ｉｎｔｒａ Ｐｉｃｔｕｒｅ）まで戻る。すなわち、順方向のコマ送り操作がなされた場合、表示モニタ２２０上には、現在表示されているフレーム画像の一つ後のフレームの画像が表示される。一方、逆方向のコマ送り操作がなされた場合、表示モニタ２２０上には、現在表示されているフレーム画像よりも時間的に前にあるＩピクチャのうち、現在表示されているフレーム画像に最も近いＩピクチャの画像が表示される。

このようなコマ送り制御を行うのは、次に表示される画像がＰピクチャ（Ｐｒｅｄｉｃｔｉｖｅ Ｐｉｃｔｕｒｅ）の場合に、順方向のコマ送りと逆方向のコマ送りの場合とで処理時間が大きく異なるからである。すなわち、次に表示される画像がＰピクチャである場合、順方向にコマ送りする場合、現在のフレームの画像情報に、現フレームの直後のフレームの画像情報を加算することで生成することができる。しかし、逆方向にコマ送りする場合、次に表示される画像は、現在のフレームよりも前にあるＩピクチャから現在のフレームの直前のフレームまでの画像情報を積算して生成する必要があり、処理時間を要する。このため、逆方向にコマ送りする場合は、直前のＩピクチャまで戻ることにし、表示に要する処理時間を短縮している。

図１５は、表示画像の切り替え（コマ送り）動作を示すフローチャートである。ユーザにより指定された領域に合焦された画像が表示モニタ２２０に表示された状態において、ユーザにより順方向のコマ送り操作があった場合（Ｓ５１でＹＥＳ）、コントローラ１８０は、現フレームの１フレーム後のフレーム画像を表示する（Ｓ５２）。

一方、ユーザにより逆方向のコマ送り操作があった場合（Ｓ５３でＹＥＳ）、コントローラ１８０は、現フレームよりも前にあるＩピクチャの中で現フレームに最も近いＩピクチャの画像を表示する（Ｓ５４）。この場合、例えば、ユーザに直前のフレームではないフレームに切り替わったことを通知するための表示を表示モニタ２２０に表示してもよい。

なお、コマ送りさせるための操作部材として、フォーカスリングや選択ボタンの他にジョグダイヤルを用いてもよい。また、表示モニタ２２０上にコマ送りボタンを表示させてもよい。ユーザはこのコマ送りボタンを操作することで、表示されている画像を時間的に前後に移動させることができる。

また、上記の説明では、動画データのＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅ）をＩピクチャとＰピクチャのみで構成する例を説明したが、さらに、Ｂピクチャ（Ｂｉｄｉｒｅｃｔｉｏｎａｌｌｙ Ｐｒｅｄｉｃｔｉｖｅ Ｐｉｃｔｕｒｅ）を含めても良い。

２．２．２ 合焦フレーム（合焦位置）不明時の処理
前述のように、合焦情報テーブル６０の作成時において、一の領域について、いずれのフレームのコントラスト値も所定の閾値よりも低い場合、当該領域については、合焦フレーム（すなわち合焦位置）が定まらないとし、合焦情報テーブル６０には、合焦位置が不明であることを示す所定の値が記録される。

図１０のフローチャートにおけるステップＳ２３において、ユーザにより指定された領域に対して合焦情報テーブル６０を参照して合焦フレームを特定する場合に、その領域に対する合焦位置が不明であった場合は、以下の処理を行い合焦フレーム（すなわち合焦位置）を決定する。

図１６は、合焦位置が不明である領域に対して合焦フレームを決定する処理を示すフローチャートである。ユーザが指定した被写体の領域に対する合焦位置が不明である場合（Ｓ７１）、コントローラ１８０は、その領域の周囲にある領域であって、且つ合焦位置が不明である領域を検出する（Ｓ７２）。例えば、図１７に示すように、コントローラ１８０は、合焦位置が不明である領域４５の周囲にある、合焦位置が不明な他の領域群４６を検出する。

次に、コントローラ１８０は、合焦位置が不明な領域群４５、４６の周囲にあり、且つ、合焦位置（すなわち、合焦フレーム）が明確な領域群４７を検出する（Ｓ７３）。コントローラ１８０は、検出した合焦位置（すなわち、合焦フレーム）が明確な領域群４７のそれぞれに対する合焦フレームにおいて最も多い数の合焦フレームを、合焦位置が不明な領域４５に対する合焦フレームに決定する（Ｓ７４）。

以上のようにして、合焦位置が不明である領域に対して合焦フレームを決定することができる。

３．効果、等
本実施形態のデジタルカメラ１００は、光学系１１０と、ＣＣＤ１４０（撮像素子の一例）と、画像処理部１６０と、操作部材２１０（入力部の一例）と、コントローラ１８０と、を備える。光学系１１０は、フォーカスレンズ１１１を含む。ＣＣＤ１４０は、光学系１１０を介して入力した光学情報から画像信号を生成する。画像処理部１６０は、ＣＣＤ１４０により生成された画像信号に所定の処理を行い、複数のフレーム画像を含む動画データを生成する。操作部材２１０は、ユーザによる画像上の指定領域の入力を受け付ける。コントローラ１８０は、光学系１１０のフォーカス位置を移動させながら画像処理部１６０に動画データを生成させ、動画データに含まれる複数のフレーム画像の中から指定領域にピントが合った静止画像を抽出する。コントローラ１８０が、抽出した静止画像をメモリカード２００（所定の記録媒体の一例）に記録してもよい。

以上のように、本実施形態のデジタルカメラ１００は、フォーカス位置を変更しながら撮像した動画データから、ユーザにより指定された領域にピントが合った静止画像（フレーム画像または合焦フレーム）を抽出する。よって、ユーザは、画像の領域をタッチにより指定することで、所望の画像領域（被写体）にピントが合った静止画を容易に得ることができる。また、連続的にフォーカス位置を変化させながら撮影した動画から静止画を生成するため、動画撮影時の画角内に含まれる任意の被写体に対してピントがあった画像を得ることが出来る。

また、デジタルカメラ１００は、画像データの画像領域を分割して得られる複数の領域の各々と、各領域にピントが合ったフレーム画像を示す情報とを関連づけて管理する合焦情報テーブル６０（テーブルの一例）を格納してもよい。コントローラ１８０は、合焦情報テーブル６０を参照して、ユーザにより指定された領域にピントが合ったフレーム画像を特定できる。

また、コントローラ１８０は、動画記録の動作よりも前に、フォーカスレンズを移動しながら各領域に対する合焦状態を検出して合焦情報テーブル６０を生成するプリスキャン動作を行ってもよい。

また、コントローラ１８０は、プリスキャン動作の結果得られた、至近端に最も近い合焦位置（Ｐｎｅａｒ）と無限端に最も近い合焦位置（Ｐｆａｒ）との間で、フォーカスレンズを移動しながら動画の記録を行ってもよい。これにより、合焦がないフォーカスレンズ位置の範囲での動画記録がなされないため、効率よく動画の記録ができる。

コントローラ１８０は、一の領域について、ピントがあったフレーム画像が得られなかったときは、一の領域の周囲にある領域群であってかつそれぞれの領域にピントが合ったフレーム画像が得られている領域群に対するフレーム画像から、一の領域にピントが合ったフレーム画像を求めてもよい。これにより、合焦が得られなかった領域が選択された場合でも、その領域の付近の領域でピントが合った画像が静止画として記録される。

デジタルカメラ１００は、ユーザが領域を指定するためのフレーム画像を表示する表示モニタ２２０（表示部の一例）をさらに備えてもよい。動画データは、他のフレーム画像の情報を参照せずに生成されるＩピクチャ（第１の画像の一例）と、Ｉピクチャを参照して生成されるＰピクチャ（第２の画像の一例）とを含む。コントローラ１８０は、表示モニタ２２０に表示されたフレーム画像に対して、ユーザにより順方向への画像切替え操作がなされたときは、現在表示中のフレーム画像から時間的に１つ後のフレーム画像を表示させるようにしてもよい。これに対し、コントローラ１８０は、表示モニタ２２０に表示されたフレーム画像に対して、ユーザにより逆方向への画像切替え操作がなされたときは、現在表示中のフレーム画像の時間的に前にあるＩピクチャのうち、現在表示中のフレーム画像に最も近いＩピクチャを表示させるようにしてもよい。これにより、迅速な画像の表示切り替えが可能となり、ユーザの利便性を確保できる。

（他の実施の形態）
以上のように、本出願において開示する技術の例示として、第１の実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記第１の実施の形態で説明した構成要素と他の要素を組み合わせて、新たな実施の形態とすることも可能である。そこで、以下、他の実施の形態を例示する。

（１）上記の実施形態では、フォーカスブラケット動作において、動画記録の前にプリスキャン動作を行って合焦情報テーブル６０を作成した。プリスキャン動作により合焦が得られる境界の合焦位置を認識できるため、動画記録時にフォーカスレンズを移動させる有効な範囲を設定できるので、効率良く動画記録ができるというメリットがある。しかし、プリスキャン動作は必須ではなく、動画記録時に同時に合焦情報テーブル６０を作成してもよい。この方法の場合、動画記録時と合焦情報生成時の画角が変化しないというメリットがある。

（２）上記の実施形態では、合焦情報テーブル６０は、最も至近端側の合焦位置（Ｐｎｅａｒ）と最も無限端側の合焦位置（Ｐｆａｒ）とを格納した。しかし、これらの合焦位置（Ｐｎｅａｒ、Ｐｆａｒ）は、必ずしも合焦情報テーブル６０に格納される必要はなく、合焦情報テーブル６０とは独立して保持されてもよい。

（３）上記の実施形態では、合焦情報テーブル６０は、画像の領域毎に、その領域に合焦したフレーム（合焦フレーム）を示す情報（フレーム番号）を格納した。しかし、合焦情報テーブル６０の構成はこれに限定されない。合焦情報テーブルは、画像の領域毎に、各領域にピントがあったときのフォーカスレンズ１１１の位置を格納してもよい。この場合は、さらに、動画記録時にフォーカスレンズ位置と、各フレームとの関係を示す第２のテーブルを作成すればよい。静止画切り出し時には、合焦情報テーブルと第２のテーブルとを参照することで、動画から切り出すフレーム画像を特定できる。

（４）上記の実施形態では、オートフォーカス方式としてコントラストＡＦを用いたが、位相差ＡＦを用いてもよい。

（５）上記の実施形態に開示したフォーカスブラケット機能は、レンズ交換式カメラ及びレンズ一体型カメラの双方の種類のデジタルカメラに対して適用できる。

（６）上記の実施形態では、撮像装置の一例としてデジタルカメラを用いて説明したが、撮像装置はこれに限定されない。本開示の思想は、デジタルビデオカメラ、スマートフォン、ウェアラブルカメラ等の動画が撮影できる種々の撮像装置に対して適用することができる。

（７）上記の実施形態では、撮像素子をＣＣＤで構成したが、撮像素子はこれに限定されない。撮像素子はＮＭＯＳイメージセンサやＣＭＯＳイメージセンサで構成してもよい。

以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。また、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。

本開示は、動画を撮影できる撮像装置および静止画像生成方法に対して適用可能である。具体的には、デジタルビデオカメラ、スマートフォン、ウェアラブルカメラ等の動画が撮影できる種々の撮像装置および静止画像生成方法に対して適用することができる。

１００ デジタルカメラ（撮像装置）
１１０ 光学系
１１１ フォーカスレンズ
１２０ レンズ駆動部
１３０ シャッタ
１４０ ＣＣＤ（撮像素子）
１５０ Ａ／Ｄコンバータ
１６０ 画像処理部
１７０ バッファ
１８０ コントローラ（制御部）
１９０ カードスロット
２００ メモリカード
２１０ 操作部材（入力部）
２２０ 表示モニタ
２４０ 内蔵メモリ
３００ 絞り部

Claims (6)

1. 光学系を介して入力した光学情報から画像信号を生成する撮像素子と、
   前記撮像素子により生成された画像信号に所定の処理を行い、複数のフレーム画像を含む動画データを生成する画像処理部と、
   ユーザによる画像上の指定領域の入力を受け付ける入力部と、
   前記光学系のフォーカス位置を移動させながら前記画像処理部に前記動画データを生成させ、前記動画データに含まれる前記複数のフレーム画像の中から前記指定領域にピントが合った静止画像を抽出する制御部と、を備え、
   前記制御部は、前記複数のフレーム画像の画像領域を分割することによって得られた複数の領域に対して前記複数のフレーム画像のうちピントが合ったフレーム画像を示す情報を含むテーブルを作成し、前記テーブルを参照して、前記指定領域にピントが合ったフレーム画像を前記静止画像として特定し、
   前記制御部は、前記動画データを生成させるよりも前に、前記光学系のフォーカス位置を移動させながら前記複数の領域の各領域に対する合焦状態にあるフレーム画像を検出するスキャン動作を行い、至近端に最も近い前記光学系の合焦状態にある位置と無限端に最も近い光学系の合焦状態にある位置を決定し、前記スキャン動作の結果を前記テーブルの生成に用い、
   前記制御部は、前記スキャン動作の結果得られた、至近端に最も近い合焦位置と無限端に最も近い合焦位置との間で、前記光学系のフォーカス位置を移動させながら動画データの生成を行う、
   撮像装置。
2. 前記制御部は、一の領域について、ピントがあったフレーム画像が得られなかったときは、前記一の領域の周囲にある領域群であってかつそれぞれの領域にピントが合ったフレーム画像が得られている領域群に対するフレーム画像から、前記一の領域にピントが合ったフレーム画像を求める、
   請求項１記載の撮像装置。
3. 前記指定領域を入力するためのフレーム画像を表示する表示部をさらに備え、
   前記動画データは、他のフレーム画像の情報を参照せずに生成される第１のフレーム画像と、前記第１のフレーム画像を参照して生成される第２のフレーム画像とを含み、
   前記制御部は、前記表示部に表示されたフレーム画像に対して、ユーザにより順方向への画像切替え操作がなされたときは、現在表示中のフレーム画像から時間的に１つ後のフレーム画像を表示し、逆方向への画像切替え操作がなされたときは、現在表示中のフレーム画像の時間的に前にある第１のフレーム画像のうち、現在表示中のフレーム画像に最も近い第１のフレーム画像を表示させる、
   請求項１記載の撮像装置。
4. 前記制御部は、抽出した前記静止画像を記録媒体に記録する、
   請求項１ないし３のいずれかに記載の撮像装置。
5. 前記制御部は、前記抽出された前記指定領域にピントが合った静止画像を記録媒体に記録する、
   請求項１記載の撮像装置。
6. 前記テーブルは、分割した領域に対する合焦フレームがある場合、前記分割した領域に対する合焦フレームのフレーム番号を格納する、
   請求項１記載の撮像装置。

Images