JP2015050747A - 撮影装置、その制御方法及びプログラム - Google Patents

Abstract

【課題】所定の範囲内のタイミングで撮影された、安定した画質の撮影画像を提供することに貢献すること。【解決手段】撮影装置は、ユーザの操作を受け付ける操作部と、撮影候補画像を生成する撮影部と、撮影部が撮影候補画像を生成した際の撮影状態に関する、撮影状態情報を取得する撮影状態情報取得部と、１又は２以上の撮影候補画像、及び各撮影候補画像に対応する撮影状態情報を蓄積する記憶部と、操作部に対する操作に基づいて、撮影画像の決定指示を認識する決定指示認識部と、決定指示認識部が決定指示を認識した場合、撮影状態情報に基づいて、記憶部が蓄積する撮影候補画像から、撮影画像を決定する画像決定部と、を備える。【選択図】図１

Description

本発明は、撮影装置、その制御方法及びプログラムに関する。

焦点距離を自動調整する自動焦点調節処理（Automatic Focus、以下、ＡＦ処理と呼ぶ）機能が、多くのデジタルカメラ等において採用されている（特許文献１）。

特開２００５−２４４３１１号公報

なお、上記先行技術文献の開示を、本書に引用をもって繰り込むものとする。以下の分析は、本発明の観点からなされたものである。

デジタルカメラ等はＡＦ処理を行う場合、撮影レンズを移動させ、撮影した画像のコントラスト等を解析する。そして、ＡＦ処理には、一度、焦点を調節し、焦点を固定するシングルＡＦ処理と、焦点調節を繰り返すコンティニュアスＡＦ処理と、が知られている。

ここで、デジタルカメラ等がコンティニュアスＡＦ処理を行っている途中で、シャッターボタンが押下される場合を考える。その場合、デジタルカメラ等は、画質が不安定な（撮影対象の被写体に焦点が合っていない）撮影画像を生成する恐れがある。

また、デジタルカメラ等は、シャッターボタンの押下を認識してから、被写体を撮影する。しかし、デジタルカメラ等においては、シャッターボタンが押下されてから、実際に撮影を行うまでに遅延（シャッタータイムラグ）が発生する。そのため、ユーザが所望する撮影画像と、実際に撮影される撮影画像と、が異なる場合がある。

特許文献１で開示された技術では、シャッタータイムラグについて記載されていない。そのため、特許文献１で開示された技術では、ユーザが所望する撮影画像と、実際に撮影される撮影画像と、が異なる恐れがある。

そこで、本発明は、所定の範囲内のタイミングで撮影された、安定した画質の撮影画像を提供することに貢献する撮影装置、その制御方法及びプログラムを提供することを目的とする。

本発明の第１の視点によれば、ユーザの操作を受け付ける操作部と、撮影候補画像を生成する撮影部と、前記撮影部が前記撮影候補画像を生成した際の撮影状態に関する、撮影状態情報を取得する撮影状態情報取得部と、１又は２以上の前記撮影候補画像、及び前記各撮影候補画像に対応する前記撮影状態情報を蓄積する記憶部と、前記操作部に対する操作に基づいて、撮影画像の決定指示を認識する決定指示認識部と、前記決定指示認識部が前記決定指示を認識した場合、前記撮影状態情報に基づいて、前記記憶部が蓄積する前記撮影候補画像から、前記撮影画像を決定する画像決定部と、を備える撮影装置が提供される。

本発明の第２の視点によれば、ユーザの操作を受け付ける操作部を備える撮影装置を制御する制御方法であって、撮影候補画像を生成する工程と、前記撮影候補画像が生成された際の撮影状態に関する、撮影状態情報を取得する工程と、１又は２以上の前記撮影候補画像、及び前記各撮影候補画像に対応する前記撮影状態情報を蓄積する工程と、撮影画像の決定指示を認識する工程と、前記決定指示が認識された場合、前記撮影状態情報に基づいて、前記撮影候補画像から、前記撮影画像を決定する画像決定工程と、を含む撮影装置の制御方法が提供される。
なお、本方法は、ユーザの操作を受け付ける操作部を備える撮影装置という、特定の機械に結び付けられている。

本発明の第３の視点によれば、ユーザの操作を受け付ける操作部を備える撮影装置を制御するコンピュータに実行させるプログラムであって、撮影候補画像を生成する処理と、前記撮影候補画像が生成された際の撮影状態に関する、撮影状態情報を取得する処理と、１又は２以上の前記撮影候補画像、及び前記各撮影候補画像に対応する前記撮影状態情報を蓄積する処理と、撮影画像の決定指示を認識する処理と、前記決定指示が認識された場合、前記撮影状態情報に基づいて、前記撮影候補画像から、前記撮影画像を決定する画像決定処理と、を実行するプログラムが提供される。
なお、本プログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント（non-transient）なものとすることができる。本発明は、コンピュータプログラム製品として具現することも可能である。

本発明の各視点によれば、所定の範囲内のタイミングで撮影された、安定した画質の撮影画像を提供することに貢献する撮影装置、その制御方法及びプログラムが提供される。

一実施形態の概要を説明するための図である。 撮影装置１の全体構成の一例を示す平面図である。 撮影装置１の内部構成の一例を示すブロック図である。 撮影候補画像、及び撮影状態情報を蓄積する処理の一例を示すフローチャートである。 撮影画像を決定する処理の一例を示すフローチャートである。 撮影候補画像、及び撮影状態情報の一例を示す図である。 撮影候補画像、及び撮影状態情報の一例を示す図である。 撮影画像を決定する処理の一例を示すフローチャートである。 撮影候補画像、及び撮影状態情報の一例を示す図である。

初めに、図１を用いて一実施形態の概要について説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、この概要の記載はなんらの限定を意図するものではない。

上述の通り、所定の範囲内のタイミングで撮影された、安定した画質の撮影画像を提供することに貢献する撮影装置が望まれる。

そこで、一例として、図１に示す撮影装置１００を提供する。撮影装置１００は、操作部１０１と、撮影部１０２と、撮影状態情報取得部１０３と、記憶部１０４と、決定指示認識部１０５と、画像決定部１０６と、を備える。

撮影部１０２は、撮影候補画像を生成する（ステップＳ１００１）。撮影候補画像とは、撮影部１０２が被写体を撮影し、生成する画像を意味する。

そして、撮影状態情報取得部１０３は、撮影部１０２が撮影候補画像を生成した際の撮影状態に関する、撮影状態情報を取得する（ステップＳ１００２）。撮影状態情報とは、撮影候補画像の画質に影響する、撮影状態に関する情報を意味する。例えば、撮影状態情報は、撮影部１０２が撮影候補画像を生成した際に、焦点が決定されていたか否かの情報を含んでいても良い。

そして、記憶部１０４は、１又は２以上の撮影候補画像、及び各撮影候補画像に対応する撮影状態情報を蓄積する（ステップＳ１００３）。ここで、記憶部１０４は、画像決定部１０６が撮影画像を決定するまで、撮影候補画像、及び撮影状態情報の蓄積を継続する。

そして、決定指示認識部１０５は、操作部１０１に対する操作に基づいて、撮影画像の決定指示を認識する（ステップＳ１００４）。なお、操作部１０１は、ユーザの操作を受け付ける。つまり、決定指示認識部１０５は、ユーザの操作に基づいて、撮影画像の決定指示を認識する。例えば、操作部１０１はシャッターボタンであり、決定指示認識部１０５は、シャッターボタンが押下された場合、撮影画像を決定する決定指示が行われた、と認識しても良い。

そして、画像決定部１０６は、決定指示認識部１０５が決定指示を認識した場合、撮影状態情報に基づいて、記憶部が蓄積する撮影候補画像から、撮影画像を決定する。

例えば、画像決定部１０６は、決定指示認識部１０５がシャッターボタンの押下を認識した場合、撮影画像を決定しても良い。そして、その際、画像決定部１０６は、撮影状態情報に基づいて、画質が安定した撮影候補画像を、撮影画像として決定することが好ましい。さらに、画像決定部１０６は、シャッタータイムラグを抑制するように、記憶部１０４に蓄積された撮影候補画像から、撮影画像を選択し、決定することが好ましい。

従って、撮影装置１００は、所定の範囲内のタイミングで撮影された、安定した画質の撮影画像を提供することに貢献する。

［第１の実施形態］
第１の実施形態について、図面を用いてより詳細に説明する。

図２は、本実施形態に係る撮影装置１の全体構成の一例を示す平面図である。図２（ａ）は、撮影装置１の前面図である。図２（ｂ）は、撮影装置１の背面図である。なお、以下の説明では、撮影部１０の方向の面を前面とする。一方、以下の説明では、撮影部１０と相対する面を背面とする。

撮影装置１は、撮影部１０と、表示部２０と、操作部３０と、を含んで構成される。なお、図２は、撮影装置１を図２で示す形態に限定する趣旨ではない。例えば、撮影装置１は、携帯電話、スマートフォン、ゲーム機、タブレットＰＣ、ＰＤＡ（Personal Data Assistants：携帯情報端末）、デジタルカメラ、デジタルビデオカメラ等であっても良い。

撮影部１０は、撮影画像を生成する。具体的には、撮影部１０は、撮影部１０に相対する被写体を撮影し、被写体の画像を撮影候補画像として生成する。

表示部２０は、撮影部１０が取得した撮影候補画像を表示する。表示部２０は、液晶パネル、有機ＥＬ（Electro Luminescence）パネル等であっても良い。

操作部３０は、ユーザの操作を受け付ける操作キー等である。操作部３０はシャッターボタンを含む。操作部３０は、タッチセンサであっても良い。なお。図２は、操作部３０の位置を、撮影装置１の背面に限定する趣旨ではない。操作部３０は、撮影装置１の前面、又は側面に配置しても良い。

操作部３０は、表示部２０と一体化したタッチパネルであっても良い。そして、撮影装置１は、表示部２０に表示されるアイコン等に対する操作を、操作部３０に対する操作としても良い。その際、タッチパネルの構成、入力検出方法は各種あるが、その詳細は問わない。

図３は、撮影装置１の内部構成の一例を示すブロック図である。撮影装置１は、撮影部１０と、表示部２０と、操作部３０と、記憶部４０と、制御部５０と、を含んで構成される。

撮影部１０は、光学系１１と、撮像素子１２と、Ａ／Ｄ（Analog To Digital）変換器１３と、画像処理ＤＳＰ（Digital Signal Processing）１４と、画像処理用記憶部１５と、撮影制御部１６と、光学系制御部１７と、を含んで構成される。そして、光学系１１は、撮影レンズ１８と、絞り１９と、を含んで構成される。

制御部５０は、レンズ位置制御部５１と、撮影状態情報取得部５２と、決定指示認識部５３と、指示実行時刻推定部５４と、画像決定部５５と、を含んで構成される。図３は、簡単のため、本実施形態に係る撮影装置１に関係するモジュールを主に記載する。なお、表示部２０、及び操作部３０は、上述の通りであるため、詳細な説明を省略する。

撮影レンズ１８は、ズームレンズやフォーカスレンズを含む複数の光学系で構成される。図３では、簡単のため、撮影レンズ１８を一枚のレンズで示している。

撮像素子１２は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサ等によって構成される。光学系１１は、撮影レンズ１８で集光した光信号を、撮像素子１２の受光面に結像させる。そして、撮像素子１２は、受光した光信号を電気信号（アナログ信号）に変換する。

Ａ／Ｄ変換器１３は、撮像素子１２から出力されるアナログ信号をデジタル信号に変換する。そして、Ａ／Ｄ変換器１３は、変換されたデジタル信号を画像処理ＤＳＰ１４に入力する。

画像処理ＤＳＰ１４は、Ａ／Ｄ変換器１３から出力されるデジタル信号に対して、画像処理を行う。具体的には、画像処理ＤＳＰ１４は、階調補正、ガンマ補正、ホワイトバランス補正、ノイズ除去、輪郭補正等の処理を行う。ここで、画像処理用記憶部１５は、画像処理用の各種パラメータを記憶している。そして、画像処理ＤＳＰ１４は、画像処理が施されたデジタル信号を、撮影候補画像として出力する。以下の説明では画像処理ＤＳＰ１４が撮影候補画像を出力する時刻を、撮影候補画像の撮像時刻と呼ぶ。

撮影制御部１６は、制御部５０からの制御信号に基づいて、撮像素子１２、画像処理ＤＳＰ１４、光学系制御部１７を制御する。

光学系制御部１７は、光学系１１を制御する。例えば、光学系制御部１７は、撮影レンズ１８の位置、絞り１９等を制御する。

記憶部４０は、１又は２以上の撮影候補画像、及び各撮影候補画像に対応する撮影状態情報を蓄積する。具体的には、記憶部４０は、フレーム単位で、１又は２以上の撮影候補画像、及び各撮影候補画像に対応する撮影状態情報を蓄積する。撮影状態情報の詳細については、後述する。

なお、記憶部４０は、有限の撮影候補画像、撮影状態情報を記憶する。そのため、記憶部４０は、記憶する撮影候補画像、撮影状態情報の数が上限数を超える場合、古い撮影候補画像、撮影状態情報に、新たな撮影候補画像、撮影状態情報を上書きしても良い。つまり、記憶部４０は、所謂、リングバッファ構造として、撮影候補画像、撮影情報対情報を蓄積しても良い。

制御部５０は、撮影装置１の全体を制御すると共に、図３に示す各部を制御する。制御部５０は、撮影装置１に搭載されたコンピュータに、そのハードウェアを用いて、撮影装置１の処理を実行させるコンピュータプログラムにより実現することもできる。

制御部５０は、撮影部１０から撮影候補画像を取得する。ここで、制御部５０は、取得した撮影候補画像を表示部２０に表示させても良い。その場合、制御部５０は、表示部２０のサイズに表示可能となるように、サイズを変更した撮影候補画像を生成する。そして、制御部５０は、サイズ変更した撮影候補画像を表示部２０に表示する。ここで、表示部２０は、各フレームの撮影候補画像の出力と同期して、サイズ変更した撮影候補画像を動画として表示することが好ましい。そして、ユーザは、表示部２０に表示される撮影候補画像を見ながら、シャッターボタンを押下するタイミングを決定しても良い。なお、以下の説明では、制御部５０が各フレームの撮影候補画像を、動画として表示部２０に表示することを、ライブビューと呼ぶ。

レンズ位置制御部５１は、所定の位置に撮影レンズ１８を移動させる、撮影レンズ制御信号を撮影制御部１６に対して出力する。そして、撮影制御部１６は、撮影レンズ制御信号を入力し、光学系制御部１７に対して撮影レンズ制御信号を出力する。そして、光学系制御部１７は、撮影レンズ制御信号に基づいて、撮影レンズ１８を移動させる。ここで、レンズ位置制御部５１は、ＡＦ処理を実行しても良い。例えば、レンズ位置制御部５１は、特開２００７−２７１９８３号公報に記載された技術を用いて、ＡＦ処理を実行しても良い。なお、ＡＦ処理の実現方法は各種あるが、その詳細は問わない。

撮影状態情報取得部５２は、撮影部１０が撮影候補画像を生成した際の撮影状態に関する、撮影状態情報を取得する。

ここで、撮影状態情報の具体例について説明する。ただし、以下の説明は、撮影状態情報を以下の例示に限定する趣旨ではない。撮影状態情報は、撮影候補画像の画質に関する情報であれば、他の情報であっても良い。

例えば、光学系制御部１７がＡＦ処理を実行し、撮影レンズ１８を移動させている際に、撮影部１０が撮影候補画像を生成する場合を考える。その場合、撮影候補画像は、焦点の合わない画像となる恐れがある。そこで、撮影状態情報取得部５２は、撮影レンズ１８の移動の有無に関する情報を、撮影状態情報として取得しても良い。

なお、レンズ位置制御部５１は、ライブビュー中には、各フレームにおいて、コンティニュアスＡＦ処理を行っても良い。その場合、記憶部４０は、ライブビュー中の撮影レンズ１８の移動に関する情報を蓄積する。

決定指示認識部５３は、操作部３０に対する操作に基づいて、撮影画像の決定指示を認識する。例えば、シャッターボタンが押下された場合、決定指示認識部５３は、撮影画像を決定する決定指示が行われた、と認識しても良い。以下の説明では、決定指示認識部５３が、撮影画像を決定する決定指示を認識した時刻を、撮影開始時刻と呼ぶ。

指示実行時刻推定部５４は、決定指示認識部５３が決定指示を認識した撮影開始時刻から、所定の時間遡った時刻を、決定指示が行われた指示実行時刻として推定する。具体的には、指示実行時刻は、ユーザがシャッターボタンの押下等の操作を行った時刻が好ましい。

例えば、指示実行時刻推定部５４は、撮影開始時刻に取得された撮影候補画像から、所定のフレーム数（例えば、２フレーム）遡ったフレームに相当する時刻を、指示実行時刻として推定しても良い。なお、指示実行時刻から、撮影開始時刻までの時間は、撮影装置１の仕様に応じて異なる。そこで、制御部５０は、予め、指示実行時刻から、撮影開始時刻までの時間を算出しても良い。そして、制御部５０は、指示実行時刻から、撮影開始時刻までの時間を記憶部４０に記憶させても良い。

画像決定部５５は、撮影画像を決定するまで、撮影候補画像、及び撮影状態情報の記憶部への蓄積を継続する。つまり、画像決定部５５は、撮影画像を決定するまで、各フレームの撮影候補画像、及び各フレームの撮影候補画像に対応する、撮影状態情報の記憶部４０へ記憶する処理を繰り返す。なお、上述の通り、記憶部４０は、所謂、リングバッファ構造として、撮影候補画像、及び撮影情報対情報を蓄積しても良い。

そして、画像決定部５５は、決定指示認識部５３が決定指示を認識した場合、撮影状態情報に基づいて、記憶部４０が蓄積する撮影候補画像から、撮影画像を決定する。具体的には画像決定部５５は、画質レベルが所定の条件を満たす、撮影状態情報に対応する１又は２以上の撮影候補画像から、撮影画像を決定する。画質レベルとは、コントラスト値、撮影対象の被写体の解像度等、撮影候補画像の画質の良否を判断するための情報である。

上述の通り、撮影状態情報は、撮影レンズ１８の移動の有無を示す情報であっても良い。その場合、画像決定部５５は、撮影レンズ１８が停止した状態を示す撮影状態情報に対応する、１又は２以上の撮影候補画像から、撮影画像を決定しても良い。

そして、画像決定部５５は、記憶部４０に撮影画像を記憶させる。ここで、画像決定部５５は、表示部２０に撮影画像を表示しても良い。そして、画像決定部５５は、ユーザの操作に基づいて、撮影画像を記憶部４０に記憶させるか否かを決定しても良い。

より具体的には、画像決定部５５は、指示実行時刻に対して所定の範囲内の時刻で取得され、撮影状態情報が所定の条件を満たす、１又は２以上の撮影候補画像を撮影画像候補群として選択する。その際、画像決定部５５は、指示実行時刻以前の所定の範囲内の時刻で取得され、撮影状態情報が所定の条件を満たす、１又は２以上の撮影候補画像を撮影画像候補群として選択しても良い。または、画像決定部５５は、指示実行時刻後の所定の範囲内の時刻で取得され、撮影状態情報が所定の条件を満たす、１又は２以上の撮影候補画像を、撮影画像候補群として選択しても良い。

そして、画像決定部５５は、撮像時刻と、指示実行時刻との差分に基づいて、選択した撮影候補画像群から、撮影画像を決定する。ここで、画像決定部５５は、撮像時刻と、指示実行時刻と、の差分が小さい撮影候補画像ほど、優先して撮影画像として決定しても良い。

次に、本実施形態に係る撮影装置１の動作について説明する。

まず、撮影候補画像、及び撮影状態情報を蓄積する処理について説明する。

図４は、撮影候補画像、及び撮影状態情報を蓄積する処理の一例を示すフローチャートである。

まず、制御部５０は、撮影部１０を起動する。そして、ステップＳ１において、撮影部１０は、撮影候補画像を生成する。さらに、ステップＳ２において、撮影状態情報取得部５２は、撮影状態情報を取得する。

ステップＳ３において、制御部５０は、記憶部４０に撮影候補画像を蓄積する。さらに、ステップＳ４において、制御部５０は、撮影状態情報を撮影候補画像に対応付けて、記憶部４０に蓄積する。そして、ステップＳ５に遷移する。

上述の通り、記憶部４０は、リングバッファ構造として、撮影候補画像、及び撮影状態情報を記憶しても良い。その場合、記憶部４０は、撮影候補画像の数が上限数を超える場合、古い撮影候補画像に、新たな撮影候補画像を上書きして、撮影候補画像を蓄積しても良い。

ステップＳ５において、制御部５０は表示部２０のサイズに適合するように、撮影候補画像を変換した画像を生成する。そして、制御部５０は、サイズ変換した撮影候補画像を表示部２０に表示する（ステップＳ６）。ユーザは、表示部２０に表示される撮影候補画像を見ながら、シャッターボタンを押下するタイミングを決定する。

ステップＳ７において、決定指示を認識したか否かを、決定指示認識部５３は判断する。決定指示認識部５３が決定指示を認識した場合（ステップＳ７のＹｅｓ分岐）には、図５に示すステップＳ１０１に遷移する（ステップＳ８）。その際、指示実行時刻推定部５４は、撮影開始時刻から、所定の時間遡った時刻を、指示実行時刻として推定する。

一方、決定指示認識部５３が決定指示を認識しない場合（ステップＳ７のＮｏ分岐）には、ステップＳ１に戻り、撮影候補画像を生成し、蓄積する処理を継続する。つまり、制御部５０は、ライブビューを継続する。

次に、撮影画像を決定する処理について説明する。

図５は、撮影画像を決定する処理の一例を示すフローチャートである。

ここで、決定指示認識部５３が、決定指示を認識した（図４に示すステップＳ７のＹｅｓ分岐）とする。その場合、ステップＳ１０１において、撮影レンズ１８が停止状態を示す撮影状態情報に対応する、撮影候補画像が記憶されているか否かを、画像決定部５５は判断する。

例えば、上述の通り、光学系制御部１７は、ＡＦ処理を実行する場合、撮影レンズ１８を移動させる。そのため、光学系制御部１７が撮影レンズ１８の位置を調整している場合、撮影候補画像、撮影レンズ１８の位置に応じて変化する。そこで、ステップＳ１０１において、撮影レンズ１８が停止状態であるか否かを、画像決定部５５は判断しても良い。

撮影レンズ１８が停止状態を示す撮影状態情報に対応する、撮影候補画像が記憶されている場合（ステップＳ１０１のＹｅｓ分岐）には、ステップＳ１０２に遷移する。一方、撮影レンズが停止状態を示す撮影状態情報に対応する、撮影候補画像が記憶されていない場合（ステップＳ１０１のＮｏ分岐）には、ステップＳ１０４に遷移する。

ステップＳ１０２において、画像決定部５５は、撮影レンズ１８が停止状態を示す撮影状態情報に対応する、１又は２以上の撮影候補画像を選択する。

ステップＳ１０３において、画像決定部５５は、選択した撮影候補画像のうち、指示実行時刻に近い時刻に撮影された撮影候補画像を、優先して撮影画像として決定する。そして、撮影装置１は、撮影処理を終了する。

一方、撮影レンズ１８が停止状態を示す撮影状態情報に対応する、撮影候補画像が記憶されていない場合（ステップＳ１０１のＮｏ分岐）には、画像決定部５５は、指示実行時刻に最も近い時刻に撮影された撮影候補画像を、撮影画像として決定する（ステップＳ１０４）。そして、撮影装置１は、撮影処理を終了する。

図６は、撮影候補画像、及び撮影状態情報の一例を示す図である。図６（ａ）は、時刻ｔ１〜ｔ５に取得される撮影候補画像、及び撮影レンズ１８の移動状態を示す図である。図６（ｂ）は、撮影候補画像の蓄積の一例を示す図である。図６（ｃ）は、撮影レンズの移動状態を示す撮影状態情報の蓄積の一例を示す図である。

具体的には、撮影状態情報取得部５２は、図６（ａ）に示すように、撮影部１０が撮影候補画像を生成した際、各撮影候補画像に対応付けて、撮影状態情報（撮影レンズ１８の移動状態）を取得する。例えば、図６（ａ）の場合、撮影部１０が画像ａ２０１を取得した際、撮影レンズ１８の移動状態２１１は「移動中」である。また、図６（ａ）の場合、撮影部１０が画像ｂ２０２を取得した際、撮影レンズ１８の移動状態２１２は「停止中」である。このように、図６（ａ）に示す画像ａ２０１、画像ｂ２０２、画像ｃ２０３、画像ｄ２０４、画像ｅ２０５に対応する撮影レンズの移動状態２１１〜２１５は、「移動中」、「停止中」、「移動中」、「移動中」、「停止中」である。

そして、制御部５０は、図６（ｂ）に示すように、記憶部４０に撮影候補画像を蓄積する。例えば、時刻ｔ４の場合、記憶部４０は、時刻ｔ１〜時刻ｔ４においての撮影候補画像である、画像ａ２０１〜画像ｄ２０４を蓄積する。

そして、図６（ａ）に示すように、時刻ｔ５において、撮影部１０が、画像ｅ２０５を取得する。ここで、記憶部４０は、蓄積可能な撮影候補画像の上限数を４と設定しているとする。その場合、制御部５０は、時刻ｔ１〜時刻ｔ４内で最も古い撮影候補画像である、画像ａ２０１を、時刻ｔ５の撮影候補画像である画像ｅ２０５に置換する。つまり、記憶部４０は、時刻ｔ５において、画像ｅ２０５、画像ｂ２０２、画像ｃ２０３、画像ｄ２０４を蓄積する。

また、制御部５０は、図６（ｃ）に示すように、記憶部４０に撮影状態情報（撮影レンズ１８の移動状態）を蓄積する。例えば、時刻ｔ４の場合、記憶部４０は、時刻ｔ１〜時刻ｔ４においてのレンズの移動状態２１１〜２１４を示す撮影状態情報を蓄積する。具体的には、時刻ｔ４の場合、記憶部４０は、レンズの移動状態２１１「移動中」、レンズの移動状態２１２「停止中」、レンズの移動状態２１３「移動中」、レンズの移動状態２１４「移動中」を示す撮影状態情報を蓄積する。

そして、時刻ｔ５において、記憶部４０は、蓄積する撮影候補画像に対応する、撮影状態情報を蓄積する。具体的には、時刻ｔ５において、記憶部４０は、レンズの移動状態２１５「停止中」、レンズの移動状態２１２「停止中」、レンズの移動状態２１３「移動中」、レンズの移動状態２１４「移動中」を示す撮影状態情報を蓄積する。

ここで、シャッターボタンが押下され、指示実行時刻推定部５４は、時刻ｔ３を指示実行時刻として推定したとする。

その場合、まず、画像決定部５５は、撮影状態情報が所定の条件を満たす、１又は２以上の撮影候補画像を選択する。図６（ａ）〜（ｃ）の場合、画像決定部５５は、レンズの移動状態が「停止中」である撮影状態に対する、１又は２以上の候補画像を選択する。具体的には、画像決定部５５は、レンズの移動状態２１２に対応する、画像ｂ２０２、及び画像ｅ２０５を選択する。つまり、画像決定部５５は、焦点が合っている画像等、画質が安定した、１又は２以上の撮影候補画像を選択する。

そして、画像決定部５５は、選択した撮影候補画像（画像ｂ２０２、及び画像ｅ２０５）のうち、指示実行時刻ｔ３に近い時刻に撮影された撮影候補画像を、優先して撮影画像として決定する。具体的には、画像決定部５５は、時刻ｔ２に撮影された撮影候補画像である、画像ｂ２０２を撮影画像として決定する。

その結果、画像決定部５５は、シャッターボタンが押下された時刻に、可能な限り近い時刻に撮影され、画質が安定した撮影候補画像を、撮影画像として決定できる。

次に、本実施形態に係る撮影装置１に対する比較処理として、画像決定部５５は、撮影状態情報を考慮せず、撮影画像を決定する処理の一例について説明する。具体的には、比較処理においては、画像決定部５５は撮影状態情報を考慮せず、指示実行時刻に撮影された撮影候補画像を、撮影画像として決定するとする。

図７は、撮影候補画像、及び撮影状態情報の一例を示す図である。図７（ａ）は、時刻ｔ１１〜ｔ１５に取得される撮影候補画像、及び撮影レンズ１８の移動状態を示す図である。図７（ｂ）は、撮影候補画像の蓄積の一例を示す図である。

具体的には、図７（ａ）に示すように、撮影部１０が撮影候補画像を生成した際、撮影状態情報取得部５２は、各撮影候補画像に対応付けて、撮影状態情報（撮影レンズ１８の移動状態）を取得する。図７（ａ）に示す画像ａ３０１、画像ｂ３０２、画像ｃ３０３、画像ｄ３０４、画像ｅ３０５に対応する撮影レンズの移動状態３１１〜３１５は、「移動中」、「停止中」、「移動中」、「移動中」、「停止中」である。

そして、記憶部４０は、図７（ｂ）に示すように、撮影候補画像を蓄積する。詳細は、図６（ｂ）と同様であるため、詳細な説明は省略する。

ここで、シャッターボタンが押下され、指示実行時刻推定部５４は、時刻ｔ１３を指示実行時刻として推定したとする。

その場合、本比較処理においては、画像決定部５５は、指示実行時刻ｔ１３において取得された画像ｃ３０３を、撮影画像として決定する。しかし、図７（ａ）に示すように、撮影部１０が画像ｃ３０３を取得した際、レンズの移動状態３１３は「移動中」である。レンズが移動中である場合、画像ｃ３０３は焦点が合っていない画像である可能性がある。つまり、画像決定部５５が撮影状態情報を考慮せず、撮影画像が決定する場合、不安定な画質の画像を、撮影画像として決定する恐れがある。

以上のように、本実施形態に係る撮影装置１は、２以上の撮影候補画像を蓄積し、蓄積した撮影候補画像から、所定の条件を満たす画質の画像を、撮影画像として決定する。さらに、本実施形態に係る撮影装置１は、ユーザがシャッターボタンを押下したタイミングに、可能な限り近いタイミングで撮影された撮影候補画像を撮影画像として決定する。従って、本実施形態に係る撮影装置１は、所定の範囲内のタイミングで撮影された、安定した画質の撮影画像を提供することに貢献する。

［第２の実施形態］
第２の実施形態について、図面を用いて詳細に説明する。

本実施形態は、撮影候補画像のコントラスト値に基づいて、撮影画像を決定する形態である。なお、本実施形態における説明では、第１の実施形態と重複する部分の説明は省略する。さらに、本実施形態における説明では、第１の実施形態と同一の構成要素には、同一の符号を付し、その説明を省略する。

本実施形態に係る撮影装置１の内部構成は、図３に示す撮影装置１の内部構成の通りである。

光学系制御部１７がＡＦ処理を実行する場合、焦点が合うように、撮影レンズ１８を移動させる。ここで、ＡＦ処理においては、撮影候補画像の焦点が合っているかを判定する際に、コントラスト値が用いられる場合が多い。そして、制御部５０は、コントラスト値が高いほど、撮影候補画像の焦点が合っていると判定できる。

そこで、本実施形態に係る撮影状態情報取得部５２は、撮影候補画像のコントラスト値を算出する。そして、撮影状態情報取得部５２は、算出したコントラスト値を、撮影状態情報として決定する。

そして、本実施形態に係る記憶部４０は、１又は２以上の撮影候補画像、及び各撮影候補画像のコントラスト値を蓄積する。

そして、本実施形態に係る画像決定部５５は、所定の閾値を超えるコントラスト値を示す撮影状態情報に対応する、１又は２以上の撮影候補画像から、撮影画像を決定する。

次に、本実施形態に係る撮影装置１の動作について説明する。

図８は、撮影画像を決定する処理の一例を示すフローチャートである。

ここで、決定指示認識部５３が、決定指示が行われたと判定した（図４に示すステップＳ７のＹｅｓ分岐）とする。その場合、ステップＳ２０１において、所定の閾値を超えるコントラスト値を示す撮影状態情報に対応する、撮影候補画像が記憶されているか否かを、画像決定部５５は判断する。

所定の閾値を超えるコントラスト値を示す撮影状態情報に対応する、撮影候補画像が記憶されている場合（ステップＳ２０１のＹｅｓ分岐）には、ステップＳ２０２に遷移する。一方、所定の閾値を超えるコントラスト値を示す撮影状態情報に対応する、撮影候補画像が記憶されていない場合（ステップＳ２０１のＮｏ分岐）には、ステップＳ２０４に遷移する。

ステップＳ２０２において、画像決定部５５は、所定の閾値を超えるコントラスト値を示す撮影状態情報に対応する、１又は２以上の撮影候補画像を選択する。

ステップＳ２０３において、画像決定部５５は、選択した撮影候補画像のうち、指示実行時刻に近い時刻に撮影された撮影候補画像を、優先して撮影画像として決定する。そして、撮影装置１は、撮影処理を終了する。

一方、所定の閾値を超えるコントラスト値を示す撮影状態情報に対応する、撮影候補画像が記憶されていない場合（ステップＳ２０１のＮｏ分岐）には、画像決定部５５は、指示実行時刻に最も近い時刻に撮影された撮影候補画像を、撮影画像として決定する（ステップＳ２０４）。そして、撮影装置１は、撮影処理を終了する。

図９は、撮影候補画像、及び撮影状態情報の一例を示す図である。図９（ａ）は、時刻ｔ２１〜ｔ２５に取得される撮影候補画像、及びコントラスト値を示す図である。図９（ｂ）は、撮影候補画像の蓄積の一例を示す図である。図９（ｃ）は、コントラスト値の蓄積の一例を示す図である。

具体的には、撮影状態情報取得部５２は、図９（ａ）に示すように、撮影部１０が撮影候補画像を生成した際、各撮影候補画像に対応付けて、撮影状態情報（コントラスト値）を取得する。図９（ａ）の場合、画像ａ４０１、画像ｂ４０２、画像ｃ４０３、画像ｄ４０４、画像ｅ４０５に対応する、コントラスト値４１１〜４１５は、「１０」、「４０」、「３０」、「２０」、「４０」である。

そして、記憶部４０は、図９（ｂ）に示すように、撮影候補画像を蓄積する。詳細は、図６（ｂ）と同様であるため、詳細な説明は省略する。

また、制御部５０は、図９（ｃ）に示すように、記憶部４０に撮影状態情報（コントラスト値）を蓄積する。例えば、時刻ｔ２４の場合、記憶部４０は、時刻ｔ２１〜時刻ｔ２４においてのコントラスト値を示す撮影状態情報を蓄積する。具体的には、時刻ｔ２４の場合、記憶部４０は、コントラスト値４１１「１０」、コントラスト値４１２「４０」、コントラスト値４１３「３０」、コントラスト値４１４「２０」を示す撮影状態情報を蓄積する。

ここで、シャッターボタンが押下され、指示実行時刻推定部５４は、時刻ｔ２３を指示実行時刻として推定したとする。

その場合、まず、画像決定部５５は、所定の閾値を超えるコントラスト値を示す撮影状態情報に対応する、１又は２以上の撮影候補画像を選択する。例えば、画像決定部５５は、コントラスト値が４０を超える撮影状態情報に対応する、１又は２以上の撮影候補画像を選択するとする。その場合、画像決定部５５は、画像ｂ４０２、及び画像ｅ４０５を選択する。

そして、画像決定部５５は、選択した撮影候補画像（画像ｂ４０２、及び画像ｅ４０５）のうち、指示実行時刻ｔ２３に近い時刻に撮影された撮影候補画像を、撮影画像として決定する。具体的には、画像決定部５５は、時刻ｔ２２に撮影された撮影候補画像である、画像ｂ４０２を撮影画像として決定する。

以上のように、本実施形態に係る撮影装置１は、撮影候補画像のコントラスト値に基づいて、撮影画像を決定する。従って、本実施形態に係る撮影装置１は、所定の範囲内のタイミングで撮影された、より一層、安定した画質の撮影画像を提供することに貢献する。

上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。

（付記１）上記第１の視点に係る撮影装置の通りである。

（付記２）前記決定指示認識部が前記決定指示を認識した撮影開始時刻から、所定の時間遡った時刻を、前記決定指示が行われた指示実行時刻として推定する指示実行時刻推定部を備え、前記画像決定部は、前記指示実行時刻に対して所定の範囲内の時刻で取得され、前記撮影状態情報が所定の条件を満たす、１又は２以上の前記撮影候補画像を、撮影候補画像群として選択する付記１に記載の撮影装置。

（付記３）前記画像決定部は、前記撮影候補画像の撮像時刻と、前記指示実行時刻との差分に基づいて、前記撮影候補画像群から、前記撮影画像を決定する付記２に記載の撮影装置。

（付記４）前記画像決定部は、前記撮像時刻と、前記指示実行時刻と、の差分が小さい前記撮影候補画像ほど、優先して撮影画像として決定する付記３に記載の撮影装置。

（付記５）前記画像決定部は、前記撮影画像を決定するまで、前記撮影候補画像、及び前記撮影候補画像の前記記憶部への蓄積を継続する付記１乃至４のいずれか一に記載の撮影装置。

（付記６）前記撮影状態情報は、撮影候補画像の画質レベルに関する情報を含み、前記画像決定部は、前記画質レベルが所定の条件を満たす、前記撮影状態情報に対応する１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記１乃至５のいずれか一に記載の撮影装置。

（付記７）所定の位置に撮影レンズを移動させる、撮影レンズ制御信号を出力するレンズ位置制御部を備え、前記画像決定部は、前記撮影レンズが停止した状態を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記１乃至６のいずれか一に記載の撮影装置。

（付記８）前記画像決定部は、所定の閾値を超えるコントラスト値を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記１乃至７のいずれか一に記載の撮影装置。

（付記９）上記第２の視点に係る撮影装置の制御方法の通りである。

（付記１０）前記決定指示が認識された撮影開始時刻から、所定の時間遡った時刻を、前記決定指示が行われた指示実行時刻として推定する工程を含み、前記画像決定工程において、前記指示実行時刻に対して所定の範囲内の時刻で取得され、前記撮影状態情報が所定の条件を満たす、１又は２以上の前記撮影候補画像を、撮影候補画像群として選択する付記９に記載の撮影装置の制御方法。

（付記１１）前記画像決定工程において、前記撮影候補画像の撮像時刻と、前記指示実行時刻との差分に基づいて、前記撮影候補画像群から、前記撮影画像を決定する付記１０に記載の撮影装置の制御方法。

（付記１２）前記画像決定工程において、前記撮像時刻と、前記指示実行時刻と、の差分が小さい前記撮影候補画像ほど、優先して撮影画像として決定する付記１１に記載の撮影装置の制御方法。

（付記１３）前記画像決定工程において、前記撮影画像を決定するまで、前記撮影候補画像、及び前記撮影候補画像の蓄積を継続する付記９乃至１２のいずれか一に記載の撮影装置の制御方法。

（付記１４）前記画像決定工程において、画質レベルが所定の条件を満たす、前記撮影状態情報に対応する１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記９乃至１３のいずれか一に記載の撮影装置の制御方法。

（付記１５）所定の位置に撮影レンズを移動させる、撮影レンズ制御信号を出力する工程を含み、前記画像決定工程において、前記撮影レンズが停止した状態を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記９乃至１４のいずれか一に記載の撮影装置の制御方法。

（付記１６）前記画像決定工程において、所定の閾値を超えるコントラスト値を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記９乃至１５のいずれか一に記載の撮影装置の制御方法。

（付記１７）上記の第３の視点に係るプログラムの通りである。

（付記１８）前記決定指示が認識された撮影開始時刻から、所定の時間遡った時刻を、前記決定指示が行われた指示実行時刻として推定する処理を含み、前記画像決定処理において、前記指示実行時刻に対して所定の範囲内の時刻で取得され、前記撮影状態情報が所定の条件を満たす、１又は２以上の前記撮影候補画像を、撮影候補画像群として選択する付記１７に記載のプログラム。

（付記１９）前記画像決定処理において、前記撮影候補画像の撮像時刻と、前記指示実行時刻との差分に基づいて、前記撮影候補画像群から、前記撮影画像を決定する付記１８に記載のプログラム。

（付記２０）前記画像決定処理において、前記撮像時刻と、前記指示実行時刻と、の差分が小さい前記撮影候補画像ほど、優先して撮影画像として決定する付記１９に記載のプログラム。

（付記２１）前記画像決定処理において、前記撮影画像を決定するまで、前記撮影候補画像、及び前記撮影候補画像の蓄積を継続する付記１７乃至２０のいずれか一に記載のプログラム。

（付記２２）前記画像決定処理において、画質レベルが所定の条件を満たす、前記撮影状態情報に対応する１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記１７乃至２１のいずれか一に記載のプログラム。

（付記２３）所定の位置に撮影レンズを移動させる、撮影レンズ制御信号を出力する処理を含み、前記画像決定処理において、前記撮影レンズが停止した状態を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記１７乃至２２のいずれか一に記載のプログラム。

（付記２４）前記画像決定処理において、所定の閾値を超えるコントラスト値を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する付記１７乃至２３のいずれか一に記載のプログラム。

なお、引用した上記の特許文献の開示は、本書に引用をもって繰り込むものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の示要素（各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む）の多様な組み合わせ、ないし、選択が可能である。すなわち、本明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。

１、１００ 撮影装置
１０、１０２ 撮影部
１１ 光学系
１２ 撮像素子
１３ Ａ／Ｄ変換器
１４ 画像処理ＤＳＰ
１５ 画像処理用記憶部
１６ 撮影制御部
１７ 光学系制御部
１８ 撮影レンズ
１９ 絞り
２０ 表示部
３０、１０１ 操作部
４０、１０４ 記憶部
５０ 制御部
５１ レンズ位置制御部
５２、１０３ 撮影状態情報取得部
５３、１０５ 決定指示認識部
５４ 指示実行時刻推定部
５５、１０６ 画像決定部
２１１〜２１５、３１１〜３１５ 撮影レンズの移動状態
２０１、３０１、４０１ 画像ａ
２０２、３０２、４０２ 画像ｂ
２０３、３０３、４０３ 画像ｃ
２０４、３０４、４０４ 画像ｄ
２０５、３０５、４０５ 画像ｅ
４１１〜４１５ コントラスト値

Claims (10)

1. ユーザの操作を受け付ける操作部と、
   撮影候補画像を生成する撮影部と、
   前記撮影部が前記撮影候補画像を生成した際の撮影状態に関する、撮影状態情報を取得する撮影状態情報取得部と、
   １又は２以上の前記撮影候補画像、及び前記各撮影候補画像に対応する前記撮影状態情報を蓄積する記憶部と、
   前記操作部に対する操作に基づいて、撮影画像の決定指示を認識する決定指示認識部と、
   前記決定指示認識部が前記決定指示を認識した場合、前記撮影状態情報に基づいて、前記記憶部が蓄積する前記撮影候補画像から、前記撮影画像を決定する画像決定部と、
   を備えることを特徴とする撮影装置。
2. 前記決定指示認識部が前記決定指示を認識した撮影開始時刻から、所定の時間遡った時刻を、前記決定指示が行われた指示実行時刻として推定する指示実行時刻推定部を備え、
   前記画像決定部は、前記指示実行時刻に対して所定の範囲内の時刻で取得され、前記撮影状態情報が所定の条件を満たす、１又は２以上の前記撮影候補画像を、撮影候補画像群として選択する請求項１に記載の撮影装置。
3. 前記画像決定部は、前記撮影候補画像の撮像時刻と、前記指示実行時刻との差分に基づいて、前記撮影候補画像群から、前記撮影画像を決定する請求項２に記載の撮影装置。
4. 前記画像決定部は、前記撮像時刻と、前記指示実行時刻と、の差分が小さい前記撮影候補画像ほど、優先して撮影画像として決定する請求項３に記載の撮影装置。
5. 前記画像決定部は、前記撮影画像を決定するまで、前記撮影候補画像、及び前記撮影状態情報の前記記憶部への蓄積を継続する請求項１乃至４のいずれか一に記載の撮影装置。
6. 前記撮影状態情報は、撮影候補画像の画質レベルに関する情報を含み、
   前記画像決定部は、前記画質レベルが所定の条件を満たす、前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する請求項１乃至５のいずれか一に記載の撮影装置。
7. 所定の位置に撮影レンズを移動させる、撮影レンズ制御信号を出力するレンズ位置制御部を備え、
   前記画像決定部は、前記撮影レンズが停止した状態を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する請求項１乃至６のいずれか一に記載の撮影装置。
8. 前記画像決定部は、所定の閾値を超えるコントラスト値を示す前記撮影状態情報に対応する、１又は２以上の前記撮影候補画像から、前記撮影画像を決定する請求項１乃至７のいずれか一に記載の撮影装置。
9. ユーザの操作を受け付ける操作部を備える撮影装置を制御する制御方法であって、
   撮影候補画像を生成する工程と、
   前記撮影候補画像が取得された際の撮影状態に関する、撮影状態情報を取得する工程と、
   １又は２以上の前記撮影候補画像、及び前記各撮影候補画像に対応する前記撮影状態情報を蓄積する工程と、
   撮影画像の決定指示を認識する工程と、
   前記決定指示が認識された場合、前記撮影状態情報に基づいて、前記撮影候補画像から、前記撮影画像を決定する画像決定工程と、
   を含むことを特徴とする撮影装置の制御方法。
10. ユーザの操作を受け付ける操作部を備える撮影装置を制御するコンピュータに実行させるプログラムであって、
    撮影候補画像を生成する処理と、
    前記撮影候補画像が取得された際の撮影状態に関する、撮影状態情報を取得する処理と、
    １又は２以上の前記撮影候補画像、及び前記各撮影候補画像に対応する前記撮影状態情報を蓄積する処理と、
    撮影画像の決定指示を認識する処理と、
    前記決定指示が認識された場合、前記撮影状態情報に基づいて、前記撮影候補画像から、前記撮影画像を決定する画像決定処理と、
    を実行するプログラム。

Images