JP2011166391A - 撮像装置 - Google Patents

Abstract

【課題】 被写体の状態に基づいて、記録媒体に記録される連写画像の画質を制御することができる撮像装置を提供する。
【解決手段】 被写体からの光を撮像する撮像素子６と、前記撮像素子６により前記被写体を連続撮影している間、各撮影画像における前記被写体の状態を認識する認識部４と、前記認識部４により認識された前記被写体の状態が、所定状態であるか否かを判別する判別部４と、前記判別部４による判別結果に基づいて、前記被写体を連続撮影して得られた複数の前記撮影画像を記録媒体１２に記録する際の画質を制御する制御部４とを備える。
【選択図】 図１

Description

本発明は、撮像装置に関するものである。

メモリカードに記録される連写画像の画質を制御する電子カメラが提案されている（例えば、特許文献１参照）。特許文献１記載の電子カメラでは、まず、ファーストレリーズによる合焦が終了し連続撮影が開始されると、複数の低画質の画像をメモリに記憶し、セカンドレリーズによる撮影指示がなされた時の画像を最高画質でメモリに記憶し、セカンドレリーズ以降の画像を最高画質から徐々に画質を下げてメモリに記憶する。そして、セカンドレリーズ時より所定時間前からの複数の画像を低画質で、セカンドレリーズ時の画像を最高画質で、セカンドレリーズ以降に撮影された複数の画像を高画質から低画質へと変化させてメモリカードに記録する。

特開２００１−２５７９７７号公報

ところで、上述の特許文献１記載の電子カメラでは、レリーズボタンの押下（セカンドレリーズ）による撮影指示時が連続撮影している間で最も重要なシーンであることを前提としているが、重要なシーンのタイミングを予測するのは困難であるため、重要なシーンの撮影タイミングを逃すこともあり、レリーズボタンの押下による撮影指示時が重要なシーンとならない場合もあった。したがって、セカンドレリーズ前に重要なシーンがあった場合等、重要なシーンの画像を高画質で記録することができない場合があった。一方、連続撮影されたすべての画像を高画質で記録すると、メモリカードへの記録可能時間が短くなり、重要なシーンの前にメモリカードの残容量が不足し、連続撮影が終了する場合があった。

本発明の目的は、被写体の状態に基づいて、記録媒体に記録される連写画像の画質を制御することができる撮像装置を提供することである。

本発明は以下のような解決手段により上記課題を解決する。なお、理解を容易にするために、本発明の実施の形態に対応する符号を付して説明するが、本発明はこれに限定されるものではない。

本発明の撮像装置は、被写体からの光を撮像する撮像素子（６）と、前記撮像素子（６）により前記被写体を連続撮影している間、各撮影画像における前記被写体の状態を認識する認識部（４）と、前記認識部（４）により認識された前記被写体の状態が、所定状態であるか否かを判別する判別部（４）と、前記判別部（４）による判別結果に基づいて、前記被写体を連続撮影して得られた複数の前記撮影画像を記録媒体（１２）に記録する際の画質を制御する制御部（４）とを備えることを特徴とする。

本発明の撮像装置によれば、被写体の状態に基づいて、記録媒体に記録される連写画像の画質を制御することができる。

実施の形態に係るカメラのシステム構成を示すブロック図である。 第１の実施の形態に係るカメラにおいて連続撮影する際の処理について説明するためのフローチャートである。 第１の実施の形態に係るカメラにおいて連続撮影する際の処理について説明するためのタイムチャートである。 レリーズボタン半押し後において画質制御する際の処理について説明するためのフローチャートである。 被写体に対して合焦した後において画質制御する際の処理について説明するためのフローチャートである。 レリーズボタン全押し後において画質制御する際の処理について説明するためのフローチャートである。 第１の実施の形態に係るカメラにおいて連続撮影する際の他の処理について説明するためのタイムチャートである。 第２の実施の形態に係るカメラにおいて連続撮影する際の処理について説明するためのフローチャートである。 電車シーンにおいて連続撮影する際の処理について説明するためのタイムチャートである。 球技シーンにおいて連続撮影する際の処理について説明するためのタイムチャートである。

以下、図面を参照して、本発明の第１の実施の形態に係る撮像装置としてのカメラについて説明する。図１は、第１の実施の形態に係るカメラ２のシステム構成を示すブロック図である。図１に示すように、カメラ２は、制御部４、撮像素子６、バッファメモリ８、画像処理部１０、記録媒体１２、表示部１４、及び操作部１６を備えて構成されている。

制御部４は、ＣＰＵ等により構成され、カメラ２の各部を統括的に制御する。この実施の形態では、被写体を連続撮影している間、各撮影画像における被写体の状態を認識し、認識された被写体の状態が所定状態であるか否かを判別し、判別結果に基づいて各撮影画像を記録媒体１２に記録する際の画質を制御する。

撮像素子６は、ＣＣＤまたはＣＭＯＳ等により構成され、図示しない撮影レンズを透過した被写体からの被写体光を撮像する。バッファメモリ８は、撮像素子６からの撮像信号に基づき作成された画像データを一時的に格納する。画像処理部１０は、バッファメモリ８に格納されている画像データに対して、ホワイトバランス調整、階調補正、画像圧縮等の画像処理を行う。

記録媒体１２は、カメラ２に設けられた記録媒体差込口（図示せず）に着脱可能に装着される可搬性を有する記録媒体である。記録媒体１２には、撮像素子６から出力された撮像信号に基づき生成され、画像処理部１０により画像処理された画像データが撮影日時、絞り値、シャッタースピード等、その他画像データに関する情報と共に記録されている。

表示部１４は、撮像素子６から出力された撮像信号に基づくスルー画像、記録媒体１２に記録されている画像データから形成される画像、及び記録媒体１２に記録されている画像データに関する情報等を表示する。操作部１６は、カメラ２の電源をオンオフする電源スイッチ（図示せず）、撮影等を指示するレリーズボタン（図示せず）、メニュー項目等の選択やカーソルを移動させるための十字操作キー（図示せず）、各種選択項目に対する選択確定操作を行うためのＯＫ（決定）ボタン（図示せず）等を含んで構成されている。

この実施の形態に係るカメラ２では、連続撮影する際に、被写体の状態を認識し、認識した被写体の状態が所定状態であると判別されたときに撮像された画像を高画質で記録媒体１２に記録し、認識した被写体の状態が所定状態でないと判別されたときに撮像された画像を低画質で記録媒体１２に記録する。特に被写体が人物である場合には、公知の顔認識技術を用いて人物の顔認識を行い、顔認識された人物の顔の表情が所定状態であるか否か、例えば人物の顔が笑顔であるか否かを判別し、判別結果に基づいて連続撮影された各画像を記録媒体１２に記録する際の画質を制御する。

以下、図２に示すフローチャート及び図３に示すタイムチャートを参照して、この実施の形態に係るカメラ２において連続撮影する際の処理について説明する。

まず、制御部４は、連続撮影モードに設定されている状態で、ユーザーによりレリーズボタンが半押しされたか否かを判別する（ステップＳ１０）。例えば図３に示す時間ｔ０に、ユーザーによりレリーズボタンが半押しされると（ステップＳ１０、Ｙｅｓ）、制御部４は、被写体の連続撮影の準備（この実施の形態では、合焦処理）の指示がなされたと判断し、オートフォーカス機能を用いて被写体に対して合焦させる合焦処理を開始する。そして、撮像素子６からの撮像信号に基づき作成される画像データ（図３に示す画像ｇ１に基づく画像データ等）のバッファメモリ８への格納を開始し、その画像データに対する記録媒体１２への記録制御及び画質制御を行う（ステップＳ１１）。

図４は、ステップＳ１１において画質制御する際の処理について説明するためのフローチャートである。図４に示すように、制御部４は、被写体である人物の顔領域を検出する顔認識を行い（ステップＳ２０）、例えばステップＳ２０において顔認識された人物の顔領域から検出される目や口の大きさや形から、その人物の顔が笑顔であるか否かを判別する（ステップＳ２１）。そして、ステップＳ２１において笑顔であると判別された場合には（ステップＳ２１、Ｙｅｓ）、制御部４は、ベストショットのタイミングであると判断し、そのときバッファメモリ８に格納された画像データを高画質で記録媒体１２に記録する（ステップＳ２２）。例えば図３に示すように、時間ｔ１に笑顔であると判別された場合には、時間ｔ１に対応する笑顔の画像ｇ２に基づく画像データを高画質で記録する。なお、画質は、画像データを記録媒体１２に記録する際の画素数、画像処理部１０において画像圧縮する際の画像圧縮率、ノイズ低減処理、画像加工処理の少なくとも１つにより決定され、ステップＳ２２において記録される画像データの画質（高画質）は、予め設定されている。

一方、ステップＳ２１において笑顔でないと判別された場合には（ステップＳ２１、Ｎｏ）、制御部４は、ベストショットのタイミングでないと判断し、画像データを記録媒体１２に記録しない。即ち、制御部４は、ステップＳ２１において笑顔であると判別された場合のみ（ステップＳ２１、Ｙｅｓ）、画像データを記録媒体１２に記録する。

次に、制御部４は、被写体に対して合焦したか否かを判別する（図２のステップＳ１２）。ステップＳ１２において合焦していないと判別された場合には（ステップＳ１２、Ｎｏ）、制御部４は、ステップＳ１１の処理（図４に示すステップＳ２０〜Ｓ２２の処理）に戻り、ステップＳ１２において合焦したと判別されるまでステップＳ１１の処理を繰り返す。即ち、合焦されるまでの間、人物の顔が笑顔であると判別される度に、そのときの画像データを高画質で記録する。

一方、ステップＳ１２において（図３に示す時間ｔ２に）合焦したと判別された場合には（ステップＳ１２、Ｙｅｓ）、制御部４は、連続撮影を開始する（ステップＳ１３）。即ち、図３に示すように、時間ｔ２からバッファメモリ８に格納される画像データ（図３に示す画像ｇ３に基づく画像データ等）の記録媒体１２への記録を開始する。そして、制御部４は、記録媒体１２に記録される画像データの画質制御を行う（ステップＳ１４）。

図５は、ステップＳ１４において画質制御する際の処理について説明するためのフローチャートである。図５に示すように、制御部４は、図４に示すステップＳ２０及びＳ２１と同様に、被写体である人物の顔領域を検出する顔認識を行い（ステップＳ３０）、ステップＳ３０において顔認識された人物の顔が笑顔であるか否かを判別する（ステップＳ３１）。ステップＳ３１において笑顔であると判別された場合には（ステップＳ３１、Ｙｅｓ）、制御部４は、そのときバッファメモリ８に格納された画像データを高画質で（この実施の形態では、図４に示すステップＳ２２において記録された画像データの画質と同画質で）、記録媒体１２に記録する（ステップＳ３２）。即ち、人物の顔が笑顔でないと判別されたときの画像データを記録媒体１２に記録する際の画質より、人物の顔が笑顔であると判別されたときの画像データの画質を高くして記録する。

一方、ステップＳ３１において笑顔でないと判別された場合には（ステップＳ３１、Ｎｏ）、制御部４は、そのときバッファメモリ８に格納された画像データ（図３に示す画像ｇ３に基づく画像データ等）を低画質で記録媒体１２に記録する（ステップＳ３３）。即ち、ステップＳ３２において画像データを記録する際の画質よりも低い画質で画像データを記録する。なお、ステップＳ３３において記録される画像データの画質（低画質）は、予め設定されている。

次に、制御部４は、ユーザーによりレリーズボタンが全押しされたか否か、即ち連続撮影開始の指示（連続撮影により撮影された複数の画像データの記録媒体１２への記録の指示）がなされたか否かを判別する（ステップＳ１５）。ステップＳ１５においてレリーズボタンが全押しされていないと判別された場合には（ステップＳ１５、Ｎｏ）、制御部４は、ステップＳ１４の処理（図５に示すステップＳ３０〜Ｓ３３の処理）に戻り、ステップＳ１５においてレリーズボタンが全押しされたと判別されるまでステップＳ１４の処理を繰り返す。即ち、被写体に対して合焦してからユーザーによりレリーズボタンが全押しされるまでの間、人物の顔が笑顔であると判別されたときの画像データを高画質で記録し、それ以外（人物の顔が笑顔でないと判別されたとき）の画像データを低画質で記録する。なお、図３では、被写体に対して合焦してからレリーズボタンが全押しされるまでの間（時間ｔ２から時間ｔ３までの間）、人物の顔が笑顔であると判別されることがなかった場合を例に挙げている。

一方、ステップＳ１５において（図３に示す時間ｔ３に）レリーズボタンが全押しされたと判別された場合には（ステップＳ１５、Ｙｅｓ）、制御部４は、連続撮影開始の指示（連続撮影により撮影された複数の画像データの記録媒体１２への記録の指示）がなされたと判断し、図３に示すように、そのとき（時間ｔ３に）バッファメモリ８に格納された画像データ（画像ｇ４に基づく画像データ）を高画質で、記録媒体１２に記録する（ステップＳ１６）。即ち、人物の顔が笑顔であると判別されたときの画像データを記録媒体１２に記録する際の画質と同一、または人物の顔が笑顔であると判別されたときの画像データを記録媒体１２に記録する際の画質より高くして記録する。なお、ステップＳ１６において記録される画像データの画質も予め設定されている。そして、制御部４は、その後、記録媒体１２に記録される画像データの画質制御を行う（ステップＳ１７）。

図６は、ステップＳ１７において画質制御する際の処理について説明するためのフローチャートである。図６に示すように、制御部４は、図４に示すステップＳ２０及びＳ２１と同様に、被写体である人物の顔領域を検出する顔認識を行い（ステップＳ４０）、ステップＳ３０において顔認識された人物の顔が笑顔であるか否かを判別する（ステップＳ４１）。ステップＳ４１において笑顔であると判別された場合には（ステップＳ４１、Ｙｅｓ）、制御部４は、そのときバッファメモリ８に格納された画像データを高画質で（この実施の形態では、図４に示すステップＳ２２において記録された画像データの画質と同画質で）、記録媒体１２に記録する（ステップＳ４２）。例えば図３に示すように、時間ｔ４に笑顔であると判別された場合には、時間ｔ４のときの画像ｇ６に基づく画像データを高画質で記録する。即ち、人物の顔が笑顔でないと判別されたときの画像データを記録媒体１２に記録する際の画質より、人物の顔が笑顔であると判別されたときの画像データの画質を高くして記録する。

一方、ステップＳ４１において笑顔でないと判別された場合には（ステップＳ４１、Ｎｏ）、制御部４は、そのときバッファメモリ８に格納された画像データ（画像ｇ５，ｇ７に基づく画像データ等）を所定の画質で記録媒体１２に記録する（ステップＳ４３）。具体的には、図３に示すように、レリーズボタンが全押しされてから（時間ｔ３から）画質を徐々に下げて画像データを記録する。画質の下げ幅については、予め設定されており、画像の画質が低画質、即ち図５に示すステップＳ３３において記録された画像データの画質と同画質まで低下すると、その後は、画質を下げることなく画像データを記録する。

次に、制御部４は、ユーザーによりレリーズボタンの全押しが解除されたか否か、即ち連続撮影停止の指示（連続撮影により撮影された複数の画像データの記録媒体１２への記録停止の指示）がなされたか否かを判別する（ステップＳ１８）。ステップＳ１８においてレリーズボタンの全押しが解除されていないと判別された場合には（ステップＳ１８、Ｎｏ）、制御部４は、ステップＳ１７の処理（図６に示すステップＳ４０〜Ｓ４３の処理）に戻り、ステップＳ１８においてレリーズボタンの全押しが解除されたと判別されるまでステップＳ１７の処理を繰り返す。即ち、図３に示すように、レリーズボタンが全押しされてからレリーズボタンの全押しが解除されるまで（時間ｔ３から時間ｔ５まで）の間、人物の顔が笑顔であると判別されたとき（時間ｔ４）以外は、所定の画質で画像データを記録し、人物の顔が笑顔であると判別されたときのみ、高画質で画像データを記録する。

一方、ステップＳ１８においてレリーズボタンの全押しが解除されたと判別された場合には（ステップＳ１８、Ｙｅｓ）、制御部４は、連続撮影を停止する（ステップＳ１９）。即ち、図３に示すように、時間ｔ５にレリーズボタンの全押しが解除されると（または、記録媒体１２の残容量が所定量以下になると）、バッファメモリ８に格納される画像データの記録媒体１２への記録を停止する。

第１の実施の形態に係るカメラ２によれば、連続撮影する際に、被写体の状態が所定状態のときの画像データを高画質で記録媒体１２に記録し、所定状態でないときの画像データを低画質で記録媒体１２に記録する。特に、被写体が人物である場合、人物が笑顔のときの画像データを高画質で記録し、笑顔でないときの画像データを低画質で記録する等、連続撮影して得られた複数の画像データのそれぞれの画質を制御することができる。即ち、所定状態、例えば人物が笑顔である場合等、被写体の状態が重要な状態であるとき（重要なシーンのとき）の画像データを高画質で記録することができる。また、重要でないときの画像データを低画質で記録するため、記録媒体１２への記録可能時間を延ばすことができ、連続撮影の長時間化が可能となる。

次に、図２に示すフローチャート及び図７に示すタイムチャートを参照して、第１の実施の形態に係るカメラ２において連続撮影する際の他の処理（変形例）について説明する。

まず、制御部４は、例えば図７に示す時間ｔ１１に、レリーズボタンが半押しされると（ステップＳ１０、Ｙｅｓ）、被写体に対して合焦させる合焦処理、及び画像データ（図７に示す画像ｇ１０に基づく画像データ等）のバッファメモリ８への格納を開始し、その画像データに対する記録媒体１２への記録制御及び画質制御を行う（ステップＳ１１）。

ステップＳ１１において、制御部４は、被写体である人物の顔領域を検出する顔認識を行い、顔認識された人物の顔の笑顔の度合（笑顔率）を検出する。例えば顔領域から検出される顔や口の大きさや形が予め設定されている大きさや形に対して８０％〜１００％一致した場合（笑顔率が８０％〜１００％）には、笑っていると判断し、４０％〜８０％一致した場合には、笑ってもなく怒ってもないと判断し、４０％未満一致した場合には、怒っていると判断する。そして、笑顔率が８０％〜１００％であり、笑っていると判断された場合のみ、制御部４は、そのときバッファメモリ８に格納された画像データを、高画質で（例えば、ノイズ低減処理を実行する等して）記録媒体１２に記録する。このように、レリーズボタンが半押しされてから被写体に対して合焦するまでの間（時間ｔ１１から時間ｔ１２までの間）、笑顔率が８０％〜１００％の画像データを高画質で記録する。なお、図７では、レリーズボタンが半押しされてから被写体に対して合焦するまでの間（時間ｔ１１から時間ｔ１２までの間）、笑っていると判断されることがなかった場合を例に挙げている。

次に、制御部４は、例えば図７に示す時間ｔ１２に、被写体に対して合焦したと判別された場合には（ステップＳ１２、Ｙｅｓ）、連続撮影を開始し（ステップＳ１３）、記録媒体１２に記録される画像データの画質制御を行う（ステップＳ１４）。即ち、制御部４は、被写体である人物の顔領域を検出する顔認識を行い、上述したように、笑顔率を検出する。そして、被写体に対して合焦してからレリーズボタンが全押しされるまでの間（時間ｔ１２から時間ｔ１３までの間）、笑顔率が８０％〜１００％のときの画像データを高画質で、笑顔率が４０％〜８０％未満のときの画像データを中画質（高画質より低く、低画質より高い画質で予め設定されている）で、笑顔率が４０％未満のときの画像データを低画質で記録する。なお、図７では、被写体に対して合焦してからレリーズボタンが全押しされるまでの間（時間ｔ１２から時間ｔ１３までの間）、笑顔率が４０％未満であった場合を例に挙げている。

次に、制御部４は、例えば図７に示す時間ｔ１３に、レリーズボタンが全押しされると（ステップＳ１５、Ｙｅｓ）、時間ｔ１３にバッファメモリ８に格納された画像データ（画像ｇ２０に基づく画像データ）を高画質で記録媒体１２に記録する（ステップＳ１６）。そして、制御部４は、その後、記録媒体１２に記録される画像データの画質制御を行う（ステップＳ１７）。ステップＳ１７において、制御部４は、被写体である人物の顔領域を検出する顔認識を行い、上述したように、笑顔率を検出する。そして、笑顔率が８０％〜１００％のときの画像データを高画質で、笑顔率が４０％未満のときの画像データを低画質で時間ｔ４０記録媒体１２に記録する。

一方、笑顔率が４０％〜８０％未満のときの画像データは、所定の画質で記録媒体１２に記録される。具体的には、図７に示すように、レリーズボタンが全押しされてから（時間ｔ１２から）画質を徐々に下げて画像データは記録される。画質の下げ幅については、予め設定されており、画像の画質が低画質、即ち笑顔率が４０％未満のときに記録される画像データの画質と同画質まで低下すると（時間ｔ１５）、その後は、画質を下げることなく画像データを記録する。即ち、レリーズボタンが全押しされてから画質の下げ幅が下限に達するまでの間（時間ｔ１３から時間ｔ１５までの間）、笑顔率が８０％〜１００％のとき（図７では時間ｔ１５）の画像データ（図７では画像ｇ４０に基づく画像データ）を高画質で、笑顔率が４０％〜８０％未満のときの画像データを所定の画質で、笑顔率が４０％未満のとき（図７では時間ｔ１４）の画像データ（図７では画像ｇ３０に基づく画像データ）を低画質で、記録媒体１２に記録する。

そして、画質の下げ幅が下限に達した後からレリーズボタンの全押しが解除されるまで（時間ｔ１５より後から時間ｔ１７まで）の間、笑顔率が８０％〜１００％のときの画像データを高画質で、笑顔率が４０％〜８０％未満のときの画像データを中画質で、笑顔率が４０％未満のときの画像データを低画質で記録する。なお、図７では、時間ｔ１６に４０％〜８０％未満であり、そのときの画像ｇ５０に基づく画像データを中画質で記録し、時間ｔ１６以外では笑顔率が４０％未満であった場合を例に挙げている。次に、レリーズボタンの全押しが解除されると（ステップＳ１８、Ｙｅｓ、図７では時間ｔ１７）、制御部４は、連続撮影を停止する（ステップＳ１９）。

上述の変形例では、連続撮影する際に、被写体である人物の笑顔の度合に基づいて記録媒体１２に記録される画像データの画質を制御することができる。即ち、笑顔の度合が高い場合等、被写体の状態の重要度が高い場合の画像データを高画質で、笑顔の度合が高くもなく低くもない場合等、被写体の状態の重要度が高くもなく低くもない場合の画像データを中画質で、笑顔の度合が低い場合等、被写体の状態の重要度が低い場合の画像データを低画質で記録することができる。したがって、連続撮影の長時間化が可能となり、且つ被写体の状態の重要性の度合により画質を段階的に制御することができるため、所望のシーンの画像データが低画質で記録されることを抑制することができる。

なお、第１の実施の形態においては、被写体の状態として人物の笑顔の度合を認識し、認識結果に基づいて画質制御しているが、被写体の状態としてカメラ２（撮像素子６）から被写体までの距離、撮影画面に対する被写体像の大きさ等を認識し、距離や大きさが所定状態（所定距離や所定サイズ）であるか否かの判別結果に基づいて画質制御する構成にすることもできる。

次に、図面を参照して、本発明の第２の実施の形態に係る撮像装置としてのカメラについて説明する。なお、第２の実施の形態に係るカメラの構成は、第１の実施の形態に係るカメラ２の構成と同一である。したがって、第２の実施の形態に係る電子カメラについては、図１に示す電子カメラ２の構成と同一の構成には同一の符号を用いてその説明を行う。

第２の実施の形態に係るカメラ２では、連続撮影する際に、被写体の状態に基づいて撮影シーンを認識し、認識した撮影シーンが所定撮影シーンであるか否かを判別し、判別結果に基づいて連続撮影された各画像を記録媒体１２に記録する際の画質を制御する。

以下、図８に示すフローチャートを参照して、第２の実施の形態に係るカメラ２において連続撮影する際の処理について説明する。

まず、連続撮影モードに設定されている状態で、ユーザーによりレリーズボタンが半押しされると（ステップＳ５０、Ｙｅｓ）、制御部４は、オートフォーカス機能を用いて被写体に対して合焦させる合焦処理を開始し、撮像素子６からの撮像信号に基づき作成される画像データのバッファメモリ８への格納を開始する。

次に、制御部４は、被写体の状態に基づいて撮影シーンの認識を行う（ステップＳ５１）。例えば、電車等の乗り物や人等が遠くから徐々に近づいてくる撮影シーン（以下、電車シーンという）、球技等のスポーツを行っている撮影シーン（以下、球技シーンとうい）等、何れの撮影シーンであるかを認識する。

具体的には、合焦処理を行うときなどに用いられる計測部（図示しない）によりカメラ２（撮像素子６）から主要被写体までの距離を計測し、計測される距離が徐々に短くなる場合には、電車等の乗り物や人等が遠くから徐々に近づいてくる電車シーンであると認識する。なお、計測部を備えないカメラであっても、バッファメモリ８に格納される複数の画像データから撮影画面に対する主要被写体の大きさを検出し、検出される大きさが徐々に大きくなる場合には、電車シーンであると認識する。以下、ステップＳ５１において電車シーンと認識された場合を例に挙げて説明する。

図９は、ステップＳ５１において電車シーンと認識された場合において連続撮影される複数の画像データに対する記録媒体１２への画質制御について説明するためのタイムチャートである。図９に示すように、制御部４は、ステップＳ５１において電車シーンと認識され、時間ｔ２１にユーザーによりレリーズボタンが全押しされると（ステップＳ５２、Ｙｅｓ）、連続撮影を開始する。即ち、時間ｔ２１からバッファメモリ８に格納される画像データの記録媒体１２への記録を開始する。このとき、記録される画像データから検出される撮影画面に対する電車の大きさに基づいて、記録媒体１２に記録する画像データの画質を制御する（ステップＳ５３）。

電車シーンの場合には、レリーズボタンが全押しされたとき（図９では、時間ｔ２１）、図９に示すように、時間ｔ２１に撮影された画像データを高画質で記録媒体１２に記録せず、時間ｔ２１に撮影された画像データから検出される撮影画面に対する電車の大きさ（以下、単に電車の大きさという。）に基づいて記録媒体１２に記録する画質を決定する。例えば、高画質で記録するとき（図９では、時間ｔ２６）の電車の大きさを所定値として予め設定し、電車の大きさが所定値より小さい間（図９では、時間ｔ２１から時間ｔ２６の間）の画像データを、電車の大きさが所定値のときの画像データの画質より、低画質で記録する。

図９に示すように、時間ｔ２１のときの画像データは、時間ｔ２１から時間ｔ２６までの間で最も電車の大きさが小さいため。最も低画質で記録される。そして、時間ｔ２２のときの電車の大きさは、時間ｔ２１のときの電車の大きさに対して大きくなるため、時間ｔ２２のときの画像データは、時間ｔ２１のときの画像データの画質よりも高く、且つ時間ｔ２６のときの画像データの画質よりも低い画質で記録される。このように、時間ｔ２３、ｔ２４、ｔ２５と時間が経過するに従い、電車の大きさは徐々に大きくたるため、時間ｔ２３、ｔ２４、ｔ２５のときの画像データは、時間ｔ２２のときの画像データの画質よりも高く、且つ時間ｔ２６のときの画像データの画質よりも低く、徐々画質を上げて記録される。そして、電車の大きさが所定値のとき（図９では、時間ｔ２６）の画像データは、高画質で記録される。即ち、記録される画像データの画質は、電車の大きさに対して決定される。

時間ｔ２６を経過すると、制御部４は、図９に示すように、画質を段階的に下げて画像データを記録する。画質の下げ幅については、予め設定されており、画像データの画質が、時間ｔ２１のときに記録された画像データの画質と同画質まで低下すると、その後は、画質を下げることなく（一定の画質で）画像データを記録する。そして、制御部４は、ユーザーによりレリーズボタンの全押しが解除されるまで、または記録媒体１２の残容量が所定量以下になるまで（図９では、図示せず）、画像データの記録を継続する。

次に、図８のステップＳ２１において、球技等のスポーツを行っている球技シーンであると認識された場合を例に挙げて説明する。

具体的には、連続撮影する前に、ユーザーにより撮影シーンが球技シーンであり、野球、テニス、ゴルフ等の球技の種類が予め設定されている場合（この実施の形態では、ゴルフが設定されているものとする。）には、制御部４は、球技シーンであると認識する（ステップＳ２１）。そして、制御部４は、撮影シーンが球技シーンであり、球技の種類がゴルフであると認識すると、バッファメモリ８に格納される複数の画像データからゴルフクラブがボールに当たる時間（重要なシーンの時間）を周知の技術を用いて予測する。例えば、まず、連続撮影される各画像データから、ゴルフクラブの想定される運動速度範囲に基づいて撮影画面に対するゴルフクラブの位置、ゴルフクラブの動きベクトルを推定し、推定されたゴルフクラブの位置及び動きベクトルに基づいてゴルフクラブの運動パラメータを推定する。そして、この運動パラメータ及び撮影画面に対するボールの位置からゴルフクラブがボールに当たる時間を予測する。

図１０は、ステップＳ５１において球技シーンと認識された場合において連続撮影される複数の画像データに対する記録媒体１２への画質制御について説明するためのタイムチャートである。図１０に示すように、制御部４は、ステップＳ５１において球技シーンと認識され、時間ｔ３１にユーザーによりレリーズボタンが全押しされると（ステップＳ５２、Ｙｅｓ）、連続撮影を開始する。球技シーンにおいては高速連続撮影を行うことが予想されるため、時間ｔ３１のときの画像データより２〜３枚前にバッファメモリ８に格納された画像データから、記録媒体１２への記録を開始する。なお、時間ｔ３１のときの画像データより２〜３枚前にバッファメモリ８に格納された画像データ、及び時間ｔ３１のときの画像データは、図１０に示すように、高画質で記録される。

球技シーンの場合には、レリーズボタンが全押しされたとき（図１０では、時間ｔ３１）、図１０に示すように、高画質で画像データを記録媒体１２に記録する。そして、レリーズボタンが全押されてから、ゴルフクラブがボールに当たる瞬間であると予測された時間前まで（図１０では、時間ｔ３１から時間ｔ３４前まで）の間の画像データは、段階的に画質を下げて、次に段階的に画質を上げて記録される。具体的には、時間ｔ３１から時間ｔ３２前までの間の画像データは、段階的に画質を下げて記録され、時間ｔ３２から時間ｔ３３前までの間の画像データは、一定の画質（時間ｔ３１から時間ｔ３４前までの間で最も低い画質）で記録され、時間ｔ３３から時間ｔ３４前までの間の画像データは、段階的に画質を上げて記録される。

そして、ゴルフクラブがボールに当たる瞬間であると予測された時間ｔ３４の画像データより１〜３枚前にバッファメモリ８に格納された画像データ、時間ｔ３４の画像データ、及び時間ｔ３４の画像データから１〜３枚後にバッファメモリ８に格納された画像データは、高画質、即ち時間ｔ３１のときの画像データの画質と同画質で記録される。

その後の画像データは、図１０に示すように、段階的に画質を下げて記録される。画像データの画質が予め設定されている画質まで低下すると、その後（図１０では、時間ｔ３５より後）の画像データは、図１０に示すように、一定の画質で記録される。なお、画質の上げ幅や下げ幅については、予め設定されている。そして、制御部４は、ユーザーによりレリーズボタンの全押しが解除されるまで、または記録媒体１２への画像データの記録可能容量を超えるまで（図１０では、時間ｔ３６）、画像データの記録を継続する。

第２の実施の形態に係るカメラ２によれば、連続撮影する際に、被写体の状態に基づいて撮影シーンを認識し、認識された撮影シーンに応じて記録媒体１２に記録する複数の画像データのそれぞれの画質を制御することができる。即ち、撮影シーンに応じて重要なシーンや所望のシーンの時間を予測し、予測された時間前後の画像データを高画質で記録し、重要でないシーンや所望出ないシーンの画像データを低画質で記録することができる。したがって、連続撮影の長時間化が可能となり、且つ重要なシーンや所望のシーンの画像データを高画質で得ることができる。

なお、上述の各実施の形態においては、被写体の状態が所定状態であるか否かを判別し、判別結果に基づいて記録媒体１２に記録する画像データの画質を制御しているが、例えば被写体に対する合焦状態、撮影者の手ブレ、画像データの明るさ、撮影画面に対する被写体の位置等の少なくとも一つを検出し、上記判別結果及び検出結果に基づいて記録媒体１２に記録する画像データの画質を制御する構成にしてもよい。例えば、被写体の状態が所定状態であり、且つ被写体に対して合焦している場合、撮影者の手ブレがない場合、露出が適正な場合等には、被写体の状態が所定状態であり、且つ被写体に対して合焦していない場合、撮影者の手ブレがある場合、露出が適正でない場合等の画質より高い画質で画像データを記録するようにしてもよい。

また、被写体の状態が所定状態にある画像データであっても、例えば被写体に対する合焦状態、撮影者の手ブレ、画像データの明るさ、撮影画面に対する被写体の位置等の少なくとも一つの検出結果によって、画像データを記録媒体１２に記録する際の画質を変更制御する構成にしてもよい。例えば、被写体の状態が所定状態であっても、被写体に対して合焦していない場合、撮影者の手ブレがある場合、露出が適正でない場合等には、画像データを高画質で記録しない構成にしてもよい。

また、上述の各実施の形態においては、レリーズボタン半押し後からレリーズボタン全押しまでの間（第１の実施の形態では被写体に対して合焦してから、第２の実施の形態ではレリーズボタン全押してから）連続撮影を開始しているが、連続撮影を開始するタイミングは、合焦時やレリーズ全押し時に限らない。例えば、レリーズボタン半押し後すぐに連続撮影を開始してもよい。または、所定コマ数または所定時間を予め設定しておき、レリーズボタン全押し後、バッファメモリに格納されているレリーズボタン全押し前の所定コマ数、またはレリーズボタン全押しから所定時間前までのコマ数の画像データを連続撮影された画像の画像データとして記録することもできる。または、シーン認識を行い、シーン認識の結果に基づいて連続撮影を開始するタイミングを決定してもよい。例えば、スポーツ等の動きの速いシーンについては、風景等のシーンより早く連続撮影を開始するよう設定するとよい。

２…カメラ、４…制御部、６…撮像素子、８…バッファメモリ、１０…画像処理部、１２…記録媒体、１４…表示部、１６…操作部。

Claims (9)

1. 被写体からの光を撮像する撮像素子と、
   前記撮像素子により前記被写体を連続撮影している間、各撮影画像における前記被写体の状態を認識する認識部と、
   前記認識部により認識された前記被写体の状態が、所定状態であるか否かを判別する判別部と、
   前記判別部による判別結果に基づいて、前記被写体を連続撮影して得られた複数の前記撮影画像を記録媒体に記録する際の画質を制御する制御部と、
   を備えることを特徴とする撮像装置。
2. 前記被写体の状態は、前記被写体としての人物の笑顔の度合、前記撮像素子から前記被写体までの距離、または撮影画面に対する前記被写体像の大きさであることを特徴とする請求項１記載の撮像装置。
3. 前記制御部は、前記被写体の状態が前記所定状態にある撮影画像を前記記録媒体に記録する際の画質を、前記被写体の状態が前記所定状態にない撮影画像の画質よりも高くすることを特徴とする請求項１または請求項２記載の撮像装置。
4. 前記被写体の連続撮影の開始、及び当該連続撮影により撮影された複数の撮影画像の前記記録媒体への記録を指示する指示部を備え、
   前記制御部は、前記指示部による指示がなされたときに撮影された撮影画像を前記記録媒体へ記録する際の画質を、前記被写体の状態が前記所定状態にある撮影画像の画質と同一、または前記被写体の状態が前記所定状態にない撮影画像の画質よりも高くすることを特徴とする請求項１〜請求項３の何れか一項に記載の撮像装置。
5. 前記認識部は、前記被写体の状態に基づいて撮影シーンを認識し、
   前記判別部は、前記認識部により認識された前記撮影シーンが所定撮影シーンであるか否かを判別し、
   前記制御部は、前記判別部により前記撮影シーンが前記所定撮影シーンであると判別された場合には、前記指示部による指示がなされたときに撮影された撮影画像を前記記録媒体へ記録する際の画質を、前記被写体の状態が前記所定状態にない撮影画像の画質と同一、または前記被写体の状態が前記所定状態にある撮影画像の画質よりも低くすることを特徴とする請求項１〜請求項３の何れか一項に記載の撮像装置。
6. 前記被写体に対する合焦状態、撮影者の手ブレ、前記画像の明るさ、及び撮影画面に対する前記被写体の位置の少なくとも一つを検出する検出部を備え、
   前記制御部は、前記判別部による判別結果と、前記検出部による検出結果とに基づいて前記画像の画質を制御することを特徴とする請求項１〜請求項５の何れか一項に記載の撮像装置。
7. 前記制御部は、前記被写体の状態が所定状態にある撮影画像であっても、前記検出部による検出結果によって、当該撮影画像を前記記録媒体に記録する際の画質を変更制御することを特徴とする請求項６記載の撮像装置。
8. 前記被写体の連続撮影の準備を指示する準備指示部を備え、
   前記準備指示部による指示の後から、前記指示部による指示の開始までの間の何れかの時から、前記被写体の前記連続撮影を開始することを特徴とする請求項１〜請求項６の何れか一項に記載の撮像装置。
9. 前記制御部は、前記撮影画像を前記記録媒体に記録する際の画素数、圧縮率、ノイズ低減処理、画像加工処理のうちの少なくとも１つを制御することにより、前記画質を制御することを特徴とする請求項１〜８の何れか一項に記載の撮像装置。

Images