JP2020136814A - 撮像装置、撮像装置の制御方法、プログラム - Google Patents

Abstract

【課題】撮影において、ユーザの所望の画像を得られているかどうかをユーザに通知する撮像装置、撮像装置の制御方法及プログラムを提供する。【解決手段】撮像素子２１と、撮像素子を用いて露光を行う露光手段２２と、露光手段による露光完了後に画像を取得する画像取得手段、画像取得手段から得られる画像を所定の方法で解析する画像解析手段、画像解析手段の解析結果についての判定基準を設定する判定基準設定手段及び画像解析手段の解析結果に対して判定基準設定手段で設定された判定基準に応じて判定を行う判定手段を備える電気回路２０と、所定回数の露光に応じて音声出力する音声出力手段２７を有する。露光手段によって連続的に複数回の露光を行う場合に、所定回数の露光に応じて音声出力する音声を、判定手段の判定結果によって切り替える。【選択図】図１

Description

本発明は、音を用いてユーザに通知する機能をもつ撮像装置に関する。

デジタルカメラのような撮像装置では、連続して撮像することで、短い時間の間に複数の画像を得る技術（いわゆる連続撮影）が搭載されている。例えば特許文献１では、連写撮影中に方位情報を各画像に付与する撮像装置が開示されている。

特開２０１８−１９１３００号公報

近年のデジタルカメラの連続撮影では、１秒間に数十枚の撮影を行う機器も存在する。このような連続撮影の性能が向上した場合、一度に多くの画像が得られるものの、その中にはピントのずれた画像が含まれていることも多く、ユーザは画像の取捨選択に手間をかけることがあった。

そこで、本発明は、撮影において、ユーザの所望の画像を得られているかどうかをユーザに通知することを目的とする。

上記目的を達成するために、本発明の撮像装置は、撮像素子と、前記撮像素子を用いて露光を行う露光手段と、前記露光手段による露光完了後に画像を取得する画像取得手段と、前記画像取得手段から得られる画像を所定の方法で解析する画像解析手段と、前記画像解析手段の解析結果についての判定基準を設定する判定基準設定手段と、前記画像解析手段の解析結果に対して前記判定基準設定手段で設定された判定基準に応じて判定を行う判定手段と、所定回数の露光に応じて音声出力する音声手段を有し、前記露光手段によって連続的に複数回の露光を行う場合に、所定回数の露光に応じて音声出力する音声を、前記判定手段の判定結果によって切り替えることを特徴とする。

本発明によれば、撮影において、ユーザの所望の画像を得られているかどうかをユーザに通知することができる。

（Ａ）撮影装置の構成図、（Ｂ）撮影装置のブロック図 第１の実施例におけるフロー図 第１の実施例における音声出力例を示す図 第１の実施例における判定例を示す図 第２の実施例におけるフロー図 第２の実施例におけるタイミング図

以下に、本発明を実施するための形態について、添付の図面を用いて詳細に説明する。

なお、以下に説明する実施の形態は、本発明の実現手段としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されてもよい。また、各実施の形態を適宜組み合せることも可能である。

［第１の実施形態］
＜デジタルカメラの構成＞
図１（Ａ）は、本実施形態の撮像装置の一例であるデジタルカメラの構成例を示すブロック図である。撮影光学系１００は、絞り１１、手振れ補正レンズ群１２、フォーカスレンズ群１３を備えており、光学像をカメラ本体２００へ導くことができる。カメラ本体２００は、撮影光学系１００の光学像を光電変換する撮像素子２１と露光時間を調整するメカシャッター２２を備えている。

カメラ本体２００は、背面部に背面液晶２３を、ファインダー部には小型液晶２４と光学系２５を備え撮像素子２１で撮像された画像を表示することができる。なお、電子シャッター機能を備えた撮像素子であればメカシャッターは不要であり、メカシャッターを備えた場合であっても電子シャッターで露光時間を調整する場合はメカシャッターが全開したままである。撮影時には、図示されていないシャッターボタンを一段目まで浅く押す、いわゆる「半押し」することで、自動合焦と自動露出機構によるシャッター速度、絞り値などの撮影条件の設定が行われる。

更にシャッターボタンを半押しから二段目まで深く押す、いわゆる「全押し」することでメカシャッター２２又は撮像素子２１の電子シャッター機能が動作して撮像が行われる。以上説明したメカシャッター又は電子シャッターが、撮像素子を用いて露光を行う露光手段である。また、シャッターボタンを押し続けると露光手段によって連続的に複数回の露光を行うことが出来る。

図１（Ｂ）は本実施形態の撮影装置のブロック図である。カメラ本体２００は、電気回路２０を備えており、電気回路２０にはＣＰＵ、画像処理回路、制御回路、音声再生回路等が実装されている。露光手段による露光完了後に画像を取得する画像取得手段と、画像取得手段から得られる画像を所定の方法で解析する画像解析手段は画像処理回路内に実装されている。さらに、画像解析手段の解析結果についての判定基準を設定する判定基準設定手段と、画像解析手段の解析結果に対して判定基準設定手段で設定された判定基準に応じて判定を行う判定手段も画像処理回路内に実装されている。絞り１１、手振れ補正レンズ群１２、フォーカスレンズ群１３、メカシャッター２２はそれぞれ図示されていない駆動手段を介して制御回路から制御される。撮像素子２１で光電変換された信号は画像処理回路を経由してデジタルデータに変換して図示されていない記録媒体へ保存することができる。

ファインダー部には接眼センサ２６を備え、撮影者がファインダー部に接眼しているか否かを検出することができる。カメラ本体２００は、音声出力部２７を備えており、音声再生回路で再生される音声が出力可能である。音声再生回路は、所定回数の露光に応じて音声出力する音声手段である。音声出力部２７が例えばスピーカーであれば、直接音声を再生できる。又、音声出力部２７がイアホン等の外部音声再生手段への接続手段であれば、音声を外部音声再生手段で再生できる。外部音声再生手段への接続は有線であっても、無線であってもよい。ＣＰＵは、上記の全ての要素を電気的にコントロールすることができる処理装置である。図１において制御信号線は省略されており、各要素間の情報の流れのみを矢印で示している。

次に第一の実施形態の撮像装置の動作について説明する。図２は、本実施形態の撮像装置が動作する場合の処理を示すフローチャートである。なお、本フローチャートに示す処理は、撮像装置の電気回路２０に実装されるＣＰＵが入力信号やプログラムに従い、撮像装置の各部を制御することにより実現される。

使用者によって連続撮影を行う連写モードが設定されることで連写モードを開始する。

ステップＳ２０１では、使用者によって撮影が開始されたか否かを判定し、撮影が開始されていればステップＳ２０２に移行し、撮影が開始されていなければステップＳ２０１状態を維持するいわゆる撮影待機状態となる。ステップＳ２０２では、通知回数設定を行い、ステップＳ２０３へ移行する。通知回数は、露光処理を何回行ったら音声出力を行うかの設定値で、撮像装置によって自動的に設定される値でもあってもよいし、使用者によって事前に指定される値であってもよい。

ステップＳ２０３では、露光処理を行い、ステップＳ２０４へ移行する。ステップＳ２０４では、画像取得を行い、ステップＳ２０５へ移行する。ステップＳ２０５では、画像解析を行い、ステップＳ２０６へ移行する。

ステップＳ２０６では、ステップＳ２０５の画像解析結果からＯＫ画像の有無を判定し、ＯＫ画像が有ると判定されればステップＳ２０７へ移行し、ＯＫ画像が無いと判定されればステップＳ２０８へ移行する。ステップＳ２０７では、ＯＫ画像有りと判定された結果を一時的に保存しておき、ステップＳ２０８へ移行する。ここで、ＯＫ画像とは例えば集合写真において全員が目瞑りしていないような成功画像を意味する。逆にＮＧ画像とは集合写真において目瞑りをしている人がいるような失敗画像を意味する。成功および失敗の判定基準は目瞑りだけに限るものではなく、他の判定例については後述する。

なお、ＯＫ画像かＮＧ画像かを判定するにあたって、所定の基準をあらかじめ記録しておき、その基準と画像とを比較して判断してもよいし、所定の基準をあらかじめ学習した学習装置を用いて判断させてもよい。

ステップＳ２０８では、露光処理を行った回数をカウントしておき、ステップＳ２０９へ移行する。ステップＳ２０９では、ステップＳ２０２で設定された通知回数とステップＳ２０８でカウントしている露光回数とを比較し、同じ回数だった場合にはステップＳ２１０へ移行し、異なる回数だった場合にはステップＳ２１３へ移行する。ステップＳ２１０では、露光回数の初期化を行い、ステップＳ２１１へ移行する。

ステップＳ２１１では、所定回数の露光に応じて音声出力する音声を、ステップＳ２０７で一時的に保存された判定手段の判定結果によって切り替えて出力し、ステップＳ２１２へ移行する。ステップＳ２１２では、ステップＳ２０７で一時的に保存される判定結果の初期化を行い、ステップＳ２１３へ移行する。ステップＳ２１３では、使用者による撮影終了指示が行われたか否かを判定し、撮影が終了されていれば連写モードを終了し、撮影が終了されていなければステップＳ２０２へ移行する。

次に第一の実施形態の音声出力に関して、図３を用いて説明する。

電気回路２０内に実装されている画像処理回路で画像解析を行った結果に応じて、音声出力部２７で音声出力を行う。図３にはＮｏ１，２，３，４の各ＮＧ判定及びＯＫ判定それぞれの出力音声例を示している。Ｎｏ１のＮＧ判定時の音声は「カシャッ」というイメージ音で、メカシャッター２２を駆動させた際に発する音声と類似した音声を出力させる。

Ｎｏ１のＯＫ判定時の音声は「カッシャーン」というイメージ音で、ＮＧ判定時とは異なる音声であることが識別可能な音声を出力する。Ｎｏ２やＮｏ３も同様にＮＧ判定時の音声とＯＫ判定時の音声とは異なる音声であることが識別可能な音声を出力させる。Ｎｏ４は、ＮＧ判定時には音声出力を行わずに、ＯＫ判定時に「カシャッ」というメカシャッター２２を駆動させた際に発する音声と類似した音声を出力させる。

次に画像解析を行った結果のＯＫおよびＮＧ判定の判定基準について、図４を用いて説明する。

判定基準は、画像解析手段の解析結果に基づいてＯＫ判定を行うための基準である。判定基準の設定は使用者からの指示で設定変更が可能で、図４にＮｏ１，２，３の判定内容とＯＫ判定基準例を示している。

図４で示した判定基準は、いずれも顔の画像情報から顔パーツの特徴判定に基づく判定基準である。Ｎｏ１の判定内容は目瞑り判定で、ＯＫ判定基準は画像内の人物が全員開眼状態か否かを判定する。Ｎｏ２の判定内容は顔向き判定で、ＯＫ判定基準は画像内の人物が全員正面を向いているか否かを判定する。Ｎｏ３の判定内容は顔合焦判定で、ＯＫ判定基準は合焦点が人物の顔にあっているか否かを判定する。

上述の判定基準はあくまでも一例で、判定内容が上述のものでもＯＫ判定基準が異なる基準でも構わない。また他の判定内容に対するＯＫ判定基準でも構わない。

このような構成にすることで、連続撮影時に所望の写真が取得出来ているか容易に確認することが可能になる。なお、この判定結果を画像とともに記録媒体に記録しておき、のちにユーザが画像を閲覧する際に、判定を把握できるようにしてもよい。また、判定結果として、撮影時に出力した音声のデータを画像に対応付けて記録してもよい。

［第二の実施形態］
以下に、本発明の第二の実施形態の構成を示す。図５を用いて第二の実施形態のフローについて説明する。

使用者によって連続撮影を行う連写モードが設定されることで連写モードを開始する。ステップＳ３０１では、音声出力時間の算出を行い、ステップＳ３０２へ移行する。音声出力時間は、例えば露光間隔が０．２秒つまり１秒間に５枚の連続撮影が可能な撮像装置で、使用者によって１０枚撮影毎に４回音声出力するように設定された場合は、１０÷４×０．２で０．５秒毎となる。

ステップＳ３０２では、使用者によって撮影が開始されたか否かを判定する。撮影が開始されていなければステップＳ３０２状態を維持するいわゆる撮影待機状態となり、撮影が開始されていればステップＳ３０３およびステップＳ３０９に移行し並列的に処理が行われる。

ステップＳ３０３では、時間カウンターのカウントアップを行い、ステップＳ３０４へ移行する。ステップＳ３０４では、時間カウンターがステップＳ３０１で算出した音声出力時間を満了したか否かを判定し、満了していればステップＳ３０５へ移行し、満了していなければステップＳ３０３へ移行する。

ステップＳ３０５では、所定回数の露光に応じて音声出力する音声を、後述するステップＳ３１３で一時的に保存された判定手段の判定結果によって切り替えて出力し、ステップＳ３０６へ移行する。

ステップＳ３０６では、後述するステップＳ３１４での判定に使用するフラグ設定を行い、ステップＳ３０７へ移行する。ステップＳ３１４で設定したフラグ設定は、ステップＳ３０５で音声出力したこと示している。ステップＳ３０７では、時間カウンターの初期化を行い、ステップＳ３０８へ移行する。

ステップＳ３０８では、使用者による撮影終了指示が行われたか否かを判定し、撮影が終了されていれば連写モードを終了し、撮影が終了されていなければステップＳ３０３へ移行する。

ステップＳ３０９では、露光処理を行い、ステップＳ３１０へ移行する。ステップＳ３１０では、画像取得を行い、ステップＳ３１１へ移行する。ステップＳ３１１では、画像解析を行い、ステップＳ３１２へ移行する。ステップＳ３１２では、ＯＫ画像の有無を判定し、ＯＫ画像が有ると判定されればステップＳ３１３へ移行し、ＯＫ画像が無いと判定されればステップＳ３１４へ移行する。ステップＳ３１３では、ＯＫ画像有りと判定された結果を一時的に保存しておき、ステップＳ３１４へ移行する。

ステップＳ３１４では、ステップＳ３０６で音声出力フラグが設定されたか否かを判定し、音声出力フラグが設定されていればステップＳ３１５へ移行し、音声出力フラグが設定されていなければステップＳ３１６へ移行する。ステップＳ３１６では、使用者による撮影終了指示が行われたか否かを判定し、撮影が終了されていれば連写モードを終了し、撮影が終了されていなければステップＳ３０９へ移行する。

次に図６を用いて、露光タイミングと音声出力タイミングについて説明する。

図６は、０．２秒に１回の露光を行って撮影を行う例で、露光間隔は０．２秒つまり１秒間に５枚の連続撮影が可能な撮像装置の例である。ＩＮ０からＩＮ７は露光タイミングを示していて、ＯＵＴ０からＯＵＴ７は音声出力タイミングを示している。音声出力タイミングは、Ｎ枚撮影する毎にＭ回音声出力する設定で、露光間隔がＴ秒の場合に以下の式１で示す時間で決定する。
（式１） Ｎ÷Ｍ×Ｔ

図６（ａ）は、１枚撮影する毎に１回音声出力し撮影露光間隔が０．２秒の場合で、音声出力時間の間隔は１÷１×０．２＝０．２となり、０．２秒毎に音声出力する。時間０．０秒から露光ＩＮ０を行い、取得した１つの画像に対する判定結果について、時間０．２のタイミングで音声出力ＯＵＴ０を行う。同様にＩＮ１に対してＯＵＴ１をＩＮ２に対してＯＵＴ２をというように、１つの画像に対する判定結果の音声出力を連続撮影が終了するまで行う。

図６（ｂ）は、２枚撮影する毎に１回音声出力し撮影露光間隔が０．２秒の場合で、音声出力時間の間隔は２÷１×０．２＝０．４となり、０．４秒毎に音声出力する。時間０．０秒から露光ＩＮ０と露光ＩＮ１を連続して行い、取得した２つの画像に対する判定結果について、時間０．４のタイミングで音声出力ＯＵＴ０を行う。同様にＩＮ２およびＩＮ３に対してＯＵＴ１をというように、２つの画像に対する判定結果の音声出力を連続撮影が終了するまで行う。

図６（ｃ）は、７枚撮影する毎に２回音声出力し撮影露光間隔が０．２秒の場合で、音声出力時間の間隔は７÷２×０．２＝０．７となり、０．７秒毎に音声出力する。時間０．０秒から露光ＩＮ０、露光ＩＮ１、露光ＩＮ２を連続して行い、取得した３つの画像に対する判定結果について、時間０．７のタイミングで音声出力ＯＵＴ０を行う。露光ＩＮ３の露光処理は完了しているが、その後の画像取得および画像解析が完了していないため、時間０．７のタイミングでは、ＯＫ画像の有無が判定されていないため音声出力ＯＵＴ０へは判定結果が反映されない。露光ＩＮ３の判定結果は、露光ＩＮ４、露光ＩＮ５、露光ＩＮ６と共に音声出力ＯＵＴ１へ反映される。

同様にＩＮ７以降も、７つの画像に対する判定結果の音声出力を連続撮影が終了するまで行う。

このような構成にすることで、連続撮影時に所望の写真が取得出来ているか容易に確認することが可能になる。

［その他の実施形態］
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記録媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

Claims (11)

1. 撮像素子と、
   前記撮像素子を用いて露光を行う露光手段と、
   前記露光手段による露光完了後に画像を取得する画像取得手段と、
   前記画像取得手段から得られる画像を所定の方法で解析する画像解析手段と、
   前記画像解析手段の解析結果についての判定基準を設定する判定基準設定手段と、
   前記画像解析手段の解析結果に対して前記判定基準設定手段で設定された判定基準に応じて判定を行う判定手段と、
   所定回数の露光に応じて音声出力する音声手段を有し、
   前記露光手段によって連続的に複数回の露光を行う場合に、所定回数の露光に応じて音声出力する音声を、前記判定手段の判定結果によって切り替えることを特徴とする撮像装置。
2. 前記判定基準設定手段に設定する判定基準は、顔の画像情報から顔パーツの特徴判定に基づくことを特徴とする請求項１に記載の撮像装置。
3. 前記判定基準設定手段に設定する判定基準は、画像に含まれる顔の目瞑りの有無に基づくことを特徴とする請求項１または２に記載の撮像装置。
4. 前記画像に含まれる顔の目が瞑っている場合、前記判定手段は、前記画像を失敗画像と判定し、
   前記画像に含まれる顔の目が瞑っていない場合、前記判定手段は、前記画像を成功画像と判定することを特徴とする請求項３に記載の撮像装置。
5. 前記画像取得手段から得られる画像を記録媒体に記録する記録手段を有し、
   前記記録手段は、記録する画像と共に前記音声出力手段で出力した音声のデータを画像に対応付けて記録することを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
6. 撮像素子を有する撮像装置の制御方法であって、
   前記撮像素子を用いて露光を行う露光ステップと、
   前記露光ステップでの露光完了後に画像を取得する画像取得ステップと、
   前記画像取得ステップで得られる画像を所定の方法で解析する画像解析ステップと、
   前記画像解析ステップでの解析結果についての判定基準を設定する判定基準設定ステップと、
   前記画像解析ステップでの解析結果に対して前記判定基準設定ステップで設定された判定基準に応じて判定を行う判定ステップと、
   所定回数の露光に応じて音声出力する音声ステップとを有し、
   前記露光ステップで連続的に複数回の露光を行う場合に、所定回数の露光に応じて音声出力する音声を、前記判定ステップの判定結果によって切り替えることを特徴とする撮像装置の制御方法。
7. 前記判定基準設定ステップで設定する判定基準は、顔の画像情報から顔パーツの特徴判定に基づくことを特徴とする請求項６に記載の撮像装置。
8. 前記判定基準設定ステップで設定する判定基準は、画像に含まれる顔の目瞑りの有無に基づくことを特徴とする請求項６または７に記載の撮像装置。
9. 前記画像に含まれる顔の目が瞑っている場合、前記判定ステップでは、前記画像を失敗画像と判定し、
   前記画像に含まれる顔の目が瞑っていない場合、前記判定ステップでは、前記画像を成功画像と判定することを特徴とする請求項８に記載の撮像装置。
10. 前記画像取得ステップで得られる画像を記録媒体に記録する記録ステップを有し、
    前記記録ステップでは、記録する画像と共に前記音声出力手段で出力した音声のデータを画像に対応付けて記録することを特徴とする請求項６乃至９のいずれか１項に記載の撮像装置の制御方法。
11. コンピュータを、請求項１乃至５のいずれか１項に記載の撮像装置の各手段として機能させるための、コンピュータが読み取り可能なプログラム。

Images