JP2013211892A - 撮像装置及びその制御方法 - Google Patents

Abstract

【課題】予め定めた輝度の条件を満たす画像領域や合焦領域に補助画像を表示する際に、予め定めた特徴を有する被写体領域と重複する領域と他の領域を区別して補助画像を表示する。
【解決手段】撮像装置は、撮像部と、表示部と、撮像部により撮像された撮像画像を表示部に表示させる表示制御部と、撮像画像から、所定の輝度の画素からなる第１の領域を検出する第１検出部と、撮像画像から、予め定めた特徴を有する第２の領域を検出する第２検出部とを有し、表示制御部は、第２の領域を示す画像を第１の表示形式で前記表示部に表示させ、第２の領域が第１の領域と重なる場合は第１の表示形式とは異なる第２の表示形式で第２の領域を示す画像を表示部に表示させる。
【選択図】図２

Description

本発明は、撮像装置及びその制御方法に関する。

従来から、デジタルビデオカメラなどの撮像装置においては、電子ビューファインダ（ＥＶＦ）や液晶表示モニタなどの撮像画像を表示する表示部を有するものがある。この撮像装置におけるユーザによる露出調整やフォーカス調整は、表示部の撮像画像をユーザが目視確認して行われている。しかし、撮像装置の表示部は、サイズも小型な物が多く、表示解像度の点からも厳密な露出調整や焦点調整に適したものではない。

そこで、撮像装置の中には、露出調整を支援する露出調整用の補助画像や、焦点調整を支援する焦点調整用の補助画像を表示部の撮像画像に重畳して表示し、ユーザの操作補助を行うものがある。露出調整用の補助画像としては、予め設定した輝度値と、撮像画像の輝度レンジとに基づいて生成されるゼブラパターン信号と称される斜め線のパターン画像（以下、「ゼブラパターン」という）などがある。また、焦点調整用の補助画像としては、輪郭補正、ピーキング、エンハンサなどと称される（以下、「ピーキング」という）、撮像画像から輪郭信号を抽出して生成した輪郭画像を撮像画像に重畳して表示するものがある。

例えば、ゼブラパターンを表示する輝度レンジは、絞り調整に便利な所定の強度に設定される。一般的には、映像信号の振幅を示す単位として用いられるＩＲＥ（Institute of Radio Engineers）により、輝度強度の閾値や、所定の輝度強度の範囲が設定されている。ここで、ＩＲＥは、米国の無線技術者協会（現在のＩＥＥＥ）が定めた規格が転じて単位名として慣用されているものである。ＩＲＥでは、ペデスタルレベル（黒）が０ＩＲＥ（但し、７．５ＩＲＥを黒とする場合もある）、白が１００ＩＲＥである。従って、手動で露出調整を行う場合は、輝度強度の範囲が７０〜１００ＩＲＥ程度に設定され、その範囲に応じた撮像画像の画像領域にゼブラパターンの重畳表示などが行われている。

このように、補助画像を撮像画像に重畳して表示する技術としては特許文献１が知られている。特許文献１には、ビデオカメラの撮像画像について、任意の輝度強度以上及びその輝度強度以下の信号強度の画像領域にゼブラパターンを表示することが開示されている。

特開平４−３２８９６４号公報

しかしながら、上記従来技術では、予め定めた輝度の条件を満たす画像領域や合焦領域に単に補助画像が重畳して表示されるため、例えば、人の顔を含む顔領域のように、予め定めた特徴を有する被写体領域に重複する画像領域であっても区別なく補助画像が表示されていた。

本発明は、予め定めた輝度の条件を満たす画像領域や合焦領域に補助画像を表示する際に、予め定めた特徴を有する被写体領域と重複する領域と他の領域を区別して補助画像を表示する撮像装置及びその制御方法を提供することを目的とする。

本発明に係わる撮像装置は、撮像手段と、表示手段と、前記撮像手段により撮像された撮像画像を前記表示手段に表示させる表示制御手段と、前記撮像画像から、所定の輝度の画素からなる第１の領域を検出する第１検出手段と、前記撮像画像から、予め定めた特徴を有する第２の領域を検出する第２検出手段とを有し、前記表示制御手段は、前記第２の領域を示す画像を第１の表示形式で前記表示手段に表示させ、前記第２の領域が前記第１の領域と重なる場合は前記第１の表示形式とは異なる第２の表示形式で前記第２の領域を示す画像を前記表示手段に表示させることを特徴とする。

本発明によれば、予め定めた輝度の条件を満たす画像領域に補助画像を表示する際に、予め定めた特徴を有する被写体領域と重複する領域と他の領域を区別して補助画像を表示することができる。

本発明に係る撮像装置の機能構成を模式的に示したブロック図である。 表示制御部の概略を示したブロック図である。 ゼブラパターン表示に係る輝度の条件を示す概念図である。 第１実施形態に係る撮像装置の表示制御動作を示したフローチャートである。 第１実施形態において画像表示部に表示される撮像画像を例示する概念図である。 第２実施形態において画像表示部に表示される撮像画像を例示する概念図である。 第３実施形態に係る撮像装置の表示制御動作を示したフローチャートである。 第３実施形態において画像表示部に表示される撮像画像を例示する概念図である。 第４実施形態に係る特殊領域と補助画像の対応を例示する概念図である。 第４実施形態において画像表示部に表示される撮像画像を例示する概念図である。 第５実施形態に係る撮像装置の表示制御動作を示したフローチャートである。 第５実施形態において画像表示部に表示される撮像画像を例示する概念図である。

以下、この発明の実施の形態について図を参照して説明するが、この発明は以下の実施の形態に限定されない。また、この発明の実施の形態は発明を実施する例を示すものであり、発明の範囲を限定するものではない。
［第１実施形態］
先ず、本発明に係る撮像装置の第１実施形態について、図１〜図５を参照して詳細に説明する。ここで、図１は、本発明に係る撮像装置１の機能構成を模式的に示したブロック図である。図２は、表示制御部１０７の概要を示したブロック図である。図３（ａ）〜図３（ｃ）は、ゼブラパターン表示に係る輝度の条件を示す概念図である。図４は、撮像装置１の表示制御動作を示したフローチャートである。図５は、画像表示部１０８に表示される撮像画像を例示する概念図である。

図１に示すように、撮像装置１は、画像入力部１０１から入力した画像データを光ディスク、ハードディスク、半導体メモリカードなどの記録メディア１０９に記録することが可能な装置である。撮像装置１は、画像入力部１０１、画像処理部１０２、フォーマット制御部１０３、記録・読み出し部１０４、操作部１０５、特殊領域検出部１０６、表示制御部１０７、画像表示部１０８、内蔵メモリ１１０を備える。

画像入力部１０１は、例えば複数の光学レンズやＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサで構成された撮像手段である。画像入力部１０１により入力された画像（以下、「撮像画像」という）データは、画像処理部１０２に出力される。画像処理部１０２は、画像入力部１０１から出力された撮像画像データや記録メディア１０９から読み出された画像データに階調変換などの所定の画像処理を行う。

フォーマット制御部１０３は、入力されたデータのデータフォーマットを画像表示部１０８で表示可能なデータフォーマットや、記録メディア１０９への記録に適したデータフォーマットへ変換する。例えば、フォーマット制御部１０３は、静止画像データをＪＰＥＧ（Joint Photographic Experts Group）データなどへ変換、又は逆変換する。また、フォーマット制御部１０３は、動画像データをＭＰＥＧ（Moving Picture Experts Group）形式の動画像データなどへ変換、又は逆変換する。記録・読み出し部１０４は、ディスクの読み書きを行うモジュールや、半導体メモリカードと接続するインターフェイスなどであり、フォーマット制御部１０３で変換されたデータの記録メディア１０９への記録や、記録メディア１０９からのデータの読み出しを行う。

操作部１０５は、撮像装置１の筐体に備えたボタンやスイッチなどであり、ユーザからの操作入力を受け付ける。具体的には、操作部１０５は、電源スイッチによる電源操作、シャッタースイッチによる撮像操作、各種機能の設定を行う機能スイッチによる機能設定操作、撮像条件の調整などを行う設定スイッチによる設定操作などを受け付ける。

第２検出手段としての特殊領域検出部１０６は、画像処理部１０２で処理される画像データに含まれる特殊画像領域を、予め設定された特殊画像情報に基づいて検出する。ここでいう特殊画像領域とは、人間の顔を含む顔領域や合焦領域などであり、特殊画像情報とは、画像中から顔を特定するために必要な情報や、合焦領域を抽出するために必要な情報である。特殊領域検出部１０６は、顔領域を検出する場合、目、口、鼻の位置や顔の輪郭など顔画像に関する特徴量を含む特殊画像情報に基づいて画像データの画像領域中から顔領域を検出する。また、特殊領域検出部１０６は、合焦領域を検出する場合、合焦状態の判定基準となるコントラスト値などを含む特殊画像情報に基づいて画像データの画像領域中から合焦領域を検出する。従って、画像入力部１０１による撮像画像データが特殊領域検出部１０６に入力された場合は、撮像画像に含まれる顔領域や合焦領域などの被写体領域が検出されることとなる。特殊領域検出部１０６は、検出結果に係る情報を表示制御部１０７へ供給する。

表示制御手段としての表示制御部１０７は、画像処理部１０２から出力された画像を画像表示部１０８の表示画面上に画像を表示するように、画像表示部１０８を制御する。具体的には、表示制御部１０７は、画像入力部１０１により連続的に撮像された撮像画像の画像データを画像処理部１０２から受け付けて、画像表示部１０８に逐次表示させる。画像表示部１０８は、電子ビューファインダ（ＥＶＦ）や液晶表示モニタなどであり、表示制御部１０７の制御に基づいた画像を表示画面上に表示する。従って、ユーザは、画像入力部１０１において連続的に撮像され、画像表示部１０８に逐次表示される撮像画像を確認しながら、操作部１０５によって、画像入力部１０１における撮像条件の調整（焦点調整や露出調整など）を行うことができる。

内蔵メモリ１１０は、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）である。内蔵メモリ１１０は、撮像画像データの一時記憶や、各種データ処理を行う際の作業領域を提供する。また、内蔵メモリ１１０は、ＣＰＵ（Central Processing Unit）が実行するためのプログラムデータや、信号強度の判定などに関する設定条件、特殊画像情報などの各種設定情報を予め記憶する。なお、内蔵メモリ１１０は、撮像装置１が具備するＣＰＵや、その他の機能ブロックと有機的に繋がっているが、その詳細については図２を用いて後述する。

撮像装置１において、画像入力部１０１による撮像画像データは、画像処理部１０２にて画像処理され、フォーマット制御部１０３により記録メディア１０９に記録可能なフォーマットに変換される。フォーマット制御部１０３により変換された撮像画像データは、記録・読み出し部１０４により記録メディア１０９に記録される。また、画像処理部１０２にて画像処理された撮像画像データは、特殊領域検出部１０６と表示制御部１０７に入力される。特殊領域検出部１０６は、入力された撮像画像データから顔領域や合焦領域などの特殊画像領域を検出し、その検出結果を表示制御部１０７に出力する。表示制御部１０７は、画像処理部１０２から入力された撮像画像データと特殊領域検出部１０６から入力された検出結果とに基づいて画像表示部１０８の表示制御を行い、画像表示部１０８の表示画面上に画像を表示させる。

また、記録メディア１０９に記録された画像データは、記録・読み出し部１０４により読み出され、フォーマット制御部１０３により表示及び出力可能なフォーマットに変換される。フォーマット制御部１０３により変換された画像データは、画像処理部１０２にて画像処理された後に表示制御部１０７に入力され、画像表示部１０８の表示画面上に画像として表示される。

ここで、表示制御部１０７について詳細に説明する。図２に示すように、表示制御部１０７は、信号強度検出部２０１、特殊表示制御部２０２を備え、ＣＰＵ２０３の制御の下で画像表示部１０８の画面表示を制御する。ＣＰＵ２０３は、内蔵メモリ１１０に記憶されたプログラムデータを読み出して、該プログラムデータとの協働により撮像装置１の各部を統括制御する。

第１検出手段としての信号強度検出部２０１は、画像処理部１０２から入力された画像データを構成する各画素の信号強度が内蔵メモリ１１０に予め設定された設定条件を満たすか否かを検出する。具体的には、信号強度検出部２０１は、画像処理部１０２から入力された画像データに基づいて、予め定めた輝度の条件を満たす画素からなる輝度領域又は合焦領域の少なくとも一方を検出する。特殊表示制御部２０２は、画像処理部１０２から入力された画像データに基づいた画像について、信号強度検出部２０１により設定条件を満たす信号強度であると判定された画素を含む画像領域に、その判定結果を示す補助画像を重畳表示させる。

例えば、信号強度検出部２０１で検出する各画素の信号強度が輝度に関する信号強度である場合は、予め定めた輝度の条件である設定条件を満たす画素からなる画像領域に補助画像が重畳表示されることとなる。この補助画像は、設定条件を満たす輝度領域を斜め線のパターン画像などでパターン化したゼブラパターン画像であってよい。すなわち、撮像装置１では、撮像画像を画像表示部１０８に表示する際に、撮像画像における各画素の輝度強度と連動し、予め設定された輝度条件を満たす領域に生成されたゼブラパターン画像が重畳表示される。従って、ユーザは、ゼブラパターン画像を参考にした露出調整を行うことができる。

なお、補助画像を重畳表示する輝度などの内蔵メモリ１１０に予め設定される設定条件については、操作部１０５によりユーザが設定してよい。また、輝度に関する設定条件については、図３（ａ）に示すように、ゼブラパターン表示を行う輝度範囲として、下限の輝度強度４０１、上限の輝度強度４０２をＩＲＥなどで設定してよい。また、図３（ｂ）に示すようなゼブラパターン表示を行う下限の閾値である輝度強度４０３や、図３（ｃ）に示すような上限の閾値である輝度強度４０４をＩＲＥなどで設定してよい。

また、信号強度検出部２０１は、画像処理部１０２から入力された画像データを構成する各画素間の信号強度の差が予め設定された設定条件を満たすか否かを検出することで、合焦領域の検出や被写体の輪郭検出を行ってもよい。例えば、合焦領域の検出については、コントラスト値が所定の閾値以上である画像領域を合焦領域とするコントラスト法などであってよい。また、被写体の輪郭検出を行う場合、特殊表示制御部２０２は、画像処理部１０２から入力された画像データに基づいて画像表示部１０８に表示する画像について、信号強度検出部２０１による輪郭検出結果に基づいた輪郭を表す補助画像を重畳表示させる。この輪郭を表す補助画像とは、前述したピーキングを行う画像であり、輪郭検出結果に基づいた輪郭線を、点線や太線などの所定の線種、所定の表示色で表示した画像である。すなわち、撮像装置１では、撮像画像を画像表示部１０８に表示する際に、撮像画像から抽出されたピーキングが重畳表示される。従って、ユーザは、ピーキングを参考にした焦点調整を行うことができる。

また、特殊表示制御部２０２は、特殊領域検出部１０６による検出結果に基づいて、画像表示部１０８に表示する画像に重畳表示するゼブラパターンやピーキングなどの補助画像の表示方法を制御する。具体的には、特殊表示制御部２０２は、画像データの画像領域中の特殊画像領域と重複する領域と、その特殊画像領域と重複していない領域と、における補助画像の表示方法が互いに異なるようにする。すなわち、撮像装置１では、ゼブラパターンやピーキングなどの補助画像を画像表示部１０８に表示する際に、撮像画像に含まれる特殊画像領域と重複する領域とそれに重複しない領域とを区別して補助画像を表示することが可能となる。

例えば、特殊領域検出部１０６により特殊画像領域として顔領域が検出された場合は、その顔領域内のゼブラパターンやピーキング表示と、顔領域外のゼブラパターンやピーキング表示と、について、表示方法を互いに異なるようにする。同様に、特殊領域検出部１０６により特殊画像領域として合焦領域が検出された場合は、その合焦領域内のゼブラパターンやピーキング表示と、合焦領域外のゼブラパターンやピーキング表示と、について、表示方法を互いに異なるようにする。このように、撮像装置１では、顔領域や合焦領域とそれ以外の画像領域とにおいて、ゼブラ等のパターン表示やピーキング表示等の補助画像の表示方法を互いに異なるように区別して表示することができる。

ここで、第１実施形態に係る撮像装置１の表示制御動作であり、ＣＰＵ２０３の制御の下で行われる表示制御部１０７の処理について説明する。なお、第１実施形態では、画像入力部１０１による撮像画像にゼブラパターンを重畳して画像表示部１０８に表示するものとし、特殊領域検出部１０６で検出される特殊画像領域は顔領域であるものとする。また、特殊領域検出部１０６で検出された被写体領域内に含まれる補助画像の表示対象画素の総和が、所定の割合以上となる場合に、本発明の機能を有効にし、補助画像の表示方法を変更するものとする。例えば、第１実施形態では、特殊領域検出部１０６で検出された顔領域内に含まれるゼブラパターンの表示対象画素の総和が、顔領域内の全画素の５０％以上となる場合に、補助画像の表示方法を変更するものとする。なお、説明の簡略化のため、本実施形態においては、特殊領域検出部１０６で検出された被写体領域内に含まれる補助画像の表示対象画素の総和が、常に所定の割合（例えば５０％）以上であることを前提として、引き続き説明を行う。

図４に示すように、表示制御部１０７は、表示制御処理が開始されると、操作部１０５の電源スイッチなどにより現在電源が入っている状態であるか否かを判定する（Ｓ１０１）。電源が入っている場合（Ｓ１０１：ＹＥＳ）、表示制御部１０７は、操作部１０５の設定スイッチなどによりゼブラパターン表示の設定がＯＮであるか否かを判定する（Ｓ１０２）。ゼブラパターン表示の設定がＯＮである場合（Ｓ１０２：ＹＥＳ）、表示制御部１０７は、操作部１０５の機能スイッチなどにより、特殊領域検出部１０６で検出された顔領域に基づいた表示制御を行う機能がＯＮであるか否かを判定する（Ｓ１０３）。

顔領域に基づいた表示制御を行う機能がＯＦＦである場合（Ｓ１０３：ＮＯ）、表示制御部１０７は、入力された撮像画像の各画素対応の画像信号について輝度強度を検出する（Ｓ１０４）。次いで、表示制御部１０７は、各画素対応の画像信号について、検出された輝度強度が予め設定された設定条件を満たし、ゼブラパターン表示を行う輝度強度の範囲内の値であるか否かを判定する（Ｓ１０５）。各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内である場合（Ｓ１０５：ＹＥＳ）、表示制御部１０７は、画像信号にゼブラパターンを重畳する（Ｓ１０６）。また、各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内でない場合（Ｓ１０５：ＮＯ）、表示制御部１０７は、画像信号にゼブラパターンの重畳を行わない。表示制御部１０７は、電源がＯＦＦされない間、Ｓ１０１〜Ｓ１０６の処理を繰り返す。

顔領域に基づいた表示制御を行う機能がＯＮである場合（Ｓ１０３：ＹＥＳ）、特殊領域検出部１０６において撮像画像から顔領域が検出される（Ｓ１０７）。次いで、表示制御部１０７は、Ｓ１０４、Ｓ１０５と同様に、入力された撮像画像の各画素対応の画像信号について輝度強度を検出し（Ｓ１０８）、その画像信号がゼブラパターン表示を行う輝度強度の範囲内の値であるか否かを判定する（Ｓ１０９）。各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内でない場合（Ｓ１０９：ＮＯ）、表示制御部１０７は、画像信号にゼブラパターンの重畳を行わない。

各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内である場合（Ｓ１０９：ＹＥＳ）、表示制御部１０７は、その画像信号が特殊領域検出部１０６により検出された顔領域に含まれる画素の画像信号であるか否かを判定する（Ｓ１１０）。顔領域に含まれる画素の画像信号でない場合（Ｓ１１０：ＮＯ）、表示制御部１０７は、画像信号にゼブラパターンを重畳する（Ｓ１１１）。顔領域に含まれる画素の画像信号である場合（Ｓ１１０：ＹＥＳ）、表示制御部１０７は、その顔領域外の画像領域にゼブラパターンの重畳を行う（Ｓ１１２）。表示制御部１０７は、電源がＯＦＦされない間、Ｓ１０１〜Ｓ１０３、Ｓ１０７〜Ｓ１１２の処理を繰り返す。

上述した処理により、撮像装置１の画像表示部１０８には、図５に例示した撮像画像が表示されることとなる。図５において、撮像画像５０１ａ、５０１ｂは人物Ｈ１〜Ｈ３を撮像した画像であり、撮像画像５０１ｃ、５０１ｄは窓枠Ｗ１を背後にした人物Ｈ４を撮像した画像である。また、撮像画像５０１ａ、５０１ｃは顔領域に基づいた表示制御を行う機能がＯＦＦの場合、撮像画像５０１ｂ、５０１ｄはその機能がＯＮの場合に画像表示部１０８に表示される撮像画像である。

顔領域に基づいた表示制御を行う機能がＯＦＦの場合は、撮像画像５０１ａ、５０１ｃのように、人物Ｈ１〜Ｈ４の顔領域５０２ａ〜５０２ｄや顔領域以外の時計などに区別なく、ゼブラパターン５０３ａ〜５０３ｅが重畳表示される。顔領域に基づいた表示制御を行う機能がＯＮの場合は、特殊画像領域として検出された人物Ｈ１〜Ｈ４の顔領域５０２ａ〜５０２ｄにゼブラパターンが表示されず、その顔領域の縁に沿った外側の画像領域にゼブラパターン５０４ａ〜５０４ｄが表示される。なお、顔領域以外の時計などのゼブラパターン５０３ｅはそのまま表示される。すなわち、撮像装置１では、顔領域とそれ以外の画像領域とにおいて、ゼブラパターン表示の表示方法が互いに異なるように区別して表示される。
［第２実施形態］
次に、撮像装置の第２実施形態について、図６を参照して詳細に説明する。なお、以下で説明する第２実施形態は、第１実施形態において図５を参照して説明した表示形態の変形例である。従って、装置構成や処理内容については、第１実施形態と同様であるため、その説明を省略する。ここで、図６は第２実施形態において画像表示部に表示される撮像画像を例示する概念図であり、図６（ａ）は撮像画像６０１ａを例示する概念図である。また、図６（ｂ）は、撮像画像６０１ｂを例示する概念図である。また、図６（ｃ）は、撮像画像６０１ｃを例示する概念図である。また、図６（ｄ）は、撮像画像６０１ｄを例示する概念図である。また、図６（ｅ）は、撮像画像６０１ｅを例示する概念図である。

図６（ａ）に示すように、撮像画像６０１ａは、人物Ｈ５〜Ｈ７を撮像した画像であり、顔領域に基づいた表示制御を行う機能がＯＮの場合に画像表示部１０８に表示された画像である。撮像画像６０１ａのように、人物Ｈ５〜Ｈ７の顔領域６０２ａ〜６０２ｃへのゼブラパターンについては、その顔領域６０２ａ〜６０２ｃに関連付けられたタグ領域にゼブラパターン６０３ａ〜６０３ｃとして表示してもよい。

図６（ｂ）に示すように、撮像画像６０１ｂは、人物Ｈ８を撮像した画像であり、顔領域に基づいた表示制御を行う機能がＯＮの場合に画像表示部１０８に表示された画像である。撮像画像６０１ｂのように、人物Ｈ８の顔領域６０２ｄへのゼブラパターンについては、顔領域と重ならないように画面端などに設けられた表示領域にゼブラパターン６０４として表示してもよい。すなわち、撮像画像６０１ｂのように、ゼブラパターンを表示させる場合は、人物Ｈ８の顔領域６０２ｄなどである被写体領域と重複した領域には重畳させず、重複した被写体領域以外の領域に表示させる。例えば、その被写体領域の周囲に表示させてもよい。

図６（ｃ）に示すように、撮像画像６０１ｃは、人物Ｈ５〜Ｈ７を撮像した画像であり、顔領域に基づいた表示制御を行う機能がＯＮの場合に画像表示部１０８に表示された画像である。撮像画像６０１ｃにおいて、検出された人物Ｈ５〜Ｈ７の顔領域６０２ａ〜６０２ｃにはタグ画像６０５ａ〜６０５ｃが設けられている。また、顔領域と重ならない画面端などには、タグ画像６０５ａ〜６０５ｃに対応したゼブラパターン６０４ａ〜６０４ｃを表示する領域が設けられている。なお、顔領域が複数ある場合は、その顔領域の個数分のゼブラパターン６０４ａ〜６０４ｃが上記画面端の領域に並べて表示される。このように、人物Ｈ５〜Ｈ７の顔領域６０２ａ〜６０２ｃへのゼブラパターンについては、顔領域と重ならない画面端などの領域において、顔領域６０２ａ〜６０２ｃのタグ画像６０５ａ〜６０５ｃに対応して表示してもよい。このとき、タグ画像６０５ａ〜６０５ｃの各々とゼブラパターン６０４ａ〜６０４ｃとにおいて、互いに対応関係にあるものについては、同一の表示色や同一の網掛けを行うなど、表示態様で対応させてもよい。

図６（ｄ）に示すように、撮像画像６０１ｄは、人物Ｈ５〜Ｈ７を撮像した画像であり、顔領域に基づいた表示制御を行う機能がＯＮの場合に画像表示部１０８に表示された画像である。撮像画像６０１ｃにおいて、検出された人物Ｈ５〜Ｈ７の顔領域には顔領域枠６０６ａ〜６０６ｃが設けられている。また、顔領域と重ならない画面端などには、顔領域枠６０６ａ〜６０６ｃに対応したゼブラパターン６０４ｄ〜６０４ｆを示す領域が設けられている。なお、顔領域が複数ある場合は、その顔領域の個数分のゼブラパターン６０４ｄ〜６０４ｆが上記画面端の領域に表示される。このように、人物Ｈ５〜Ｈ７の顔領域へのゼブラパターンについては、顔領域と重ならない画面端などの領域において、顔領域枠６０６ａ〜６０６ｃと対応したゼブラパターン６０４ｄ〜６０４ｆとして表示してもよい。このとき、顔領域枠６０６ａ〜６０６の各々とゼブラパターン６０４ｄ〜６０４ｆとにおいて、互いに対応関係にあるものについては、同一の表示色や同一の網掛けを行うなど、表示方法で対応させてもよい。

図６（ｅ）に示すように、撮像画像６０１ｅは、窓枠Ｗ２を背後にした人物Ｈ９を撮像した画像であり、顔領域に基づいた表示制御を行う機能がＯＮの場合に画像表示部１０８に表示された画像である。この撮像画像６０１ｅのように、検出された人物Ｈ９の顔領域６０２へのゼブラパターンについては、その表示を行わないものであってもよい。
［第３実施形態］
次に、撮像装置の第３実施形態について、図７、図８を参照して詳細に説明する。なお、以下で説明する第３実施形態は、特殊領域検出部１０６で検出される特殊画像領域が合焦領域である場合の第１実施形態の変形例である。従って、装置構成については、第１実施形態と同様であるため、その説明を省略する。ここで、図７は、撮像装置１の表示制御動作を示したフローチャートである。図８は、画像表示部１０８に表示される撮像画像を例示する概念図である。

先ず、第３実施形態に係る撮像装置１の表示制御動作であり、ＣＰＵ２０３の制御の下で行われる表示制御部１０７の処理について説明する。なお、第３実施形態では、画像入力部１０１による撮像画像にゼブラパターンを重畳して画像表示部１０８に表示するものとし、特殊領域検出部１０６で検出される特殊画像領域は合焦領域であるものとする。

図７に示すように、表示制御部１０７は、表示制御処理が開始されると、操作部１０５の電源スイッチなどにより現在電源が入っている状態であるか否かを判定する（Ｓ２０１）。電源が入っている場合（Ｓ２０１：ＹＥＳ）、表示制御部１０７は、操作部１０５の設定スイッチなどによりゼブラパターン表示の設定がＯＮであるか否かを判定する（Ｓ２０２）。ゼブラパターン表示の設定がＯＮである場合（Ｓ２０２：ＹＥＳ）、表示制御部１０７は、操作部１０５の機能スイッチなどにより、特殊領域検出部１０６で検出された合焦領域に基づいた表示制御を行う機能がＯＮであるか否かを判定する（Ｓ２０３）。

合焦領域に基づいた表示制御を行う機能がＯＦＦである場合（Ｓ２０３：ＮＯ）、表示制御部１０７は、入力された撮像画像の各画素対応の画像信号について輝度強度を検出する（Ｓ２０４）。次いで、表示制御部１０７は、各画素対応の画像信号について、検出された輝度強度が予め設定された設定条件を満たし、ゼブラパターン表示を行う輝度強度の範囲内の値であるか否かを判定する（Ｓ２０５）。各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内である場合（Ｓ２０５：ＹＥＳ）、表示制御部１０７は、画像信号にゼブラパターンを重畳する（Ｓ２０６）。また、各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内でない場合（Ｓ２０５：ＮＯ）、表示制御部１０７は、画像信号にゼブラパターンの重畳を行わない。表示制御部１０７は、電源がＯＦＦされない間、Ｓ２０１〜Ｓ２０６の処理を繰り返す。

合焦領域に基づいた表示制御を行う機能がＯＮである場合（Ｓ２０３：ＹＥＳ）、特殊領域検出部１０６において撮像画像から合焦領域が検出される（Ｓ２０７）。次いで、表示制御部１０７は、Ｓ２０４、Ｓ２０５と同様に、入力された撮像画像の各画素対応の画像信号について輝度強度を検出し（Ｓ２０８）、その画像信号がゼブラパターン表示を行う輝度強度の範囲内の値であるか否かを判定する（Ｓ２０９）。各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内でない場合（Ｓ２０９：ＮＯ）、表示制御部１０７は、画像信号にゼブラパターンの重畳を行わない。

各画素対応の画像信号がゼブラパターン表示を行う輝度強度の範囲内である場合（Ｓ２０９：ＹＥＳ）、表示制御部１０７は、その画像信号が特殊領域検出部１０６により検出された合焦領域に含まれる画素の画像信号であるか否かを判定する（Ｓ２１０）。合焦領域に含まれる画素の画像信号でない場合（Ｓ２１０：ＮＯ）、表示制御部１０７は、その画像信号にゼブラパターンを重畳する（Ｓ２１１）。合焦領域に含まれる画素の画像信号である場合（Ｓ２１０：ＹＥＳ）、表示制御部１０７は、その合焦領域外の画像領域にゼブラパターンの重畳を行う（Ｓ２１２）。表示制御部１０７は、電源がＯＦＦされない間、Ｓ２０１〜Ｓ２０３、Ｓ２０７〜Ｓ２１２の処理を繰り返す。

上述した処理により、撮像装置１の画像表示部１０８には、図８に例示した撮像画像が表示されることとなる。図８において、撮像画像８０１ａ、８０１ｂは窓枠Ｗ３を背後にした人物Ｈ１０を撮像した画像である。また、撮像画像８０１ａは合焦領域に基づいた表示制御を行う機能がＯＦＦの場合、撮像画像８０１ｂはその機能がＯＮの場合に画像表示部１０８に表示される撮像画像である。

合焦領域に基づいた表示制御を行う機能がＯＦＦの場合は、撮像画像８０１ａのように、人物Ｈ１０の顔に合焦した合焦領域８０２やその合焦領域以外の時計などに区別なく、ゼブラパターン８０３ａ、８０３ｂが重畳表示される。合焦領域に基づいた表示制御を行う機能がＯＮの場合は、特殊画像領域として検出された合焦領域８０２にゼブラパターンが表示されず、その合焦領域の縁に沿った外側の画像領域にゼブラパターン８０４が表示される。なお、合焦領域以外の時計などのゼブラパターン８０３ｂはそのまま表示される。すなわち、撮像装置１では、合焦領域とそれ以外の画像領域とにおいて、ゼブラパターン表示の表示方法が互いに異なるように区別して表示される。
［第４実施形態］
次に、撮像装置の第４実施形態について、図９、図１０を参照して詳細に説明する。前述した第１、第２、及び第３実施形態では、特殊領域検出部１０６で検出された被写体領域内に含まれる補助画像の表示対象画素の総和が、所定の割合以上となる場合に、補助画像の表示方法を変更するものとした。しかし、その場合、被写体領域内のどの部分に補助画像の表示対象画素が存在しているかを、表示された補助画像から判断することが出来なかった。そこで、第４実施形態では、被写体領域を複数の小領域に分割し、分割した小領域の位置に対応させて補助画像も複数の小領域に分割して表示する。すなわち、被写体領域以外の領域に補助画像を重畳して表示する場合に、補助画像の複数の小領域によって、被写体領域内において補助画像の表示対象画素が分布している部分と分布していない部分とを識別可能な詳細な表示を行う。なお、以下で説明する第４実施形態は、特殊領域検出部１０６で検出される特殊画像領域が顔領域である場合の第１実施形態の変形例である。従って、装置構成については、第１実施形態と同様であるため、その説明を省略する。

図９は第４実施形態において、特殊画像領域である顔領域に対応する補助画像の表示形態を示す。また、顔領域に対応する特殊画像表示形態として、図９（ｂ）の１１０２、図９（ｃ）の１１０３の２パターンを用いて説明する。１１０２は顔領域の縁に沿った外側の画像領域にゼブラパターンを表示する形態とし、１１０３は顔領域に対応付けたタグ領域にゼブラパターンを表示する形態とする。

図９（ａ）で示すように顔領域１１０１をＡ、Ｂ、Ｃ、Ｄの領域に４分割する。４分割した領域に対応する特殊画像１１０２または１１０３も４分割し、顔領域Ａ、Ｂ、Ｃ、Ｄに対応する特殊画像領域をそれぞれＡ’、Ｂ’、Ｃ’、Ｄ’とする。顔領域Ａに対応する特殊画像表示を１１０２ａ、１１０３ａに示す。顔領域Ｂに対応する特殊画像表示を１１０２ｂ、１１０３ｂに示す。顔領域Ｃに対応する特殊画像表示を１１０２ｃ、１１０３ｃに示す。顔領域Ｄに対応する特殊画像表示を１１０２ｄ、１１０３ｄに示す。実際の顔領域と合わせた表示概念図をそれぞれ図９ｄ、図９ｅに示す。

図１０は第４実施形態において画像表示部に表示される撮像画像を例示する概念図である。

撮像画像１２０１ａ〜１２０１ｆは人物Ｈ１２を撮像した画像であり、撮像画像１２０１ｇ、１２０１ｈは人物Ｈ１３〜Ｈ１５を撮像した画像である。また、撮像画像１２０１ａ、１２０１ｃ、１２０１ｅ、１２０１ｇは顔領域に基づいた表示制御を行う機能がＯＦＦの場合、撮像画像１２０１ｂ、１２０１ｄ、１２０１ｆ、１２０１ｈはその機能がＯＮの場合に画像表示部１０８に表示される撮像画像である。このとき、撮像画像１２０１ａ、１２０１ｄ、１２０１ｆは図９の１１０２に示すように、顔領域の縁に沿った外側の画像領域にゼブラパターンを表示する形態とし、撮像画像１２０１ｈは図９の１１０３に示すように、タグ領域にゼブラパターンを表示する形態とする。

顔領域に基づいた表示制御を行う機能がＯＦＦの場合は、撮像画像１２０１ａ、１２０１ｃ、１２０１ｅ、１２０１ｇのように、人物Ｈ１２〜Ｈ１５の顔領域１２０２ａ〜１２０２ｄや顔以外の領域に区別なく、ゼブラパターン１２０４a〜１２０４ｍが表示される。顔領域に基づいた表示制御を行う機能がＯＮの場合は、特殊画像領域として検出された人物Ｈ１２〜Ｈ１５の顔領域１２０２ａ〜１２０２ｄにゼブラパターンが表示されず、その顔領域の外側の画像領域に４分割した顔領域に対応したゼブラパターン１２０３a〜１２０３ｆが表示される。なお、顔領域以外の時計などのゼブラパターン１２０４ａ〜１２０４ｃはそのまま表示される。すなわち、撮像装置１では、顔領域とそれ以外の画像領域において、ゼブラパターンの表示方法が互いに異なるように区別して表示される。
［第５実施形態］
次に、撮像装置の第５実施形態について、図１１、図１２を参照して詳細に説明する。なお、以下で説明する第５実施形態は、画像入力部１０１による撮像画像にピーキングを重畳して画像表示部１０８に表示するものであり、第１実施形態の変形例である。従って、装置構成については、第１実施形態と同様であるため、その説明を省略する。ここで、図１１は、撮像装置１の表示制御動作を示したフローチャートである。図１２は、画像表示部１０８に表示される撮像画像を例示する概念図である。

先ず、第５実施形態に係る撮像装置１の表示制御動作であり、ＣＰＵ２０３の制御の下で行われる表示制御部１０７の処理について説明する。なお、第５実施形態では、画像入力部１０１による撮像画像にピーキングを重畳して画像表示部１０８に表示するものとし、特殊領域検出部１０６で検出される特殊画像領域は顔領域であるものとする。

図１１に示すように、表示制御部１０７は、表示制御処理が開始されると、操作部１０５の電源スイッチなどにより現在電源が入っている状態であるか否かを判定する（Ｓ３０１）。電源が入っている場合（Ｓ３０１：ＹＥＳ）、表示制御部１０７は、操作部１０５の設定スイッチなどによりピーキング表示の設定がＯＮであるか否かを判定する（Ｓ３０２）。ピーキング表示の設定がＯＮである場合（Ｓ３０２：ＹＥＳ）、表示制御部１０７は、操作部１０５の機能スイッチなどにより、特殊領域検出部１０６で検出された顔領域に基づいた表示制御を行う機能がＯＮであるか否かを判定する（Ｓ３０３）。

顔領域に基づいた表示制御を行う機能がＯＦＦである場合（Ｓ３０３：ＮＯ）、表示制御部１０７は、入力された撮像画像の画像信号のエッジレベルの検出、すなわち、前述した輪郭検出を行う（Ｓ３０４）。次いで、表示制御部１０７は、検出された輪郭に基づいたピーキング表示を通常の表示色で撮像画像に重畳し、画像表示部１０８の表示画面上に表示させる。表示制御部１０７は、電源がＯＦＦされない間、Ｓ３０１〜Ｓ３０５の処理を繰り返す。

顔領域に基づいた表示制御を行う機能がＯＮである場合（Ｓ３０３：ＹＥＳ）、特殊領域検出部１０６において撮像画像から顔領域が検出される（Ｓ３０６）。次いで、表示制御部１０７は、Ｓ３０４と同様に、入力された撮像画像の画像信号のエッジレベルの検出、すなわち、前述した輪郭検出を行う（Ｓ３０７）。次いで、表示制御部１０７は、検出された輪郭が特殊領域検出部１０６により検出された顔領域に含まれるか否かを判定する（Ｓ３０８）。検出された輪郭が顔領域に含まれない場合（Ｓ３０８：ＮＯ）、表示制御部１０７は、検出された輪郭に基づいたピーキング表示を通常の表示色で撮像画像に重畳し、画像表示部１０８の表示画面上に表示させる（Ｓ３０９）。検出された輪郭が顔領域に含まれる場合（Ｓ３０８：ＹＥＳ）、表示制御部１０７は、検出された輪郭に基づいたピーキング表示を顔領域用の表示色で撮像画像に重畳し、画像表示部１０８の表示画面上に表示させる（Ｓ３１０）。表示制御部１０７は、電源がＯＦＦされない間、Ｓ３０１〜Ｓ３０３、Ｓ３０６〜Ｓ３１０の処理を繰り返す。

上述した処理により、撮像装置１の画像表示部１０８には、図１２に例示した撮像画像が表示されることとなる。図１２において、撮像画像９０１ａ、９０１ｂは、窓枠Ｗ４を背後にした人物Ｈ１１を撮像した画像である。また、撮像画像９０１ａは顔領域に基づいた表示制御を行う機能がＯＦＦの場合、撮像画像９０１ｂはその機能がＯＮの場合に画像表示部１０８に表示される撮像画像である。

顔領域に基づいた表示制御を行う機能がＯＦＦの場合は、撮像画像９０１ａのように、検出された人物Ｈ１１の顔領域９０２の内外を区別なく、その人物Ｈ１１の輪郭線に沿ったピーキング表示９０３が行われる。顔領域に基づいた表示制御を行う機能がＯＮの場合は、顔領域９０２の内部の表示色とその顔領域９０２の外部の表示色とが区別されたピーキング表示９０４が行われる。すなわち、撮像装置１では、顔領域とそれ以外の画像領域とにおいて、ピーキング表示の色を変えて表示される。

なお、上述した実施形態における記述は、一例を示すものであり、これに限定するものではない。上述した実施形態における構成及び動作に関しては、適宜変更が可能である。例えば、特殊画像領域内のゼブラパターンについては、顔領域や合焦領域等の特殊画像領域外に表示する構成を例示したが、第５実施形態に例示したように、特殊画像領域内とその領域外とで表示色や表示方法を互いに異なるようにしてもよい。逆に、特殊画像領域内のピーキングについては、特殊画像領域外に表示してもよい。

また、上記実施形態を組み合わせた形態であってもよい。具体的には、表示色と表示形態（点滅の有無や線種など）との組み合わせが異なるような表示方法であってもよい。すなわち、撮像画像の画像領域の中の特殊画像領域と、撮像画像の画像領域の中の特殊画像領域外の他の画像領域と、における補助画像の表示方法が、表示色と表示形態の組み合わせにおいて互いに異なるようにしてもよい。

以上のように、撮像装置１は、画像入力部１０１により撮像された撮像画像を画像表示部１０８に表示させる表示制御部１０７を備えている。また、撮像装置１は、撮像画像から、予め定めた輝度の条件を満たす画素からなる輝度領域を検出する信号強度検出部２０１と、撮像画像から、予め定めた特徴を有する被写体領域を検出する特殊領域検出部１０６を備えている。また、表示制御部１０７は、輝度領域を表す補助画像を撮像画像に重畳して画像表示部１０８に表示させるとともに、輝度領域と被写体領域とが重複している場合と、重複していない場合とで補助画像の表示方法を異ならせる。従って、撮像装置１は、予め定めた輝度の条件を満たす画像領域に補助画像を表示する際に、予め定めた特徴を有する被写体領域と重複する領域と他の領域を区別して補助画像を表示することができる。

また、表示制御部１０７は、輝度領域を表すパターン表示を撮像画像に重畳して画像表示部１０８に表示させるとともに、輝度領域と被写体領域とが重複している場合と、重複していない場合とで、パターン表示の表示方法を異ならせる。従って、撮像装置１は、予め定めた特徴を有する被写体領域と重畳する領域と他の領域とを区別して輝度領域を示すパターン表示を行うことができる。

また、信号強度検出部２０１は撮像画像から被写体の輪郭を検出し、特殊領域検出部１０６は人物の顔を含む被写体領域を検出し、表示制御部１０７は被写体の輪郭を表すピーキング表示を撮像画像に重畳して画像表示部１０８に表示させる。さらに、表示制御部１０７は、被写体の輪郭が被写体領域に含まれる場合と、含まれない場合とで、ピーキング表示の表示方法を異ならせる。従って、撮像装置１は、予め定めた特徴を有する被写体領域と重畳する領域と他の領域とを区別して被写体の輪郭を表すピーキング表示を行うことができる。
（他の実施形態）
上述の実施形態は、システム或は装置のコンピュータ（或いはＣＰＵ、ＭＰＵ等）によりソフトウェア的に実現することも可能である。従って、上述の実施形態をコンピュータで実現するために、該コンピュータに供給されるコンピュータプログラム自体も本発明を実現するものである。つまり、上述の実施形態の機能を実現するためのコンピュータプログラム自体も本発明の一つである。

なお、上述の実施形態を実現するためのコンピュータプログラムは、コンピュータで読み取り可能であれば、どのような形態であってもよい。例えば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等で構成することができるが、これらに限るものではない。上述の実施形態を実現するためのコンピュータプログラムは、記憶媒体又は有線／無線通信によりコンピュータに供給される。プログラムを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、磁気テープ等の磁気記憶媒体、ＭＯ、ＣＤ、ＤＶＤ等の光／光磁気記憶媒体、不揮発性の半導体メモリなどがある。

有線／無線通信を用いたコンピュータプログラムの供給方法としては、コンピュータネットワーク上のサーバを利用する方法がある。この場合、本発明を形成するコンピュータプログラムとなりうるデータファイル（プログラムファイル）をサーバに記憶しておく。プログラムファイルとしては、実行形式のものであっても、ソースコードであっても良い。そして、このサーバにアクセスしたクライアントコンピュータに、プログラムファイルをダウンロードすることによって供給する。この場合、プログラムファイルを複数のセグメントファイルに分割し、セグメントファイルを異なるサーバに分散して配置することも可能である。つまり、上述の実施形態を実現するためのプログラムファイルをクライアントコンピュータに提供するサーバ装置も本発明の一つである。

また、上述の実施形態を実現するためのコンピュータプログラムを暗号化して格納した記憶媒体を配布し、所定の条件を満たしたユーザに、暗号化を解く鍵情報を供給し、ユーザの有するコンピュータへのインストールを許可してもよい。鍵情報は、例えばインターネットを介してホームページからダウンロードさせることによって供給することができる。また、上述の実施形態を実現するためのコンピュータプログラムは、すでにコンピュータ上で稼働するＯＳの機能を利用するものであってもよい。さらに、上述の実施形態を実現するためのコンピュータプログラムは、その一部をコンピュータに装着される拡張ボード等のファームウェアで構成してもよいし、拡張ボード等が備えるＣＰＵで実行するようにしてもよい。

Claims (8)

1. 撮像手段と、
   表示手段と、
   前記撮像手段により撮像された撮像画像を前記表示手段に表示させる表示制御手段と、
   前記撮像画像から、所定の輝度の画素からなる第１の領域を検出する第１検出手段と、
   前記撮像画像から、予め定めた特徴を有する第２の領域を検出する第２検出手段とを有し、
   前記表示制御手段は、前記第２の領域を示す画像を第１の表示形式で前記表示手段に表示させ、前記第２の領域が前記第１の領域と重なる場合は前記第１の表示形式とは異なる第２の表示形式で前記第２の領域を示す画像を前記表示手段に表示させることを特徴とする撮像装置。
2. 前記表示制御手段は、前記第２の表示形式で前記第２の領域を示す画像を表示する場合、所定のパターン画像を前記第２の領域を示す画像に重畳して表示することを特徴とする請求項１に記載の撮像装置。
3. 前記表示制御手段は、前記第２の表示形式で前記第２の領域を示す画像を表示する場合、前記所定のパターン画像に対応する画像を前記第２の領域とは異なる所定の位置に表示することを特徴とする請求項２に記載の撮像装置。
4. 前記表示制御手段は、前記第２の表示形式で前記第２の領域を示す画像を表示する場合、所定の表示色を前記第２の領域を示す画像に重畳して表示することを特徴とする請求項１に記載の撮像装置。
5. 前記表示制御手段は、前記第２の表示形式で前記第２の領域を示す画像を表示する場合、前記所定の表示色に対応する画像を前記第２の領域とは異なる所定の位置に表示することを特徴とする請求項４に記載の撮像装置。
6. 前記第２検出手段は、前記被写体領域として人間の顔領域を検出することを特徴とする請求項１に記載の撮像装置。
7. 前記第２検出手段は、前記被写体領域として合焦領域を検出することを特徴とする請求項１に記載の撮像装置。
8. 撮像手段、表示手段を備える撮像装置の制御方法であって、
   前記撮像手段により撮像された撮像画像を前記表示手段に表示させる表示制御工程と、
   前記撮像画像から、所定の輝度の画素からなる第１の領域を検出する第１検出工程と、
   前記撮像画像から、予め定めた特徴を有する第２の領域を検出する第２検出工程とを有し、
   前記表示制御工程は、前記第２の領域を示す画像を第１の表示形式で前記表示手段に表示させ、前記第２の領域が前記第１の領域と重なる場合は前記第１の表示形式とは異なる第２の表示形式で前記第２の領域を示す画像を前記表示手段に表示させることを特徴とする撮像装置の制御方法。

Images