JP2009284235A - 撮像装置 - Google Patents

Abstract

【課題】撮影画像において主要被写体の顔は認識できる一方で主要被写体以外の顔は認識できないように画像処理を行い、主要被写体以外の人物のプライバシーの保護を図ること。
【解決手段】撮像装置であって、撮影画像を表示する表示手段と、前記撮影画像から被写体の顔を抽出する顔抽出手段と、前記顔の面積を算出する顔面積算出手段と、前記顔にモザイク処理を行うモザイク処理手段と、前記モザイク処理手段にて前記顔にモザイク処理を行わない前記被写体である主要被写体の数を設定する主要被写体数設定手段と、を有し、前記モザイク処理手段は、前記顔面積算出手段で算出された面積の最も大きい前記顔から大きい順に前記主要被写体数設定手段で設定された数の前記主要被写体の前記顔にモザイク処理を行わず、前記主要被写体以外の前記顔にモザイク処理を行うこと、を特徴とする。
【選択図】図６

Description

本発明は撮像装置に係り、特に、撮影画像において撮影対象として意図しない被写体の人物のプライバシーの保護を図る技術に関する。

特許文献１には、モニタにおいて、人物をシルエット表示して通話する相手に顔を認識できないようにしたり、人物の背景部分にフェード処理を行う、テレビ電話が開示されている。

特許文献２には、盗撮等の防止のため、ロボットに搭載されたカメラの視線角度が一定角度以上の場合に、撮影された画像の解像度を低下させるなどの画像処理を施すこと、が開示されている。

特許文献３には、検出された顔画像と登録された特定人物の顔画像とを照合し、両顔画像が一致しないときには顔画像にモザイク処理を施し、両顔画像が一致するときには顔画像にモザイク処理を施さないこと、が開示されている。

特許文献４には、撮影画像において来店者などの人物の移動体とそれ以外の領域を分離して、移動体の領域にモザイク処理などの画像処理を施すこと、が開示されている。
特開平６−７０３１３号公報 特開２００３−２９１０８４号公報 特開２００４−０６２５６０号公報 特開２００５−２３６４６４号公報

しかしながら、特許文献１では、モニタに表示される人物を一律にシルエット表示するため、顔を認識したい主要被写体までもがシルエット表示されて認識できず、主要被写体とその他の人物を分けて認識することができない。

また、特許文献２では、カメラの視線角度によって一律に撮影画像の解像度の低下などの画像処理を行うため、顔を認識したい主要被写体の撮影画像も解像度が低下されて、主要被写体の顔が認識できないおそれがある。

また、特許文献３では、主要被写体などの特定人物の顔画像を認識したい場合には、その顔画像を予め登録しておく必要があり、予め登録していない特定人物は一律に顔画像を認識できない。

また、特許文献４では、移動体の領域にモザイク処理などの画像処理を施すため、主要被写体であってもモザイク処理が施され、主要被写体の顔画像を認識できないおそれがある。

また、デジタルカメラなどの撮影画像には、撮影者が撮影対象として意図している主要被写体以外の人物も写り込むことがある。そして、このような撮影画像を不特定多数の人にインターネット等で公開する際には、主要被写体以外の人物の顔部分に、モザイク処理や塗りつぶし処理や画質低下処理などの画像処理を行って個人の特定ができない状態に加工し、プライバシーの保護を図る必要がある。しかし、デジタルカメラやカメラ付き携帯電話の撮影画像を携帯電話などにより直接、インターネットのホームページやブログにアップロードする際には、パソコン等の画像処理装置を用いて画像処理を行うことができず、主要被写体以外の人物のプライバシーの保護を図ることができないおそれがある。

本発明はこのような事情に鑑みてなされたもので、撮影画像において主要被写体の顔は認識できる一方で、主要被写体以外の顔は認識できないように画像処理を行ってプライバシーの保護を図ることができる撮像装置を提供すること、を目的とする。

前記目的を達成するために請求項１に係る発明は、撮像装置であって、撮影画像を表示する表示手段と、前記撮影画像から被写体の顔を抽出する顔抽出手段と、前記顔の面積を算出する顔面積算出手段と、前記顔にモザイク処理を行うモザイク処理手段と、前記モザイク処理手段にて前記顔にモザイク処理を行わない前記被写体である主要被写体の数を設定する主要被写体数設定手段と、を有し、前記モザイク処理手段は、前記顔面積算出手段で算出された面積の最も大きい前記顔から大きい順に前記主要被写体数設定手段で設定された数の前記主要被写体の前記顔にモザイク処理を行わず、前記主要被写体以外の前記顔にモザイク処理を行うこと、を特徴とする。

本発明によれば、主要被写体の顔が認識できる一方で主要被写体以外の顔は認識できないので、主要被写体以外の人物のプライバシーの保護が図れる。

前記目的を達成するために請求項２に係る発明は、撮像装置であって、撮影画像を表示する表示手段と、前記撮影画像から被写体の顔を抽出する顔検出手段と、前記顔にモザイク処理を行うモザイク処理手段と、を有し、前記モザイク処理手段は、前記表示手段に表示された前記撮影画像にてモザイク処理を行うとして指定された前記顔にモザイク処理を行うこと、を特徴とする。

本発明によれば、被写体の顔を確認しながらモザイク処理を行うことにより、主要被写体の顔が認識できる一方で主要被写体以外の顔は認識できないようにすることができ、主要被写体以外の人物のプライバシーの保護が図れる。

前記目的を達成するために請求項３に係る発明は、請求項２の撮像装置であって、前記顔の面積を算出する顔面積算出手段と、を有し、前記表示手段は、モザイク処理を行うとして指定するか否かの確認を促すために前記顔の部分に表示されるカーソル表示について、前記顔面積算出手段により算出された前記顔の面積の大きい順または小さい順に表示すること、を特徴とする。

本発明によれば、モザイク処理を行うべき主要被写体以外の顔を簡単に指定することができる。

前記目的を達成するために請求項４に係る発明は、請求項１乃至３のいずれか１つの撮像装置であって、前記撮影画像を転送する通信手段を有し、前記表示手段は、前記通信手段により前記撮影画像を転送するときに、前記顔にモザイク処理を行うか否かの確認を促すための表示を行なうこと、を特徴とする。

本発明によれば、モザイク処理を行っていない元の撮影画像を誤って転送すること、を防止できる。

本発明によれば、撮影画像において主要被写体の顔は認識できる一方で主要被写体以外の顔は認識できないように画像処理を行い、主要被写体以外の人物のプライバシーの保護を図ることができる。

以下添付図面に従って本発明の好ましい実施の形態について詳説する。

＜第１実施形態＞
〔デジタルカメラの構成〕
図１は、本発明に係る撮像装置の第1実施形態として、デジタルカメラ１の内部構成の一例を示すブロック図である。図１に示すように、デジタルカメラ１は、制御部１０、シャッターボタン１２、操作スイッチ１４、レンズ１６、ＣＣＤ１８、ＴＧ（タイミングジェネレータ）２０、アナログ信号処理部２２、Ａ／Ｄコンバータ２４、デジタル信号処理部２６、メモリ２８、圧縮伸長処理部３０、ＬＣＤ３２、記録部３４、顔演算処理部３８、モザイク処理部４０等を備えている。

制御部１０は、デジタルカメラ１の全体の動作を統括制御する制御手段として機能するとともに、各種の演算処理を行う演算手段として機能し、シャッターボタン１２、操作スイッチ１４からの入力に基づき所定の制御プログラムに従ってデジタルカメラ１の各部を制御する。

ＣＣＤ１８、たとえば、所定のカラーフィルタ配列のカラーＣＣＤで構成されており、レンズ１６によって結像された被写体の画像を電子的に撮像する。

ＴＧ２０は、制御部１０からの指令に応じて、このＣＣＤ２０を駆動するためのタイミング信号を出力する。

アナログ信号処理部２２は、ＣＣＤ２０から出力された画像信号に対して相関二重サンプリング処理（撮像素子の出力信号に含まれるノイズ（特に熱雑音）等を軽減することを目的として、撮像素子の１画素毎の出力信号に含まれるフィードスルー成分レベルと画素信号成分レベルとの差をとることにより正確な画素データを得る処理）を行い、増幅して出力する。

Ａ／Ｄコンバータ２４は、アナログ信号処理部２２から出力されたＲ、Ｇ、Ｂのアナログの画像信号をデジタルの画像信号に変換する。

デジタル信号処理部２６は、同時化回路（単板撮像素子のカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路）、ホワイトバランス補正回路、ガンマ補正回路、輪郭補正回路、輝度・色差信号生成回路等を含み、制御部１０からの指令に従い、入力された画像信号に所要の信号処理を施し、輝度データ（Ｙデータ）と色差データ（Ｃｒ，Ｃｂデータ）とからなる画像データ（ＹＵＶデータ）を生成する。

メモリ２８には、制御部１０が実行する制御プログラム及び制御に必要な各種データ等や、ユーザ設定情報等の各種設定情報が格納されている。また、メモリ２８は、制御部１０の作業用領域として利用されるとともに、画像データの一時記憶領域として利用され、表示用の画像データ専用の一時記憶領域として利用される。

圧縮伸長処理部３０は、制御部１０からの指令に従い、入力された画像データに所定形式の圧縮処理を施し、圧縮画像データを生成する。また、制御部１０からの指令に従い、入力された圧縮画像データに所定形式の伸長処理を施し、非圧縮の画像データを生成する。

ＬＣＤ３２には、制御部１０からの指令に従い、入力された画像信号が表示される。記録部３４は、制御部１０により画像データの読み／書きが制御される。

顔演算処理部３８は、被写体の顔の演算処理を行う手段である。顔演算処理部３８は、顔抽出処理部４２、顔カウント処理部４４、顔位置検出処理部４６により構成されている。顔抽出処理部４２は撮影画像の被写体の顔の抽出を行なう手段であり、顔カウント処理部４４は撮影画像の被写体の顔の数をカウントする手段であり、顔位置検出処理部４６は撮影画像の被写体の顔の位置を検出する手段である。

特に、顔抽出処理部４２は、スルー画の画像、又は記録された画像から被写体の特定対象、すなわち、顔、目、瞳、鼻、口等を検出し、それらの特徴点、パターンを識別することにより被写体の顔を抽出する。顔抽出の具体的な方法は、エッジ検出又は形状パターン検出による顔抽出方法、前述した各特定対象の特徴点をベクトル化し、特徴点ベクトルを近似検出することによる、特徴点ベクトル近似法、色相検出又は肌色検出による顔検出方法等の公知の方法を利用することができる。顔抽出処理部４２は、人物の顔を検出すると、その顔の表示領域を示す情報を顔評価値と共に制御部１０に出力し、必要に応じて表示領域を示す枠や、それに付随する情報をＬＣＤ３２に表示することができる。

モザイク処理部４０は、被写体の顔の画像処理を行う手段である。

〔顔抽出処理の説明〕
ここで、顔抽出処理部４２の詳細を、前記特徴点ベクトル近似法を例に説明する。図２は特徴点ベクトル近似法の例を示す。

図２（ａ）は、顔抽出を行い、抽出されたか、されないかの結果と、枠の表示位置、そして大きさを出力することが可能な顔抽出処理部４２の実施の形態を示すブロック図である。入力された画像信号から、検出位置を移動しながら、パラメータ検出処理部４８，５０が、それぞれ異なるパラメータを検出する。ベクトル合成処理部５２は、検出されたパラメータを合成し、ベクトルを生成する。例えばパラメータが８種類ある場合には、８次元のベクトルが合成される。判定処理部５４は、合成されたベクトルと、辞書５６に記憶されたリファレンスベクトルを比較し、差が所定の値以下である時に、顔と判定する。尚、リファレンスベクトルは顔の特徴に応じて複数記憶されていることが望ましい。前記判定後、判定されたか否かの結果と、前記検出位置およびパラメータの検出位置から得られる顔を表す枠の位置を、出力部５８から出力する。

図２（ｂ）は、顔抽出を行い、抽出された顔の標準化された顔評価値と、枠の表示位置、そして大きさを出力することが可能な顔検出部である。ベクトル合成処理部５２で、それぞれのパラメータを合成し、ベクトルを生成する部分までは図２（ａ）と同一であるので説明を省略する。判定処理部６０は、合成されたベクトルと、辞書５６に記憶されたリファレンスベクトルを比較し、ベクトル間の差を絶対値として、顔評価値とする。尚、リファレンスベクトルが複数の場合、各リファレンスベクトルと合成されたベクトルの差を、さらにベクトル合成（自乗和）した値が、顔評価値となる。つまり、理想的にリファレンスベクトルと一致する場合は出力が０になる。顔評価値算出後、顔評価値は標準化処理部６２に送られ、標準化された顔評価値と、前記検出位置およびパラメータの検出位置から得られる顔を表す枠の位置を出力部６４から出力する。標準化手法は、後述する表示される枠の表示方法によって適宜選ばれるのが望ましい。尚、図２では各処理部が分かれているが、顔抽出処理部４２はすべてを制御部１０で行うことも可能である。この場合は全てをソフトウェアで処理することとなる。

〔撮影画像の画像処理の説明〕
図３は、第１実施形態における撮影画像の画像処理の実施例を表わすフローチャートである。図３に示すように、撮影後、メモリ２８に撮影画像を取り込んだ（ステップＳ１）後、顔抽出処理部４２にて被写体の顔抽出処理を行なう（ステップＳ２）。顔抽出処理の方法は、前記の図２で説明したとおりである。

次に、顔位置検出処理部４６にて顔の位置を検出し、顔座標＝Ｘｎ，Ｙｎを求める（ステップＳ３）。

次に、ＬＣＤ３２に撮影画像のプレビュー画表示および顔部分のカーソル表示を行なう（ステップＳ４）。顔部分のカーソル表示は個々の被写体人物について順番に行なわれ、例えば、顔位置検出処理部４６にて検出された顔座標＝Ｘｎ，Ｙｎをもとに、ＬＣＤ３２に表示された撮影画像の上側から順に、または左側から順に、行なわれる。なお、顔部分のカーソル表示の表示方法は特に限定されず、枠による表示や矢印による表示などが考えられる。

次に、カーソル表示された顔のモザイク処理が必要か否かを判断する（ステップＳ５）。具体的には、撮影者が操作スイッチ１４により顔のモザイク処理が必要と指示したか、不要と指示したかを、制御部１０にて判断する。そして、顔のモザイク処理が必要であるとの判断がなされた場合には、カーソル表示された顔についてモザイク処理部４０によりモザイク処理を行なう（ステップＳ６）。

具体的には、撮影者はＬＣＤ３２においてカーソル表示された被写体の顔を確認し、モザイク処理が必要な場合には、操作スイッチ１４により顔のモザイク処理が必要との指示を与える。すると、モザイク処理部４０にてモザイク処理を行なう。

なお、モザイク処理は、顔全体について行う以外に、顔の一部分（例えば、目、鼻、口、顔の輪郭などの部分）について行なってもよい。

次に、撮影画像の画像処理を終了するか否かを判断し（ステップＳ７）、撮影者が操作スイッチ１４により撮影画像の画像処理を終了すると指示しなければ、再びステップＳ４に戻って次の被写体の顔をカーソル表示し、ステップＳ５において、このカーソル表示された顔についてモザイク処理を行うか否かの判断を行なう。

一方、撮影者が操作スイッチ１４によりモザイク処理工程を終了すると指示すれば、画像を記録部３４に記録して（ステップＳ８）、撮影画像の画像処理を終了する。

なお、ステップＳ５にて、顔のモザイク処理は不要であるとの判断がなされた場合には、ステップＳ７にてそのまま撮影画像の画像処理を終了するか否かを判断する。

なお、図３のステップＳ８において、記録部３４にはモザイク処理を行わない原画像と、モザイク処理を行った加工画像の、両方の画像を記録してもよい。または、予め撮影時に２回撮影し、一方の撮影画像について図３のモザイク処理を行わない原画像とし、他方の撮影画像について図３のモザイク処理を行った加工画像とし、両方の画像を記録部３４に記録してもよい。これにより、公開を目的とせず保存用に残しておきたい画像と、公開を目的としプライバシーの保護を図っておきたい画像の両方を記録しておくことができる。

また、モザイク処理を行わない原画像とモザイク処理を行った加工画像の両方を記録部３４に記録する際には、加工画像を低画素で記録し、原画像を高画質で記録してもよい。これにより、例えば、公開を目的とせず高画質な状態で保存用に残しておきたい大切な記念画像と、あくまでもインターネット上などでの公開を目的とし公開用画像として不足のない程度の画質の状態としつつプライバシーの保護を図っておきたい公開用画像の両方を記録しておくことができる。

また、顔抽出処理（ステップＳ２）の後に、顔カウント処理部４４にて撮影画像の被写体の顔をカウントして顔認識数＝ｎを求める工程を追加し、顔認識数＝ｎの全ての顔についてモザイク処理が必要か否かを判断し終えたときには、ステップＳ７において撮影画像の画像処理を終了すると自動的に判断してもよい。

以上のように、第１実施形態では、モザイク処理部４０は、ＬＣＤ３２に表示された撮影画像にてモザイク処理を行うとして撮影者によって指定された被写体の顔にモザイク処理を行う。これにより、撮影画像において主要被写体の顔が認識できる一方で主要被写体以外の顔は認識できないようにすることができ、主要被写体以外の人物のプライバシーの保護が図れる。

＜第２実施形態＞
図４は、本発明に係る撮像装置の第２実施形態として、デジタルカメラ２の内部構成の一例を示すブロック図である。図４に示すように、デジタルカメラ２の構成は、顔面積算出処理部６６が追加された点で第１実施形態のデジタルカメラ１と異なり、その他は第１実施形態のデジタルカメラ１と共通する。顔面積算出処理部６６は顔演算処理部３８に備えられており、撮影画像の被写体の顔の面積を算出する手段である。

また、顔抽出処理部４２における顔抽出処理は、第１実施形態のデジタルカメラ１と共通する。

〔撮影画像の画像処理の説明〕
図５は、第２実施形態における撮影画像の画像処理の実施例を表わすフローチャートである。図５に示すように、第１実施形態と同様に、撮影後、メモリ２８に撮影画像を取り込んだ（ステップＳ１１）後、被写体の顔抽出処理を行い（ステップＳ１２）、顔の位置を検出する（ステップＳ１３）。

次に、第１実施形態と異なり、顔面積算出処理部６６にて顔面積＝Ｓｎを算出する（ステップＳ１４）。算出された顔面積＝Ｓｎの情報は後述するように、ＬＣＤ３２のカーソル表示を行う際に使用する。

次に、ＬＣＤ３２に撮影画像のプレビュー画表示および顔部分のカーソル表示を行なう（ステップＳ１５）。顔部分のカーソル表示は個々の被写体について順番に行なわれるが、ここでは第1実施形態と異なり、顔面積算出処理部６６にて算出された顔面積＝Ｓｎをもとに、顔面積＝Ｓｎの大きい被写体から順に行なわれる。なお、顔部分のカーソル表示の表示方法は特に限定されず、枠による表示や矢印による表示などが考えられる。

次に、第1実施形態と同様に、カーソル表示された顔のモザイク処理が必要か否かを判断し（ステップＳ１６）、顔のモザイク処理が必要であるとの判断がなされた場合には、モザイク処理部４０によりモザイク処理を行い（ステップＳ１７）、撮影画像の画像処理を終了するか否かを判断（ステップＳ１８）し、撮影者が操作スイッチ１４により撮影画像の画像処理を終了すると指示しなければ、再びステップＳ１５に戻って次の被写体の顔をカーソル表示し、ステップＳ１６において、このカーソル表示された顔についてモザイク処理を行うか否かの判断を行なう。

一方、撮影者が操作スイッチ１４によりモザイク処理を終了すると指示すれば、画像を記録部３４に記録して（ステップＳ１９）、撮影画像の画像処理を終了する。

なお、ステップＳ１６にて、顔のモザイク処理は不要であるとの判断がなされた場合には、ステップＳ１８にてそのまま撮影画像の画像処理を終了するか否かを判断する。

なお、第１実施形態と同様に、図５のステップＳ１９において、記録部３４にはモザイク処理を行わない原画像と、モザイク処理を行った加工画像の、両方の画像を記録してもよい。または、予め撮影時に２回撮影し、一方の撮影画像について図５のモザイク処理を行わない原画像とし、他方の撮影画像について図５のモザイク処理を行った加工画像とし、両方の画像を記録部３４に記録してもよい。また、モザイク処理を行わない原画像とモザイク処理を行った加工画像の両方を記録部３４に記録する際には、加工画像を低画素で記録し、原画像を高画質で記録してもよい。

さらに、顔抽出処理（ステップＳ２）の後に、顔カウント処理部４４にて撮影画像の被写体の顔をカウントして顔認識数＝ｎを求める工程を追加してもよい。

また、モザイク処理の粗さを、顔面積算出処理部６６にて算出された顔面積の大きさによって変更してもよい。例えば、顔面積が大きい場合には顔の認識がされ易いのでモザイク処理の粗さを大きくする一方で、顔面積が小さい場合には顔の認識がされ難いのでモザイク処理の粗さを小さくする。

また、モザイク処理に変えて、顔の色が暗くなるような処理を行ってもよい。

以上のように、第２実施形態では、ＬＣＤ３２は、モザイク処理を行うとして指定するか否かの確認を促すために被写体の顔の部分に表示されるカーソル表示について、顔面積算出処理部６６により算出された被写体の顔の面積の大きい順または小さい順に表示する。これにより、モザイク処理を行うべき主要被写体以外の顔を簡単に指定することができる。

＜第３実施形態＞
図６は、本発明に係る撮像装置の第３実施形態として、デジタルカメラ３の内部構成の一例を示すブロック図である。図６に示すように、デジタルカメラ３の構成は、主要被写体数設定部６８が追加された点で第２実施形態のデジタルカメラ２と異なり、その他は第２実施形態のデジタルカメラ２と共通する。主要被写体数設定部６８は、撮影画像における複数の被写体のうち、顔の認識を可能にさせたい被写体である主要被写体の数（以下、主要被写体数という）を設定する手段である。

また、顔抽出処理部４２における顔抽出処理は、第１，２実施形態のデジタルカメラ１，２と共通する。

〔撮影画像の画像処理の説明〕
図７は、第３実施形態における撮影画像の画像処理の実施例を表わすフローチャートである。図７に示すように、第１，２実施形態と同様に、撮影後、メモリ２８に撮影画像を取り込んだ（ステップＳ２１）後、被写体の顔抽出処理を行う（ステップＳ２２）。

次に、第１，２実施形態と異なり、抽出された被写体の顔の数を顔カウント処理部４４にてカウントし、顔認識数＝ｎを算出する（ステップＳ２３）。

次に、第１，２実施形態と同様に、顔の位置を検出し（ステップＳ２４）、顔面積を算出する（ステップＳ２５）。

ここで、第３実施形態では、予め主要被写体数設定部６８により主要被写体数を設定しておく。なお、主要被写体数設定部６８により主要被写体数を設定するタイミングは特に限定されず、撮影前に予め設定しておいてもよい。

次に、モザイク処理部４０にて、モザイク未処理の顔のうち、最も面積の大きい顔が自動的に選択される（ステップＳ２６）。具体的には、抽出された個々の被写体の顔における各顔情報において、モザイク処理終了のフラグが立っていない顔のうち、最も面積の大きい顔が自動的に選択される。なお、面積の大きい顔を自動的に選択するのは、撮影者が撮影対象として意図している主要被写体の顔は、撮影対象として意図していない被写体の顔よりも、比較的に面積が大きいと考えるからである。

次に、モザイク処理部４０にて、設定被写体数に達したか否かを判断する（ステップＳ２７）。具体的には、１つの撮影画像の画像処理において、既に主要被写体数設定部６８により設定された主要被写体数の顔が選択されたか否か判断する。

そして、モザイク処理部４０にて、設定された主要被写体数の顔が未だ選択されておらず、設定被写体数に達していないと判断されたときには、選択されている顔についてモザイク処理を行わずに、顔情報にモザイク処理終了フラグを立てて（ステップＳ２８）、再びステップＳ２６に戻り、次に面積の大きい顔が自動的に選択される。

一方、ステップＳ２７において設定被写体数に達したと判断されたときには、モザイク処理部４０にて、選択されている顔についてモザイク処理を行い（ステップＳ２９）、被写体全員の顔の選択が終了したか否かを判断する（ステップＳ３０）。そして、終了していないと判断されたときには、ステップＳ２９でモザイク処理が行われた顔について、ステップＳ２８にて顔情報にモザイク処理終了フラグを立てて、再びステップＳ２６に戻り、次に面積の大きい顔が自動的に選択される。

なお、ステップＳ２７において設定被写体数に達したと判断され主要被写体の顔の選択が終了したときに、ＬＣＤ３２に表示されている撮影画像において、例えば、主要被写体の顔の部分とそれ以外の顔の部分に表示される枠の表示（色や線種や太さなど）を変えるなど、主要被写体の顔とそれ以外の顔を識別できるようにして、このままステップＳ２８のモザイク処理を行なうか否か、を選択できるようにしてもよい。そして、このままステップＳ２８のモザイク処理を行なわないと選択したときには、ＬＣＤ３２にスルー画を表示して再び撮影を行うことができる状態にしてもよい。

一方、ステップＳ３０にて終了したと判断されたときには、画像を記録部３４に記録して（ステップＳ３１）、撮影画像の画像処理を終了する。

以上のように、第３実施形態では、モザイク処理部４０は、顔面積算出処理部６６で算出された面積の最も大きい被写体の顔から大きい順に主要被写体数設定部６８で設定された数の主要被写体の顔にモザイク処理を行わず、主要被写体以外の顔にモザイク処理を行うので、主要被写体の顔が認識できる一方で主要被写体以外の顔は認識できず、主要被写体以外の人物のプライバシーの保護が図れる。

なお、第１，２実施形態と同様に、図７のステップＳ３１において、記録部３４にはモザイク処理を行わない原画像と、モザイク処理を行った加工画像の、両方の画像を記録してもよい。または、予め撮影時に２回撮影し、一方の撮影画像について図７のモザイク処理を行わない原画像とし、他方の撮影画像について図７のモザイク処理を行った加工画像とし、両方の画像を記録部３４に記録してもよい。これにより、例えば、撮影者が認識していた主要被写体と異なる人物が主要被写体とされ、顔のモザイク処理が行われずに記録部３４に記録された場合であっても、モザイク処理を行わない原画像を読み出して、第１，２実施形態のモザイク処理工程のように撮影者が顔を個別に選択してモザイク処理を行うことにより、主要被写体以外の人物の顔を確実に認識できないようにすること、ができる。また、モザイク処理を行わない原画像とモザイク処理を行った加工画像の両方を記録部３４に記録する際には、加工画像を低画素で記録し、原画像を高画質で記録してもよい。

また、主要被写体数設定部６８により主要被写体数を「０」に設定すれば、例えば、ペット画像や風景画像など人物を主要被写体としない場合に、画像に写りこんだ人物の顔に一律にモザイク処理を行うことができ、撮影者がモザイク処理の指定をする負担がなくなる。

また、第３実施形態では、面積の大きい順から設定した主要被写体数分の顔領域についてはモザイク処理を行わないとしたが、その他に、予め登録した顔に該当する顔についてはモザイク処理を行わないとする実施例も考えられる。これにより、例えば、家族の顔を予め登録しておけば、家族の顔についてはモザイク処理を行わない状態で画像を記録することができる。

また、モザイク処理は、顔全体について行う以外に、顔の一部分（例えば、目、鼻、口、顔の輪郭などの部分）について行なってもよい。さらに、モザイク処理の粗さを、顔面積算出処理部６６にて算出された顔面積の大きさによって変更してもよい。例えば、顔面積が大きい場合には顔の認識がされ易いのでモザイク処理の粗さを大きくする一方で、顔面積が小さい場合には顔の認識がされ難いのでモザイク処理の粗さを小さくする。

また、モザイク処理に変えて、顔の色が暗くなるような処理を行ってもよい。

また、第３実施形態では面積の大きさをもとにモザイク処理を行う顔の選択を行なう方法を説明したが、その他に、撮影モードをもとにモザイク処理を行う顔の選択を行なう方法も考えられる。例えば、風景画モードの場合は風景画を撮影対象としているので、撮影画像に写った全ての人物の顔を一律に選択してモザイク処理を行うことが考えられる。一方、人物モード、スポーツモードの場合は、第３実施形態に示すように面積の大きさをもとにモザイク処理を行う顔の選択を行なうことが考えられる。

＜通信機能を追加した共通実施例＞
次に、前記の第１，２，３実施形態のデジタルカメラ１，２，３において、通信機能を追加した共通実施例を説明する。

図８は、通信部７０を追加した実施例として、第３実施形態のデジタルカメラ３を代表して示している。通信部７０は、赤外線通信、無線ＬＡＮ通信、ブルートゥースなどの通信機能を有する手段である。

図９は、通信部７０を追加した具体的な実施例として、通信部７０により外部機器（パソコンや携帯電話等）に画像を転送する画像転送モードにおける実施例のフローチャート図である。図９に示すように、画像転送モードに設定した後、転送したい画像を選択すると（ステップＳ４１）、ＬＣＤ３２にモザイク処理の要否を確認するメッセージが表示される（ステップＳ４２）。

次に、モザイク処理の要否を判断する（ステップＳ４３）。具体的には、撮影者が操作スイッチ１４により顔のモザイク処理が必要との指示を与えたか否か、を判断する。

そして、モザイク処理が必要との判断がなされた場合には、顔を選択し（ステップＳ４４）、モザイク処理を行った（ステップＳ４５）後に、画像を転送する（ステップＳ４６）。ステップＳ４４における顔を選択するフローとステップＳ１５におけるモザイク処理を行うフローは、前記の第１，２，３実施形態のフローの内容を採用する。

一方、ステップＳ４３においてモザイク処理が不要との判断がなされた場合には、そのまま画像を転送する（ステップＳ４６）。

以上のような画像転送モードにおける適用例によれば、ＬＣＤ３２は、通信部７０により撮影画像を転送するときに、被写体の顔にモザイク処理を行うか否かの確認を促すための表示を行なうので、デジタルカメラ１，２，３の撮影画像をインターネットに転送する際に、通信機能を使用する場合に、誤ってモザイク処理がなされていない未加工の画像が転送されることを防ぐことができる。これにより、例えば、赤外線通信を使ってインターネット上のブログ用の画像を転送する場合であっても、誤ってモザイク処理がなされていない未加工の画像が転送されることを防ぐことができ、撮影画像に写りこんだ人物のプライバシーの保護を図ることができる。

以上、本発明の撮像装置について詳細に説明したが、本発明は、以上の例には限定されず、本発明の要旨を逸脱しない範囲において、各種の改良や変形を行ってもよいのはもちろんである。

第１〜３実施形態では、撮像装置としてデジタルカメラを例に挙げたが、その他、カメラ付き携帯電話を例に挙げることもできる。

本発明に係る撮像装置の第１実施形態の内部構成の一例を示すブロック図である。 顔抽出処理部の詳細な実施の形態を示すブロック図である。 第１実施形態における撮影画像の画像処理の実施例を表わすフローチャートである。 本発明に係る撮像装置の第２実施形態の内部構成の一例を示すブロック図である。 第２実施形態における撮影画像の画像処理の実施例を表わすフローチャートである。 本発明に係る撮像装置の第３実施形態の内部構成の一例を示すブロック図である。 第３実施形態における撮影画像の画像処理の実施例を表わすフローチャートである。 通信部を追加した実施例を示す図である。 通信部により外部機器に画像を転送する画像転送モードにおける実施例のフローチャート図である。

符号の説明

１，２，３…デジタルカメラ、１０…制御部、１２…シャッターボタン、１４…操作スイッチ、１６…レンズ、１８…ＴＧ（タイミングジェネレータ）、２０…ＣＣＤ、２２…アナログ信号処理部、２４…Ａ／Ｄコンバータ、２６…デジタル信号処理部、２８…メモリ、３０…圧縮伸長処理部、３２…ＬＣＤ、３４…記録部、３８…顔演算処理部、４０…モザイク処理部、４２…顔抽出処理部、４４…顔カウント処理部、４６…顔位置検出処理部、６６…顔面積算出処理部、６８…主要被写体数設定部、７０…通信部

Claims (4)

1. 撮影画像を表示する表示手段と、
   前記撮影画像から被写体の顔を抽出する顔抽出手段と、
   前記顔の面積を算出する顔面積算出手段と、
   前記顔にモザイク処理を行うモザイク処理手段と、
   前記モザイク処理手段にて前記顔にモザイク処理を行わない前記被写体である主要被写体の数を設定する主要被写体数設定手段と、を有し、
   前記モザイク処理手段は、前記顔面積算出手段で算出された面積の最も大きい前記顔から大きい順に前記主要被写体数設定手段で設定された数の前記主要被写体の前記顔にモザイク処理を行わず、前記主要被写体以外の前記顔にモザイク処理を行うこと、
   を特徴とする撮像装置。
2. 撮影画像を表示する表示手段と、
   前記撮影画像から被写体の顔を抽出する顔検出手段と、
   前記顔にモザイク処理を行うモザイク処理手段と、を有し、
   前記モザイク処理手段は、前記表示手段に表示された前記撮影画像にてモザイク処理を行うとして指定された前記顔にモザイク処理を行うこと、
   を特徴とする撮像装置。
3. 前記顔の面積を算出する顔面積算出手段と、を有し、
   前記表示手段は、モザイク処理を行うとして指定するか否かの確認を促すために前記顔の部分に表示されるカーソル表示について、前記顔面積算出手段により算出された前記顔の面積の大きい順または小さい順に表示すること、
   を特徴とする請求項２の撮像装置。
4. 前記撮影画像を転送する通信手段を有し、
   前記表示手段は、前記通信手段により前記撮影画像を転送するときに、前記顔にモザイク処理を行うか否かの確認を促すための表示を行なうこと、
   を特徴とする請求項１乃至３のいずれか１つの撮像装置。

Images