JP2009081635A - デジタルカメラ、及びデジタルカメラの個人情報保護方法 - Google Patents

Abstract

【課題】画像に含まれる個人情報を保護する。
【解決手段】撮影時の画像から顔、文字等の個人情報を自動的に検出し、検出された個人情報の領域を表す座標を画像ファイルのタグデータに記録する。撮影済みの画像がモニタに表示されるブログモード時に処理対象画像８４と、この処理対象画像に施したい処理とを選択させる。リサイズ処理及び保護処理が選択されると、処理対象画像８４のタグデータから個人情報の座標を読み出し、顔８５ａ，８６ａ，文字８７ａ等の個人情報が識別できないようにモザイク９１〜９３等の画像処理を行う。同時にホームページ等の掲載に適したサイズに縮小する。保護処理及びリサイズ処理が施された画像は、元の画像とは別のブログ画像８５として記憶される。
【選択図】図１０

Description

本発明は、撮影画像に含まれる人物の顔、及び文字等の個人情報を保護するデジタルカメラと、デジタルカメラによる個人情報保護方法に関する。

インターネットの普及により、個人でホームページを公開したり、ブログやソーシャルネットワークサービス等で情報を発信することが多くなっている。また、これらの情報発信時に、デジタルカメラで撮影した画像が掲載されることも多い。

インターネットによる情報発信では、プライバシー保護が重要となる。従来は、画像から顔や住所等の個人情報が特定できないようにパソコンで画像処理を行ない、この画像処理済みの画像をホームページ等に掲載している。

また、ホームページ等に掲載される画像は、通信速度が低下しないように、ＶＧＡサイズ（６４０×４８０画素）程度に縮小されるのが一般的である。この画像の縮小処理（以下、リサイズ処理と呼ぶ）も従来はパソコンで行う必要があったが、現在はリサイズ処理が可能なデジタルカメラが提供されている。

ところで、撮影した画像から人物の顔を検出する顔検出、もしくは文字を検出する文字検出を利用して、色味変換やコントラスト向上等の画像処理を施し、別画像として記憶するデジタルカメラが発明されている（例えば、特許文献１参照）。また、撮影した画像から検出された顔と、予め記憶されている顔画像とを比較し、一致しないときにモザイク等の画像処理を施してプライバシー保護を行う監視カメラシステムが発明されている（例えば、特許文献２参照）。
特開２００５−１２９９９４号公報 特開２００４−０６２５６０号公報

リサイズ処理と同様に、デジタルカメラで個人情報保護のための画像処理を行えることが望まれている。画像処理を行うには、画像の中から顔や文字等の画像処理範囲を選択しなければならない。しかし、デジタルカメラの小さなモニタで画像を観察しながら、操作ボタンで多数の画像処理範囲を選択するのは非常に難しいという問題がある。

本発明は、上記問題を解決するために、画像処理を施す範囲を簡単に選択できるようにする。

上記課題を解決するために、本発明のデジタルカメラは、撮影画像から人物の顔、及び文字等の個人情報と、この個人情報が存在する領域の座標とを検出する個人情報検出手段と、撮影画像に個人情報の座標を含む付加情報を付加した記憶画像を記憶手段に記憶させる記憶制御手段と、記憶手段から読み出した記憶画像を表示手段に再生表示させる際に、個人情報を保護する保護処理を行うか否かを選択可能にする個人情報保護選択手段と、保護処理を行うことが選択されたときに付加情報から個人情報の座標を取得し、個人情報が識別できないように記憶画像に画像処理を施して保護済み画像を生成する画像処理手段とを備え、記憶制御手段は、保護済み画像を記憶画像とは別の画像として記憶手段に記憶させるようにしたものである。

また、個人情報検出手段は、撮影画像から人物の顔、及び文字等の特徴を抽出し、この特徴が予め設定された閾値以上であるときに個人情報として検出するとともに、特徴の量、または特徴の数等に応じて各個人情報の検出確度を決定し、記憶制御手段は、検出確度を付加情報として記憶画像とともに記憶手段に記憶させるようにしたものである。

また、表示手段に記憶画像と、全ての個人情報に保護処理が施された保護済み画像とを並べて表示させる表示制御手段と、記憶画像に対し、全ての個人情報の保護処理を一括して行わせる一括保護処理と、各個人情報ごとに保護処理の有無を選択させる個別選択処理とのいずれかを選択可能にする保護処理選択手段と、個別選択処理が選択されたときに各個人情報ごとに保護処理の有無の選択を受け付ける個別選択手段とを設けたものである。

個別選択手段は、検出確度が高い順に個人情報の保護処理の有無を選択させるようにしたものである。

また、保護済み画像の保護処理を修正する修正処理を行うか否かを選択可能にする修正選択手段を設け、修正処理を行うことが選択されたときに、表示制御手段は、保護済み画像とこれに対応する記憶画像とを表示手段に並べて表示させ、保護処理選択手段は、個人情報の保護処理を一括して解除する一括解除処理と、個別選択手段による個別選択処理とのいずれかを選択可能にするものである。

個別選択手段は、検出確度が低い順に個人情報の保護処理の有無を選択させるようにしたものである。

画像処理手段は、保護処理選択手段に対する選択内容に合せて記憶画像に画像処理を施して保護処理が修正された保護済み画像を生成し、記憶制御手段は、修正後の保護済み画像を修正前の保護済み画像と同一のファイル名で記憶手段に記憶させるようにしたものである。

保護処理を行った個人情報の特徴と、保護処理を行わなかった個人情報の特徴とを保護特徴及び非保護特徴として記憶し、保護特徴に対応する閾値を下げ、非保護特徴に対応する閾値を上げる検出閾値変更手段を設けたものである。

個人情報検出手段は、特徴が閾値以下であるときには個人情報候補として検出し、記憶制御手段は、個人情報候補の座標を付加情報として記憶画像とともに記憶手段に記憶させるようにしたものである。

記憶制御手段は、個人情報の保護処理及び修正処理の内容を保護処理記録として付加情報に記録し、記憶画像とともに記憶手段に記憶させるようにしたものである。

記憶画像に保護処理を行う際に、付加情報を参照して保護処理記録の有無を確認し、同じ内容の保護処理を行うか否かを選択可能にする再保護処理選択手段を設けたものである。

また、記憶画像だけを再生表示させる第１の再生モードと、記憶画像と保護済み画像とを再生表示させる第２の再生モードとを選択可能にするモード選択手段を設けたものである。

更に、保護処理時の画像処理の内容を選択可能にする処理内容選択手段を設けたものである。

また、保護処理時に画像処理される範囲を表す保護レベルを予め設定された基準保護レベルから変更させる保護レベル設定手段を設けたものである。また、保護レベル設定手段は、人物の顔と文字との保護レベルを別々、または関連付けて変更できるようにしたものである。

保護レベル設定手段は、表示手段に表示されるメニューの言語、もしくは外部機器に映像信号を出力する際の信号形式等の設定に基づいて使用国を判定し、この使用国に応じて基準保護レベルを設定するようにしたものである。

画像処理手段は、個人情報の画像処理と同時に、記憶画像のサイズを変更するリサイズ処理を行うようにしたものである。

本発明のデジタルカメラの個人情報保護方法によれば、撮影画像から人物の顔、及び文字等の個人情報と、この個人情報が存在する領域の座標とを検出するステップと、撮影画像に個人情報の座標を含む付加情報を付加した記憶画像を記憶手段に記憶させるステップと、記憶手段から読み出した記憶画像を表示手段に再生表示させる際に、個人情報を保護する保護処理を行うか否かを選択させるステップと、保護処理を行うことが選択されたときに付加情報から個人情報の座標を取得し、個人情報が識別できないように記憶画像に画像処理を施して保護済み画像を生成するステップと、保護済み画像を記憶画像とは別の画像として記憶手段に記憶させるステップとを含むものである。

本発明のデジタルカメラ及び個人情報保護方法によれば、デジタルカメラで個人情報の保護処理を行うことができるので、パソコンの操作が苦手なユーザでも適切に画像の個人情報を保護することができる。また、個人情報を保護した画像をホームページに掲載したり、他の機器に送信する際に、パソコンで画像編集を行う必要がないので、すぐに掲載または送信することができる。

また、個人情報の検出確度を個人情報の保護に用いるので、適切な保護処理を行うことができる。更に、個人情報が複数存在するときには、一括保護処理、個別選択処理を選択できるので、ユーザのニーズに合せて最適な個人情報保護を行うことができる。個別選択時には、検出確度が高い個人情報から選択することができるので、重要度が高い個人情報を確実に保護することができる。

また、一度設定した保護処理を修正することができる。この修正時には、検出確度の低い画像から選択することができるので、修正処理が短時間で済む。

更に、保護処理内容が修正された保護済み画像は、修正前と同じファイル名で記憶されるので、ファイル数が増えることはない。

また、保護処理の有無によって個人情報の検出に用いられる閾値を変更するので、適切な個人情報検出を行うことができ、保護処理内容の修正も少なくなる。

また、検出が不完全な個人情報も個人情報候補として保護処理に用いることができるので、個人情報を確実に保護することができる。

また、保護処理及び修正処理の内容を元の撮影画像の付加情報に記憶するので、同じ保護処理を行うときに、個人情報の選択を省くことができる。

また、記憶画像が再生表示される第１の再生モードと、記憶画像と保護済み画像とが再生表示される第２の再生モードを設けたので、用途に応じて適切な画像再生を行うことができる。

更に、保護処理の内容を変更することができるので、保護済み画像に個性を持たせることができる、

また、保護レベルを変更することができるので、最適な個人情報保護を行うことができる。更に、保護レベルの変更は、顔、文字を別々に、または関連付けて変更することができるので、ユーザの要望に合せて最適な設定が可能である。

更に、メニュー言語、映像信号の種類に応じて国ごとの保護レベルを設定するので、各国の個人情報保護事情に合せて最適な設定をすることができる。

また、保護処理と同時にリサイズ処理を行うので、ホームページやブログへの掲載に最適な画像を容易に得ることができる。

図１に示すように、本実施形態のデジタルカメラ２は、長方体のカメラ本体３を有している。カメラ本体３の前面には、撮影レンズ４が組み込まれたレンズ開口５と、被写体に向けてフラッシュ光を照射するフラッシュ発光部６が設けられている。このデジタルカメラ２は、撮影レンズ４に入射した被写体光を下方に向けて屈曲させ、カメラ本体３の底面近傍に配置された撮像素子に入射させる屈曲光学系を内蔵している。

カメラ本体３の上面には、動作モードを静止画撮影モードと動画撮影モードの間で切り替えるモードスイッチ７と、撮影操作に用いられるレリーズボタン８、電源ボタン９が設けられている。レリーズボタン８は、半押し操作と、この半押し操作よりも深く押下される全押し操作の２段階の押圧操作が可能な押しボタンである。レリーズボタン８の半押し操作によりＡＦ制御及びＡＥ制御が実施され、レリーズボタン８の全押し操作により撮影が行われる。

カメラ本体３の側面には、他のデジタルカメラやカメラ付き携帯電話機、パソコン等との間で画像ファイルの送受信を行う赤外線通信部１１と、テレビ等の外部モニタに映像信号及び音声信号を出力するＡＶ出力端子１２、パソコンに画像データを送信する際に通信ケーブルが接続される通信端子１３等が設けられている。また、図２に示すように反対側の側面には、メモリカード１４が挿脱されるカードスロット１５が設けられている。メモリカード１４には、静止画、または動画の画像ファイルが記憶される。

カメラ本体３の背面には、液晶ディスプレイパネル（ＬＣＤ）からなるモニタ１８が設けられている。モニタ１８には、静止画撮影モード及び動画撮影モードにおいてスルー画が表示され、再生モードでは撮影済みの画像が再生表示される。更に、モニタ１８には、各種設定メニューが表示され、デジタルカメラ２の設定変更にも利用される。

なお、スルー画表示とは、カメラ本体３に内蔵された撮像素子が所定のフレームレートで撮像を行ない、この撮像された画像をリアルタイムでモニタ１８に表示させる処理であり、モニタ１８をビューファインダとして機能させる。

モニタ１８の側方には、撮影レンズ４の焦点距離を変更する一対のズームボタン２１、上下左右に配された４個のボタンからなり、各種操作に汎用的に用いられる十字ボタン２２、メニュー呼び出しや各種設定時の確定操作に用いられる決定ボタン２３等が設けられている。また、十字ボタン２２の周囲には、感度、記録画素数、色調等の設定が可能な画質設定ボタン２４、顔検出モードのオン／オフを切り替える顔検出ボタン２５、撮影モードと再生モードとを切り替える再生ボタン２６、モニタ１８の表示内容を切り替える表示切替ボタン２７等が設けられている。

顔検出ボタン２５は、デジタルカメラ２が静止画撮影モードにセットされたときに操作可能となる。顔検出モードがオンされると、スルー画表示のために撮像された画像から人物の顔が検出され、検出された顔の領域がフォーカスエリアとして設定される。また、モニタ１８に表示されるスルー画には、検出された顔の周囲に顔検出枠が表示される。なお、本実施形態のデジタルカメラ２は、ＡＦ制御及びＡＥ制御には利用しないものの、顔検出モード以外でも人物の顔及び文字等の個人情報を検出している。

再生ボタン２６が操作されて再生モードにあるときに十字ボタン２２及び決定ボタン２３を操作することで、第２の再生モードであるブログモードに設定することができる。このブログモードは、モニタ１８に再生表示された画像をブログ等のホームページへの掲載に適したサイズ（例えば、ＶＧＡサイズ）にリサイズ処理し、別画像として記憶させるモードである。また、本実施形態のデジタルカメラ２は、このブログモードにおいて、リサイズ処理と同時に保護処理を行うことができる。この保護処理は、画像に含まれる人物の顔や文字等の個人情報を識別できないように画像処理する。

図３に示すように、デジタルカメラ２は、データバスＤＢに接続されたＣＰＵ３０によって各部が統括的に制御されている。システムメモリ３１は、ＣＰＵ３０に制御プログラム等を提供するＲＯＭと、ＲＯＭから読み出されたプログラムが実行される実行エリアとなるＲＡＭとを備えている。ＣＰＵ３０は、制御プログラムに基づいて動作することにより、記憶制御手段、個人情報保護選択手段として動作する。

また、データバスＤＢには、入出力インターフェース（以下、Ｉ／Ｏと呼ぶ）３４が接続されている。Ｉ／Ｏ３４には、レリーズボタン８、ズームボタン２１等の各操作ボタンの操作を検出する検出スイッチと、ＡＶ出力端子１２及び通信端子１３が接続されている。Ｉ／Ｏ３４は、各スイッチから入力された操作信号をデータバスＤＢを介してＣＰＵ３０に入力させ、ＡＶ出力端子１２及び通信端子１３から映像信号及び画像データを送信する。

また、データバスＤＢには、カードインターフェース（以下、カードＩ／Ｆと呼ぶ）３７が接続されてる。カードＩ／Ｆ３７には、カードスロット１５の奥に組み込まれたカードコネクタ３８が接続されている。カードコネクタ３８は、カードスロット１５に挿入されたメモリカード１４と電気的に接続する。カードＩ／Ｆ３７は、カードコネクタ３８を介してメモリカード１４に画像ファイルの書き込み／読み出しを行う。

撮影レンズ４は、焦点距離を変更するズームレンズ４０と、被写体像を撮像素子の受光面に結像させるフォーカスレンズ４１とから構成されている。また、詳しくは図示しないが、撮影レンズ４は、ズームレンズ及びフォーカスレンズの他に、モータ及びモータドライバと、モータにより駆動されてズームレンズ４０及びフォーカスレンズ４１を撮影光軸方向で移動させる機構部等を含んでいる。モータドライバは、データバスＤＢを介してＣＰＵ３０に制御されている。

ズームレンズ４０とフォーカスレンズ４１の間には、撮像素子への入射光量を調節する絞り機構４４が配置されている。この絞り機構４４は、撮影光路を開閉する絞り板、モータ及びモータドライバ、モータにより駆動されて絞り板を移動させる機構部等を含み、モータドライバはデータバスＤＢを介してＣＰＵ３０に制御されている。

撮影光軸方向においてフォーカスレンズ４１の背後に配置される撮像素子には、例えばＣＣＤイメージセンサ（以下、ＣＣＤと省略する）４７が用いられている。ＣＣＤ４７は、撮影レンズ４及び絞り機構４４を介して入射した被写体像を光電変換し、電気的な画像信号に変換する。ＣＣＤ４７は、画素ごとに所定の分光特性を持つカラーフィルタ（例えば、Ｒ（赤），Ｇ（緑），Ｂ（青）の原色カラーフィルタ）が配された単板式のカラーイメージセンサであり、画像信号は、各画素に対応した色の画素信号からなる。

ＣＣＤ４７は、電子的に露光時間（電荷蓄積時間）を調節する電子シャッタ機能を備えており、絞り機構４４と協働して露出を変更する。なお、ＣＣＤ４７は、ＣＣＤドライバ５０により駆動され、ＣＣＤドライバ５０は、データバスＤＢを介してＣＰＵ３０に制御されている。また、ＣＣＤ４７に代えて、ＣＭＯＳタイプのイメージセンサを用いてもよい。

アナログ信号処理部５３は、ＣＣＤ４７から入力されたアナログの画像信号に対して相関二重サンプリング（ＣＤＳ）処理を施して、ＣＣＤ４７のアンプ雑音とリセット雑音とを除去し、これらの雑音を除去した撮像信号を増幅する。この信号増幅率は、ＩＳＯ感度の設定値に応じて変更される。

アナログ信号処理部５３から出力された画像信号は、Ａ／Ｄ変換器５６に入力され、デジタル信号からなる画像データに変換される。デジタル信号処理部５７は、Ａ／Ｄ変換器５６から出力された画像データに色補間、輝度信号Ｙと色差信号ＣとからなるＹＣデータに変換するＹＣ変換、ガンマ補正などの各種信号処理を施し、フレームメモリ５８に記憶する。

また、デジタル信号処理部５７は、ブログモード時に、撮影画像である画像データに対してリサイズ処理と、個人情報を保護するための画像処理とを施す画像処理手段として機能する。

ＬＣＤドライバ６１は、フレームメモリ５８から読み出した画像データを映像信号に変換してモニタ１８にスルー画表示させる。また、顔検出モード下では、検出された顔の周囲に顔選択枠を表示させる。

圧縮／伸張部６５は、撮影後にフレームメモリ５８に記憶された画像データをＪＰＥＧ等の画像データに圧縮処理して画像ファイルを生成する。また、メモリカード１４に記憶されている画像ファイルを再生表示する際には、画像ファイルに含まれる圧縮された画像データを伸張処理してＹＣデータに変換する。

ＣＰＵ３０は、記憶制御手段として動作したときに、圧縮／伸張部６５により生成された画像ファイルをカードＩ／Ｆ３７、カードコネクタ３８を介してメモリカード１４に記憶させる。このときに、ＣＰＵ３０によって画像ファイルに付与されるファイル名は、例えば「ＤＳＣ００００１．ｊｐｇ」となる。このファイル名は、デジタルカメラによって撮影されたことを表す「ＤＳＣ」と、撮影順序を表す数字と、ファイルの種類を表す拡張子から構成される。

圧縮／伸張部６５により生成される画像ファイルは、本発明の記憶画像に相当する。画像ファイルは、圧縮処理された画像データと、この画像データの撮影条件等を記録した付加情報であるタグデータとから構成されている。タグデータには、撮影条件等の他に、デジタルカメラ２で生成された各種情報が記録される。

また、圧縮／伸張部６５は、デジタル信号処理部５７によりリサイズ処理、またはリサイズ処理及び保護処理がなされた画像データを圧縮処理し、保護済み画像であるブログ画像ファイルを生成する。このブログ画像ファイルは、ＣＰＵ３０によりメモリカード１４に記憶される際に、例えば「ＢＬＯＧ００００１．ｊｐｇ」等のファイル名が付与される。このファイル名は、ブログ用の画像であることを表す「ＢＬＯＧ］と、撮影番号を表す数字及び拡張子から構成される。

積算部６８は、ＡＥ制御時にフレームメモリ５８に記録された画像データの輝度信号を積算し、この積算により得られた輝度積算値に基づいて測光値を算出する。ＣＰＵ３０は、測光値と撮影感度から露出値を算出し、この露出値と予め設定されているプログラム線図とに基づいて絞り値及びシャッタ速度を決定する。絞り機構４４及びＣＣＤ４７は、ＣＰＵ３０により決定された絞り値及びシャッタ速度で撮影を行う。

また、積算部６８は、ＡＦ制御時に輝度信号の高周波成分を積算してＡＦ評価値を算出し、これをＣＰＵ３０に入力する。顔検出モード下では、フォーカスエリアとして設定された顔の領域からＡＦ評価値を算出する。ＣＰＵ３０は、フォーカスレンズ４１を撮影光軸に沿って移動させながら、その都度ＡＦ評価値を確認し、ＡＦ評価値が最大となる位置にフォーカスレンズ４１を移動させる。

個人情報検出部７１は、フレームメモリ５８に記憶されている画像データから部分画像を順次に切り出し、切り出した部分画像から人物の顔、及び文字等の特徴を抽出して、顔及び文字等の個人情報と、この個人情報が存在する領域の座標とを検出する。個人情報であるか否かの判定は、個人情報を検出した際の特徴の量、または特徴の数を特徴辞書７２に記憶されている閾値と比較し、特徴量または特徴数がこの閾値以上であるときに個人情報として検出する。なお、顔や文字等の特徴は、肌や目の色、配置、文字のパターン等からなる。

個人情報検出部７１で検出された人物の顔は、顔検出モード時にフォーカスエリア、及び測光エリアとして利用される。

次に、上記実施形態の作用について説明する。デジタルカメラ２は、電源ボタン９の操作により電源がオンする。図４に示すように、モードスイッチ７により静止画撮影モードに設定されると、ＣＰＵ３０はスルー画表示を開始させる（Ｓ１）。

スルー画表示中のＣＣＤ４７は、所定のフレームレート（例えば、３０ｆｐｓ）で撮像を行ない、画像信号を出力する。この画像信号は、アナログ信号処理部５３、Ａ／Ｄ変換器５６、デジタル信号処理部５７を経て画像データに変換され、フレームメモリ５８に記憶される。ＬＣＤドライバ６１は、フレームメモリ５８から読み出した画像データを映像信号に変換し、モニタ１８にスルー画表示させる。

スルー画表示中には、一定時間間隔でＡＦ制御、ＡＥ制御が実施されるので、表示されるスルー画は、ピント及び露出が適正な画像となる。なお、スルー画表示中のＡＥ制御では、シャッタ速度を変えることができないので、絞り機構４４により絞りが調整される。また、絞りの調整で適切な露出が得られない場合には、アナログ信号処理部５３による画像信号の増幅率が変更される。

個人情報検出部７１は、フレームメモリ５８内の画像データから人物の顔及び文字等の個人情報と、この個人情報が存在する領域の座標を検出する（Ｓ２）。レリーズボタン８が全押し操作されるまで、以上の処理によるスルー画表示及び個人情報検出が繰り返される（Ｓ３）。

レリーズボタン８が全押し操作されると（Ｓ３）、ＣＣＤ４７により撮影が実行される（Ｓ４）。撮影によりＣＣＤ４７から出力された画像信号は、アナログ信号処理部５３、Ａ／Ｄ変換器５６、デジタル信号処理部５７を経て画像データに変換され、フレームメモリ５８に記憶される。圧縮／伸張部６５は、フレームメモリ５８内の画像データを圧縮処理して画像ファイルを生成し、ＣＰＵ３０は画像ファイルをメモリカード１４に記憶させる（Ｓ５）。

図５に示すように、メモリカード１４に記憶される画像ファイル７４には、ＣＰＵ３０により、例えば「ＤＳＣ０００１５．ｊｐｇ」等のファイル名が付与される。この画像ファイル７４は、圧縮処理された画像データ７５と、タグデータ７６とを有している。

タグデータ７６内には、撮影日時、シャッタ速度、絞り等の撮影条件とともに、個人情報検出部７１で検出された個人情報の座標、例えば「座標１」７６ａ〜「座標３」７６ｃが記憶されている（Ｓ６）。これらの「座標１」７６ａ〜「座標３」７６ｃは、画像の水平方向及び垂直方向の画素数を表すＸ座標，Ｙ座標から構成されている。

電源オフによる撮影終了、または再生モードに切り替えられるまで以上の撮影動作が繰り返される（Ｓ７）。

図６に示すように、再生ボタン２６が操作されると、ＣＰＵ３０は再生モード選択手段として動作し、デジタルカメラ２を通常の再生モードに移行させる（Ｓ８）。再生モードでは、通常の画像ファイル、すなわちファイル名が「ＤＳＣ」から始まる画像ファイルのみがファイルとして認識される（Ｓ９）。最後に撮影された画像ファイルがメモリカード１４からフレームメモリ５８に読み出され、圧縮／伸張部６５によりＹＣデータに伸張されて、モニタ１８に再生表示される（Ｓ１０）。

また、十字ボタン２２及び決定ボタン２３の操作によりブログモードに設定されると（Ｓ８）、通常の画像ファイルと、ファイル名が「ＢＬＯＧ」から始まるブログ画像ファイルとがファイルとして認識される（Ｓ１１）。そして、最後に撮影された画像ファイルがモニタ１８に再生表示される（Ｓ１０）。

図７に示すように、ブログモードにおいて個人情報保護選択手段として動作するＣＰＵ３０は、再生表示（Ｓ１０）されている画像に対する処理を選択させる。図８に示すように、ＣＰＵ３０は、モニタ１８の表示画像７９の上に、例えば「リサイズ処理」、「リサイズ処理及び保護処理」の２つのメニュー８０，８１を表示させる。ユーザは、十字ボタン２２の上下のボタンを操作して所望するメニューを反転表示させ、決定ボタン２３を操作する（Ｓ１２，Ｓ１３）。また、これらの処理を行わないときには、十字ボタン２２の左右のボタンを操作する（Ｓ１７）。これにより、別の画像がモニタ１８に表示される（Ｓ１０）。

十字ボタン２２及び決定ボタン２３により、例えば「リサイズ処理及び保護処理」が選択されると（Ｓ１３）、保護処理（Ｓ１４）とリサイズ処理（Ｓ１５）とが実行される。図９に示すように、デジタル信号処理部５７は、メモリカード１４を参照して、処理対象となる画像ファイルのタグデータ７６から個人情報の座標を読み出す（Ｓ１８）。この個人情報の座標を利用して、フレームメモリ５８に記憶されている画像データに対し、個人情報の領域が識別できないように画像処理を施す（Ｓ１９）。

図１０（Ａ）に示すように、処理対象画像８４に二人の人物８５，８６と、住所標識８７等が表示されている場合、人物８５，８６の顔８５ａ，８６ａと、住所標識８７の文字８７ａが個人情報となる。また、デジタルカメラ２の撮影画素数が、例えば１０００万画素であるとき、処理対象画像８４の横及び縦の画素数Ｘ１及びＹ１は、「３６４８画素×２７３６画素」となる。

上記画像８４に対し、デジタル信号処理部５７によってリサイズ処理及び保護処理が実施されると、図１０（Ｂ）に示す処理後のブログ画像９０は、二人の人物８５，８６の顔８５ａ，８６ａと文字８７ａにモザイク９１〜９３が施されて識別不能になる。また、ブログ画像９０の横及び縦の画素数Ｘ２及びＹ２は、「６４０画素×４８０画素」のＶＧＡサイズとなる。

上記ブログ画像９０は、圧縮／伸張部６５によりブログ画像ファイルに変換される。ＣＰＵ３０は、ブログ画像ファイルに対し、例えば「ＢＬＯＧ０００１５．ｊｐｇ」等のファイル名を付与してメモリカード１４に記憶させる（Ｓ１９）。

ブログ画像ファイルは、赤外線通信部１１、またはメモリカード１４、あるいは通信ケーブルによってパソコンに送信される。ブログ画像ファイルは、パソコンで個人情報を識別不能にする保護処理、リサイズ処理が必要ないので、すぐにホームページやブログ等に掲載することができる。

なお、図４の個人情報検出時（Ｓ２）に、図１１に示すように、個人情報検出部７１で個人情報及びその座標を検出するとともに（Ｓ２−１）、各個人情報の検出確度を算出してもよい（Ｓ２−２）。この検出確度は、個人情報の座標をタグデータ７６に記録する際に（Ｓ６−１）、座標に関連付けて一緒に記録する（Ｓ６−２）。図１２に、座標７６ａ〜７６ｃに関連付けて、個人情報の検出確度９６ａ〜９６ｃを一緒に記録したタグデータ７６を示す。

上述したように、個人情報検出部７１は、画像データから人物の顔及び文字等の特徴を抽出して個人情報を検出しているが、個人情報によって特徴の量及び特徴の数は異なっている。そこで、この特徴の量及び特徴の数に応じて検出確度を決定し、これをタグデータ７６に記録しておけば、検出確度に応じた個人情報の保護処理を行うことができる。この検出確度は、特徴量または特徴数が多いほど高くなり、例えば「１．０」が最大値となる。

また、上記実施形態では、検出された全ての個人情報に対し、一括して保護処理を行っているが、各個人情報ごとに個別に保護処理の有無を選択させてもよい。

図１３及び図１４に示すように、本実施形態の保護処理時には、ＣＰＵ３０が表示制御手段、保護処理選択手段、個別選択手段として動作し、モニタ１８に処理対象画像１００と、この処理対象画像１００の全ての個人情報に保護処理が施された場合を表す保護済み画像１０１とを並べて表示させる（Ｓ２５）。

また、モニタ１８に、全ての個人情報に一括して保護処理を行わせる「一括保護処理」と、各個人情報の保護処理を個別に選択させる「個別選択処理」の２つのメニュー１０２、１０３を表示させ、ユーザに選択させる（Ｓ２６）。ユーザは、保護処理を行ないたい個人情報が一括保護処理する場合とほとんど同じときには一括保護処理を選択し、ほとんど違う場合には個別選択処理を選択する。

一括保護処理が選択されたときには、上記実施形態と同様に全ての個人情報に対して保護処理が実施され（Ｓ２７，Ｓ２８）、生成されたブログ画像ファイルがメモリカード１４に記憶される。

また、個別選択処理が選択された場合には、処理対象画像１００に各個人情報の領域を囲む選択枠が表示される。そして、検出確度が高い順に各個人情報の保護処理を行うか否かを選択させるメニューが表示され、ユーザは十字ボタン２２または決定ボタン２３を操作して選択を行う（Ｓ２９，Ｓ３１）。保護処理が選択された個人情報の座標は、ＣＰＵ３０によってメモリカード１４から読み出され、システムメモリ３１等に一時的に記憶される（Ｓ３０，Ｓ３２）。

なお、選択を問われている個人情報が明確になるように、例えば選択枠を反転表示したり、色を変えたり、点滅表示させるのが好ましい。また、保護処理の選択済みであることが分るように、選択された個人情報の選択枠の近傍に選択済みマークを表示させたり、選択枠の表示を変えるのが好ましい。

保護処理を行う個人情報の選択が終了すると（Ｓ３３）、デジタル信号処理部５７によって選択された個人情報の座標領域に画像処理が施され（Ｓ３４）、生成されたブログ画像ファイルがメモリカード１４に記憶される。

また、ブログ画像ファイルに施された保護処理を修正できるようにしてもよい。この場合、ブログモードでモニタ１８にブログ画像ファイルの画像が再生表示されたときに、ＣＰＵ３０が修正選択手段として動作して、モニタ１８に保護処理を修正する修正処理を行うか否かを選択させるメニューを表示させる。そして、修正処理を行うという選択がされた場合に修正処理が実行される。

図１５に示すように、ＣＰＵ３０は、モニタ１８に保護処理を修正するブログ画像と、このブログ画像の元となった元画像とを並べて表示させる（Ｓ３５）。また、全ての個人情報の保護処理を一括して解除させる「一括解除処理」と、各個人情報の保護処理を個別に選択させる「個別選択処理」の２つのメニューをモニタ１８に表示させ、ユーザに選択させる（Ｓ３６）。ユーザは、リサイズ処理のみが実施されたブログ画像が必要なときに一括解除処理を選択する。

一括解除処理が選択されたときには、元画像の画像ファイルに対してリサイズ処理が実施され（Ｓ３７）、生成されたブログ画像ファイルがメモリカード１４に記憶される（Ｓ４４）。このブログ画像ファイルの保存時には、ＣＰＵ３０によって修正前のブログ画像ファイルと同じファイル名が用いられるのでファイル数は増加しない。

また、個別選択処理が選択された場合には、元画像に各個人情報の領域を囲む選択枠が表示される。この修正処理では、検出確度が低い順に各個人情報の保護処理を行うか否かを選択させるメニューが表示され、ユーザは十字ボタン２２または決定ボタン２３を操作して選択を行う（Ｓ２８，Ｓ３０）。修正された個人情報の座標は、ＣＰＵ３０によってメモリカード１４から読み出され、システムメモリ３１等に一時的に記憶される（Ｓ２９，Ｓ３１）。この修正処理においても、選択を問われている個人情報、修正済みの個人情報が明確になるように表示させることが好ましい。

修正処理を行う個人情報の選択が終了すると（Ｓ３２）、修正内容に基づいて元画像の画像ファイルに画像処理が施され（Ｓ３３）、生成されたブログ画像ファイルがメモリカード１４に記憶される（Ｓ３４）。このときにも修正前のブログ画像ファイルと同じファイル名が用いられるのでファイル数は増加しない。

また、保護処理を行った個人情報と、行わなかった個人情報の特徴を個人情報の検出に反映させてもよい。図１６に示すように、ＣＰＵ３０は検出閾値変更手段として動作し、保護処理が行われた個人情報の特徴を保護特徴として、システムメモリ３１に一時的に記憶させる（Ｓ４０）。また、ＣＰＵ３０は、保護処理が行われなかった個人情報の特徴を非保護特徴としてシステムメモリ３１に記憶させる（Ｓ４１）。この処理は、保護処理の選択及び修正がなされたときに実施される。

ＣＰＵ３０は、保護特徴及び非保護特徴に対応する個人情報検出用の閾値を特徴辞書７２から選択し、保護特徴に対応する閾値を下げ、非保護特徴に対応する閾値を下げる（Ｓ４２）。これにより、保護特徴を有する個人情報は検出されやすくなり、非保護特徴を有する個人情報は検出されにくくなるので、保護処理の修正が少なくなる。

また、上記各実施形態では、画像内の所定領域の特徴が閾値以下のときには、個人情報として検出していない。しかし、顔検出及び文字検出は完全ではないため、個人情報として検出されなかった所定領域にも個人情報が含まれていることがある。そこで、個人情報としての特徴を有するものの、個人情報として検出されなかった領域を個人情報候補として検出し、この個人情報候補を保護処理に用いてもよい。

本実施形態では、図４のＳ６に代えて、図１７に示す処理Ｓ４５〜Ｓ４８を実行する。すなわち、個人情報と個人情報候補の検出結果に応じて、個人情報と個人情報候補の座標をタグデータ７６に記録する。また、個人情報の保護処理時には、図９のＳ１９の次に、図１８に示す処理Ｓ４９〜５２を実行し、個人情報候補があるときには、ユーザの選択によりその個人情報候補に保護処理を実施する。これにより、個人情報の検出ミスがあっても、確実に個人情報を保護することができる。

なお、個別選択処理により保護処理を行う個人情報を選択した画像ファイルから再びブログ画像ファイルを生成する際には、再度同じ選択処理を行わなければならないため、面倒である。そこで、個別選択処理及び修正処理の内容を元の画像ファイルのタグデータに記録しておくことが好ましい。

本実施形態では、図１４及び図１５の処理Ｓ３４及びＳ４４の次に、図１９に示す処理Ｓ５５を実行し、保護処理及び修正処理の内容を保護処理記録として元の画像ファイルのタグデータ７６に記録させる。そして、個人情報の保護処理時に個別選択処理が選択されたときには、ＣＰＵ３０は再処理選択手段として動作する。図２０に示すように、ＣＰＵ３０は、図１４の処理Ｓ２６とＳ２９の間で保護処理記録の有無を確認し（Ｓ５６）、保護処理記録が存在するときには、同じ保護処理を行うか否かをユーザに選択させる（Ｓ５７）。同じ保護処理を行うことが選択されたときには、保護処理記録の内容を個別選択として設定し（Ｓ５８）、Ｓ４３に移行する。また、同じ保護処理を行わないときにはＳ２９に移行して新たな個別選択を実行させる。

また、上記実施形態では、保護処理時の画像処理としてモザイクを用いたが、個人情報の種類ごとに保護処理内容を選択できるようにしてもよい。ＣＰＵ３０は、処理内容選択手段として動作し、モニタ１８に保護処理内容を設定する設定メニューを表示させ、ユーザに設定させる。

図２１は、保護処理内容の設定時にモニタ１８に表示されるメニューの一例を示している。このメニューは階層形式である。例えば、モニタ１８に表示された「保護処理内容設定」というメニュー１１０を選択すると、「顔情報保護」、「文字情報保護」というメニュー１１１、１１２が選択可能に表示される。「顔情報保護」１１１を選択すると、その下の階層の「モザイク」「黒塗り」、「アニメーション」等のメニュー１１３〜１１５が表示される。「アニメーション」１１５を選択すると、その下の階層の「目にメガネ」、「鼻メガネ」、「顔全体を動物」等のメニュー１１６〜１１８が表示される。文字の保護処理内容も同様に選択される。

以上のように個人情報の種類ごとに保護処理内容を選択できるので、保護処理実行時に処理内容を選択する必要がない。また、様々な処理内容を選択することができるので、個人情報が保護された画像に個性を与えることができる。なお、画像処理の種類としては、上記に限らず、サングラスを目の位置に表示したり、ぼかしてもよい。

また、保護処理時に画像処理を行うレベルを表す保護レベル設定を予め決められた基準保護レベル設定から変更できるようにしてもよい。ＣＰＵ３０は、保護レベル設定手段として動作し、モニタ１８に保護レベル設定を変更する設定メニューを表示させ、ユーザに設定させる。

図２２は、保護レベル設定時にモニタ１８に表示されるメニューの一例を示している。例えば、モニタ１８に表示された「保護レベル設定」というメニュー１２０を選択すると、「顔及び文字」、「顔情報」、「文字情報」というメニュー１２１〜１２３が選択可能に表示される。「顔及び文字」１２１を選択すると、その下の階層の「レベル１」「レベル２」、「レベル３」等のメニュー１２４〜１２６が表示される。

「レベル３」は、例えば、顔全体、文字列の全てを処理する強い保護処理である。また、「レベル２」は、目と鼻、文字の全体を処理する中程度の保護処理である。更に「レベル１」は、目、数字のみを処理する弱い保護処理となる。また、「顔情報」１２２、「文字情報」１２３を選択することにより、顔、文字ごとに保護レベルを設定することができる。これにより、ユーザそれぞれの嗜好に合せて最適な個人情報の保護を行うことができる。

また、個人情報の概念は国ごとに異なっているため、デジタルカメラ２が使用される国に応じて基準保護レベルを変更することが好ましい。図２３に示すように、ＣＰＵ３０は、デジタルカメラ２の初期設定時に行われる言語選択（Ｓ６０）と、テレビ等の外部機器に出力する映像信号（例えば、ＮＴＳＣ，ＰＡＬ等）の選択（Ｓ６１）により国判定を行ない（Ｓ６２）、判定した国に合せて保護レベルを変更する（Ｓ６３）。例えば、アラブ諸国では女性は顔を露出することが禁じられているため、顔全体を保護処理する。これにより、ユーザが保護レベルを設定しなくても、デジタルカメラを使用する国に最適な個人情報の保護処理を行うことができる。

なお、上記実施形態では、静止画の個人情報を保護したが、動画にも同様に保護処理を行ってもよい。更に、動画とともに記録される音声を識別できないように処理することも本発明に含まれる。更に、デジタルカメラを例に説明したが、ビデオカメラ、カメラ付き携帯電話機等、撮影機能を有する各種機器にも適用可能である。

本発明のデジタルカメラを正面側から見た外観斜視図である。 デジタルカメラを背面側から見た外観斜視図である。 デジタルカメラの電気的構成を示すブロック図である。 撮影モードの処理手順を示すフローチャートである。 画像ファイルの構成を示す説明図である。 再生モードの処理手順を示すフローチャートである。 ブログモードの処理手順を示すフローチャートである。 ブログモード時のモニタの表示状態を示す説明図である。 個人情報の保護処理の手順を示すフローチャートである。 保護処理前の画像と、保護処理後の画像を示す説明図である。 個人情報の検出確度の算出及びタグデータへの記録手順を示すフローチャートである。 検出確度を含むタグデータの説明図である。 一括保護処理と個別選択処理の選択画面である。 一括保護処理と個別選択処理の手順を示すフローチャートである。 保護処理の修正手順を示すフローチャートである。 保護処理の有無に応じて個人情報検出の閾値を変更する手順を示すフローチャートである。 個人情報候補の検出及びタグデータへの記録手順を示すフローチャートである。 個人情報候補を用いた保護処理の手順を示すフローチャートである。 保護処理記録を元の画像ファイルに記録する手順を示すフローチャートである。 保護処理記録を用いた保護処理手順を示すフローチャートである。 保護処理内容設定のメニュー構成を示す階層図である。 保護レベル設定のメニュー構成を示す階層図である。 国別に保護レベルを設定する手順を示すフローチャートである。

符号の説明

２ デジタルカメラ
１４ メモリカード
１８ モニタ
３０ ＣＰＵ
３１ システムメモリ
４７ ＣＣＤ
５７ デジタル信号処理部
６５ 圧縮／伸張部
７１ 個人情報検出部
７２ 特徴辞書
７４ 画像ファイル
７６ タグデータ

Claims (18)

1. 撮影画像から人物の顔、及び文字等の個人情報と、この個人情報が存在する領域の座標とを検出する個人情報検出手段と、
   前記撮影画像に前記個人情報の座標を含む付加情報を付加した記憶画像を記憶手段に記憶させる記憶制御手段と、
   前記記憶手段から読み出した前記記憶画像を表示手段に再生表示させる際に、前記個人情報を保護する保護処理を行うか否かを選択可能にする個人情報保護選択手段と、
   前記保護処理を行うことが選択されたときに前記付加情報から前記個人情報の座標を取得し、前記個人情報が識別できないように前記記憶画像に画像処理を施して保護済み画像を生成する画像処理手段とを備え、
   前記記憶制御手段は、前記保護済み画像を前記記憶画像とは別の画像として前記記憶手段に記憶させることを特徴とするデジタルカメラ。
2. 前記個人情報検出手段は、前記撮影画像から人物の顔、及び文字等の特徴を抽出し、この特徴が予め設定された閾値以上であるときに個人情報として検出するとともに、前記特徴の量、または特徴の数等に応じて各個人情報の検出確度を決定し、前記記憶制御手段は、前記検出確度を前記付加情報として前記記憶画像とともに前記記憶手段に記憶させることを特徴とする請求項１記載のデジタルカメラ。
3. 前記表示手段に前記記憶画像と、全ての個人情報に保護処理が施された保護済み画像とを並べて表示させる表示制御手段と、前記記憶画像に対し、前記全ての個人情報の保護処理を一括して行わせる一括保護処理と、前記各個人情報ごとに保護処理の有無を選択させる個別選択処理とのいずれかを選択可能にする保護処理選択手段と、前記個別選択処理が選択されたときに各個人情報ごとに保護処理の有無の選択を受け付ける個別選択手段とを設けたことを特徴とする請求項２記載のデジタルカメラ。
4. 前記個別選択手段は、前記検出確度が高い順に前記個人情報の保護処理の有無を選択させることを特徴とする請求項３記載のデジタルカメラ。
5. 前記保護済み画像の保護処理を修正する修正処理を行うか否かを選択可能にする修正選択手段を設け、前記修正処理を行うことが選択されたときに、前記表示制御手段は、前記保護済み画像とこれに対応する前記記憶画像とを前記表示手段に並べて表示させ、前記保護処理選択手段は、前記個人情報の保護処理を一括して解除する一括解除処理と、前記個別選択手段による前記個別選択処理とのいずれかを選択可能にすることを特徴とする請求項３または４記載のデジタルカメラ。
6. 前記個別選択手段は、前記検出確度が低い順に前記個人情報の保護処理の有無を選択させることを特徴とする請求項５記載のデジタルカメラ。
7. 前記画像処理手段は、前記保護処理選択手段に対する選択内容に合せて前記記憶画像に画像処理を施して前記保護処理が修正された保護済み画像を生成し、前記記憶制御手段は、修正後の保護済み画像を修正前の保護済み画像と同一のファイル名で前記記憶手段に記憶させることを特徴とする請求項５または６記載のデジタルカメラ。
8. 前記保護処理を行った個人情報の特徴と、保護処理を行わなかった個人情報の特徴とを保護特徴及び非保護特徴として記憶し、前記保護特徴に対応する前記閾値を下げ、前記非保護特徴に対応する前記閾値を上げる検出閾値変更手段を設けたことを特徴とする請求項３〜７いずれか記載のデジタルカメラ。
9. 前記個人情報検出手段は、前記特徴が前記閾値以下であるときには個人情報候補として検出し、前記記憶制御手段は、前記個人情報候補の座標を前記付加情報として前記記憶画像とともに前記記憶手段に記憶させることを特徴とする請求項２〜８いずれか記載のデジタルカメラ。
10. 前記記憶制御手段は、前記個人情報の保護処理及び修正処理の内容を保護処理記録として前記付加情報に記録し、前記記憶画像とともに前記記憶手段に記憶させることを特徴とする請求項５または６記載のデジタルカメラ。
11. 前記記憶画像に保護処理を行う際に、前記付加情報を参照して前記保護処理記録の有無を確認し、同じ内容の保護処理を行うか否かを選択可能にする再保護処理選択手段を設けたことを特徴とする請求項１０記載のデジタルカメラ。
12. 前記記憶画像だけを再生表示させる第１の再生モードと、前記記憶画像と前記保護済み画像とを再生表示させる第２の再生モードとを選択可能にするモード選択手段を設けたことを特徴とする請求項１〜１１いずれか記載のデジタルカメラ。
13. 前記保護処理時の画像処理の内容を選択可能にする処理内容選択手段を設けたことを特徴とする請求項１〜１２いずれか記載のデジタルカメラ。
14. 前記保護処理時に画像処理される範囲を表す保護レベルを予め設定された基準保護レベルから変更させる保護レベル設定手段を設けたことを特徴とする請求項１〜１３いずれか記載のデジタルカメラ。
15. 前記保護レベル設定手段は、人物の顔と文字との保護レベルを別々、または関連付けて変更させることを特徴とする請求項１４記載のデジタルカメラ。
16. 前記保護レベル設定手段は、前記表示手段に表示されるメニューの言語、もしくは外部機器に映像信号を出力する際の信号形式等の設定に基づいて使用国を判定し、この使用国に応じて前記基準保護レベルを設定することを特徴とする請求項１４または１５記載のデジタルカメラ。
17. 前記画像処理手段は、前記個人情報の画像処理と同時に、前記記憶画像のサイズを変更するリサイズ処理を行うことを特徴とする請求項１〜１６いずれか記載のデジタルカメラ。
18. 撮影画像から人物の顔、及び文字等の個人情報と、この個人情報が存在する領域の座標とを検出するステップと、
    前記撮影画像に前記個人情報の座標を含む付加情報を付加した記憶画像を記憶手段に記憶させるステップと、
    前記記憶手段から読み出した前記記憶画像を表示手段に再生表示させる際に、前記個人情報を保護する保護処理を行うか否かを選択させるステップと、
    前記保護処理を行うことが選択されたときに前記付加情報から前記個人情報の座標を取得し、前記個人情報が識別できないように前記記憶画像に画像処理を施して保護済み画像を生成するステップと、
    前記保護済み画像を前記記憶画像とは別の画像として前記記憶手段に記憶させるステップとを含むことを特徴とするデジタルカメラの個人情報保護方法。

Images