JP4566474B2 - 画像処理装置および画像処理方法 - Google Patents
画像処理装置および画像処理方法 Download PDFInfo
- Publication number
- JP4566474B2 JP4566474B2 JP2001230418A JP2001230418A JP4566474B2 JP 4566474 B2 JP4566474 B2 JP 4566474B2 JP 2001230418 A JP2001230418 A JP 2001230418A JP 2001230418 A JP2001230418 A JP 2001230418A JP 4566474 B2 JP4566474 B2 JP 4566474B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- user
- image processing
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【０００１】
【発明の属する技術分野】
本発明は、監視カメラの映像の画像処理装置および画像処理方法に関し、特に、プライバシー保護のために画像の一部をマスキングして表示させるための画像処理装置および画像処理方法に関するものである。
【０００２】
【従来の技術】
従来、監視カメラ装置は、銀行や店舗、遊戯場、デパート、ならびに貴重品を展示している博物館や絵画館等において、主に防犯用として利用されることが多い。また、高層ビルなどでは、安全確認または災害防止用としても用いられている。
【０００３】
監視カメラ装置は、ＣＣＤを内蔵したカメラを、屋外または屋内の所定位置に取り付け、このカメラで撮影した映像を他の場所でモニタテレビに映しながら監視を行うのが一般的である。カメラによる定点観測では、カメラを一方向に向けて固定するが、１台のカメラで周囲を観測する場合は、カメラを水平方向に旋回させるパン動作や、垂直方向に旋回させるチルト動作を行わせるための機構を備えている。さらに、カメラにズーム機構を取り付けて、必要に応じて映像を拡大できる装置もある。また、撮影した映像をビデオテープ等に記録しておき、後から映像をモニタ上で再現できる装置もある。
【０００４】
また、こうした監視カメラを、公共の場所や住居地域に設置する場合には、近隣の民間の家などが画面に表示されないように、カメラの回転角度を制限したり、その家の方向を撮影したときの画像全体が真っ黒になるように画像処理する機能が付加されており、それによりプライバシー保護が図られている。
【０００５】
しかし、このような監視カメラにおけるプライバシー保護の方法では、撮影方向の制限や画像全体の暗転のため、保護すべき領域以外の画像も見えなくなり、監視機能の低下を余儀なくされるのを防止するために、表示画像の一部をカメラ等の映像入力機器側で、マスキングする方法が考えられる。
【０００６】
カメラなどの映像入力機器でマスキングする方法は、あらかじめカメラを設置時にマスキングする領域を決定しておき、カメラの向き（パン／チルトの位置）や、ズーム倍率に応じて、マスキングする領域を変更し、カメラから出力する映像にマスキングをかけて出力する方法がある。
【０００７】
【発明が解決しようとする課題】
しかしながら、このような従来の画像処理において、マスキング設定されていた領域に重要な情報があったとしても、画像データがすでにマスキングされているために、録画した後では見ることができない。また、画像データそのものが既にマスキングされているため、ユーザに応じてマスキングを適用したり外したりといった柔軟な対応ができないという問題があった。
【０００８】
本発明はこのような問題を解決するためになされたもので、ライブ画像や既にサーバに蓄積されている画像データに対して、端末からのユーザのリクエストにより表示する画像にマスキング処理を行う画像処理装置および画像処理方法を提供するものである。
【０００９】
また、本発明は、画像データそのものに付加的な情報を合成して表示を行う際に、画像を要求しているユーザのユーザ情報に応じて、合成方法や合成する内容を変更する画像処理装置および画像処理方法を提供するものである。
【００１０】
【課題を解決するための手段】
本発明の画像処理装置は、ユーザ情報と画像とを入力する入力手段と、前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理手段と、前記マスキング処理された画像を出力する画像出力手段とを備えたことを特徴とした構成を有している。
【００１１】
この構成により、マスクがかかっていない画像を入力し、ユーザ情報に従ってマスキング処理を行い、ユーザにはマスクがかけられた画像を出力するので、ユーザに応じたマスキング処理を行うことができる。したがって、ユーザに隠すべき情報を守ることができるとともに、ユーザレベルに応じてマスク領域の変更を行うことができることとなる。
【００１２】
また、本発明の画像処理装置は、前記画像処理手段が、前記画像にマスキング処理を行う際に使用する補助情報を記憶し、この記憶された補助情報に基づいてマスキング処理を行う領域に情報を合成することを特徴とした構成を有している。
【００１３】
この構成により、マスクされた領域に記憶された補助情報、例えば他の画像を表示させることができることとなる。
【００１４】
また、本発明の画像処理装置は、前記画像処理手段が、前記補助情報として前記マスキング処理を行う領域に合成する情報の格納場所を記憶することを特徴とした構成を有している。
【００１５】
この構成により、マスクされた領域に合成する情報を直接保有せず、合成処理を行うときに記憶された格納場所から読み出して合成することができ、合成させる情報量が大量であっても、本装置の記憶容量を圧迫させずに合成することができることとなる。また、マスキング処理を行う領域に合成する情報そのものを持つのではなく、格納場所を記憶しているので、表示する情報を動的に変更させることができるともに、記憶する領域を大幅に削減することができることとなる。
【００１６】
また、本発明の画像処理装置は、前記画像処理手段が、前記補助情報として前記マスキング処理を行う領域に合成する情報と、この情報がアクセスされた際に表示する情報の格納場所とを記憶することを特徴とした構成を有している。
【００１７】
この構成により、マスクした領域に表示する情報のリンク情報を持つことができ、表示情報としてバナー広告等のタグを表示し、ユーザから表示情報にアクセスされたとき、リンク先を表示させることもできることとなる。
【００１８】
さらに、本発明の画像処理装置は、前記ユーザ情報が、ユーザの表示許可段階を示すユーザレベルを有し、前記画像処理手段が、前記ユーザレベルに従ってマスキング処理を行うことを特徴とした構成を有している。
【００１９】
この構成により、ユーザレベルに応じてマスキング処理を変更することができるので、１ユーザごとに設定を行わなくてもよく、ユーザレベル単位でマスキング領域の大小や付加情報の変更を行うことができることとなる。
【００２０】
また、本発明の画像処理装置は、前記ユーザ情報が、ユーザの嗜好を示すユーザ嗜好情報を有し、前記画像処理手段が、前記ユーザ嗜好情報に従ってマスキング処理を行う領域に合成する情報を変更することを特徴とした構成を有している。
【００２１】
この構成により、マスキング処理を行う領域に合成する情報が、ユーザの嗜好にあった情報とすることができるので、ユーザごとに有効な情報を提供することができることとなる。
【００２２】
また、本発明の画像処理装置は、前記ユーザ情報に従ってユーザ登録を行うユーザ登録手段と、前記入力手段に入力されたユーザ情報がユーザ登録されているか否かを判定するユーザ登録判定手段とを備え、前記画像処理手段が、前記ユーザ登録判定の結果に従ってマスキング処理を行うことを特徴とした構成を有している。
【００２３】
この構成により、登録ユーザと非登録ユーザとで別のマスキング処理を行うことができるので、マスクをかける領域や表示情報を区別することができ、登録ユーザにより有効な情報提供を行うことができることとなる。
【００２４】
また、本発明の画像処理装置は、前記ユーザ情報が、ユーザの操作する端末の操作端末情報を有し、前記画像処理手段が、前記操作端末情報に従ってマスキング処理を行うことを特徴とした構成を有している。
【００２５】
この構成により、ユーザの操作する端末に応じてマスキング処理を変更することができるので、ユーザが操作する端末ごとにマスキング処理の変更を行うことができることとなる。例えば、監視カメラの近くの端末では、マスクがかからない全ての情報を観ることができるが、屋外の端末では、マスク領域を大きくして監視領域を限定し、プライバシー保護を図るといった使用方法を行うことができることとなる。
【００２６】
また、本発明の画像処理装置は、前記ユーザ登録判定手段によって前記ユーザ情報が非ユーザから入力されたユーザ情報であると判定したときのみ、前記画像処理手段が、前記マスキング処理を行う領域に広告情報を合成することを特徴とした構成を有している。
【００２７】
この構成により、非登録ユーザにのみマスキング領域に広告情報が合成されるので、登録ユーザに対して特に必要のない広告表示を行わずに、すっきりとした画像表示を提供することができることとなる。
【００２８】
また、本発明の画像処理装置は、前記ユーザ情報がマスキング領域を指定するユーザ契約情報を有し、前記画像処理手段が、前記ユーザ契約情報に従って前記画像にマスキング処理を行うことを特徴とした構成を有している。
【００２９】
この構成により、ユーザ契約情報に基づいてマスキングをかける領域とマスキングをかけない領域との処理が行われるので、契約内の領域を確実に監視しつつ、契約外の領域のプライバシーを保護することができることとなる。
【００３０】
さらに、本発明の画像処理装置は、前記入力手段に入力された画像中の人物認識を行う画像認識手段を備え、前記画像処理手段が、前記画像認識処理の結果に従って前記画像にマスキング処理を行う位置を変更することを特徴とした構成を有している。
【００３１】
この構成により、映像に映った人物をマスキングすることができ、映像に映り込んできた人物のプライバシーを保護することができることとなる。
【００３２】
また、本発明の画像処理装置は、前記画像処理手段が、前記画像認識手段によって認識された人物に所定の識別子を付与することを特徴とした構成を有している。
【００３３】
この構成により、マスキングされた人物ごとに識別子が付与されるので、映像内に複数の人物が写っていてもそれぞれを把握することができることとなる。
【００３４】
また、本発明の画像処理装置は、前記入力手段に入力された画像中の移動体を認識し、この移動体の追跡処理を行う移動体追跡手段を備え、前記画像処理手段が、前記移動体追跡処理の結果に従って前記画像にマスキング処理を行うことを特徴とした構成を有している。
【００３５】
この構成により、映像に映り込んできた移動体の移動に合わせてマスキングを行うことができることとなる。
【００３６】
また、本発明の画像処理装置は、前記画像処理手段が、前記移動体追跡手段によって１つの物体として認識されたものに所定の識別子を付与することを特徴とした構成を有している。
【００３７】
この構成により、マスキングされた移動体ごとに識別子が付与されるので、映像内に複数の移動体が写っていてもそれぞれを把握することができることとなる。
【００３８】
さらに、本発明の画像処理装置は、ユーザのカメラ操作信号を入力するカメラ操作入力手段を備え、前記画像処理手段が、前記カメラ操作信号に従って前記マスキング処理を行うことを特徴とした構成を有している。
【００３９】
この構成により、ユーザのカメラ操作に応じてマスキング領域を移動させることができることとなる。
【００４０】
さらに、本発明の画像処理装置は、前記入力手段が、前記ユーザ情報と前記画像とが一体となった画像情報を入力し、この画像情報が前記画像の付加情報として前記ユーザ情報が格納されていることを特徴とした構成を有している。
【００４１】
この構成により、ＪＰＥＧやＭＰＥＧなどのヘッダ部にユーザ情報を格納することができ、ユーザ情報を別に取り込む必要がなく、通常の画像情報のデータ入力量で取り込むことができることとなる。また、ユーザ情報が画像情報の付加情報として格納されているので、特別な通信手順等を用いる必要がなく、画像情報およびユーザ情報を扱うことができることとなる。
【００４２】
また、本発明の画像処理装置は、前記入力手段が入力する画像情報が暗号化された画像情報であることを特徴とした構成を有している。
【００４３】
この構成により、入出力または送受信するデータが暗号化されているので、情報の漏洩を防止することができることとなる。
【００４４】
さらに、本発明の画像処理装置は、前記入力手段に入力された画像およびユーザ情報を記憶する画像情報記憶手段を備え、前記画像処理手段が、前記記憶された画像に対して前記マスキング処理をバッチ処理で行うことを特徴とした構成を有している。
【００４５】
この構成により、画像蓄積時や画像表示時に負荷をかけることがないので、それぞれにおける機能や動作を向上させることができることとなる。
【００４６】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を用いて説明する。
【００４７】
本発明の実施の形態の画像処理装置を図１に示す。図１においては、画像処理装置１００とともに、ユーザが操作する操作端末２００を示す。
【００４８】
操作端末２００は、画像処理装置１００と接続し、ユーザが操作端末２００の操作部を操作することにより、ユーザのリクエストを画像処理装置１００に送信するとともに、画像処理装置１００から送信された表示画像を受信して、表示するものである。ユーザのリクエスト端末と、画像表示端末は、必ずしも同一のものでなくてもよい。
【００４９】
また、画像処理装置１００は、認証データベース１１１、ユーザ認証部１１２、タイマー１１３、スケジュールデータベース１１４、スケジューラ１１５、合成ルールデータベース１１６、ルール決定部１１７、領域データベース１１８、付加情報データベース１１９、付加画像データベース１２０、マスクデータ作成部１２１、マスク画像バッファ１２２、画像データベース１２３、画像バッファ１２４、およびマスキング部１２５を備えている。
【００５０】
認証データベース１１１は、ユーザ情報の認証を行うため、登録されたユーザ情報を格納するものである。ユーザ情報としては、ユーザＩＤとパスワードが一般的であるが、虹彩情報、指紋、声紋などのバイオメトリクス情報を使用してもよい。
【００５１】
ユーザ認証部１１２は、操作端末２００から受信したユーザ情報を入力し、認証データベース１１１に格納されているユーザ認証データにより入力されたユーザ情報の認証を行うものである。
【００５２】
タイマー１１３は、時刻を計時するものであり、スケジュールデータベース１１４は、時刻別の予定を格納したデータベースであり、スケジューラ１１５は、タイマー１１３とスケジュールデータベース１１４との情報からスケジュールを管理するものである。
【００５３】
合成ルールデータベース１１６は、画像のマスキング処理、情報付加を行うためのルールが格納されたものであり、ルール決定部１１７は、ユーザ認証部１１２、スケジューラ１１５、画像データベース１２３からそれぞれ入力される情報により、合成ルールデータベース１１６を検索して、対応するルールを決定するものである。
【００５４】
領域データベース１１８、付加情報データベース１１９、付加画像データベース１２０は、画像に対応するマスキング領域、マスキング領域に表示する画像、付加情報等がそれぞれ格納されたものである。
【００５５】
マスクデータ作成部１２１は、ルール決定部１１７から画像ＩＤ、合成ルールを受け取り、該当画像に対応するマスキング領域、マスキング領域に表示する画像、付加情報を領域データベース１１８、付加情報データベース１１９、付加画像データベース１２０から呼び出し、マスク画像を作成するものである。
【００５６】
マスク画像バッファ１２２は、マスクデータ作成部１２１から入力されたマスク画像を、元画像と合成させるため一時的に蓄積するバッファである。
【００５７】
画像データベース１２３は、画像表示を行うための画像、すなわちマスクがかけられる画像が蓄積されたデータベースであり、あらかじめ蓄積された画像とともに、リアルタイムで入力された画像を蓄積してもよい。
【００５８】
画像バッファ１２４は、画像データベース１２３から、またはリアルタイムで入力された画像を直接入力して、マスク画像と合成させるため一時的に画像を蓄積するバッファである。
【００５９】
マスキング部１２５は、画像バッファ１２４に格納されている元画像と、マスク画像バッファ１２２に格納されているマスク画像とを合成するものである。
【００６０】
このような画像処理装置１００において、操作端末２００から画像のリクエストがあってから表示画像の出力を行うまでの画像処理手順を以下に説明する。
【００６１】
図２に、本発明の画像処理装置における画像処理のフローチャートを示す。
【００６２】
画像処理装置１００では、ユーザから画像表示のリクエストがあると、ユーザ認証部１１２でユーザ認証処理を行う（Ｓ１０１）。
【００６３】
ユーザ認証処理では、ユーザから入力されたユーザＩＤ、パスワードおよび操作端末のＩＤ、電話番号、機種、ＩＰアドレスなどの識別子や過去のアクセス履歴情報により、認証データベース１１１に格納されたデータを参照しながらユーザ認証を行う。ユーザ認証処理において、ユーザ認証のために入力させるユーザ情報として、ユーザＩＤ、パスワードの代わりに虹彩情報やバイオメトリクス情報を使用してもよい。
【００６４】
ユーザ認証の結果（Ｓ１０２）により、認証されなかった場合には、終了し、認証された場合には、ルール決定部１１７にユーザ情報を受け渡し、画像の取り出し処理を行う（Ｓ１０３）。
【００６５】
画像の取り出し処理では、ユーザから要求された画像を画像データベース１２３から抽出し、画像バッファ１２４へ取り出し、一時的にためる。マスク画像と同期を取るため、画像ＩＤをルール決定部１１７に受け渡す。また、画像は、蓄積された画像データベース１２３上の画像の他、リアルタイムで入力される入力映像等でもよい。
【００６６】
スケジューラ１１５は、タイマー１１３とスケジュールデータベース１１４からの情報により、スケジュールの確認を行い、スケジュールの変更があれば変更通知をルール決定部１１７に通知する。
【００６７】
次に、ルール決定部１１７において、ユーザ認証部１１２からユーザＩＤ、パスワード、ユーザレベルおよび操作端末のＩＤ、電話番号、機種、ＩＰアドレスなどの識別子や過去のアクセス履歴情報等のユーザ情報、対象情報、スケジューラ１１５からスケジュール変更通知情報または時間情報、画像データベース１２３からマスキングを行う画像の画像ＩＤを入力し、合成ルールデータベース１１６からマスキング処理、情報付加のためのルールを検索し、決定するルール決定処理を行う（Ｓ１０４）。
【００６８】
ルール決定処理では、ユーザ認証部１１２から得たユーザＩＤ、ユーザレベル、スケジューラ１１５から得た現在時刻の時刻パラメータ等から、これらの情報に適合する合成ルールを合成ルールデータベース１１６より引き出す。合成ルールとなるものは、マスク対象（非対象）の場所を特定するための対象パラメータ、領域の大小などのレベルパラメータ、マスキング領域以外の場所に合成する各種付加情報の表示ＯＮ／ＯＦＦパラメータ、マスキング領域に表示する付加情報のファイル情報等のデータである。同一条件から引き出される合成ルールは、複数存在することも可能であり、優先度により、あるいはランダムに決定する。画像ＩＤと本処理で得られた合成ルールデータは、マスクデータ作成部１２１に受け渡し、データ作成の指示を出す。
【００６９】
次に、マスクデータ作成部１２１でマスクデータの作成を行う（Ｓ１０５）。
ここでは、ルール決定部１１７から受け取った画像ＩＤと合成ルールにより、領域データベース１１８からマスキングする領域データを、付加情報データベース１１９から撮影時刻情報や位置情報などの文字列情報と表示位置を、付加画像データベース１２０からマスキング領域に貼り付ける画像データを取得し、マスクデータを作成する。例えば、付加情報データベース１１９から取得した端末の識別子（製造番号など）やユーザ情報を用いて、文字列情報や表示位置をユーザの環境（言語や表示形式）に適合させるように変換する。作成したマスクデータは、マスク画像バッファ１２２に受け渡す。
【００７０】
次に、マスキング部１２５でマスキング処理を行う（Ｓ１０６）。ここでは、画像バッファ１２４に格納されている元画像と、マスク画像バッファ１２２に格納されているマスク画像と、を合成する。このとき、上記画像ＩＤで同期を取る。
【００７１】
画像バッファ１２４に格納されている元画像１２６、マスク画像バッファ１２２に格納されているマスク画像１２７を図３（ａ）、図３（ｂ）に、合成処理された画像１２８を図４に示す。
【００７２】
最後に、画像処理装置１００からリクエストのあった操作端末２００に対して上記マスク処理を施した画像を送信する（Ｓ１０７）。
【００７３】
さらに、ルール決定部１１７における上記ルール決定処理について、補足説明を行う。
【００７４】
図５に、ルール決定処理のフローチャートを示す。ルール決定処理では、まず、ユーザ認証部１１２から入力されるユーザＩＤ、ユーザレベルなどのユーザ情報の確認を行う（Ｓ１２１）。次に、スケジューラ１１５により変更される現在のスケジュールを確認する（Ｓ１２２）。次に、合成ルールデータベース１１６からユーザ、スケジュールの条件に合うルールを参照する（Ｓ１２３）。次に、参照した合成ルールより使用するルールを決定する（Ｓ１２４）。使用するルールが複数ある場合、優先度により、またはランダムに決定する。
【００７５】
以上の処理により、蓄積されている画像または入力した画像に対して、ユーザに応じたマスキング処理を行うことができる。したがって、ユーザに届く画像にはマスクがかけられるので、ユーザに隠すべき情報を守ることができるとともに、表示される元の画像はマスクがかけられずに残っているので、ユーザレベルに応じてマスク領域の変更を行うことができる。
【００７６】
また、上記マスクデータ作成処理において、マスクした領域に表示する情報をデータベースに直接持っていなくても、情報の格納場所、例えばＵＲＬ等を記憶しておけば、必要なときのみ情報を獲得して表示させることができる。
【００７７】
また、マスクした領域に表示する情報のリンク情報を持つことにより、表示情報としてバナー広告等のタグを表示し、ユーザから表示情報にアクセスされたとき、リンク先を表示させることもできる。
【００７８】
さらに、上記ルール設定において、ユーザにユーザレベルを設けて、リクエストされたユーザのレベルに応じてマスキング領域を変更したり、ユーザの嗜好情報を有して、ユーザの嗜好に応じた情報をマスキング領域に表示させることもできる。
【００７９】
このユーザによりマスキング領域、マスキング領域上の表示変更例を図６に示す。図６に示すように、ユーザＡとユーザＢとでは、マスキング領域がユーザＡの方が小さくなっており、また、マスキング領域内の表示が、ユーザＡの方は「ニュース」となっており、ユーザＢの方は「広告」となっている。
【００８０】
また、ユーザ登録処理またはユーザ登録情報の参照を可能とし、登録ユーザか否かでマスキング領域を変更したり、非ユーザにのみ広告表示を行い、ユーザ登録されたユーザに対しては、特に必要のない広告表示を表示しないといったこともできる。
【００８１】
また、マスキング領域を指定またはマスキング領域の解除領域を指定するユーザ契約情報を有して、このユーザの契約情報に応じたマスキング処理もできる。
例えば、図７に示すように、駐車場の監視契約において、契約区域７１、契約区域７２のみをマスキング解除領域とし、非契約区域７３、非契約区域７４などにマスキングをかけることにより、ユーザの駐車スペースのみ監視させることができ、他の駐車スペースにおけるプライバシーを保護することができる。
【００８２】
さらに、画像内の人物、移動体の認識処理を行い、認識された人物にラベルを付けることにより、マスキングされた画像でも人物の動き等が分かる。例えば、図８に示すように、通行人８１、通行人８２がマスキングされていても、ラベルＡ、Ｂが付与されていることにより、通行人８１、通行人８２が移動して、位置が変わっても、ラベルにより認識が容易である。したがって、通行人自体はマスキングされるためプライバシーが守られ、監視者も通行人の行動は把握できるので、監視処理は不都合なく行うことができる。
【００８３】
また、ユーザがカメラ操作を行う場合に、ユーザからカメラ操作信号を入力して、入力したカメラ操作信号に従ってマスキング処理を行うことにより、カメラのパン、チルト、ズーム等に応じてマスキング領域を変更することができる。例えば、図９に示すように、カメラ動作の「パン」に従って、マスキング領域９２も左右に移動し、「ズーム」が行われれば、マスキング領域９２が拡大する。
【００８４】
さらに、画像を入力する際には、ＪＰＥＧやＭＰＥＧといったフォーマット形式があるが、これらのヘッダ情報からユーザ情報を取り出すようにすることにより、ヘッダ情報にユーザ情報が格納された画像情報を入力することができ、ユーザ情報をあらためて入力する必要がない。また、この画像情報を暗号化して入力することにより、情報の漏洩を防止することができる。
【００８５】
さらに、画像表示がリアルタイムにライブ映像を必要としているものではない場合、上記画像処理またはマスキング処理をバッチ処理で行うことにより、画像蓄積や画像表示のパフォーマンスを向上させることができる。
【００８６】
【発明の効果】
以上説明したように、本発明は、ユーザ情報と画像とを入力する入力手段と、前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理手段と、前記マスキング処理された画像を出力する画像出力手段とを備えることにより、マスクがかかっていない画像を入力し、ユーザ情報に従ってマスキング処理を行い、ユーザにはマスクがかけられた画像を出力するので、ユーザに応じたマスキング処理を行うことができる。したがって、ユーザに隠すべき情報を守ることができるとともに、ユーザレベルに応じてマスク領域の変更を行うことができるというすぐれた効果を有する画像処理装置および画像処理方法を提供することができるものである。
【図面の簡単な説明】
【図１】本発明の実施の形態の画像処理装置を示すブロック図
【図２】本発明の実施の形態の画像処理を示すフローチャート
【図３】本発明の実施の形態のマスキング処理される前の画像、この画像にマスクをかける画像を示す画像図
【図４】本発明の実施の形態のマスキング処理後の画像を示す画像図
【図５】本発明の実施の形態のルール決定処理を示すフローチャート
【図６】本発明の実施の形態のユーザによりマスキング領域、マスキング領域上の表示変更を示す画像図
【図７】本発明の実施の形態のユーザの契約情報に応じたマスキング処理の表示画像を示す画像図
【図８】本発明の実施の形態の認識画像にラベルを付与した表示画像を示す画像図
【図９】本発明の実施の形態のカメラ操作信号に応じてマスキング領域変更を行う表示画像図
【符号の説明】
７１、７２ 契約領域
７３、７４ 非契約領域
８１、８２ 通行人
９１ 人物
９２ マスキング領域
１００ 画像処理装置
１１１ 認証データベース
１１２ ユーザ認証部
１１３ タイマー
１１４ スケジュールデータベース
１１５ スケジューラ
１１６ 合成ルールデータベース
１１７ ルール決定部
１１８ 領域データベース
１１９ 付加情報データベース
１２０ 付加画像データベース
１２１ マスクデータ作成部
１２２ マスク画像バッファ
１２３ 画像データベース
１２４ 画像バッファ
１２５ マスキング部
１２６ 元画像
１２７ マスク画像
１２８ 合成画像
２００ 操作端末
５００ 端末
５１１ 画像表示処理部
５１２ 画像合成処理部
５１３ 情報データベース
６００ サーバ
６１１ ユーザ認証部
６１２ 認証データベース
６１３ 画像データ入力部
６１４ 情報データベース
【発明の属する技術分野】
本発明は、監視カメラの映像の画像処理装置および画像処理方法に関し、特に、プライバシー保護のために画像の一部をマスキングして表示させるための画像処理装置および画像処理方法に関するものである。
【０００２】
【従来の技術】
従来、監視カメラ装置は、銀行や店舗、遊戯場、デパート、ならびに貴重品を展示している博物館や絵画館等において、主に防犯用として利用されることが多い。また、高層ビルなどでは、安全確認または災害防止用としても用いられている。
【０００３】
監視カメラ装置は、ＣＣＤを内蔵したカメラを、屋外または屋内の所定位置に取り付け、このカメラで撮影した映像を他の場所でモニタテレビに映しながら監視を行うのが一般的である。カメラによる定点観測では、カメラを一方向に向けて固定するが、１台のカメラで周囲を観測する場合は、カメラを水平方向に旋回させるパン動作や、垂直方向に旋回させるチルト動作を行わせるための機構を備えている。さらに、カメラにズーム機構を取り付けて、必要に応じて映像を拡大できる装置もある。また、撮影した映像をビデオテープ等に記録しておき、後から映像をモニタ上で再現できる装置もある。
【０００４】
また、こうした監視カメラを、公共の場所や住居地域に設置する場合には、近隣の民間の家などが画面に表示されないように、カメラの回転角度を制限したり、その家の方向を撮影したときの画像全体が真っ黒になるように画像処理する機能が付加されており、それによりプライバシー保護が図られている。
【０００５】
しかし、このような監視カメラにおけるプライバシー保護の方法では、撮影方向の制限や画像全体の暗転のため、保護すべき領域以外の画像も見えなくなり、監視機能の低下を余儀なくされるのを防止するために、表示画像の一部をカメラ等の映像入力機器側で、マスキングする方法が考えられる。
【０００６】
カメラなどの映像入力機器でマスキングする方法は、あらかじめカメラを設置時にマスキングする領域を決定しておき、カメラの向き（パン／チルトの位置）や、ズーム倍率に応じて、マスキングする領域を変更し、カメラから出力する映像にマスキングをかけて出力する方法がある。
【０００７】
【発明が解決しようとする課題】
しかしながら、このような従来の画像処理において、マスキング設定されていた領域に重要な情報があったとしても、画像データがすでにマスキングされているために、録画した後では見ることができない。また、画像データそのものが既にマスキングされているため、ユーザに応じてマスキングを適用したり外したりといった柔軟な対応ができないという問題があった。
【０００８】
本発明はこのような問題を解決するためになされたもので、ライブ画像や既にサーバに蓄積されている画像データに対して、端末からのユーザのリクエストにより表示する画像にマスキング処理を行う画像処理装置および画像処理方法を提供するものである。
【０００９】
また、本発明は、画像データそのものに付加的な情報を合成して表示を行う際に、画像を要求しているユーザのユーザ情報に応じて、合成方法や合成する内容を変更する画像処理装置および画像処理方法を提供するものである。
【００１０】
【課題を解決するための手段】
本発明の画像処理装置は、ユーザ情報と画像とを入力する入力手段と、前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理手段と、前記マスキング処理された画像を出力する画像出力手段とを備えたことを特徴とした構成を有している。
【００１１】
この構成により、マスクがかかっていない画像を入力し、ユーザ情報に従ってマスキング処理を行い、ユーザにはマスクがかけられた画像を出力するので、ユーザに応じたマスキング処理を行うことができる。したがって、ユーザに隠すべき情報を守ることができるとともに、ユーザレベルに応じてマスク領域の変更を行うことができることとなる。
【００１２】
また、本発明の画像処理装置は、前記画像処理手段が、前記画像にマスキング処理を行う際に使用する補助情報を記憶し、この記憶された補助情報に基づいてマスキング処理を行う領域に情報を合成することを特徴とした構成を有している。
【００１３】
この構成により、マスクされた領域に記憶された補助情報、例えば他の画像を表示させることができることとなる。
【００１４】
また、本発明の画像処理装置は、前記画像処理手段が、前記補助情報として前記マスキング処理を行う領域に合成する情報の格納場所を記憶することを特徴とした構成を有している。
【００１５】
この構成により、マスクされた領域に合成する情報を直接保有せず、合成処理を行うときに記憶された格納場所から読み出して合成することができ、合成させる情報量が大量であっても、本装置の記憶容量を圧迫させずに合成することができることとなる。また、マスキング処理を行う領域に合成する情報そのものを持つのではなく、格納場所を記憶しているので、表示する情報を動的に変更させることができるともに、記憶する領域を大幅に削減することができることとなる。
【００１６】
また、本発明の画像処理装置は、前記画像処理手段が、前記補助情報として前記マスキング処理を行う領域に合成する情報と、この情報がアクセスされた際に表示する情報の格納場所とを記憶することを特徴とした構成を有している。
【００１７】
この構成により、マスクした領域に表示する情報のリンク情報を持つことができ、表示情報としてバナー広告等のタグを表示し、ユーザから表示情報にアクセスされたとき、リンク先を表示させることもできることとなる。
【００１８】
さらに、本発明の画像処理装置は、前記ユーザ情報が、ユーザの表示許可段階を示すユーザレベルを有し、前記画像処理手段が、前記ユーザレベルに従ってマスキング処理を行うことを特徴とした構成を有している。
【００１９】
この構成により、ユーザレベルに応じてマスキング処理を変更することができるので、１ユーザごとに設定を行わなくてもよく、ユーザレベル単位でマスキング領域の大小や付加情報の変更を行うことができることとなる。
【００２０】
また、本発明の画像処理装置は、前記ユーザ情報が、ユーザの嗜好を示すユーザ嗜好情報を有し、前記画像処理手段が、前記ユーザ嗜好情報に従ってマスキング処理を行う領域に合成する情報を変更することを特徴とした構成を有している。
【００２１】
この構成により、マスキング処理を行う領域に合成する情報が、ユーザの嗜好にあった情報とすることができるので、ユーザごとに有効な情報を提供することができることとなる。
【００２２】
また、本発明の画像処理装置は、前記ユーザ情報に従ってユーザ登録を行うユーザ登録手段と、前記入力手段に入力されたユーザ情報がユーザ登録されているか否かを判定するユーザ登録判定手段とを備え、前記画像処理手段が、前記ユーザ登録判定の結果に従ってマスキング処理を行うことを特徴とした構成を有している。
【００２３】
この構成により、登録ユーザと非登録ユーザとで別のマスキング処理を行うことができるので、マスクをかける領域や表示情報を区別することができ、登録ユーザにより有効な情報提供を行うことができることとなる。
【００２４】
また、本発明の画像処理装置は、前記ユーザ情報が、ユーザの操作する端末の操作端末情報を有し、前記画像処理手段が、前記操作端末情報に従ってマスキング処理を行うことを特徴とした構成を有している。
【００２５】
この構成により、ユーザの操作する端末に応じてマスキング処理を変更することができるので、ユーザが操作する端末ごとにマスキング処理の変更を行うことができることとなる。例えば、監視カメラの近くの端末では、マスクがかからない全ての情報を観ることができるが、屋外の端末では、マスク領域を大きくして監視領域を限定し、プライバシー保護を図るといった使用方法を行うことができることとなる。
【００２６】
また、本発明の画像処理装置は、前記ユーザ登録判定手段によって前記ユーザ情報が非ユーザから入力されたユーザ情報であると判定したときのみ、前記画像処理手段が、前記マスキング処理を行う領域に広告情報を合成することを特徴とした構成を有している。
【００２７】
この構成により、非登録ユーザにのみマスキング領域に広告情報が合成されるので、登録ユーザに対して特に必要のない広告表示を行わずに、すっきりとした画像表示を提供することができることとなる。
【００２８】
また、本発明の画像処理装置は、前記ユーザ情報がマスキング領域を指定するユーザ契約情報を有し、前記画像処理手段が、前記ユーザ契約情報に従って前記画像にマスキング処理を行うことを特徴とした構成を有している。
【００２９】
この構成により、ユーザ契約情報に基づいてマスキングをかける領域とマスキングをかけない領域との処理が行われるので、契約内の領域を確実に監視しつつ、契約外の領域のプライバシーを保護することができることとなる。
【００３０】
さらに、本発明の画像処理装置は、前記入力手段に入力された画像中の人物認識を行う画像認識手段を備え、前記画像処理手段が、前記画像認識処理の結果に従って前記画像にマスキング処理を行う位置を変更することを特徴とした構成を有している。
【００３１】
この構成により、映像に映った人物をマスキングすることができ、映像に映り込んできた人物のプライバシーを保護することができることとなる。
【００３２】
また、本発明の画像処理装置は、前記画像処理手段が、前記画像認識手段によって認識された人物に所定の識別子を付与することを特徴とした構成を有している。
【００３３】
この構成により、マスキングされた人物ごとに識別子が付与されるので、映像内に複数の人物が写っていてもそれぞれを把握することができることとなる。
【００３４】
また、本発明の画像処理装置は、前記入力手段に入力された画像中の移動体を認識し、この移動体の追跡処理を行う移動体追跡手段を備え、前記画像処理手段が、前記移動体追跡処理の結果に従って前記画像にマスキング処理を行うことを特徴とした構成を有している。
【００３５】
この構成により、映像に映り込んできた移動体の移動に合わせてマスキングを行うことができることとなる。
【００３６】
また、本発明の画像処理装置は、前記画像処理手段が、前記移動体追跡手段によって１つの物体として認識されたものに所定の識別子を付与することを特徴とした構成を有している。
【００３７】
この構成により、マスキングされた移動体ごとに識別子が付与されるので、映像内に複数の移動体が写っていてもそれぞれを把握することができることとなる。
【００３８】
さらに、本発明の画像処理装置は、ユーザのカメラ操作信号を入力するカメラ操作入力手段を備え、前記画像処理手段が、前記カメラ操作信号に従って前記マスキング処理を行うことを特徴とした構成を有している。
【００３９】
この構成により、ユーザのカメラ操作に応じてマスキング領域を移動させることができることとなる。
【００４０】
さらに、本発明の画像処理装置は、前記入力手段が、前記ユーザ情報と前記画像とが一体となった画像情報を入力し、この画像情報が前記画像の付加情報として前記ユーザ情報が格納されていることを特徴とした構成を有している。
【００４１】
この構成により、ＪＰＥＧやＭＰＥＧなどのヘッダ部にユーザ情報を格納することができ、ユーザ情報を別に取り込む必要がなく、通常の画像情報のデータ入力量で取り込むことができることとなる。また、ユーザ情報が画像情報の付加情報として格納されているので、特別な通信手順等を用いる必要がなく、画像情報およびユーザ情報を扱うことができることとなる。
【００４２】
また、本発明の画像処理装置は、前記入力手段が入力する画像情報が暗号化された画像情報であることを特徴とした構成を有している。
【００４３】
この構成により、入出力または送受信するデータが暗号化されているので、情報の漏洩を防止することができることとなる。
【００４４】
さらに、本発明の画像処理装置は、前記入力手段に入力された画像およびユーザ情報を記憶する画像情報記憶手段を備え、前記画像処理手段が、前記記憶された画像に対して前記マスキング処理をバッチ処理で行うことを特徴とした構成を有している。
【００４５】
この構成により、画像蓄積時や画像表示時に負荷をかけることがないので、それぞれにおける機能や動作を向上させることができることとなる。
【００４６】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を用いて説明する。
【００４７】
本発明の実施の形態の画像処理装置を図１に示す。図１においては、画像処理装置１００とともに、ユーザが操作する操作端末２００を示す。
【００４８】
操作端末２００は、画像処理装置１００と接続し、ユーザが操作端末２００の操作部を操作することにより、ユーザのリクエストを画像処理装置１００に送信するとともに、画像処理装置１００から送信された表示画像を受信して、表示するものである。ユーザのリクエスト端末と、画像表示端末は、必ずしも同一のものでなくてもよい。
【００４９】
また、画像処理装置１００は、認証データベース１１１、ユーザ認証部１１２、タイマー１１３、スケジュールデータベース１１４、スケジューラ１１５、合成ルールデータベース１１６、ルール決定部１１７、領域データベース１１８、付加情報データベース１１９、付加画像データベース１２０、マスクデータ作成部１２１、マスク画像バッファ１２２、画像データベース１２３、画像バッファ１２４、およびマスキング部１２５を備えている。
【００５０】
認証データベース１１１は、ユーザ情報の認証を行うため、登録されたユーザ情報を格納するものである。ユーザ情報としては、ユーザＩＤとパスワードが一般的であるが、虹彩情報、指紋、声紋などのバイオメトリクス情報を使用してもよい。
【００５１】
ユーザ認証部１１２は、操作端末２００から受信したユーザ情報を入力し、認証データベース１１１に格納されているユーザ認証データにより入力されたユーザ情報の認証を行うものである。
【００５２】
タイマー１１３は、時刻を計時するものであり、スケジュールデータベース１１４は、時刻別の予定を格納したデータベースであり、スケジューラ１１５は、タイマー１１３とスケジュールデータベース１１４との情報からスケジュールを管理するものである。
【００５３】
合成ルールデータベース１１６は、画像のマスキング処理、情報付加を行うためのルールが格納されたものであり、ルール決定部１１７は、ユーザ認証部１１２、スケジューラ１１５、画像データベース１２３からそれぞれ入力される情報により、合成ルールデータベース１１６を検索して、対応するルールを決定するものである。
【００５４】
領域データベース１１８、付加情報データベース１１９、付加画像データベース１２０は、画像に対応するマスキング領域、マスキング領域に表示する画像、付加情報等がそれぞれ格納されたものである。
【００５５】
マスクデータ作成部１２１は、ルール決定部１１７から画像ＩＤ、合成ルールを受け取り、該当画像に対応するマスキング領域、マスキング領域に表示する画像、付加情報を領域データベース１１８、付加情報データベース１１９、付加画像データベース１２０から呼び出し、マスク画像を作成するものである。
【００５６】
マスク画像バッファ１２２は、マスクデータ作成部１２１から入力されたマスク画像を、元画像と合成させるため一時的に蓄積するバッファである。
【００５７】
画像データベース１２３は、画像表示を行うための画像、すなわちマスクがかけられる画像が蓄積されたデータベースであり、あらかじめ蓄積された画像とともに、リアルタイムで入力された画像を蓄積してもよい。
【００５８】
画像バッファ１２４は、画像データベース１２３から、またはリアルタイムで入力された画像を直接入力して、マスク画像と合成させるため一時的に画像を蓄積するバッファである。
【００５９】
マスキング部１２５は、画像バッファ１２４に格納されている元画像と、マスク画像バッファ１２２に格納されているマスク画像とを合成するものである。
【００６０】
このような画像処理装置１００において、操作端末２００から画像のリクエストがあってから表示画像の出力を行うまでの画像処理手順を以下に説明する。
【００６１】
図２に、本発明の画像処理装置における画像処理のフローチャートを示す。
【００６２】
画像処理装置１００では、ユーザから画像表示のリクエストがあると、ユーザ認証部１１２でユーザ認証処理を行う（Ｓ１０１）。
【００６３】
ユーザ認証処理では、ユーザから入力されたユーザＩＤ、パスワードおよび操作端末のＩＤ、電話番号、機種、ＩＰアドレスなどの識別子や過去のアクセス履歴情報により、認証データベース１１１に格納されたデータを参照しながらユーザ認証を行う。ユーザ認証処理において、ユーザ認証のために入力させるユーザ情報として、ユーザＩＤ、パスワードの代わりに虹彩情報やバイオメトリクス情報を使用してもよい。
【００６４】
ユーザ認証の結果（Ｓ１０２）により、認証されなかった場合には、終了し、認証された場合には、ルール決定部１１７にユーザ情報を受け渡し、画像の取り出し処理を行う（Ｓ１０３）。
【００６５】
画像の取り出し処理では、ユーザから要求された画像を画像データベース１２３から抽出し、画像バッファ１２４へ取り出し、一時的にためる。マスク画像と同期を取るため、画像ＩＤをルール決定部１１７に受け渡す。また、画像は、蓄積された画像データベース１２３上の画像の他、リアルタイムで入力される入力映像等でもよい。
【００６６】
スケジューラ１１５は、タイマー１１３とスケジュールデータベース１１４からの情報により、スケジュールの確認を行い、スケジュールの変更があれば変更通知をルール決定部１１７に通知する。
【００６７】
次に、ルール決定部１１７において、ユーザ認証部１１２からユーザＩＤ、パスワード、ユーザレベルおよび操作端末のＩＤ、電話番号、機種、ＩＰアドレスなどの識別子や過去のアクセス履歴情報等のユーザ情報、対象情報、スケジューラ１１５からスケジュール変更通知情報または時間情報、画像データベース１２３からマスキングを行う画像の画像ＩＤを入力し、合成ルールデータベース１１６からマスキング処理、情報付加のためのルールを検索し、決定するルール決定処理を行う（Ｓ１０４）。
【００６８】
ルール決定処理では、ユーザ認証部１１２から得たユーザＩＤ、ユーザレベル、スケジューラ１１５から得た現在時刻の時刻パラメータ等から、これらの情報に適合する合成ルールを合成ルールデータベース１１６より引き出す。合成ルールとなるものは、マスク対象（非対象）の場所を特定するための対象パラメータ、領域の大小などのレベルパラメータ、マスキング領域以外の場所に合成する各種付加情報の表示ＯＮ／ＯＦＦパラメータ、マスキング領域に表示する付加情報のファイル情報等のデータである。同一条件から引き出される合成ルールは、複数存在することも可能であり、優先度により、あるいはランダムに決定する。画像ＩＤと本処理で得られた合成ルールデータは、マスクデータ作成部１２１に受け渡し、データ作成の指示を出す。
【００６９】
次に、マスクデータ作成部１２１でマスクデータの作成を行う（Ｓ１０５）。
ここでは、ルール決定部１１７から受け取った画像ＩＤと合成ルールにより、領域データベース１１８からマスキングする領域データを、付加情報データベース１１９から撮影時刻情報や位置情報などの文字列情報と表示位置を、付加画像データベース１２０からマスキング領域に貼り付ける画像データを取得し、マスクデータを作成する。例えば、付加情報データベース１１９から取得した端末の識別子（製造番号など）やユーザ情報を用いて、文字列情報や表示位置をユーザの環境（言語や表示形式）に適合させるように変換する。作成したマスクデータは、マスク画像バッファ１２２に受け渡す。
【００７０】
次に、マスキング部１２５でマスキング処理を行う（Ｓ１０６）。ここでは、画像バッファ１２４に格納されている元画像と、マスク画像バッファ１２２に格納されているマスク画像と、を合成する。このとき、上記画像ＩＤで同期を取る。
【００７１】
画像バッファ１２４に格納されている元画像１２６、マスク画像バッファ１２２に格納されているマスク画像１２７を図３（ａ）、図３（ｂ）に、合成処理された画像１２８を図４に示す。
【００７２】
最後に、画像処理装置１００からリクエストのあった操作端末２００に対して上記マスク処理を施した画像を送信する（Ｓ１０７）。
【００７３】
さらに、ルール決定部１１７における上記ルール決定処理について、補足説明を行う。
【００７４】
図５に、ルール決定処理のフローチャートを示す。ルール決定処理では、まず、ユーザ認証部１１２から入力されるユーザＩＤ、ユーザレベルなどのユーザ情報の確認を行う（Ｓ１２１）。次に、スケジューラ１１５により変更される現在のスケジュールを確認する（Ｓ１２２）。次に、合成ルールデータベース１１６からユーザ、スケジュールの条件に合うルールを参照する（Ｓ１２３）。次に、参照した合成ルールより使用するルールを決定する（Ｓ１２４）。使用するルールが複数ある場合、優先度により、またはランダムに決定する。
【００７５】
以上の処理により、蓄積されている画像または入力した画像に対して、ユーザに応じたマスキング処理を行うことができる。したがって、ユーザに届く画像にはマスクがかけられるので、ユーザに隠すべき情報を守ることができるとともに、表示される元の画像はマスクがかけられずに残っているので、ユーザレベルに応じてマスク領域の変更を行うことができる。
【００７６】
また、上記マスクデータ作成処理において、マスクした領域に表示する情報をデータベースに直接持っていなくても、情報の格納場所、例えばＵＲＬ等を記憶しておけば、必要なときのみ情報を獲得して表示させることができる。
【００７７】
また、マスクした領域に表示する情報のリンク情報を持つことにより、表示情報としてバナー広告等のタグを表示し、ユーザから表示情報にアクセスされたとき、リンク先を表示させることもできる。
【００７８】
さらに、上記ルール設定において、ユーザにユーザレベルを設けて、リクエストされたユーザのレベルに応じてマスキング領域を変更したり、ユーザの嗜好情報を有して、ユーザの嗜好に応じた情報をマスキング領域に表示させることもできる。
【００７９】
このユーザによりマスキング領域、マスキング領域上の表示変更例を図６に示す。図６に示すように、ユーザＡとユーザＢとでは、マスキング領域がユーザＡの方が小さくなっており、また、マスキング領域内の表示が、ユーザＡの方は「ニュース」となっており、ユーザＢの方は「広告」となっている。
【００８０】
また、ユーザ登録処理またはユーザ登録情報の参照を可能とし、登録ユーザか否かでマスキング領域を変更したり、非ユーザにのみ広告表示を行い、ユーザ登録されたユーザに対しては、特に必要のない広告表示を表示しないといったこともできる。
【００８１】
また、マスキング領域を指定またはマスキング領域の解除領域を指定するユーザ契約情報を有して、このユーザの契約情報に応じたマスキング処理もできる。
例えば、図７に示すように、駐車場の監視契約において、契約区域７１、契約区域７２のみをマスキング解除領域とし、非契約区域７３、非契約区域７４などにマスキングをかけることにより、ユーザの駐車スペースのみ監視させることができ、他の駐車スペースにおけるプライバシーを保護することができる。
【００８２】
さらに、画像内の人物、移動体の認識処理を行い、認識された人物にラベルを付けることにより、マスキングされた画像でも人物の動き等が分かる。例えば、図８に示すように、通行人８１、通行人８２がマスキングされていても、ラベルＡ、Ｂが付与されていることにより、通行人８１、通行人８２が移動して、位置が変わっても、ラベルにより認識が容易である。したがって、通行人自体はマスキングされるためプライバシーが守られ、監視者も通行人の行動は把握できるので、監視処理は不都合なく行うことができる。
【００８３】
また、ユーザがカメラ操作を行う場合に、ユーザからカメラ操作信号を入力して、入力したカメラ操作信号に従ってマスキング処理を行うことにより、カメラのパン、チルト、ズーム等に応じてマスキング領域を変更することができる。例えば、図９に示すように、カメラ動作の「パン」に従って、マスキング領域９２も左右に移動し、「ズーム」が行われれば、マスキング領域９２が拡大する。
【００８４】
さらに、画像を入力する際には、ＪＰＥＧやＭＰＥＧといったフォーマット形式があるが、これらのヘッダ情報からユーザ情報を取り出すようにすることにより、ヘッダ情報にユーザ情報が格納された画像情報を入力することができ、ユーザ情報をあらためて入力する必要がない。また、この画像情報を暗号化して入力することにより、情報の漏洩を防止することができる。
【００８５】
さらに、画像表示がリアルタイムにライブ映像を必要としているものではない場合、上記画像処理またはマスキング処理をバッチ処理で行うことにより、画像蓄積や画像表示のパフォーマンスを向上させることができる。
【００８６】
【発明の効果】
以上説明したように、本発明は、ユーザ情報と画像とを入力する入力手段と、前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理手段と、前記マスキング処理された画像を出力する画像出力手段とを備えることにより、マスクがかかっていない画像を入力し、ユーザ情報に従ってマスキング処理を行い、ユーザにはマスクがかけられた画像を出力するので、ユーザに応じたマスキング処理を行うことができる。したがって、ユーザに隠すべき情報を守ることができるとともに、ユーザレベルに応じてマスク領域の変更を行うことができるというすぐれた効果を有する画像処理装置および画像処理方法を提供することができるものである。
【図面の簡単な説明】
【図１】本発明の実施の形態の画像処理装置を示すブロック図
【図２】本発明の実施の形態の画像処理を示すフローチャート
【図３】本発明の実施の形態のマスキング処理される前の画像、この画像にマスクをかける画像を示す画像図
【図４】本発明の実施の形態のマスキング処理後の画像を示す画像図
【図５】本発明の実施の形態のルール決定処理を示すフローチャート
【図６】本発明の実施の形態のユーザによりマスキング領域、マスキング領域上の表示変更を示す画像図
【図７】本発明の実施の形態のユーザの契約情報に応じたマスキング処理の表示画像を示す画像図
【図８】本発明の実施の形態の認識画像にラベルを付与した表示画像を示す画像図
【図９】本発明の実施の形態のカメラ操作信号に応じてマスキング領域変更を行う表示画像図
【符号の説明】
７１、７２ 契約領域
７３、７４ 非契約領域
８１、８２ 通行人
９１ 人物
９２ マスキング領域
１００ 画像処理装置
１１１ 認証データベース
１１２ ユーザ認証部
１１３ タイマー
１１４ スケジュールデータベース
１１５ スケジューラ
１１６ 合成ルールデータベース
１１７ ルール決定部
１１８ 領域データベース
１１９ 付加情報データベース
１２０ 付加画像データベース
１２１ マスクデータ作成部
１２２ マスク画像バッファ
１２３ 画像データベース
１２４ 画像バッファ
１２５ マスキング部
１２６ 元画像
１２７ マスク画像
１２８ 合成画像
２００ 操作端末
５００ 端末
５１１ 画像表示処理部
５１２ 画像合成処理部
５１３ 情報データベース
６００ サーバ
６１１ ユーザ認証部
６１２ 認証データベース
６１３ 画像データ入力部
６１４ 情報データベース
Claims (6)
- ユーザ情報と画像とを入力する入力手段と、
前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理手段と、
前記マスキング処理された画像を出力する画像出力手段と、
前記ユーザ情報に従ってユーザ登録を行うユーザ登録手段と、
前記入力手段に入力されたユーザ情報がユーザ登録されているか否かを判定するユーザ登録判定手段とを備え、
前記ユーザ情報が、ユーザの操作する端末の操作端末情報を有し、前記画像処理手段が前記操作端末情報に従ってマスキング処理を行うことを特徴とする画像処理装置。 - ユーザ情報と画像とが一体となった画像情報を入力する入力手段と、
前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理手段と、
前記マスキング処理された画像を出力する画像出力手段とを備えていることを特徴とする画像処理装置。 - 前記入力手段が入力する画像情報が暗号化された画像情報であることを特徴とする請求項２に記載の画像処理装置。
- ユーザ情報と画像とを入力する入力ステップと、
前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理ステップと、
前記マスキング処理された画像を出力する画像出力ステップと、
前記ユーザ情報に従ってユーザ登録を行うユーザ登録ステップと、
前記入力ステップに入力されたユーザ情報がユーザ登録されているか否かを判定するユーザ登録判定ステップとを備え、
前記ユーザ情報が、ユーザの操作する端末の操作端末情報を有し、前記画像処理ステップが、前記操作端末情報に従ってマスキング処理を行うことを特徴とする画像処理方法。 - ユーザ情報と画像とを一体となった画像情報を入力する入力ステップと、
前記ユーザ情報に従って前記画像の一部にマスキング処理を行う画像処理ステップと、
前記マスキング処理された画像を出力する画像出力ステップとを備えていることを特徴とする画像処理方法。 - 前記入力ステップが入力する画像情報が暗号化された画像情報であることを特徴とする請求項５記載の画像処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001230418A JP4566474B2 (ja) | 2001-07-30 | 2001-07-30 | 画像処理装置および画像処理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001230418A JP4566474B2 (ja) | 2001-07-30 | 2001-07-30 | 画像処理装置および画像処理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003046745A JP2003046745A (ja) | 2003-02-14 |
| JP4566474B2 true JP4566474B2 (ja) | 2010-10-20 |
Family
ID=19062634
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001230418A Expired - Fee Related JP4566474B2 (ja) | 2001-07-30 | 2001-07-30 | 画像処理装置および画像処理方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4566474B2 (ja) |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2400514B (en) * | 2003-04-11 | 2006-07-26 | Hewlett Packard Development Co | Image capture method |
| JP4510653B2 (ja) * | 2005-01-31 | 2010-07-28 | キヤノン株式会社 | レイアウト決定方法及び装置並びにプログラム |
| JP4508038B2 (ja) * | 2005-03-23 | 2010-07-21 | 日本ビクター株式会社 | 画像処理装置 |
| JP4417292B2 (ja) * | 2005-05-25 | 2010-02-17 | ソフトバンクモバイル株式会社 | オブジェクト出力方法及び情報処理装置 |
| JP4744974B2 (ja) * | 2005-08-05 | 2011-08-10 | 株式会社東芝 | 映像監視システム |
| JP4903034B2 (ja) * | 2005-12-28 | 2012-03-21 | 株式会社リコー | 画像処理装置、画像処理方法及びコンピュータプログラム |
| JP4702222B2 (ja) * | 2006-08-14 | 2011-06-15 | コニカミノルタビジネステクノロジーズ株式会社 | 画像表示装置および画像表示プログラム |
| JP4905071B2 (ja) * | 2006-11-10 | 2012-03-28 | 富士ゼロックス株式会社 | 履歴画像管理プログラム、指示装置、および処理装置 |
| JP4671133B2 (ja) | 2007-02-09 | 2011-04-13 | 富士フイルム株式会社 | 画像処理装置 |
| JP5159381B2 (ja) * | 2008-03-19 | 2013-03-06 | セコム株式会社 | 画像配信システム |
| JP5637633B2 (ja) * | 2010-07-06 | 2014-12-10 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | 画像配信装置 |
| JP5701007B2 (ja) | 2010-10-19 | 2015-04-15 | キヤノン株式会社 | 監視カメラ装置及び監視カメラ装置の制御方法 |
| JP5720252B2 (ja) * | 2011-01-06 | 2015-05-20 | セイコーエプソン株式会社 | プロジェクター及びプロジェクターの制御方法 |
| JP5871485B2 (ja) * | 2011-05-17 | 2016-03-01 | キヤノン株式会社 | 画像送信装置、画像送信方法、及びプログラム |
| JP2013092856A (ja) * | 2011-10-25 | 2013-05-16 | Sony Corp | 画像処理装置およびプログラム |
| US20140247272A1 (en) * | 2011-10-25 | 2014-09-04 | Sony Corporation | Image processing apparatus, method and computer program product |
| JP2013150025A (ja) * | 2012-01-17 | 2013-08-01 | Fuji Xerox Co Ltd | 画像読取装置、携帯端末装置、プログラム |
| JP6180244B2 (ja) * | 2013-08-30 | 2017-08-16 | Kddi株式会社 | カメラ映像処理方法、装置およびプログラム |
| JP6366022B2 (ja) * | 2016-01-11 | 2018-08-01 | パナソニックＩｐマネジメント株式会社 | モニタリング装置、モニタリングシステムおよびモニタリング方法 |
| US10192061B2 (en) | 2017-01-24 | 2019-01-29 | Wipro Limited | Method and a computing device for providing privacy control in a surveillance video |
| CN107889070B (zh) * | 2017-11-08 | 2020-12-22 | Oppo广东移动通信有限公司 | 图片处理方法、装置、终端及计算机可读存储介质 |
| KR102457619B1 (ko) * | 2018-01-16 | 2022-10-24 | 한화테크윈 주식회사 | 마스킹 영역 설정 방법, 장치 및 컴퓨터 프로그램 |
| CN110177074B (zh) * | 2019-04-10 | 2021-02-12 | 华为技术有限公司 | 一种对话消息的发送方法及电子设备 |
| KR20210101621A (ko) * | 2020-02-10 | 2021-08-19 | 삼성전자주식회사 | 카메라를 제어하는 방법 및 이를 지원하는 전자 장치 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0614273A (ja) * | 1992-06-26 | 1994-01-21 | Funai Electric Co Ltd | 画面の表示機能 |
| JPH0851611A (ja) * | 1994-08-05 | 1996-02-20 | Canon Inc | 画像処理装置および画像処理方法 |
| JPH1173382A (ja) * | 1997-06-30 | 1999-03-16 | Fuji Photo Film Co Ltd | 画像通信システムおよびそれに用いられるクライアント・コンピュータ |
| JP2000278584A (ja) * | 1999-03-19 | 2000-10-06 | Minolta Co Ltd | 画像処理機能を備えた画像入力装置および画像処理プログラムを記録した記録媒体 |
| JP2001061137A (ja) * | 1999-08-20 | 2001-03-06 | Matsushita Electric Ind Co Ltd | 映像信号処理装置 |
| JP2001121842A (ja) * | 1999-10-25 | 2001-05-08 | Form Insatsu Kk | 伝票綴り |
| JP2001186507A (ja) * | 1999-12-27 | 2001-07-06 | Ntt Power & Building Facilities Inc | 映像監視システム |
-
2001
- 2001-07-30 JP JP2001230418A patent/JP4566474B2/ja not_active Expired - Fee Related
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0614273A (ja) * | 1992-06-26 | 1994-01-21 | Funai Electric Co Ltd | 画面の表示機能 |
| JPH0851611A (ja) * | 1994-08-05 | 1996-02-20 | Canon Inc | 画像処理装置および画像処理方法 |
| JPH1173382A (ja) * | 1997-06-30 | 1999-03-16 | Fuji Photo Film Co Ltd | 画像通信システムおよびそれに用いられるクライアント・コンピュータ |
| JP2000278584A (ja) * | 1999-03-19 | 2000-10-06 | Minolta Co Ltd | 画像処理機能を備えた画像入力装置および画像処理プログラムを記録した記録媒体 |
| JP2001061137A (ja) * | 1999-08-20 | 2001-03-06 | Matsushita Electric Ind Co Ltd | 映像信号処理装置 |
| JP2001121842A (ja) * | 1999-10-25 | 2001-05-08 | Form Insatsu Kk | 伝票綴り |
| JP2001186507A (ja) * | 1999-12-27 | 2001-07-06 | Ntt Power & Building Facilities Inc | 映像監視システム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003046745A (ja) | 2003-02-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4566474B2 (ja) | 画像処理装置および画像処理方法 | |
| Kruegle | CCTV Surveillance: Video practices and technology | |
| JP4701356B2 (ja) | プライバシー保護画像生成装置 | |
| KR101360246B1 (ko) | 다기능 방범카메라 통합방범 시스템 | |
| US20060104483A1 (en) | Wireless digital image capture device with biometric readers | |
| JP2008160354A (ja) | 映像出力装置 | |
| JP2007219713A (ja) | 照会システム、撮像装置、照会装置、情報処理方法、プログラム | |
| KR101522311B1 (ko) | 미리보기 기능을 갖춘 감시카메라 영상 반출 시스템 | |
| WO2008004578A1 (fr) | Système, dispositif et procédé de surveillance | |
| JP2008027336A (ja) | 位置情報配信装置、カメラ、位置情報配信方法およびプログラム | |
| JPWO2017026356A1 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP2006325064A (ja) | 広域モニタシステム | |
| KR102107189B1 (ko) | 3ｄ 화면 상에 지하철 역사의 시설물 이력 관리 및 상태 관리 시스템 및 방법 | |
| US9342978B2 (en) | Method and system for configurable security and surveillance systems | |
| JP2003199097A (ja) | 監視システムセンタ装置、監視システムセンタプログラム、および監視システムセンタプログラムを記録した記録媒体 | |
| US20060087560A1 (en) | Surveillance camera | |
| JPH10136247A (ja) | カメラ制御システム及びカメラサーバ及びその制御方法及び記憶媒体 | |
| JP2002142214A (ja) | 映像監視システム | |
| KR102555680B1 (ko) | 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템 | |
| JP4357178B2 (ja) | 画像サーバ | |
| KR20190088731A (ko) | 모바일 기반 이벤트 영상 관리 시스템 | |
| Vimal et al. | Development of cloud integrated internet of things based intruder detection system | |
| JP2005251088A (ja) | 防犯・防災情報システム | |
| JP2004241945A (ja) | 画像監視装置、画像監視方法、画像監視プログラム及びそのプログラムを記録した記録媒体 | |
| KR101496948B1 (ko) | 다기능 방범카메라 통합방범 시스템 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080718 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100318 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100427 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100624 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100713 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100804 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4566474 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130813 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |