JP2007158421A - 監視カメラシステム及び顔画像追跡記録方法 - Google Patents

監視カメラシステム及び顔画像追跡記録方法 Download PDF

Info

Publication number
JP2007158421A
JP2007158421A JP2005346656A JP2005346656A JP2007158421A JP 2007158421 A JP2007158421 A JP 2007158421A JP 2005346656 A JP2005346656 A JP 2005346656A JP 2005346656 A JP2005346656 A JP 2005346656A JP 2007158421 A JP2007158421 A JP 2007158421A
Authority
JP
Japan
Prior art keywords
face image
camera
processing apparatus
camera system
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2005346656A
Other languages
English (en)
Inventor
Shuichi Horiguchi
修一 堀口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2005346656A priority Critical patent/JP2007158421A/ja
Priority to PCT/JP2006/324015 priority patent/WO2007063970A1/ja
Publication of JP2007158421A publication Critical patent/JP2007158421A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Abstract

【課題】常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握可能にし、オペレータの監視に要する労力を軽減する。
【解決手段】コンピュータ7からIPカメラ1〜5に顔画像を送信し、各IPカメラ1〜5はそれぞれ受信した顔画像を顔画像記録部14に記録する。IPカメラ1〜5は撮影画像から顔画像を切り出し、顔画像記録部14内のメモリに記録されている顔画像との顔認証を行う。顔認証で照合された場合、顔画像、カメラ番号および撮影時刻をコンピュータ7に送信する。コンピュータ7は、受信した顔画像を時系列にディスプレイ装置8に表示する。
【選択図】図1

Description

本発明は、カメラで撮影された画像を用い、対象範囲内に存在する人物の顔画像を追跡して記録する監視カメラシステム及び顔画像追跡記録方法に関する。
図14は従来の監視カメラシステムの構成例を示す図である。IP(インターネット・プロトコル)監視カメラシステムは、複数のIPカメラ100およびコンピュータ200がネットワーク(LAN)150に接続された構成を有する。
IPカメラ100は、レンズ部111、撮像部112およびネットワーク接続部113を有し、レンズ部111を介して撮像部112により撮影された画像を、ネットワーク接続部113に接続されたLAN150を経由してコンピュータ200に送信する。
一方、コンピュータ200は、制御部201、表示部202、操作部203、ネットワーク接続部204、メモリ部205等を有し、LAN150に接続されたネットワーク接続部204を通じてIPカメラ100からの画像を受信する。また、コンピュータ200は、受信した画像を表示部202に表示する画像表示機能、操作部203の指示に従って受信した画像をメモリ部205に記録する画像記録機能、LAN150を経由してIPカメラ100の各種設定を行うカメラコントロール機能を有する。
このような構成を有するIP監視カメラシステムは、各IPカメラ100で撮影された画像をLAN150経由でコンピュータ200に転送し、その撮影画像をコンピュータ200の表示部202に表示するとともに、必要に応じてメモリ部205に記録する。
また、特許文献1に開示されているような特定人物検出システムも提案されている。このシステムでは、以下の動作を行う。駅の自動券売機で切符を購入する利用者をビデオカメラで撮影し、その映像から顔画像を切り出し、顔画像から利用者の顔特徴量データを作成する。この利用者の顔特徴量データと予めデータベースに登録された特定人物の顔特徴量データとを照合し、照合の結果から利用者が特定人物である可能性を判定する。そして、利用者が特定人物である可能性が高い場合には警察署に報知する。
特開2003−187352号公報
しかしながら、上記従来の監視カメラシステムでは、オペレータがコンピュータの表示部に表示された画像を常に監視し、どの人物がどのカメラに何時に映っていたかを把握する必要があった。このため、オペレータは注意を集中し続けなければならず、多くの労力を必要としていた。
本発明は、上記事情に鑑みてなされたもので、常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握することができ、オペレータの監視に要する労力を軽減することが可能な監視カメラシステム及び顔画像追跡記録方法を提供することを目的とする。
本発明の監視カメラシステムは、対象範囲を撮影可能に設置された少なくとも1台のカメラと情報処理装置とがネットワークを介して接続され、前記カメラで撮影された画像を用いて前記対象範囲内に存在する人物の顔画像を追跡して記録する監視カメラシステムであって、前記カメラは、顔画像が登録された顔画像記憶手段と、撮影した画像の中から顔画像を検出する顔画像検出手段と、前記登録された顔画像と前記検出された顔画像との認証を行う顔画像認証手段と、前記認証が確認された顔画像に関する情報を前記情報処理装置に送信する顔画像情報送信手段とを備え、前記情報処理装置は、前記カメラから前記顔画像に関する情報を受信する受信手段と、前記受信した顔画像を撮影時刻とともに記録する記録手段と、前記記録された顔画像を表示する表示手段とを備えたものである。
上記構成により、常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握することができ、オペレータの監視に要する労力を軽減できる。
また、本発明は、上記の監視カメラシステムであって、特定の前記カメラは、前記対象範囲内の所定の場所を撮影するように設置され、前記撮影された所定の場所の画像から顔画像を検出し、前記検出された顔画像を前記情報処理装置に送信するものであり、前記情報処理装置は、前記特定のカメラから送信された顔画像を受信し、前記受信した顔画像を他の前記カメラに配信する配信手段を備え、前記他のカメラは、前記情報処理装置から配信された顔画像を前記顔画像記憶手段に登録する登録手段を備えるものとする。
上記構成により、予め人物を特定することなく、対象範囲内に存在する人物を監視することができる。
また、本発明は、上記の監視カメラシステムであって、前記カメラは、特定の人物の顔画像を前記顔画像記憶手段に登録する登録手段を備えるものとする。
上記構成により、例えば以前に撮影された特定の人物の画像を登録することで、特定の人物に絞った監視を行うことができる。
また、本発明は、上記の監視カメラシステムであって、前記情報処理装置に無線ネットワークを介して接続される携帯端末を備え、前記情報処理装置は、前記受信した顔画像に関する情報を前記携帯端末に転送する転送手段を備え、前記携帯端末は、前記転送された顔画像に関する情報を表示する表示手段を備えるものとする。
上記構成により、例えば複数のカメラで撮影された人物の顔画像情報を携帯端末に送信することができ、携帯端末を保持する者はその人物を容易に発見することができる。
また、本発明は、上記の監視カメラシステムであって、前記表示手段は、カメラ毎に前記記録された顔画像を時系列に表示するものとする。
上記構成により、対象範囲内に存在する人物の様子など、人物の足跡を容易に把握することができる。
また、本発明は、上記のいずれかの監視カメラシステムであって、前記顔画像に関する情報は、顔画像、カメラ番号および撮影時刻を含むものとする。
上記構成により、顔画像、カメラ番号、撮影時刻をコンピュータに時系列に記録することができ、人物が何時何分にどのカメラに映っていたか等の履歴を知ることができる。
本発明の顔画像追跡記録方法は、対象範囲を撮影可能に設置された少なくとも1台のカメラと情報処理装置とがネットワークを介して接続された監視カメラシステムを用いて、対象範囲内に存在する人物の顔画像を追跡して記録する顔画像追跡記録方法であって、前記カメラにおいて、予め顔画像をメモリに登録しておく顔画像登録ステップと、撮影した画像の中から顔画像を検出する顔画像検出ステップと、前記登録された顔画像と前記検出された顔画像との認証を行う顔画像認証ステップと、前記認証が確認された顔画像に関する情報を前記情報処理装置に送信する送信ステップとを有し、前記情報処理装置において、前記カメラから前記顔画像に関する情報を受信する受信ステップと、前記受信した顔画像を撮影時刻とともに記録装置に記録する記録ステップと、前記記録された顔画像を表示装置に表示する表示ステップとを有するものである。
上記手順により、常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握することができ、オペレータの監視に要する労力を軽減できる。
本発明のカメラは、ネットワークを介して情報処理装置と接続され、対象範囲を撮影可能に設置された監視カメラシステム用のカメラであって、顔画像が登録された顔画像記憶手段と、撮影した画像の中から顔画像を検出する顔画像検出手段と、前記登録された顔画像と前記検出された顔画像との認証を行う顔画像認証手段と、前記認証が確認された顔画像に関する情報を前記情報処理装置に送信する顔画像情報送信手段とを備えたものである。
上記構成により、常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握することができ、オペレータの監視に要する労力を軽減可能な監視カメラシステムを実現できる。
本発明の情報処理装置は、対象範囲を撮影可能に設置された少なくとも1台のカメラとネットワークを介して接続され、前記カメラで撮影された画像を用いて前記対象範囲内に存在する人物の顔画像を追跡して記録する監視カメラシステム用の情報処理装置であって、前記カメラから前記顔画像に関する情報を受信する受信手段と、前記受信した顔画像を撮影時刻とともに記録する記録手段と、前記記録された顔画像を表示する表示手段とを備えたものである。
上記構成により、常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握することができ、オペレータの監視に要する労力を軽減可能な監視カメラシステムを実現できる。
また、本発明は、上記いずれかに記載の監視カメラシステムの各手段の機能をコンピュータにより実現するためのコンピュータ読み取り可能なプログラムを提供する。
本発明によれば、常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握することができ、オペレータの監視に要する労力を軽減することが可能な監視カメラシステム及び顔画像追跡記録方法を提供できる。
本実施形態の監視カメラシステムは、自動顔画像追跡記録システムに適用されるものである。この監視カメラシステムとしての自動顔画像追跡記録システムの構成、及び顔画像追跡記録方法に関する動作について説明する。
(第1の実施形態)
図1は第1の実施形態における自動顔画像追跡記録システムの構成を示す図である。この自動顔画像追跡記録システムは、ネットワーク(LAN)6に接続された複数のIPカメラ1〜5およびコンピュータ7から主に構成される。コンピュータ7には、ディスプレイ装置8が接続されている。
IPカメラ1は監視対象範囲の入口を撮影できるように設置されている。また、IPカメラ2〜4は監視対象範囲の入口から出口までの途中の場所を撮影できるように設置されている。また、IPカメラ5は監視対象範囲の出口を撮影できるように設置されている。
図2はIPカメラの構成を示す図である。IPカメラは、レンズ11、撮像部12、ネットワーク接続部13、顔画像記録部14、顔画像切出部15および顔認証照合部16を有して構成される。このIPカメラは、レンズ11を介して撮像部12により撮影された画像に対し、後述する画像処理を行い、その結果をネットワーク接続部13に接続されたLAN6を経由してコンピュータ7に送信する。ここで、顔画像記録部14、顔画像切出部15および顔認証照合部16の各機能は、IPカメラ内蔵のCPUがROMに格納された制御プログラムを実行することによって実現される。ここで、ネットワーク接続部13が顔画像情報送信手段の一例に相当する。
顔画像記録部14は、メモリ(RAM、ハードディスク、磁気テープ等)を有し、顔画像切出部15によって切り出された、あるいはコンピュータ7から送信された顔画像のデータをメモリに記録する。この顔画像記録部14内のメモリが顔画像記憶手段の一例に相当する。
顔画像切出部15は、撮影された画像から顔画像を検出し、検出された顔画像を撮影画像から切り出す。この顔画像を検出して切り出す方法として、例えば、背景差分法を用いて撮影画像に含まれる人物などの概略的なオブジェクト画像を取得し、このオブジェクト画像から、目や鼻などの位置を基に、顔部分を認識し、この認識された顔部分あるいは顔部分を含む枠を撮影画像から切り出して顔画像のデータを生成する方法などが挙げられる。この顔画像切出部15が顔画像検出手段の一例に相当する。
顔認証照合部16は、切り出された顔画像の顔認証を行う。顔認証技術として、例えばガーバー(Gabor)フィルタを用いた方法が挙げられる。この方法では、顔画像上にある目、鼻、口などの顔器官の特徴点を見つけ、各特徴点でガーバー(Gabor)フィルタによってデータを畳み込むことで、特徴点周辺における色の濃淡等の周期性や方向性を特徴量データとして取り出す。そして、その特徴量データと予めメモリに登録された顔画像の特徴量データとを照合する。この照合の際、両特徴量データの類似度を算出し、この算出された類似度が閾値以上であるか否かを判別し、閾値以上である場合、切り出された顔画像は予め登録された顔画像と一致すると判定する。この顔認証照合部16が顔画像認証手段の一例に相当する。
図3はコンピュータ7の構成を示す図である。コンピュータ7は、周知のCPU21、ROM22、RAM23の他、ストレージメモリ24、操作パネル25、I/Oインタフェース(I/F)26、ディスプレイI/F27等がバス28を介して接続された構成を有する。ディスプレイI/F27には、ディスプレイ装置8が接続されている。ストレージメモリ24は、大容量のハードディスク等の記憶媒体からなり、顔画像に関するデータが格納される顔画像記憶部24aを有する。
上記構成を有する自動顔画像追跡記録システムの動作を示す。図4はIPカメラ1における撮影時の動作処理手順を示すフローチャートである。この処理プログラムはIPカメラ1内のROMに内蔵されており、CPUによって所定周期毎に撮影中に実行される。このIPカメラ1は、前述したように、監視対象範囲の入口に設置されており、監視対象範囲に入場する人物の顔画像を撮影可能である。まず、撮影中の画像が記録された記録媒体(メモリ)から撮影画像を取得する(ステップS1)。撮影画像内に顔画像があるか否かを判別する(ステップS2)。顔画像がない場合、そのまま本処理を終了する。
一方、顔画像がある場合、顔画像を切り出し、顔画像記録部14内のメモリに格納する(ステップS3)。切り出された顔画像に識別符号を付加する(ステップS4)。図5は撮影画像から切り出される顔画像およびその識別符号を示す図である。ここでは、撮影画像から3人の顔画像が検出され、切り出される3人の顔画像に、顔画像A、顔画像B、顔画像Cと統一的な識別符号が付加されている。
そして、識別符号が付加された顔画像、カメラ番号(ここでは、値1)および撮影時刻からなる顔画像情報をコンピュータ7に送信し(ステップS5)、本処理を終了する。
図6はコンピュータ7における顔画像配信処理手順を示すフローチャートである。この処理プログラムは、コンピュータ7内の記憶媒体(ROM22あるいはストレージメモリ24)に格納されており、CPU21によって所定周期毎に実行される。
まず、IPカメラ1から識別符号が付加された顔画像、カメラ番号および撮影時刻からなる顔画像情報を受信したか否かを判別する(ステップS11)。顔画像情報を受信していない場合、そのまま本処理を終了する。一方、顔画像情報を受信すると、ストレージメモリ24内の顔画像記憶部24aに格納し(ステップS12)、受信した顔画像をディスプレイ装置8に表示する(ステップS13)。さらに、顔画像記憶部24aに格納された、識別番号が付加された顔画像をIPカメラ2〜5に配信する(ステップS14)。このステップS14が配信手段の機能に相当する。この後、本処理を終了する。なお、IPカメラ1内のメモリには、既に識別番号が付加された顔画像が記憶されているので、ステップS14における配信処理では、IPカメラ1に顔画像を送信していないが、送信するようにしてもよい。
図7はIPカメラ2〜5における撮影時の動作処理手順を示すフローチャートである。この処理プログラムはIPカメラ2〜5内の各ROMに内蔵されており、各CPUによって撮影中に所定周期毎に実行される。まず、コンピュータ7から送信される識別符号が付加された顔画像を受信したか否かを判別する(ステップS21)。顔画像を受信していない場合、ステップS23の処理に移行する。一方、顔画像を受信している場合、顔画像記録部14内のメモリにその顔画像を登録する(ステップS22)。このステップS22が登録手段の機能に相当する。
そして、撮影中の画像が記録された記録媒体(メモリ)から撮影画像を取得し(ステップS23)、撮影画像内に顔画像があるか否かを判別する(ステップS24)。顔画像がない場合、そのまま本処理を終了する。一方、顔画像がある場合、撮影画像から顔画像を切り出す(ステップS25)。このステップS24、S25が顔画像検出手段の機能に相当する。
切り出された顔画像と顔画像記録部14内のメモリに登録された顔画像との顔認証を行う(ステップS26)。このステップS26が顔画像認証手段の機能に相当する。顔認証の結果、両顔画像が一致するか否かを判別し(ステップS27)、一致する場合、切り出された顔画像、カメラ番号および撮影時刻からなる顔画像情報をコンピュータ7に送信する(ステップS28)。このステップS28が顔画像情報送信手段の機能に相当する。この後、本処理を終了する。一方、一致しない場合、そのまま本処理を終了する。なお、IPカメラ1については、既に顔画像記録部14内のメモリに顔画像情報が格納されているので、本処理は行われない。
図8はコンピュータ7における顔画像追跡記録動作処理手順を示すフローチャートである。この処理プログラムは、コンピュータ7内の記憶媒体(ROM22あるいはストレージメモリ24)に格納されており、CPU21によって所定周期毎に実行される。
まず、IPカメラ2〜5のいずれかから顔画像情報を受信したか否かを判別する(ステップS31)。このステップS31が受信手段の機能に相当する。IPカメラ2〜5のいずれからも顔画像情報を受信していない場合、そのまま本処理を終了する。一方、IPカメラ2〜5の少なくとも1つから顔画像情報を受信すると、受信した顔画像情報を顔画像記憶部24aに記録する(ステップS32)。このステップS32が記録手段の機能に相当する。そして、顔画像記憶部24aに記録された顔画像を時系列にディスプレイ装置8に表示する(ステップS33)。このステップS33が表示手段の機能に相当する。この後、本処理を終了する。
図9は顔画像が時系列に表示されたディスプレイ装置8の画面を示す図である。この画面では、IPカメラ1〜5で撮影された3人の顔画像A、B、Cがカメラ毎に時系列に表示されている。なお、顔画像の表示の仕方は、これに限らず、カメラで区別することなく単に時系列に表示してもよいし、人物毎に分けて時系列に表示するようにしてもよい。
このように、第1の実施形態の自動顔画像追跡記録システムによれば、顔画像を用いて、人物A、人物B、人物C毎にどのカメラに何時何分に映っていたかを記録することができるとともに、ディスプレイ装置に表示することができる。したがって、オペレータの監視に要する労力を軽減できる。また、各IPカメラ側で、顔画像を検出してその切り出しを行い、さらに、切り出された顔画像と予め登録されている顔画像との顔認証を行うので、コンピュータ側の処理における負荷を低減できる。
(第2の実施形態)
第2の実施形態の自動顔画像追跡記録システムは、前記第1の実施形態と同一のハードウェア構成を有するので、同一の符号を用いることによりその説明を省略する。第2の実施形態では、ストレージメモリ24内の顔画像記憶部24aには、予め要注意人物の顔画像が登録されており、この要注意人物の監視が行われる。
図10は第2の実施形態における顔画像記憶部24aに登録されている要注意人物の顔画像を示す図である。この顔画像は、以前にIPカメラで撮影された要注意人物の顔画像を消去せず、そのまま登録しておいたものでよい。あるいは、デジタルカメラで撮影された顔画像をコンピュータ7に新たに入力して登録したものでもよい。さらには、監視中、IPカメラ1〜5のいずれかで、オペレータが要注意人物であると認識した場合、その顔画像を要注意人物であるとして、コンピュータ7に登録したものでもよい。
図11はコンピュータ7における要注意人物の顔画像配信処理手順を示すフローチャートである。この処理プログラムは、コンピュータ7内の記憶媒体(ROM22あるいはストレージメモリ24)に格納されており、CPU21によって定期的に実行される。
まず、顔画像記憶部24aに要注意人物の顔画像が登録されているか否かを判別する(ステップS41)。登録されていない場合、そのまま本処理を終了する。一方、ステップS41で要注意人物の顔画像が登録されている場合、その顔画像をIPカメラ1〜5に配信する(ステップS42)。この後、本処理を終了する。
これ以降の各IPカメラ1〜5およびコンピュータ7の動作は、前記第1の実施形態と同様である。即ち、IPカメラ1〜5は、コンピュータ7から要注意人物の顔画像を受信すると、顔画像記録部14内のメモリにその顔画像を登録し、撮影画像中に要注意人物の顔画像を認識すると、その顔画像、カメラ番号および撮影時刻からなる顔画像情報をコンピュータ7に送信する。コンピュータ7は、IPカメラ1〜5から送信された顔画像情報を受信すると、顔画像記憶部24aにその顔画像情報を格納するとともに、ディスプレイ装置8に要注意人物の顔画像を時系列に表示する。
このように、第2の実施形態の自動顔画像追跡記録システムによれば、予め登録された要注意人物がどのカメラに何時何分に映っていたかを記録することができるとともに、ディスプレイ装置に表示することができる。
(第3の実施形態)
図12は第3の実施形態におけるコンピュータ7の構成を示す図である。前記第1、第2の実施形態と同一の構成要素には同一の符号を付すことによりその説明を省略する。第3の実施形態では、コンピュータ7は、バス28に接続された無線部29を有し、アンテナ29aを介して携帯端末51とデータ通信可能である。
第3の実施形態では、前記第2の実施形態と同様、ストレージメモリ24内の顔画像記憶部24aには、要注意人物の顔画像が登録されており、コンピュータ7から各IPカメラ1〜5にその顔画像が配信されている。そして、IPカメラ1〜5は、前記第2の実施形態と同様、撮影画像中に要注意人物の顔画像を認識すると、その顔画像、カメラ番号および撮影時刻からなる顔画像情報をコンピュータ7に送信する。
図13はコンピュータ7における顔画像追跡記録動作処理手順を示すフローチャートである。この処理プログラムは、コンピュータ7内の記憶媒体(ROM22あるいはストレージメモリ24)に格納されており、CPU21によって所定周期毎に実行される。
まず、IPカメラ1〜5のいずれかから要注意人物の顔画像情報を受信したか否かを判別する(ステップS51)。IPカメラ1〜5のいずれからも顔画像情報を受信していない場合、そのまま本処理を終了する。一方、IPカメラ1〜5の少なくとも1つから顔画像情報を受信すると、受信した顔画像情報を顔画像記憶部24aに記録する(ステップS52)。そして、顔画像記憶部部24aに記録された顔画像を時系列にディスプレイ装置8に表示する(ステップS53)。さらに、携帯端末51の表示能力に合わせた解像度の変換処理を行った後(ステップS54)、無線部29を通じて、顔画像情報に含まれる顔画像、カメラ番号および撮影時刻を携帯端末51に送信する(ステップS55)。このステップS55が転送手段の機能に相当する。この後、本処理を終了する。そして、携帯端末51の画面には、コンピュータ7から送信された顔画像等が表示される。
このように、第3の実施形態における自動顔画像追跡記録システムによれば、IPカメラ1〜5で撮影された要注意人物の顔画像情報を携帯端末51に送信することができ、携帯端末51を持った、例えばガードマンはその要注意人物を容易に発見することができる。また、コンピュータ7の顔画像記憶部24aに、IPカメラ1〜5の撮影画像から抽出された要注意人物の画像を登録することで、携帯端末51を持ったガードマンは新たな要注意人物の監視をリアルタイムに行うことができる。
なお、本発明は、上記実施形態の構成に限られるものではなく、特許請求の範囲で示した機能、または本実施形態の構成が持つ機能が達成できる構成であればどのようなものであっても適用可能である。
例えば、上記実施形態では、各IPカメラは固定であったが、自動追尾機能を有するカメラであってもよい。また、カメラの台数は任意の数でよいことは勿論である。
また、コンピュータから各IPカメラに登録用の顔画像データを転送する代わりに、コンピュータ側で顔画像の特徴量データを算出し、その特徴量データだけを送信するようにしてもよい。これにより、各IPカメラ側では、顔認証を行う際に特徴量データを算出する処理が省ける。
本発明は、常時監視を必要とせずに、どの人物がどのカメラに何時に映っていたかを把握することができ、オペレータの監視に要する労力を軽減することが可能となる効果を有し、カメラで撮影された画像を用い、対象範囲内に存在する人物の顔画像を追跡して記録する監視カメラシステム等に有用である。
本発明の第1の実施形態における自動顔画像追跡記録システムの構成を示す図 第1の実施形態におけるIPカメラの構成を示す図 第1の実施形態におけるコンピュータの構成を示す図 第1の実施形態のIPカメラ1における撮影時の動作処理手順を示すフローチャート 第1の実施形態における撮影画像から切り出される顔画像およびその識別符号を示す図 第1の実施形態のコンピュータにおける顔画像配信処理手順を示すフローチャート 第1の実施形態のIPカメラ2〜5における撮影時の動作処理手順を示すフローチャート 第1の実施形態のコンピュータにおける顔画像追跡記録動作処理手順を示すフローチャート 第1の実施形態における顔画像が時系列に表示されたディスプレイ装置の画面を示す図 本発明の第2の実施形態における顔画像記憶部に登録されている要注意人物の顔画像を示す図 第2の実施形態のコンピュータにおける要注意人物の顔画像配信処理手順を示すフローチャート 本発明の第3の実施形態におけるコンピュータの構成を示す図 第3の実施形態のコンピュータにおける顔画像追跡記録動作処理手順を示すフローチャート 従来のIPカメラを用いた監視カメラシステムの構成例を示す図
符号の説明
1〜5 IPカメラ
7 コンピュータ
8 ディスプレイ装置
12 撮像部
13 ネットワーク接続部
14 顔画像記録部
15 顔画像切出部
16 顔認証照合部
24a 顔画像記憶部

Claims (10)

  1. 対象範囲を撮影可能に設置された少なくとも1台のカメラと情報処理装置とがネットワークを介して接続され、前記カメラで撮影された画像を用いて前記対象範囲内に存在する人物の顔画像を追跡して記録する監視カメラシステムであって、
    前記カメラは、
    顔画像が登録された顔画像記憶手段と、
    撮影した画像の中から顔画像を検出する顔画像検出手段と、
    前記登録された顔画像と前記検出された顔画像との認証を行う顔画像認証手段と、
    前記認証が確認された顔画像に関する情報を前記情報処理装置に送信する顔画像情報送信手段とを備え、
    前記情報処理装置は、
    前記カメラから前記顔画像に関する情報を受信する受信手段と、
    前記受信した顔画像を撮影時刻とともに記録する記録手段と、
    前記記録された顔画像を表示する表示手段とを備えた監視カメラシステム。
  2. 請求項1記載の監視カメラシステムであって、
    特定の前記カメラは、前記対象範囲内の所定の場所を撮影するように設置され、前記撮影された所定の場所の画像から顔画像を検出し、前記検出された顔画像を前記情報処理装置に送信するものであり、
    前記情報処理装置は、前記特定のカメラから送信された顔画像を受信し、前記受信した顔画像を他の前記カメラに配信する配信手段を備え、
    前記他のカメラは、前記情報処理装置から配信された顔画像を前記顔画像記憶手段に登録する登録手段を備える監視カメラシステム。
  3. 請求項1記載の監視カメラシステムであって、
    前記カメラは、特定の人物の顔画像を前記顔画像記憶手段に登録する登録手段を備える監視カメラシステム。
  4. 請求項1記載の監視カメラシステムであって、
    前記情報処理装置に無線ネットワークを介して接続される携帯端末を備え、
    前記情報処理装置は、前記受信した顔画像に関する情報を前記携帯端末に転送する転送手段を備え、
    前記携帯端末は、前記転送された顔画像に関する情報を表示する表示手段を備える監視カメラシステム。
  5. 請求項1記載の監視カメラシステムであって、
    前記表示手段は、カメラ毎に前記記録された顔画像を時系列に表示する監視カメラシステム。
  6. 請求項1から5のいずれかに記載の監視カメラシステムであって、
    前記顔画像に関する情報は、顔画像、カメラ番号および撮影時刻を含む監視カメラシステム。
  7. 対象範囲を撮影可能に設置された少なくとも1台のカメラと情報処理装置とがネットワークを介して接続された監視カメラシステムを用いて、対象範囲内に存在する人物の顔画像を追跡して記録する顔画像追跡記録方法であって、
    前記カメラにおいて、予め顔画像をメモリに登録しておく顔画像登録ステップと、
    撮影した画像の中から顔画像を検出する顔画像検出ステップと、
    前記登録された顔画像と前記検出された顔画像との認証を行う顔画像認証ステップと、
    前記認証が確認された顔画像に関する情報を前記情報処理装置に送信する送信ステップとを有し、
    前記情報処理装置において、前記カメラから前記顔画像に関する情報を受信する受信ステップと、
    前記受信した顔画像を撮影時刻とともに記録装置に記録する記録ステップと、
    前記記録された顔画像を表示装置に表示する表示ステップとを有する顔画像追跡記録方法。
  8. ネットワークを介して情報処理装置と接続され、対象範囲を撮影可能に設置された監視カメラシステム用のカメラであって、
    顔画像が登録された顔画像記憶手段と、
    撮影した画像の中から顔画像を検出する顔画像検出手段と、
    前記登録された顔画像と前記検出された顔画像との認証を行う顔画像認証手段と、
    前記認証が確認された顔画像に関する情報を前記情報処理装置に送信する顔画像情報送信手段とを備えたカメラ。
  9. 対象範囲を撮影可能に設置された少なくとも1台のカメラとネットワークを介して接続され、前記カメラで撮影された画像を用いて前記対象範囲内に存在する人物の顔画像を追跡して記録する監視カメラシステム用の情報処理装置であって、
    前記カメラから前記顔画像に関する情報を受信する受信手段と、
    前記受信した顔画像を撮影時刻とともに記録する記録手段と、
    前記記録された顔画像を表示する表示手段とを備えた情報処理装置。
  10. 請求項1から6のいずれかに記載の監視カメラシステムの各手段の機能をコンピュータにより実現するためのコンピュータ読み取り可能なプログラム。
JP2005346656A 2005-11-30 2005-11-30 監視カメラシステム及び顔画像追跡記録方法 Withdrawn JP2007158421A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2005346656A JP2007158421A (ja) 2005-11-30 2005-11-30 監視カメラシステム及び顔画像追跡記録方法
PCT/JP2006/324015 WO2007063970A1 (ja) 2005-11-30 2006-11-30 監視カメラシステム及び顔画像追跡記録方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005346656A JP2007158421A (ja) 2005-11-30 2005-11-30 監視カメラシステム及び顔画像追跡記録方法

Publications (1)

Publication Number Publication Date
JP2007158421A true JP2007158421A (ja) 2007-06-21

Family

ID=38092303

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005346656A Withdrawn JP2007158421A (ja) 2005-11-30 2005-11-30 監視カメラシステム及び顔画像追跡記録方法

Country Status (2)

Country Link
JP (1) JP2007158421A (ja)
WO (1) WO2007063970A1 (ja)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009025140A1 (ja) * 2007-08-21 2009-02-26 Nec Corporation 行動監視システム、及び、行動監視方法
JP2009048569A (ja) * 2007-08-22 2009-03-05 Sky Kk クライアント端末監視システム
WO2009133667A1 (ja) * 2008-04-30 2009-11-05 パナソニック株式会社 類似画像検索の結果表示装置及び類似画像検索の結果表示方法
JP2010002983A (ja) * 2008-06-18 2010-01-07 Laurel Bank Mach Co Ltd 行動管理装置
JP2010087582A (ja) * 2008-09-29 2010-04-15 Saxa Inc 遠隔監視システム及びそのサーバ
JP2010238188A (ja) * 2009-03-31 2010-10-21 Sogo Keibi Hosho Co Ltd 警備システムおよび警備方法
CN101895727A (zh) * 2009-05-21 2010-11-24 索尼公司 监视系统、摄像设备、分析设备和监视方法
JP2011066797A (ja) * 2009-09-18 2011-03-31 Canon Inc 画像照合システム、撮像装置、送信装置、及びプログラム
JP2013003751A (ja) * 2011-06-15 2013-01-07 Glory Ltd 顔照合システム及び顔照合方法
JP2013179498A (ja) * 2012-02-28 2013-09-09 Glory Ltd 画像処理方法及び画像処理装置
JP2013211026A (ja) * 2013-05-09 2013-10-10 Panasonic Corp 類似画像検索の結果表示装置及び類似画像検索の結果表示方法
JP5500303B1 (ja) * 2013-10-08 2014-05-21 オムロン株式会社 監視システム、監視方法、監視プログラム、ならびに該プログラムを記録した記録媒体
WO2015151449A1 (ja) * 2014-03-31 2015-10-08 日本電気株式会社 画像処理システム、画像処理装置、画像処理方法および記録媒体
JP2015186113A (ja) * 2014-03-25 2015-10-22 株式会社日立国際電気 情報通信システム及び情報通信方法
WO2017164287A1 (ja) * 2016-03-23 2017-09-28 日本電気株式会社 情報処理システム、情報処理方法及びプログラム
JP2019062527A (ja) * 2017-08-31 2019-04-18 コニカ ミノルタ ラボラトリー ユー.エス.エー.,インコーポレイテッド エッジ演算を用いる多カメラシステムでのリアルタイムの対象再識別
JP2019140617A (ja) * 2018-02-14 2019-08-22 パナソニックIpマネジメント株式会社 インターホンシステム、インターホンシステムの画像出力方法、及びプログラム
JP2020120323A (ja) * 2019-01-25 2020-08-06 パナソニックi−PROセンシングソリューションズ株式会社 情報処理装置および照合方法
JP2022102783A (ja) * 2020-12-25 2022-07-07 株式会社サードアイズ 出退勤管理システム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003204541A (ja) * 2001-12-28 2003-07-18 Nippon Signal Co Ltd:The 映像処理方法及び映像処理装置
JP3999561B2 (ja) * 2002-05-07 2007-10-31 松下電器産業株式会社 監視システムと監視カメラ
JP2004128715A (ja) * 2002-09-30 2004-04-22 Sanyo Electric Co Ltd ビデオデータの記憶制御方法およびシステム、プログラム、記録媒体、ビデオカメラ
JP4622301B2 (ja) * 2004-05-07 2011-02-02 オムロン株式会社 監視システム、および監視カメラ

Cited By (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8525678B2 (en) 2007-08-21 2013-09-03 Nec Corporation Behavior monitoring system and behavior monitoring method
JPWO2009025140A1 (ja) * 2007-08-21 2010-11-18 日本電気株式会社 行動監視システム、及び、行動監視方法
WO2009025140A1 (ja) * 2007-08-21 2009-02-26 Nec Corporation 行動監視システム、及び、行動監視方法
JP5370927B2 (ja) * 2007-08-21 2013-12-18 日本電気株式会社 行動監視システム、及び、行動監視方法
JP2009048569A (ja) * 2007-08-22 2009-03-05 Sky Kk クライアント端末監視システム
WO2009133667A1 (ja) * 2008-04-30 2009-11-05 パナソニック株式会社 類似画像検索の結果表示装置及び類似画像検索の結果表示方法
JP2009271577A (ja) * 2008-04-30 2009-11-19 Panasonic Corp 類似画像検索の結果表示装置及び類似画像検索の結果表示方法
US8886634B2 (en) 2008-04-30 2014-11-11 Panasonic Corporation Apparatus for displaying result of analogous image retrieval and method for displaying result of analogous image retrieval
JP2010002983A (ja) * 2008-06-18 2010-01-07 Laurel Bank Mach Co Ltd 行動管理装置
JP2010087582A (ja) * 2008-09-29 2010-04-15 Saxa Inc 遠隔監視システム及びそのサーバ
JP2010238188A (ja) * 2009-03-31 2010-10-21 Sogo Keibi Hosho Co Ltd 警備システムおよび警備方法
US8982208B2 (en) 2009-05-21 2015-03-17 Sony Corporation Monitoring system, image capturing apparatus, analysis apparatus, and monitoring method
JP2010273125A (ja) * 2009-05-21 2010-12-02 Sony Corp 監視システム、撮像装置、解析装置及び監視方法
CN101895727A (zh) * 2009-05-21 2010-11-24 索尼公司 监视系统、摄像设备、分析设备和监视方法
US9160913B2 (en) 2009-09-18 2015-10-13 Canon Kabushiki Kaisha Image matching system, providing apparatus, imaging apparatus, image matching method, and program
JP2011066797A (ja) * 2009-09-18 2011-03-31 Canon Inc 画像照合システム、撮像装置、送信装置、及びプログラム
JP2013003751A (ja) * 2011-06-15 2013-01-07 Glory Ltd 顔照合システム及び顔照合方法
JP2013179498A (ja) * 2012-02-28 2013-09-09 Glory Ltd 画像処理方法及び画像処理装置
JP2013211026A (ja) * 2013-05-09 2013-10-10 Panasonic Corp 類似画像検索の結果表示装置及び類似画像検索の結果表示方法
US9424464B2 (en) 2013-10-08 2016-08-23 Omron Corporation Monitoring system, monitoring method, monitoring program, and recording medium in which monitoring program is recorded
JP5500303B1 (ja) * 2013-10-08 2014-05-21 オムロン株式会社 監視システム、監視方法、監視プログラム、ならびに該プログラムを記録した記録媒体
JP2015076687A (ja) * 2013-10-08 2015-04-20 オムロン株式会社 監視システム、監視方法、監視プログラム、ならびに該プログラムを記録した記録媒体
EP2860662A2 (en) 2013-10-08 2015-04-15 Omron Corporation Monitoring system, monitoring method, monitoring program, and recording medium in wich monitoring program is recorded
JP2015186113A (ja) * 2014-03-25 2015-10-22 株式会社日立国際電気 情報通信システム及び情報通信方法
US11100691B2 (en) 2014-03-31 2021-08-24 Nec Corporation Image processing system, image processing method and program, and device
JPWO2015151449A1 (ja) * 2014-03-31 2017-04-13 日本電気株式会社 画像処理システム、画像処理装置、画像処理方法および記録媒体
US11798211B2 (en) 2014-03-31 2023-10-24 Nec Corporation Image processing system, image processing method and program, and device
WO2015151449A1 (ja) * 2014-03-31 2015-10-08 日本電気株式会社 画像処理システム、画像処理装置、画像処理方法および記録媒体
US10796166B2 (en) 2016-03-23 2020-10-06 Nec Corporation Information processing for aggregating sensor information about persons entering and exiting a venue
WO2017164287A1 (ja) * 2016-03-23 2017-09-28 日本電気株式会社 情報処理システム、情報処理方法及びプログラム
JP2017175378A (ja) * 2016-03-23 2017-09-28 日本電気株式会社 情報処理システム、情報処理方法及びプログラム
JP2019062527A (ja) * 2017-08-31 2019-04-18 コニカ ミノルタ ラボラトリー ユー.エス.エー.,インコーポレイテッド エッジ演算を用いる多カメラシステムでのリアルタイムの対象再識別
JP7181728B2 (ja) 2017-08-31 2022-12-01 コニカ ミノルタ ラボラトリー ユー.エス.エー.,インコーポレイテッド エッジ演算を用いる多カメラシステムでのリアルタイムの対象再識別
JP2022100385A (ja) * 2018-02-14 2022-07-05 パナソニックIpマネジメント株式会社 共同玄関子機、共同玄関子機の画像出力方法、及びプログラム
JP2019140617A (ja) * 2018-02-14 2019-08-22 パナソニックIpマネジメント株式会社 インターホンシステム、インターホンシステムの画像出力方法、及びプログラム
JP7390670B2 (ja) 2018-02-14 2023-12-04 パナソニックIpマネジメント株式会社 共同玄関子機、共同玄関子機の画像出力方法、及びプログラム
JP2020120323A (ja) * 2019-01-25 2020-08-06 パナソニックi−PROセンシングソリューションズ株式会社 情報処理装置および照合方法
JP7136710B2 (ja) 2019-01-25 2022-09-13 i-PRO株式会社 情報処理装置および照合方法
JP2022102783A (ja) * 2020-12-25 2022-07-07 株式会社サードアイズ 出退勤管理システム

Also Published As

Publication number Publication date
WO2007063970A1 (ja) 2007-06-07

Similar Documents

Publication Publication Date Title
JP2007158421A (ja) 監視カメラシステム及び顔画像追跡記録方法
JP3999561B2 (ja) 監視システムと監視カメラ
KR101001060B1 (ko) 트래킹 장치, 트래킹 방법, 트래킹 장치의 제어 프로그램, 및 컴퓨터 판독 가능한 기록 매체
JP5962916B2 (ja) 映像監視システム
JP2008017093A (ja) 監視システム、監視装置及び監視方法
EP2757771B1 (en) Image pickup apparatus, remote control apparatus, and methods of controlling image pickup apparatus and remote control apparatus
JP2007219948A (ja) ユーザ異常検出装置、及びユーザ異常検出方法
CN109118606B (zh) 一种面部识别考勤过程认证方法
KR101493009B1 (ko) 전후면 차량 번호 인식 방법과 그 시스템
US11245707B2 (en) Communication terminal, communication system, communication control method, and recording medium
US10341616B2 (en) Surveillance system and method of controlling the same
KR101442669B1 (ko) 지능형 객체감지를 통한 범죄행위 판별방법 및 그 장치
EP3462734A1 (en) Systems and methods for directly accessing video data streams and data between devices in a video surveillance system
CN110610610B (zh) 一种车辆出入管理方法、装置以及存储介质
EP3432575A1 (en) Method for performing multi-camera automatic patrol control with aid of statistics data in a surveillance system, and associated apparatus
JP4747894B2 (ja) 認証装置、認証方法、認証プログラムおよびコンピュータ読み取り可能な記録媒体
JP7281505B2 (ja) 捜査支援システム及び捜査支援方法
CN108881119B (zh) 一种视频浓缩的方法、装置和系统
JP2008211412A (ja) ネットワークシステム
KR102162130B1 (ko) 단일카메라를 이용한 불법주정차 단속시스템
JP6555481B2 (ja) 映像監視システム
JP6485978B2 (ja) 画像処理装置および画像処理システム
KR102077632B1 (ko) 로컬 영상분석과 클라우드 서비스를 활용하는 하이브리드 지능형 침입감시 시스템
CN112165579A (zh) 一种规范拍摄方法、系统、计算机设备及存储介质
JP4985742B2 (ja) 撮影システム、方法及びプログラム

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20090203