JP4434560B2 - 入退場管理システム - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、たとえば、セキュリティ重視の部屋などの重要施設への入退場者の入退場を管理する入退場管理システムに関する。
【０００２】
【従来の技術】
従来、たとえば、顔画像、指紋画像、掌形画像、指画像、音声情報、虹彩情報などの生体情報を用いて被照合者（入退場者）があらかじめ登録されている人物か否かを照合する生体照合装置や、被照合者が所持しているＩＤカード（個人識別用媒体）から個人識別情報を読取り、この読取った個人識別情報を用いて当該被照合者があらかじめ登録されている人物か否かを照合する照合装置を用いた入退場管理システムにおいて、たとえば、顔画像を除く、指紋画像、掌形画像、指画像、音声情報などの生体情報を用いた生体照合装置やＩＤカードを用いた入退場管理システムでは、照合時の成功／失敗などの入退場履歴情報を管理者用の管理サーバに転送し、入退場管理情報として管理していた。
【０００３】
【発明が解決しようとする課題】
しかし、従来の入退場管理システムでは、管理者が管理サーバから入退場履歴情報を検索しても、正常な入退場者であるか、不審者が意図的に侵入した行為であるのか、あるいは、いたずらによる行為であるかなど、被照合者（入退場者）との対応付けが視覚的には不可能であるという問題がある。
【０００４】
そこで、本発明は、入退場履歴情報を視覚的に確認することが可能となる入退場管理システムを提供することを目的とする。
【０００５】
【課題を解決するための手段】
本発明の入退場管理システムは、入退場者の施設への入退場を管理する入退場管理システムにおいて、施設の入退場部において、当該入退場部が撮影視野に入るように設置され、入退場者が前記撮影視野に入るとそれを検出して当該入退場者を追跡しながら当該入退場者の少なくとも顔画像を撮影する監視用の撮影手段と、施設の入退場部において、入退場者の顔画像を用いて当該入退場者があらかじめ登録されている人物か否かを照合する顔照合手段と、前記撮影手段が入退場者を検出したのに基づき、そのとき前記撮影手段により撮影された当該入退場者の顔照合前の画像を画像記録手段に記録する第１の制御手段と、前記撮影手段が入退場者を検出したのに基づき前記顔照合手段を照合可能状態に制御する第２の制御手段と、この第２の制御手段により照合可能状態に制御された後、前記顔照合手段から得られる照合結果に応じて当該入退場者の施設への入退場を制御する第３の制御手段と、前記顔照合手段から照合結果が得られたのに基づき、前記画像記録手段に記録された当該入退場者の顔照合前の画像と、前記顔照合手段から得られる照合結果、および、前記第３の制御手段による入退場者の入退場制御状態等の入退場履歴を受取り管理する入退場管理装置とを具備している。
【０００６】
また、本発明の入退場管理システムは、入退場者の施設への入退場を管理する入退場管理システムにおいて、施設の入退場部において、当該入退場部が撮影視野に入るように設置され、入退場者が前記撮影視野に入るとそれを検出して当該入退場者を追跡しながら当該入退場者の少なくとも顔画像を撮影する監視用の撮影手段と、施設の入退場部において、入退場者が所持している個人識別用媒体から個人識別情報を読取り、この読取った個人識別情報を用いて当該入退場者があらかじめ登録されている人物か否かを照合する照合手段と、前記撮影手段が入退場者を検出したのに基づき、そのとき前記撮影手段により撮影された当該入退場者の照合前の画像を画像記録手段に記録する第１の制御手段と、前記撮影手段が入退場者を検出したのに基づき前記照合手段を照合可能状態に制御する第２の制御手段と、この第２の制御手段により照合可能状態に制御された後、前記照合手段から得られる照合結果に応じて当該入退場者の施設への入退場を制御する第３の制御手段と、前記照合手段から照合結果が得られたのに基づき、前記画像記録手段に記録された当該入退場者の照合前の画像と、前記照合手段から得られる照合結果、および、前記第３の制御手段による入退場者の入退場制御状態等の入退場履歴を受取り管理する入退場管理装置とを具備している。
【０００７】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
なお、以下の説明では、生体情報として顔画像を用いて照合を行なう顔照合装置を用いた場合を例として説明するが、顔画像以外に、指紋画像、掌形画像、指画像、音声情報、虹彩情報などの他の生体情報を用いて照合を行なう生体照合装置（生体照合手段）であってもよい。
【０００８】
まず、第１の実施の形態について説明する。
図１は、本発明の第１の実施の形態に係る入退場管理システムの構成を概略的に示すものである。この入退場管理システムは、たとえば、重要施設（セキュリティ重視の部屋など）への入退場管理を行なうもので、施設の入退場部（出入り口）に監視カメラを備えており、入退場者（通行者あるいは不審者等）を検出すると、カメラの視野角度を変えて入退場者を追跡し、その人物の顔画像を撮影することが可能である。
【０００９】
すなわち、第１の実施の形態に係る入退場管理システムは、入退場者１００を検出すると、視野角度を変えて入退場者１００を追跡しながら、入退場者１００の顔画像を撮影する撮影手段としての監視カメラ１０１、入退場者１００の顔画像をカメラで撮影して、あらかじめ登録されている人物か否かを照合する生体照合装置（生体照合手段）としての顔照合装置１０２、監視カメラ１０１から入退場者１００を検出したことが通知されると顔照合装置１０２を照合可能状態に制御し、その照合結果に応じて扉制御や監視カメラ１０１からの画像を記録する制御手段としての制御装置１０３、入退場者１００の入退場履歴（顔照合結果、監視カメラ１０１からの画像やドア制御状態など）を管理する入退場管理装置としての入退場管理サーバ１０４から構成されている。
【００１０】
次に、各部について詳細に説明する。
監視カメラ１０１は、たとえば、施設の入退場部（出入り口）において、顔照合装置１０２の上方付近あるいは顔照合装置１０２および扉付近が撮影視野に入るように、壁あるいは天井に設置されており、入退場者１００が撮影視野に入ると、当該入退場者１００を検出して、入退場者１００の少なくとも顔画像を撮影することができるように、視野角度を自動的に変化させる（入退場者１００を追跡する）ことが可能である。すなわち、監視カメラ１０１は、入退場者１００を常に撮影視野の中心にして撮影することが可能なカメラである。また、監視カメラ１０１は、撮影視野内に入退場者１００を検出すると、その旨を制御装置１０３に通知することが可能である。
なお、視野角度を自動的に変化させることができない監視カメラ（視野角度が固定の監視カメラ）の場合でも、入退場者１００が撮影視野に入ると、当該入退場者１００を撮影することが可能であれば、その効果は何ら変わりない。
【００１１】
顔照合装置１０２は、たとえば、図２に示すように、入退場者１００の顔画像（少なくとも顔を含んでいる画像）を撮像して入力する画像入力手段としてのカメラ２０１、カメラ２０１の右上方あるいは左上方から入退場者１００の少なくとも顔に向けて一定の照度で光を照射する照明手段としての照明部２０２、入退場者１００の個人識別情報としてのＩＤ番号（暗証番号でもよい）を入力する個人識別情報入力手段としてのテンキー部２０３、および、カメラ２０１から入力された顔画像およびテンキー部２０３から入力されたＩＤ番号を処理して顔画像の認識処理などを行なう処理部２０４から構成されている。
なお、顔照合装置１０２と制御装置１０３との通信方法は、たとえば、ＲＳ−２３２ＣやＲＳ−４２２、ＲＳ−４８５などを用いることが可能である。
【００１２】
カメラ２０１は、入退場者１００の顔画像を撮像して入力するものであり、たとえば、ＣＣＤセンサなどの撮像素子を用いたテレビジョンカメラから構成されている。
【００１３】
照明部２０２は、カメラ２０１の右上方あるいは左上方から入退場者１００の少なくとも顔に向けて一定の照度で光を照射する蛍光灯などの照明器具である。図３（ａ）（ｂ）に示すように、照明部２０２の光軸とカメラ２０１の光軸とのなす角度が４５度で設置されているが、たとえば、３０度以上６０度以下のような条件で設置されていてもよい。
【００１４】
すなわち、入退場者１００の顔に向けて直接光を照射することで、図４に示すように、顔の部位（鼻や目など）による影を顔の片側半分（図中の斜線部分１００ａ）に作っている。また、直接光ではなく、拡散光や間接光であっても、顔の片側半分に影が作れていれば、その効果は何ら変わりない。
【００１５】
この照明部２０２によって、人間の顔画像の片側半分に影が作られることになるが、この影が顔の個人ごとの凹凸情報をよく表現しており、個人差が強調され、照合率が向上する。
【００１６】
また、認識時の人間の顔と登録時の人間の顔とが、カメラ２０１との距離の違いや左右方向のずれが発生しないように、人間の立ち位置を固定したり、登録時の顔画像の大きさを丸印などで表示させるガイダンス機能を採用する場合には、顔の影の作られ方が異ならないため、より照合率が向上する。
【００１７】
さらに、入退場者１００の顔に照射する照明部２０２の照度Ａルックス（ｌｘ）と、照明部２０２を用いないときの入退場者１００の顔に照射している外光などの照度をＢ（ｌｘ）とすると、
Ａ＞Ｂ （１）
の関係が成り立てば、たとえば、入退場者１００の後方上にある蛍光灯などの天井照明の影響を軽減できる。
【００１８】
また、照明部２０２の照度Ａ(ｌｘ)は、入力される顔画像が飽和状態にならないような範囲で規定される。
【００１９】
なお、本実施の形態では、照明部２０２は、常時点灯していることを想定しているが、認識対象となる入退場者１００が本装置に近づいてきたかどうかを感知し、近づいた場合のみ照明部２０２を点灯させてもよい。
この場合には、たとえば、赤外線センサなどの人間感知器を別途設けることにより実現可能であり、また、カメラ２０１からの入力画像を用いても実現可能である。さらに、監視カメラ１０１が入退場者１００を検出した場合に限り、照明部２０２を点灯させてもよい。
【００２０】
次に、処理部２０４について説明する。
処理部２０４は、たとえば、コンピュータによって実現可能であり、機能を動作させるために、ハードディスク、ＣＤ−ＲＯＭ、ＭＤ、または、ＦＤなどの記憶媒体に、この機能を実現するためのプログラムを記憶させておく。
【００２１】
なお、以下の説明では、画像入力データ、抽出した特徴量、部分空間、部分空間を構成するための固有ベクトル、相関行列、登録の時刻、日時、場所などの状況情報、暗証番号、ＩＤ番号などの個人情報の各情報が登場してくる。そして、認識データというときは、画像入力データ、抽出した特徴量、部分空間、部分空間を構成するための固有ベクトル、相関行列、状況情報、個人情報を含んでいる。したがって、認識データは登録情報に含まれる。
【００２２】
以下、処理部２０４の具体的な構成例について、図２を参照して詳細に説明する。処理部２０４は、画像入力手段としての画像入力部２０５、特徴量抽出手段としての特徴量抽出部２０６、認識手段としての認識部２０７、入退場者１００のＩＤ番号に対応させて基準の特徴量があらかじめ登録（記憶）されている特徴量登録手段としての登録情報保持部２０８、認識部２０７の認識率が所定値以下に低下したとき、そのとき入力された顔画像から得られた特徴量を新たな基準の特徴量として登録情報保持部２０８へ追加登録する特徴量追加手段としての登録情報追加部２０９、および、テンキー部２０３から入力されたＩＤ番号などを処理する番号入力処理部２１０から構成されている。
【００２３】
画像入力部２０５は、カメラ２０１から顔画像を入力し、Ａ／Ｄ変換してデジタル化した後、特徴量抽出部２０６に送る。
特徴量抽出部２０６は、画像入力部２０５から得られた入退場者１００の顔画像を用いて、濃淡情報あるいは部分空間情報などの特徴量を抽出するもので、たとえば、図５に示すように、顔領域検出部２０６Ａ、顔部品検出部２０６Ｂ、および、特徴量生成部２０６Ｃからなり、以下、詳細に説明する。
【００２４】
顔領域検出部２０６Ａは、カメラ２０１で入力された顔画像から顔の領域を検出する。顔領域検出部２０６Ａにおける顔領域の検出方法は、たとえば、あらかじめ用意されたテンプレートと画像中を移動させながら相関値を求めることにより、最も高い相関値をもった場所を顔領域とする。その他に、固有空間法や部分空間法を利用した顔領域抽出法などの顔領域検出手段でもよい。
【００２５】
顔部品検出部２０６Ｂは、検出された顔領域の部分の中から、目、鼻の位置を検出する。その検出方法は、たとえば、文献（福井和広、山口修：「形状抽出とパターン照合の組合せによる顔特徴点抽出」、電子情報通信学会論文誌（Ｄ），ｖｏｌ．Ｊ８０−Ｄ−II，Ｎｏ．８，ｐｐ２１７０−２１７７（１９９７））などの方法を用いてよい。
【００２６】
特徴量生成部２０６Ｃは、検出された顔部品の位置を基に、顔領域を一定の大きさ、形状に切り出し、その濃淡情報を特徴量として用いる。ここでは、たとえば、ｍピクセル×ｎピクセルの領域の濃淡値をそのまま情報として用い、ｍ×ｎ次元の情報を特徴ベクトルとして用いる。
【００２７】
また、認識部２０７で相互部分空間法を用いる場合には、下記に示す手順で特徴量を生成する。なお、相互部分空間法は、たとえば、文献（前田賢一、渡辺貞一：「局所的構造を導入したパターン・マッチング法」、電子情報通信学会論文誌（Ｄ），ｖｏｌ．Ｊ６８−Ｄ，Ｎｏ．３，ｐｐ３４５−３５２（１９８５））に記載されている公知の認識方法である。
【００２８】
認識方法として相互部分空間法を用いるときは、上記ｍ×ｎ次元の情報を特徴ベクトルとして算出した後、特徴ベクトルの相関行列（または、共分散行列）を求め、そのＫ−Ｌ展開による正規直交ベクトルを求めることにより、部分空間を計算する。部分空間は、固有値に対応する固有ベクトルを、固有値の大きな順にｋ個選び、その固有ベクトル集合を用いて表現する。
【００２９】
本実施の形態では、相関行列Ｃｄを特徴ベクトルから求め、相関行列
【数１】

と対角化して、固有ベクトルの行列Φを求める。たとえば、入力画像を特徴量抽出部２０６によって処理して得られた時系列的な顔画像データから特徴ベクトルの相関行列を求め、Ｋ−Ｌ展開による正規直交ベクトルを求めることにより、部分空間を計算する。この部分空間は、人物の同定を行なうための認識辞書として利用する。たとえば、あらかじめ登録しておいて、それを辞書として登録しておけばよい。
また、後で述べるように、部分空間自身を認識を行なうための入力データとしてもよい。したがって、部分空間を算出した結果は、認識部２０７および登録情報保持部２０８に送られる。
【００３０】
認識部２０７は、登録情報保持部２０８に蓄えられた認識データ（部分空間）と特徴量抽出部２０６で得られた特徴量（濃淡情報あるいは部分空間情報）とを照合（比較）することにより、カメラ２０１に写っている入退場者１００が誰であるかを認識、あるいは、該当人物であるかどうかを同定する。人物を認識するためには、どの人物のデータに最も類似しているかを求めればよく、最大類似度をとるデータに対応する人物を認識結果とすればよい。
【００３１】
また、カードや登録番号、暗証番号、鍵などを用いて、顔画像による認証を行なう場合には、それぞれの人物のカードや登録番号などの個人情報に対応する認識データとの類似度を計算し、設定した閾値と比較し、その閾値を越えた場合に、その人物と同定する。
【００３２】
これらカードや登録番号、暗証番号、鍵など入力する手段が必要であるが、たとえば、カードならＩＣカード、ＩＤカード、無線カードなどを用いることで実現できる。登録番号や暗証番号を用いる場合は、キー入力手段を設ければよい。ＩＤ番号や暗証番号を用いる場合は、後述するテンキー部２０３および番号入力処理部２１０などのキー入力手段を設ければよい。
【００３３】
認識の方法としては、特徴量抽出部２０６の情報を用いる場合は、部分空間法や複合類似度法などを用いる。
ここで、相互部分空間法について説明する。この方法では、あらかじめ蓄えられた登録情報の中の認識データも、入力されるデータも部分空間として表現され、２つの部分空間のなす「角度」を類似度として定義する。ここで入力される部分空間を入力部分空間という。
【００３４】
入力データ列に対して同様に相関行列Ｃｉｎを求め、
【数２】

と対角化し、固有ベクトルΦｉｎを求める。２つのΦｉｎ、Φｄで表わされる部分空間の部分空間類似度（０．０〜１．０）を求め、それを認識するための類似度とする。
【００３５】
認識部２０７は、図６に示すフローチャートのように動作する。まず、認識部２０７は、認識作業を行なうか、同定作業を行なうかによって動作が異なる（ステップＳＴ１）。同定動作を行なう場合は、まず対象とする入退場者のＩＤ番号を読込む（ステップＳＴ２）。次に、対象とするＩＤ番号に対応した登録情報（部分空間）を登録情報保持部２０８から読出す（ステップＳＴ３）。
【００３６】
次に、上述したように、部分空間法などにより認識を行なうため、各登録情報の部分空間と、入力ベクトル（特徴量抽出部２０６からの固有ベクトル）、または、入力部分空間との類似度を計算する（ステップＳＴ４）。次に、その類似度をあらかじめ設定されている閾値と比較し（ステップＳＴ５，ＳＴ６）、同定結果を出力する（ステップＳＴ７）。
【００３７】
認識作業を行なう場合、認識対象となる登録情報を全て登録情報保持部２０８から読出す（ステップＳＴ８）。そして、それぞれの登録情報との類似度を計算する（ステップＳＴ９）。次に、計算された類似度の中から最大のものを選択し（ステップＳＴ１０）、それを認識結果として出力する（ステップＳＴ１２）。
【００３８】
なお、図６の破線で囲んだステップＳＴ１１のように、最大類似度を閾値判定することによって、認識結果が正しいかどうかを検証することもできる（ステップＳＴ１３）。たとえば、類似度があまりに低い場合には、どの認識対象でもないと判断することもできる。
【００３９】
登録情報保持部２０８は、入退場者を同定するために利用する部分空間（または、相関行列など）や、登録の際の時刻、日時、場所などの状況情報などを蓄積できる。なお、画像入力データや抽出した特徴量などでもよい。
【００４０】
本実施の形態では、部分空間を保持するだけでなく、部分空間を計算するための前段階の相関行列も保持する形態での説明を行なう。
登録情報保持部２０８は、１人の人物、または、あるＩＤ番号に対応して、１つの認識データを保持する。部分空間は、その取得された時間などの付帯情報とともに記憶される。
【００４１】
次に、登録情報追加部２０９について説明する。登録情報追加部２０９は、認識部２０７における認識率が所定値以下に低下した場合、それを検出して、そのとき入力された顔画像から得られる認識データ（特徴量）を新たな認識データ（基準の特徴量）として登録情報保持部２０８に追加登録する処理を行なう。
【００４２】
すなわち、登録情報追加部２０９は、まず、認識部２０７における認識率が所定値以下に低下したか否か、すなわち、この例では、たとえば、認識部２０７において計算された類似度が判定用基準値よりも低下したことを検出する。次に、登録情報追加部２０９は、計算された類似度が判定用基準値よりも低下したことを検出すると、そのときの特徴量抽出部２０６により抽出された特徴量を新たな基準の特徴量として登録情報保持部２０８に追加登録するものである。
【００４３】
上記類似度低下の判定用基準値としては、あらかじめ認識データ追加判定用レベルを設定しておき、この認識データ追加判定用レベルと計算された類似度とを比較し、計算された類似度がこの認識データ追加判定用レベルよりも低下した場合に、認識データ（基準の特徴量）を追加する必要があると判定する。
【００４４】
また、上記認識データ追加判定用レベル（Ｌａｄｄ）と認識部２０７における認識用閾値（Ｌｒｅｃ）との関係は、下記式（４）を満たさなければならない。
Ｌａｄｄ≧Ｌｒｅｃ （４）
このように、基準の特徴量を複数保持する理由として、ある１人の人物に対応した複数の部分空間を同時に、認識部１０８に渡して認識を行なうことができ、立ち位置による顔画像の変動や顔自体の変動、たとえば、髪型、眼鏡の有無、髭、化粧度合いなどの変化による類似度の低下を軽減することができるためである。
【００４５】
次に、テンキー部２０３および番号入力処理部２１０について説明する。
テンキー部２０３は、ＩＤ番号（あるいは、暗証番号など）を用いて顔画像による認証を行なう場合に、それぞれの人物のＩＤ番号などを入力する手段であり、番号入力処理部２１０は、テンキー部２０３により入力されたＩＤ番号を処理する手段である。
【００４６】
テンキー部２０３は、たとえば、図７（ａ）に示すように、カメラ２０１の右下に配置されており、これにより、ＩＤ番号を入力する人間の手が顔画像の入力の妨げにならないという効果がある。
なお、テンキー部２０３の配設位置は、図７（ａ）に限らない。たとえば、図７（ｂ）に示すように、カメラ２０１の下側に配設されていても、あるいは、図７（ｃ）に示すように、カメラ２０１の下側に各キーが一列に配設されていても、その効果は何ら変わらない。
【００４７】
また、図８（ａ）〜（ｃ）は、図７（ａ）〜（ｃ）に対しモニタなどの表示部２１１を追加した場合の配設位置の関係を示している。図８に示すように、表示部２１１を配設することで、カメラ２０１にて撮影されている入退場者１００の顔画像を可視表示することが可能となり、さらに、認識していない時間は何らかの情報を表示することも可能である。
【００４８】
次に、入退場者１００のＩＤ番号を用いて顔画像による認証を行なう場合について、テンキー部２０３の入力方法および番号入力処理部２１０の処理方法と顔画像の認識方法との関係について詳細に説明する。
たとえば、人間の顔画像がない場合には、テンキー部２０３により入力されたＩＤ番号を、番号入力処理部２１０において無効とすることで、認識部２０７が動作しないようにしておく。これにより、いたずらや不審者を誤認識することなく、さらに抑制の効果も生じる。
【００４９】
以下、その場合の具体的な処理について、図９に示すフローチャートを参照して説明する。なお、図９のフローチャートは、主に認識部２０７の処理の流れを示している。
テンキー部２０３によりＩＤ番号が入力されると（ステップＳＴ２１）、カメラ２０１からの入力画像が存在するか否かを判定し（ステップＳＴ２２）、入力画像（顔画像）が存在しなければステップＳＴ２１に戻り、上記動作を繰り返す。すなわち、テンキー部２０３からＩＤ番号が入力されても、カメラ２０１からの入力画像が存在しない場合は、いたずらや誤動作などとみなして、入力されたＩＤ番号を無効とするものである。
【００５０】
さて、ステップＳＴ２２において、入力画像（顔画像）が存在すれば、テンキー部２０３からのＩＤ番号は有効とし、そのＩＤ番号に対応した登録情報（部分空間）を登録情報保持部２０８から読出す（ステップＳＴ２３）。次に、部分空間法などにより認識を行なうため、各登録情報の部分空間と、入力ベクトル（特徴量抽出部２０６からの固有ベクトル）、または、入力部分空間との類似度を計算する（ステップＳＴ２４）。
【００５１】
次に、ステップＳＴ２４で求めた類似度をあらかじめ設定されている閾値と比較し（ステップＳＴ２５，２６）、［類似度＞閾値］であれば、認識結果（照合成功）を出力し（ＳＴ２７）、［類似度＞閾値］でなければ、認識失敗（照合失敗）を出力する（ステップＳＴ２８）。
【００５２】
さらに、この場合、監視カメラ２０１からの画像を、制御装置１０３の記録部１１０が記録し、入退場管理サーバ１０４に送信することができるようにしておくことで、いたずらや不審者の履歴を保存することができ、視覚的に確認することが可能となる。
【００５３】
また、テンキー部２０３には、図１０に示すように、呼出しボタン２０３ａが設けられている。呼出しボタン２０３ａは、認識部２０７の認識結果が、たとえば、図６のステップＳＴ６において、求めた類似度が閾値よりも小さかった場合に、施設内の人物を呼出す場合に使用するものである。
ここに、図１０（ａ）は、各キーが矩形状に配設されたテンキー部２０３の場合を示し、図１０（ｂ）は、各キーが列状（一列）に配設されたテンキー部２０３の場合を示している。
【００５４】
なお、本実施の形態では、入退場者１００の個人識別情報としてのＩＤ番号を入力する個人識別情報入力手段としてテンキー部２０３を用いたが、たとえば、入退場者１００が提示するＩＤカード（無線カードなど）からＩＤ番号などを読取るカードリーダを用いても、その効果は何ら変わらない。
【００５５】
次に、制御装置１０３について図１を用いて詳細に説明する。
制御装置１０３は、監視カメラ１０１から入退場者１００を検出したことが通知されると、顔照合装置１０２を照合可能状態に制御し、その照合結果に応じて、重要施設（セキュリティ重視の部屋など）やマンションのエントランスの入退場用ドア１０５の開閉制御を行なうとともに、監視カメラ１０１からの画像を記録するものであり、カメラ制御部１０６、照合装置制御部１０７、ドア制御部１０８、送信部１０９、および、画像記録手段としての記録部１１０によって構成されている。
【００５６】
制御装置１０３は、図１１に示すフローチャートように動作する。まず、カメラ制御部１０６は、監視カメラ１０１から入退場者１００を検出したことが通知されると（ステップＳＴ３１）、そのときの撮影画像を記録部１１０に記録する（ステップＳＴ３２）。この場合の撮影画像は、１枚の静止画像でも、複数枚の連続静止画像（動画像）であってもよい。
【００５７】
次に、照合装置制御部１０７は、顔照合装置１０２を照合可能状態に制御し（ステップＳＴ３３）、入退場者１００が顔照合装置１０２にて照合操作を実施し、前述したような照合判定を行なう（ステップＳＴ３４）。
ドア制御部１０８は、照合装置制御部１０７から顔照合が成功したと通知されれば、入退場用ドア１０５を開状態に制御して、入退場者１００の入場を許可する（ステップＳＴ３５）。顔照合が失敗したと通知されれば、入退場用ドア１０５を閉状態に保持して、入退場者１００の入場を拒否する（ステップＳＴ３６）。
【００５８】
また、このとき、照合装置制御部１０７は、送信部１０９を介して、記録部１１０に記録されている監視カメラ１０１の映像、すなわち、照合操作前の監視カメラ１０１の映像（静止画像あるいは動画像）を、顔照合装置１０２の操作履歴、すなわち、入退場履歴とともに入退場管理サーバ１０４に送信する（ステップＳＴ３７）。なお、上記入退場履歴には、顔照合装置１０２の照合結果（照合成功か失敗か）、入退場用ドア１０５の制御状態、日付、時刻、履歴画像などが含まれているものとする。
【００５９】
次に、入退場管理サーバ１０４について説明する。
入退場管理サーバ１０４は、入退場者１００を検出したときの監視カメラ１０１の画像と、その入退場者１００の顔照合装置１０２での照合結果（照合成功か失敗か）、入退場用ドア１０５の制御状態、日付、時刻、履歴画像などを制御装置１０３から受取り、保存しておくことにより、管理することができる。すなわち、履歴画像と監視カメラ１０１の画像を視覚的に確認することが可能となる。
さらに、人物の顔写真を、入退場管理サーバ１０４に登録されている人物データベースに保存しておくことで、履歴画像と監視カメラ１０１の画像および顔写真を視覚的に確認することが可能となり、入退場履歴の確認や、不審者やいたずらの確認が容易となる。
【００６０】
次に、第２の実施の形態について説明する。
図１２は、第２の実施の形態に係る入退場管理システムの構成を概略的に示すものである。第２の実施の形態は、第１の実施の形態では顔照合装置（生体照合装置）を用いたが、被照合者が所持しているＩＤカード（個人識別用媒体）を用いる入退場管理システムである。
【００６１】
第２の実施の形態に係る入退場管理システムは、第１の実施の形態と同様に、重要施設（セキュリティ重視の部屋など）への入退場管理を行なうもので、施設の入退場部（出入り口）に監視カメラを備えており、入退場者（通行者あるいは不審者等）を検出すると、カメラの視野角度を変えて入退場者を追跡し、その人物の顔画像を撮影することが可能である。
【００６２】
すなわち、第２の実施の形態に係る入退場管理システムは、入退場者１００を検出すると、視野角度を変えて入退場者１００を追跡しながら、入退場者１００の顔画像を撮影する撮影手段としての監視カメラ３０１、入退場者１００が所有している非接触式のＩＤカード（たとえば、無線カード）３１１のデータ（個人識別情報など）を読取る読取手段としての非接触式のＩＤカードリーダ３０２、監視カメラ１０１から入退場者１００を検出したことが通知されるとＩＤカードリーダ３０２を通信可能状態に制御し、ＩＤカード３１１に記録されているカードデータを読取って照合するとともに、その照合結果に応じてドア制御や監視カメラ１０１からの画像を記録する制御手段としての制御装置３０３、入退場者１００の入退場履歴（照合結果、監視カメラ１０１からの画像やドア制御状態など）を管理する入退場管理装置としての入退場管理サーバ３０４から構成されている。
【００６３】
制御装置３０３は、監視カメラ３０１から入退場者１００を検出したことが通知されると、ＩＤカードリーダ３０２を通信可能状態に制御して、ＩＤカード３１１に記録されているカードデータを読取って照合し、その照合結果に応じて、重要施設（セキュリティ重視の部屋など）やマンションのエントランスの入退場用ドア３０５の開閉制御を行なうとともに、監視カメラ３０１からの画像を記録するものであり、カメラ制御部３０６、リーダ制御・判別部３０７、ドア制御部３０８、送信部３０９、および、画像記録手段としての記録部３１０によって構成されている。
【００６４】
なお、ＩＤカードリーダ３０２およびリーダ制御・判別部３０７以外は、前述した第１の実施の形態のそれと同じであるので、ここでは説明を省略し、異なる部分についてだけ詳細に説明する。
リーダ制御・判別部３０７は以下のように動作する。まず、監視カメラ３０１が入退場者１００を検出すると、ＩＤカードリーダ３０２を通信可能状態に制御する。次に、入退場者１００がＩＤカードリーダ３０２に近づき、ＩＤカードリーダ３０２に対し、入退場者１００が所有しているＩＤカード（無線カード）３１１をかざすと、ＩＤカードリーダ３０２はＩＤカード３１１に記録されている個人識別情報などを読取る。
【００６５】
次に、ＩＤカード３１１から読取った個人識別情報と、あらかじめ登録されている個人識別情報とを照合し、両識別情報が一致すれば照合成功をドア制御部３０８に通知し、両識別情報が不一致であれば照合失敗をドア制御部３０８に通知する。
【００６６】
ドア制御部３０８は、リーダ制御・判別部３０７から照合成功と通知されれば、入退場用ドア３０５を開状態に制御して、入退場者１００の入場を許可する。照合失敗と通知されれば、入退場用ドア３０５を閉状態に保持して、入退場者１００の入場を拒否する。
【００６７】
また、このとき、リーダ制御・判別部３０７は、送信部３０９を介して、記録部３１０に記録されている監視カメラ３０１の映像、すなわち、照合操作前の監視カメラ３０１の映像（静止画像あるいは動画像）を、ＩＤカードリーダ３０２の操作履歴、すなわち、入退場履歴とともに入退場管理サーバ３０４に送信する。なお、上記入退場履歴には、リーダ制御・判別部３０７の照合結果（照合成功か失敗か）、入退場用ドア３０５の制御状態、日付、時刻、履歴画像などが含まれているものとする。
【００６８】
次に、ＩＤカード３１１およびＩＤカードリーダ３０２について説明する。 ＩＤカード３１１は、たとえば、本体表面に所有者に関する個人情報が印刷されたり、所持者の顔画像が印刷されている。このようなＩＤカード３１１は、表面の情報を目視してＩＤカード３１１の所有者と見比べることにより、ＩＤカード３１１の所持者の正当性を確認できるようになっている。
また、ＩＤカード３１１には、本体表面に磁気ストライプが設けられ、本体内部に送受信アンテナ、ＩＣチップ、および、バックアップ用電池などが埋設されている。
【００６９】
なお、ＩＤカード３１１は、本実施の形態では無線カードと称される非接触式ＩＣカードを用いているが、接触式ＩＣカードであってもその効果は何ら変わりない。
また、ＩＤカードリーダ３０２は、ＩＤカード３１１に記録されている所有者に関する情報（所有者固有のカード番号、生年月日、通行区域などの個人識別情報）を非接触で読取ることが可能な無線カードリーダである。
【００７０】
ここに、ＩＤカードリーダ３０２およびリーダ制御・判別部３０７は、入退場者が所持しているＩＤカード３１１から個人識別情報を読取り、この読取った個人識別情報を用いて当該入退場者があらかじめ登録されている人物か否かを照合する照合手段を構成している。
【００７１】
なお、ＩＤカード３１１内のＩＣチップに当該カード所持者の顔画像をも格納しておき、ＩＤカード３１１から個人識別情報を読取る際に当該顔画像を同時に読取り、入退場履歴情報とともに入退場管理サーバ３０４に送信して、人物データベースに保存しておくことで、履歴画像と監視カメラ１０１の画像および顔画像を視覚的に確認することが可能となる。
【００７２】
このように、上記実施の形態によれば、生体照合装置やＩＤカードを用いた入退場管理システムにおいて、監視カメラを備えることで、生体照合装置を制御したり、ＩＤカードリーダを制御したりし、さらに、ＩＤカードリーダで読取られたＩＤカードに記録された情報を照合することが可能であり、生体照合装置における照合前の監視カメラの画像やＩＤカードリーダによるカードデータ照合前の監視カメラの画像を記録し、かつ、照合結果などの入退場履歴とともに入退場管理サーバへ送信することで、入退場履歴情報を視覚的に確認することが可能である。
【００７３】
【発明の効果】
以上詳述したように本発明によれば、入退場履歴情報を視覚的に確認することが可能となる入退場管理システムを提供できる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態に係る入退場管理システムの構成を概略的に示す構成図。
【図２】顔照合装置の構成を概略的に示す構成図。
【図３】照明部とカメラとの関係を示すもので、（ａ）図は横から見た側面図、（ｂ）は上から見た上面図。
【図４】照明部による顔画像の例を示す図。
【図５】特徴量抽出部の構成を概略的に示すブロック図。
【図６】認識部の認識処理を説明するためのフローチャート。
【図７】テンキー部の設置例を示す正面図。
【図８】図７に対し表示部を追加した場合の配設位置の関係を示す正面図。
【図９】認識部の認識処理を説明するためのフローチャート。
【図１０】テンキー部の構成を説明する平面図。
【図１１】制御装置の動作を説明するためのフローチャート。
【図１２】本発明の第２の実施の形態に係る入退場管理システムの構成を概略的に示す構成図。
【符号の説明】
１００…入退場者、１０１，３０１…監視カメラ（撮像手段）、１０２…顔照合装置（生体照合装置、生体照合手段）、１０３，３０３…制御装置（制御手段）、１０４，３０４…入退場管理サーバ（入退場管理装置）、１０５，３０５…入退場用ドア、１０６，３０６…カメラ制御部、１０７…照合装置制御部、１０８，３０８…ドア制御部、１０９，３０９…送信部、１１０，３１０…記録部（画像記録手段）、２０１…カメラ（画像入力手段）、２０２…照明部（照明手段）、２０３…テンキー部（個人識別情報入力手段）、２０４…処理部、２０５…画像入力部（画像入力手段）、２０６…特徴量抽出部（特徴量抽出手段）、２０７…認識部（認識手段）、２０８…登録情報保持部（特徴量登録手段）、２０９…登録情報追加部（特徴量追加手段）、２１０…番号入力処理部、３０２…ＩＤカードリーダ（照合手段）、３０７…リーダ制御・判別部（照合手段）、３１１…ＩＤカード（個人識別媒体）。

Claims (2)

1. 入退場者の施設への入退場を管理する入退場管理システムにおいて、
   施設の入退場部において、当該入退場部が撮影視野に入るように設置され、入退場者が前記撮影視野に入るとそれを検出して当該入退場者を追跡しながら当該入退場者の少なくとも顔画像を撮影する監視用の撮影手段（１０１）と、
   施設の入退場部において、入退場者の顔画像を用いて当該入退場者があらかじめ登録されている人物か否かを照合する顔照合手段（１０２）と、
   前記撮影手段が入退場者を検出したのに基づき、そのとき前記撮影手段により撮影された当該入退場者の顔照合前の画像を画像記録手段（１１０）に記録する第１の制御手段（１０６）と、
   前記撮影手段が入退場者を検出したのに基づき前記顔照合手段を照合可能状態に制御する第２の制御手段（１０７）と、
   この第２の制御手段により照合可能状態に制御された後、前記顔照合手段から得られる照合結果に応じて当該入退場者の施設への入退場を制御する第３の制御手段（１０５，１０８）と、
   前記顔照合手段から照合結果が得られたのに基づき、前記画像記録手段に記録された当該入退場者の顔照合前の画像と、前記顔照合手段から得られる照合結果、および、前記第３の制御手段による入退場者の入退場制御状態等の入退場履歴を受取り管理する入退場管理装置（１０４）と、
   を具備したことを特徴とする入退場管理システム。
2. 入退場者の施設への入退場を管理する入退場管理システムにおいて、
   施設の入退場部において、当該入退場部が撮影視野に入るように設置され、入退場者が前記撮影視野に入るとそれを検出して当該入退場者を追跡しながら当該入退場者の少なくとも顔画像を撮影する監視用の撮影手段（３０１）と、
   施設の入退場部において、入退場者が所持している個人識別用媒体から個人識別情報を読取り、この読取った個人識別情報を用いて当該入退場者があらかじめ登録されている人物か否かを照合する照合手段（３０２，３０７）と、
   前記撮影手段が入退場者を検出したのに基づき、そのとき前記撮影手段により撮影された当該入退場者の照合前の画像を画像記録手段（３１０）に記録する第１の制御手段（３０６）と、
   前記撮影手段が入退場者を検出したのに基づき前記照合手段を照合可能状態に制御する第２の制御手段（３０７）と、
   この第２の制御手段により照合可能状態に制御された後、前記照合手段から得られる照合結果に応じて当該入退場者の施設への入退場を制御する第３の制御手段（３０５，３０８）と、
   前記照合手段から照合結果が得られたのに基づき、前記画像記録手段に記録された当該入退場者の照合前の画像と、前記照合手段から得られる照合結果、および、前記第３の制御手段による入退場者の入退場制御状態等の入退場履歴を受取り管理する入退場管理装置（３０４）と、
   を具備したことを特徴とする入退場管理システム。

Images