JP2002304651A - 入退室管理装置とその方法、およびこの方法の実行プログラムとこの実行プログラムを記録した記録媒体 - Google Patents
入退室管理装置とその方法、およびこの方法の実行プログラムとこの実行プログラムを記録した記録媒体Info
- Publication number
- JP2002304651A JP2002304651A JP2001107897A JP2001107897A JP2002304651A JP 2002304651 A JP2002304651 A JP 2002304651A JP 2001107897 A JP2001107897 A JP 2001107897A JP 2001107897 A JP2001107897 A JP 2001107897A JP 2002304651 A JP2002304651 A JP 2002304651A
- Authority
- JP
- Japan
- Prior art keywords
- entry
- image
- face
- exit management
- memory
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/70—Multimodal biometrics, e.g. combining information from different biometric modalities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Lock And Its Accessories (AREA)
- Human Computer Interaction (AREA)
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Television Signal Processing For Recording (AREA)
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
- Alarm Systems (AREA)
- Image Analysis (AREA)
Abstract
(57)【要約】
【課題】 ＩＤカード等による入退室管理の防犯機能を
高め、侵入者等を含む入退室者全員の映像を記録し、後
で侵入者等を確実に効率的に特定可能とする。 【解決手段】 センサ１１２が感知エリア内の人物をと
らえた場合、又はマイクロフォン１１６が異常音１１５
を検出した場合、ＣＣＤカメラ１１３で所定の時間録画
し映像をメモリ１２４に記憶する。正面顔検出処理部１
１８は、メモリ１２４の映像の観測画像ファイル列と、
予め作成した規準平均顔テンプレートとからパラメトリ
ックテンプレート法等によって正面顔候補列を得、正面
顔候補列の中からどの顔画像が最も正面を向いている画
像かを照合判定して、これを正面顔画像として内部の画
像メモリ又はメモリ１２４に記憶する。これらのＣＣＤ
カメラ１１３で所定の時間録画した映像の記録や正面顔
画像の記録によって、後で侵入者等を確実にかつ効率的
に特定可能とする。
高め、侵入者等を含む入退室者全員の映像を記録し、後
で侵入者等を確実に効率的に特定可能とする。 【解決手段】 センサ１１２が感知エリア内の人物をと
らえた場合、又はマイクロフォン１１６が異常音１１５
を検出した場合、ＣＣＤカメラ１１３で所定の時間録画
し映像をメモリ１２４に記憶する。正面顔検出処理部１
１８は、メモリ１２４の映像の観測画像ファイル列と、
予め作成した規準平均顔テンプレートとからパラメトリ
ックテンプレート法等によって正面顔候補列を得、正面
顔候補列の中からどの顔画像が最も正面を向いている画
像かを照合判定して、これを正面顔画像として内部の画
像メモリ又はメモリ１２４に記憶する。これらのＣＣＤ
カメラ１１３で所定の時間録画した映像の記録や正面顔
画像の記録によって、後で侵入者等を確実にかつ効率的
に特定可能とする。
Description
【０００１】
【発明の属する技術分野】本発明は、ビルや建物への入
館および退館、あるいは建物内の仕切られたエリア（部
屋、フロア、機械室等）への入室および退室を管理する
入退室管理装置（端末）および入退室管理方法に関する
ものである。
館および退館、あるいは建物内の仕切られたエリア（部
屋、フロア、機械室等）への入室および退室を管理する
入退室管理装置（端末）および入退室管理方法に関する
ものである。
【０００２】
【従来の技術】図７は従来の入退室管理装置の構成を示
すブロック図である。図７において、７０１はＩＤカー
ドのカードリーダ部、７０２は暗証番号入力用のテンキ
ー、７０３はカードリーダ部７０１で読み取ったＩＤカ
ード情報の入力回路、７０４はテンキー７０２やランプ
の入出力回路、７０５はＩＤカード情報と暗証番号の照
合処理を行うＣＰＵ、７０６はメモリ、７０７は伝送回
路、７０８はドアの電気錠の開閉制御を実行する制御回
路である。
すブロック図である。図７において、７０１はＩＤカー
ドのカードリーダ部、７０２は暗証番号入力用のテンキ
ー、７０３はカードリーダ部７０１で読み取ったＩＤカ
ード情報の入力回路、７０４はテンキー７０２やランプ
の入出力回路、７０５はＩＤカード情報と暗証番号の照
合処理を行うＣＰＵ、７０６はメモリ、７０７は伝送回
路、７０８はドアの電気錠の開閉制御を実行する制御回
路である。
【０００３】また、図８は図７の入退室管理装置の外観
を示す正面図である。７０１はカードリーダ部、７０２
は暗証番号入力用のテンキー、７０９は当該装置の作動
状態を示す電源ランプ、ＩＤカード読取確認（ＯＫ／Ｎ
Ｇ等）ランプ、および電気錠の開閉表示用ランプ等であ
る。
を示す正面図である。７０１はカードリーダ部、７０２
は暗証番号入力用のテンキー、７０９は当該装置の作動
状態を示す電源ランプ、ＩＤカード読取確認（ＯＫ／Ｎ
Ｇ等）ランプ、および電気錠の開閉表示用ランプ等であ
る。
【０００４】この入退室管理装置の構成は、カードリー
ダ部７０１から入力され読み取られたＩＤカードの情報
と、テンキー７０２から入力された暗証番号との照合に
より電気錠が解錠され、ＩＤカードの情報が入室記録と
してメモリ７０６に残る仕組みである。
ダ部７０１から入力され読み取られたＩＤカードの情報
と、テンキー７０２から入力された暗証番号との照合に
より電気錠が解錠され、ＩＤカードの情報が入室記録と
してメモリ７０６に残る仕組みである。
【０００５】
【発明が解決しようとする課題】しかしながら、上記従
来の入退室管理装置の構成では、ＩＤカードの情報と暗
証番号との照合により電気錠が解錠され、ＩＤカードの
情報が入室記録として残る仕組みであるために、例え
ば、暗証番号さえ盗んでしまえば他人のＩＤカードを不
正使用しても、その入室者を特定するための記録は残ら
ないという問題がある。また、この不正な入室者または
正規の入室者に続いて電気錠が解錠されている間に不正
に入室する場合には、ＩＤカードが不要であり、しかも
その入室者の記録も残されないことになってしまうとい
う問題がある。
来の入退室管理装置の構成では、ＩＤカードの情報と暗
証番号との照合により電気錠が解錠され、ＩＤカードの
情報が入室記録として残る仕組みであるために、例え
ば、暗証番号さえ盗んでしまえば他人のＩＤカードを不
正使用しても、その入室者を特定するための記録は残ら
ないという問題がある。また、この不正な入室者または
正規の入室者に続いて電気錠が解錠されている間に不正
に入室する場合には、ＩＤカードが不要であり、しかも
その入室者の記録も残されないことになってしまうとい
う問題がある。
【０００６】そこで、全入（退）室者の記録を残しかつ
不正侵入を防止するために、ネットワークカメラ等の画
像監視装置を導入する方法がある。ところが、多数の監
視カメラによる一般的な監視システムは、通常、一定時
間間隔でスキップ監視するために、侵入者が画像として
記録されないこともある。さらに、多くのモニタ映像を
（異常がないか）常時監視し続ける作業は警備員にとっ
て大きな負担であり、現実的ではない。
不正侵入を防止するために、ネットワークカメラ等の画
像監視装置を導入する方法がある。ところが、多数の監
視カメラによる一般的な監視システムは、通常、一定時
間間隔でスキップ監視するために、侵入者が画像として
記録されないこともある。さらに、多くのモニタ映像を
（異常がないか）常時監視し続ける作業は警備員にとっ
て大きな負担であり、現実的ではない。
【０００７】したがって、本発明は上記問題点を鑑み、
ＩＤカード（または非接触ＩＣカード）による入退室管
理のセキュリティレベルを向上させるとともに、侵入者
等を含む入（退）室者全員の映像記録を残し、侵入者を
確実に特定できる入退室管理装置あるいは方法を提供す
ることを課題としている。
ＩＤカード（または非接触ＩＣカード）による入退室管
理のセキュリティレベルを向上させるとともに、侵入者
等を含む入（退）室者全員の映像記録を残し、侵入者を
確実に特定できる入退室管理装置あるいは方法を提供す
ることを課題としている。
【０００８】
【課題を解決するための手段】上記の課題を解決するた
めに、本発明による入退室管理装置は、電気錠を開錠す
るために少なくともカードリーダ部を備えた入退室管理
装置であって、所定エリア内の入退室を感知するセンサ
からの信号をトリガとして、監視カメラによって取得さ
れた入力画像列を逐次メモリまたはディスクに記憶する
第１の手段と、前記入力画像列からテンプレートマッチ
ングにより人間の顔部領域候補を抽出する第２の手段
と、前記顔部領域候補の画像群から前記監視カメラに対
して最も正面を向いている顔部領域画像を自動判定し正
面顔画像としてメモリまたはディスクに記憶する第３の
手段とを有することを特徴とする。
めに、本発明による入退室管理装置は、電気錠を開錠す
るために少なくともカードリーダ部を備えた入退室管理
装置であって、所定エリア内の入退室を感知するセンサ
からの信号をトリガとして、監視カメラによって取得さ
れた入力画像列を逐次メモリまたはディスクに記憶する
第１の手段と、前記入力画像列からテンプレートマッチ
ングにより人間の顔部領域候補を抽出する第２の手段
と、前記顔部領域候補の画像群から前記監視カメラに対
して最も正面を向いている顔部領域画像を自動判定し正
面顔画像としてメモリまたはディスクに記憶する第３の
手段とを有することを特徴とする。
【０００９】あるいは、上記の入退室管理装置におい
て、前記センサは、前記所定エリア内に人物が入ったこ
とを感知する赤外線センサまたは重量センサまたは温度
センサまたは静電センサであることを特徴とする。
て、前記センサは、前記所定エリア内に人物が入ったこ
とを感知する赤外線センサまたは重量センサまたは温度
センサまたは静電センサであることを特徴とする。
【００１０】あるいは、電気錠を開錠するために少なく
ともカードリーダ部を備えた入退室管理装置であって、
マイクロフォンから入力された音声情報が所定のレベル
を超えたときの信号をトリガとして、監視カメラで取得
された入力画像列を逐次メモリまたはディスクに記憶す
る第１の手段と、前記入力画像列からテンプレートマッ
チングにより人間の顔部領域候補を抽出する第２の手段
と、前記顔部領域候補の画像群から前記監視カメラに対
して最も正面を向いている顔部領域画像を自動判定し正
面顔画像としてメモリまたはディスクに記憶する第３の
手段とを有することを特徴とする。
ともカードリーダ部を備えた入退室管理装置であって、
マイクロフォンから入力された音声情報が所定のレベル
を超えたときの信号をトリガとして、監視カメラで取得
された入力画像列を逐次メモリまたはディスクに記憶す
る第１の手段と、前記入力画像列からテンプレートマッ
チングにより人間の顔部領域候補を抽出する第２の手段
と、前記顔部領域候補の画像群から前記監視カメラに対
して最も正面を向いている顔部領域画像を自動判定し正
面顔画像としてメモリまたはディスクに記憶する第３の
手段とを有することを特徴とする。
【００１１】あるいは、上記の入退室管理装置におい
て、ネットワーク接続されたクライアント端末からのリ
クエストに対して監視場所、入退室時刻リスト、および
正面顔画像リストの１以上を出力するサーバ部を有する
ことを特徴とする。
て、ネットワーク接続されたクライアント端末からのリ
クエストに対して監視場所、入退室時刻リスト、および
正面顔画像リストの１以上を出力するサーバ部を有する
ことを特徴とする。
【００１２】あるいは、上記の入退室管理装置におい
て、前記第２の手段は、ＹＩＱ色空間のＩ値変換を施し
た入力画像列ならびに規準テンプレートに対して正規化
相関マッチングまたはパラメトリックテンプレート法を
適用して人間の顔部領域候補を抽出するものであること
を特徴とする。
て、前記第２の手段は、ＹＩＱ色空間のＩ値変換を施し
た入力画像列ならびに規準テンプレートに対して正規化
相関マッチングまたはパラメトリックテンプレート法を
適用して人間の顔部領域候補を抽出するものであること
を特徴とする。
【００１３】あるいは、上記の入退室管理装置におい
て、前記第３の手段は、顔部領域候補画像にガウシアン
・ハイパスフィルタ処理を施し２５６階調グレースケー
ルに変換した画像の輝度ヒストグラムに基づき、顔部品
の形状情報を保存しつつ２値化処理後、顔の対称性に着
目して水平方向への黒画素の射影ヒストグラムまたはそ
の重心位置を計算し、顔部領域が正面を向いているか否
かを判定する手段を有することを特徴とする。
て、前記第３の手段は、顔部領域候補画像にガウシアン
・ハイパスフィルタ処理を施し２５６階調グレースケー
ルに変換した画像の輝度ヒストグラムに基づき、顔部品
の形状情報を保存しつつ２値化処理後、顔の対称性に着
目して水平方向への黒画素の射影ヒストグラムまたはそ
の重心位置を計算し、顔部領域が正面を向いているか否
かを判定する手段を有することを特徴とする。
【００１４】あるいは、上記の入退室管理装置におい
て、前記第３の手段は、顔部領域候補の画像群からテン
プレートマッチングにより画像上における両目と口の位
置を複数推定し、両目と口とで構成される三角形に着目
して、顔領域内部に存在しかつ正面を向いた顔の場合に
形成される三角形に最も近いものを正面を向いている顔
部領域画像と判定する手段を有することを特徴とする。
て、前記第３の手段は、顔部領域候補の画像群からテン
プレートマッチングにより画像上における両目と口の位
置を複数推定し、両目と口とで構成される三角形に着目
して、顔領域内部に存在しかつ正面を向いた顔の場合に
形成される三角形に最も近いものを正面を向いている顔
部領域画像と判定する手段を有することを特徴とする。
【００１５】また、本発明による入退室管理装置方法
は、電気錠を開錠するために少なくともカードリーダ部
を備えた入退室管理方法であって、所定エリア内の入退
室を感知するセンサからの信号をトリガとして、監視カ
メラによって取得された入力画像列を逐次メモリまたは
ディスクに記憶する第１のステップと、前記入力画像列
からテンプレートマッチングにより人間の顔部領域候補
を抽出する第２のステップと、前記顔部領域候補の画像
群から前記監視カメラに対して最も正面を向いている顔
部領域画像を自動判定し正面顔画像としてメモリまたは
ディスクに記憶する第３のステップとを有することを特
徴とする。
は、電気錠を開錠するために少なくともカードリーダ部
を備えた入退室管理方法であって、所定エリア内の入退
室を感知するセンサからの信号をトリガとして、監視カ
メラによって取得された入力画像列を逐次メモリまたは
ディスクに記憶する第１のステップと、前記入力画像列
からテンプレートマッチングにより人間の顔部領域候補
を抽出する第２のステップと、前記顔部領域候補の画像
群から前記監視カメラに対して最も正面を向いている顔
部領域画像を自動判定し正面顔画像としてメモリまたは
ディスクに記憶する第３のステップとを有することを特
徴とする。
【００１６】あるいは、電気錠を開錠するために少なく
ともカードリーダ部を備えた入退室管理方法であって、
マイクロフォンから入力された音声情報が所定のレベル
を超えたときの信号をトリガとして、監視カメラで取得
された入力画像列を逐次メモリまたはディスクに記憶す
る第１のステップと、前記入力画像列からテンプレート
マッチングにより人間の顔部領域候補を抽出する第２の
ステップと、前記顔部領域候補の画像群から前記監視カ
メラに対して最も正面を向いている顔部領域画像を自動
判定し正面顔画像としてメモリまたはディスクに記憶す
る第３のステップとを有することを特徴とする。
ともカードリーダ部を備えた入退室管理方法であって、
マイクロフォンから入力された音声情報が所定のレベル
を超えたときの信号をトリガとして、監視カメラで取得
された入力画像列を逐次メモリまたはディスクに記憶す
る第１のステップと、前記入力画像列からテンプレート
マッチングにより人間の顔部領域候補を抽出する第２の
ステップと、前記顔部領域候補の画像群から前記監視カ
メラに対して最も正面を向いている顔部領域画像を自動
判定し正面顔画像としてメモリまたはディスクに記憶す
る第３のステップとを有することを特徴とする。
【００１７】あるいは、上記の入退室管理方法におい
て、前記第２のステップでは、ＹＩＱ色空間のＩ値変換
を施した入力画像列ならびに規準テンプレートに対して
正規化相関マッチングまたはパラメトリックテンプレー
ト法を適用して人間の顔部領域候補を抽出することを特
徴とする。
て、前記第２のステップでは、ＹＩＱ色空間のＩ値変換
を施した入力画像列ならびに規準テンプレートに対して
正規化相関マッチングまたはパラメトリックテンプレー
ト法を適用して人間の顔部領域候補を抽出することを特
徴とする。
【００１８】あるいは、上記の入退室管理方法におい
て、前記第３のステップでは、顔部領域候補画像にガウ
シアン・ハイパスフィルタ処理を施し２５６階調グレー
スケールに変換した画像の輝度ヒストグラムに基づき、
顔部品の形状情報を保存しつつ２値化処理後、顔の対称
性に着目して水平方向への黒画素の射影ヒストグラムま
たはその重心位置を計算し、顔部領域が正面を向いてい
るか否かを判定する過程を有することを特徴とする。
て、前記第３のステップでは、顔部領域候補画像にガウ
シアン・ハイパスフィルタ処理を施し２５６階調グレー
スケールに変換した画像の輝度ヒストグラムに基づき、
顔部品の形状情報を保存しつつ２値化処理後、顔の対称
性に着目して水平方向への黒画素の射影ヒストグラムま
たはその重心位置を計算し、顔部領域が正面を向いてい
るか否かを判定する過程を有することを特徴とする。
【００１９】あるいは、上記の入退室管理方法におい
て、前記第３のステップでは、顔部領域候補の画像群か
らテンプレートマッチングにより画像上における両目と
口の位置を複数推定し、両目と口とで構成される三角形
に着目して、顔領域内部に存在しかつ正面を向いた顔の
場合に形成される三角形に最も近いものを正面を向いて
いる顔部領域画像と判定する過程を有することを特徴と
する。
て、前記第３のステップでは、顔部領域候補の画像群か
らテンプレートマッチングにより画像上における両目と
口の位置を複数推定し、両目と口とで構成される三角形
に着目して、顔領域内部に存在しかつ正面を向いた顔の
場合に形成される三角形に最も近いものを正面を向いて
いる顔部領域画像と判定する過程を有することを特徴と
する。
【００２０】また、本発明による入退室管理方法の実行
プログラムは、上記の入退室管理方法におけるステップ
を、コンピュータに実行させるプログラムとしたことを
特徴とする。
プログラムは、上記の入退室管理方法におけるステップ
を、コンピュータに実行させるプログラムとしたことを
特徴とする。
【００２１】あるいは、上記の入退室管理方法の実行プ
ログラムを、前記コンピュータが読み取り可能な記録媒
体に記録したことを特徴とする。
ログラムを、前記コンピュータが読み取り可能な記録媒
体に記録したことを特徴とする。
【００２２】本発明は、従来のＩＤカード（または非接
触ＩＣカード）による入退室管理装置等に、所定エリア
での人物の入退室を感知するセンサと、その入退室前後
のシーンを撮影するＣＣＤカメラと、撮影された映像か
ら人物の最も正面らしい顔領域の画像を自動抽出する画
像処理部を設けたものである。本発明のポイントは新規
に発明した下記の２つのキーアイデアにあり、本発明の
新規性および進歩性はこれらのキーポイントにあること
を本明細書において主張する。
触ＩＣカード）による入退室管理装置等に、所定エリア
での人物の入退室を感知するセンサと、その入退室前後
のシーンを撮影するＣＣＤカメラと、撮影された映像か
ら人物の最も正面らしい顔領域の画像を自動抽出する画
像処理部を設けたものである。本発明のポイントは新規
に発明した下記の２つのキーアイデアにあり、本発明の
新規性および進歩性はこれらのキーポイントにあること
を本明細書において主張する。
【００２３】第１のアイデアは、入退室を感知する赤外
線センサとＣＣＤカメラ、あるいはマイクロフォンとＣ
ＣＤカメラを連動させることにより、人間がフロアや部
屋などの区画への入退室した瞬間の前後数フレームない
し数十フレームの画像を逐次メモリに記憶またはファイ
ルに保存蓄積し、人物の入退室という事象をもれなくか
つ効率的にカバーするということである。
線センサとＣＣＤカメラ、あるいはマイクロフォンとＣ
ＣＤカメラを連動させることにより、人間がフロアや部
屋などの区画への入退室した瞬間の前後数フレームない
し数十フレームの画像を逐次メモリに記憶またはファイ
ルに保存蓄積し、人物の入退室という事象をもれなくか
つ効率的にカバーするということである。
【００２４】これにより、入室者がＩＤカードをカード
リーダ部へ差し込む前後に入室者を撮影してその画像情
報をディスクに記録できるようにし、ＩＤカードの不正
使用者やＩＤカードの使用者の後に続いて入室した侵入
者も、後から人間が見て特定できるようにする。また、
多数監視カメラによる大規模な画像監視装置なしに防犯
機能を高める。
リーダ部へ差し込む前後に入室者を撮影してその画像情
報をディスクに記録できるようにし、ＩＤカードの不正
使用者やＩＤカードの使用者の後に続いて入室した侵入
者も、後から人間が見て特定できるようにする。また、
多数監視カメラによる大規模な画像監視装置なしに防犯
機能を高める。
【００２５】第２のアイデアは、テンプレートマッチン
グの一方法である特開平９−３３０４０２号、特開平９
−３３０４０３号に記載のパラメトリックテンプレート
法（以下、ＰＴ法と記す）等のテンプレートマッチング
の要素技術を応用し、平均顔画像を規準テンプレートに
用いて、蓄積された画像列から当該入退室者の最も正面
を向いた顔画像に相当する領域を自動的に照合し、切り
出して記録を行う機能を実現するということである。
グの一方法である特開平９−３３０４０２号、特開平９
−３３０４０３号に記載のパラメトリックテンプレート
法（以下、ＰＴ法と記す）等のテンプレートマッチング
の要素技術を応用し、平均顔画像を規準テンプレートに
用いて、蓄積された画像列から当該入退室者の最も正面
を向いた顔画像に相当する領域を自動的に照合し、切り
出して記録を行う機能を実現するということである。
【００２６】これにより、その記録からＩＤカードの不
正使用者や侵入者を確実にかつ効率的に特定できるよう
にしている。
正使用者や侵入者を確実にかつ効率的に特定できるよう
にしている。
【００２７】
【発明の実施の形態】本発明の実施の形態に関し、ま
ず、オフィスでの入退室管理に応用した第１の実施形態
例を図面を参照しながら詳細に述べる。
ず、オフィスでの入退室管理に応用した第１の実施形態
例を図面を参照しながら詳細に述べる。
【００２８】図１は本発明の第１の実施形態例による装
置構成とともに、その動作を説明するために示した入退
室管理装置全体の一構成例を示した図である。
置構成とともに、その動作を説明するために示した入退
室管理装置全体の一構成例を示した図である。
【００２９】図１において、１１２は所定エリア内への
人物１１１の入退室を感知するセンサ、１１３はＣＣＤ
カメラ（撮像部）、１１４はＣＣＤカメラ１１３のため
のインタフェース（Ｉ／Ｆ）、１１６は周辺の異常音１
１５を電気信号に変換するマイクロフォン、１１７はマ
イクロフォン１１６からの信号をＡ／Ｄ変換するととも
に設定された時間において音圧レベルをチェックして異
常音１１５を検出するＡ／Ｄ変換・音圧レベルチェック
回路、１１８はＣＣＤカメラ１１３の画像列から最も正
面を向いた正面顔（部分）画像を抽出する正面顔抽出処
理部、１１９はモニタ、１２２はアンテナ部１２２ａと
その受信部１２２ｂによりＩＤカード１２１から情報を
読み出すカードリーダ部、１２３はメモリ（またはディ
スク）１２４への情報の書き込み・読み出しを制御する
メモリコントローラ、１２５はメモリ１２４に記憶した
データと内蔵した入（退）室資格をチェックするための
データとを比較照合する照合部、１２６は照合部１２５
での照合結果によりドアの電気錠の開閉制御を実行する
電気錠制御部、１２７は照合部１２５での照合結果が一
致した場合にセンタ装置（図示せず）にカード情報や抽
出した正面顔を伝送するためのデータ通信部、１２８は
データおよびコントロール信号のバスラインである。
人物１１１の入退室を感知するセンサ、１１３はＣＣＤ
カメラ（撮像部）、１１４はＣＣＤカメラ１１３のため
のインタフェース（Ｉ／Ｆ）、１１６は周辺の異常音１
１５を電気信号に変換するマイクロフォン、１１７はマ
イクロフォン１１６からの信号をＡ／Ｄ変換するととも
に設定された時間において音圧レベルをチェックして異
常音１１５を検出するＡ／Ｄ変換・音圧レベルチェック
回路、１１８はＣＣＤカメラ１１３の画像列から最も正
面を向いた正面顔（部分）画像を抽出する正面顔抽出処
理部、１１９はモニタ、１２２はアンテナ部１２２ａと
その受信部１２２ｂによりＩＤカード１２１から情報を
読み出すカードリーダ部、１２３はメモリ（またはディ
スク）１２４への情報の書き込み・読み出しを制御する
メモリコントローラ、１２５はメモリ１２４に記憶した
データと内蔵した入（退）室資格をチェックするための
データとを比較照合する照合部、１２６は照合部１２５
での照合結果によりドアの電気錠の開閉制御を実行する
電気錠制御部、１２７は照合部１２５での照合結果が一
致した場合にセンタ装置（図示せず）にカード情報や抽
出した正面顔を伝送するためのデータ通信部、１２８は
データおよびコントロール信号のバスラインである。
【００３０】なお、入退室を感知するセンサ１１２とし
ては、感知エリアに入ったことを検出する重量センサや
赤外線センサ（ビームセンサ）、温度センサ等、あるい
は電気錠のノブに触れたことを検出する静電センサを用
いることもできる。
ては、感知エリアに入ったことを検出する重量センサや
赤外線センサ（ビームセンサ）、温度センサ等、あるい
は電気錠のノブに触れたことを検出する静電センサを用
いることもできる。
【００３１】この実施の形態の入退室管理装置は、ＩＤ
カード１２１の情報と内蔵する情報との照合によりドア
の電気錠を解錠するものである。例えば部屋の外側のド
ア付近に設置されて、人物１１１が携帯するＩＤカード
１２１をカードリーダ部１２２に差し込む（非接触カー
ドの場合カードリーダ部にあてる）と、ＩＤカードの情
報がメモリ１２４に一旦格納される。そして照合部１２
５において人物１１１が入室資格を有するか否かを内蔵
データと比較することによって照合が行われる。この入
室資格チェックの結果、人物１１１が資格を有さない場
合には、装置は無資格である旨の表示を行う。
カード１２１の情報と内蔵する情報との照合によりドア
の電気錠を解錠するものである。例えば部屋の外側のド
ア付近に設置されて、人物１１１が携帯するＩＤカード
１２１をカードリーダ部１２２に差し込む（非接触カー
ドの場合カードリーダ部にあてる）と、ＩＤカードの情
報がメモリ１２４に一旦格納される。そして照合部１２
５において人物１１１が入室資格を有するか否かを内蔵
データと比較することによって照合が行われる。この入
室資格チェックの結果、人物１１１が資格を有さない場
合には、装置は無資格である旨の表示を行う。
【００３２】一方、人物１１１が入室資格を有すること
がわかったときには、照合部１２５は入室資格を有する
旨の照合結果を電気錠制御部１２６に与える。これによ
り、電気錠制御部１２６はドアの電気錠を解錠させる。
こうした流れで、ドアの電気錠が解錠されて人物１１１
はドアを開けて部屋に入室することができる。
がわかったときには、照合部１２５は入室資格を有する
旨の照合結果を電気錠制御部１２６に与える。これによ
り、電気錠制御部１２６はドアの電気錠を解錠させる。
こうした流れで、ドアの電気錠が解錠されて人物１１１
はドアを開けて部屋に入室することができる。
【００３３】また、入室者がカードリーダ部１２２へＩ
Ｄカードの差し込みを行ったときに、メモリコントロー
ラ１２３がＣＣＤカメラ１１３により撮影される画像情
報をメモリ１２４に書き込む。そして、このメモリ１２
４に書き込んだ画像情報を記録した日付、時刻とともに
データ通信部１２７を介して中央監視センタのセンタ装
置ヘ送信する。それと並行して、蓄積された入（退）室
シーンの画像列データが正面顔抽出処理部１１８に送ら
れて、当該入（退）室者の最も正面を向いた顔画像が内
部の画像メモリもしくはメモリ１２４に記憶されるとと
もに、データ通信部１２７に出力される。最後に結果と
して、上記顔画像を入（退）室時刻およびその正面らし
さ評価値とともにモニタ１１９に画面表示する。
Ｄカードの差し込みを行ったときに、メモリコントロー
ラ１２３がＣＣＤカメラ１１３により撮影される画像情
報をメモリ１２４に書き込む。そして、このメモリ１２
４に書き込んだ画像情報を記録した日付、時刻とともに
データ通信部１２７を介して中央監視センタのセンタ装
置ヘ送信する。それと並行して、蓄積された入（退）室
シーンの画像列データが正面顔抽出処理部１１８に送ら
れて、当該入（退）室者の最も正面を向いた顔画像が内
部の画像メモリもしくはメモリ１２４に記憶されるとと
もに、データ通信部１２７に出力される。最後に結果と
して、上記顔画像を入（退）室時刻およびその正面らし
さ評価値とともにモニタ１１９に画面表示する。
【００３４】なお、上述の中央監視センタのセンタ装置
ヘ送信する仕組みにより、中央監視センタで入退室の状
況を監視できるとともにその映像（静止画像列）を記録
できる。この記録した映像から入室者を特定できるた
め、ＩＤカードの不正使用者や、ＩＤカードの使用者の
後に続いて入室した侵入者も、記録した映像や正面顔画
像から確実かつ効率的に特定することができる。さらに
は、ＣＣＤカメラ１１３は常時作動しており、ＩＤカー
ド１２１の差し込み操作を行う前後の映像シーンを中央
監視センタのセンタ装置へストリーミング配信すること
も技術的に可能である。
ヘ送信する仕組みにより、中央監視センタで入退室の状
況を監視できるとともにその映像（静止画像列）を記録
できる。この記録した映像から入室者を特定できるた
め、ＩＤカードの不正使用者や、ＩＤカードの使用者の
後に続いて入室した侵入者も、記録した映像や正面顔画
像から確実かつ効率的に特定することができる。さらに
は、ＣＣＤカメラ１１３は常時作動しており、ＩＤカー
ド１２１の差し込み操作を行う前後の映像シーンを中央
監視センタのセンタ装置へストリーミング配信すること
も技術的に可能である。
【００３５】このような本発明に係る入退室管理装置の
第１の実施形態例の動作を、図１、図２および図３を用
いて説明する。
第１の実施形態例の動作を、図１、図２および図３を用
いて説明する。
【００３６】図２は、図１における正面顔抽出処理部１
１８の構成例を説明するブロック図である。
１８の構成例を説明するブロック図である。
【００３７】図２において、２０１はセンサ１１２が感
知エリア内に入ってきた人物をとらえた場合、あるいは
マイクロフォン１１６が所定レベルを超えた異常音１１
５をとらえた場合にＣＣＤカメラ１１３で所定の時間録
画した観測画像ファイル列２１１をメモリ１２４に蓄積
させる画像入力部、２０２は規準平均顔テンプレート２
１２を作成しあらかじめ内部の画像メモリ（またはディ
スク）等に記憶させておく顔テンプレート作成部、２０
３は観測画像ファイル列２１１と規準平均顔テンプレー
ト２１２からパラメトリックテンプレート法（ＰＴ法）
等によって正面顔候補列２１３を得る顔部領域検出処理
部、２０４は正面顔候補列２１３の中からどの顔画像が
最も正面を向いている画像（正面顔画像２１４）かを照
合判定し内部の画像メモリ（またはディスク）等に記憶
する正面顔照合判定部、２０５は入（退）室時刻やその
正面らしさ評価値とともに画面に正面顔画像２１４を図
１のモニタ１１９に表示する警報／結果モニタ表示部で
ある。なお、正面顔画像を記憶させる内部の画像メモリ
（またはディスク）等は図１におけるメモリ１２４であ
ってもよい。この場合の正面顔画像のメモリ１２４への
出力、並びに正面顔画像等のデータ通信部１２７への出
力は、正面顔照合判定部２０４から行う。
知エリア内に入ってきた人物をとらえた場合、あるいは
マイクロフォン１１６が所定レベルを超えた異常音１１
５をとらえた場合にＣＣＤカメラ１１３で所定の時間録
画した観測画像ファイル列２１１をメモリ１２４に蓄積
させる画像入力部、２０２は規準平均顔テンプレート２
１２を作成しあらかじめ内部の画像メモリ（またはディ
スク）等に記憶させておく顔テンプレート作成部、２０
３は観測画像ファイル列２１１と規準平均顔テンプレー
ト２１２からパラメトリックテンプレート法（ＰＴ法）
等によって正面顔候補列２１３を得る顔部領域検出処理
部、２０４は正面顔候補列２１３の中からどの顔画像が
最も正面を向いている画像（正面顔画像２１４）かを照
合判定し内部の画像メモリ（またはディスク）等に記憶
する正面顔照合判定部、２０５は入（退）室時刻やその
正面らしさ評価値とともに画面に正面顔画像２１４を図
１のモニタ１１９に表示する警報／結果モニタ表示部で
ある。なお、正面顔画像を記憶させる内部の画像メモリ
（またはディスク）等は図１におけるメモリ１２４であ
ってもよい。この場合の正面顔画像のメモリ１２４への
出力、並びに正面顔画像等のデータ通信部１２７への出
力は、正面顔照合判定部２０４から行う。
【００３８】図３は、図１における正面顔抽出処理部１
１８の動作例を説明するためのフローチャートである。
１８の動作例を説明するためのフローチャートである。
【００３９】始めに、顔テンプレート作成部２０２は、
読み込んだ規準テンプレートファイル（平均顔）にＩ値
変換を施して規準平均顔テンプレート２１２を作成し、
あらかじめ画像メモリに記憶させておく（規準顔テンプ
レート作成ステップ３０１）。ここでのＩ値とは、ＹＩ
Ｑ色空間におけるＩ値 Ｉ＝０．６０Ｒ−０．２８Ｇ−０．３２Ｂ である。Ｉ値は赤やオレンジ成分を強く表すといわれて
いる。
読み込んだ規準テンプレートファイル（平均顔）にＩ値
変換を施して規準平均顔テンプレート２１２を作成し、
あらかじめ画像メモリに記憶させておく（規準顔テンプ
レート作成ステップ３０１）。ここでのＩ値とは、ＹＩ
Ｑ色空間におけるＩ値 Ｉ＝０．６０Ｒ−０．２８Ｇ−０．３２Ｂ である。Ｉ値は赤やオレンジ成分を強く表すといわれて
いる。
【００４０】次に、画像入力部２０１は、ある時刻にお
いてセンサ１１２が感知エリア内に入ってきた人物をと
らえた場合、あるいはマイクロフォン１１６が所定レベ
ルを超えた異常音１１５をとらえた場合、ＣＣＤカメラ
１１３で所定の時間（例えば５秒）メモリ１２４に録画
する。例えば大きさ３２０×２４０（画素）に相当する
ＦｒａｍｅＮｕｍフレームの観測画像ファイル列２１１
が蓄積される。ここでＦｒａｍｅＮｕｍは規定値なの
で、上記記録時間［秒］はフレームレートから計算でき
る。そして、所定のディレクトリを調べてコマ落ちがな
いか上述の観測画像ファイル列２１１の蓄積状況をチェ
ックし、該当するファイル数をカウントする（観測画像
ファイル数カウントステップ３０２）。
いてセンサ１１２が感知エリア内に入ってきた人物をと
らえた場合、あるいはマイクロフォン１１６が所定レベ
ルを超えた異常音１１５をとらえた場合、ＣＣＤカメラ
１１３で所定の時間（例えば５秒）メモリ１２４に録画
する。例えば大きさ３２０×２４０（画素）に相当する
ＦｒａｍｅＮｕｍフレームの観測画像ファイル列２１１
が蓄積される。ここでＦｒａｍｅＮｕｍは規定値なの
で、上記記録時間［秒］はフレームレートから計算でき
る。そして、所定のディレクトリを調べてコマ落ちがな
いか上述の観測画像ファイル列２１１の蓄積状況をチェ
ックし、該当するファイル数をカウントする（観測画像
ファイル数カウントステップ３０２）。
【００４１】次に、人物顔領域検出処理部２０３は、上
記で得られた観測画像ファイル列２１１を読み込む（画
像入力ステップ３０３）。
記で得られた観測画像ファイル列２１１を読み込む（画
像入力ステップ３０３）。
【００４２】次に、人物顔領域検出処理部２０３は、こ
れらＦｒａｍｅＮｕｍ枚のカラー観測画像ファイル群に
Ｉ値変換を行い、１２８のオフセットを加えてグレース
ケール画像とする。この画像列と規準平均顔テンプレー
ト２１２から、前述のパラメトリックテンプレート法
（ＰＴ法）によって、あるいは正規化相関マッチングに
よって、部分画像である正面顔候補列２１３を得る（顔
部領域検出ステップ３０４）。
れらＦｒａｍｅＮｕｍ枚のカラー観測画像ファイル群に
Ｉ値変換を行い、１２８のオフセットを加えてグレース
ケール画像とする。この画像列と規準平均顔テンプレー
ト２１２から、前述のパラメトリックテンプレート法
（ＰＴ法）によって、あるいは正規化相関マッチングに
よって、部分画像である正面顔候補列２１３を得る（顔
部領域検出ステップ３０４）。
【００４３】なお、上記ＰＴ法は、回転やスケール変
化、形状変形による個体変動を有する対象をパラメトリ
ックな補間画像空間内の一点として効率的に表現し、探
索画像内から高速にサーチすることを可能であり、蓄積
画像フレームから人間の顔を探索するプロセスに適して
いる。
化、形状変形による個体変動を有する対象をパラメトリ
ックな補間画像空間内の一点として効率的に表現し、探
索画像内から高速にサーチすることを可能であり、蓄積
画像フレームから人間の顔を探索するプロセスに適して
いる。
【００４４】図４に、観測画像ファイル列２１１ならび
に、顔部領域検出ステップ３０４の処理結果で得られた
正面顔候補列２１３の一例を示した。これらの結果よ
り、Ｉ値が肌色の抽出に有効なこと、そして、ＰＴ法に
より人物の顔部領域検出が実現できているのがわかる。
に、顔部領域検出ステップ３０４の処理結果で得られた
正面顔候補列２１３の一例を示した。これらの結果よ
り、Ｉ値が肌色の抽出に有効なこと、そして、ＰＴ法に
より人物の顔部領域検出が実現できているのがわかる。
【００４５】次に、正面顔照合判定部２０４は、正面顔
候補列２１３の中から、どの顔画像が最も正面を向いて
いるかを照合判定する（正面顔照合判定ステップ３０
５）。この判定方法には、以下の３つの方法Ａ，Ｂ，Ｃ
が考えられる。
候補列２１３の中から、どの顔画像が最も正面を向いて
いるかを照合判定する（正面顔照合判定ステップ３０
５）。この判定方法には、以下の３つの方法Ａ，Ｂ，Ｃ
が考えられる。
【００４６】［方法Ａ］正面顔候補２１３のうち、画像
サイズが所定の大きさ以上、かつＰＴ法による照合類似
度が最大の候補を計算する。
サイズが所定の大きさ以上、かつＰＴ法による照合類似
度が最大の候補を計算する。
【００４７】［方法Ｂ］ （Ｂ１）カラー正面顔候補画像にＩ値変換処理を施し、
２５６階調のグレースケール画像に変換する。
２５６階調のグレースケール画像に変換する。
【００４８】（Ｂ２）画素値１２８＋α（パラメータ）
以上の階調値をもつ画素を対象に輝度ヒストグラムを作
成し、判別分析法で２値化する。この処理で頭髪領域お
よび背景領域を除去し、顔部肌色領域のみを抽出する。
以上の階調値をもつ画素を対象に輝度ヒストグラムを作
成し、判別分析法で２値化する。この処理で頭髪領域お
よび背景領域を除去し、顔部肌色領域のみを抽出する。
【００４９】（Ｂ３）カラー正面顔候補画像にガウシア
ン・ハイパスフィルタ処理を施し、２５６階調のグレー
スケール画像に変換する。そして閾値１２８で２値化す
る。
ン・ハイパスフィルタ処理を施し、２５６階調のグレー
スケール画像に変換する。そして閾値１２８で２値化す
る。
【００５０】（Ｂ４）上記Ｂ３ステップで得られた２値
画像について、上記Ｂ２ステップで計算した顔部領域外
の画素を白でぬりつぶす。この処理で図４に示すような
２値画像を得る。
画像について、上記Ｂ２ステップで計算した顔部領域外
の画素を白でぬりつぶす。この処理で図４に示すような
２値画像を得る。
【００５１】（Ｂ５）この２値画像は眉、目、鼻、口や
耳の顔部品の形状情報が保存されている。顔の対称性に
着目して、水平方向への黒画素の射影ヒストグラムやそ
の重心位置等を計算し、正面性を判定する。
耳の顔部品の形状情報が保存されている。顔の対称性に
着目して、水平方向への黒画素の射影ヒストグラムやそ
の重心位置等を計算し、正面性を判定する。
【００５２】［方法Ｃ］ （Ｃ１）目および口の平均テンプレートを用意し、カラ
ー正面顔候補画像からテンプレートマッチングにより、
両目と口の上位Ｎ候補を計算し、画像上でのそれらの位
置を推定する。
ー正面顔候補画像からテンプレートマッチングにより、
両目と口の上位Ｎ候補を計算し、画像上でのそれらの位
置を推定する。
【００５３】（Ｃ２）両目と口の位置関係（両目と口で
構成される三角形）に着目して、顔領域内部に存在し、
かつ正面を向いた場合の位置関係に最も近いものを求め
る。
構成される三角形）に着目して、顔領域内部に存在し、
かつ正面を向いた場合の位置関係に最も近いものを求め
る。
【００５４】最後に、警報／結果モニタ表示部２０５
は、正面顔照合判定部２０４で得られた、入（退）室時
刻やその正面らしさ評価値（例えばＰＴマッチングの類
似度）とともに画面に正面顔画像２１４を表示する（警
報・結果モニタ表示ステップ３０６）。図５に、本発明
による入退室管理装置の処理結果の表示画面の一例を示
す。
は、正面顔照合判定部２０４で得られた、入（退）室時
刻やその正面らしさ評価値（例えばＰＴマッチングの類
似度）とともに画面に正面顔画像２１４を表示する（警
報・結果モニタ表示ステップ３０６）。図５に、本発明
による入退室管理装置の処理結果の表示画面の一例を示
す。
【００５５】本発明による入退室管理装置の第２の実施
形態例としては、上記第１の実施形態例の入退室管理装
置において、ログファイル等の記録内容を解析し、カメ
ラ設置場所や入（退）室時刻、入室者の正面顔画像への
リンク、正面らしさの評価値等のデータをｈｔｍｌ／ｘ
ｍｌ形式で出力するＣＧＩプログラムを含めたＨＴＴＰ
サーバ部を備える。そのため、ネットワーク接続された
クライアント端末において、汎用ブラウザ上でＣＧＩプ
ログラムを実行すると、ネットワーク越しに入退室時刻
リストや正面顔画像リストを閲覧または検索することが
可能である。図６は、当該ＣＧＩプログラム実行による
リスト表示結果の表示画面の一例を示した図である。
形態例としては、上記第１の実施形態例の入退室管理装
置において、ログファイル等の記録内容を解析し、カメ
ラ設置場所や入（退）室時刻、入室者の正面顔画像への
リンク、正面らしさの評価値等のデータをｈｔｍｌ／ｘ
ｍｌ形式で出力するＣＧＩプログラムを含めたＨＴＴＰ
サーバ部を備える。そのため、ネットワーク接続された
クライアント端末において、汎用ブラウザ上でＣＧＩプ
ログラムを実行すると、ネットワーク越しに入退室時刻
リストや正面顔画像リストを閲覧または検索することが
可能である。図６は、当該ＣＧＩプログラム実行による
リスト表示結果の表示画面の一例を示した図である。
【００５６】上記のＨＴＴＰサーバ部の第１案として
は、図１におけるセンタ装置に備えられていて、データ
通信部１２７から送られたデータを取り込んでｈｔｍｌ
／ｘｍｌ形式にし、このセンタ装置にネットワーク接続
されたクライアント端末に対して入退室時刻リストある
いは正面顔画面リストを出力する構成例が考えられる。
は、図１におけるセンタ装置に備えられていて、データ
通信部１２７から送られたデータを取り込んでｈｔｍｌ
／ｘｍｌ形式にし、このセンタ装置にネットワーク接続
されたクライアント端末に対して入退室時刻リストある
いは正面顔画面リストを出力する構成例が考えられる。
【００５７】また、上記ＨＴＴＰサーバ部の第２案とし
ては、図１には図示していないが、図１に示された入退
室管理装置を兼ねるサーバ装置あるいはパソコン装置に
ＨＴＴＰサーバ部が備えられていて、データ通信部１２
７から送られたデータを取り込んでｈｔｍｌ／ｘｍｌ形
式にし、このサーバ装置あるいはパソコン装置にネット
ワーク接続されたクライアント端末に対して入退室時刻
リストあるいは正面顔画面リストを出力する構成例が考
えられる。
ては、図１には図示していないが、図１に示された入退
室管理装置を兼ねるサーバ装置あるいはパソコン装置に
ＨＴＴＰサーバ部が備えられていて、データ通信部１２
７から送られたデータを取り込んでｈｔｍｌ／ｘｍｌ形
式にし、このサーバ装置あるいはパソコン装置にネット
ワーク接続されたクライアント端末に対して入退室時刻
リストあるいは正面顔画面リストを出力する構成例が考
えられる。
【００５８】以上の実施形態例によれば、多数の監視カ
メラから構成される大規模な監視システムや防犯装置と
比較して、入退室者全員の記録を高精度にかつ極力無駄
を抑えつつ、画像ファイル集合として蓄積可能となり、
オフライン検索も高速に実現できる。
メラから構成される大規模な監視システムや防犯装置と
比較して、入退室者全員の記録を高精度にかつ極力無駄
を抑えつつ、画像ファイル集合として蓄積可能となり、
オフライン検索も高速に実現できる。
【００５９】なお、いうまでもなく、上記の実施形態例
における入退室管理装置は、ＩＤカードを挿入する操
作、または非接触ＩＣカードをカードリーダ部におく操
作によって読み取った情報と、内蔵した入（退）室資格
をチェックするためのデータとを比較照合することによ
りドアの電気錠を解錠するものとしているが、本発明を
適用する入退室管理装置としては、ＩＤカードまたは非
接触ＩＣカードの情報とテンキーから入力された暗証番
号等の情報との照合によりドアの電気錠を解錠するもの
であってもよい。
における入退室管理装置は、ＩＤカードを挿入する操
作、または非接触ＩＣカードをカードリーダ部におく操
作によって読み取った情報と、内蔵した入（退）室資格
をチェックするためのデータとを比較照合することによ
りドアの電気錠を解錠するものとしているが、本発明を
適用する入退室管理装置としては、ＩＤカードまたは非
接触ＩＣカードの情報とテンキーから入力された暗証番
号等の情報との照合によりドアの電気錠を解錠するもの
であってもよい。
【００６０】また、図１、図２で示した入退室管理装置
における各部の一部もしくは全部での機能や処理をコン
ピュータのプログラムで構成し、そのプログラムをコン
ピュータを用いて実行して本発明を実現することができ
ること、あるいは、図３で示した処理のステップをコン
ピュータのプログラムで構成し、そのプログラムをコン
ピュータに実行させることができることは言うまでもな
く、コンピュータでその機能や処理を実現するためのプ
ログラム、あるいは、コンピュータにその処理ステップ
を実行させるためのプログラムを、そのコンピュータが
読み取り可能な記録媒体、例えば、ＦＤ（フロッピーデ
ィスク（登録商標））や、ＭＯ、ＲＯＭ、メモリカー
ド、ＣＤ、ＤＶＤ、リムーバブルディスクなどに記録し
て、保存したり、提供したりすることができるととも
に、インターネットや電子メール等、ネットワークを介
して配布することも可能である。
における各部の一部もしくは全部での機能や処理をコン
ピュータのプログラムで構成し、そのプログラムをコン
ピュータを用いて実行して本発明を実現することができ
ること、あるいは、図３で示した処理のステップをコン
ピュータのプログラムで構成し、そのプログラムをコン
ピュータに実行させることができることは言うまでもな
く、コンピュータでその機能や処理を実現するためのプ
ログラム、あるいは、コンピュータにその処理ステップ
を実行させるためのプログラムを、そのコンピュータが
読み取り可能な記録媒体、例えば、ＦＤ（フロッピーデ
ィスク（登録商標））や、ＭＯ、ＲＯＭ、メモリカー
ド、ＣＤ、ＤＶＤ、リムーバブルディスクなどに記録し
て、保存したり、提供したりすることができるととも
に、インターネットや電子メール等、ネットワークを介
して配布することも可能である。
【００６１】
【発明の効果】以上の説明により明らかなように、本発
明によれば、入室者がＩＤカードをカードリーダ部へ差
し込む（あるいは非接触ＩＣカードをカードリーダ部に
あてる）前後に画像情報を撮影してメモリまたはディス
クに記録できるとともに、こうした映像（画像ファイル
集合）から入室者の正面顔画像情報をも自動的に保存で
きるので、ＩＤカードの不正使用者やＩＤカードの使用
者の後に続いて入室した侵入者も、後から人間が見て確
実に特定することができる。したがって、多数監視カメ
ラによる画像監視装置等の大規模システムと遜色なく、
しかも無駄のない記録量で効率的に防犯機能を向上させ
ることができる。
明によれば、入室者がＩＤカードをカードリーダ部へ差
し込む（あるいは非接触ＩＣカードをカードリーダ部に
あてる）前後に画像情報を撮影してメモリまたはディス
クに記録できるとともに、こうした映像（画像ファイル
集合）から入室者の正面顔画像情報をも自動的に保存で
きるので、ＩＤカードの不正使用者やＩＤカードの使用
者の後に続いて入室した侵入者も、後から人間が見て確
実に特定することができる。したがって、多数監視カメ
ラによる画像監視装置等の大規模システムと遜色なく、
しかも無駄のない記録量で効率的に防犯機能を向上させ
ることができる。
【００６２】また、上記において、入退室を感知するセ
ンサに代えてマイクロフォンを用い、マイクロフォンか
らの音声情報が所定レベルを超えたときに画像情報を撮
影して記録するようにした場合には、例えば、夜間など
の警戒時間中に不正侵入者によるガラスの破損やドアの
こじ開け等の異常音が発生したときにも、その発生前後
の状況を撮影・記録し、当該侵入者の特定に役立てるこ
とが可能となる。
ンサに代えてマイクロフォンを用い、マイクロフォンか
らの音声情報が所定レベルを超えたときに画像情報を撮
影して記録するようにした場合には、例えば、夜間など
の警戒時間中に不正侵入者によるガラスの破損やドアの
こじ開け等の異常音が発生したときにも、その発生前後
の状況を撮影・記録し、当該侵入者の特定に役立てるこ
とが可能となる。
【図１】本発明の第１の実施形態例による動作を説明す
る、入退室管理装置全体の一構成例を示した図である。
る、入退室管理装置全体の一構成例を示した図である。
【図２】上記入退室管理装置における人物正面顔抽出処
理部の構成例を説明するブロック図である。
理部の構成例を説明するブロック図である。
【図３】上記入退室管理装置における人物正面顔抽出処
理部の動作例を説明するためのフローチャートである。
理部の動作例を説明するためのフローチャートである。
【図４】上記実施形態例において、（ａ）は観測画像の
一例、（ｂ）は顔画像候補の一例、（ｃ）は［方法Ｂ］
を適用して２値化して得られた顔部領域部分画像の一例
を示した図である。
一例、（ｂ）は顔画像候補の一例、（ｃ）は［方法Ｂ］
を適用して２値化して得られた顔部領域部分画像の一例
を示した図である。
【図５】上記実施形態例による入退室管理装置の処理結
果の表示画面の一例を示した図である。
果の表示画面の一例を示した図である。
【図６】本発明の第２の実施形態例による、入退室時刻
リストや正面顔画像リストを出力するＣＧＩプログラム
実行後のリスト表示結果の表示画面の一例を示した図で
ある。
リストや正面顔画像リストを出力するＣＧＩプログラム
実行後のリスト表示結果の表示画面の一例を示した図で
ある。
【図７】従来の入退室管理装置の構成を示すブロック図
である。
である。
【図８】従来の入退室管理装置の外観を示す正面図であ
る。
る。
１１１…人物（入室者） １１２…入退室を感知するセンサ １１３…ＣＣＤカメラ（撮像部） １１４…インタフェース １１５…異常音 １１６…マイクロフォン １１７…ＡＤ変換・音圧レベルチェック回路 １１８…正面顔抽出処理部 １１９…モニタ（ＣＲＴ） １２１…ＩＤカード（非接触ＩＤカード） １２２…カードリーダ部 １２２ａ…アンテナ部 １２２ｂ…受信部 １２３…メモリコントローラ １２４…メモリ １２５…照合部 １２６…電気錠制御部 １２７…データ通信部 ２０１…画像入力部 ２０２…顔テンプレート作成部 ２０３…人物顔領域検出処理部 ２０４…正面顔照合判定部 ２０５…警報／結果モニタ表示部 ２１１…観測画像ファイル列 ２１２…正面を向いた規準平均顔テンプレート ２１３…正面顔候補列 ３０１…規準顔テンプレート作成ステップ ３０２…観測画像ファイル数カウントステップ ３０３…画像入力ステップ ３０４…顔部領域検出ステップ ３０５…正面顔照合判定ステップ ３０６…警報・結果モニタ表示ステップ
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ０８Ｂ 25/00 ５１０ Ｇ０８Ｂ 25/00 ５１０Ｍ ５Ｃ０８７ 25/04 25/04 Ｆ ５Ｌ０９６ Ｇ Ｈ０４Ｎ 5/915 Ｈ０４Ｎ 7/18 Ｈ 7/18 5/91 Ｋ (72)発明者 目黒 眞一 東京都千代田区大手町二丁目３番１号 日 本電信電話株式会社内 Ｆターム(参考） 2E250 AA03 BB05 BB08 BB09 BB10 BB46 CC15 CC29 DD06 EE02 EE03 FF06 FF28 FF35 FF44 3E038 AA01 BA20 CA03 CA07 HA05 JA03 5C053 FA09 FA11 FA27 HA29 KA01 KA25 LA02 LA14 5C054 CG02 CH01 DA01 DA09 EA00 EA01 EA03 EA05 EA07 FC12 FE17 FF03 FF06 FF07 GA01 GA04 GB11 GB18 HA18 5C084 AA02 AA07 AA13 BB31 BB40 CC17 CC23 DD11 EE01 EE04 FF03 FF27 GG43 GG52 GG78 HH10 HH12 HH13 5C087 AA02 AA03 AA22 AA24 BB03 BB74 DD05 DD06 DD23 EE05 EE18 EE20 FF01 FF02 FF04 FF19 FF20 FF25 GG02 GG12 GG20 GG23 GG32 GG66 5L096 AA02 AA06 BA02 BA18 CA02 DA01 EA43 FA15 FA37 FA59 FA60 JA09 JA18
Claims (14)
- 【請求項１】 電気錠を開錠するために少なくともカー
ドリーダ部を備えた入退室管理装置であって、 所定エリア内の入退室を感知するセンサからの信号をト
リガとして、監視カメラによって取得された入力画像列
を逐次メモリまたはディスクに記憶する第１の手段と、 前記入力画像列からテンプレートマッチングにより人間
の顔部領域候補を抽出する第２の手段と、 前記顔部領域候補の画像群から前記監視カメラに対して
最も正面を向いている顔部領域画像を自動判定し正面顔
画像としてメモリまたはディスクに記憶する第３の手段
とを有することを特徴とする入退室管理装置。 - 【請求項２】 請求項１に記載の入退室管理装置におい
て、 前記センサは、前記所定エリア内に人物が入ったことを
感知する赤外線センサまたは重量センサまたは温度セン
サまたは静電センサであることを特徴とする入退室管理
装置。 - 【請求項３】 電気錠を開錠するために少なくともカー
ドリーダ部を備えた入退室管理装置であって、 マイクロフォンから入力された音声情報が所定のレベル
を超えたときの信号をトリガとして、監視カメラで取得
された入力画像列を逐次メモリまたはディスクに記憶す
る第１の手段と、 前記入力画像列からテンプレートマッチングにより人間
の顔部領域候補を抽出する第２の手段と、 前記顔部領域候補の画像群から前記監視カメラに対して
最も正面を向いている顔部領域画像を自動判定し正面顔
画像としてメモリまたはディスクに記憶する第３の手段
とを有することを特徴とする入退室管理装置。 - 【請求項４】 請求項１または２または３に記載の入退
室管理装置であって、 ネットワーク接続されたクライアント端末からのリクエ
ストに対して監視場所、入退室時刻リスト、および正面
顔画像リストの１以上を出力するサーバ部を有すること
を特徴とする入退室管理装置。 - 【請求項５】 請求項１または２または３に記載の入退
室管理装置であって、 前記第２の手段は、ＹＩＱ色空間のＩ値変換を施した入
力画像列ならびに規準テンプレートに対して正規化相関
マッチングまたはパラメトリックテンプレート法を適用
して人間の顔部領域候補を抽出するものであることを特
徴とする入退室管理装置。 - 【請求項６】 請求項１または２または３に記載の入退
室管理装置であって、 前記第３の手段は、顔部領域候補画像にガウシアン・ハ
イパスフィルタ処理を施し２５６階調グレースケールに
変換した画像の輝度ヒストグラムに基づき、顔部品の形
状情報を保存しつつ２値化処理後、顔の対称性に着目し
て水平方向への黒画素の射影ヒストグラムまたはその重
心位置を計算し、顔部領域が正面を向いているか否かを
判定する手段を有することを特徴とする入退室管理装
置。 - 【請求項７】 請求項１または２または３に記載の入退
室管理装置であって、 前記第３の手段は、顔部領域候補の画像群からテンプレ
ートマッチングにより画像上における両目と口の位置を
複数推定し、両目と口とで構成される三角形に着目し
て、顔領域内部に存在しかつ正面を向いた顔の場合に形
成される三角形に最も近いものを正面を向いている顔部
領域画像と判定する手段を有することを特徴とする入退
室管理装置。 - 【請求項８】 電気錠を開錠するために少なくともカー
ドリーダ部を備えた入退室管理方法であって、 所定エリア内の入退室を感知するセンサからの信号をト
リガとして、監視カメラによって取得された入力画像列
を逐次メモリまたはディスクに記憶する第１のステップ
と、 前記入力画像列からテンプレートマッチングにより人間
の顔部領域候補を抽出する第２のステップと、 前記顔部領域候補の画像群から前記監視カメラに対して
最も正面を向いている顔部領域画像を自動判定し正面顔
画像としてメモリまたはディスクに記憶する第３のステ
ップとを有することを特徴とする入退室管理方法。 - 【請求項９】 電気錠を開錠するために少なくともカー
ドリーダ部を備えた入退室管理方法であって、 マイクロフォンから入力された音声情報が所定のレベル
を超えたときの信号をトリガとして、監視カメラで取得
された入力画像列を逐次メモリまたはディスクに記憶す
る第１のステップと、 前記入力画像列からテンプレートマッチングにより人間
の顔部領域候補を抽出する第２のステップと、 前記顔部領域候補の画像群から前記監視カメラに対して
最も正面を向いている顔部領域画像を自動判定し正面顔
画像としてメモリまたはディスクに記憶する第３のステ
ップとを有することを特徴とする入退室管理方法。 - 【請求項１０】 請求項８または９に記載の入退室管理
方法であって、 前記第２のステップでは、ＹＩＱ色空間のＩ値変換を施
した入力画像列ならびに規準テンプレートに対して正規
化相関マッチングまたはパラメトリックテンプレート法
を適用して人間の顔部領域候補を抽出することを特徴と
する入退室管理方法。 - 【請求項１１】 請求項８または９に記載の入退室管理
方法であって、 前記第３のステップでは、顔部領域候補画像にガウシア
ン・ハイパスフィルタ処理を施し２５６階調グレースケ
ールに変換した画像の輝度ヒストグラムに基づき、顔部
品の形状情報を保存しつつ２値化処理後、顔の対称性に
着目して水平方向への黒画素の射影ヒストグラムまたは
その重心位置を計算し、顔部領域が正面を向いているか
否かを判定する過程を有することを特徴とする入退室管
理方法。 - 【請求項１２】 請求項８または９に記載の入退室管理
方法であって、 前記第３のステップでは、顔部領域候補の画像群からテ
ンプレートマッチングにより画像上における両目と口の
位置を複数推定し、両目と口とで構成される三角形に着
目して、顔領域内部に存在しかつ正面を向いた顔の場合
に形成される三角形に最も近いものを正面を向いている
顔部領域画像と判定する過程を有することを特徴とする
入退室管理方法。 - 【請求項１３】 請求項８から１２までのいずれかに記
載の入退室管理方法におけるステップを、 コンピュータに実行させるプログラムとしたことを特徴
とする入退室管理方法の実行プログラム。 - 【請求項１４】 請求項１３に記載の入退室管理方法の
実行プログラムを、 前記コンピュータが読み取り可能な記録媒体に記録した
ことを特徴とする入退室管理方法の実行プログラムの記
録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001107897A JP2002304651A (ja) | 2001-04-06 | 2001-04-06 | 入退室管理装置とその方法、およびこの方法の実行プログラムとこの実行プログラムを記録した記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001107897A JP2002304651A (ja) | 2001-04-06 | 2001-04-06 | 入退室管理装置とその方法、およびこの方法の実行プログラムとこの実行プログラムを記録した記録媒体 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002304651A true JP2002304651A (ja) | 2002-10-18 |
Family
ID=18960139
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001107897A Pending JP2002304651A (ja) | 2001-04-06 | 2001-04-06 | 入退室管理装置とその方法、およびこの方法の実行プログラムとこの実行プログラムを記録した記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002304651A (ja) |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003178311A (ja) * | 2002-10-25 | 2003-06-27 | Mitsubishi Electric Corp | リアルタイム表情追跡装置 |
| JP2004348407A (ja) * | 2003-05-22 | 2004-12-09 | Matsushita Electric Ind Co Ltd | 侵入者検知装置 |
| JP2005323046A (ja) * | 2004-05-07 | 2005-11-17 | Omron Corp | 監視システム、および監視カメラ |
| JP2006527803A (ja) * | 2003-06-16 | 2006-12-07 | セクマナーゲメント ベスローテン フェンノートシャップ | 自動ドア開閉器に関連したセンサ装置、システムおよび方法 |
| JP2007122528A (ja) * | 2005-10-31 | 2007-05-17 | Hitachi Kokusai Electric Inc | ノード管理システム及びノード管理プログラム |
| JP2007226741A (ja) * | 2006-02-27 | 2007-09-06 | Mitsubishi Electric Corp | 顔照合システム |
| JP2007310464A (ja) * | 2006-05-16 | 2007-11-29 | Seiko Epson Corp | 監視カメラシステム及び監視カメラシステムの制御方法 |
| JP2008017464A (ja) * | 2006-06-07 | 2008-01-24 | Dainippon Printing Co Ltd | 監視カメラシステム、および、その方法 |
| JP2009282729A (ja) * | 2008-05-22 | 2009-12-03 | Mitsubishi Electric Building Techno Service Co Ltd | 入退室管理システム |
| US7995844B2 (en) | 2006-11-22 | 2011-08-09 | Canon Kabushiki Kaisha | Control apparatus, control method, and program for implementing the method |
| JP2011175347A (ja) * | 2010-02-23 | 2011-09-08 | Nec System Technologies Ltd | 情報処理装置および情報処理方法 |
| JP2011192140A (ja) * | 2010-03-16 | 2011-09-29 | Mitsubishi Electric Corp | 通行検知システム |
| KR101093215B1 (ko) | 2011-03-30 | 2011-12-12 | 리누딕스 주식회사 | 정확도가 개선된 인체감지장치 |
| CN103268652A (zh) * | 2013-05-17 | 2013-08-28 | 广东建邦计算机软件有限公司 | 基于居住证门卡的门禁监控系统及方法 |
| CN110428522A (zh) * | 2019-07-24 | 2019-11-08 | 青岛联合创智科技有限公司 | 一种智慧新城的智能安防系统 |
-
2001
- 2001-04-06 JP JP2001107897A patent/JP2002304651A/ja active Pending
Cited By (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003178311A (ja) * | 2002-10-25 | 2003-06-27 | Mitsubishi Electric Corp | リアルタイム表情追跡装置 |
| JP2004348407A (ja) * | 2003-05-22 | 2004-12-09 | Matsushita Electric Ind Co Ltd | 侵入者検知装置 |
| JP2006527803A (ja) * | 2003-06-16 | 2006-12-07 | セクマナーゲメント ベスローテン フェンノートシャップ | 自動ドア開閉器に関連したセンサ装置、システムおよび方法 |
| US8099902B2 (en) | 2003-06-16 | 2012-01-24 | Secumanagement B.V. | Sensor arrangements, systems and method in relation to automatic door openers |
| JP4820292B2 (ja) * | 2003-06-16 | 2011-11-24 | セクマナーゲメント ベスローテン フェンノートシャップ | 自動ドア開閉器に関連したセンサ装置、システムおよび方法 |
| JP4622301B2 (ja) * | 2004-05-07 | 2011-02-02 | オムロン株式会社 | 監視システム、および監視カメラ |
| JP2005323046A (ja) * | 2004-05-07 | 2005-11-17 | Omron Corp | 監視システム、および監視カメラ |
| JP2007122528A (ja) * | 2005-10-31 | 2007-05-17 | Hitachi Kokusai Electric Inc | ノード管理システム及びノード管理プログラム |
| JP2007226741A (ja) * | 2006-02-27 | 2007-09-06 | Mitsubishi Electric Corp | 顔照合システム |
| JP2007310464A (ja) * | 2006-05-16 | 2007-11-29 | Seiko Epson Corp | 監視カメラシステム及び監視カメラシステムの制御方法 |
| JP2008017464A (ja) * | 2006-06-07 | 2008-01-24 | Dainippon Printing Co Ltd | 監視カメラシステム、および、その方法 |
| US7995844B2 (en) | 2006-11-22 | 2011-08-09 | Canon Kabushiki Kaisha | Control apparatus, control method, and program for implementing the method |
| JP2009282729A (ja) * | 2008-05-22 | 2009-12-03 | Mitsubishi Electric Building Techno Service Co Ltd | 入退室管理システム |
| JP2011175347A (ja) * | 2010-02-23 | 2011-09-08 | Nec System Technologies Ltd | 情報処理装置および情報処理方法 |
| JP2011192140A (ja) * | 2010-03-16 | 2011-09-29 | Mitsubishi Electric Corp | 通行検知システム |
| KR101093215B1 (ko) | 2011-03-30 | 2011-12-12 | 리누딕스 주식회사 | 정확도가 개선된 인체감지장치 |
| WO2012134004A1 (ko) * | 2011-03-30 | 2012-10-04 | 리누딕스 주식회사 | 정확도가 개선된 인체감지장치 |
| CN103268652A (zh) * | 2013-05-17 | 2013-08-28 | 广东建邦计算机软件有限公司 | 基于居住证门卡的门禁监控系统及方法 |
| CN103268652B (zh) * | 2013-05-17 | 2016-04-13 | 广东建邦计算机软件有限公司 | 基于居住证门卡的门禁监控系统及方法 |
| CN110428522A (zh) * | 2019-07-24 | 2019-11-08 | 青岛联合创智科技有限公司 | 一种智慧新城的智能安防系统 |
| CN110428522B (zh) * | 2019-07-24 | 2021-04-30 | 青岛联合创智科技有限公司 | 一种智慧新城的智能安防系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7158657B2 (en) | Face image recording system | |
| EP1346577B1 (en) | Method and apparatus to select the best video frame to transmit to a remote station for cctv based residential security monitoring | |
| JP7108395B2 (ja) | 行動監視システム | |
| CN102004923B (zh) | 在监视系统中检测行动的方法和装置 | |
| EP1346328B1 (en) | Method and apparatus to reduce false alarms in exit/entrance situations for residential security monitoring | |
| JP5669082B2 (ja) | 照合装置 | |
| JP2002304651A (ja) | 入退室管理装置とその方法、およびこの方法の実行プログラムとこの実行プログラムを記録した記録媒体 | |
| CN101556717A (zh) | 一种atm智能安保系统及监测方法 | |
| US20040223629A1 (en) | Facial surveillance system and method | |
| RU2713876C1 (ru) | Способ и система выявления тревожных событий при взаимодействии с устройством самообслуживания | |
| CN104794827A (zh) | 用于避免监视系统中的假警报的方法和装置 | |
| JP2014191416A (ja) | サービス利用者確認装置 | |
| JP4862518B2 (ja) | 顔登録装置、顔認証装置および顔登録方法 | |
| JPH0535992A (ja) | 警報装置 | |
| CN112183167B (zh) | 考勤方法、认证方法、活体检测方法、装置及设备 | |
| KR20150112635A (ko) | 사람의 얼굴 정보를 이용한 얼굴인식 도어락 시스템 | |
| JP5621534B2 (ja) | 出入管理システム及び個人識別データ読取装置 | |
| JP2010182056A (ja) | パスワード入力装置及びパスワード照合システム | |
| CN113705428B (zh) | 活体检测方法及装置、电子设备及计算机可读存储介质 | |
| US20230222193A1 (en) | Information processing device, permission determination method, and program | |
| WO2022059151A1 (ja) | 顔認証方法、顔認証プログラム、および顔認証装置 | |
| CN114648829A (zh) | 智能门禁方法及系统 | |
| JP2007190076A (ja) | 監視支援システム | |
| JP5524250B2 (ja) | 異常行動検知装置、監視システム、異常行動検知方法及びプログラム | |
| KR101053474B1 (ko) | 출입통제시스템 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051124 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060516 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060620 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070116 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070703 |