JP2006059230A - Entrance/exit management system - Google Patents

Entrance/exit management system Download PDF

Info

Publication number
JP2006059230A
JP2006059230A JP2004242161A JP2004242161A JP2006059230A JP 2006059230 A JP2006059230 A JP 2006059230A JP 2004242161 A JP2004242161 A JP 2004242161A JP 2004242161 A JP2004242161 A JP 2004242161A JP 2006059230 A JP2006059230 A JP 2006059230A
Authority
JP
Japan
Prior art keywords
unit
face
image data
video
processing unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004242161A
Other languages
Japanese (ja)
Inventor
Nobuyuki Umetsu
信幸 梅津
Yoichi Tokunaga
洋一 徳永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ART KK
Art Inc Japan
Original Assignee
ART KK
Art Inc Japan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ART KK, Art Inc Japan filed Critical ART KK
Priority to JP2004242161A priority Critical patent/JP2006059230A/en
Publication of JP2006059230A publication Critical patent/JP2006059230A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Alarm Systems (AREA)
  • Image Analysis (AREA)
  • Lock And Its Accessories (AREA)
  • Collating Specific Patterns (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an entrance/exit management system which is reliable in spite of an inexpensive device, and can check incoming and outgoing persons at a later date. <P>SOLUTION: This system comprises an electric lock 2 provided on an opening and closing mechanism 1, an image acquisition part 5 and an identification information input part 6 provided on an unlocking instruction means 3 instructing unlocking of the electric lock 2, a face information determination processing part 10 provided on a control means 4 controlling the unlocking of the electric lock 2, an image storage part 15, an input information identification processing part 9, an output part 12 and a processing control part 8. The processing control part 8 has a function of determining, when the input information identification processing part 9 identifies input information, an image fetched to the image acquisition part 5 is a human face, and the face information determination processing part 10 determines that the ratio of flesh color in an area based on the position of the eye is a reference value or more, that the image is the human face to unlock the electric lock 2 through the output part 12, and a function of storing image data fetched from the acquisition part 5 to the image storage part 15. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

この発明は、建造物を出入する人の管理をする出入管理システムに関する。   The present invention relates to an entrance / exit management system for managing a person entering / exiting a building.

建造物への人の出入を管理するシステムは、従来からいろいろ提案されているが、その中で、建造物に出入する人の顔を識別し、その識別結果によって人の出入を許可するシステムが従来から知られている。このように人の顔を識別するのは、人の顔が最も個性化されたものであり、他人との識別手段として考えた場合に、その信頼性が最も高いからである。また、出入する人の顔を識別する過程でその顔を撮影し、当該建造物にどのような人が出入したかをチェックできるようにしている。
なお、建造物を出入する人の管理は、一般に行われていることであり、特に先行文献調査は行っていない。
Various systems for managing the entrance and exit of people to and from the building have been proposed. Among them, a system for identifying the face of a person entering and exiting the building and permitting people to enter and exit based on the identification result. Conventionally known. The reason why a person's face is identified in this way is that the person's face is the most personalized and has the highest reliability when considered as a means for identifying another person. In addition, the face is photographed in the process of identifying the face of the person going in and out so that it is possible to check what kind of person has entered and exited the building.
In addition, management of the person who goes in and out of the building is generally performed, and no prior literature search is performed.

上記のようにした従来のシステムでは、顔を映像化してそれを認識する装置がかなり高価なので、建造物によっては、そのような高価な装置を導入できない場合が出てくるという問題があった。
この発明の目的は、安価な装置でありながら信頼性が高く、しかも、後日、出入者のチェックもできる出入管理システムを提供することである。
In the conventional system as described above, a device for visualizing a face and recognizing the face is quite expensive. Therefore, there is a problem that such an expensive device cannot be introduced depending on a building.
An object of the present invention is to provide an entry / exit management system that is inexpensive and highly reliable, and that can also check an entry / exit at a later date.

第1の発明は、ドアなどの開閉機構に設けた電気錠と、この電気錠の解錠を指示する解錠指示手段と、この解錠指示手段から送信されてくる情報を認識したとき、この情報に基づいて電気錠の解錠制御をする制御手段とからなり、上記解錠指示手段には映像取得部および識別情報入力部を備え、上記制御手段には、映像取得部に取り込まれた映像からそれが人の顔であると判定する機能およびその目を基準にしたエリア内の肌色の割合が基準値を超えているか否かを判定する機能を備えた顔情報判定処理部と、映像取得部から取り込んだ画像データを記憶する映像記憶部と、識別情報入力部から入力された個人情報を識別する入力情報識別処理部と、電気錠を解錠制御する出力部と、上記顔情報判定処理部、入力情報識別処理部および出力部を制御する処理制御部とを備え、この処理制御部は、上記入力情報識別処理部が入力情報を識別するとともに、上記映像取得部に取り込まれた映像が人の顔であり、しかも、その目の位置を基準にしたエリア内の肌色の割合が基準値以上あると顔情報判定処理部が判定したときにそれを人の顔と判定し、上記出力部を介して電気錠を解錠する機能と、映像取得部から取り込んだ画像データを映像記憶部に記憶させる機能とを備えた点に特徴を有する。   When the first invention recognizes an electric lock provided in an opening / closing mechanism such as a door, an unlocking instruction means for instructing the unlocking of the electric lock, and information transmitted from the unlocking instruction means, Control means for controlling the unlocking of the electric lock based on the information, the unlocking instruction means includes a video acquisition unit and an identification information input unit, and the control means includes a video captured by the video acquisition unit. And a face information determination processing unit having a function for determining that it is a human face and a function for determining whether the ratio of the skin color in the area based on the eye exceeds a reference value, and video acquisition A video storage unit that stores image data captured from the input unit, an input information identification processing unit that identifies personal information input from the identification information input unit, an output unit that controls unlocking of the electric lock, and the face information determination process Section, input information identification processing section and output section A processing control unit that controls the input information identification processing unit to identify the input information, and the video captured by the video acquisition unit is a human face, and the eye A function in which when the face information determination processing unit determines that the skin color ratio in the area based on the position is equal to or greater than a reference value, it is determined as a human face, and the electric lock is unlocked via the output unit; Further, the present invention is characterized in that it has a function of storing the image data captured from the video acquisition unit in the video storage unit.

第2の発明は、ドア等の開閉機構を出入りする者が識別情報入力部を操作したとき、その操作をトリガーとして映像取得部を動作させる点に特徴を有する。   The second invention is characterized in that when a person entering / exiting an opening / closing mechanism such as a door operates the identification information input unit, the video acquisition unit is operated using the operation as a trigger.

第3の発明は、上記制御手段には、上記処理制御部に連繋する映像記録処理部と、この映像記録処理部に連繋した映像記憶部とを備え、映像記録処理部は、映像取得部を介してあらかじめ取り込んだ背景デジタル画像データと、その都度取り込んだ画像データとを対比して、それらデータ間の輝度差の有無を判定し、輝度差があるときに、映像取得部の前に新たな物体が存在すると判定する機能を備え、処理制御部は、顔情報判定処理部が映像取得部の前にある上記物体が人の顔形であるかどうかを判定するとともに顔形であると判定された映像における肌色の部分の割合が基準値以上に達したとき、入力情報識別処理部が識別した個人情報の条件、顔情報判定処理部が判定した人の顔形の条件および顔情報判定処理部が認識した肌色の割合条件のすべてを満足させたとき、出力部を介して電気錠を解錠する機能と、顔情報判定処理部が映像取得部から取り込まれた画像データが人の顔であると判定したとき、その画像データを映像記憶部に記憶させる構成にした点に特徴を有する。   According to a third aspect of the present invention, the control means includes a video recording processing unit linked to the processing control unit and a video storage unit linked to the video recording processing unit. The video recording processing unit includes a video acquisition unit. The background digital image data captured in advance is compared with the image data captured each time to determine whether there is a brightness difference between the data. When there is a brightness difference, a new image is displayed before the video acquisition unit. The processing control unit has a function of determining that an object exists, and the processing control unit determines whether the object in front of the image acquisition unit is a human face shape and determines that it is a face shape. When the ratio of the skin color portion in the video reaches a reference value or more, the personal information condition identified by the input information identification processing unit, the human face shape condition determined by the face information determination processing unit, and the face information determination processing unit Of skin color recognized by When all the conditions are satisfied, the function of unlocking the electric lock via the output unit, and when the face information determination processing unit determines that the image data captured from the video acquisition unit is a human face, It is characterized in that image data is stored in the video storage unit.

第4の発明は、上記顔情報判定処理部には顔情報記憶部を連繋するとともに、この顔情報記憶部には、映像取得部から取り込んだ画像データの座標を特定するための基準枠と人の顔形を特定する顔形パターンとをあらかじめ記憶させておき、顔情報判定処理部は、この基準枠をもとにして画像データの中心を特定する機能と、顔情報記憶部に記憶されている顔形パターンを引き出してその顔形パターンの中心と上記画像データの中心とを一致させる機能とを備えた点に特徴を有する。   According to a fourth aspect of the present invention, a face information storage unit is connected to the face information determination processing unit, and the face information storage unit includes a reference frame and a person for specifying the coordinates of image data captured from the video acquisition unit. The face shape pattern for specifying the face shape is stored in advance, and the face information determination processing unit is stored in the face information storage unit with a function for specifying the center of the image data based on the reference frame. It is characterized in that it has a function of extracting a face shape pattern and matching the center of the face shape pattern with the center of the image data.

第1の発明によれば、識別情報入力部から入力された個人情報が、あらかじめ記憶させている個人情報と一致したとしても、顔情報判定処理部が映像取得部に取り込まれた画像データが人の顔であると判定しないかぎり解錠されることはないので、セキュリティの精度が高いものになる。しかも、人の顔は、その個性を判定するのではなく、おおよその顔形を判定できればよいので、映像取得部を含めたシステム全体を安価にすることができる。
しかも、肌色の割合を基準にして解錠条件を決めているので、解錠した者の顔は、サングラスやマスクなどで顔を隠したものではなく、それこそ素顔となる。しかも、この素顔を画像データとして映像記憶部に記憶しておけるので、後日の検証に役立てることができる。
According to the first invention, even if the personal information input from the identification information input unit matches the personal information stored in advance, the image data acquired by the video information acquisition unit by the face information determination processing unit is human. Since it is not unlocked unless it is determined that the face is, the security accuracy is high. In addition, since it is only necessary to determine the approximate face shape of a person's face instead of determining its individuality, the entire system including the video acquisition unit can be made inexpensive.
Moreover, since the unlocking conditions are determined based on the ratio of the skin color, the unlocked person's face is not a hidden face with sunglasses or a mask, but is a real face. In addition, since this face can be stored as image data in the video storage unit, it can be used for later verification.

第2の発明によれば、識別情報入力部の操作をトリガーとして映像取得部を動作させるようにしたので、映像取得部と被写体である人の顔との距離をある程度特定することができる。つまり、識別情報入力部の操作をトリガーとして映像取得部を動作させる構造においては、映像取得部と人の顔との最大距離は人の腕の長さになる。したがって、大人の腕の長さを基準にして、映像取得部の焦点距離を定めておけば、それほど大きくピンぼけした映像になることはない。   According to the second aspect of the invention, since the video acquisition unit is operated using the operation of the identification information input unit as a trigger, the distance between the video acquisition unit and the face of the person who is the subject can be specified to some extent. That is, in the structure in which the video acquisition unit is operated using the operation of the identification information input unit as a trigger, the maximum distance between the video acquisition unit and the human face is the length of the person's arm. Therefore, if the focal length of the image acquisition unit is determined based on the length of the arm of an adult, the image will not be so out of focus.

第3の発明によれば、3つの条件を満足させたとき、解錠条件が充足されたと判定するので、個人を識別する情報だけで解錠条件を判定する場合よりも、その精度が向上することになる。しかも、開閉機構から出入りする者は、サングラスやマスクを外さなければ、解錠条件を満足させることができないので、自らの顔を隠すことを目的にして、意識的にサングラスやマスクをしている者に対しては、それを外させるためのプレッシャーをかけることができる。また、電気錠を解錠して室内に入った者は、サングラスやマスクをしていない素顔映像が映像記憶部に記憶されているので、事後的にでも、開閉機構から入った者をチェックすることができる。   According to the third invention, when the three conditions are satisfied, it is determined that the unlocking condition is satisfied. Therefore, the accuracy is improved as compared with the case where the unlocking condition is determined only by the information for identifying the individual. It will be. In addition, those who come in and out of the opening and closing mechanism cannot satisfy the unlocking conditions unless they remove their sunglasses and masks, so they are consciously wearing sunglasses and masks to hide their faces. The person can be pressured to remove it. In addition, those who enter the room after unlocking the electric lock are stored in the video storage unit, so they can check who has entered from the opening / closing mechanism even after the fact. be able to.

第4の発明によれば、基準枠をもとにして取り込んだ画像データの中心と、顔形パターンの中心とを一致させて、画像データが顔形であるかどうかを判定できるので、その判定精度が向上する。 According to the fourth invention, it is possible to determine whether the image data is a face shape by matching the center of the image data captured based on the reference frame with the center of the face shape pattern. Accuracy is improved.

図1は、この発明の出入管理システムの実施形態を示したものである。
このシステムは、図1のブロック図に示すように、この発明の開閉機構であるドア1と、このドア1に設けられた電気錠2と、この電気錠の解錠を指示する解錠指示手段3と、電気錠の解錠制御をする制御手段4とからなる。
FIG. 1 shows an embodiment of an access control system of the present invention.
As shown in the block diagram of FIG. 1, this system includes a door 1 as an opening / closing mechanism of the present invention, an electric lock 2 provided on the door 1, and an unlocking instruction means for instructing the unlocking of the electric lock. 3 and control means 4 for controlling the unlocking of the electric lock.

図1に示したように、ドア1に設けた電気錠2は制御手段4に接続しているが、この制御手段4は、ドア1の外部に設置した解錠指示手段3にも接続している。
制御手段4は、通常、ビルの管理人室や、警備会社のセンター等、個別のドア1から離れた場所に設置され、通信ケーブルや無線等によって1または2以上の解錠指示手段3および電気錠2に接続している。そして、1つの制御手段4によって、1または2以上のドア1の出入管理を行う。
As shown in FIG. 1, the electric lock 2 provided on the door 1 is connected to the control means 4, but this control means 4 is also connected to the unlocking instruction means 3 installed outside the door 1. Yes.
The control means 4 is usually installed in a place away from the individual door 1 such as a building manager's room or a security company center, and one or more unlocking instruction means 3 and electric by means of a communication cable or radio. Connected to lock 2. Then, one control means 4 performs entrance / exit management of one or more doors 1.

解錠指示手段3は、図1に示すように、映像取得部5、識別情報入力部6、音声出力部7を備えている。   As shown in FIG. 1, the unlocking instruction unit 3 includes a video acquisition unit 5, an identification information input unit 6, and an audio output unit 7.

映像取得部5は、例えば、カメラやビデオ等であり、ドア1から入ろうとする人の顔の映像を取り込むものである。なお、このカメラ等のレンズは、ドアの外部にいる人に直ちに認識できるように目立つものであることが望ましい。なぜなら、この実施形態が、出入者に映像取得部であるカメラ等の前に積極的に立ってもらって、その映像を取得することを目的にしているからである。   The video acquisition unit 5 is, for example, a camera or a video, and takes in a video of the face of a person trying to enter through the door 1. It is desirable that the lens of this camera or the like is conspicuous so that it can be immediately recognized by a person outside the door. This is because the purpose of this embodiment is to have an inbound / outbound person actively stand in front of a camera or the like as a video acquisition unit and acquire the video.

識別情報入力部6は、例えば、テンキーであり、ドア1の外部から内部に入ろうとする人が、自己を特定するためのID等を入力する。この識別情報入力部6には、図2に示したように、0〜9の数字キーと、誤入力を訂正するためのクリアキーCと、入力終了情報を制御手段4に送信するためのエンターキーEとを備えている。なお、エンターキーEが押されたことをトリガーとして、数字キーから入力された内容が、制御手段4へ送信される構成にしている。   The identification information input unit 6 is, for example, a numeric keypad, and a person who wants to enter the inside from the outside of the door 1 inputs an ID or the like for identifying himself / herself. As shown in FIG. 2, the identification information input unit 6 includes numeric keys 0 to 9, a clear key C for correcting erroneous input, and an enter for transmitting input end information to the control means 4. Key E. Note that the content input from the numeric keys is transmitted to the control means 4 when the enter key E is pressed as a trigger.

なお、上記映像取得部5は、テンキーなどの識別情報入力部6が操作されたとき、それをトリガーにして映像取得機能を発揮する構成にしている。そして、この映像取得部5が取り込んだ映像は、制御手段4へ送信される。   The video acquisition unit 5 is configured to exhibit a video acquisition function when the identification information input unit 6 such as a numeric keypad is operated. Then, the video captured by the video acquisition unit 5 is transmitted to the control means 4.

また、上記識別情報入力部6は、人が意図して識別情報を入力でき、かつ、その識別情報に基づいて個人を特定できるものであれば、どのような形態でもかまわない。例えば、磁気カードやICカード等を読みとる手段でもあってよいし、場合によっては指紋などの生体情報を読みとる手段でもよい。要するに、映像以外の識別情報であればどのようなものでもかまわない。そして、上記のようにカードを読みとる構成にしたときには、それらの情報を読みとったとき、その情報を制御手段4へ送信すればよい。   The identification information input unit 6 may be in any form as long as a person can intentionally input identification information and can identify an individual based on the identification information. For example, a means for reading a magnetic card, an IC card, or the like may be used, and a means for reading biological information such as a fingerprint may be used depending on circumstances. In short, any identification information other than video may be used. And when it is set as the structure which reads a card | curd as mentioned above, what is necessary is just to transmit the information to the control means 4, when those information is read.

音声出力部7は、例えば、スピーカや電子的な音声出力デバイス等であり、制御手段4からの誘導メッセージやエラーメッセージ等が出力される。   The audio output unit 7 is, for example, a speaker or an electronic audio output device, and outputs a guidance message, an error message, or the like from the control unit 4.

制御手段4は、処理制御部8、入力情報識別処理部9、顔情報判定処理部10、映像記録処理部11および出力部12を備えている。さらに、入力情報識別処理部9には識別情報記憶部13が連繋し、顔情報判定処理部10には顔情報記憶部14が連繋し、映像記録処理部11には映像記憶部15が連繋している。   The control unit 4 includes a processing control unit 8, an input information identification processing unit 9, a face information determination processing unit 10, a video recording processing unit 11, and an output unit 12. Further, an identification information storage unit 13 is linked to the input information identification processing unit 9, a face information storage unit 14 is linked to the face information determination processing unit 10, and a video storage unit 15 is linked to the video recording processing unit 11. ing.

入力情報識別処理部9は、解錠指示手段3の識別情報入力部6から送信されてきたID等の個人を特定する情報が、このシステムによってドア1から入ることを許容されている人のID等であるか否かを判定する。つまり、この入力情報識別処理部9は、識別情報記憶部13と接続されており、送信された情報が、識別情報記憶部13に予め格納されているID等と一致するかを照合する。   The input information identification processing unit 9 is an ID of a person who is allowed to enter information identifying an individual such as an ID transmitted from the identification information input unit 6 of the unlocking instruction means 3 through the door 1 by this system. And so on. That is, the input information identification processing unit 9 is connected to the identification information storage unit 13 and collates whether the transmitted information matches an ID or the like stored in advance in the identification information storage unit 13.

顔情報判定処理部10は、解錠指示手段3の映像取得部5から送信されてきた映像データが、人間の顔形を表すものであるか否かを判定する。なお、映像取得部5が取り込んだ映像は、デジタル画像データとして制御手段4に送信される。ここで、人の顔か否かの判定を行うための画像認識の方法は、特に問わないが、例えば、次のような方法が考えられる。   The face information determination processing unit 10 determines whether or not the video data transmitted from the video acquisition unit 5 of the unlocking instruction unit 3 represents a human face shape. The video captured by the video acquisition unit 5 is transmitted to the control unit 4 as digital image data. Here, the image recognition method for determining whether or not a person is a face is not particularly limited. For example, the following method is conceivable.

上記映像取得部5で背景以外は何も映っていない映像を撮影しておき、これを背景デジタル画像データとして制御手段4の処理制御部8を介して映像記録処理部11に送信するとともに、映像記録処理部11は、上記背景デジタル画像データを映像記憶部15にあらかじめ記憶させておく。そして、映像取得部5が撮影した映像が、上記したあらかじめ記憶された背景デジタル画像データとの間に輝度差があるかどうかを映像記録処理部11が判定する。もし、その間に輝度差が有れば、映像記録処理部11は、映像取得部5の前に上記したあらかじめ記憶された背景デジタル画像データにはない新たな物体が存在するものと判定する。つまり、背景以外に何も移っていない写真と、背景とそれ以外のものが写っている写真とでは、当然のこととして、それらの映像間で輝度差が生じることになるので、映像記録処理部11は、上記輝度差によってあらかじめ記憶した背景デジタル画像データに別の物体が加わっていると認識するとともに、その認識結果を処理制御部8に送信する。   The video acquisition unit 5 captures a video showing nothing other than the background, and transmits the video as background digital image data to the video recording processing unit 11 via the processing control unit 8 of the control unit 4. The recording processing unit 11 stores the background digital image data in the video storage unit 15 in advance. Then, the video recording processing unit 11 determines whether there is a luminance difference between the video captured by the video acquisition unit 5 and the previously stored background digital image data. If there is a luminance difference between them, the video recording processing unit 11 determines that there is a new object that is not included in the previously stored background digital image data before the video acquisition unit 5. In other words, since there is a difference in brightness between the picture that has not moved other than the background and the picture that has the background and the rest, the video recording processing unit 11 recognizes that another object is added to the background digital image data stored in advance based on the luminance difference, and transmits the recognition result to the processing control unit 8.

一方、顔情報記憶部14には、複数の顔形パターンと、基準枠とが記憶されている。この顔形パターンは、男性・女性別に角型、丸型等の顔型だけでなく、髪型も考慮して用意する。また、上記基準枠は、映像取得部5で取得した画像データの顔の部分におけるX−Y座標を特定するとともに、その中心を定めるためのものである。   On the other hand, the face information storage unit 14 stores a plurality of face shape patterns and a reference frame. This face pattern is prepared considering not only the face shape such as the square shape and the round shape but also the hair style for each man and woman. The reference frame is for specifying the XY coordinates in the face portion of the image data acquired by the video acquisition unit 5 and determining the center thereof.

そして、上記処理制御部8は、上記した画像データにおける輝度差があるという認識結果を得たときには、顔情報判定処理部10を動作させて、顔情報記憶部14に記憶されている基準枠を検出するとともに、その検出した基準枠を上記輝度差が出た箇所に合わせ、その輝度差が出た箇所の座標を特定する。さらに、顔情報判定処理部10は、基準枠で座標を特定した輝度差が出た箇所における肌色のエリアを検出するとともに、上記基準枠に基づいて肌色のエリアの中心座標を求める。このようにして肌色のエリアの中心が特定されたら、顔情報判定処理部10は、顔情報記憶部14に格納された顔形パターンを検出して、その顔形パターンの中心を、映像取得部5で取得した肌色のエリアの中心に一致させ、両者が近似しているかどうかを判定する。もし、近似していれば、顔情報判定処理部10は、解錠指示手段3の映像取得部5から送信された画像データが人の顔形を表すものと判定し、映像取得部5の前に人が立っているものと認識する。それらが一致していなければ、顔情報判定処理部10は、その画像データが人の顔ではないと判定し、解錠を指示するプロセスを止める。   When the processing control unit 8 obtains the recognition result that there is a luminance difference in the image data, the processing control unit 8 operates the face information determination processing unit 10 to set the reference frame stored in the face information storage unit 14. In addition to the detection, the detected reference frame is matched with the location where the luminance difference has occurred, and the coordinates of the location where the luminance difference has occurred are specified. Further, the face information determination processing unit 10 detects the skin color area at the location where the luminance difference specified by the reference frame is specified, and obtains the center coordinate of the skin color area based on the reference frame. When the center of the skin color area is specified in this way, the face information determination processing unit 10 detects the face shape pattern stored in the face information storage unit 14 and determines the center of the face shape pattern as the video acquisition unit. Match the center of the flesh-colored area acquired in 5, and determine whether or not they are approximate. If it is approximated, the face information determination processing unit 10 determines that the image data transmitted from the video acquisition unit 5 of the unlocking instruction unit 3 represents a human face shape. Recognize that the person is standing. If they do not match, the face information determination processing unit 10 determines that the image data is not a human face, and stops the process of instructing unlocking.

また、上記基準枠は、その大きさを一定にしているが、それは、カメラ等の映像取得部5と被写体との距離がそれほど大きく異ならないことを前提にしているからである。つまり、被写体である人は、例えばテンキー等の識別情報入力部6を操作するので、映像取得部5と被写体との距離は、最大で人の腕の長さを想定することができる。しかも、その腕を伸ばしきった状態で、上記識別情報入力部6を操作することは考えられないので、映像取得部5と被写体との距離も、ある程度特定することが可能である。このように映像取得部5と被写体との距離がある程度特定されれば、映像取得部5における顔の大きさもそれほど変わらないので、上記のように基準枠の大きさを一定にしても不都合はない。   The reference frame has a constant size because it is based on the premise that the distance between the video acquisition unit 5 such as a camera and the subject is not so different. That is, since the person who is the subject operates the identification information input unit 6 such as a numeric keypad, the distance between the video acquisition unit 5 and the subject can be assumed to be the length of the person's arm at the maximum. In addition, since it is impossible to operate the identification information input unit 6 with its arms fully extended, the distance between the video acquisition unit 5 and the subject can be specified to some extent. If the distance between the video acquisition unit 5 and the subject is specified to some extent in this way, the size of the face in the video acquisition unit 5 does not change so much, so there is no problem even if the size of the reference frame is constant as described above. .

さらに、この実施形態では、被写体のピントが多少ずれていても、おおざっぱに顔形を判定できればよいので、基準枠が被写体の顔の部分にぴったり一致する必要もない。このようなことを前提にしつつ、おおざっぱに顔形であると判定されたその画像データの中心を特定するようにしている。ただし、後で詳しく説明するが、映像取得部5で取得した画像データのすべては、映像記憶部15に記憶させ、後日、誰が出入りしたかを検証できるようにしている。したがって、この画像データは、おおよそ誰かを特定できる程度であればよいので、多少のピンぼけはそれほど問題にならないが、いずれにしても、取り込む画像データは、ピントがぴったり合っていなくてもよく、また、上記中心もおおよその位置が特定されれば十分である。   Furthermore, in this embodiment, even if the subject is slightly out of focus, it is only necessary to roughly determine the face shape, so the reference frame does not have to exactly match the face portion of the subject. Based on this premise, the center of the image data that is roughly determined to be a face shape is specified. However, as will be described in detail later, all of the image data acquired by the video acquisition unit 5 is stored in the video storage unit 15 so that it is possible to verify who went in and out at a later date. Therefore, this image data only needs to be able to identify someone roughly, so a slight blur does not matter so much, but in any case, the captured image data may not be in focus, It is sufficient if the approximate position of the center is specified.

上記のようにして人の顔形であるということが認識されたら、顔情報判定処理部10は、上記顔形パターンをもとにして、その顔形における2つの目の位置を特定するとともに、その目の周辺のエリアを特定する。このように目の周辺のエリアを特定したら、顔情報判定処理部10は、当該エリア内で肌色が占める割合を算出するとともに、このエリア内の肌色の割合が、顔情報記憶部14にあらかじめ記憶させている基準値を超えているかを判定する。もし、その基準値を超えているときには、顔情報判定処理部10は、取り込んだ画像データがサングラスやマスクなどを使用していない正規の顔情報であると判定する。肌色の部分が上記基準値を下回れば、取り込んだ画像データがサングラスやマスクなどを使用している不正な顔情報であると判定する。   When it is recognized that it is a human face shape as described above, the face information determination processing unit 10 specifies the positions of the two eyes in the face shape based on the face shape pattern, Identify the area around the eye. When the area around the eyes is specified in this way, the face information determination processing unit 10 calculates the ratio of the skin color in the area and stores the ratio of the skin color in the area in the face information storage unit 14 in advance. It is judged whether it exceeds the standard value. If the reference value is exceeded, the face information determination processing unit 10 determines that the captured image data is regular face information that does not use sunglasses or a mask. If the skin color portion falls below the reference value, it is determined that the captured image data is incorrect face information using sunglasses or a mask.

一方、上記のように映像取得部5で取り込んだすべての画像データは、映像記録処理部11にも送られるとともに、この映像記録処理部11は、送られてきた画像データを映像記憶部15に記憶させる。その際、日時や前記した入力情報識別処理部9によって照合されたID等も併せて保存してもよい。ここで、画像データは、データサイズが大きいので圧縮してから保存すればよいことは当然である。   On the other hand, all the image data captured by the video acquisition unit 5 as described above is also sent to the video recording processing unit 11, and the video recording processing unit 11 sends the sent image data to the video storage unit 15. Remember. At that time, the date and time, the ID collated by the input information identification processing unit 9 and the like may be stored together. Here, since the image data has a large data size, it is natural that the image data may be stored after being compressed.

なお、この画像データは、ドア1から入ろうとする人の顔を撮影した画像をデジタルデータ化したもので、この画像データの段階では当人の顔をある程度識別できる必要がある。つまり、顔情報判定処理部10では、ただ単に人の顔らしいということが判定できればよいが、画像データそのものは、後日、誰が出入りしたかを検証するために使用するので、人の顔を識別できる程度に撮影されたものが必要となる。ただし、撮影された画像データはそのピントがぴったり合っている必要はない。なぜなら、その画像データをもとにして出入したのが誰なのかをある程度特定できればよいからである。その意味で、映像取得部5は、前記した顔形判定も含めてそれほど精巧なものでなくてもよい。この点が、安価な出入管理システムを提供できる要因になっている。   Note that this image data is a digital image of an image obtained by photographing the face of a person trying to enter through the door 1, and it is necessary to identify the person's face to some extent at the stage of this image data. In other words, the face information determination processing unit 10 only needs to be able to determine that it is likely to be a human face, but the image data itself is used to verify who entered and exited later, so that the human face can be identified. What was filmed to the extent is required. However, the captured image data does not need to be in focus. This is because it suffices if it is possible to identify to some extent who has entered and exited based on the image data. In that sense, the video acquisition unit 5 does not have to be so sophisticated, including the face shape determination described above. This is a factor that can provide an inexpensive access control system.

処理制御部8は、制御手段4によって行われる各種処理の制御を行う。解錠指示手段3の映像取得部5から画像データが送信されたとき、処理制御部8は、顔情報判定処理部10に当該画像データの判定をさせ、映像記録処理部11には当該データの記録をさせる。   The process control unit 8 controls various processes performed by the control unit 4. When image data is transmitted from the video acquisition unit 5 of the unlocking instruction unit 3, the processing control unit 8 causes the face information determination processing unit 10 to determine the image data, and the video recording processing unit 11 stores the data of the data. Make a record.

また、解錠指示手段3の識別情報入力部6からID等が送信されたときは、処理制御部8は、入力情報識別処理部9にID等の照合をさせる。つまり、処理制御部8は、制御手段4の一切の処理を制御するものであり、顔情報判定処理部10や入力情報識別処理部9等は制御手段4が行う処理を分担していることになる。   Further, when an ID or the like is transmitted from the identification information input unit 6 of the unlocking instruction means 3, the process control unit 8 causes the input information identification processing unit 9 to collate the ID or the like. That is, the process control unit 8 controls all processes of the control unit 4, and the face information determination processing unit 10 and the input information identification processing unit 9 share the processing performed by the control unit 4. Become.

そして、処理制御部8は、画像データの判定処理の結果、それを顔と判定できなかったり、2つの目を中心にしたエリア内に基準値以上の肌色がなかったり、あるいはIDを照合処理した結果、それが一致していなかったりしたとき、解錠指示手段3の音声出力部7を介して、そのドア1から入ろうとする人に、その旨を、伝えるようにしている。例えば、人の顔を判定できないときには、顔を映像取得部5の前に正確に位置させるように、処理制御部8が音声出力部7を介してアナウンスする処理を実行する。また、2つの目を中心にしたエリア内に基準値以上の肌色がなかったときには、例えばサングラスを外してからもう一度映像取得部5による撮影をやり直すようにアナウンスする。さらに、IDが一致していないときには、処理制御部8が音声出力部7を介してテンキーの入力ミスあるいはカードの間違い等をアナウンスする処理を実行する。   Then, as a result of the determination process of the image data, the process control unit 8 cannot determine it as a face, or there is no skin color exceeding the reference value in the area centered on the second eye, or the ID is collated. As a result, when they do not coincide with each other, the voice output unit 7 of the unlocking instruction means 3 is informed to that person through the door 1. For example, when a person's face cannot be determined, the process control unit 8 performs a process of announcement via the audio output unit 7 so that the face is accurately positioned in front of the video acquisition unit 5. Also, when there is no skin color that exceeds the reference value in the area centered on the second eye, for example, it is announced that the image acquisition unit 5 should try again after removing the sunglasses. Further, when the IDs do not match, the process control unit 8 executes a process of announcing a numeric keypad input error or a card error via the audio output unit 7.

また、処理制御部8は、入力情報識別処理部9がID等の入力情報があらかじめ登録した識別情報と一致すると判定し、かつ、顔情報判定処理部10が、入力した画像が人の顔を表すもので、しかもサングラスなどをかけていないと判定したとき、出力部12に対し、電気錠2の解錠を行うように指示する。なお、出力部12は、例えば、電気錠2の図示しないソレノイドに対して、それを制御する信号等を送信する。   Further, the processing control unit 8 determines that the input information identification processing unit 9 matches the input information such as the ID with the previously registered identification information, and the face information determination processing unit 10 determines that the input image is a human face. When it is determined that sunglasses are not worn, the output unit 12 is instructed to unlock the electric lock 2. In addition, the output part 12 transmits the signal etc. which control it with respect to the solenoid which is not shown in figure of the electric lock 2, for example.

さらにまた、当該処理制御部8は、上記のように出力部12に対し電気錠2の解錠を指示すると同時に、映像記録処理部11に対し、映像取得部5で取得した顔の画像のデータを映像記憶部15に記憶するように指示するとともに、映像記憶部15はその画像データを記憶する。また、このように映像記憶部15に記憶された画像データは、処理制御部8および出力部12を介してディスプレイ16に表示させることができる。なお、この実施形態では、一定の条件、すなわち、ID等の識別情報が正規のもので、しかも、人の顔であって、サングラスなどをかけていないという条件が満足されれば、電気錠2を解錠するようにしている。したがって、従来のように個人の顔を正確に認識して電気錠2を解錠するかどうかを決めるのとは全く異なる。つまり、この実施形態では、上記の条件を満たす限り、すべて正当の人の出入と判定し、それ以後は、出入者の画像データをチェックできるようにして出入者を管理するようにしている。   Furthermore, the processing control unit 8 instructs the output unit 12 to unlock the electric lock 2 as described above, and at the same time, the video image processing unit 11 acquires facial image data acquired by the video acquisition unit 5. Is stored in the video storage unit 15, and the video storage unit 15 stores the image data. Further, the image data stored in the video storage unit 15 in this way can be displayed on the display 16 via the processing control unit 8 and the output unit 12. In this embodiment, the electric lock 2 is satisfied if certain conditions are satisfied, that is, identification information such as an ID is regular, and a person's face is not wearing sunglasses or the like. To unlock. Therefore, it is completely different from the conventional method of accurately recognizing an individual's face and deciding whether or not to unlock the electric lock 2. That is, in this embodiment, as long as the above conditions are satisfied, it is determined that all of the legitimate persons are in and out, and thereafter, the in / out persons are managed so that the image data of the in / out persons can be checked.

次に、この実施形態の作用を説明する。
例えば、電気錠2を設けたドア1から室内に入ろうとする人は、先ず識別情報入力部6を操作して、個人の識別情報を入力する。このように識別情報入力部6から個人情報が入力されると、その個人情報は処理制御部8から入力情報識別処理部9に送られるとともに、入力情報識別処理部9は入力された個人情報が、識別情報記憶部13にあらかじめ記憶された個人情報と一致するかどうかを判定し、その判定結果を処理制御部8に伝達する。処理制御部8は、その判定の結果が不一致ということであれば、音声出力部7を介してその不一致である旨のアナウンスをさせるとともに、再入力のアナウンスもさせる。そして、所定回数以上再入力を繰り返しても、上記個人情報が一致しないときには、その後、解錠のための動作はしない。
Next, the operation of this embodiment will be described.
For example, a person who wants to enter the room through the door 1 provided with the electric lock 2 first operates the identification information input unit 6 to input personal identification information. When personal information is input from the identification information input unit 6 as described above, the personal information is sent from the processing control unit 8 to the input information identification processing unit 9, and the input information identification processing unit 9 receives the input personal information. Then, it is determined whether or not it matches the personal information stored in advance in the identification information storage unit 13, and the determination result is transmitted to the process control unit 8. If the result of the determination is a mismatch, the process control unit 8 makes an announcement to the effect of the mismatch via the audio output unit 7 and also makes a re-input announcement. If the personal information does not match even if the re-input is repeated a predetermined number of times or more, the unlocking operation is not performed thereafter.

また、上記のように識別情報入力部6から個人情報が入力されたときには、上記した個人情報の照合プロセスと平行して、顔の判定とその顔写真の取り込みプロセスが進行する。すなわち、上記のように識別情報入力部6が操作されたら、それをトリガーとして映像取得部5が動作する。そして、映像取得部5はその撮影した画像データを、処理制御部8に送るとともに、この画像データを受けた処理制御部8は、映像記録処理部11を動作させ、映像記憶部15にあらかじめ記憶された背景デジタル画像データと、映像取得部5から送られてきた画像データとの輝度差の有無を判定させる。そして、その間に輝度差が有れば、映像記録処理部11は、映像取得部5の前に、新たな物体が存在するものと認識するとともに、その認識結果を処理制御部8に送信する。もし、映像取得部5の前に、新たな物体が存在するという認識が得られないときには、映像を取得するためのプロセスはその時点で停止される。   When personal information is input from the identification information input unit 6 as described above, a face determination process and a face photograph capturing process proceed in parallel with the personal information collation process described above. That is, when the identification information input unit 6 is operated as described above, the video acquisition unit 5 operates using it as a trigger. The video acquisition unit 5 sends the captured image data to the processing control unit 8, and the processing control unit 8 that has received the image data operates the video recording processing unit 11 and stores it in the video storage unit 15 in advance. The presence / absence of a luminance difference between the background digital image data and the image data sent from the video acquisition unit 5 is determined. If there is a luminance difference between them, the video recording processing unit 11 recognizes that a new object exists before the video acquisition unit 5 and transmits the recognition result to the processing control unit 8. If the recognition that a new object exists is not obtained before the video acquisition unit 5, the process for acquiring the video is stopped at that time.

上記のように識別情報入力部6から個人情報が入力されているにもかかわらず、映像取得部5から取り込んだ映像に輝度差が判別できないときには、次の場合が考えられる。すなわち第1の場合としては、正当な人が、うっかりして映像取得部5から外れたところに顔を位置させているか、あるいは映像取得部5が存在することを知らなかった場合である。第2の場合として、ドロボー等の不正侵入者が、映像取得部5の撮影範囲から故意に顔をはずしている場合である。   If the luminance difference cannot be determined in the video captured from the video acquisition unit 5 even though the personal information is input from the identification information input unit 6 as described above, the following cases can be considered. In other words, the first case is a case where a legitimate person has inadvertently placed his / her face away from the video acquisition unit 5 or did not know that the video acquisition unit 5 exists. The second case is a case where an unauthorized intruder such as a thief deliberately removes his face from the shooting range of the video acquisition unit 5.

上記のように映像取得部5から取り込んだ映像に輝度差が判別できないときには、処理制御部8は音声出力部7を介して、解錠指示手段3の前にいる人に、映像取得部5の前に立つように誘導メッセージを出力する。この誘導メッセージは、上記した第1の場合の正当な人に対しては、映像取得部5の撮影範囲内に顔をもってくることを促すことになり、第2の場合である不正侵入者に対しては、上記音声メッセージを出力することによって、自分の顔の写真が撮影されなければ解錠されないことが分かり、それだけで十分な犯罪抑止効果を期待できる。   When the luminance difference cannot be determined in the video captured from the video acquisition unit 5 as described above, the process control unit 8 notifies the person in front of the unlocking instruction unit 3 via the audio output unit 7 of the video acquisition unit 5. Output a guidance message to stand in front. This guidance message prompts the legitimate person in the first case to bring a face within the shooting range of the video acquisition unit 5, and to the unauthorized intruder in the second case. By outputting the above voice message, it can be understood that the image cannot be unlocked unless a picture of his / her face is taken.

そして、映像取得部5の前に新たな物体が存在するという認識結果が得られたら、処理制御部8が顔情報判定処理部10を動作させて、顔情報記憶部14に記憶されている基準枠を検出するとともに、その検出された基準枠を上記輝度差が出た箇所に合わせて、その輝度差が出た箇所の座標を特定する。さらに、顔情報判定処理部10は、基準枠で座標を特定した輝度差が出た箇所における肌色のエリアを検出するとともに、上記基準枠に基づいて肌色のエリアの中心座標を求める。このようにして肌色のエリアの中心が特定されたら、顔情報判定処理部10は、顔情報記憶部14に格納されたパターンを検出して、そのパターンの中心を、映像取得部5で取得した肌色のエリアの中心に一致させ、両者が近似しているかどうかを判定する。もし、近似していれば、映像取得部5から送信された画像データが人の顔形を表すものと判定し、映像取得部5の前に人が立っているものと認識する。それらが一致していなければ、顔情報判定処理部10は、その画像データが人の顔ではないと判定し、解錠を指示するプロセスを止めるとともに、その画像データを顔情報記憶部14に記憶させることはしない。   When a recognition result indicating that a new object exists before the image acquisition unit 5 is obtained, the processing control unit 8 operates the face information determination processing unit 10 to store the reference stored in the face information storage unit 14. A frame is detected, and the detected reference frame is matched with the location where the brightness difference has occurred, and the coordinates of the location where the brightness difference has occurred are specified. Further, the face information determination processing unit 10 detects the skin color area at the location where the luminance difference specified by the reference frame is specified, and obtains the center coordinate of the skin color area based on the reference frame. When the center of the skin color area is specified in this way, the face information determination processing unit 10 detects the pattern stored in the face information storage unit 14 and acquires the center of the pattern by the video acquisition unit 5. It is made to coincide with the center of the skin color area, and it is determined whether or not they are approximate. If they are approximate, it is determined that the image data transmitted from the video acquisition unit 5 represents a human face, and it is recognized that a person is standing in front of the video acquisition unit 5. If they do not match, the face information determination processing unit 10 determines that the image data is not a human face, stops the process of instructing unlocking, and stores the image data in the face information storage unit 14. Don't let it go.

上記のように映像取得部5から取得した画像データが、人の顔情報であると、顔情報判定処理部10が判定したときには、顔情報判定処理部10は、上記顔形パターンをもとにして、その顔形における2つの目の位置を特定するとともに、その目の周辺のエリアを特定する。このように目の周辺のエリアを特定したら、顔情報判定処理部10は、当該エリア内で肌色が占める割合を算出するとともに、このエリア内の肌色の割合が、顔情報記憶部14にあらかじめ記憶されている基準値を超えているかを判定する。その基準値を超えていれば、顔情報判定処理部10は、取り込んだ画像データがサングラスやマスクなどを使用していない正規の顔情報であると判定する。肌色の部分が上記基準値を下回れば、取り込んだ画像データがサングラスやマスクなどを使用している不正な顔情報であると判定する。   When the face information determination processing unit 10 determines that the image data acquired from the video acquisition unit 5 as described above is human face information, the face information determination processing unit 10 uses the face shape pattern as a basis. Then, the position of the two eyes in the face shape is specified, and the area around the eyes is specified. When the area around the eyes is specified in this way, the face information determination processing unit 10 calculates the ratio of the skin color in the area and stores the ratio of the skin color in the area in the face information storage unit 14 in advance. It is judged whether it exceeds the standard value. If the reference value is exceeded, the face information determination processing unit 10 determines that the captured image data is regular face information that does not use sunglasses or a mask. If the skin color portion falls below the reference value, it is determined that the captured image data is incorrect face information using sunglasses or a mask.

そして、処理制御部8は、識別情報入力部6から入力された個人情報が、識別情報記憶部13にあらかじめ記憶された個人情報と一致し、しかも、取り込んだ画像データが、サングラスやマスクなどをしていない人の顔であると判定したとき、出力部12を介して電気錠2を解錠させる。つまり、個人情報が一致しているという条件、画像データが人の顔であるという条件、およびその画像データの人の顔にサングラスやマスク等がされていないという条件の3つの条件が満足されたとき、処理制御部8が電気錠2を解錠する。これら3つの条件の一つでも満たしていなければ、処理制御部8は電気錠2を解錠しない。   Then, the processing control unit 8 matches the personal information input from the identification information input unit 6 with the personal information stored in advance in the identification information storage unit 13, and the captured image data includes sunglasses, a mask, and the like. When it is determined that the face is not a person, the electric lock 2 is unlocked via the output unit 12. In other words, the following three conditions were satisfied: the condition that the personal information matches, the condition that the image data is a person's face, and the condition that the person's face in the image data is not wearing sunglasses or a mask. At this time, the process control unit 8 unlocks the electric lock 2. If even one of these three conditions is not satisfied, the process control unit 8 does not unlock the electric lock 2.

ただし、この実施形態では、顔情報判定処理部10が映像取得部5から取り込んだ画像データが人の顔であると判定したときには、たとえサングラスやマスク等をしている画像データであっても、顔情報判定処理部10はその画像データのすべてを顔情報記憶部14に記憶させる。このようにして記憶された画像データは、それが正規のものであっても、サングラスやマスクをしている不正のものであっても、処理制御部8が出力部12を介してディスプレイ16に表示できるようにしている。このように不正な画像データも顔情報記憶部14に記憶させ、それをディスプレイに表示できるようにしたのは、どのような人が解錠指示手段3の前に立ったかどうかを、後で検証できるようにするためである。   However, in this embodiment, when the face information determination processing unit 10 determines that the image data captured from the video acquisition unit 5 is a human face, even if it is image data wearing sunglasses or a mask, The face information determination processing unit 10 stores all of the image data in the face information storage unit 14. Regardless of whether the image data stored in this way is legitimate or illegal, wearing sunglasses or a mask, the processing control unit 8 sends it to the display 16 via the output unit 12. It can be displayed. In this way, unauthorized image data is also stored in the face information storage unit 14 so that it can be displayed on the display. It is verified later what kind of person stood in front of the unlocking instruction means 3. This is to make it possible.

以上説明したように、この実施形態では、解錠指示手段3が識別情報と画像データという2種類の情報を制御手段4に対して送信し、制御手段4は、受信したこれら2種類の情報について照合処理または判定処理を行い、その結果に基づいて開閉機構であるドア1の解錠の可否を判断する。すなわち、前記したように、個人情報が一致しているという条件、画像データが人の顔であるという条件、およびその画像データの人の顔にサングラスやマスク等がされていないという条件の3つの条件が満足されたとき、処理制御部8が電気錠2を解錠する。これら3つの条件の一つでも満たしていなければ、処理制御部8は電気錠2を解錠しない。したがって、3種類の条件の正否を組合せて解錠可否の判断をするので、入力ID等のような1種類の情報の正否のみを解錠の条件とするシステムに比べ、セキュリティ面の信頼性が向上する。   As described above, in this embodiment, the unlock instruction unit 3 transmits two types of information, that is, identification information and image data, to the control unit 4, and the control unit 4 receives the received two types of information. A verification process or a determination process is performed, and based on the result, it is determined whether the door 1 that is the opening / closing mechanism can be unlocked. That is, as described above, there are three conditions: the condition that the personal information is the same, the condition that the image data is a human face, and the condition that the person's face in the image data is not wearing sunglasses or a mask. When the condition is satisfied, the process control unit 8 unlocks the electric lock 2. If even one of these three conditions is not satisfied, the process control unit 8 does not unlock the electric lock 2. Therefore, since it is determined whether or not unlocking is possible by combining the right and wrong of the three types of conditions, the reliability in terms of security is higher than that of a system that uses only the right and wrong of one type of information such as an input ID as the unlocking condition. improves.

また、解錠の可否を決定するレベルでは、映像取得部5および顔情報判定処理部10は、被写体が人の顔であること認識して、かつ、サングラスやマスク等をしていないことを認識できれば足りるので、特定の人の顔を識別する装置に比べて、システム全体が非常に安価なものになる。   Further, at the level for determining whether or not unlocking is possible, the video acquisition unit 5 and the face information determination processing unit 10 recognize that the subject is a human face and recognize that the subject is not wearing sunglasses or a mask. If possible, the entire system is much cheaper than a device that identifies a particular person's face.

さらに、上記実施形態では、映像取得部5は、通常のカメラを想定しているが、通常のカメラだけでは、人間と人形の区別がつかないことも考えられる。そこで、カメラに赤外線検知器を付けて、人の表面の温度差を検知したかどうかを判定すれば、人間と体温がない人形等の無機物と区別がつくようになる。   Further, in the above embodiment, the video acquisition unit 5 is assumed to be a normal camera, but it is also conceivable that a human and a doll cannot be distinguished only by a normal camera. Therefore, if an infrared detector is attached to the camera and it is determined whether or not a temperature difference on the surface of a person is detected, it can be distinguished from a human being and an inorganic substance such as a doll having no body temperature.

さらにまた、上記実施形態では、音声出力部7として、スピーカ等の音声出力手段を用いたが、聴覚障害のある人のことも考慮して、メッセージを表示するディスプレイと併用してもよい。音声出力部7は、制御手段4からのメッセージを伝える手段なので、その目的を達するものならば何でもよい。   Furthermore, in the above-described embodiment, a sound output unit such as a speaker is used as the sound output unit 7. However, in consideration of a person with hearing impairment, it may be used in combination with a display that displays a message. The voice output unit 7 is a means for transmitting a message from the control means 4 and may be anything that can achieve its purpose.

なお、上記実施形態では、制御手段4は、個別のドア1と解錠指示手段3とから遠隔の場所に設置しているが、当該制御手段4をドア1の近傍に設置し、1つの解錠指示手段3と1つの電気錠2に対応するものでもよい。   In the above embodiment, the control means 4 is installed at a location remote from the individual door 1 and the unlocking instruction means 3, but the control means 4 is installed in the vicinity of the door 1 and one unlocking means is provided. It may correspond to the lock instruction means 3 and one electric lock 2.

実施形態の全体構成を示すブロック図である。It is a block diagram which shows the whole structure of embodiment. 実施形態の解錠指示手段を示す概念図である。It is a conceptual diagram which shows the unlocking instruction | indication means of embodiment.

符号の説明Explanation of symbols

1 開閉機構
2 電気錠
3 解錠指示手段
4 制御手段
5 映像取得部
6 識別情報入力部
7 音声出力部
8 処理制御部
9 入力情報識別処理部
10 顔情報判定処理部
11 映像記録処理部
12 出力部
15 映像記憶部
DESCRIPTION OF SYMBOLS 1 Opening / closing mechanism 2 Electric lock 3 Unlocking instruction means 4 Control means 5 Image | video acquisition part 6 Identification information input part 7 Audio | voice output part 8 Process control part 9 Input information identification process part 10 Face information determination process part 11 Video recording process part 12 Output Part 15 Video storage part

Claims (4)

ドアなどの開閉機構に設けた電気錠と、この電気錠の解錠を指示する解錠指示手段と、この解錠指示手段から送信されてくる情報を認識したとき、この情報に基づいて電気錠の解錠制御をする制御手段とからなり、上記解錠指示手段には映像取得部および識別情報入力部を備え、上記制御手段には、映像取得部に取り込まれた映像からそれが人の顔であると判定する機能およびその目を基準にしたエリア内の肌色の割合が基準値を超えているか否かを判定する機能を備えた顔情報判定処理部と、映像取得部から取り込んだ画像データを記憶する映像記憶部と、識別情報入力部から入力された個人情報を識別する入力情報識別処理部と、電気錠を解錠制御する出力部と、上記顔情報判定処理部、入力情報識別処理部および出力部を制御する処理制御部とを備え、この処理制御部は、上記入力情報識別処理部が入力情報を識別するとともに、上記映像取得部に取り込まれた映像が人の顔であり、しかも、その目の位置を基準にしたエリア内の肌色の割合が基準値以上あると顔情報判定処理部が判定したときにそれを人の顔と判定し、上記出力部を介して電気錠を解錠する機能と、映像取得部から取り込んだ画像データを映像記憶部に記憶させる機能とを備えた出入管理システム。   When an electric lock provided in an opening / closing mechanism such as a door, an unlocking instruction means for instructing to unlock the electric lock, and information transmitted from the unlocking instruction means are recognized, the electric lock is based on this information. The unlocking instruction means is provided with a video acquisition unit and an identification information input unit, and the control means includes a human face from the video captured by the video acquisition unit. A face information determination processing unit having a function for determining whether or not the ratio of the skin color in the area based on the eye exceeds the reference value, and image data captured from the video acquisition unit A video storage unit for storing information, an input information identification processing unit for identifying personal information input from the identification information input unit, an output unit for controlling the unlocking of the electric lock, the face information determination processing unit, and the input information identification processing To control the output section and output section The processing control unit identifies the input information by the input information identification processing unit, and the video captured by the video acquisition unit is a human face, and the position of the eye is used as a reference. When the face information determination processing unit determines that the skin color ratio in the selected area is greater than or equal to the reference value, the face is determined to be a human face, and the electric lock is unlocked via the output unit, and video acquisition Access control system having a function of storing image data captured from a video storage unit in a video storage unit. ドア等の開閉機構を出入りする者が識別情報入力部を操作したとき、その操作をトリガーとして映像取得部を動作させる請求項1記載の出入管理システム。   The entrance / exit management system according to claim 1, wherein when a person entering / exiting an opening / closing mechanism such as a door operates the identification information input section, the operation is triggered by the operation. 上記制御手段には、上記処理制御部に連繋する映像記録処理部と、この映像記録処理部に連繋した映像記憶部とを備え、映像記録処理部は、映像取得部を介してあらかじめ取り込んだ背景デジタル画像データと、その都度取り込んだ画像データとを対比して、それらデータ間の輝度差の有無を判定し、輝度差があるときに、映像取得部の前に新たな物体が存在すると判定する機能を備え、処理制御部は、顔情報判定処理部が映像取得部の前にある上記物体が人の顔形であるかどうかを判定するとともに顔形であると判定された映像における肌色の部分の割合が基準値以上に達したとき、入力情報識別処理部が識別した個人情報の条件、顔情報判定処理部が判定した人の顔形の条件および顔情報判定処理部が認識した肌色の割合条件のすべてを満足させたとき、出力部を介して電気錠を解錠する機能と、顔情報判定処理部が映像取得部から取り込まれた画像データが人の顔であると判定したとき、その画像データを映像記憶部に記憶させる構成にした請求項1または2記載の出入管理システム。   The control means includes a video recording processing unit linked to the processing control unit, and a video storage unit linked to the video recording processing unit, the video recording processing unit is a background captured in advance via the video acquisition unit The digital image data is compared with the captured image data each time to determine whether there is a luminance difference between the data. When there is a luminance difference, it is determined that there is a new object in front of the video acquisition unit. A processing control unit that determines whether the object in front of the image acquisition unit is a human face shape and a skin color portion in the image that is determined to be a face shape The ratio of the personal information identified by the input information identification processing unit, the human face condition determined by the face information determination processing unit, and the skin color ratio recognized by the face information determination processing unit All of the conditions When adding the function to unlock the electric lock via the output unit and the face information determination processing unit determines that the image data captured from the video acquisition unit is a human face, the image data The entrance / exit management system according to claim 1 or 2 configured to be stored in a storage unit. 上記顔情報判定処理部には顔情報記憶部を連繋するとともに、この顔情報記憶部には、映像取得部から取り込んだ画像データの座標を特定するための基準枠と人の顔形を特定する顔形パターンとをあらかじめ記憶させておき、顔情報判定処理部は、この基準枠をもとにして画像データの中心を特定する機能と、顔情報記憶部に記憶されている顔形パターンを引き出してその顔形パターンの中心と上記画像データの中心とを一致させる機能とを備えた請求項1または3に記載の出入管理システム。   A face information storage unit is connected to the face information determination processing unit, and a reference frame and a human face shape for specifying the coordinates of the image data captured from the video acquisition unit are specified in the face information storage unit. The face shape pattern is stored in advance, and the face information determination processing unit extracts the function of specifying the center of the image data based on the reference frame and the face shape pattern stored in the face information storage unit. The entrance / exit management system according to claim 1, further comprising a function of matching a center of the face shape pattern with a center of the image data.
JP2004242161A 2004-08-23 2004-08-23 Entrance/exit management system Pending JP2006059230A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004242161A JP2006059230A (en) 2004-08-23 2004-08-23 Entrance/exit management system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004242161A JP2006059230A (en) 2004-08-23 2004-08-23 Entrance/exit management system

Publications (1)

Publication Number Publication Date
JP2006059230A true JP2006059230A (en) 2006-03-02

Family

ID=36106638

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004242161A Pending JP2006059230A (en) 2004-08-23 2004-08-23 Entrance/exit management system

Country Status (1)

Country Link
JP (1) JP2006059230A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008152771A1 (en) * 2007-06-11 2008-12-18 Bionics Co., Ltd. Electronic lock device using biometric authentication
JP2017167693A (en) * 2016-03-15 2017-09-21 富士ゼロックス株式会社 Face authentication device
JP2020094346A (en) * 2018-12-10 2020-06-18 トヨタ自動車株式会社 Vehicle lock/unlock device, vehicle provided with the same, and lock/unlock system
WO2020162550A1 (en) * 2019-02-06 2020-08-13 株式会社tsumug Electronic unlocking management system and program

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008152771A1 (en) * 2007-06-11 2008-12-18 Bionics Co., Ltd. Electronic lock device using biometric authentication
JP2017167693A (en) * 2016-03-15 2017-09-21 富士ゼロックス株式会社 Face authentication device
JP2020094346A (en) * 2018-12-10 2020-06-18 トヨタ自動車株式会社 Vehicle lock/unlock device, vehicle provided with the same, and lock/unlock system
US11485321B2 (en) 2018-12-10 2022-11-01 Toyota Jidosha Kabushiki Kaisha Vehicle unlocking device and vehicle equipped therewith, unlocking system, and recording medium stored with program
JP7200643B2 (en) 2018-12-10 2023-01-10 トヨタ自動車株式会社 Vehicle unlocking device, vehicle equipped with the same, and unlocking system
WO2020162550A1 (en) * 2019-02-06 2020-08-13 株式会社tsumug Electronic unlocking management system and program
JP2020125666A (en) * 2019-02-06 2020-08-20 株式会社tsumug Electronic unlocking management system and program

Similar Documents

Publication Publication Date Title
US7006672B2 (en) Entrance management apparatus and entrance management method
JP5261009B2 (en) Face image registration device
CN103917727B (en) Utilize the locking device adding strong security of iris image
JP4559819B2 (en) Suspicious person detection system and suspicious person detection program
KR101730255B1 (en) Face recognition digital door lock
JP2007135149A (en) Mobile portable terminal
JP2009098814A (en) Access control method and face image recognition security system
JP5314294B2 (en) Face recognition device
EP3886420B1 (en) Intercom system for collective housing
CN110002290B (en) Elevator access control method and device, storage medium and electronic equipment
JP2006309562A (en) Biological information registering device
JP2003109129A (en) Device, system and method for managing passage
JP2007026205A (en) Device for managing room entry and exit
JP2010182056A (en) Password input device and password verification system
JP2007034872A (en) Face authentication device, face authentication system and face authentication method
WO2021176593A1 (en) Stay management device, stay management method, non-transitory computer-readable medium in which program is stored, and stay management system
RU2321068C1 (en) Method for video control and access management
JP2008123277A (en) Access management device, method and program
KR20160005204A (en) Security system and method using detecting face or shape of human in doorlock
JP3877171B2 (en) Security device control system and control method thereof
JP2015138506A (en) Leaving management system and method for supplying wanderer information
JP2000336994A (en) Home security system
JP2006059230A (en) Entrance/exit management system
JP2004211538A (en) Entrance-leaving control system
KR20090041619A (en) Entrance and exit control system