JP2006251946A - Entry management device - Google Patents

Entry management device Download PDF

Info

Publication number
JP2006251946A
JP2006251946A JP2005064846A JP2005064846A JP2006251946A JP 2006251946 A JP2006251946 A JP 2006251946A JP 2005064846 A JP2005064846 A JP 2005064846A JP 2005064846 A JP2005064846 A JP 2005064846A JP 2006251946 A JP2006251946 A JP 2006251946A
Authority
JP
Japan
Prior art keywords
face
intention
user
management device
size
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005064846A
Other languages
Japanese (ja)
Inventor
Koji Sogo
浩二 十河
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP2005064846A priority Critical patent/JP2006251946A/en
Priority to CN 200610058976 priority patent/CN1831874A/en
Publication of JP2006251946A publication Critical patent/JP2006251946A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Collating Specific Patterns (AREA)
  • Lock And Its Accessories (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an entry management device capable of permitting entry to only people with the intention of entry, without requiring operation for showing the intention of entry. <P>SOLUTION: The entry management device 50 with a tag reader 14 for reading, in a nontact manner an ID number recorded in a tag 15 is provided with a face detecting part 12 for detecting a face from images picked up by a camera 10; a facial size determining part 18 for determining the size of the face detected; a facial direction determining part 19 for determining the direction of the face detected; and an entry intention determining part 20 for determining whether there is the intention of entry according to the size and the direction of the face. When the collation of the ID number recorded in the tag 15 indicates that the ID number is normal, images of the user are picked up a plurality of times by using the camera 10. When the size of the face, for which the images are picked up meets such a requirement as getting larger, the entry intention determining part 20 determines that the user has the intention of entry. Once the user is determined to have the intention of entry, a door is opened by a door drive part 13 to permit the entry of the user. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、特定の者だけに所定場所への入場を許可する入場管理装置に関するものである。   The present invention relates to an entrance management apparatus that allows only a specific person to enter a predetermined place.

機密保持を要する部屋や施設等へ第三者がアクセスするのを制限するために、従来から入場管理装置が用いられている。その一例として、個人識別用のID番号を記録したタグを利用者に所持させ、このタグを出入口付近に設けたタグリーダで読み取り、読み取ったID番号の照合結果に基づいて入場を許可または禁止する入場管理装置が知られている。例えば、後掲の特許文献1には、非接触タグを用いる入場管理装置が記載されている。この装置では、タグリーダは非接触タグと無線で通信を行って、タグに記録されているID番号などの情報を非接触で読み取る。このため、タグをタグリーダに挿入しなくても、タグの所持者がタグリーダに近づくだけで、自動的にタグの情報を読み取って、入場の許可/禁止の処理が行われる。   Conventionally, an entrance management device has been used to restrict a third party from accessing a room or facility that requires confidentiality. As an example, admission that allows a user to carry a tag that records an ID number for personal identification, reads the tag with a tag reader provided near the entrance, and permits or prohibits admission based on the collation result of the read ID number. Management devices are known. For example, Patent Document 1 listed below describes an admission management device that uses a non-contact tag. In this apparatus, a tag reader communicates with a non-contact tag wirelessly, and reads information such as an ID number recorded on the tag in a non-contact manner. Therefore, even if the tag is not inserted into the tag reader, the tag information is automatically read and admission permission / prohibition processing is performed only by the tag holder approaching the tag reader.

ところが、上記のような非接触式の入場管理装置にあっては、通常、タグとタグリーダ間の通信距離が数メートル程度確保されているため、入場の意思を持たないタグの所持者がたまたま出入口付近を通過しただけの場合でも、タグの情報がタグリーダで読み取られて入場許可の処理が行われ、扉が開いてしまうことがある。これは、必要時以外に扉が開いて第三者の入場を許す結果となり、セキュリティ性が低下することを意味する。   However, in the non-contact type entrance management device as described above, since the communication distance between the tag and the tag reader is usually secured about several meters, the owner of the tag who does not intend to enter happens to enter and exit. Even when the vehicle has just passed, the tag information is read by the tag reader, the admission process is performed, and the door may be opened. This means that the door opens when it is not necessary and allows the entry of a third party, which reduces security.

これに対して、後掲の特許文献2には、入場の意思を表示するための意思表示手段を設けた入場管理装置が記載されている。意思表示手段は、例えば押ボタンスイッチ、タッチセンサ、または音声センサなどからなり、読取装置や通路などに設けられる。本文献の装置においては、特定場所へ入場しようとする者は、押ボタンスイッチを押したり、タッチセンサに触れたり、音声センサへ音声を入力するなどして、一定時間内に入場の意思表示を行う。そして、読取装置側では、タグから読み取った記録情報の照合結果が正しく、かつ、意思表示手段から意思表示の出力があることを条件として、扉を開ける制御を行うようにしている。これによれば、入場の意思を持たないタグの所持者がたまたま出入口付近を通過する場合、たとえタグから読み取った記録情報の照合結果が正しくても、意思表示手段からの意思表示の出力がなければ扉が開かないので、必要時以外に扉が開いてしまう不具合を回避することができる。   On the other hand, Patent Document 2 described later describes an entrance management apparatus provided with intention display means for displaying an intention to enter. The intention display means includes, for example, a push button switch, a touch sensor, or a voice sensor, and is provided in a reading device, a passage, or the like. In the device of this document, a person who wants to enter a specific place presses a pushbutton switch, touches a touch sensor, or inputs a voice to the voice sensor, etc. Do. On the reading device side, the door opening control is performed on the condition that the collation result of the recorded information read from the tag is correct and the intention display means outputs an intention display. According to this, when a tag holder who does not intend to enter accidentally passes the vicinity of the entrance / exit, the intention display means cannot output the intention display even if the collation result of the recorded information read from the tag is correct. If the door does not open, it is possible to avoid the problem that the door opens except when necessary.

特開2003−6578号公報JP 2003-6578 A 特開平8−254050号公報JP-A-8-254050

しかしながら、特許文献2のように意思表示手段を設けた入場管理装置にあっては、スイッチやセンサなどに対して、入場の意思表示のための何らかの入力操作が必ず必要となり、非接触記録媒体の利便性を生かしきれていない。また、入場の意思がないのに誤ってスイッチを押したりセンサに触れたりしたような場合は、従来と同様に扉が開いてしまい、セキュリティ性が低下する。逆に、入場の意思があるのにうっかりして意思表示の操作を忘れると、扉が開かず入場することができなくなる。   However, in the admission management apparatus provided with the intention display means as in Patent Document 2, some input operation for displaying the intention of admission is always required for the switch, the sensor, and the like. The convenience is not fully utilized. In addition, when the switch is accidentally pushed or the sensor is touched even though there is no intention to enter, the door opens as in the conventional case, and the security is lowered. On the other hand, if you accidentally forget to operate the intention display even though you are willing to enter, you will not be able to enter without opening the door.

そこで、本発明の課題は、入場の意思表示のための操作をしなくても、入場意思のある者に対してのみ入場を許可することが可能な入場管理装置を提供することにある。   Accordingly, an object of the present invention is to provide an admission management device that can permit admission only to a person who intends to enter without performing an operation for displaying an intention to enter.

本発明は、利用者が所持する記録媒体に記録されている情報を照合し、当該照合結果に基づいて所定場所への利用者の入場を許可または禁止する入場管理装置において、記録媒体と無線通信を行い、当該記録媒体に記録されている情報を非接触で読み取る読取手段と、この読取手段で読み取られた情報が正常か否かを判定する第1の判定手段と、利用者を撮像する撮像手段により取得した画像から顔を検出する顔検出手段と、この顔検出手段で得られた顔の状態が、利用者の入場意思を表す所定条件を満たすか否かを判定する第2の判定手段と、第1の判定手段により、読取手段で読み取られた情報が正常と判定され、かつ、第2の判定手段により、顔の状態が利用者の入場意思を表す所定条件を満たしていると判定された場合に、所定場所への入場を許可するための制御を行う制御手段とを備えたものである。   The present invention relates to a wireless communication with a recording medium in an admission management device that collates information recorded on a recording medium possessed by a user and permits or prohibits the user from entering a predetermined place based on the collation result. Reading means for reading the information recorded on the recording medium in a non-contact manner, first determination means for judging whether the information read by the reading means is normal, and imaging for imaging the user Face detection means for detecting a face from an image acquired by the means, and second determination means for determining whether or not a face state obtained by the face detection means satisfies a predetermined condition indicating a user's intention to enter And the first determination means determines that the information read by the reading means is normal, and the second determination means determines that the face state satisfies a predetermined condition indicating the user's intention to enter In place if It is obtained by a control means for controlling to allow entrance.

本発明においては、利用者の撮像画像から得られる顔の状態に着目し、この顔の状態が利用者の入場意思を表す所定条件を満たすか否かを判定する。そして、記録媒体から読み取った情報が正常であっても直ちに入場は許可せず、顔の状態が所定条件を満たしていると判定された場合に入場を許可する。このため、入場意思のない者については、顔の状態が所定条件を満たさないので、入場は許可されず、扉が不必要に開くことはない。また、撮像手段により撮像した画像に基づいて入場意思の有無を自動的に判定しているので、利用者は入場の意思表示のための操作を行う必要が全くなく、非接触記録媒体の利便性が損なわれることがない。また、意思表示手段を設ける必要がないので、スイッチ等の誤操作によって扉が開いたり開かなかったりする事態を未然に回避することができる。   In the present invention, attention is paid to the face state obtained from the captured image of the user, and it is determined whether or not the face state satisfies a predetermined condition representing the user's intention to enter. Even if the information read from the recording medium is normal, admission is not permitted immediately, and admission is permitted when it is determined that the face condition satisfies a predetermined condition. For this reason, since the face state does not satisfy the predetermined condition for those who do not intend to enter, the entrance is not permitted and the door does not open unnecessarily. In addition, since the presence / absence of entry intention is automatically determined based on the image captured by the imaging means, the user does not need to perform any operation for displaying the intention to enter, and the convenience of the non-contact recording medium Will not be damaged. In addition, since it is not necessary to provide the intention display means, it is possible to avoid a situation where the door is opened or not opened due to an erroneous operation of a switch or the like.

本発明において、第2の判定手段により、顔の状態が利用者の入場意思を表す所定条件を満たすか否かを判定するにあたっては、いくつかの方法が考えられる。例えば、撮像手段で複数回撮像した画像より得られる複数の顔画像に基づいて、毎回ごとの顔サイズを判定する顔サイズ判定手段を設け、この顔サイズ判定手段により判定された毎回ごとの顔サイズが徐々に大きくなっている場合に、上記所定条件を満たしていると判定する方法を採用することができる。入場意思のある利用者は、出入口に向かってまっすぐ近づいて来るのが普通であり、この場合は撮像手段で正面から撮像された顔画像は徐々に大きくなるから、これによって利用者の入場意思を確認することができる。   In the present invention, several methods are conceivable when the second determination means determines whether the face state satisfies a predetermined condition indicating the user's intention to enter. For example, a face size determination unit for determining a face size for each time is provided based on a plurality of face images obtained from an image captured a plurality of times by the imaging unit, and the face size for each time determined by the face size determination unit When is gradually increased, a method of determining that the predetermined condition is satisfied can be employed. Users who are willing to enter usually come straight toward the entrance and exit, and in this case, the face image captured from the front by the imaging means gradually increases, so this will help the user to enter Can be confirmed.

また、他の方法として、顔サイズ判定手段により判定された毎回ごとの顔サイズと、あらかじめ決められた基準サイズとを比較し、基準サイズ以上の顔画像が所定数以上ある場合に、上記所定条件を満たしていると判定する方法を採用してもよい。例えば、利用者が出入口の前まで来る途中で一旦後退したとしても、最終的に出入口の前まで来た場合は、利用者は入場意思を有している可能性が高く、この場合は基準サイズ以上の顔画像が所定数以上となるので、これによって利用者の入場意思を確認することができる。   Further, as another method, when the face size for each time determined by the face size determination means is compared with a predetermined reference size, and there are a predetermined number or more of face images larger than the reference size, the predetermined condition A method for determining that the condition is satisfied may be adopted. For example, even if the user retreats once before reaching the entrance / exit, if the user finally comes to the entrance / exit, the user is likely to have an intention to enter. Since the number of face images described above is equal to or greater than the predetermined number, the user's intention to enter can be confirmed.

また、他の方法として、撮像手段で複数回撮像した画像より得られる複数の顔画像に基づいて、毎回ごとの顔方向を判定する顔方向判定手段を設け、この顔方向判定手段により判定された毎回ごとの顔方向を調べ、正面方向の顔画像が所定数以上ある場合に、上記所定条件を満たしていると判定するようにしてもよい。入場意思のある利用者は、正面を向いて出入口に近づいて来るのが普通であり、この場合は撮像手段で正面から撮像された顔画像は正面向きのものが多くなるから、これによって利用者の入場意思を確認することができる。   As another method, a face direction determination unit that determines a face direction for each time is provided based on a plurality of face images obtained from an image captured a plurality of times by the imaging unit, and the face direction determination unit determines the face direction. The face direction for each time is examined, and when there are a predetermined number or more of face images in the front direction, it may be determined that the predetermined condition is satisfied. Users who are willing to enter are usually facing the front and approaching the entrance. In this case, many face images taken from the front by the imaging means are facing the front. Can be confirmed.

なお、上に挙げた3つの判定方法は、それぞれを単独で採用してもよいし、2つ以上を組み合わせて、いずれか1つの条件が満たされた場合に入場意思ありと判定してもよい。   In addition, each of the above three determination methods may be adopted alone, or two or more may be combined to determine that there is an intention to enter when any one of the conditions is satisfied. .

本発明によれば、顔画像に基づいて入場意思の有無を判定するので、入場の意思表示のための操作をしなくても、入場意思のある者を自動的に判別して入場を許可することができる。   According to the present invention, the presence / absence of the intention to enter is determined based on the face image. Therefore, even if there is no operation for displaying the intention to enter, the person having the intention to enter is automatically identified and the entry is permitted. be able to.

図1は、入退出ゲート付近の概略構成を示した図である。Gは例えば施設の出入口に設けられた扉、10は扉Gの上方に配備された監視用のカメラ、14は扉Gの側方に配備されたタグリーダ、15は利用者Aの所持する非接触タグ(以下、単に「タグ」という。)である。カメラ10は、例えば可視光カメラから構成されており、所定領域内にいる利用者Aを前方から撮影するよう、あらかじめ取付角度が調整されている。タグリーダ14は、アンテナや送受信回路等から構成されており、タグ15と無線で通信を行い、タグ15に記録されている情報を読み取る。タグ15は、送受信回路やメモリ等から構成されており、メモリに記録されている情報には、利用者Aを識別するためのID番号が含まれている。このID番号は、施設への入場が許可されている利用者ごとに、あらかじめ割り当てられている。   FIG. 1 is a diagram showing a schematic configuration in the vicinity of an entrance / exit gate. G is, for example, a door provided at the entrance of the facility, 10 is a surveillance camera disposed above the door G, 14 is a tag reader disposed on the side of the door G, and 15 is a non-contact possessed by the user A It is a tag (hereinafter simply referred to as “tag”). The camera 10 is composed of a visible light camera, for example, and the mounting angle is adjusted in advance so as to photograph the user A in a predetermined area from the front. The tag reader 14 includes an antenna, a transmission / reception circuit, and the like. The tag reader 14 communicates with the tag 15 wirelessly and reads information recorded on the tag 15. The tag 15 is composed of a transmission / reception circuit, a memory, and the like, and information recorded in the memory includes an ID number for identifying the user A. This ID number is assigned in advance for each user permitted to enter the facility.

図2は、本発明の実施形態を示したブロック図であって、破線で囲んだ部分が入場管理装置50を示している。10は前述のカメラ、11はカメラ10が撮像した画像を取得する画像取得部、12は画像取得部11が取得した画像から顔を検出する顔検出部である。13は扉Gを開閉するための扉駆動部、14は前述のタグリーダ、15は前述のタグ、16は液晶ディスプレイ等からなる表示部、17は揮発性メモリおよび不揮発性メモリからなる記憶部である。18は顔検出部12で検出された顔のサイズを判定する顔サイズ判定部、19は顔検出部12で検出された顔の方向を判定する顔方向判定部、20は顔サイズ判定部18および顔方向判定部19での判定結果に基づいて、利用者に入場意思があるか否かを判定する入場意思判定部、21はタグリーダ14が読み取ったタグ15の情報に含まれているID番号の正否を判定するID判定部、22は入場管理装置50の動作全体を制御する制御部である。なお、12、18〜22の各ブロックは、実際にはマイクロコンピュータの機能として実現される。   FIG. 2 is a block diagram showing an embodiment of the present invention, and a portion surrounded by a broken line shows the entrance management device 50. Reference numeral 10 denotes the above-described camera, 11 denotes an image acquisition unit that acquires an image captured by the camera 10, and 12 denotes a face detection unit that detects a face from the image acquired by the image acquisition unit 11. 13 is a door driving unit for opening and closing the door G, 14 is the above-described tag reader, 15 is the above-described tag, 16 is a display unit including a liquid crystal display, and 17 is a storage unit including a volatile memory and a non-volatile memory. . 18 is a face size determination unit that determines the size of the face detected by the face detection unit 12, 19 is a face direction determination unit that determines the direction of the face detected by the face detection unit 12, and 20 is the face size determination unit 18 and Based on the determination result of the face direction determination unit 19, an entrance intention determination unit that determines whether or not the user has an intention to enter, 21 is an ID number included in the information of the tag 15 read by the tag reader 14. An ID determination unit 22 that determines whether the admission is correct or not is a control unit 22 that controls the overall operation of the admission management device 50. In addition, each block of 12, 18-22 is actually implement | achieved as a function of a microcomputer.

以上の構成において、カメラ10は本発明における撮像手段の一実施形態を構成し、タグリーダ14は本発明における読取手段の一実施形態を構成し、タグ15は本発明における記録媒体の一実施形態を構成し、顔検出部12は本発明における顔検出手段の一実施形態を構成し、顔サイズ判定部18は本発明における顔サイズ判定手段の一実施形態を構成し、顔方向判定部19は本発明における顔方向判定手段の一実施形態を構成し、ID判定部21は本発明における第1の判定手段の一実施形態を構成し、入場意思判定部20は本発明における第2の判定手段の一実施形態を構成し、制御部22および扉駆動部13は本発明における制御手段の一実施形態を構成している。   In the above configuration, the camera 10 constitutes an embodiment of the imaging means in the present invention, the tag reader 14 constitutes an embodiment of the reading means in the present invention, and the tag 15 constitutes an embodiment of the recording medium in the present invention. The face detection unit 12 constitutes an embodiment of the face detection means in the present invention, the face size determination unit 18 constitutes an embodiment of the face size determination means in the present invention, and the face direction determination unit 19 The face direction determination means in the present invention constitutes one embodiment, the ID determination section 21 constitutes one embodiment of the first determination means in the present invention, and the entrance intention determination section 20 constitutes the second determination means in the present invention. One embodiment is constituted and control part 22 and door drive part 13 constitute one embodiment of the control means in the present invention.

図3は、図2の記憶部17における記録領域の一部を示した図である。記憶部17には、カメラ10で撮像した撮像画像が記録される撮像画像記録エリア31と、顔サイズ判定部18で判定された顔のサイズが記録される顔サイズ記録エリア32と、顔方向判定部19で判定された顔の方向が記録される顔方向記録エリア33とが設けられている。これらのエリア31〜33は、記憶部17の揮発性メモリの所定領域に確保される。また、記憶部17には、顔画像のいくつかのパターンをテンプレートとしてあらかじめ記録した顔画像テンプレート記録エリア34と、入場が許可されている利用者のID番号を登録した登録ID記録エリア35とが設けられている。これらのエリア34、35は、記憶部17の不揮発性メモリの所定領域に確保される。   FIG. 3 is a diagram showing a part of the recording area in the storage unit 17 of FIG. The storage unit 17 includes a captured image recording area 31 where a captured image captured by the camera 10 is recorded, a face size recording area 32 where a face size determined by the face size determination unit 18 is recorded, and a face direction determination. A face direction recording area 33 is provided in which the face direction determined by the unit 19 is recorded. These areas 31 to 33 are secured in a predetermined area of the volatile memory of the storage unit 17. In addition, the storage unit 17 includes a face image template recording area 34 in which several face image patterns are recorded in advance as templates, and a registered ID recording area 35 in which ID numbers of users permitted to enter are registered. Is provided. These areas 34 and 35 are secured in a predetermined area of the nonvolatile memory of the storage unit 17.

顔画像テンプレート記録エリア34には、右45°顔画像、右20°顔画像、正面顔画像、左20°顔画像、左45°顔画像の5種類の顔画像テンプレートが記録されている。これらの顔画像テンプレートの例を図4に示す。図4の(a)は右45°の方向(被写体から見た方向。以下同じ。)を向いた顔画像のテンプレート、(b)は右20°の方向を向いた顔画像のテンプレート、(c)は正面を向いた顔画像のテンプレート、(d)は左20°の方向を向いた顔画像のテンプレート、(e)は左45°の方向を向いた顔画像のテンプレートである。   In the face image template recording area 34, five types of face image templates of right 45 ° face image, right 20 ° face image, front face image, left 20 ° face image, and left 45 ° face image are recorded. Examples of these face image templates are shown in FIG. 4A is a face image template facing the direction of 45 ° to the right (the direction seen from the subject, the same applies hereinafter), FIG. 4B is a template of the face image facing the direction of 20 ° to the right, (c ) Is a face image template facing front, (d) is a face image template facing 20 ° to the left, and (e) is a face image template facing 45 ° to the left.

次に、以上の構成からなる入場管理装置50の動作について説明する。図5は、入場管理装置50の動作を表したフローチャートである。ステップS11では、タグリーダ14によりタグ15の記録情報が読み取られたか否かを常時監視している。図1のように、利用者Aがタグリーダ14に近づいて、タグ15の記録情報がタグリーダ14で読み取られると(ステップS11:YES)、ID判定部21は、読み取った記録情報に含まれているID番号が登録済であるか否かを、記憶部17の登録ID記録エリア35(図3)を参照して判定する(ステップS12)。判定の結果、ID番号が登録済でなければ(ステップS12:NO)、ステップS13以降の処理を行うことなくステップS11へ戻り、ID番号が登録済であれば(ステップS12:YES)、ステップS13へ進む。   Next, the operation of the entrance management apparatus 50 having the above configuration will be described. FIG. 5 is a flowchart showing the operation of the admission management device 50. In step S11, it is constantly monitored whether or not the record information of the tag 15 has been read by the tag reader 14. As shown in FIG. 1, when the user A approaches the tag reader 14 and the record information of the tag 15 is read by the tag reader 14 (step S11: YES), the ID determination unit 21 is included in the read record information. Whether or not the ID number has been registered is determined with reference to the registered ID recording area 35 (FIG. 3) of the storage unit 17 (step S12). As a result of the determination, if the ID number is not registered (step S12: NO), the process returns to step S11 without performing the processing after step S13, and if the ID number is registered (step S12: YES), step S13. Proceed to

ステップS13では、カメラ10により利用者Aを撮像する。画像取得部11で取得された撮像画像のデータは、記憶部17の撮像画像記録エリア31(図3)に格納される。次に、顔検出部12において、撮像画像から顔を検出する(ステップS14)。顔を検出する方法としては、肌色を検出する方法、背景画像との差分を抽出する方法、パターンマッチングから顔らしさを抽出する方法など、公知の方法を用いることができる。   In step S <b> 13, the user A is imaged by the camera 10. The captured image data acquired by the image acquisition unit 11 is stored in the captured image recording area 31 (FIG. 3) of the storage unit 17. Next, the face detection unit 12 detects a face from the captured image (step S14). As a method for detecting a face, known methods such as a method for detecting skin color, a method for extracting a difference from a background image, and a method for extracting the likelihood of a face from pattern matching can be used.

続いて、検出された顔に対して、顔サイズを判定するとともに(ステップS15)、顔方向を判定する(ステップS16)。顔サイズは、検出された顔画像の縦×横の寸法として得られる。また、顔方向の判定にあたっては、検出された顔画像を記憶部17の顔画像テンプレート記録エリア34にあらかじめ記録されている5種類の顔画像(図4)と比較し、一致度の最も高い顔画像の顔方向を採用する。こうして判定された顔サイズおよび顔方向のデータは、記憶部17の顔サイズ記録エリア32および顔方向記録エリア33にそれぞれ格納される。   Subsequently, the face size is determined for the detected face (step S15), and the face direction is determined (step S16). The face size is obtained as a vertical x horizontal dimension of the detected face image. Further, in determining the face direction, the detected face image is compared with five types of face images (FIG. 4) recorded in advance in the face image template recording area 34 of the storage unit 17, and the face having the highest degree of coincidence. Adopt the face direction of the image. The face size and face direction data thus determined are stored in the face size recording area 32 and the face direction recording area 33 of the storage unit 17, respectively.

次に、顔検出部12による顔検出が所定回数(N回)行われたか否かを判定する(ステップS17)。顔検出回数が所定回数に達してなければ(ステップS17:NO)、ステップS13へ戻って再度カメラ10による撮像を行い、ステップS14で顔検出を行った後、ステップS15,S16で顔サイズおよび顔方向の判定を行う。これらの顔サイズと顔方向のデータは、上述したように記憶部17の顔サイズ記録エリア32および顔方向記録エリア33に記録される。すなわち、エリア32,33には、毎回の撮像ごとに顔サイズおよび顔方向が順次記録されてゆく。そして、撮像が複数回行われて顔検出回数が所定回数に達すると(ステップS17:YES)、ステップS18へ移って、利用者の入場意思の有無を判定する。   Next, it is determined whether or not face detection by the face detection unit 12 has been performed a predetermined number of times (N times) (step S17). If the number of face detections has not reached the predetermined number (step S17: NO), the process returns to step S13, and imaging with the camera 10 is performed again. Determine the direction. These face size and face direction data are recorded in the face size recording area 32 and the face direction recording area 33 of the storage unit 17 as described above. That is, in the areas 32 and 33, the face size and the face direction are sequentially recorded for each imaging. And if imaging is performed in multiple times and the frequency | count of face detection reaches predetermined number (step S17: YES), it will move to step S18 and the presence or absence of a user's willingness to enter will be determined.

図6は、ステップS18の判定処理の詳細を示したフローチャートである。最初に、記憶部17の顔サイズ記録エリア32に記録されているN回分の顔サイズのデータを読み出す(ステップS31)。そして、読み出したデータに基づき、第1条件である「顔サイズが徐々に大きくなっている」を満たすか否かを判定する(ステップS32)。図1において、利用者Aに入場意思があれば、利用者Aは出入口の扉Gに向かってまっすぐ近づいて来るのが普通であるから、カメラ10が前方から撮像した利用者Aの顔サイズは、図7に示したように、撮像回数を経るにつれて徐々に大きくなる。したがって、この場合は第1条件が満たされ(ステップS32:YES)、利用者Aに入場意思があるものと判定する(ステップS36)。   FIG. 6 is a flowchart showing details of the determination process in step S18. First, N face size data recorded in the face size recording area 32 of the storage unit 17 are read (step S31). Then, based on the read data, it is determined whether or not the first condition “face size is gradually increasing” is satisfied (step S32). In FIG. 1, if the user A intends to enter, the user A usually approaches straight toward the door G of the entrance, so the face size of the user A captured by the camera 10 from the front is As shown in FIG. 7, it gradually increases as the number of times of imaging is increased. Therefore, in this case, the first condition is satisfied (step S32: YES), and it is determined that the user A has an intention to enter (step S36).

一方、顔サイズが不規則に変動しているなど、第1条件を満たしていない場合は(ステップS32:NO)、ステップS33へ移って、第2条件である「基準サイズ以上の顔画像が所定数(M個)以上ある」を満たすか否かを判定する。図1において、利用者Aが何らかの理由により一旦後退したような場合は、前記の第1条件が満たされなくなるが、利用者Aが最終的に扉Gの前まで来た場合は、利用者Aは入場意思を有している可能性が高い。この場合は、図8に示したように、基準サイズ以上の顔画像が所定数以上となって第2条件が満たされ(ステップS33:YES)、利用者Aに入場意思があるものと判定する(ステップS36)。   On the other hand, when the first condition is not satisfied (eg, the face size fluctuates irregularly (step S32: NO)), the process proceeds to step S33 and the second condition “a face image larger than the reference size is predetermined. It is determined whether or not “there is more than the number (M)”. In FIG. 1, when the user A once retreats for some reason, the first condition is not satisfied. However, when the user A finally arrives in front of the door G, the user A Is likely to have an intention to enter. In this case, as shown in FIG. 8, it is determined that the number of face images larger than the reference size is equal to or larger than the predetermined number, the second condition is satisfied (step S33: YES), and user A has an intention to enter. (Step S36).

また、基準サイズ以上の顔画像が所定数未満であって、第2条件を満たしていない場合は(ステップS33:NO)、ステップS34へ移って、記憶部17の顔方向記録エリア33に記録されているN回分の顔方向のデータを読み出す。そして、これらのデータに基づいて、第3条件である「正面向きの顔画像が所定数(M個)以上ある」を満たすか否かを判定する(ステップS35)。図1において、利用者Aに入場意思があれば、利用者Aは正面を向いて扉Gに近づいて来るのが普通であるから、カメラ10が前方から撮像した利用者Aの顔画像は、図9に示したように、正面向きのものが多くなる。したがって、この場合は正面向きの顔画像が所定数以上となって第3条件が満たされ(ステップS35:YES)、利用者Aに入場意思があるものと判定する(ステップS36)。   If the number of face images larger than the reference size is less than the predetermined number and does not satisfy the second condition (step S33: NO), the process proceeds to step S34 and is recorded in the face direction recording area 33 of the storage unit 17. N face direction data are read out. Based on these data, it is determined whether or not the third condition “there are a predetermined number (M) or more of face images facing the front” is satisfied (step S35). In FIG. 1, if the user A intends to enter, the user A usually faces the front and approaches the door G. Therefore, the face image of the user A captured by the camera 10 from the front is as follows: As shown in FIG. 9, the front-facing ones increase. Therefore, in this case, it is determined that the number of front-facing face images is equal to or greater than the predetermined number, the third condition is satisfied (step S35: YES), and user A has an intention to enter (step S36).

一方、正面向きの顔画像が所定数未満であって、第3条件を満たしていない場合は(ステップS35:NO)、3つの条件のいずれの条件も満たさないことになるため、利用者Aに入場意思がないものと判定する(ステップS37)。なお、図6では、ステップS33とステップS35の所定数の値を同じM個としているが、両ステップにおける所定数の値は異なっていてもよい。   On the other hand, if the number of face images facing the front is less than the predetermined number and the third condition is not satisfied (step S35: NO), since none of the three conditions is satisfied, the user A is It is determined that there is no intention to enter (step S37). In FIG. 6, the predetermined number of values in step S33 and step S35 is the same M, but the predetermined number of values in both steps may be different.

図5に戻り、ステップS18で上記のようにして入場意思が判定されると、その判定結果に基づき、入場を許可または禁止する処理が行われる。すなわち、入場意思があると判定された場合は(ステップS19:YES)、表示部16に入場案内を表示し(ステップS20)、これに続いて、扉駆動部13により扉Gを開き(ステップS21)、利用者Aの入場を許可する。図10は、ステップS20において表示部16の画面16aに表示される案内メッセージの一例を示している。なお、表示部16は、扉G付近の適所に設けられる。また、表示による案内に代えて、あるいは表示による案内とともに、音声による案内を行うようにしてもよい。一方、入場意思がないと判定された場合は(ステップS19:NO)、ステップS20,S21を実行することなく、最初のステップS11へ戻る。この場合は、扉Gは開かず、利用者Aの入場は禁止される。   Returning to FIG. 5, when the entrance intention is determined as described above in step S18, a process for permitting or prohibiting entrance is performed based on the determination result. That is, when it is determined that there is an intention to enter (step S19: YES), the entrance guidance is displayed on the display unit 16 (step S20), and subsequently, the door G is opened by the door drive unit 13 (step S21). ), Allow user A to enter. FIG. 10 shows an example of a guidance message displayed on the screen 16a of the display unit 16 in step S20. The display unit 16 is provided at an appropriate location near the door G. Further, voice guidance may be performed instead of or along with display guidance. On the other hand, when it is determined that there is no intention to enter (step S19: NO), the process returns to the first step S11 without executing steps S20 and S21. In this case, the door G is not opened, and entry of the user A is prohibited.

このようにして、本実施形態においては、第1段階でタグ15の記録情報(ID番号)の照合を行い、照合が正常であった場合は、第2段階でカメラ10により利用者Aの撮像を行い、顔画像を取得する。そして、利用者Aの顔画像から得られる顔サイズや顔方向に基づいて、顔の状態が第1〜第3の条件を満たすか否かを判定し、3つの条件のいずれか1つを満たす場合は、利用者Aが入場意思を有すると判定し、3つの条件のいずれも満たさない場合は、利用者Aが入場意思を有しないと判定し、これらの判定結果に応じて、入場許可または入場禁止の処理を行っている。このため、たとえタグ15の記録情報の照合結果が正常であっても、入場意思のない利用者の場合は、上記3つの条件を満たさないので、当該利用者が出入口付近を通過しただけでは扉Gは開かず、セキュリティが損なわれることはない。また、カメラ10で撮像した画像に基づいて、入場意思の有無を自動的に判定しているので、入場の意思表示のための操作が全く不要であり、利用者は操作の煩わしさから解放される。さらに、入場意思表示のためのスイッチ等を設ける必要がないので、入場意思がないのに誤ってスイッチが押されて扉が開いてしまったり、入場意思があるのにスイッチを押すのを忘れて扉が開かなかったりする事態を未然に回避することができる。   In this way, in this embodiment, the recorded information (ID number) of the tag 15 is collated in the first stage. If the collation is normal, the camera 10 captures the image of the user A in the second stage. To obtain a face image. Then, based on the face size and the face direction obtained from the face image of the user A, it is determined whether the face state satisfies the first to third conditions, and any one of the three conditions is satisfied. In the case, it is determined that user A has an intention to enter, and if none of the three conditions is satisfied, it is determined that user A does not have an intention to enter, and depending on these determination results, admission permission or We are banning admission. For this reason, even if the recorded information collation result of the tag 15 is normal, a user who does not intend to enter does not satisfy the above three conditions. G does not open and security is not compromised. Further, since the presence / absence of the intention to enter is automatically determined based on the image captured by the camera 10, no operation for displaying the intention to enter is required at all, and the user is freed from the troublesome operations. The In addition, since there is no need to provide a switch to display the intention to enter, the switch is accidentally pushed without the intention to enter, and the door opens or forgets to press the switch when there is an intention to enter. The situation where the door does not open can be avoided in advance.

以上述べた実施形態では、第1条件〜第3条件の3つの条件を用意し、いずれか1つを満たす場合に入場意思ありと判定したが、3つの条件のうちの2つ以上を満たす場合に、入場意思ありと判定するようにしてもよい。また、第1条件〜第3条件のいずれか1つだけを単独で用いて、入場意思の有無を判定するようにしてもよい。   In the embodiment described above, three conditions of the first condition to the third condition are prepared, and it is determined that there is an intention to enter when any one is satisfied. However, when two or more of the three conditions are satisfied Alternatively, it may be determined that there is an intention to enter. Moreover, you may make it determine the presence or absence of entrance intention, using any one of 1st conditions-3rd conditions independently.

また、上記実施形態においては、記録媒体としてタグ15を例に挙げたが、本発明の記録媒体はこれに限らず、記録された情報を非接触で読み取ることが可能なものであれば、その形態は問わない。したがって、一般の非接触カードは勿論のこと、身体に装着する腕時計タイプの記録媒体や、携帯電話機のような通信機器であってもよい。   Moreover, in the said embodiment, although the tag 15 was mentioned as an example as a recording medium, the recording medium of this invention is not restricted to this, If the recorded information can be read non-contactingly, the The form does not matter. Accordingly, not only a general contactless card but also a wristwatch type recording medium to be worn on the body or a communication device such as a mobile phone may be used.

入退出ゲート付近の概略構成を示した図である。It is the figure which showed schematic structure of the entrance / exit gate vicinity. 本発明の実施形態を示したブロック図である。It is a block diagram showing an embodiment of the present invention. 記憶部における記録領域の一部を示した図である。It is the figure which showed a part of recording area in a memory | storage part. 顔画像テンプレートの例である。It is an example of a face image template. 入場管理装置の動作を表したフローチャートである。It is a flowchart showing operation | movement of an entrance management apparatus. 判定処理の詳細を示したフローチャートである。It is the flowchart which showed the detail of the determination process. 第1条件を満たす場合の顔画像を示す図である。It is a figure which shows the face image when satisfy | filling 1st conditions. 第2条件を満たす場合の顔画像を示す図である。It is a figure which shows the face image when satisfy | filling 2nd conditions. 第3条件を満たす場合の顔画像を示す図である。It is a figure which shows the face image when satisfy | filling 3rd conditions. 表示部に表示される案内メッセージの一例である。It is an example of the guidance message displayed on a display part.

符号の説明Explanation of symbols

10 カメラ
12 顔検出部
13 扉駆動部
14 タグリーダ
15 非接触タグ
18 顔サイズ判定部
19 顔方向判定部
20 入場意思判定部
21 ID判定部
22 制御部
50 入場管理装置
A 利用者
G 扉
DESCRIPTION OF SYMBOLS 10 Camera 12 Face detection part 13 Door drive part 14 Tag reader 15 Non-contact tag 18 Face size determination part 19 Face direction determination part 20 Entrance intention determination part 21 ID determination part 22 Control part 50 Entrance management apparatus A User G Door

Claims (4)

利用者が所持する記録媒体に記録されている情報を照合し、当該照合結果に基づいて所定場所への利用者の入場を許可または禁止する入場管理装置において、
前記記録媒体と無線通信を行い、当該記録媒体に記録されている情報を非接触で読み取る読取手段と、
前記読取手段で読み取られた情報が正常か否かを判定する第1の判定手段と、
前記利用者を撮像する撮像手段により取得した画像から顔を検出する顔検出手段と、
前記顔検出手段で得られた顔の状態が、利用者の入場意思を表す所定条件を満たすか否かを判定する第2の判定手段と、
前記第1の判定手段により、前記読取手段で読み取られた情報が正常と判定され、かつ、前記第2の判定手段により、前記顔の状態が利用者の入場意思を表す所定条件を満たしていると判定された場合に、前記所定場所への入場を許可するための制御を行う制御手段と、
を備えたことを特徴とする入場管理装置。
In an admission management device that collates information recorded on a recording medium possessed by a user and permits or prohibits entry of the user to a predetermined place based on the collation result.
Reading means for performing wireless communication with the recording medium and reading information recorded on the recording medium in a non-contact manner;
First determination means for determining whether the information read by the reading means is normal;
Face detection means for detecting a face from an image acquired by an imaging means for imaging the user;
Second determination means for determining whether or not a face state obtained by the face detection means satisfies a predetermined condition representing a user's intention to enter;
The first determination means determines that the information read by the reading means is normal, and the second determination means satisfies the predetermined condition representing the user's intention to enter the face. Control means for performing control for permitting admission to the predetermined place,
An admission management device comprising:
請求項1に記載の入場管理装置において、
前記撮像手段で複数回撮像した画像より得られる複数の顔画像に基づいて、毎回ごとの顔サイズを判定する顔サイズ判定手段を更に備え、
前記第2の判定手段は、前記顔サイズ判定手段により判定された毎回ごとの顔サイズが徐々に大きくなっている場合に、前記所定条件を満たしていると判定することを特徴とする入場管理装置。
In the admission management device according to claim 1,
A face size determining means for determining a face size for each time based on a plurality of face images obtained from an image captured a plurality of times by the imaging means;
The admission management device, wherein the second determination means determines that the predetermined condition is satisfied when the face size determined by the face size determination means is gradually increased every time. .
請求項1に記載の入場管理装置において、
前記撮像手段で複数回撮像した画像より得られる複数の顔画像に基づいて、毎回ごとの顔サイズを判定する顔サイズ判定手段を更に備え、
前記第2の判定手段は、前記顔サイズ判定手段により判定された毎回ごとの顔サイズと、あらかじめ決められた基準サイズとを比較し、基準サイズ以上の顔画像が所定数以上ある場合に、前記所定条件を満たしていると判定することを特徴とする入場管理装置。
In the admission management device according to claim 1,
A face size determining means for determining a face size for each time based on a plurality of face images obtained from an image captured a plurality of times by the imaging means;
The second determination means compares the face size determined every time by the face size determination means with a predetermined reference size, and when there are a predetermined number or more of face images larger than the reference size, An admission management device that determines that a predetermined condition is satisfied.
請求項1に記載の入場管理装置において、
前記撮像手段で複数回撮像した画像より得られる複数の顔画像に基づいて、毎回ごとの顔方向を判定する顔方向判定手段を更に備え、
前記第2の判定手段は、前記顔方向判定手段により判定された毎回ごとの顔方向を調べ、正面方向の顔画像が所定数以上ある場合に、前記所定条件を満たしていると判定することを特徴とする入場管理装置。
In the admission management device according to claim 1,
Based on a plurality of face images obtained from images captured a plurality of times by the imaging means, further comprising a face direction determination means for determining the face direction every time;
The second determination means examines the face direction for each time determined by the face direction determination means, and determines that the predetermined condition is satisfied when there are a predetermined number or more of face images in the front direction. A special admission management device.
JP2005064846A 2005-03-09 2005-03-09 Entry management device Pending JP2006251946A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2005064846A JP2006251946A (en) 2005-03-09 2005-03-09 Entry management device
CN 200610058976 CN1831874A (en) 2005-03-09 2006-03-09 Entrance management apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005064846A JP2006251946A (en) 2005-03-09 2005-03-09 Entry management device

Publications (1)

Publication Number Publication Date
JP2006251946A true JP2006251946A (en) 2006-09-21

Family

ID=36994151

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005064846A Pending JP2006251946A (en) 2005-03-09 2005-03-09 Entry management device

Country Status (2)

Country Link
JP (1) JP2006251946A (en)
CN (1) CN1831874A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014115243A1 (en) * 2013-01-22 2014-07-31 三菱電機株式会社 Reader device, and room entrance/exit management system
JP2017008638A (en) * 2015-06-24 2017-01-12 パナソニックIpマネジメント株式会社 Entering and leaving management device and entering and leaving management method
JP2018018535A (en) * 2017-09-27 2018-02-01 アマノ株式会社 Employment management device, employment management system and program
JP2019075004A (en) * 2017-10-18 2019-05-16 美和ロック株式会社 System to prevent forgetting to lock
JP2019219721A (en) * 2018-06-15 2019-12-26 パナソニック株式会社 Entry/exit authentication system and entry/exit authentication method
JP2021051550A (en) * 2019-09-25 2021-04-01 オムロン株式会社 Entrance management device, entrance management system including the same, and entrance management program

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102008016516B3 (en) * 2008-01-24 2009-05-20 Kaba Gallenschütz GmbH Access control device for use in entry point of e.g. building for determining fingerprint of person, has CPU with control unit for adjusting default security steps, where each security step is associated with defined parameter of CPU
CN104240347B (en) * 2014-09-12 2016-10-12 福建省智慧物联网研究院有限责任公司 Admission identity authorization system based on image recognition
TWI630583B (en) * 2016-04-15 2018-07-21 泰金寶電通股份有限公司 Dynamic entrance controlling system and dynamic entrance controlling method
CN113034764B (en) * 2019-12-24 2023-03-03 深圳云天励飞技术有限公司 Access control method, device, equipment and access control system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08254050A (en) * 1995-03-17 1996-10-01 Toshiba Corp Room entering and leaving managing device
JP2003259352A (en) * 2002-02-26 2003-09-12 Minolta Co Ltd Object detecting apparatus, object detecting method, and object detecting program
JP2004126812A (en) * 2002-09-30 2004-04-22 Toshiba Corp Personal recognition device, personal recognition method and passage control device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08254050A (en) * 1995-03-17 1996-10-01 Toshiba Corp Room entering and leaving managing device
JP2003259352A (en) * 2002-02-26 2003-09-12 Minolta Co Ltd Object detecting apparatus, object detecting method, and object detecting program
JP2004126812A (en) * 2002-09-30 2004-04-22 Toshiba Corp Personal recognition device, personal recognition method and passage control device

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014115243A1 (en) * 2013-01-22 2014-07-31 三菱電機株式会社 Reader device, and room entrance/exit management system
JP5896043B2 (en) * 2013-01-22 2016-03-30 三菱電機株式会社 Reader and entry / exit management system
JP2017008638A (en) * 2015-06-24 2017-01-12 パナソニックIpマネジメント株式会社 Entering and leaving management device and entering and leaving management method
JP2018018535A (en) * 2017-09-27 2018-02-01 アマノ株式会社 Employment management device, employment management system and program
JP2019075004A (en) * 2017-10-18 2019-05-16 美和ロック株式会社 System to prevent forgetting to lock
JP7109175B2 (en) 2017-10-18 2022-07-29 美和ロック株式会社 A system to prevent forgetting to close the lock
JP2019219721A (en) * 2018-06-15 2019-12-26 パナソニック株式会社 Entry/exit authentication system and entry/exit authentication method
JP7075702B2 (en) 2018-06-15 2022-05-26 i-PRO株式会社 Entry / exit authentication system and entry / exit authentication method
JP2021051550A (en) * 2019-09-25 2021-04-01 オムロン株式会社 Entrance management device, entrance management system including the same, and entrance management program
JP7303438B2 (en) 2019-09-25 2023-07-05 オムロン株式会社 Admission control device, admission control system equipped with same, admission control program

Also Published As

Publication number Publication date
CN1831874A (en) 2006-09-13

Similar Documents

Publication Publication Date Title
JP2006251946A (en) Entry management device
CN105389516B (en) Sensitization picture based reminding method and device
JP4728662B2 (en) Entrance / exit management system
JP4559819B2 (en) Suspicious person detection system and suspicious person detection program
JP5932317B2 (en) Face authentication database management method, face authentication database management apparatus, and face authentication database management program
US20070242887A1 (en) Portable Terminal, Image Information Matching Method for Portable Terminal, Image Information Matching Program, and Recording Medium
US20110013812A1 (en) Entrance control system having a camera and control method thereof
JP2001273498A (en) Device, system, card and method for personal identification based on biometric
CN101785036A (en) Behavior monitoring system and behavior monitoring method
KR101554174B1 (en) Method and system for controlling an entrance and exit in airport security area
JP2013069155A (en) Face authentication database construction method, face authentication device, and face authentication program
CN106503628A (en) method and device for fingerprint matching
JP5076474B2 (en) Admission control system
JP2008040828A (en) Entering/leaving management system
CN106529253A (en) Unlocking method and apparatus, and terminal device
CN106296171A (en) The method and device of swiping the card of mobile terminal
JP2003331323A (en) Automatic gate system
JP2002279466A (en) Device and method for admission control
TWI631480B (en) Entry access system having facil recognition
JP2008123277A (en) Access management device, method and program
JP5745790B2 (en) Entrance / exit management system
JP2007009643A (en) Entrance/exit control system
CN106570381A (en) Fingerprint unlocking method and device
JP2006099687A (en) User authentication device
JP4835247B2 (en) Entrance / exit management system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071112

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100929

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110222