WO2015152690A2 - 얼굴 인식을 이용한 출입 통제 장치 및 방법 - Google Patents

얼굴 인식을 이용한 출입 통제 장치 및 방법 Download PDF

Info

Publication number
WO2015152690A2
WO2015152690A2 PCT/KR2015/003392 KR2015003392W WO2015152690A2 WO 2015152690 A2 WO2015152690 A2 WO 2015152690A2 KR 2015003392 W KR2015003392 W KR 2015003392W WO 2015152690 A2 WO2015152690 A2 WO 2015152690A2
Authority
WO
WIPO (PCT)
Prior art keywords
access control
visitor
face
door
face image
Prior art date
Application number
PCT/KR2015/003392
Other languages
English (en)
French (fr)
Other versions
WO2015152690A3 (ko
Inventor
정규택
Original Assignee
주식회사 파이브지티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=52588176&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=WO2015152690(A2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 주식회사 파이브지티 filed Critical 주식회사 파이브지티
Publication of WO2015152690A2 publication Critical patent/WO2015152690A2/ko
Publication of WO2015152690A3 publication Critical patent/WO2015152690A3/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions

Definitions

  • the present invention relates to an access control apparatus and method, and more particularly, to an access control apparatus and method using face recognition.
  • Access control device distribute the access card to the employees working in the office, and when the internal workers access the door by opening the door by authenticating the access card using a card reader installed in the door, or By registering the fingerprints of the workers in advance and installing a fingerprint recognition device in the door, the internal workers are using a method to open the door only when successful by performing authentication with the fingerprint.
  • the problem to be solved by the present invention is to provide a more reliable access control method and apparatus capable of recording the image of the face of all persons.
  • the access control method using face recognition for solving the above problems, (a) the person in front of the door in the access control device installed in the door to extract the face image, the person If it is determined that the visitor is a visitor, receiving an extension number from the visitor; (b) the access control device connecting a call to an extension telephone corresponding to the extension number, and transmitting and outputting an access control menu including the face image to a computer of an internal worker corresponding to the extension number; And (c) the access control device receiving a door open or door open reject signal from the computer of the internal worker as an access control signal to open the door or maintain the closed state according to the access control signal. .
  • the access control device compares the face image of the person in front of the door with the face images stored in the previously stored database When the face image is authenticated, if the face image is authenticated, it is determined as an internal worker, and the door is opened. You can display and enter the extension number from the visitor.
  • the access control device is a personal ID and personal notification message, or full notification mode from the administrator terminal or another internal worker terminal And receiving and storing the information and the entire notification message, wherein the step (a) includes, when the face image is authenticated, the access control device includes a personal notification message corresponding to the personal ID of the authenticated internal worker and the entire message. Notification messages can be output via the touch screen.
  • the access control device is a plurality of face images of each of the internal workers (emergency situation face image indicating an emergency situation) It includes the step of registering in advance, wherein the step (a), if the emergency facial image is successful in facial authentication, it is determined that an emergency situation has occurred can receive a report to the police.
  • the access control device is not connected to the extension telephone within a predetermined time, or to the extension telephone number
  • the call is connected to the mobile terminal device of the internal worker corresponding to the extension number and the access control menu including the face image is displayed. Can be sent and output.
  • the face image is extracted by capturing the visitor.
  • visitors can receive the extension number.
  • the extension number input window for receiving the extension number is displayed to the visitor, the extension number is defined within a predefined time If it is not input, the image of the visitor's face is transmitted to the designated manager, and a warning light installed in the door, a siren, or a police report can be received according to a control signal received from the manager.
  • the access control device using the face recognition the camera unit for photographing the visitor; A touch screen displaying an extension number input window to the visitor and receiving an extension number from the visitor; A microphone and a speaker installed to make a call with an internal worker through an extension telephone corresponding to the extension number inputted by the visitor; Communicating with an extension telephone and an internal worker's computer through a wired / wireless communication network, mutually transmitting and receiving the extension phone and voice data, transmitting and outputting an access control menu including the face image to an internal worker's computer, and outputting A communication unit for receiving a door opening or door opening rejection signal from a worker's computer as an access control signal; And photographing the visitor by controlling the camera unit, generating a face image by extracting a face region from the photographed image of the visitor, and receiving an extension number from the visitor through the touch screen, to the extension number input through the communication unit.
  • the access control apparatus using face recognition further includes a database storing a registered face image of the internal worker, the control unit in advance the database of the face image of the person in front of the door
  • the face authentication is performed.
  • the face image is judged to be an internal worker, and the door is opened by controlling the door opening / closing device.
  • the control unit of the access control device using the face recognition the access log information containing the visitor's face image is stored in the database, the access log information, whether the door is opened or not It may further include the identification information of the internal worker, and the time information to communicate with the visitor or generate an access control signal.
  • control unit of the access control device using the face recognition if the call is not connected to the extension telephone of the extension number within a predetermined time, and the access control signal is not received in advance, Attempts to make a call to an administrator specified in, and outputs an access control menu including a face image, receives a door open or door open reject signal from the manager as an access control signal, and controls the door open / close device according to an access control signal. You can open the door or keep it closed.
  • the control unit of the access control device using the face recognition the call of the internal telephone or the internal worker's computer corresponding to the extension telephone number is not deactivated within a predetermined predetermined time If the call is set to be connected to the mobile terminal device in advance, the call may be connected to the mobile terminal device of the internal worker corresponding to the extension number, and the access control menu including the face image may be transmitted.
  • the control unit controls the camera unit to extract the face image by photographing the visitor,
  • the extension number can be input from the visitor.
  • FIG. 3 is a flowchart illustrating an access control method according to a preferred embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating an access control method according to another preferred embodiment of the present invention.
  • FIG. 8 is a diagram illustrating an example of an access control menu displayed on a PC or a mobile terminal device of an internal worker or manager according to a preferred embodiment of the present invention.
  • FIG. 10 is a view for explaining the access control device and the access control method according to another preferred embodiment of the present invention.
  • the access control system according to a preferred embodiment of the present invention, the door opening and closing device 100, the access control device 200, a plurality of mobile terminal device 300, a plurality of extension telephones 400, And a plurality of user computers 500.
  • the plurality of mobile terminal devices 300 is preferably implemented by a smart phone, the plurality of mobile terminal devices 300 and the plurality of user computers 500, an application that can perform the access control method of the present invention or The program is installed.
  • the plurality of user computers 500 are installed at each desk of the internal worker, and when the visitor inputs a specific extension number, the access control menu including an image of the visitor's face in the internal worker's computer 500 corresponding to the extension number. Is displayed in a pop-up (refer to FIG. 8), the internal worker may check the visitor's face and select the door open button 810 or the reject button 820 to control the opening and closing of the door.
  • the access control device 200 is a lighting unit 210, a camera unit ( 220, a touch screen 230, a microphone 240, a wireless communication module 250, a communication unit 260, a database 270, a speaker 280, and a controller 290.
  • the 220 includes an infrared camera 221 and a color camera 223, and the database 270 includes an authentication data storage 271 and a log data storage 273.
  • the communication unit 260 communicates with the extension telephone 400, the internal worker computer 500, and the mobile terminal device 300 through a wired / wireless communication network, and the extension telephone 400 and the mobile terminal device 300 installed inside the office. ) Transmit and receive voice data to and from each other, output an access control menu including an image of a visitor's face to a computer 500 and an internal worker's mobile terminal device 300 installed inside an office, The same access control signal is received and output to the control unit 290.
  • the controller 290 may output greeting voice data stored in the authentication data storage 271 in advance through the speaker 280 to correspond to the authenticated user.
  • the user may store his / her desired greeting voice data (eg, a greeting recorded by the daughter's voice) in advance, and output the voice data through the speaker 280 when face authentication is completed and the door is opened. can do.
  • the extension telephone 400 is not received within a predetermined time or the computer 500 is deactivated or for a predetermined time period.
  • a call is connected to a predetermined administrator (for example, an information desk administrator, etc.), and an access control menu including a face image is displayed on the administrator computer 500 so that the administrator can visit the visitor. To respond.
  • control unit 290 lights up the warning light 610 installed in the door, the siren 620, or the suspicious person online through the police server according to the type of the control signal. You can also report existence.
  • the extension number input window is displayed through the touch screen 230.
  • the time and the call button are always displayed, and when the visitor touches the call button, the visitor may be photographed to extract an image of the visitor's face, and the extension number input window may be displayed on the touch screen 230 to receive the extension number.
  • the process after receiving the extension number is the same as described above, a detailed description thereof will be omitted.
  • the access control apparatus 200 captures an image at a second time period shorter than the first time period (S315), and if the face is detected by investigating whether a face is detected in the corresponding image. In step S320, the face image is extracted and described later. If no face is detected, the access control apparatus 200 proceeds to step S319, repeatedly performs steps S315 to S319 for a predetermined time, and attempts to detect a face (S319), and faces for a predetermined time. If it is not detected, the process proceeds to step S311.
  • the second time period may be set to about 0.3 seconds to 1 second
  • the face detection method may be a general face detection method that detects a face area by finding feature points including eyes in the face area.
  • the access control apparatus 200 performs face authentication by comparing the face image with face images of internal workers previously stored in the database 270. (S320).
  • step S330 when face authentication fails, the access control apparatus 200 determines that the person who wants to pass through the door is a visitor, and the touch screen 230 allows the visitor to make a call with an internal worker.
  • the extension number input window is displayed and the extension number is input from the visitor (S350).
  • the access control device 200 may output the list of the internal worker on the touch screen 230, and the user can replace the extension number input by touching the name of the internal worker visited by the visitor.
  • the access control device 200 connects the call to the extension number so that the visitor can make a call with the internal worker, and to the internal worker's computer 400, as shown in FIG.
  • an access control menu including a face image is output in a popup window format.
  • the entrance control menu including the visitor's face image is included. May be output to the mobile terminal device 300 of the internal worker, and the call may be connected to the mobile terminal device 300 of the internal worker.
  • the access control device 200 is a call is connected to the extension telephone 500 or the mobile terminal device 300 within a predetermined time, or the access control signal from the internal worker's computer 400 or the mobile terminal device 300 Investigate whether it is received (S370), allowing the visitor and the internal worker to communicate with each other or receiving an access control signal from the computer 500 of the internal worker (S382), and controlling the door according to the received access control signal. (S384).
  • the internal worker may select the door open button 810 to open the door for the visitor, or press the reject button 820 to maintain the door closed state.
  • the access control apparatus 200 may store, as access log information, the face image of the visitor, whether the visitor has entered, whether the visitor has entered, the access time, and the internal worker identification information that opens the door as access log information.
  • step S370 if the visitor is not connected to the internal worker, the call is connected to the designated administrator who has been assessed, and an access control menu including an image of the visitor's face is output to the administrator's computer, and the manager performs operations S382 to S382. It is also possible to perform the step S386 (S390).
  • step S330 After the authentication fails, as shown in FIG. 7, the current time and the Call button are displayed on the touch screen 230, and when the visitor touches the Call button, the process proceeds to step S350 and touches the extension number input window on the touch screen 230. You can also enter the extension number by checking). At this time, since the process after receiving the extension number is the same as described above, a detailed description thereof will be omitted.
  • step S310 to S330 is performed unconditionally, in the case of another embodiment of the present invention to the current time and the call button on the touch screen 230
  • the visitor touches the Call button at all times, the visitor captures the visitor, extracts a face image, and immediately proceeds to step S350 to display the extension number input window on the touch screen 230 to receive the extension number.
  • step S350 since the process after receiving the extension number is the same as described above, a detailed description thereof will be omitted.
  • a greeting file to be output when face authentication for each user is previously stored in the authentication data storage unit 271 of the database 270 (S305).
  • the greeting for each user may be directly set by the corresponding user or may be set by the system administrator according to the position of an internal worker.
  • the user may record a greeting with the voice of his daughter and set it as a greeting to be outputted when authenticating his face.
  • the access control device 200 detects the face of the visitor or the internal worker located in front of the door in the same manner as step S310 of FIG. 3 (S310), and in the same manner as step S320 of FIG. In operation S320, authentication of the detected face image is performed.
  • step S350 of FIG. 3 If face authentication fails, the process proceeds to step S350 of FIG. 3, and if authentication succeeds, the door is opened, and a greeting corresponding to the authenticated user is output through the speaker 280 (S342-2).
  • FIG. 6 is a flowchart illustrating an access control method according to another preferred embodiment of the present invention.
  • the access control method detects a face in the same manner as shown in FIG. 3 (S310), performs face authentication (S320), and successfully authenticates a face. The process proceeds to step S342 (S330).
  • the access control apparatus 200 determines that the visitor is a visitor, and as shown in FIG. 7, displays a window for inputting an extension number on the touch screen 230 and inputs an extension number. Waiting for the reception, if the extension number is input within a predetermined time, the process proceeds to step S360 (S350-2).
  • the access control device 200 determines the type of the control signal, according to the type of the control signal, flashing the warning light 610 installed in the door (S357), or the person suspicious to the police approach Report (S358), or by ringing the siren 620 installed in the door can be prevented crime (S359).
  • FIG. 9 is a view illustrating a function and an access control method of the access control apparatus 200 using face recognition according to another embodiment of the present invention.
  • a manager or an internal worker delivers a message to another internal worker in the access control device 200 and the access control method described with reference to FIGS. 2 and 3, such that the internal worker enters and exits the office.
  • the message further comprises a function for displaying a message on the touch screen (230). Therefore, content overlapping with the content described with reference to FIGS. 2 and 3 will be omitted, and only the added content will be described.
  • a manager terminal or an internal worker terminal which is installed with an application program capable of executing the access control method of the present invention, receives a message from an administrator or an internal worker, and composes a message to be transmitted to other workers or all workers (S91).
  • the manager terminal and the internal worker terminal may be implemented as a mobile terminal device such as a personal computer or a smart phone.
  • the manager terminal or the internal worker terminal is selected a notification date (date to deliver the message) (S92), and whether the notification mode is the full notification mode or personal notification mode (S93).
  • step S93 when the administrator or the internal worker selected the full notification mode, the manager terminal or internal worker terminal is the access control device with the mode information indicating the full notification mode and notification date information and the complete notification message created Transfer to step 200 (S96).
  • the controller 290 of the access control apparatus 200 stores the message received through the wired / wireless communication network through the communication network in the database 270 (particularly, the authentication data storage unit) (S304).
  • the message when the message is a personal notification message, it may be stored in association with the authentication information of the internal worker corresponding to the personal ID received with the personal notification message.
  • the control unit 290 of the access control apparatus 200 may determine the corresponding date. Investigate whether the personal notification message or the entire notification message to be output to the authenticated internal worker is stored in the database 270 (S340), and if there is a message, output the corresponding message through the touch screen 230. (S341), the door is opened (S342), and the access record of the internal worker is stored as the access log information (S344).
  • step S340 If, as a result of the investigation in step S340, there is no message, the door is opened (S342) as in FIG. 3, and the access record of the internal worker is stored as the access log information (S344).
  • FIG. 10 is a view for explaining the access control device 200 and the access control method according to another embodiment of the present invention.
  • the controller 290 of the access control apparatus 200 registers a plurality of face images of each internal worker in the database 270, but one of the face images is included. Registers a face image of an expression representing an emergency situation in the database 270. Thereafter, when the internal worker makes a facial expression indicating an emergency situation at the time of face authentication, the control unit 290 of the access control apparatus 200 finds a matching image among the face images registered in the database 270, When authenticating and recognizing that the registered face image used for authentication is a face image indicating an emergency situation, the communication unit 260 may automatically receive a report from the police.
  • the access control device 200 recognizes an emergency situation and automatically receives a report to the police.
  • FIG. 10 is a flowchart illustrating a method of implementing such an embodiment.
  • the controller 290 receives a plurality of face images including an emergency face image in which an expression of an internal worker's expression is expressed from the camera unit 220 and registers them in the database 270. (S301).
  • the face image used for authentication is an emergency face. It is examined whether or not the image (S340-2).
  • the control unit 290 receives a report to the police through the communication unit 260 (S341-2), and locks the door according to a preset setting. In operation S341-3, the flow proceeds to step S342 in which the door is opened and access log information may be stored.
  • the invention can also be embodied as computer readable code on a computer readable recording medium.
  • the computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, and the like, which are also implemented in the form of a carrier wave (for example, transmission over the Internet). It also includes.
  • the computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion.

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Collating Specific Patterns (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)

Abstract

본 발명의 바람직한 실시예에 따른 출입 통제 장치 및 방법은, 내부 근무자는 사전에 얼굴 영상을 등록하고 얼굴 인식을 통해서 출입을 통제하고, 방문객은 얼굴 영상을 촬영한 후 내부 근무자와의 내선 통화 또는 내부 근무자의 방문객 얼굴 확인을 통해 출입 통제를 수행하며, 사무실에 출입하는 출입자의 얼굴 영상을 출입 로그에 기록함으로써 보다 신뢰성 높은 출입 통제가 가능하다.

Description

얼굴 인식을 이용한 출입 통제 장치 및 방법
본 발명은 출입 통제 장치 및 방법에 관한 것으로서, 보다 구체적으로는 얼굴 인식을 이용한 출입 통제 장치 및 방법에 관한 것이다.
일반적인 종래 기술에 따른 출입 통제 장치는, 사무실 내부에 근무하는 근무자들에게 출입 카드를 배포하고, 내부 근무자들이 출입할때 출입문에 설치된 카드 리더기를 이용하여 출입카드를 인증함으로써 출입문을 개방하도록 하거나, 내부 근무자들의 지문을 사전에 등록하고 출입문에 지문 인식 장치를 설치하여, 내부 근무자들이 출입할 때 지문으로 인증을 수행하여 성공한 경우에 한하여 출입문을 개방하도록 하는 방식을 이용하고 있다.
그러나, 이러한 종래의 방식은 방문객의 출입시에 인터폰 등을 통해서 내부 근무자에게 내선 전화를 하거나, 외부에서 내부 근무자의 휴대폰으로 전화를 걸어 내부 근무자로 하여금 방문객에게 문을 열어줄 수 있도록 출입문으로 나오게 하는 불편함이 존재할 뿐만 아니라, 방문객의 신원이 정확하게 확인되지 않는 문제점이 존재하였다.
또한, 상술한 지문 인식 방식의 출입 통제 방식의 경우에, 지문 위조의 경우에 출입자를 구별할 수 없는 단점이 존재하였다.
본 발명이 해결하고자 하는 과제는, 모든 출입자의 얼굴 영상을 기록할 수 있는 보다 신뢰성 높은 출입 통제 방법 및 장치를 제공하는 것이다.
상술한 과제를 해결하기 위한 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법은, (a) 출입문에 설치된 출입 통제 장치에서 출입문 앞의 사람을 촬영하여 얼굴 영상을 추출하고, 촬영된 사람이 방문객이라고 판단되면, 방문객으로부터 내선 번호를 입력 받는 단계; (b) 상기 출입 통제 장치가 상기 내선 번호에 대응되는 내선 전화로 통화를 연결하고, 상기 내선 번호에 대응되는 내부 근무자의 컴퓨터로 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송하여 출력하는 단계; 및 (c) 상기 출입 통제 장치가 상기 내부 근무자의 컴퓨터로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신하여, 출입 제어 신호에 따라서 출입문을 개방하거나 출입문의 닫힘 상태를 유지하는 단계를 포함한다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (a) 단계에서, 상기 출입 통제 장치는 출입문 앞의 사람의 얼굴 영상을 사전에 저장된 데이터 베이스에 저장된 얼굴 영상들과 비교하여 얼굴 인증을 실시하고, 얼굴 영상이 인증된 경우에는 내부 근무자로 판단하여 출입문을 개방하고, 얼굴 영상이 인증되지 않은 경우에 방문객으로 판단하여 상기 출입 통제 장치에 설치된 터치스크린을 통해서 내선번호 입력창을 표시하고 방문객으로부터 내선 번호를 입력받을 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (a) 단계 이전에, 상기 출입 통제 장치는 관리자 단말 또는 다른 내부 근무자 단말로부터 개인 ID 및 개인 공지 메시지, 또는 전체 공지 모드 정보 및 전체 공지 메시지를 수신하여 저장하는 단계를 더 포함하고, 상기 (a) 단계는, 얼굴 영상이 인증된 경우, 상기 출입 통제 장치는 인증된 내부 근무자의 개인 ID에 대응되는 개인 공지 메시지 및 전체 공지 메시지를 터치스크린을 통해서 출력할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (a) 단계 이전에, 상기 출입 통제 장치는 내부 근무자들 각각의 복수의 얼굴 영상(위급 상황을 나타내는 위급 상황 얼굴 영상을 포함함)을 사전에 등록하는 단계를 더 포함하고, 상기 (a) 단계는, 상기 위급 상황 얼굴 영상이 얼굴 인증에 성공한 경우에는 위급 상황이 발생한 것으로 판단하여 경찰에 신고를 접수할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법은, (d) 방문객의 얼굴 영상을 포함하는 출입 로그 정보를 저장하는 단계를 더 포함하고, 상기 출입 로그 정보는, 출입문의 개방 여부, 방문객과 통화를 수행하거나 출입 제어 신호를 발생시킨 내부 근무자의 식별정보, 및 시간 정보를 더 포함할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (b) 단계에서, 상기 출입 통제 장치는 사전에 정의된 일정한 시간내에 통화 연결이 되지 않고, 출입 제어 신호가 수신되지 않으면, 사전에 지정된 관리자에게 통화 연결을 시도하고 얼굴 영상을 포함하는 출입 제어 메뉴를 출력하며, 상기 (c) 단계에서, 상기 출입 통제 장치는 관리자로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신하여, 출입 제어 신호에 따라서 출입문을 개방하거나 출입문의 닫힘 상태를 유지할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (b) 단계에서, 상기 출입 통제 장치는 사전에 정의된 일정한 시간내에 내선 전화와 통화 연결이 되지 않거나, 내선 전화 번호에 대응되는 내부 근무자의 컴퓨터가 비활성화되어 있거나, 사전에 이동 단말 장치로 연결되도록 설정된 경우에, 내선 번호에 대응되는 내부 근무자의 이동 단말 장치로 통화를 연결하고, 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송하여 출력할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (a) 단계는, 상기 출입 통제 장치의 터치스크린에 표시된 콜 버튼을 선택하면, 상기 방문객을 촬영하여 얼굴 영상을 추출하고, 방문객으로부터 내선 번호를 입력받을 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (a) 단계는, 출입문 앞에 위치한 사람을 촬영하여 얼굴 영상을 추출하고, 얼굴 영상을 사전에 저장된 얼굴 영상들과 비교하여 얼굴 인증을 수행하며, 얼굴 인증에 실패한 경우에 상기 출입문 앞에 위치한 사람을 방문객으로 판단하여 방문객으로부터 내선 번호를 입력 받을 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (a) 단계는, 내선번호를 입력받기 위한 내선 번호 입력창을 방문객에게 표시하고, 사전에 정의된 시간내에 내선번호가 입력되지 않으면, 지정된 관리자에게 방문객의 얼굴 영상을 전송하며, 관리자로부터 수신된 제어신호에 따라서 출입문에 설치된 경광등을 점등하거나, 사이렌을 울리거나, 경찰에 신고를 접수할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 방법의 상기 (a) 단계는, (a1) 제 1 시간 주기로 영상을 촬영하는 단계; (a2) 촬영된 영상을 이전 시간 주기에 촬영된 영상들과 비교하여 물체를 검출하는 단계; (a3) 물체가 검출되면, 제 1 시간 주기보다 짧은 제 2 시간 주기로 영상을 촬영하는 단계; 및 (a4) 상기 (a3) 단계에서 촬영된 영상에서 얼굴의 특징점들을 조사하여 얼굴을 검출하고, 얼굴 영상을 추출하는 단계를 포함할 수 있다.
한편, 상술한 과제를 이루기 위한 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치는, 방문객을 촬영하는 카메라부; 방문객에게 내선 번호 입력창을 표시하고, 방문객으로부터 내선번호를 입력받는 터치스크린; 방문객이 입력한 내선 번호에 대응되는 내선 전화를 통해서 내부 근무자와 통화를 수행할 수 있도록 설치된 마이크 및 스피커; 유무선 통신망을 통해서 내선 전화 및 내부 근무자의 컴퓨터와 서로 통신을 수행하여, 상기 내선 전화와 음성 데이터를 상호 송수신하고, 내부 근무자의 컴퓨터로 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송하여 출력하고 상기 내부 근무자의 컴퓨터로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신 수신하는 통신부; 및 상기 카메라부를 제어하여 방문객을 촬영하고, 방문객을 촬영한 영상으로부터 얼굴 영역을 추출하여 얼굴 영상을 생성하며, 상기 터치스크린을 통해서 방문객으로부터 내선 번호를 입력 받으면, 상기 통신부를 통해서 입력된 내선 번호에 대응되는 내선 전화로 통화를 연결하고, 내선 전화에 대응되는 내부 근무자의 컴퓨터로 상기 얼굴 영상을 포함하는 출입 통제 메뉴를 전송하여 출입 통제 제어 신호를 수신하고, 상기 출입 통제 제어 신호에 따라서 출입문에 설치된 출입문 개폐 장치를 제어하는 하는 제어부를 포함한다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치는 내부 근무자의 등록 얼굴 영상을 저장한 데이터 베이스를 더 포함하고, 상기 제어부는 출입문 앞의 사람의 얼굴 영상을 사전에 상기 데이터 베이스에 저장된 등록 얼굴 영상들과 비교하여 얼굴 인증을 실시하고, 얼굴 영상이 인증된 경우에는 내부 근무자로 판단하여 상기 출입문 개폐 장치를 제어하여 출입문을 개방하고, 얼굴 영상이 인증되지 않은 경우에 방문객으로 판단하여 상기 터치스크린을 통해서 내선번호 입력창을 표시하고 방문객으로부터 내선 번호를 입력받을 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는, 통신부를 통해서 관리자 단말 또는 다른 내부 근무자 단말로부터 개인 ID 및 개인 공지 메시지, 또는 전체 공지 모드 정보 및 전체 공지 메시지를 수신하여 상기 데이터 베이스에 저장하고, 얼굴 영상이 인증된 경우, 상기 제어부는 인증된 내부 근무자의 개인 ID에 대응되는 개인 공지 메시지 및 전체 공지 메시지를 상기 터치스크린을 통해서 출력할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는 내부 근무자들 각각의 복수의 얼굴 영상(위급 상황을 나타내는 위급 상황 얼굴 영상을 포함함)을 사전에 등록 얼굴 영상으로서 상기 데이터 베이스에 저장하고, 상기 위급 상황 얼굴 영상이 얼굴 인증에 성공한 경우에는 위급 상황이 발생한 것으로 판단하여 상기 통신부를 통해서 경찰에 신고를 접수할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는, 방문객의 얼굴 영상을 포함하는 출입 로그 정보를 상기 데이터 베이스에 저장하고, 상기 출입 로그 정보는, 출입문의 개방 여부, 방문객과 통화를 수행하거나 출입 제어 신호를 발생시킨 내부 근무자의 식별정보, 및 시간 정보를 더 포함할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는, 사전에 정의된 일정한 시간내에 내선 번호의 내선 전화와 통화 연결이 되지 않고, 출입 제어 신호가 수신되지 않으면, 사전에 지정된 관리자에게 통화 연결을 시도하고 얼굴 영상을 포함하는 출입 제어 메뉴를 출력하며, 관리자로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신하여, 출입 제어 신호에 따라서 상기 출입문 개폐 장치를 제어하여 출입문을 개방하거나 출입문의 닫힘 상태를 유지할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는, 사전에 정의된 일정한 시간내에 내선 전화와 통화 연결이 되지 않거나, 내선 전화 번호에 대응되는 내부 근무자의 컴퓨터가 비활성화되어 있거나, 사전에 이동 단말 장치로 연결되도록 설정된 경우에, 내선 번호에 대응되는 내부 근무자의 이동 단말 장치로 통화를 연결하고, 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치는, 방문객이 상기 터치스크린에 표시된 콜 버튼을 선택하면, 상기 제어부는 상기 카메라부를 제어하여 방문객을 촬영하여 얼굴 영상을 추출하고, 방문객으로부터 내선 번호를 입력받을 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는, 상기 카메라부를 제어하여 출입문 앞에 위치한 사람을 촬영하여 얼굴 영상을 추출하고, 얼굴 영상을 사전에 상기 데이터베이스에 저장된 얼굴 영상들과 비교하여 얼굴 인증을 수행하며, 얼굴 인증에 실패한 경우에 상기 출입문 앞에 위치한 사람을 방문객으로 판단하여 상기 터치스크린을 통해서 방문객으로부터 내선 번호를 입력 받을 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는 내선번호를 입력받기 위한 내선 번호 입력창을 상기 터치스크린에 표시하고, 전에 정의된 시간내에 내선번호가 입력되지 않으면, 지정된 관리자에게 방문객의 얼굴 영상을 전송하며, 관리자로부터 수신된 제어신호에 따라서 출입문에 설치된 경광등을 점등하거나, 사이렌을 울리거나, 경찰에 신고를 접수할 수 있다.
또한, 본 발명의 바람직한 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 상기 제어부는, 상기 카메라부를 제어하여 제 1 시간 주기로 영상을 촬영하고, 촬영된 영상을 이전 시간 주기에 촬영된 영상들과 비교하여 물체를 검출하며, 물체가 검출되면, 상기 제 1 시간 주기보다 짧은 제 2 시간 주기로 영상을 촬영하고, 촬영된 영상에서 얼굴의 특징점들을 조사하여 얼굴을 검출하고, 얼굴 영상을 추출할 수 있다.
본 발명의 바람직한 실시예에 따른 출입 통제 장치 및 방법은, 내부 근무자는 사전에 얼굴 영상을 등록하고 얼굴 인식을 통해서 출입을 통제하고, 방문객은 얼굴 영상을 촬영한 후 내부 근무자와의 내선 통화 또는 내부 근무자의 방문객 얼굴 확인을 통해 출입 통제를 수행하며, 사무실에 출입하는 출입자의 얼굴 영상을 출입 로그에 기록함으로써 보다 신뢰성 높은 출입 통제가 가능하다.
도 1은 본 발명의 바람직한 실시예에 따른 출입 통제 시스템의 전체 구성을 도시하는 블록도이다.
도 2는 본 발명의 바람직한 실시예에 따른 출입 통제 장치의 세부 구성을 도시하는 블록도이다.
도 3은 본 발명의 바람직한 실시예에 따른 출입 통제 방법을 설명하는 흐름도이다.
도 4는 본 발명의 바람직한 실시예에 따른 얼굴 검출 방법을 설명하는 흐름도이다.
도 5는 본 발명의 바람직한 다른 실시예에 따른 출입 통제 방법을 설명하는 흐름도이다.
도 6은 본 발명의 바람직한 또 다른 실시예에 따른 출입 통제 방법을 설명하는 흐름도이다.
도 7은 본 발명의 바람직한 실시예에 따라서 방문객이 내선 번호를 입력하는 방식을 설명하는 도면이다.
도 8은 본 발명의 바람직한 실시예에 따라서 내부 근무자 또는 관리자의 PC 또는 이동 단말 장치에 표시되는 출입 제어 메뉴의 일예를 도시하는 도면이다.
도 9는 본 발명의 다른 일 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치의 기능과 출입 통제 방법을 설명하는 도면이다.
도 10은 본 발명의 바람직한 다른 일 실시예에 따른 출입 통제 장치 및 출입 통제 방법을 설명하는 도면이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예들을 설명한다.
도 1은 본 발명의 바람직한 실시예에 따른 출입 통제 시스템의 전체 구성을 도시하는 블록도이다.
도 1을 참조하면, 본 발명의 바람직한 실시예에 따른 출입 통제 시스템은, 출입문 개폐 장치(100), 출입 통제 장치(200), 복수의 이동 단말 장치(300), 복수의 내선 전화(400), 및 복수의 사용자 컴퓨터(500)를 포함하여 구성된다. 여기서, 복수의 이동 단말 장치(300)는 스마트폰으로 구현되는 것이 바람직하고, 복수의 이동 단말 장치(300)와 복수의 사용자 컴퓨터(500)에는 본 발명의 출입 통제 방법을 수행할 수 있는 애플리케이션 또는 프로그램이 설치되어 있다.
이들은 유무선 인터넷망으로 대표되는 유무선 통신망을 통해서 상호 연동된다.
각 구성의 기능을 설명하면, 먼저, 출입문 개폐 장치(100)는 출입문에 설치되어 출입 통제 장치(200)로부터 입력되는 출입 제어 신호에 따라서 출입문을 개방하거나 잠금 상태를 유지한다.
출입 통제 장치(200)는 출입하고자 하는 사람을 촬영하여 얼굴을 검출하고, 검출된 얼굴 영상을 인식하여 얼굴 인증을 수행하며, 출입하고자 하는 사람의 얼굴이 인증된 경우에는 내부 근무자로 판명하여 출입문을 개방하도록 지시하는 출입 제어 신호를 출입문 개폐 장치(100)로 출력하여 방문객의 출입을 허용한다.
또한, 출입 통제 장치(200)는 방문객이 인증되지 않은 경우에, 방문객으로 판단하여, 방문객에게 방문객이 찾아온 내부 근무자에 해당하는 내선 번호를 입력하도록 하고, 방문객이 내선 번호를 입력하면, 해당 번호로 전화 통화를 연결하여 내부 근무자와 전화통화를 수행하도록 하며, 내부 근무자의 PC 화면상에 방문객의 얼굴 영상과 출입문을 개폐할 수 있는 출입 제어 메뉴를 출력한다. 이 때, 내부 근무자의 컴퓨터(400)가 활성화되어 있지 않거나, 사전에 정의된 시간동안 내선 전화 통화가 되지 않거나, 또는 사전에 내부 근무자의 이동 단말 장치로 방문객의 방문을 알리도록 설정된 경우에는, 내부 근무자의 이동 단말 장치(300)로 방문객의 얼굴 영상을 포함하는 출입 제어 메뉴를 전송하여 표시하고 방문객과 통화를 수행하도록 할 수 있다. 또한, 내부 근무자의 설정에 따라서는 처음부터 내선 전화(500) 및 컴퓨터(400)로 출입 제어 메뉴를 전송하지 않고, 이동 단말 장치(300)로만 통화를 연결하고 출입 제어 메뉴를 전송하도록 구성할 수도 있다.
출입 통제 장치(200)는 방문객이 자신이 찾아온 내부 근무자와 통화 연결이 안되거나, 내부 근무자의 컴퓨터(400)로부터 출입 제어 신호를 수신하지 못한 경우, 관리자에게 통화 연결 및 출입 제어 메뉴를 출력하고, 관리자로부터 출입 제어 신호를 수신하여 방문객의 출입을 허용하거나 차단한다. 이 때, 출입 통제 장치(200)는 방문객의 얼굴 영상과 출입 로그 기록을 저장한다. 출입 로그 기록은 사무실 내부로 출입한 방문객의 얼굴 영상, 출입을 허용한 내부 근무자 정보 및 출입 시간을 저장할 수 있고, 추가적으로, 출입을 거절당한 방문객의 얼굴 영상 및 출입을 거부한 내부 근무자의 정보를 더 저장할 수 있다.
출입 통제 장치(200)의 세부 구성은 도 2를 참조하여 더욱 상세하게 후술한다.
복수의 이동 단말 장치(300)는 사무실 내부 근무자가 휴대하는 것으로서, 바람직하게는 스마트폰으로 구현되어, 내부 근무자가 자리에 있지 않아 내부 근무자의 컴퓨터(400)가 활성화 되어 있지 않은 경우 또는 컴퓨터(400) 대신에 이동 단말 장치(300)가 기본으로 설정된 경우, 출입 통제 장치(200)로부터 방문객의 얼굴 영상을 포함하는 출입 제어 메뉴를 수신하고, 출입문의 열림 또는 거절을 나타내는 출입 제어 신호를 출입 통제 장치(200)로 전송할 수 있다.
또한, 이동 단말 장치(300)는 출입 통제 장치(200)에 설치된 스피커(280) 및 마이크(240)를 통해서, 방문객과 통화를 수행할 수도 있다.
복수의 내선 전화기(400)는 사무실 내부 근무자의 각 책상에 설치되며, VoIP 전화기, 즉 인터넷 전화기로 구현된다. 내부 근무자는 방문객이 특정 내선 번호를 입력하면, 해당 내선 번호에 해당하는 내선 전화기(400)와 통화가 연결되고, 내부 근무자는 내선 전화기(400)를 통해서 출입 통제 장치(200)의 마이크(240) 및 스피커(280)를 통해서 방문객과 통화를 수행할 수 있다.
복수의 사용자 컴퓨터(500)는 내부 근무자의 각 책상에 설치되며, 방문객이 특정 내선 번호를 입력하면, 해당 내선 번호에 대응되는 내부 근무자의 컴퓨터(500)에 방문객의 얼굴 영상을 포함하는 출입 제어 메뉴가 팝업으로 표시되고(도 8 참조), 내부 근무자는 방문객의 얼굴을 확인하고, 문열림 버튼(810) 또는 거절 버튼(820)을 선택하여 출입문의 개폐를 제어할 수 있다.
도 2는 본 발명의 바람직한 실시예에 따른 출입 통제 장치(200)의 세부 구성을 도시하는 블록도이다.
도 2를 참조하여, 본 발명의 바람직한 실시예에 따른 출입 통제 장치(200)의 세부 구성을 설명하면, 본 발명의 바람직한 실시예에 따른 출입 통제 장치(200)는 조명부(210), 카메라부(220), 터치스크린(230), 마이크(240), 무선 통신 모듈(250), 통신부(260), 데이터 베이스(270), 스피커(280) 및 제어부(290)를 포함하여 구성되고, 카메라부(220)는 적외선 카메라(221) 및 컬러 카메라(223)를 포함하며, 데이터 베이스(270)는 인증 데이터 저장부(271) 및 로그 데이터 저장부(273)를 포함한다.
각각의 구성 요소들의 기능을 설명하면, 먼저 조명부(210)는 카메라부(220)에서 얼굴 영상을 보다 선명하게 촬영할 수 있도록 조명을 얼굴 방향으로 비춘다. 특히, 조명부(210)는 카메라부(220)에 포함된 적외선 카메라(221)에서 보다 양호하게 얼굴 영상을 촬영할 수 있도록 적외선 조명을 얼굴 방향으로 비출 수 있다.
카메라부(220)는 적외선 카메라(221)와 컬러 카메라(223)를 포함하여 구성되고, 동시에 방문객의 얼굴 영상을 촬영한다. 적외선 카메라(221)에서 촬영된 얼굴 영상은 얼굴 인식에 주로 이용되고, 컬러 카메라(223)에서 촬영된 얼굴 영상은 내부 근무자 또는 관리자에게 제공되어 방문객을 식별할 수 있도록 한다.
터치스크린(230)은 제어부(290)로부터 출력되는 정보를 출력하는데, 구체적으로 얼굴 인증 과정에서는 컬러 카메라(223)로부터 출력된 방문객의 얼굴 영상을 출력하고, 얼굴 인증이 실패한 경우, 도 7에 도시된 바와 같이 내선 번호를 입력할 수 있는 화면을 방문객에게 출력한다. 이 때, 터치스크린(230)은 내부 근무자의 명단을 출력하고 방문객이 내부 근무자의 명단을 선택함으로써 내선 번호 입력 과정을 수행할 수도 있다.
마이크(240) 및 스피커(280)는 각각 방문객과 내부 근무자가 통화를 수행할 수 있도록 설치된다. 방문객의 음성 신호는 마이크(240)를 통해서 입력되어 내부 근무자의 내선 전화(400) 또는 이동 단말 장치(300)로 전송되고, 내부 근무자의 음성은 스피커(280)를 통해서 방문객에게 출력된다.
무선 통신 모듈(250)은 RFID 리더기 또는 NFC 리더기 등으로 구현되어, 출입문을 출입하는 내부 근무자가 얼굴 인식을 통하지 않고, RF 카드 또는 NFC 태그 등을 이용하여 간편하게 출입문을 출입할 수 있도록, 내부 근무자가 소지한 RF 카드 및 NFC 태그 정보를 판독하여 제어부(290)로 출력한다.
통신부(260)는 유무선 통신망을 통해서 내선 전화(400), 내부 근무자 컴퓨터(500) 및 이동 단말 장치(300)와 서로 통신을 수행하여, 사무실 내부에 설치된 내선 전화(400) 및 이동 단말 장치(300)와 음성 데이터를 상호 송수신하고, 사무실 내부에 설치된 컴퓨터(500) 및 내부 근무자의 이동 단말 장치(300)로 방문객의 얼굴 영상을 포함하는 출입 제어 메뉴를 출력하고, 내부 근무자의 문열림 또는 거부와 같은 출입 제어 신호를 입력받아 제어부(290)로 출력한다.
데이터 베이스(270)는 내부에 인증 데이터 저장부(271) 및 로그 데이터 저장부(273)를 포함한다. 인증 데이터 저장부(271)에는 얼굴 인증에 이용되는 각 사무실 내부 근무자들의 얼굴 영상들이 저장되어 있고, 후술하는 바와 같이, 각 내부 근무자들에 대응되는 인사말 음성 파일들이 함께 저장될 수 있다.
로그 데이터 저장부(273)는 출입문을 출입한 각 근무자 및 방문객의 정보를 저장한다. 구체적으로, 로그 데이터 저장부(273)는 얼굴 인식을 통해서 출입문을 출입한 내부 근무자의 출입 시간을 저장하고, 출입문을 출입한 방문객의 얼굴 영상 및 출입 시간과 방문객의 출입을 허락한 내부 근무자의 식별 정보를 저장한다.
제어부(290)는 카메라부(220)를 제어하여 일정 시간 주기로 영상을 촬영함으로써 물체를 검출하고, 얼굴 영상을 촬영하여 인증을 수행한 후, 얼굴이 인증되면 출입문을 개방하여 인증된 근무자들의 출입을 허용하며, 출입 로그 데이터를 로그 데이터 저장부(273)에 저장한다.
이 때, 제어부(290)는 인증이 완료되면, 인증된 사용자에 대응되도록 사전에 인증 데이터 저장부(271)에 저장된 인사말 음성 데이터를 스피커(280)를 통해서 출력할 수 있다. 즉, 사용자들은 자신이 원하는 인사말 음성 데이터(예컨대, 딸의 목소리로 녹음된 인사말)를 사전에 저장하고, 얼굴 인증이 완료되어 출입문이 개방될 때, 해당 음성 데이터가 스피커(280)를 통해서 출력되도록 할 수 있다.
한편, 제어부(290)는 얼굴 영상이 인증되지 않으면, 영상이 촬영된 사람을 방문객으로 판단하고 방문객이 찾아온 내부 근무자의 내선 번호를 입력할 수 있도록 내선번호 입력창을 터치스크린(230)에 표시하고, 방문객이 터치스크린(230)에 내선번호를 입력하면, 통신부(260)를 통해서 해당 내선번호에 대응되는 내부 근무자의 내선 전화(400)로 통화를 연결하는 동시에, 내부 근무자의 컴퓨터(500)에 도 8에 도시된 바와 같이, 방문객의 얼굴 영상과 출입문을 개방하거나 출입문 개방을 거절할 수 있는 출입 제어 신호를 발생시킬 수 있는 출입 제어 메뉴의 팝업창을 표시한다.
이 때, 제어부(290)는 내부 근무자는 내선 전화(400)를 통해서, 방문객은 마이크(240)와 스피커(280)를 통해서 서로 통화를 수행할 수 있도록 하며, 내부 근무자가 출입 제어 메뉴에서 문열림을 선택하여 출입 제어 신호가 수신되면, 이에 따라서 출입문을 개방한다.
한편, 제어부(290)는 내선 번호에 대응되는 내부 근무자가 자리에 없다고 판단되는 경우(예컨대, 일정 시간 내에 내선 전화(400)를 받지 않거나 컴퓨터(500)가 비활성화되어 있거나, 사전에 정의된 시간동안 출입 제어 신호가 수신되지 않는 경우), 사전에 지정된 관리자(예컨대, 안내 데스크 관리자 등)에게 통화를 연결하고, 얼굴 영상을 포함하는 출입 제어 메뉴를 관리자 컴퓨터(500)에 표시하여, 관리자로 하여금 방문객을 응대하도록 한다.
한편, 내선 번호에 대응되는 내부 근무자가 부재중이라고 판단되면, 제어부(290)는 사전의 설정에 따라서, 사전에 저장된 내부 근무자의 이동 단말 장치(300)로 전화 통화를 연결하고, 이동 단말 장치(300)로 방문객의 얼굴 영상이 포함된 출입 제어 메뉴를 전송하여 이동 단말 장치(300)의 화면에 표시함으로써, 내부 근무자가 자리에 착석했을 때와 동일한 기능을 수행하도록 할 수도 있다.
또한, 제어부(290)는 방문객에 대해서 출입문이 개방되면, 방문객의 얼굴 영상과 출입 시간, 및 방문객에게 문을 개방한 내부 근무자에 관한 정보를 출입 로그 데이터 저장부(273)에 저장한다.
지금까지 바람직한 실시예에 따른 출입 통제 장치(200)에 대해서 설명하였다. 본 발명의 바람직한 다른 실시예는, 상술한 기능에 다른 기능을 더 추가할 수 있다.
예를 들어 설명하면, 사람이 출입문 주변을 배회하는 경우, 제어부(290)는 카메라부(220)를 통해서 물체를 감지하고, 감지된 물체의 영상을 촬영하여 얼굴을 검출하고, 검출된 얼굴 영상에 대해서 인증을 시도한다. 인증이 성공한 경우에는 상술한 바와 같이 출입문을 개방하지만, 인증이 실패한 경우에는 내선 번호를 입력할 수 입력창을 터치스크린(230)에 표시한다.
그런데, 방문객이 소정 시간이 지나도록 내선 번호를 입력하지 않는 경우, 제어부(290)는 수상한 사람의 존재로 인식하고, 관리자에게 얼굴 영상을 전송하고 관리자로부터 제어신호를 수신한다. 이 때, 제어부(290)는 실시간으로 영상을 촬영하여 관리자에게 전송할 수도 있음은 물론이다.
한편, 제어부(290)는 관리자로부터 제어신호가 수신되면, 제어신호의 종류에 따라서, 출입문에 설치된 경광등(610)을 점등하거나, 사이렌(620)을 울리거나, 경찰 서버에 온라인을 통해서 수상한 사람의 존재를 신고할 수도 있다.
한편, 상기 실시예에서는 얼굴 인증에 실패한 경우에 방문객으로 판단하고, 내선 번호 입력창을 터치스크린(230)을 통해서 표시하는 것으로 구성하였으나, 도 7에 도시된 바와 같이, 터치스크린(230)에 현재 시간과 Call 버튼을 항시 표시하고, 방문객이 Call 버튼을 터치하면 방문객을 촬영하여 방문객의 얼굴 영상을 추출하고, 내선번호 입력창을 터치스크린(230)에 표시하여 내선 번호를 입력받을 수도 있다. 이 때, 내선 번호를 입력받은 후의 처리 과정은 상술한 바와 동일하므로 구체적인 설명은 생략한다.
도 3은 본 발명의 바람직한 실시예에 따른 출입 통제 방법을 설명하는 흐름도이다. 도 3에 도시된 출입 통제 방법은 도 1 및 도 2를 참조하여 설명한 출입 통제 시스템에서 수행되는 것이므로, 명시적인 설명이 없어도 상술한 기능은 모두 본 발명의 바람직한 실시예에 따른 출입 통제 방법에서 수행됨을 주의해야 한다. 동일한 취지로, 후술하는 출입 통제 방법에서 수행되는 기능들을 모두 도 1 및 도 2에 도시된 출입 통제 시스템에서 수행되는 것임을 주의해야 한다.
도 3을 참조하여, 본 발명의 바람직한 실시예에 따른 출입 통제 방법을 설명하면, 먼저, 출입 통제 장치(200)는 카메라를 이용하여 출입 통제 장치(200) 앞에 위치한 사람을 촬영하여 얼굴을 검출하여 얼굴 영상을 추출한다(S310). 얼굴을 검출하여 얼굴 영상을 추출하는 방법은 다양하게 적용될 수 있으며, 그 일예를 도 4에 도시하였다.
도 4를 참조하여, 제 S310 단계에서 수행되는 얼굴 검출 방식의 일 예를 설명하면, 출입 통제 장치(200)는 제 1 시간 주기로 영상을 촬영하고(S311), 촬영된 영상을 이전 시간 주기에 촬영된 영상과 비교하여 물체가 검출되었는지 조사한다(S313). 여기서 제 1 시간 주기는 약 1~5초 정도로 설정될 수 있고, 출입 통제 장치(200)는 현재 촬영된 영상과 이전 주기에 촬영된 영상을 비교하여 물체를 검출할 수 있다. 예컨대, 이전 주기 영상과 현재 영상을 픽셀 단위로 비교하여, 픽셀값의 차이가 사전에 정의된 값 이상인 경우에는 물체가 검출된 것으로 판단할 수 있다.
그 후, 물체가 검출된 경우, 출입 통제 장치(200)는 제 1 시간 주기보다 짧은 제 2 시간 주기로 영상을 촬영하여(S315), 해당 영상에서 얼굴이 검출되었는지 여부를 조사하여 얼굴이 검출된 경우에는, 얼굴 영상을 추출하여 후술하는 제 S320 단계로 진행한다(S317). 얼굴이 검출되지 않은 경우에, 출입 통제 장치(200)는 제 S319 단계로 진행하여, 소정 시간 동안 제 S315 단계 내지 제 S319 단계를 반복적으로 수행하여 얼굴 검출을 시도하며(S319), 소정 시간 동안 얼굴이 검출되지 않으면 제 S311 단계로 진행한다. 상기 예에서, 제 2 시간 주기는 약 0.3초 내지 1초로 설정될 수 있고, 얼굴 검출 방식은 얼굴 영역에서 눈을 비롯한 특징점을 찾아 얼굴 영역을 검출하는 일반적인 얼굴 검출 방식이 적용될 수 있다.
다시 도 3을 참조하면, 얼굴 영역이 검출되어 얼굴 영상이 추출되면, 출입 통제 장치(200)는 얼굴 영상을 사전에 데이터 베이스(270)에 저장된 내부 근무자들의 얼굴 영상들과 비교하여 얼굴 인증을 수행한다(S320).
출입 통제 장치(200)는 얼굴 인증이 성공하였는지 조사하여(S330), 얼굴 인증이 성공한 경우에는 출입 통제 장치(200)는 출입문 개폐 장치(100)를 제어하여 출입문을 개방하고(S342), 출입자의 신원 및 출입 시간을 출입 로그 정보로서 저장한 후, 제 S310 단계로 다시 진행한다(S344).
한편, 제 S330 단계에서, 얼굴 인증에 실패한 경우에, 출입 통제 장치(200)는 출입문을 통과하고자 하는 사람이 방문객이라고 판단하고, 방문객이 내부 근무자와 통화를 수행할 수 있도록 터치스크린(230)에 내선번호 입력창을 표시하고, 방문객으로부터 내선 번호를 입력받는다(S350). 이 때, 출입 통제 장치(200)는 터치스크린(230)으로 내부 근무자의 목록을 출력하고, 방문객이 찾아온 내부 근무자의 이름을 터치함으로써 내선번호 입력에 갈음하도록 할 수 있다.
방문객이 내선 번호를 입력하면, 출입 통제 장치(200)는 방문객이 내부 근무자와 통화를 수행할 수 있도록 내선 번호로 통화를 연결하고, 내부 근무자의 컴퓨터(400)에, 도 8에 도시된 바와 같은, 얼굴 영상을 포함하는 출입 제어 메뉴를 팝업창 형식으로 출력한다(S360). 이 때, 상술한 바와 같이, 내부 근무자의 컴퓨터(500)가 비활성화 되어 있는 경우, 또는 내부 근무자의 이동 단말 장치(300)로 연결되도록 사전에 설정된 경우에는, 방문객의 얼굴 영상을 포함하는 출입 제어 메뉴를 내부 근무자의 이동 단말 장치(300)로 출력하고, 내부 근무자의 이동 단말 장치(300)와 통화를 연결할 수도 있다.
한편, 출입 통제 장치(200)는 일정 시간 내에 내선 전화(500) 또는 이동 단말 장치(300)와 통화가 연결되거나, 내부 근무자의 컴퓨터(400) 또는 이동 단말 장치로(300)부터 출입 제어 신호가 수신되는지 여부를 조사하여(S370), 방문객과 내부 근무자가 상호 통화를 수행하도록 하거나 내부 근무자의 컴퓨터(500)로부터 출입 제어 신호를 수신하고(S382), 수신된 출입 제어 신호에 따라서 출입문을 제어한다(S384). 이 때, 도 8에 도시된 바와 같이, 내부 근무자는 문열림 버튼(810)을 선택하여 방문객을 위해 출입문을 개방할 수도 있고, 거절 버튼(820)을 눌러 출입문 닫힘 상태를 유지할 수도 있다.
한편, 출입 통제 장치(200)는 출입문의 개방 여부와 상관없이, 방문객의 얼굴 영상과, 방문객이 출입하였는지 여부, 출입 시간 및 출입문을 개방한 내부 근무자 식별 정보를 출입 로그 정보로서 저장할 수 있다.
한편, 제 S370단계에서, 방문객이 내부 근무자와 연결되지 않으면, 사정된 지정된 관리자에게 통화를 연결하고, 관리자의 컴퓨터로 방문객의 얼굴 영상을 포함하는 출입 제어 메뉴를 출력하고, 관리자가 제 S382 단계 내지 제 S386 단계를 수행하도록 할 수도 있다(S390).
한편, 도 3을 참조하여 설명한 본 발명의 바람직한 실시예에서는, 얼굴 인증에 실패한 경우에 방문객으로 판단하고, 내선 번호 입력창을 터치스크린(230)을 통해서 표시하는 것으로 구성하였으나, 제 S330 단계에서 얼굴 인증에 실패한 후, 도 7에 도시된 바와 같이, 터치스크린(230)에 현재 시간과 Call 버튼을 표시하고, 방문객이 Call 버튼을 터치하면 제 S350 단계로 진행하여 내선번호 입력창을 터치스크린(230)에 표시하여 내선 번호를 입력받을 수도 있다. 이 때, 내선 번호를 입력받은 후의 처리 과정은 상술한 바와 동일하므로 구체적인 설명은 생략한다.
또한, 도 3을 참조하여 설명한 본 발명의 바람직한 실시예에서는, 제 S310 단계 내지 S330 단계가 무조건 수행되는 것으로 설명하였으나, 본 발명의 다른 실시예의 경우에는 터치스크린(230)에 현재 시간과 Call 버튼을 항시 표시하고, 방문객이 Call 버튼을 터치하면 방문객을 촬영하여 얼굴 영상을 추출한 후, 바로 제 S350 단계로 진행하여, 내선번호 입력창을 터치스크린(230)에 표시하여 내선 번호를 입력받을 수도 있다. 이 때, 내선 번호를 입력받은 후의 처리 과정은 상술한 바와 동일하므로 구체적인 설명은 생략한다.
도 5는 본 발명의 바람직한 다른 실시예에 따른 출입 통제 방법을 설명하는 흐름도이다.
도 5에 도시된 실시예에서, 출입 통제 장치(200)는 얼굴 인증이 성공한 경우에는 단순히 출입문만을 개방하는 것이 아니라, 얼굴이 인증된 사용자에 대응되도록 사전에 설정된 음성 인사말을 스피커(280)를 통해서 출력한다.
구체적으로, 사전에 각 사용자별로 얼굴 인증시 출력될 인사말 파일을 데이터 베이스(270)의 인증 데이터 저장부(271)에 저장한다(S305). 각 사용자별 인사말은 해당 사용자가 직접 설정할 것일 수 있고, 시스템 관리자가 내부 근무자의 직급에 따라서 설정한 것일 수도 있다. 예컨대, 사용자는 자신의 딸의 음성으로 인사말을 녹음하여 자신의 얼굴 인증시 출력될 인사말로 설정할 수 있다.
사용자별 인사말이 저장된 후, 출입 통제 장치(200)는 도 3의 제 S310 단계와 동일한 방식으로 출입문 앞에 위치한 방문객 또는 내부 근무자의 얼굴을 검출하고(S310), 도 3의 제 S320 단계와 동일한 방식으로, 검출된 얼굴 영상의 인증을 수행한다(S320).
얼굴 인증에 실패한 경우에는, 도 3의 제 S350 단계로 진행하고, 인증에 성공한 경우에는 출입문을 개방하고, 인증된 사용자에게 대응되는 인사말을 스피커(280)를 통해서 출력한다(S342-2).
출입문이 개방된 후, 출입 통제 장치(200)는 도 3의 제 S344 단계와 동일한 방식으로 출입 로그 정보를 저정할 수 있다(S344).
도 6은 본 발명의 바람직한 또 다른 실시예에 따른 출입 통제 방법을 설명하는 흐름도이다.
도 6을 참조하면, 본 발명의 다른 실시예에 따른 출입 통제 방법은 도 3에 도시된 바와 동일한 방식으로, 얼굴을 검출하고(S310), 얼굴 인증을 수행하며(S320), 얼굴 인증에 성공한 경우에는 제 S342 단계로 진행한다(S330).
한편, 얼굴 인증에 실패한 경우에, 출입 통제 장치(200)는 방문객으로 판단하고, 도 7에 도시된 바와 같이, 터치스크린(230)에 내선번호를 입력할 수 있는 창을 표시하고, 내선 번호 입력 받기를 대기하며, 소정 시간 내에 내선 번호가 입력되면 제 S360 단계로 진행한다(S350-2)
제 S350-2 단계에서, 소정 시간 내에 내선 번호가 입력되지 않는 경우에, 출입 통제 장치(200)는, 출입문 앞에 있는 사람이 단순한 방문객이 아니라고 판단하고, 지정된 관리자에게 얼굴 영상을 전송하고(S352), 관리자로부터 제어 신호가 수신되기까지 대기한다(S354).
관리자로부터 제어신호가 수신되면, 출입 통제 장치(200)는 제어신호의 종류를 판별하고, 제어 신호의 종류에 따라서, 출입문에 설치된 경광등(610)을 점멸하거나(S357), 경찰에 수상한 사람이 접근하였음을 신고하거나(S358), 출입문에 설치된 사이렌(620)을 울림으로써 범죄를 예방할 수 있다(S359).
도 9는 본 발명의 다른 일 실시예에 따른 얼굴 인식을 이용한 출입 통제 장치(200)의 기능과 출입 통제 방법을 설명하는 도면이다.
도 9에 도시된 실시예에서는, 도 2 및 도 3을 참조하여 설명한 출입 통제 장치(200) 및 출입 통제 방법에 관리자 또는 내부 근무자가 다른 내부 근무자에게 메시지를 전달하여, 해당 내부 근무자가 사무실에 출입할 때 메시지를 터치스크린(230)에 표시하는 기능을 더 포함한다. 따라서, 도 2 및 도 3을 참조하여 설명한 내용과 중첩되는 내용을 생략하고, 추가된 내용에 대해서만 설명한다.
먼저, 본 발명의 출입 통제 방법을 실행할 수 있는 애플리케이션 프로그램이 설치되어 있는 관리자 단말 또는 내부 근무자 단말은, 관리자 또는 내부 근무자로부터 메시지를 입력받아 다른 근무자 또는 전체 근무자들에게 전달할 메시지를 작성한다(S91). 이 때, 관리자 단말 및 내부 근무자 단말은 개인용 컴퓨터 또는 스마트폰과 같은 이동 단말 장치로 구현될 수 있다.
메시지가 작성되면, 관리자 단말 또는 내부 근무자 단말은 공지 일자(메시지를 전달할 일자)를 선택받고(S92), 공지 모드가 전체 공지 모드인지 아니면 개인 공지 모드인지를 입력받는다(S93).
공지 모드가 전체 공지 모드가 아닌 경우, 즉, 개인 공지 모드인 경우, 관리자 단말 또는 내부 근무자 단말은 작성된 메시지를 전달할 개인 ID를 선택받고(S94), 선택된 개인 ID와 함께 상기 제 S91 단계에서 작성된 개인 공지 메시지 및 공지 일자 정보를 유무선 통신망을 통해서 출입 통제 장치(200)로 전송한다(S95).
한편, 상술한 제 S93 단계에서, 관리자 또는 내부 근무자가 전체 공지 모드를 선택한 경우에, 관리자 단말 또는 내부 근무자 단말은 작성된 전체 공지 메시지를 전체 공지 모드를 나타내는 모드 정보 및 공지 일자 정보와 함께 출입 통제 장치(200)로 전송한다(S96).
한편, 출입 통제 장치(200)의 제어부(290)는 통신망을 통해서 유무선 통신망을 통해서 수신된 메시지를 데이터베이스(270)(특히, 인증 데이터 저장부)에 저장한다(S304). 이 때, 메시지가 개인 공지 메시지인 경우에는, 개인 공지 메시지와 함께 수신된 개인 ID에 대응되는 내부 근무자의 인증 정보와 상호 연계되어 저장될 수 있다.
그 후, 도 3을 참조하여 설명한 얼굴 검출 과정(S310) 및 얼굴 인증 과정(S320)을 수행하고, 얼굴 인증이 성공하면(S330), 출입 통제 장치(200)의 제어부(290)는 해당 일자에 얼굴이 인증된 내부 근무자에게 출력할 개인 공지 메시지 또는 전체 공지 메시지가 데이터 베이스(270)에 저장되어 있는지 여부를 조사하고(S340), 메시지가 있는 경우에는 해당 메시지를 터치스크린(230)을 통해서 출력하고(S341), 출입문을 개방하며(S342), 내부 근무자의 출입 기록을 출입 로그 정보로서 저장한다(S344).
만약, 제 S340 단계에서 조사한 결과 메시지가 존재하지 않는 경우에는, 도 3과 마찬가지로, 출입문을 개방하며(S342), 내부 근무자의 출입 기록을 출입 로그 정보로서 저장한다(S344).
도 10은 본 발명의 바람직한 다른 일 실시예에 따른 출입 통제 장치(200) 및 출입 통제 방법을 설명하는 도면이다.
도 10을 참조하면, 도 10에 도시된 실시예에서는 출입 통제 장치(200)의 제어부(290)는 각 내부 근무자의 복수의 얼굴 영상을 데이터 베이스(270)에 등록하되, 그 중 하나의 얼굴 영상은 위급상황을 나타내는 표정의 얼굴 영상을 데이터 베이스(270)에 등록한다. 그 후, 내부 근무자가 얼굴 인증시에 위급 상황을 나타내는 얼굴 표정을 지으면, 출입 통제 장치(200)의 제어부(290)는 데이터 베이스(270)에 등록된 얼굴 영상 중 일치하는 영상을 찾아 내부 근무자를 인증하고, 인증에 이용된 등록 얼굴 영상이 위급 상황을 나타내는 얼굴 영상임을 인식하면, 통신부(260)를 통해서 자동으로 경찰에 신고를 접수할 수 있도록 함에 특징이 있다.
예컨대, 내부 근무자가 위험 상황에 이용하기 위하여 얼굴을 찡그린 영상을 사전에 등록하고, 건물에 화재가 난 경우 또는 강도로부터 위협을 받고 있는 경우 등의 위급 상황이 발생한 경우, 내부 근무자는 얼굴을 찡그린 표정으로 인증을 수행하여 인증에 성공하면, 출입 통제 장치(200)는 위급 상황을 인식하고 자동으로 경찰에 신고를 접수하는 것이다.
도 10은 이러한 실시예의 구현 방법을 설명하는 흐름도이다.
도 10을 참조하면, 제어부(290)는 내부 근무자의 위급 상황에서의 표정이 표현된 위급 상황 얼굴 영상을 포함하는 복수의 얼굴 영상을 카메라부(220)로부터 입력받아 데이터 베이스(270)에 등록한다(S301).
그 후, 사용 과정에서 도 3의 제 S310 단계 내지 제 S330 단계를 수행하여 얼굴이 검출되면, 제어부(290)는 얼굴 인증을 수행하여 얼굴 인증에 성공하면, 인증에 이용된 얼굴 영상이 위급 상황 얼굴 영상인지 여부를 조사한다(S340-2).
만약, 인증에 이용된 얼굴 영상이 위급 상황 얼굴 영상인 경우, 제어부(290)는 통신부(260)를 통해서 경찰에 신고를 접수하고(S341-2), 사전에 설정된 바에 따라서, 출입문을 잠금 상태로 유지하도록 하거나(S341-3), 제 S342 단계로 진행하여 출입문을 개방하고 출입 로그 정보를 저장할 수 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플라피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (22)

  1. (a) 출입문에 설치된 출입 통제 장치에서 출입문 앞의 사람을 촬영하여 얼굴 영상을 추출하고, 촬영된 사람이 방문객이라고 판단되면, 방문객으로부터 내선 번호를 입력 받는 단계;
    (b) 상기 출입 통제 장치가 상기 내선 번호에 대응되는 내선 전화로 통화를 연결하고, 상기 내선 번호에 대응되는 내부 근무자의 컴퓨터로 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송하여 출력하는 단계; 및
    (c) 상기 출입 통제 장치가 상기 내부 근무자의 컴퓨터로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신하여, 출입 제어 신호에 따라서 출입문을 개방하거나 출입문의 닫힘 상태를 유지하는 단계를 포함하는 것을 특징으로 하는 출입 통제 방법.
  2. 제 1 항에 있어서, 상기 (a) 단계에서
    상기 출입 통제 장치는 출입문 앞의 사람의 얼굴 영상을 사전에 저장된 데이터 베이스에 저장된 얼굴 영상들과 비교하여 얼굴 인증을 실시하고, 얼굴 영상이 인증된 경우에는 내부 근무자로 판단하여 출입문을 개방하고, 얼굴 영상이 인증되지 않은 경우에 방문객으로 판단하여 상기 출입 통제 장치에 설치된 터치스크린을 통해서 내선번호 입력창을 표시하고 방문객으로부터 내선 번호를 입력받는 것을 특징으로 하는 출입 통제 방법.
  3. 제 2 항에 있어서,
    상기 (a) 단계 이전에,
    상기 출입 통제 장치는 관리자 단말 또는 다른 내부 근무자 단말로부터 개인 ID 및 개인 공지 메시지, 또는 전체 공지 모드 정보 및 전체 공지 메시지를 수신하여 저장하는 단계를 더 포함하고,
    상기 (a) 단계는,
    얼굴 영상이 인증된 경우, 상기 출입 통제 장치는 인증된 내부 근무자의 개인 ID에 대응되는 개인 공지 메시지 및 전체 공지 메시지를 터치스크린을 통해서 출력하는 것을 특징으로 하는 출입 통제 방법.
  4. 제 2 항에 있어서,
    상기 (a) 단계 이전에,
    상기 출입 통제 장치는 내부 근무자들 각각의 복수의 얼굴 영상(위급 상황을 나타내는 위급 상황 얼굴 영상을 포함함)을 사전에 등록하는 단계를 더 포함하고,
    상기 (a) 단계는,
    상기 위급 상황 얼굴 영상이 얼굴 인증에 성공한 경우에는 위급 상황이 발생한 것으로 판단하여 경찰에 신고를 접수하는 것을 특징으로 하는 출입 통제 방법.
  5. 제 1 항에 있어서,
    (d) 방문객의 얼굴 영상을 포함하는 출입 로그 정보를 저장하는 단계를 더 포함하고,
    상기 출입 로그 정보는, 출입문의 개방 여부, 방문객과 통화를 수행하거나 출입 제어 신호를 발생시킨 내부 근무자의 식별정보, 및 시간 정보를 더 포함하는 것을 특징으로 하는 출입 통제 방법.
  6. 제 1 항에 있어서,
    상기 (b) 단계에서, 상기 출입 통제 장치는 사전에 정의된 일정한 시간내에 통화 연결이 되지 않고, 출입 제어 신호가 수신되지 않으면, 사전에 지정된 관리자에게 통화 연결을 시도하고 얼굴 영상을 포함하는 출입 제어 메뉴를 출력하며,
    상기 (c) 단계에서, 상기 출입 통제 장치는 관리자로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신하여, 출입 제어 신호에 따라서 출입문을 개방하거나 출입문의 닫힘 상태를 유지하는 것을 특징으로 하는 출입 통제 방법.
  7. 제 1 항에 있어서,
    상기 (b) 단계에서, 상기 출입 통제 장치는 사전에 정의된 일정한 시간내에 내선 전화와 통화 연결이 되지 않거나, 내선 전화 번호에 대응되는 내부 근무자의 컴퓨터가 비활성화되어 있거나, 사전에 이동 단말 장치로 연결되도록 설정된 경우에, 내선 번호에 대응되는 내부 근무자의 이동 단말 장치로 통화를 연결하고, 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송하여 출력하는 것을 특징으로 하는 출입 통제 방법.
  8. 제 1 항에 있어서, 상기 (a) 단계는
    상기 출입 통제 장치의 터치스크린에 표시된 콜 버튼을 선택하면, 상기 방문객을 촬영하여 얼굴 영상을 추출하고, 방문객으로부터 내선 번호를 입력받는 것을 특징으로 하는 출입 통제 방법.
  9. 제 1 항에 있어서, 상기 (a) 단계는
    출입문 앞에 위치한 사람을 촬영하여 얼굴 영상을 추출하고, 얼굴 영상을 사전에 저장된 얼굴 영상들과 비교하여 얼굴 인증을 수행하며, 얼굴 인증에 실패한 경우에 상기 출입문 앞에 위치한 사람을 방문객으로 판단하여 방문객으로부터 내선 번호를 입력 받는 것을 특징으로 하는 출입 통제 방법.
  10. 제 9 항에 있어서,
    상기 (a) 단계는 내선번호를 입력받기 위한 내선 번호 입력창을 방문객에게 표시하고, 사전에 정의된 시간내에 내선번호가 입력되지 않으면, 지정된 관리자에게 방문객의 얼굴 영상을 전송하며, 관리자로부터 수신된 제어신호에 따라서 출입문에 설치된 경광등을 점등하거나, 사이렌을 울리거나, 경찰에 신고를 접수하는 것을 특징으로 하는 출입 통제 방법.
  11. 제 1 항에 있어서, 상기 (a) 단계는
    (a1) 제 1 시간 주기로 영상을 촬영하는 단계;
    (a2) 촬영된 영상을 이전 시간 주기에 촬영된 영상들과 비교하여 물체를 검출하는 단계;
    (a3) 물체가 검출되면, 제 1 시간 주기보다 짧은 제 2 시간 주기로 영상을 촬영하는 단계; 및
    (a4) 상기 (a3) 단계에서 촬영된 영상에서 얼굴의 특징점들을 조사하여 얼굴을 검출하고, 얼굴 영상을 추출하는 단계를 포함하는 것을 특징으로 하는 출입 통제 방법.
  12. 방문객을 촬영하는 카메라부;
    방문객에게 내선 번호 입력창을 표시하고, 방문객으로부터 내선번호를 입력받는 터치스크린;
    방문객이 입력한 내선 번호에 대응되는 내선 전화를 통해서 내부 근무자와 통화를 수행할 수 있도록 설치된 마이크 및 스피커;
    유무선 통신망을 통해서 내선 전화 및 내부 근무자의 컴퓨터와 서로 통신을 수행하여, 상기 내선 전화와 음성 데이터를 상호 송수신하고, 내부 근무자의 컴퓨터로 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송하여 출력하고 상기 내부 근무자의 컴퓨터로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신 수신하는 통신부; 및
    상기 카메라부를 제어하여 방문객을 촬영하고, 방문객을 촬영한 영상으로부터 얼굴 영역을 추출하여 얼굴 영상을 생성하며, 상기 터치스크린을 통해서 방문객으로부터 내선 번호를 입력 받으면, 상기 통신부를 통해서 입력된 내선 번호에 대응되는 내선 전화로 통화를 연결하고, 내선 전화에 대응되는 내부 근무자의 컴퓨터로 상기 얼굴 영상을 포함하는 출입 통제 메뉴를 전송하여 출입 통제 제어 신호를 수신하고, 상기 출입 통제 제어 신호에 따라서 출입문에 설치된 출입문 개폐 장치를 제어하는 하는 제어부를 포함하는 것을 특징으로 하는 출입 통제 장치.
  13. 제 12 항에 있어서,
    내부 근무자의 등록 얼굴 영상을 저장한 데이터 베이스를 더 포함하고,
    상기 제어부는 출입문 앞의 사람의 얼굴 영상을 사전에 상기 데이터 베이스에 저장된 등록 얼굴 영상들과 비교하여 얼굴 인증을 실시하고, 얼굴 영상이 인증된 경우에는 내부 근무자로 판단하여 상기 출입문 개폐 장치를 제어하여 출입문을 개방하고, 얼굴 영상이 인증되지 않은 경우에 방문객으로 판단하여 상기 터치스크린을 통해서 내선번호 입력창을 표시하고 방문객으로부터 내선 번호를 입력받는 것을 특징으로 하는 출입 통제 장치.
  14. 제 13 항에 있어서, 상기 제어부는
    통신부를 통해서 관리자 단말 또는 다른 내부 근무자 단말로부터 개인 ID 및 개인 공지 메시지, 또는 전체 공지 모드 정보 및 전체 공지 메시지를 수신하여 상기 데이터 베이스에 저장하고,
    얼굴 영상이 인증된 경우, 상기 제어부는 인증된 내부 근무자의 개인 ID에 대응되는 개인 공지 메시지 및 전체 공지 메시지를 상기 터치스크린을 통해서 출력하는 것을 특징으로 하는 출입 통제 장치.
  15. 제 13 항에 있어서,
    상기 제어부는 내부 근무자들 각각의 복수의 얼굴 영상(위급 상황을 나타내는 위급 상황 얼굴 영상을 포함함)을 사전에 등록 얼굴 영상으로서 상기 데이터 베이스에 저장하고,
    상기 위급 상황 얼굴 영상이 얼굴 인증에 성공한 경우에는 위급 상황이 발생한 것으로 판단하여 상기 통신부를 통해서 경찰에 신고를 접수하는 것을 특징으로 하는 출입 통제 장치.
  16. 제 12 항에 있어서, 상기 제어부는
    방문객의 얼굴 영상을 포함하는 출입 로그 정보를 상기 데이터 베이스에 저장하고,
    상기 출입 로그 정보는, 출입문의 개방 여부, 방문객과 통화를 수행하거나 출입 제어 신호를 발생시킨 내부 근무자의 식별정보, 및 시간 정보를 더 포함하는 것을 특징으로 하는 출입 통제 장치.
  17. 제 12 항에 있어서, 상기 제어부는
    사전에 정의된 일정한 시간내에 내선 번호의 내선 전화와 통화 연결이 되지 않고, 출입 제어 신호가 수신되지 않으면, 사전에 지정된 관리자에게 통화 연결을 시도하고 얼굴 영상을 포함하는 출입 제어 메뉴를 출력하며,
    관리자로부터 출입문 열림 또는 출입문 개방 거절 신호를 출입 제어 신호로서 수신하여, 출입 제어 신호에 따라서 상기 출입문 개폐 장치를 제어하여 출입문을 개방하거나 출입문의 닫힘 상태를 유지하는 것을 특징으로 하는 출입 통제 장치.
  18. 제 12 항에 있어서, 상기 제어부는
    사전에 정의된 일정한 시간내에 내선 전화와 통화 연결이 되지 않거나, 내선 전화 번호에 대응되는 내부 근무자의 컴퓨터가 비활성화되어 있거나, 사전에 이동 단말 장치로 연결되도록 설정된 경우에, 내선 번호에 대응되는 내부 근무자의 이동 단말 장치로 통화를 연결하고, 상기 얼굴 영상이 포함된 출입 통제 메뉴를 전송하여 출력하는 것을 특징으로 하는 출입 통제 장치.
  19. 제 12 항에 있어서,
    방문객이 상기 터치스크린에 표시된 콜 버튼을 선택하면,
    상기 제어부는 상기 카메라부를 제어하여 방문객을 촬영하여 얼굴 영상을 추출하고, 방문객으로부터 내선 번호를 입력받는 것을 특징으로 하는 출입 통제 장치.
  20. 제 12 항에 있어서, 상기 제어부는
    상기 카메라부를 제어하여 출입문 앞에 위치한 사람을 촬영하여 얼굴 영상을 추출하고, 얼굴 영상을 사전에 상기 데이터베이스에 저장된 얼굴 영상들과 비교하여 얼굴 인증을 수행하며, 얼굴 인증에 실패한 경우에 상기 출입문 앞에 위치한 사람을 방문객으로 판단하여 상기 터치스크린을 통해서 방문객으로부터 내선 번호를 입력 받는 것을 특징으로 하는 출입 통제 장치.
  21. 제 20 항에 있어서,
    상기 제어부는 내선번호를 입력받기 위한 내선 번호 입력창을 상기 터치스크린에 표시하고, 전에 정의된 시간내에 내선번호가 입력되지 않으면, 지정된 관리자에게 방문객의 얼굴 영상을 전송하며, 관리자로부터 수신된 제어신호에 따라서 출입문에 설치된 경광등을 점등하거나, 사이렌을 울리거나, 경찰에 신고를 접수하는 것을 특징으로 하는 출입 통제 장치.
  22. 제 12 항에 있어서, 상기 제어부는
    상기 카메라부를 제어하여 제 1 시간 주기로 영상을 촬영하고, 촬영된 영상을 이전 시간 주기에 촬영된 영상들과 비교하여 물체를 검출하며, 물체가 검출되면, 상기 제 1 시간 주기보다 짧은 제 2 시간 주기로 영상을 촬영하고, 촬영된 영상에서 얼굴의 특징점들을 조사하여 얼굴을 검출하고, 얼굴 영상을 추출하는 것을 특징으로 하는 출입 통제 장치.
PCT/KR2015/003392 2014-04-04 2015-04-03 얼굴 인식을 이용한 출입 통제 장치 및 방법 WO2015152690A2 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20140040374A KR101480103B1 (ko) 2014-04-04 2014-04-04 얼굴 인식을 이용한 출입 통제 장치 및 방법
KR10-2014-0040374 2014-04-04

Publications (2)

Publication Number Publication Date
WO2015152690A2 true WO2015152690A2 (ko) 2015-10-08
WO2015152690A3 WO2015152690A3 (ko) 2015-11-26

Family

ID=52588176

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/003392 WO2015152690A2 (ko) 2014-04-04 2015-04-03 얼굴 인식을 이용한 출입 통제 장치 및 방법

Country Status (2)

Country Link
KR (1) KR101480103B1 (ko)
WO (1) WO2015152690A2 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018157092A1 (en) * 2017-02-27 2018-08-30 Ring Inc. Identification of suspicious persons using audio/video recording and communication devices
CN110460468A (zh) * 2019-08-12 2019-11-15 杭州宇泛智能科技有限公司 一种通用设备lan接口系统
TWI740475B (zh) * 2020-04-29 2021-09-21 中華電信股份有限公司 訪客認證方法及訪客認證裝置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220157105A1 (en) * 2020-11-19 2022-05-19 Sonia Varrasso Kiosk
KR102428896B1 (ko) * 2021-09-01 2022-08-04 주식회사 제이티 건설현장의 스마트 안전 관리 시스템

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040095382A (ko) * 2003-04-28 2004-11-15 이상호 실시간 얼굴 인식을 통한 출입통제 및 방문자 기록 시스템
KR20050109338A (ko) * 2004-05-15 2005-11-21 김이남 인체인식을 이용한 출입문 도어락 보안 시스템 및 그 방법
KR20090087862A (ko) * 2009-07-29 2009-08-18 주진수 사무실용 얼굴인식 디지털 도어록 시스템
KR101272492B1 (ko) 2011-12-12 2013-06-10 한성기성주식회사 방문자를 인식하여 상황에 따라 조치할 수 있도록 휴대전화로 연결되는 인터폰

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018157092A1 (en) * 2017-02-27 2018-08-30 Ring Inc. Identification of suspicious persons using audio/video recording and communication devices
CN110460468A (zh) * 2019-08-12 2019-11-15 杭州宇泛智能科技有限公司 一种通用设备lan接口系统
CN110460468B (zh) * 2019-08-12 2022-05-24 杭州宇泛智能科技有限公司 一种通用设备lan接口系统
TWI740475B (zh) * 2020-04-29 2021-09-21 中華電信股份有限公司 訪客認證方法及訪客認證裝置

Also Published As

Publication number Publication date
KR101480103B1 (ko) 2015-01-07
WO2015152690A3 (ko) 2015-11-26

Similar Documents

Publication Publication Date Title
WO2015152690A2 (ko) 얼굴 인식을 이용한 출입 통제 장치 및 방법
CN104966344B (zh) 一种基于视频的安防门禁系统
WO2014157770A1 (ko) 디지탈 도어락과 무선통신 단말기를 이용한 출입 인증 방법 및 그 장치
JP2004013871A (ja) 防犯システム
WO2012030077A2 (ko) 디지털 도어락과 연동된 출입문 지문저장 시스템 및 그 방법
JP2003018587A (ja) ドアフォンシステム
WO2012118283A2 (ko) 휴대용 불법단속 및 교통위반단속 시스템
WO2015122699A1 (ko) 스마트폰을 이용한 긴급신호 자동 전송시스템 및 그 방법
WO2013081340A1 (ko) 감시 카메라를 이용하여 인식 불가라고 판정된 피사체를 추적 감시하는 보안 시스템 및 이를 이용한 보안 서비스 제공 방법
CA2983316C (en) Monitoring system having personal information protection function and method thereof
JP2009265769A (ja) 生体認証装置および通行制御システム
WO2018169150A1 (ko) 잠금화면 기반의 사용자 인증 시스템 및 방법
WO2021157794A1 (ko) 도어락을 제어하는 장치 및 방법
JP2024056872A (ja) 滞在管理装置、滞在管理方法、及びプログラム
JP2007072647A (ja) セキュリティシステム
JP4755014B2 (ja) カメラ付きインターフォンシステム
WO2022014798A1 (ko) 고객 만족도 조사 수행 시스템
WO2021242081A1 (ko) 지능형 통합 보안 시스템 및 방법
WO2020130536A1 (ko) 비콘을 이용한 지능형 호출 시스템
JP2009104325A (ja) 入退場者管理システム
KR20040095382A (ko) 실시간 얼굴 인식을 통한 출입통제 및 방문자 기록 시스템
KR101063751B1 (ko) 생체인식 기반 출입자 확인, 정보 전송 시스템
KR101778863B1 (ko) 홈 네트워크를 이용한 세대 방범시스템
JP2012175657A (ja) 集合住宅インターホンシステム
JP2013131923A (ja) インターホンシステム、制御方法、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15774349

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15774349

Country of ref document: EP

Kind code of ref document: A2