KR101939696B1 - Multi-midal access control system Operating in user's unconciousness state - Google Patents

Multi-midal access control system Operating in user's unconciousness state Download PDF

Info

Publication number
KR101939696B1
KR101939696B1 KR1020180045760A KR20180045760A KR101939696B1 KR 101939696 B1 KR101939696 B1 KR 101939696B1 KR 1020180045760 A KR1020180045760 A KR 1020180045760A KR 20180045760 A KR20180045760 A KR 20180045760A KR 101939696 B1 KR101939696 B1 KR 101939696B1
Authority
KR
South Korea
Prior art keywords
user
authentication
access control
authentication information
information
Prior art date
Application number
KR1020180045760A
Other languages
Korean (ko)
Inventor
천재두
이민정
Original Assignee
주식회사 에버정보기술
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에버정보기술 filed Critical 주식회사 에버정보기술
Priority to KR1020180045760A priority Critical patent/KR101939696B1/en
Application granted granted Critical
Publication of KR101939696B1 publication Critical patent/KR101939696B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C2009/00753—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by active electrical keys
    • G07C2009/00769—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by active electrical keys with data transmission performed by wireless means

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Collating Specific Patterns (AREA)

Abstract

The present invention relates to a user-unconscious multi-modal access control system which increases recognition accuracy to improve security. The user-unconscious multi-modal access control system comprises: an authentication management server to store user authentication information of users who are allowed access and user face authentication information corresponding to the user authentication information; and an access control terminal including a wireless communication unit to recognize a wireless authentication device located in a communication range to receive user authentication information to communicate with the wireless authentication device, a camera to acquire a user face, and a control unit to transmit the user authentication information to the authentication management server, receive user face authentication information corresponding to the user authentication information from the authentication management server, and analyze user face picture information received from the camera to extract user face feature information to compare the user face authentication information and the extracted user face feature information to process user authentication.

Description

사용자 무의식형 멀티모달 출입통제시스템{Multi-midal access control system Operating in user's unconciousness state}[0001] The present invention relates to an unmanned multi-modal access control system,

본 발명은 얼굴인식을 이용한 출입통제시스템에 관한 것으로서, 보다 상세하게는 사용자가 출입문으로 걸어가는 상태에서 무선통신을 통해 1차 인증이 수행되고, 사용자가 자연스럽게 카메라를 정면으로 응시할 수 있도록 유도하여 촬영된 사용자 얼굴정보를 이용하여 2차 인증이 수행되도록 함으로써 신속하고 정확하게 출입통제가 가능하면서도 사용자의 불편함이나 거부감을 제거할 수 있도록 하는 방법에 관한 것이다.[0001] The present invention relates to an access control system using face recognition, and more particularly, it relates to an access control system using face recognition, in which a first authentication is performed through wireless communication while a user is walking on a doorway, And the second authentication is performed using the user's face information, thereby enabling quick and accurate access control while eliminating the inconvenience or unreasonableness of the user.

다수의 사용자들이 출입하는 회사나 관공서 등에는 허용된 사용자만이 출입이 가능하도록 하는 출입통제시스템이 구축되어 있다. An access control system has been established in a company or a government office or the like where a large number of users access, allowing only authorized users to access the system.

가장 일반적인 형태의 출입통제시스템은 RFID 카드 방식을 이용하는 것으로서, 사무실 내부에 근무하는 근무자들에게 출입 카드를 배포하고, 내부 근무자들이 출입할 때 출입문에 설치된 카드 리더기를 이용하여 출입카드를 인증함으로써 출입문을 개방하도록 하는 방식이 사용된다.The most common form of access control system is RFID card, which distributes access cards to employees working inside the office and authenticates access cards using card readers installed at the entrance when internal workers enter. The method of opening is used.

그러나, 이러한 카드 리더기는 사용자가 직접 카드를 카드 리더기 부근에 위치시키는 동작이 요구되어 번거로울 뿐 아니라 사용자가 카드 리더기를 분실하는 경우 사무실 출입이 허용되지 않은 사람이 이를 습득하여 사무실 내부를 출입할 수 있는 보안적인 문제를 갖고 있다.However, such a card reader is troublesome because it requires the user to place the card directly in the vicinity of the card reader, and when a user loses the card reader, a person who is not allowed to enter the office can acquire the card and access the inside of the office I have a security problem.

이에 출입이 허용된 사용자들의 생체 정보를 이용한 출입통제시스템이 도입된 사례가 많다.There are many cases in which access control systems using biometric information of users allowed to access are introduced.

생체정보를 이용한 출입통제시스템은 지문 인식장치를 이용한 경우가 가장 널리 사용되고 있다. 지문을 이용한 방식은 분실의 염려가 없고 보안성이 상대적으로 높은 장점이 있으나, 여전히 사용자가 손가락을 지문 인식장치에 갖다 대어야 하는 동작이 요구되고 모조 지문을 이용하여 불법적인 출입을 시도하는 사례가 발생하고 있다.The access control system using biometric information is most widely used when a fingerprint recognition device is used. The fingerprint authentication method is advantageous in that there is no fear of loss and the security is relatively high. However, there is still a case in which a user is required to put his finger on the fingerprint recognition device and attempts to illegally access the fingerprint using the fingerprint authentication .

이에, 보다 보안성이 높으면서도 사용자 편의성이 높은 얼굴인식을 이용한 출입통제시스템이 도입되고 있다.Therefore, an access control system using face recognition, which has higher security and is more user friendly, is being introduced.

얼굴인식을 이용한 사용자 인식방법은 출입통제시스템의 카메라에서 촬영된 사용자의 사진으로부터 추출된 얼굴 특징정보를 기저장된 사용자 DB의 얼굴 특징정보들과 비교하여 일치하는 경우에만 출입을 허용하는 방식으로서, 정확도가 높고 인식 속도가 빠르다는 장점이 있다.The user recognition method using face recognition is a method of comparing the face feature information extracted from the photograph of the user photographed by the camera of the access control system with the face feature information of the user DB and allowing access only when they match, Is high and recognition speed is fast.

그러나, 얼굴인식을 이용한 사용자 인식방법은 조명이 충분하지 못하거나 사용자 얼굴 각도가 정면에서 일정 각도 이상 틀어진 경우 인식 정확도가 낮아 인식 오류가 많이 발생하고 있고, 사용자 측면에서 카메라를 응시하는 동작이 불편하고 감시당하고 있는 느낌을 주어 거부감을 일으키는 등의 문제점들을 갖고 있다. However, in the user recognition method using face recognition, when the illumination is insufficient or the user's face angle is more than a predetermined angle from the front, recognition error is low due to low recognition accuracy, and the operation for gazing at the camera is inconvenient It gives a feeling of being watched and causes a feeling of rejection.

한국등록특허 제1596363호에는 사용자가 정면에서 카메라를 응시하지 않더라도 얼굴을 이미지의 중심에 자동으로 포착할 수 있는 방법으로서, 원거리의 출입자를 촬영한 영상에서 얼굴 이미지를 검출한 다음에 내장 카메라의 자세를 변경하면서 접근하는 출입자를 계속 촬영함으로써 출입자의 접근 중에 얼굴 인식에 적합한 이미지를 자동으로 얻어 스스로 얼굴 인식을 수행하는 출입관리장치 및 방법이 제시되어 있다.Korean Patent No. 1596363 discloses a method for automatically capturing a face at the center of an image even if the user does not gaze at the camera from the front. The method detects a face image from a captured image of a remote user, There is proposed an access management apparatus and method for automatically acquiring an image suitable for face recognition during access by a person to perform face recognition by himself by continuously shooting the approaching person while changing the accessing person's face.

그러나, 이러한 방법은 출입자를 연속하여 추적하면서 얼굴 인식에 적합한 정면 영상을 추출해야 하므로 상당한 부하가 소모되고 얼굴 인식이 적합한 영상을 얻기에는 해상도의 문제가 발생하게 되어 실용화가 곤란한 방법인 것으로 판단된다.However, since this method needs to extract the frontal image suitable for face recognition while tracking the passenger continuously, it is considered that it is a difficult method to practical use because a considerable load is consumed and a resolution problem is caused to obtain an image suitable for face recognition.

따라서, 불필요한 비용 증가 없이 현실적으로 사용자의 거부감을 최소화하면서 사용자의 정면 얼굴 영상을 용이하게 획득할 수 있고 사용자 인증 정확도를 높일 수 있는 방법에 대한 요구가 높아지고 있다. Accordingly, there is a growing demand for a method that can easily acquire a user's frontal face image and increase the accuracy of user authentication while minimizing unnecessary user's rejection without unnecessarily increasing the cost.

한국등록특허 제1596363호 “얼굴 인식에 의한 출입관리장치 및 방법”Korean Patent No. 1596363 entitled " Access Control Apparatus and Method by Facial Recognition "

본 발명은 상기와 같은 문제점을 해결하기 위해 안출된 것으로서, 본 발명의 목적은 사용자가 인식하지 못한 상태에서 1차 인증이 이루어진 후 얼굴인식을 통해 2차 인증을 수행함으로써 신속하면서도 인식 정확도를 높여 보안성을 향상시킬 수 있도록 함과 아울러, 사용자 측면에서 자연스럽게 카메라를 응시할 수 있도록 유도하여 정면 영상을 신속하게 정확하게 확보할 수 있도록 하는 것이다.SUMMARY OF THE INVENTION The present invention has been conceived to solve the problems as described above, and it is an object of the present invention to provide a method and apparatus for performing security authentication by performing face recognition and second authentication after a first authentication, The user can easily gaze at the camera from the user's viewpoint, and the frontal image can be quickly and precisely secured.

상기 목적을 달성하기 위한 본 발명의 일 실시예에 따르면, 출입이 허용된 사용자들의 사용자 인증정보와 상기 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 저장하고, 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 출입통제 단말기로 전송하는 인증 관리서버와; 통신범위 이내에 위치한 무선 인증 디바이스를 인식하여 상기 무선 인증 디바이스와의 통신을 통해 사용자 인증정보를 수신하는 무선 통신부와, 사용자 얼굴을 취득하는 카메라와, 상기 무선 통신부를 통해 수집한 사용자 인증정보를 상기 인증 관리서버로 전송하여 상기 인증 관리서버로부터 통신범위 이내에 위치한 무선 인증 디바이스의 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 수신하여 저장하고, 카메라로부터 수신된 사용자 얼굴 사진 정보를 분석하여 사용자 얼굴 특징정보를 추출하며, 상기 인증 관리서버로부터 수신된 사용자 얼굴 인증정보와 사용자 얼굴 사진 정보에서 추출된 사용자 얼굴 특징정보를 비교함으로써 사용자 인증을 처리함과 더불어, 사용자 얼굴 인증이 완료되면 상기 인증 관리서버로부터 수신된 사용자 얼굴 인증정보를 삭제하여 개인정보의 유출을 방지하는 제어부를 포함하는 출입통제 단말기를 포함하는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템이 제공된다.According to an aspect of the present invention, there is provided a method for storing face authentication information corresponding to user authentication information of a user allowed access and user authentication information corresponding to user authentication information, To the access control terminal; A wireless communication unit for recognizing a wireless authentication device located within a communication range and receiving user authentication information through communication with the wireless authentication device; a camera for acquiring a user's face; Receiving the user's face authentication information corresponding to the user authentication information of the wireless authentication device located within the communication range from the authentication management server, storing the received user's face authentication information, analyzing the user's face image information received from the camera, Extracts user face authentication information received from the authentication management server and user facial feature information extracted from the user face image information to process user authentication, and when the user face authentication is completed, User face Delete the authentication information is provided to the user unconscious type multimodal access control system comprising the access control device to a control unit for preventing the leakage of personal information.

상기 목적을 달성하기 위한 본 발명의 다른 일 실시예에 따르면, 출입이 허용된 사용자들의 사용자 인증정보와 상기 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 저장하고, 사용자 인증처리를 수행하는 인증 관리서버와; 통신범위 이내에 위치한 무선 인증 디바이스를 인식하여 상기 무선 인증 디바이스와의 통신을 통해 사용자 인증정보를 수신하는 무선 통신부와, 사용자 얼굴을 취득하는 카메라와, 상기 사용자 인증정보와 사용자 얼굴 영상정보를 상기 인증 관리서버로 전송하고, 상기 인증 관리서버로부터 사용자 인증 결과 정보를 수신하여 사용자 인증 결과에 따라 출입도어를 개폐처리하는 출입통제 단말기를 포함하되, 상기 인증 관리서버는 상기 출입통제 단말기로부터 수신된 사용자 인증정보에 대한 1차 인증처리를 수행하여, 기 저장된 사용자 얼굴 인증정보 중 1차 인증이 완료된 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 추출하고, 이후 상기 출입통제 단말기로부터 수신된 인증 대상 사용자 얼굴 영상정보를 분석하여 사용자 얼굴 특징정보를 추출함과 더불어, 1차 인증이 완료된 사용자 얼굴 인증정보와 출입통제 단말기로부터 수신된 인증 대상 사용자 얼굴 특징정보를 비교하여 2차 인증을 처리하는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템이 제공된다.According to another aspect of the present invention, there is provided an authentication management system for storing user authentication information of users allowed access and user authentication information corresponding to the user authentication information, Wow; A wireless communication unit for recognizing a wireless authentication device located within a communication range and receiving user authentication information through communication with the wireless authentication device; a camera for acquiring a user face; And an access control terminal for transmitting the user authentication result information to the server, receiving the user authentication result information from the authentication management server, and opening / closing the access door according to a user authentication result, wherein the authentication management server transmits the user authentication information The face authentication information corresponding to the user authentication information that has been firstly authenticated among the previously stored user face authentication information is extracted, and then the authentication target face image information received from the access control terminal And the user facial feature information is added There is provided a user unconscious multimodal access control system, characterized in that the second user authentication process is performed by comparing the user's face authentication information with which the first authentication is completed and the authentication target user's face feature information received from the access control terminal .

여기서, 상기 출입통제 단말기는 영상을 표시하는 디스플레이부를 더 포함하고, 상기 출입통제 단말기는 전면에 투과성 거울이 설치되고, 상기 투과성 거울 후면에 상기 카메라와 디스플레이부가 설치되며, 상기 투과성 거울과 카메라 간에는 수직 또는 수평 성분의 빛을 선택적으로 투과시키는 편광필터가 개재되는 것이 바람직하다.The access control terminal may further include a display unit for displaying an image, wherein the access control terminal is provided with a transparent mirror on the front surface thereof, the camera and the display unit are provided on the rear surface of the transparent mirror, Or a polarizing filter for selectively transmitting light of a horizontal component is preferably interposed.

그리고, 상기 디스플레이부는 표출되는 영상 프레임 간에 조명을 위한 발광 프레임이 삽입되되, 상기 발광 프레임의 표출 시간은 1/100초보다 작은 것이 보다 바람직하다.In addition, the display unit may include a light emitting frame for illumination between the image frames to be displayed, and the display time of the light emitting frame is preferably less than 1/100 second.

또한, 상기 출입통제 단말기가 설치된 벽체의 내부 공간에는 전자파 차단 장치가 설치되어 출입문을 사용하지 않는 사용자 디바이스의 불필요한 인식을 줄여 처리 속도를 향상시키고 배터리 및 전원 소모를 감소시키는 것이 보다 바람직하다.In addition, it is preferable that an electromagnetic wave shielding device is installed in an internal space of the wall where the access control terminal is installed, thereby reducing unnecessary recognition of a user device not using a door, thereby improving a processing speed and reducing battery and power consumption.

상기와 같은 본 발명에 따르면, 사용자의 거부감을 최대한 해소하면서도 빠르고 정확한 사용자 인증이 가능하여 얼굴인식을 이용한 출입통제시스템의 보급 활성화에 기여할 수 있을 것으로 판단된다. According to the present invention as described above, quick and accurate user authentication can be performed while eliminating the user's feeling of rejection as much as possible, thereby contributing to activation of the access control system using face recognition.

도 1은 본 발명에 따른 사용자 무의식형 멀티모달 출입통제시스템의 전체 구성을 도시한 것이다.
도 2는 무선 인증 디바이스와 출입통제 단말기의 세부 구성을 도시한 블록도이다.
도 3은 출입통제 단말기를 개략적으로 도시한 정면도이다.
도 4는 출입통제 단말기의 전면 구성을 보여주기 위한 개략적인 측단면도이다.
도 5는 디스플레이부에서 영상 프레임 간에 발광 프레임을 삽입하여 표시하는 방법을 설명하기 위한 것이다.
도 6은 본 발명에 따른 사용자 무의식형 멀티모달 출입 통제 방법이 수행되는 과정을 도시한 흐름도이다.
도 7은 출입통제 단말기가 통신 가능거리 내에 위치한 무선 인증 디바이스를 인식하는 것을 개념적으로 표현한 것이다.1 is a block diagram illustrating an overall configuration of a user unconscious multimodal access control system according to the present invention.
2 is a block diagram illustrating a detailed configuration of the wireless authentication device and the access control terminal.
3 is a front view schematically showing the access control terminal.
4 is a schematic side cross-sectional view for showing a front configuration of the access control terminal.
5 is a view for explaining a method of inserting a light emitting frame between image frames in a display unit and displaying the inserted light emitting frame.
FIG. 6 is a flowchart illustrating a process of performing a user unconscious multimodal access control method according to the present invention.
FIG. 7 conceptually shows that the access control terminal recognizes the wireless authentication device located within the communication range.

이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다. 도면들 중 동일한 구성요소들은 가능한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다. 또한 발명의 요지를 불필요하게 흐릴 수 있는 공지기능 및 구성에 대한 상세한 설명은 생략한다.Hereinafter, the present invention will be described in detail with reference to the drawings. It is to be noted that like elements in the drawings are represented by the same reference numerals as possible. Further, detailed description of known functions and configurations that may unnecessarily obscure the gist of the invention will be omitted.

도 1은 본 발명에 따른 사용자 무의식형 멀티모달 출입통제시스템의 전체 구성을 도시한 것이고, 도 2는 무선 인증 디바이스와 출입통제 단말기의 세부 구성을 도시한 블록도이다.FIG. 1 is a block diagram illustrating the entire configuration of a user unconscious multimodal access control system according to the present invention, and FIG. 2 is a block diagram illustrating a detailed configuration of a wireless authentication device and an access control terminal.

도 1에 도시된 바와 같이, 본 발명에 따른 사용자 무의식형 멀티모달 출입통제시스템은 무선 인증 디바이스(20), 출입통제 단말기(30) 및 인증 관리서버(40)를 포함하여 구성된다.1, the user unconscious multimodal access control system according to the present invention includes a wireless authentication device 20, an access control terminal 30, and an authentication management server 40.

무선 인증 디바이스(20)는 무선통신이 가능한 전자 디바이스로서 사용자가 휴대할 수 있는 형태의 기기이다. 이러한 전자 디바이스로는 스마트 단말, 태블릿 PC 등의 다양한 소형 통신기기가 사용될 수 있다. 무선 인증 디바이스(20)는 도 2에 도시된 바와 같이, 저장부(21), 무선통신부(22) 및 제어부(23)를 포함할 수 있다. 설명의 편의를 위해 무선 인증 디바이스(20)가 3개의 구성요소를 갖는 것으로 간략하게 도시하였으나 이 외 입력장치, 디스플레이, 스피커 등의 다양한 구성을 포함할 수 있음은 물론이다.The wireless authentication device 20 is an electronic device capable of wireless communication and is a device that can be carried by the user. As such electronic devices, various small-sized communication devices such as smart terminals and tablet PCs can be used. The wireless authentication device 20 may include a storage unit 21, a wireless communication unit 22, and a control unit 23, as shown in FIG. For convenience of explanation, the wireless authentication device 20 is illustrated as having three components, but it goes without saying that the wireless authentication device 20 may include various components such as an external input device, a display, and a speaker.

저장부(21)는 사용자 인증정보를 저장하기 위한 것으로서, 스마트 단말 등에 사용되는 비휘발성 메모리가 사용될 수 있다. 여기서, 사용자 인증정보는 출입이 허용된 사용자들에게 부여된 사용자 식별정보를 의미한다.The storage unit 21 is for storing user authentication information, and may be a nonvolatile memory used in a smart terminal or the like. Here, the user authentication information is user identification information given to users who are permitted to access.

무선통신부(22)는 근거리 무선통신을 통해 출입통제 단말기(30)와 정보를 송수신하는 것이고, 제어부(23)는 출입통제 단말기(30)로부터 사용자 인증정보 요청이 있는 경우 저장부(21)에 저장되어 있는 사용자 인증정보를 추출하여 무선통신부(22)를 통해 출입통제 단말기(30)로 전송한다.The wireless communication unit 22 transmits and receives information to and from the access control terminal 30 through the short distance wireless communication and the control unit 23 stores the user authentication information in the storage unit 21 when there is a user authentication information request from the access control terminal 30 And transmits the extracted user authentication information to the access control terminal 30 through the wireless communication unit 22.

출입통제 단말기(30)는 건물의 입구나 사무실 현관 등에 설치되어 사용자 인증 여부에 따라 출입 도어 또는 출입 게이트를 개폐하는 것으로서, 도 2에 도시된 바와 같이, 무선통신부(31), 카메라(32), 디스플레이부(33), 저장부(34), 스피커(35), 인터페이스부(36) 및 제어부(37)를 포함하여 구성된다.2, the access control terminal 30 includes a wireless communication unit 31, a camera 32, and a display unit 34. The access control unit 30 includes a wireless communication unit 31, a camera 32, A display unit 33, a storage unit 34, a speaker 35, an interface unit 36, and a control unit 37.

무선통신부(31)는 근거리 무선통신을 통해 무선 인증 디바이스(20)로부터 사용자 인증정보를 수신하기 위한 것이다. 근거리 무선통신 방식은 출입통제 단말기 (30) 부근 소정 거리(수 m ~ 수십 m)에 위치한 무선 인증 디바이스(20)들을 인식할 수 있는 무선통신방식이 사용될 수 있다. 예를 들어, 본 실시예에서 근거리 무선통신 방식 중에서 블루투스 통신 방식이나 지그비(Zigbee) 통신 방식 등이 적용될 수 있다. 블루투스 통신 방식은 대부분의 스마트 단말에 블루투스 모듈이 내장되어 있어 스마트 단말이 무선 인증 디바이스로 사용되기 쉽고, 블루투스 통신방식은 통상 10m 정도의 통신 거리를 갖고 있으므로 출입통제 단말기(30)로 접근하고 있는 무선 인증 디바이스(20)를 인식하는 것이 용이한 장점이 있으며, 지그비 통신 방식은 블루투스 방식에 비해 통신 거리가 더 길고 통신연결 시간이 짧은 장점이 있다. 상술한 바와 같이, 블루투스와 지그비 방식 외에 다양한 근거리 무선통신 방식이 사용될 수 있음은 물론이다.The wireless communication unit 31 is for receiving user authentication information from the wireless authentication device 20 via short-range wireless communication. A wireless communication method capable of recognizing wireless authentication devices 20 located at a predetermined distance (several meters to several tens of meters) near the access control terminal 30 can be used for the short-range wireless communication method. For example, in the present embodiment, a Bluetooth communication method, a Zigbee communication method, or the like may be applied among short-range wireless communication methods. Since the Bluetooth communication method is easy to use as a wireless authentication device because most of the smart terminals have a built-in Bluetooth module and the Bluetooth communication method has a communication distance of about 10 m, It is easy to recognize the authentication device 20, and the Zigbee communication method has an advantage that the communication distance is longer and the communication connection time is shorter than that of the Bluetooth type. As described above, various short-range wireless communication methods other than Bluetooth and ZigBee method can be used.

카메라(32)는 출입통제 단말기(30)의 전면 일측에 설치되어 건물 입구나 사무실 현관을 입장하기 위해 출입통제 단말기(30)에 근접한 사용자의 얼굴을 촬영하기 위한 것이다. The camera 32 is installed at one side of the front face of the access control terminal 30 to photograph a face of the user close to the entrance control terminal 30 to enter a building entrance or an office entrance.

디스플레이부(33)는 LCD, LED 등의 전자 디스플레이로서 출입통제 단말기(30)에 근접한 사용자에게 정보를 전달하기 위한 일반적인 목적 외에 사용자가 카메라(32)를 응시하도록 유도하는 기능과 선명한 영상을 얻기 위해 조명을 제공하는 기능을 수행하는데 이에 대해서는 후술하기로 한다. The display unit 33 is an electronic display such as an LCD or an LED, and has a general purpose of transmitting information to a user close to the access control terminal 30, a function of guiding the user to look at the camera 32, And performs a function of providing illumination, which will be described later.

저장부(34)는 출입통제 단말을 운영하기 위해 필요한 소프트웨어 및 데이터가 저장되는 것으로서, 본 발명의 일 실시예에서는 얼굴 분석 소프트웨어가 저장될 수도 있다.The storage unit 34 stores software and data necessary for operating the access control terminal. In one embodiment of the present invention, the facial analysis software may be stored.

스피커(35)는 입장하고자 하는 사용자에게 음성으로 정보를 제공하기 위한 것으로서, 디스플레이부(33)를 통해 사용자의 자연스러운 정면 응시 유도가 되지 않는 경우 사용자가 정면을 응시하도록 유도하는 음성을 제공할 수 있다.The speaker 35 is for providing information to a user who wishes to enter a voice, and may provide a voice for inducing the user to gaze in front of the user when the user does not induce a natural frontal gaze through the display unit 33 .

인터페이스부(36)는 유선통신망을 통해 건물이나 사무실 내부에 설치되어 있는 인증 관리서버(40)와 연결하기 위한 수단이다.The interface unit 36 is a means for connecting to the authentication management server 40 installed in a building or an office through a wired communication network.

제어부(37)는 상기 각 구성요소들을 제어하여 사용자 인증정보(식별정보)를 이용한 1차 인증처리 및 사용자 얼굴 인식을 통한 2차 인증처리를 수행하기 위한 프로세서이다. The control unit 37 is a processor for controlling the respective components and performing a primary authentication process using user authentication information (identification information) and a secondary authentication process using user's face recognition.

인증 관리서버(40)는 사용자 인증을 위해 필요한 사용자 인증정보(예 : 사용자 식별번호)와 사용자 얼굴 정보(얼굴 특징점 정보)를 저장하고 관리하는 기능을 수행한다.The authentication management server 40 stores and manages user authentication information (e.g., user identification number) and user face information (facial feature point information) necessary for user authentication.

본 발명의 일 실시예에서 사용자 인증처리는 인증 관리서버(40)에서 사용자 인증정보를 이용한 1차 인증과 사용자 얼굴 영상을 이용한 2차 인증이 모두 이루어지도록 할 수 있다. 이러한 경우, 출입통제 단말기(30)에는 사용자의 고유정보가 전혀 저장되어 있지 않으므로 보안성이 높고 개인정보 유출의 염려가 없는 장점이 있다.In the embodiment of the present invention, the user authentication process may be performed by both the first authentication using the user authentication information and the second authentication using the user's face image in the authentication management server 40. In this case, since the unique information of the user is not stored at all in the access control terminal 30, there is an advantage that the security is high and there is no fear of personal information leakage.

본 발명의 다른 일 실시예에서는 사용자 인증정보를 이용한 1차 인증은 인증 관리서버(40)에서 수행되고, 사용자 얼굴 영상을 이용한 2차 인증은 출입통제 단말기(30) 또는 인증 관리서버(40)에서 수행될 수 있다. 이 경우에는 인증 관리서버(40)에서 1차 인증된 사용자의 얼굴 인증정보(특징점 정보)를 출입통제 단말기(30)에 제공하고, 출입통제 단말기(30)에서 카메라(32)에서 촬영된 사용자 얼굴 영상을 얼굴 인증정보와 비교하여 사용자 출입 허용 여부를 결정할 수 있다. 이 실시예에서는 사용자가 출입문을 향해 걸어오는 동안 1차 인증이 이루어진 후, 얼굴 촬영시 보다 신속하게 얼굴 영상 비교를 통해 2차 인증이 이루어질 수 있는 장점이 있으며, 본 실시예의 경우 2차 인증 완료 후에 인증 관리서버(40)로부터 수신된 사용자 얼굴인증정보를 삭제하여 개인정보 유출을 방지하도록 하는 것이 바람직하다.In another embodiment of the present invention, the primary authentication using the user authentication information is performed in the authentication management server 40, and the secondary authentication using the user face image is performed in the access control terminal 30 or the authentication management server 40 . In this case, the authentication management server 40 provides the facial authentication information (minutia information) of the first authenticated user to the access control terminal 30, and the access control terminal 30 provides the user face The image can be compared with the face authentication information to determine whether or not the user is permitted to enter or exit. In this embodiment, after the first authentication is performed while the user is walking toward the entrance door, there is an advantage that the second authentication can be performed through the face image comparison more quickly than during the face photographing. In this embodiment, It is preferable to delete the user's face authentication information received from the authentication management server 40 to prevent personal information from being leaked.

도 3은 출입통제 단말기를 개략적으로 도시한 정면도이고, 도 4는 출입통제 단말기의 전면 구성을 보여주기 위한 개략적인 측단면도이다.FIG. 3 is a front view schematically showing an access control terminal, and FIG. 4 is a schematic side sectional view showing a front configuration of the access control terminal.

출입통제 단말기(30)는 전방에서 볼 때 전면 또는 일부가 투과성 거울(38)로 덮여 있는 형태일 수 있으며, 투과성 거울(38)의 후면에 카메라(32)와 디스플레이부(33)가 근접하여 설치된다. The access control terminal 30 may be configured such that the front or part of the access control terminal 30 is covered with the transparent mirror 38 and the camera 32 and the display unit 33 are installed close to the rear surface of the transparent mirror 38 do.

투과성 거울(38)은 투과율이 50% 정도인 하프형 미러가 사용될 수 있으며, 현장의 주변 조도에 따라 적절한 투과율의 투과성 거울이 선택적으로 사용될 수 있다. The transmissive mirror 38 may be a half mirror having a transmittance of about 50%, and a transmissive mirror having an appropriate transmissivity may be selectively used depending on the ambient illuminance of the field.

카메라(32)와 디스플레이부(33)는 투과성 거울(38)의 후면에 설치되어 사용자에게 보이지 않으므로 사용자는 출입통제 단말기(30)가 거울인 것으로 인식하게 될 것이며, 사용자가 현관이나 게이트를 통과하면서 자연스럽게 거울을 쳐다보도록 유도하여 카메라(32)가 자연스럽게 사용자의 정면 얼굴 영상을 취득하도록 하는 것이 본 발명의 중요한 특징 중의 하나이다.Since the camera 32 and the display unit 33 are installed on the rear side of the transparent mirror 38 and are not visible to the user, the user will recognize that the access control terminal 30 is a mirror. When the user passes through the entrance or gate It is one of the important features of the present invention that the camera 32 is naturally guided to gaze at the mirror so as to naturally obtain the front face image of the user.

즉, 카메라가 외부에 설치되면 사용자는 카메라를 의식하게 되어 불안한 표정을 짓거나 감시당하고 있다는 거부감이 발생할 수 있는데 본 발명에서는 카메라(32)가 거울에 가려져 있어 거부감을 해소할 수 있고 자연스러운 표정의 정면 얼굴 영상을 얻을 수 있게 된다.That is, when the camera is installed outside, the user may become conscious of the camera, causing a sense of discomfort or an uneasy feeling. In the present invention, the camera 32 is covered by a mirror, The face image can be obtained.

디스플레이부(33)는 사용자의 자연스러운 정면 응시를 유도하기 위한 또 하나의 방법으로서 이용된다. 즉, 사용자가 출입통제 단말기(30)로 다가오면서 자연스럽게 투과성 거울(38)을 쳐다보게 되고, 일정 거리 이내로 근접하면 디스플레이부(33)가 켜지면서 사용자의 관심을 유도할 수 있는 영상이 표출되도록 하여 사용자의 정면 응시를 보다 지속적으로 유도할 수 있다. 이를 위해 사용자의 근접 거리를 인식할 수 있는 감지 센서가 더 구비되는 것도 가능하다. The display unit 33 is used as another method for inducing natural frontal gaze of the user. That is, when the user approaches the access control terminal 30, the user naturally looks at the transmissive mirror 38. When the user approaches within a predetermined distance, the display unit 33 is turned on to display an image that can induce the user's interest The frontal gaze of the user can be continuously induced. To this end, it is possible to further include a detection sensor which can recognize the proximity distance of the user.

그리고, 투과성 거울(38)과 카메라(32) 사이에는 편광 필터(39)가 개재될 수 있다. 편광 필터(39)는 빛의 수직편파 또는 수평편파 중 어느 하나를 차단하는 필터이다. 편광필터를 사용하는 경우 촬영 영상의 밝기는 낮아지나 해상도는 오히려 증가하게 되어 형상이 뚜렷한 영상을 얻을 수 있고, 이를 통해 조명의 밝기에 따라 사용자 인식 정확도가 낮아지는 문제점을 상당히 해결할 수 있다.A polarizing filter 39 may be interposed between the transmissive mirror 38 and the camera 32. The polarizing filter 39 is a filter that blocks either vertical polarization or horizontal polarization of light. When the polarizing filter is used, the brightness of the photographed image is lowered but the resolution is rather increased, so that a clearly shaped image can be obtained and the problem that the user recognition accuracy is lowered according to the brightness of the illumination can be solved considerably.

그리고, 출입통제 단말기(30)가 설치된 벽체(출입문, 출입 통제 게이트 등)의 내부 공간에는 전자파 차단 장치(미도시)가 설치되어 출입문을 사용하지 않는 사용자 디바이스의 불필요한 인식을 줄여 처리 속도를 향상시키고 배터리 및 전원 소모를 감소시키는 것이 보다 바람직하다.In addition, an electromagnetic wave shielding device (not shown) is installed in the inner space of the wall (entrance door, access control gate, etc.) provided with the access control terminal 30 to reduce unnecessary recognition of user devices that do not use the door, It is more desirable to reduce battery and power consumption.

도 5는 디스플레이부에서 영상 프레임 간에 발광 프레임을 삽입하여 표시하는 방법을 설명하기 위한 것이다.5 is a view for explaining a method of inserting a light emitting frame between image frames in a display unit and displaying the inserted light emitting frame.

상술한 바와 같이, 본 발명의 디스플레이부(33)는 사용자 정면 응시 유도를 위한 영상 표출 외에 조명 기능을 제공하도록 구현될 수 있다.As described above, the display unit 33 of the present invention can be implemented to provide a lighting function in addition to the image display for guiding the user's frontal gaze.

이는 디스플레이부(33)에서 표출하는 영상 프레임(50)들 사이에 조명 기능을 위한 발광 프레임(51)을 삽입하는 것으로서 구현된다. 발광 프레임은 화면 전체가 백색광으로 점등되도록 하여 밝은 조도의 빛을 사용자 얼굴방향으로 조사할 수 있도록 하는 것이다. This is implemented by inserting a light emitting frame 51 for an illumination function between the image frames 50 displayed on the display unit 33. The light emitting frame allows the entire screen to be illuminated with white light so that light of bright illumination can be illuminated in the direction of the user's face.

이 때, 발광 프레임(15)이 표출되는 시간은 일반적인 사람의 눈에 빛의 잔상이 남지 않는 시간으로서 사용자가 발광 프레임을 인식하지 못하도록 하는 것이 바람직하다.At this time, it is preferable that the time during which the light emitting frame 15 is displayed is a time during which no afterimage of light remains in the eyes of a general person, so that the user can not recognize the light emitting frame.

따라서, 발광 프레임(15)의 표출 시간은 1/100초 이하인 것이 바람직하며, 보다 바람직하게는 1/200초 이하인 것이 바람직하다.  Therefore, the display time of the light emitting frame 15 is preferably 1/100 second or less, more preferably 1/200 second or less.

이러한 방법을 통해 디스플레이부(33)는 사용자의 흥미를 유도할 수 있는 영상을 제공함과 아울러, 밝은 빛의 조명을 사용자가 인식하지 못하는 간격으로 제공함으로써 일정 밝기의 빛의 지속적으로 제공하여 조명의 밝기에 따라 인식 정확도의 오류가 발생하는 문제를 해결할 수 있고, 조명 인가에 따라 눈부심이 발생하는 문제도 동시에 해결할 수 있게 된다. In this way, the display unit 33 provides an image that can induce the user's interest, and provides bright light at intervals that the user can not recognize, thereby continuously providing light of constant brightness, It is possible to solve the problem that an error of the recognition accuracy is caused according to the illuminance of the light source,

도 6은 본 발명에 따른 사용자 무의식형 멀티모달 출입 통제 방법이 수행되는 과정을 도시한 흐름도이고, 도 7은 출입통제 단말기가 통신 가능거리 내에 위치한 무선 인증 디바이스를 인식하는 것을 개념적으로 표현한 것이다.FIG. 6 is a flowchart illustrating a process in which a user unconscious multimodal access control method according to the present invention is performed. FIG. 7 conceptually illustrates recognition of a wireless authentication device located within a communication distance of the access control terminal.

도 6에서는 1차 인증과 2차 인증이 모두 인증 관리서버(40)에서 이루어지는 실시예는 비교적 이해가 용이하므로 1차 인증은 인증 관리서버(40)에서 이루어지고 2차 인증은 출입통제 단말기(30)에서 수행되는 경우의 프로세스를 설명하기로 한다. 6, it is relatively easy to understand that the first authentication and the second authentication are both performed in the authentication management server 40. Therefore, the first authentication is performed in the authentication management server 40 and the second authentication is performed in the access control terminal 30 ) Will be described below.

우선, 출입통제 단말기(30)는 통신 범위 내에 있는 무선 인증 디바이스(20)를 인식한다(S700). 상술한 바와 같이, 출입통제 단말기(30)의 무선통신부(31)는 블루투스 모듈이나 지그비 모듈로 구현될 수 있으며, 무선통신부(31)는 통신 반경(예를 들면 10m)내에 위치하는 무선 인증 디바이스(20)를 인식한다. 상술한 바와 같이, 출입통제 단말기(30)가 설치된 벽체(출입문, 출입 통제 게이트 등)의 내부 공간에는 전자파 차단 장치가 설치되어 있으므로 벽체 내부 공간에 위치하는 무선 인증 디바이스(20)는 인식되지 않고, 벽체 외부 공간에 위치한 무선 인증 디바이스(20)만이 인식되도록 하는 것이 바람직하다.First, the access control terminal 30 recognizes the wireless authentication device 20 within the communication range (S700). The wireless communication unit 31 of the access control terminal 30 may be implemented as a Bluetooth module or a ZigBee module and the wireless communication unit 31 may be a wireless authentication device located within a communication radius (for example, 10 m) 20). As described above, since the electromagnetic wave shielding device is installed in the inner space of the wall (entrance door, access control gate, etc.) where the access control terminal 30 is installed, the wireless authentication device 20 located in the wall inner space is not recognized, It is preferable that only the wireless authentication device 20 located in the external space of the wall is recognized.

도 7에 도시된 바와 같이, 해당 통신 반경(L) 내에 여러 명의 사용자가 존재하고 각 사용자가 무선 인증 디바이스(20)를 소지하고 있을 수 있다. 이 중 일부는 출입 허용을 위한 사용자 인증정보가 무선 인증 디바이스(20)내에 저장되어 있지 않을 수 있다. 따라서, 출입통제 단말기(30)와 무선 인증 디바이스(20) 간에 통신이 수립되면 출입통제 단말(30)는 무선 인증 디바이스(20)에게 사용자 인증정보를 보유하고 있는지 요청을 한다.As shown in FIG. 7, there are a plurality of users within the communication radius L, and each user may have the wireless authentication device 20. Some of them may not be stored in the wireless authentication device 20 for user authentication information for allowing access. Therefore, when communication is established between the access control terminal 30 and the wireless authentication device 20, the access control terminal 30 requests the wireless authentication device 20 to confirm whether it holds the user authentication information.

무선 인증 디바이스(20)가 사용자 인증정보를 보유하고 있는 경우 해당 사용자 인증정보를 출입통제 단말기(30)로 전송한다(S710).If the wireless authentication device 20 has user authentication information, the wireless authentication device 20 transmits the user authentication information to the access control terminal 30 (S710).

출입통제 단말기(30)는 수신된 사용자 인증정보를 인증 관리서버(40)로 전송하여 허용된 사용자가 맞는지 확인하는 1차 인증을 요청하고, 인증 관리서버(40)는 이에 대한 1차 인증처리를 수행한다(S720).The access control terminal 30 sends the received user authentication information to the authentication management server 40 to request a primary authentication for confirming whether the user is an authorized user and the authentication management server 40 performs a primary authentication process (S720).

인증 관리서버(40)는 사용자에 대한 1차 인증처리 결과 출입이 허용된 사용자인 것으로 확인된 경우, 해당 사용자의 얼굴 인증정보를 출입통제 단말기(30)로 전송한다(S730). 도 7과 같이 통신 반경 내에 여러 명의 사용자가 존재하는 경우 각 사용자에 대해 1차 인증처리가 수행된 후 이들의 사용자 얼굴 인증정보가 출입통제 단말기(30)로 전송될 수 있다. If the authentication management server 40 determines that the user is permitted to enter and exit as a result of the first authentication process for the user, the authentication management server 40 transmits the face authentication information of the user to the access control terminal 30 (S730). As shown in FIG. 7, when there are a plurality of users within a communication radius, the user authentication information may be transmitted to the access control terminal 30 after the first authentication process is performed for each user.

이 후, 1차 인증처리가 완료된 사용자 중 어느 한 명이 입장을 위해 출입통재 단말기(30)에 근접하면 카메라(32)가 사용자 얼굴 영상을 취득한다(S740). 카메라(32)에 의해 사용자 얼굴 영상을 취득할 때 사용자의 정면 영상을 취득하는 것이 중요하며, 본 발명에서는 이를 위해 투과성 거울(38)과 디스플레이부(33)를 이용하여 사용자가 무의식적으로 카메라(32)를 응시할 수 있도록 하였으며, 그럼에도 불구하고 정면을 응시하지 않는 경우 스피커(35)를 통해 사용자가 정면을 응시할 것을 요청하는 음성을 출력하게 된다. Thereafter, if any one of the users whose primary authentication processing is completed approaches the entrance and access terminal 30 for admission, the camera 32 acquires the user's face image (S740). It is important to acquire the user's frontal image when acquiring the user's face image by the camera 32. For this purpose, the user uses the transparent mirror 38 and the display unit 33 to unconsciously acquire the frontal image of the user 32 ). If the user does not gaze at the front, the speaker 35 outputs a voice requesting the user to gaze forward.

사용자의 정면 응시 영상이 얻어지면, 인증 관리서버(40)로부터 수신된 사용자 얼굴 인증정보와 카메라에서 촬영한 얼굴 영상을 비교하여 2차 인증을 수행한다(S750). 얼굴 영상을 이용한 사용자 인증은 기 등록된 사용자 얼굴의 특징점이 카메라에서 취득한 얼굴 영상의 특징점과 유효한 범위내에서 일치하는지 여부를 확인하는 것으로서 널리 알려진 방법이므로 자세한 설명은 생략한다.If the user's frontal gaze image is obtained, the user authentication information received from the authentication management server 40 is compared with the face image captured by the camera to perform secondary authentication (S750). The user authentication using the facial image is a well-known method for confirming whether or not the feature points of the previously registered user face coincide with the feature points of the facial image acquired by the camera within a valid range.

2차 인증 결과 해당 사용자가 출입이 허용된 유효한 사용자로 판정되면 도어를 개방하게 된다(S760). If it is determined that the user is a valid user who is permitted to enter and leave the door, the door is opened (S760).

비록 본 발명이 상기 바람직한 실시 예들과 관련하여 설명되어졌지만, 발명의 요지와 범위로부터 벗어남이 없이 다양한 수정이나 변형을 하는 것이 가능하다. 따라서, 첨부된 특허 청구범위는 본 발명의 요지에 속하는 이러한 수정이나 변형을 포함할 것이다.Although the present invention has been described in connection with the preferred embodiments, it is possible to make various modifications and variations without departing from the spirit and scope of the invention. It is, therefore, to be understood that the appended claims will include all such modifications and changes as fall within the true spirit of the invention.

10 : 사용자 20 : 무선 인증 디바이스
21 : 저장부 22 : 무선 통신부
23 : 제어부 30 : 출입통제 단말기
31 : 무선통신부 32 : 카메라
33 : 디스플레이부 34 : 저장부
35 : 스피커 36 : 인터페이스부
37 : 디스플레이부 38 : 투과성 거울
39 : 편광필터 40 : 인증관리 서버
50 : 영상 프레임 51 : 발광 프레임 10: user 20: wireless authentication device
21: storage unit 22: wireless communication unit
23: control unit 30: access control terminal
31: wireless communication unit 32: camera
33: display unit 34: storage unit
35: speaker 36:
37: display part 38: transmissive mirror
39: polarizing filter 40: authentication management server
50: image frame 51: emission frame

Claims (7)

출입이 허용된 사용자들의 사용자 인증정보와 상기 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 저장하고, 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 출입통제 단말기로 전송하는 인증 관리서버와;
통신범위 이내에 위치한 무선 인증 디바이스를 인식하여 상기 무선 인증 디바이스와의 통신을 통해 사용자 인증정보를 수신하는 무선 통신부와, 사용자 얼굴을 취득하는 카메라와, 상기 무선 통신부를 통해 수집한 사용자 인증정보를 상기 인증 관리서버로 전송하여 상기 인증 관리서버로부터 통신범위 이내에 위치한 무선 인증 디바이스의 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 수신하여 저장하고, 카메라로부터 수신된 사용자 얼굴 사진 정보를 분석하여 사용자 얼굴 특징정보를 추출하며, 상기 인증 관리서버로부터 수신된 사용자 얼굴 인증정보와 사용자 얼굴 사진 정보에서 추출된 사용자 얼굴 특징정보를 비교함으로써 사용자 인증을 처리함과 더불어, 사용자 얼굴 인증이 완료되면 상기 인증 관리서버로부터 수신된 사용자 얼굴 인증정보를 삭제하여 개인정보의 유출을 방지하는 제어부를 포함하는 출입통제 단말기를 포함하는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템.
An authentication management server for storing user authentication information of users allowed to access and user face authentication information corresponding to the user authentication information and transmitting user face authentication information corresponding to user authentication information to the access control terminal;
A wireless communication unit for recognizing a wireless authentication device located within a communication range and receiving user authentication information through communication with the wireless authentication device; a camera for acquiring a user's face; Receiving the user's face authentication information corresponding to the user authentication information of the wireless authentication device located within the communication range from the authentication management server, storing the received user's face authentication information, analyzing the user's face image information received from the camera, Extracts user face authentication information received from the authentication management server and user facial feature information extracted from the user face image information to process user authentication, and when the user face authentication is completed, User face Delete the credentials to your subconscious type multi-modal access control system comprising an access control terminal to a control unit to prevent leakage of personal information.
출입이 허용된 사용자들의 사용자 인증정보와 상기 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 저장하고, 사용자 인증처리를 수행하는 인증 관리서버와;
통신범위 이내에 위치한 무선 인증 디바이스를 인식하여 상기 무선 인증 디바이스와의 통신을 통해 사용자 인증정보를 수신하는 무선 통신부와, 사용자 얼굴을 취득하는 카메라와, 상기 사용자 인증정보와 사용자 얼굴 영상정보를 상기 인증 관리서버로 전송하고, 상기 인증 관리서버로부터 사용자 인증 결과 정보를 수신하여 사용자 인증 결과에 따라 출입도어를 개폐처리하는 출입통제 단말기를 포함하되,
상기 인증 관리서버는
상기 출입통제 단말기로부터 수신된 사용자 인증정보에 대한 1차 인증처리를 수행하여, 기 저장된 사용자 얼굴 인증정보 중 1차 인증이 완료된 사용자 인증정보에 상응하는 사용자 얼굴 인증정보를 추출하고, 이후 상기 출입통제 단말기로부터 수신된 인증 대상 사용자 얼굴 영상정보를 분석하여 사용자 얼굴 특징정보를 추출함과 더불어, 1차 인증이 완료된 사용자 얼굴 인증정보와 출입통제 단말기로부터 수신된 인증 대상 사용자 얼굴 특징정보를 비교하여 2차 인증을 처리하는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템.
An authentication management server for storing user authentication information of users allowed to enter and exit and user face authentication information corresponding to the user authentication information and performing user authentication processing;
A wireless communication unit for recognizing a wireless authentication device located within a communication range and receiving user authentication information through communication with the wireless authentication device; a camera for acquiring a user face; And an access control terminal for transmitting the user authentication result information to the server, receiving the user authentication result information from the authentication management server, and opening and closing the access door according to the user authentication result,
The authentication management server
A first authentication process for the user authentication information received from the access control terminal is performed to extract user face authentication information corresponding to the user authentication information for which the first authentication has been completed among the previously stored user face authentication information, The user facial image information received from the terminal is analyzed to extract the user facial feature information and the user facial authentication information that has been subjected to the first authentication is compared with the authentication target user facial feature information received from the access control terminal, Wherein the authentication process is performed by the user.
제 1항 또는 2 항에 있어서,
상기 출입통제 단말기는 영상을 표시하는 디스플레이부를 더 포함하고,
상기 출입통제 단말기는 전면에 투과성 거울이 설치되고, 상기 투과성 거울 후면에 상기 카메라와 디스플레이부가 설치되는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템.
3. The method according to claim 1 or 2,
The access control terminal may further include a display unit for displaying an image,
Wherein the access control terminal is provided with a transparent mirror on the front surface thereof, and the camera and the display unit are installed on the rear surface of the transparent mirror.
제 3 항에 있어서,
상기 투과성 거울과 카메라 간에는 수직 또는 수평 성분의 빛을 선택적으로 투과시키는 편광필터가 개재되는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템.
The method of claim 3,
And a polarizing filter for selectively transmitting light of a vertical or horizontal component is interposed between the transparent mirror and the camera.
제 3 항에 있어서,
상기 디스플레이부는 표출되는 영상 프레임 간에 조명을 위한 발광 프레임이 삽입되는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템.
The method of claim 3,
Wherein the display unit is configured to insert a light emitting frame for illumination between the displayed image frames.
제 5 항에 있어서,
상기 발광 프레임의 표출 시간은 1/100초보다 작은 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템.
6. The method of claim 5,
Wherein the display time of the light emitting frame is less than 1/100 second.
제 1 항에 있어서,
상기 출입통제 단말기가 설치된 벽체의 내부 공간에는 전자파 차단 장치가 설치되는 것을 특징으로 하는 사용자 무의식형 멀티모달 출입통제시스템.

The method according to claim 1,
And an electromagnetic wave shielding device is installed in an inner space of the wall where the access control terminal is installed.

KR1020180045760A 2018-04-19 2018-04-19 Multi-midal access control system Operating in user's unconciousness state KR101939696B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180045760A KR101939696B1 (en) 2018-04-19 2018-04-19 Multi-midal access control system Operating in user's unconciousness state

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180045760A KR101939696B1 (en) 2018-04-19 2018-04-19 Multi-midal access control system Operating in user's unconciousness state

Publications (1)

Publication Number Publication Date
KR101939696B1 true KR101939696B1 (en) 2019-01-17

Family

ID=65279985

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180045760A KR101939696B1 (en) 2018-04-19 2018-04-19 Multi-midal access control system Operating in user's unconciousness state

Country Status (1)

Country Link
KR (1) KR101939696B1 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110473323A (en) * 2019-08-19 2019-11-19 湖南湘诚智慧信息技术有限责任公司 A kind of wisdom cell management method and system
CN112233299A (en) * 2019-06-27 2021-01-15 西安光启未来技术研究院 Portrait dynamic authority authentication method and system
KR20210060199A (en) 2019-11-18 2021-05-26 미래정보산업(주) Access control system using rfid
KR102268177B1 (en) * 2021-02-02 2021-06-22 (주)그린아이티코리아 Access control system using magnetic sensor with detection area designation structure
KR20210124620A (en) * 2020-04-07 2021-10-15 주식회사 에스원 Authentication server and method for supporting service based on face authentication
WO2022045508A1 (en) * 2020-08-31 2022-03-03 (주)씨유박스 Authentication method and system for gate access
KR20220040735A (en) * 2020-09-24 2022-03-31 (주)아이준 Entrance management system of smart doorbell and method thereof
KR102612063B1 (en) * 2023-09-15 2023-12-08 주식회사 스피드정보 Method, device, and system for controlling access using indoor location determination

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101577036B1 (en) * 2014-07-07 2015-12-11 주식회사 에스원 Access authentication system and method based ip camera
KR101596363B1 (en) 2014-01-02 2016-02-26 주식회사 유니온커뮤니티 Access Control Apparatus and Method by Facial Recognition
KR20170108735A (en) * 2016-03-17 2017-09-27 (주)솔루션즈온넷 Admission control system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101596363B1 (en) 2014-01-02 2016-02-26 주식회사 유니온커뮤니티 Access Control Apparatus and Method by Facial Recognition
KR101577036B1 (en) * 2014-07-07 2015-12-11 주식회사 에스원 Access authentication system and method based ip camera
KR20170108735A (en) * 2016-03-17 2017-09-27 (주)솔루션즈온넷 Admission control system

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112233299A (en) * 2019-06-27 2021-01-15 西安光启未来技术研究院 Portrait dynamic authority authentication method and system
CN110473323A (en) * 2019-08-19 2019-11-19 湖南湘诚智慧信息技术有限责任公司 A kind of wisdom cell management method and system
KR20210060199A (en) 2019-11-18 2021-05-26 미래정보산업(주) Access control system using rfid
KR20210124620A (en) * 2020-04-07 2021-10-15 주식회사 에스원 Authentication server and method for supporting service based on face authentication
KR102324589B1 (en) * 2020-04-07 2021-11-09 주식회사 에스원 Authentication server and method for supporting service based on face authentication
WO2022045508A1 (en) * 2020-08-31 2022-03-03 (주)씨유박스 Authentication method and system for gate access
KR20220028781A (en) * 2020-08-31 2022-03-08 (주)씨유박스 Authentication method and device for gate access
KR102493220B1 (en) * 2020-08-31 2023-01-30 (주)씨유박스 Authentication method and device for gate access
KR20220040735A (en) * 2020-09-24 2022-03-31 (주)아이준 Entrance management system of smart doorbell and method thereof
KR102489134B1 (en) * 2020-09-24 2023-01-16 (주)아이준 Entrance management system of smart doorbell and method thereof
KR102268177B1 (en) * 2021-02-02 2021-06-22 (주)그린아이티코리아 Access control system using magnetic sensor with detection area designation structure
KR102612063B1 (en) * 2023-09-15 2023-12-08 주식회사 스피드정보 Method, device, and system for controlling access using indoor location determination

Similar Documents

Publication Publication Date Title
KR101939696B1 (en) Multi-midal access control system Operating in user's unconciousness state
KR102350507B1 (en) Access control method, access control device, system and storage medium
CN108664783B (en) Iris recognition-based recognition method and electronic equipment supporting same
US11308743B2 (en) Gate apparatus, control method of gate apparatus, and storage medium
US9066125B2 (en) Secure display
US20080212849A1 (en) Method and Apparatus For Facial Image Acquisition and Recognition
US11636277B2 (en) Information processing apparatus
JP2012133477A (en) Authentication card, authentication system, guidance method and program
US10545343B2 (en) Augmented reality security verification
US20220005302A1 (en) Information processing apparatus, information processing method, and storage medium
KR20090132839A (en) System and method for issuing photo-id card
KR20150085417A (en) Iris data Registration and Authentication device and the method in the camera of a mobile
KR20150028430A (en) Iris recognized system for automatically adjusting focusing of the iris and the method thereof
US20190087556A1 (en) Portable scientific investigation apparatus and control method thereof
KR101815610B1 (en) Integrate module checking algorithm of finger vein and fingerprint at the same time in door rock
US20210357487A1 (en) Modular biometric station with cohesive form factor
CN212809322U (en) Hand vein face multi-mode identification entrance guard attendance all-in-one
CN111932758A (en) Intelligent access control system based on face recognition technology
KR101715309B1 (en) Iris recognition device
RU2815689C1 (en) Method, terminal and system for biometric identification
RU2798179C1 (en) Method, terminal and system for biometric identification
JP2019121259A (en) Entrance/exit management apparatus and entrance/exit management system
KR102632212B1 (en) Electronic device for managnign vehicle information using face recognition and method for operating the same
KR20210101402A (en) IRIS Capture Device with fold mirror with thickness less than camera length
KR20210054977A (en) Opening and closing method using double lock release

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant