KR101170014B1 - Ubiquitos monitoring system and method using face recognition dvr - Google Patents

Ubiquitos monitoring system and method using face recognition dvr Download PDF

Info

Publication number
KR101170014B1
KR101170014B1 KR1020100026684A KR20100026684A KR101170014B1 KR 101170014 B1 KR101170014 B1 KR 101170014B1 KR 1020100026684 A KR1020100026684 A KR 1020100026684A KR 20100026684 A KR20100026684 A KR 20100026684A KR 101170014 B1 KR101170014 B1 KR 101170014B1
Authority
KR
South Korea
Prior art keywords
face
face recognition
dvr
image
registrant
Prior art date
Application number
KR1020100026684A
Other languages
Korean (ko)
Other versions
KR20110107521A (en
Inventor
박창수
Original Assignee
주식회사 시큐텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 시큐텍 filed Critical 주식회사 시큐텍
Priority to KR1020100026684A priority Critical patent/KR101170014B1/en
Publication of KR20110107521A publication Critical patent/KR20110107521A/en
Application granted granted Critical
Publication of KR101170014B1 publication Critical patent/KR101170014B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/32Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition

Abstract

본 발명은 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템 및 그 방법에 관한 것으로서 대상자의 영상을 촬영하기 위한 적어도 하나 이상의 카메라; 상기 카메라에서 획득한 영상물로 부터 대상자의 얼굴 영역을 검출하고 얼굴특성코드(Face Feature Code:FC) 및 얼굴 이미지(Face Image:FI)를 추출하여 네트워크를 통해 얼굴인식(Face Recognition:FR)서버로 전송시키고 상기 얼굴인식(FR)서버에서 인증되어 재전송한 등록자 데이터를 수신하는 적어도 하나 이상의 얼굴인식 DVR(Digital Video Recorder); 상기 얼굴인식 DVR로 부터 수신한 얼굴특성코드(FC)와 얼굴 이미지(FI)를 등록되어 있던 기존의 등록자 데이터베이스와 비교하여 일치율이 설정된 기준치 이상인 경우 등록자 데이터를 상기 얼굴인식 DVR로 재전송하는 얼굴인식(FR)서버; 상기 얼굴인식 DVR과 연결되어 상기 얼굴인식(FR)서버에서 재전송한 등록자 데이터를 디스플레이하는 디스플레이부를 포함하여 이루어지는 것을 특징으로 한다. 본 발명에 따르면 다른 생체인식기술보다 사용자의 거부감이나 인식속도를 향상시킨 비접촉 방식인 얼굴인식 기술을 이용하여 높은 인증율과 빠른 데이터 처리 속도로 신원을 확인할 수 있도록 하여 출입문 통제 시스템이나 수배자, 테러리스트 등과 같은 요주의 인물을 용이하게 검색하는 범죄관리 시스템 등 다방면에서 활용할 수 있는 효과가 있다.The present invention relates to a ubiquitous surveillance system using a face recognition DVR and a method thereof, comprising: at least one camera for capturing an image of a subject; Detects the face area of the subject from the image acquired by the camera, extracts the face feature code (FC) and the face image (Face Image: FI) to the face recognition server through the network. At least one face recognition DVR (Digital Video Recorder) for transmitting and receiving registrant data authenticated and retransmitted by the face recognition (FR) server; The face recognition code (F) and the face image (FI) received from the face recognition DVR are compared with the existing registrant database, and if the matching rate is equal to or greater than the set threshold, the face recognition data is re-transmitted to the face recognition DVR ( FR) server; And a display unit connected to the face recognition DVR to display registrant data retransmitted by the face recognition server. According to the present invention, by using the non-contact face recognition technology that improves the user's rejection or recognition speed than other biometric technology, it is possible to verify the identity with a high authentication rate and a fast data processing speed, such as a door control system, a wanted person, a terrorist, etc. There is an effect that can be used in various ways, such as a crime management system to easily search for the same characters of interest.

Description

얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템 및 그 방법{UBIQUITOS MONITORING SYSTEM AND METHOD USING FACE RECOGNITION DVR}Ubiquitous surveillance system using face recognition DVR and its method {UBIQUITOS MONITORING SYSTEM AND METHOD USING FACE RECOGNITION DVR}

본 발명은 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템 및 그 방법에 관한 것이다.The present invention relates to a ubiquitous surveillance system using a face recognition DVR and a method thereof.

생체인식을 통하여 신원을 확인하는 기술에는 서명 인식 기술, 홍채 인식 기술, 지문 인식 기술 등이 있는데 서명 인식의 경우 입력장치의 가격이 저렴하고 저장 데이터를 작은 크기로 압축이 가능한 반면, 동양인의 경우 서명에 익숙하지 않고 유일성과 영구성에서 극히 취약한 점이 있다. 홍채 인식의 경우에는 개개인의 차이를 가장 잘 반영하고 인식률이 높은 장점이 있지만, 홍채인식에 필요한 눈 영상획득에 어려움이 존재하고 응용분야가 제한적이라는 단점이 있다. 또한, 지문 인식의 경우 비교적 높은 인식률과 검증시 처리 속도가 빠른 장점이 있는 반면, 전체 인구의 5~15%는 지문이 훼손되고 입력장치에 신체적 접촉을 해야 하므로 심리적 거부감이 생기며, 입력시 습기, 온도, 압력 등에 취약한 문제점이 있다.
Signature recognition technology through biometric identification includes signature recognition technology, iris recognition technology, fingerprint recognition technology, etc. In the case of signature recognition, the input device is inexpensive and the storage data can be compressed to a small size. There is a lack of familiarity and extremely weakness in uniqueness and permanence. In the case of iris recognition, there is a merit that reflects individual differences best and has a high recognition rate, but there are disadvantages in obtaining eye images required for iris recognition and limited application fields. In addition, fingerprint recognition has the advantage of relatively high recognition rate and fast processing speed during verification, while 5-15% of the population has psychological rejection because fingerprints are damaged and physical contact with input device results. There is a problem that is vulnerable to temperature, pressure and the like.

본 발명은 상술한 문제를 해결하기 위하여 안출된 것으로, 본 발명의 목적은 얼굴인식 DVR을 통하여 추출한 얼굴이미지(FI)와 얼굴특성코드(FC)를 얼굴인식(FR)서버에 전송하고 등록자 데이터 베이스와 일치여부를 판단하여 등록자 데이터를 디스플레이 함으로써 다른 생체인식기술보다 사용자의 거부감이나 인식속도를 향상시키고 기존 출입문 통제시스템을 대체하거나 수배자나 테러리스트와 같은 요주의 인물을 얼굴인식(FR)서버에 등록하여 다중이용시설 또는 주요 공공시설에 설치하여 범죄 관리 시스템 등에 활용할 수 있도록 한다.The present invention has been made to solve the above-described problem, the object of the present invention is to transmit the face image (FI) and the facial feature code (FC) extracted through the face recognition DVR to the face recognition (FR) server and the registrant database Display the registrant data by determining whether or not it is consistent with other biometrics, and improve user's rejection or recognition speed, replace existing door control system, or register a person of interest such as a wanted person or terrorist on the face recognition (FR) server. It should be installed in the use facility or major public facilities to be used for crime management system.

상술한 과제를 해결하기 위하여 제공되는 본 발명의 구성은 대상자의 영상을 촬영하기 위한 적어도 하나 이상의 카메라; 상기 카메라에서 획득한 영상물로 부터 대상자의 얼굴 영역을 검출하고 얼굴특성코드(Face Feature Code:FC) 및 얼굴 이미지(Face Image:FI)를 추출하여 네트워크를 통해 얼굴인식(Face Recognition:FR)서버로 전송시키고 상기 얼굴인식(FR)서버에서 인증되어 재전송한 등록자 데이터를 수신하는 적어도 하나 이상의 얼굴인식 DVR(Digital Video Recorder); 상기 얼굴인식 DVR로 부터 수신한 얼굴특성코드(FC)와 얼굴 이미지(FI)를 등록되어 있던 기존의 등록자 데이터베이스와 비교하여 일치율이 설정된 기준치 이상인 경우 등록자 데이터를 상기 얼굴인식 DVR로 재전송하는 얼굴인식(FR)서버; 상기 얼굴인식 DVR과 연결되어 상기 얼굴인식(FR)서버에서 재전송한 등록자 데이터를 디스플레이하는 디스플레이부;를 포함하여 이루어지는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템을 제공하여 특정인을 정확하고 빠르게 검색하여 출입문 통제나 범죄자 색출 등에 활용할 수 있게 된다.The configuration of the present invention provided to solve the above problems is at least one camera for taking an image of the subject; Detects the face area of the subject from the image acquired by the camera, extracts the face feature code (FC) and the face image (Face Image: FI) to the face recognition server through the network. At least one face recognition DVR (Digital Video Recorder) for transmitting and receiving registrant data authenticated and retransmitted by the face recognition (FR) server; The face recognition code (F) and the face image (FI) received from the face recognition DVR are compared with the existing registrant database, and if the matching rate is equal to or greater than the set threshold, the face recognition data is re-transmitted to the face recognition DVR ( FR) server; A display unit for connecting the face recognition DVR to display the registrant data retransmitted from the face recognition (FR) server; providing a ubiquitous monitoring system using the face recognition DVR to search for a specific person accurately and quickly. It can be used for door control or criminal search.

또한, 상기 얼굴인식 DVR은 상기 카메라에서 획득한 영상물에서 대상자의 얼굴부분을 추출하는 얼굴검출부; 상기 얼굴검출부에서 추출한 얼굴부분을 지정된 크기로 스케일 업/다운하여 얼굴 이미지(FI)를 생성하고 JPEG로 압축하는 얼굴 이미지(FI) 생성부; 상기 얼굴검출부에서 추출한 얼굴부분에서 내부연산을 통하여 데이터베이스화가 가능한 형태의 얼굴특성코드(FC)로 부호화하는 얼굴특성코드(FC) 추출부; 상기 압축된 얼굴 이미지(FI)와 얼굴특성코드(FC)를 네트워크를 통해 얼굴인식(FR)서버로 전송하는 전송부; 상기 얼굴인식(FR)서버에서 대상자와 등록자와의 일치율이 설정된 기준치 이상으로 판정되어 재전송한 등록자 데이터를 수신하는 수신부;를 포함하는 것을 특징으로 할 수 있다.The face recognition DVR may further include: a face detection unit extracting a face part of a subject from an image acquired by the camera; A face image generation unit for generating a face image FI by compressing the face portion extracted by the face detection unit to a predetermined size and compressing it into JPEG; A facial feature code (FC) extraction unit for encoding a facial feature code (FC) in a form that can be converted into a database through an internal operation on the face part extracted by the face detection unit; A transmission unit for transmitting the compressed face image (FI) and face characteristic code (FC) to a face recognition (FR) server through a network; And a receiving unit for receiving the registrant data re-transmitted after determining that the matching rate between the subject and the registrant is greater than or equal to a set reference value in the face recognition (FR) server.

특히, 상기 디스플레이부에서 디스플레이되는 등록자 데이터는 등록자에 대한 이름, 성별, 신장 등의 신상정보와 등록된 얼굴 이미지(FI) 및 등록자와의 일치율에 관한 데이터인 것을 특징으로 할 수 있다.In particular, the registrant data displayed on the display unit may be characterized in that it is data about personal information such as name, gender, height, etc. of the registrant, and a matching rate between the registered face image (FI) and the registrant.

또한, 상기 대상자와 등록자와의 일치율이 기준치 이상인 경우에만 상기 얼굴인식 DVR에 내장된 릴레이를 구동시켜 출입문을 개폐시키는 것을 특징으로 할 수 있다.The door may be opened and closed by driving a relay built in the face recognition DVR only when the match rate between the subject and the registrant is greater than or equal to the reference value.

아울러, 상기 얼굴인식 DVR은 얼굴특성코드(FC)가 추출되는 영상만을 녹화하는 것을 특징으로 할 수 있다.In addition, the face recognition DVR may be characterized by recording only the image from which the facial feature code (FC) is extracted.

또한, 대상자의 영상을 촬영하기 위한 적어도 하나 이상의 카메라; 상기 카메라에서 획득한 영상물로 부터 대상자의 얼굴 영역을 검출하여 얼굴특성코드(Face Feature Code:FC) 및 얼굴 이미지(Face Image:FI)를 추출하는 얼굴인식 DVR(Digital Video Recorder); 상기 얼굴인식 DVR 본체에 USB를 통해 연결되어 상기 얼굴인식 DVR에서 추출한 얼굴특성코드(FC) 및 얼굴이미지(FI)를 자체 저장된 기존의 얼굴특성코드(FC)와 비교하여 일치율이 설정된 기준치 이상인 경우 저장된 등록자 데이터를 얼굴인식 DVR로 재전송하는 외장형 얼굴인식(Face Rognition:FR) 모듈; 상기 얼굴인식 DVR과 연결되어 상기 외장형 얼굴인식(FR) 모듈에서 얼굴인식 DVR로 전송한 등록자 데이터를 디스플레이하는 디스플레이부; 를 포함하여 이루어지는 것을 특징으로 할 수 있다.In addition, at least one camera for taking an image of the subject; A face recognition DVR (Digital Video Recorder) extracting a face feature code (FC) and a face image (FI) from a subject's face region from the image obtained by the camera; The face recognition code FC and the face image FI extracted from the face recognition DVR are connected to the face recognition DVR via USB and compared with the existing face feature code FC. An external face recognition (FR) module for retransmitting the registrant data to the face recognition DVR; A display unit connected to the face recognition DVR to display registrant data transmitted from the external face recognition (FR) module to the face recognition DVR; It may be characterized by comprising a.

또한, 상기 대상자와 등록자와의 일치율이 기준치 이상인 경우에만 상기 얼굴인식 DVR에 내장된 릴레이를 구동시켜 출입문을 개폐시키는 것을 특징으로 할 수 있다.The door may be opened and closed by driving a relay built in the face recognition DVR only when the match rate between the subject and the registrant is greater than or equal to the reference value.

또한, (A) 카메라를 통해 대상자의 영상을 촬영하는 단계; (B) 얼굴인식 DVR(Digital Video Recorder)에서 상기 대상자의 영상 중 얼굴부분을 검출하여 지정된 크기로 스케일 업/다운하여 얼굴이미지(Face Image:FI)를 생성하여 JPEG로 압축하고 상기 얼굴부분을 내부연산을 통하여 데이터베이스화가 가능한 형태의 얼굴특성코드(Face Feature Code:FC)로 부호화하는 단계; (C) 상기 압축된 얼굴이미지(FI)와 얼굴특성코드(FC)를 네트워크를 통해 얼굴인식(Face Recognition:FR)서버로 전송하는 단계; (D) 상기 얼굴인식(FR)서버에 등록되어 있는 기존의 등록자 데이터베이스를 전송된 얼굴이미지(FI) 및 얼굴특성코드(FC)와 비교하여 일치율이 설정된 기준치 이상인 경우 등록자 데이터를 얼굴인식 DVR로 재전송하는 단계; (E) 상기 재전송된 등록자 데이터를 디스플레이 하는 단계;를 포함하는 것을 특징으로 할 수 있다.In addition, (A) taking the image of the subject through the camera; (B) Face recognition DVR (Digital Video Recorder) detects the face part of the subject's image, scales up / down to a specified size, generates a face image (FI), compresses it to JPEG, and internalizes the face part. Encoding into a face feature code (FC) in a form that can be converted into a database through an operation; (C) transmitting the compressed face image (FI) and face characteristic code (FC) to a face recognition server through a network; (D) Compare the existing registrant database registered in the face recognition server with the transmitted face image FI and facial characteristic code, and re-transmit the registrant data to the face recognition DVR if the match rate is higher than the set threshold. Making; (E) displaying the re-transmitted registrant data.

또한, 상기 (E)단계에서 재전송되어 디스플레이되는 등록자 데이터는 등록자에 대한 이름, 성별, 신장 등의 신상정보와 등록된 얼굴 이미지(FI) 및 등록자와의 일치율에 관한 데이터인 것을 특징으로 할 수 있다.In addition, the registrant data retransmitted and displayed in step (E) may be characterized in that it is data about personal information such as name, gender, height, etc. of the registrant, and a matching rate between the registered face image (FI) and the registrant. .

본 발명에 따르면, 얼굴인식 DVR을 통하여 대상자의 얼굴 이미지(FI)와 얼굴특성코드(FC)를 추출하여 서버에 저장된 등록자의 데이터베이스와의 일치여부를 판단하여 등록자의 데이터를 디스플레이함으로써 비접촉 방식으로 높은 인증율과 빠른 데이터 처리 속도로 신원을 확인할 수 있도록 하여 출입문 통제 시스템이나 수배자, 테러리스트등과 같은 요주의 인물을 용이하게 검색하는 범죄관리 시스템 등 다방면에서 활용할 수 있는 효과를 가지게 된다.According to the present invention, by extracting the subject's face image (FI) and the facial feature code (FC) through the face recognition DVR to determine whether or not to match the registrant's database stored in the server to display the registrant's data high It can be used for versatile purposes such as door control system, crime management system that easily detects people of interest such as wanted persons, terrorists, etc. by verifying identity with certification rate and fast data processing speed.

도 1은 본 발명의 바람직한 일 실시 형태에 따른 얼굴 인식 DVR을 이용한 유비쿼터스 감시 시스템의 구조도이다.
도 2는 본 발명의 바람직한 일 실시 형태에 따른 얼굴 인식 DVR을 이용한 유비쿼터스 감시 방법의 블럭도이다.
1 is a structural diagram of a ubiquitous monitoring system using a face recognition DVR according to a preferred embodiment of the present invention.
2 is a block diagram of a ubiquitous monitoring method using a face recognition DVR according to an embodiment of the present invention.

이하 첨부도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다. 그러나, 본 발명의 실시예들은 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 아래에서 상술하는 실시예들로 인해 한정되어지는 것으로 해석되어져서는 안 된다. 본 발명의 실시예들은 당업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되어지는 것이다. 따라서, 도면에서의 요소의 형상 등은 보다 명확한 설명을 강조하기 위해서 과장되어진 것이며, 도면상에서 동일한 부호로 표시된 요소는 동일한 요소를 의미한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. However, embodiments of the present invention may be modified in many different forms, and the scope of the present invention should not be construed as being limited by the embodiments described below. Embodiments of the present invention are provided to more completely explain the present invention to those skilled in the art. Therefore, the shapes and the like of the elements in the drawings are exaggerated in order to emphasize a clearer description, and elements denoted by the same symbols in the drawings denote the same elements.

도 1은 본 발명의 바람직한 일 실시 형태에 따른 얼굴 인식 DVR을 이용한 유비쿼터스 감시 시스템의 구조도를 도시한 도면이다. 본 발명은 대상자의 영상을 촬영하기 위한 적어도 하나 이상의 카메라, 상기 카메라에서 획득한 영상물로 부터 대상자의 얼굴 영역을 검출하고 얼굴특성코드(Face Feature Code:FC) 및 얼굴 이미지(Face Image:FI)를 추출하여 네트워크를 통해 얼굴인식(Face Recognition:FR)서버로 전송시키고 상기 얼굴인식(FR)서버에서 인증되어 재전송한 등록자 데이터를 수신하는 적어도 하나 이상의 얼굴인식 DVR(Digital Video Recorder), 상기 얼굴인식 DVR로 부터 수신한 얼굴특성코드(FC)와 얼굴 이미지(FI)를 등록되어 있던 기존의 등록자 데이터베이스와 비교하여 일치율이 설정된 기준치 이상인 경우 등록자 데이터를 상기 얼굴인식 DVR로 재전송하는 얼굴인식(FR)서버, 상기 얼굴인식 DVR과 연결되어 상기 얼굴인식(FR)서버에서 재전송한 등록자 데이터를 디스플레이하는 디스플레이부를 포함하여 이루어지는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템 및 그 방법을 요지로 하는 것으로 비접촉방식의 얼굴인식을 통해 다른 생체인식 기술 보다 높은 인식율과 빠른 처리 속도로 신원확인을 할 수 있도록 하여 보안 유지 또는 범죄자 검색 등 다방면에서 활용할 수 있는 시스템 및 그 방법을 제공하는 것을 핵심으로 한다.1 is a diagram showing the structure of a ubiquitous surveillance system using a face recognition DVR according to an embodiment of the present invention. The present invention detects a face region of a subject from at least one camera for capturing an image of the subject, and images acquired by the camera, and detects a face feature code (FC) and a face image (FI). At least one face recognition DVR (Digital Video Recorder), the face recognition DVR that extracts and transmits to a face recognition server through a network to a face recognition server and receives the re-transmitted registrant data authenticated by the face recognition server. A face recognition (FR) server for re-transmitting the registrant data to the face recognition DVR when the match rate is equal to or greater than the set reference value by comparing the face characteristic code FC and the face image FI received from the registered registrant database; A display unit connected to the face recognition DVR to display registrant data retransmitted from the face recognition server; Ubiquitous surveillance system using a face recognition DVR and a method of the method, and the method to the identity through a non-contact face recognition to recognize the identity at a higher recognition rate and faster processing speed than other biometric technology The key is to provide a system and method that can be used in various fields such as maintenance or criminal search.

도면을 참조하여 살펴보면, 본 발명은 카메라(10), 얼굴인식 DVR(100), 얼굴인식(Face Recognition:FR) 서버(300), 디스플레이부(200)와 외장형 얼굴인식(FR) 모듈(400)로 구성되어 있다. 카메라(10)는 대상자의 영상을 촬영하기 위한 것으로 적어도 하나 이상의 카메라(10)가 설치되며, 출입문 통제 시스템에 이용하는 경우 출구와 입구에 각각 설치되어 있어야 할 것이고 통로마다 설치하여 대상자를 촬영할 수 있다.Referring to the drawings, the present invention is a camera 10, face recognition DVR (100), face recognition (Face Recognition: FR) server 300, the display unit 200 and the external face recognition (FR) module 400 Consists of The camera 10 is for capturing an image of a subject, and at least one or more cameras 10 are installed. When the camera 10 is used in a door control system, the camera 10 should be installed at the exit and the entrance, respectively.

얼굴인식 DVR(100)은 얼굴 검출부(110), 얼굴 이미지(Face Image:FI) 생성부(120), 얼굴특성코드(Face Feature Code:FC) 추출부(130), 전송부(140)와 수신부(150)로 이루어진다. 상기 얼굴 검출부(110)는 얼굴 이미지(FI)와 얼굴특성코드(FC)를 추출하기 위하여 상기 카메라(10)에서 촬영한 대상자의 영상에서 얼굴검출 알고리즘에 의해 얼굴 영역을 검출하여 DVR(100)에 저장한다. 얼굴 이미지(FI) 생성부(120)는 상기 얼굴검출부(110)에서 추출한 얼굴부분을 지정된 크기로 스케일 업/다운하여 얼굴 이미지(FI)를 생성하고 JPEG로 압축하며, 얼굴특성코드(FC) 추출부(130)는 얼굴검출부(110)에서 추출한 얼굴부분을 내부연산을 통하여 데이터베이스화가 가능한 형태의 얼굴특성코드(FC)로 부호화한다. 이때 만일 카메라(10)에 접근한 사람이 마스크를 쓰거나 얼굴부분을 가리면 얼굴검출기능이 동작하지 않아 얼굴특성코드(FC)가 추출되지 않게 된다. 따라서 이러한 기능은 동작 검색 혹은 센서에 의한 단순녹화기능을 가진 기존의 DVR에서 생기는 문제점, 예를 들면 ATM기에 설치된 DVR영상을 사후 검색 시 대부분의 피의자로 추측되는 사람들의 얼굴이 마스크를 쓰거나 얼굴을 가려서 확인 불가한 것을 방지할 수 있다. 즉, ATM기기에서 현금을 인출하려는 사람 얼굴이 ATM기기에 설치된 얼굴인식 DVR에서 얼굴특성코드(FC)가 추출되지 않으면 현금인출이 불가능하도록 ATM기기 기능을 보완함으로써 도난방지 및 범죄예방이 가능하게 된다. 또한 얼굴특성코드(FC)가 추출되는 영상만을 녹화할 수도 있어 기존 DVR보다 현저히 높은 녹화가능시간을 연장할 수 있다. 전송부(140)는 상기 압축된 얼굴이미지(FI)와 얼굴특성코드(FC)를 LAN 또는 인터넷 등 네트워크를 통해 얼굴인식(FR)서버(300)로 전송하고 수신부(150)는 대상자와 등록자와의 일치율이 설정된 기준치 이상으로 판정되어 FR서버(300)에서 재전송한 등록자 데이터를 수신한다. 이 경우 DVR(100)에 내장된 릴레이를 구동하여 출입문 개폐 기능을 할 수 있게 하여 출입문 관리 시스템에 이용할 수 있다.The face recognition DVR 100 includes a face detector 110, a face image (FI) generator 120, a face feature code (FC) extractor 130, a transmitter 140 and a receiver Made of 150. The face detection unit 110 detects a face region from the image of the subject photographed by the camera 10 by the face detection algorithm in order to extract the face image FI and the face characteristic code FC, and then detects the face region by the DVR 100. Save it. The face image (FI) generator 120 scales up / down the face portion extracted by the face detector 110 to a predetermined size to generate a face image (FI), compresses it to JPEG, and extracts a facial feature code (FC). The unit 130 encodes the face portion extracted by the face detection unit 110 into a face characteristic code FC that can be converted into a database through internal calculation. At this time, if a person approaching the camera 10 wears a mask or covers the face part, the face detection function does not operate and the facial feature code FC is not extracted. Therefore, this function is a problem caused by the existing DVR which has a motion recording function or a simple recording function by a sensor. For example, when a post-search of DVR images installed in an ATM is performed, most of the suspected people wear masks or cover their faces. Uncheckable can be prevented. In other words, anti-theft and crime prevention is made possible by supplementing the ATM device function so that cash withdrawal is impossible unless the face feature code (FC) is extracted from the face recognition DVR installed in the ATM device. . In addition, it is possible to record only the image extracted the facial feature code (FC) can extend the recordable time significantly higher than the existing DVR. The transmitting unit 140 transmits the compressed face image FI and the facial characteristic code FC to the face recognition server 300 through a LAN or the Internet, and the receiving unit 150 transmits the information to the subject and the registrant. Is determined to be equal to or greater than the set reference value and receives the registrant data retransmitted by the FR server 300. In this case, it is possible to use the door management system by enabling the door opening and closing function by driving a relay built in the DVR (100).

상기 FR서버(300)는 수신된 FC 및 FI를 저장하고 미리 등록된 등록자 데이터베이스와 대상자 FC 및 FI를 얼굴인식 알고리즘에 의해 비교하여 설정된 일치율 이상일 경우에는 등록자 데이터를 상기 얼굴인식 DVR(100)로 재전송한다. 한대의 FR서버(300)에 다수의 얼굴인식 DVR(100)을 연결할 수 있어 다수의 출입문이나 통로가 있는 곳에서도 초고속망이나 내부망을 이용하여 데이터베이스에 등록된 범죄 용의자나 테러용의자 등을 거의 실시간으로 표시 및 기록할 수 있어 공항이나 항만의 출입국관리소 등의 주요시설에 설치하여 범죄를 예방할 수 있다.The FR server 300 stores the received FC and FI and compares the registered registrant database and the target FC and FI by a face recognition algorithm, and re-transmits the registrant data to the face recognition DVR 100 when the matching rate is equal to or greater than the set rate. do. Multiple face recognition DVRs (100) can be connected to one FR server (300) so that even in the presence of a large number of doors or aisles, a real-time crime suspect or a terrorist suspect registered in a database using a high-speed network or an internal network is almost real-time. It can be displayed and recorded, and it can be installed in major facilities such as an airport or port immigration office to prevent crime.

디스플레이부(200)는 상기 얼굴인식 DVR(100)에 연결되어 상기 FR서버(300)에서 재전송한 등록자 데이터를 디스플레이하게 되는데 디스플레이되는 등록자 데이터는 등록자의 이름, 성별, 키 등의 신상정보 및 대상자와 등록자의 일치율에 관한 데이터로서 범죄 용의자등을 FR서버(300)에 등록해 놓으면 이에 대한 정보가 디스플레이되어 범죄자를 손쉽게 색출하고 범죄를 예방할 수 있으며, 기업체 사무실이나 연구소 등의 출입제한지역에서 활용할 경우 직원이나 연구원을 등록해 놓으면 그들의 출입통제 및 근태관리도 가능하게 된다.The display unit 200 is connected to the face recognition DVR 100 to display the registrant data retransmitted by the FR server 300. The registrant data to be displayed includes personal information such as the registrant's name, gender, key, and the like. Registering the suspects, etc., on the FR server 300 as data on the match rate of the registrants, displays information on them so that criminals can be easily identified and crimes can be prevented. If a researcher or a researcher is registered, they can control their access and attendance.

외장형 얼굴인식(FR) 모듈(400)은 전송선로와 속도가 늦거나 네트워크망의 일시적인 단선등에 의한 불통을 대비해야 할 경우 또는 네트워크를 연결할 수 없는 경우 직접 얼굴인식 DVR본체(100)에 USB를 통해 연결하여 사용한다. 외장형 FR모듈(400)은 등록자 정보만 하루에 한 번, 또는 일주일에 한 번 등 특정한 시간에 네트워크를 통하여 업데이트하거나 네트워크를 통하지 않고 USB 메모리 등으로 업데이트하고 실제 얼굴인식 기능을 FR서버(300)를 사용하지 않고 실행할 필요가 있는 경우에 사용된다. 전송선로 지연 등의 문제가 없어 FR서버(300)를 사용하는 것보다 월등히 속도가 빠르므로 간단한 얼굴인식기능을 가진 출입문 통제시스템으로 사용 가능하다.The external face recognition (FR) module 400 is required to prepare for failure due to a transmission line and a slow speed or a temporary disconnection of the network, or when the network cannot be connected, the face recognition DVR body 100 is directly connected via USB. Connect and use. The external FR module 400 updates the registrant information only once a day, or once a week at a specific time, such as via a network or a USB memory without a network, and updates the FR server 300 with the actual face recognition function. Used when you need to run without using it. Since there is no problem such as transmission line delay, it is much faster than using FR server 300, so it can be used as a door control system with a simple face recognition function.

도 2는 본 발명의 바람직한 일 실시 형태에 따른 얼굴 인식 DVR을 이용한 유비쿼터스 감시 방법의 블럭도를 도시한 도면이다. 도면을 참조하면, 설치된 카메라를 통해 대상자를 촬영하고(S100) 얼굴인식 DVR에서 촬영한 영상을 기초로 대상자의 얼굴부분을 검출하여(S110) 일정한 크기의 얼굴 이미지(FI)를 생성하고 JPEG로 압축하며(S120) 검출한 대상자의 얼굴부분에서 내부연산을 통해 데이터베이스화가 가능한 형태의 얼굴특성코드(FC)로 부호화하여(S130) 상기 FI와 FC를 얼굴인식(FR) 서버에 전송한다(S140). 이후 FR서버는 수신한 상기 FI와 FC를 등록되어 있는 등록자 데이터베이스와 비교하여(S150) 일치율이 설정된 기준치 이상일 경우 등록자에 대한 이름, 성별, 신장등의 신상정보와 등록된 FI 및 등록자와의 일치율에 관한 등록자 데이터를 얼굴인식 DVR로 재전송하며(S160) 재전송 받은 얼굴인식 DVR은 연결된 모니터등을 통해 등록자 데이터를 디스플레이한다(S170).2 is a block diagram of a ubiquitous monitoring method using a face recognition DVR according to a preferred embodiment of the present invention. Referring to the drawings, the subject is photographed through the installed camera (S100) and the face part of the subject is detected based on the image captured by the face recognition DVR (S110) to generate a face image (FI) of a constant size and compressed into JPEG. In operation S120, the face part of the detected subject is encoded using a face characteristic code FC that can be converted into a database through internal operations (S130), and the FI and FC are transmitted to a face recognition server (S140). Thereafter, the FR server compares the received FI and FC with the registered registrant database (S150), if the matching rate is higher than the set threshold, the personal information such as name, gender, height, etc. for the registrant and the matching rate with the registered FI and registrant. Re-transmitting the related registrant data to the face recognition DVR (S160), and the retransmitted face recognition DVR displays the registrant data through a connected monitor (S170).

이상 도면과 명세서에서 최적 실시예들이 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.The best embodiments have been disclosed in the drawings and specification above. Although specific terms have been employed herein, they are used for purposes of illustration only and are not intended to limit the scope of the invention as defined in the claims or the claims. Therefore, those skilled in the art will understand that various modifications and equivalent other embodiments are possible from this. Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.

10: 카메라 100: 얼굴인식 DVR
110: 얼굴 검출부 120:FI 생성부
130: FC 추출부 140: 전송부
150: 수신부 200: 디스플레이부
300: FR 서버 400: 외장형 FR 모듈
10: camera 100: face detection DVR
110: face detection unit 120: FI generation unit
130: FC extraction unit 140: transmission unit
150: receiving unit 200: display unit
300: FR server 400: external FR module

Claims (9)

대상자의 영상을 촬영하기 위한 적어도 하나 이상의 카메라;
상기 카메라에서 획득한 영상물로 부터 대상자의 얼굴 영역을 검출하고 얼굴특성코드(Face Feature Code:FC) 및 얼굴 이미지(Face Image:FI)를 추출하여 네트워크를 통해 얼굴인식(Face Recognition:FR)서버로 전송시키고 상기 얼굴인식(FR)서버에서 인증되어 재전송한 등록자 데이터를 수신하는 적어도 하나 이상의 얼굴인식 DVR(Digital Video Recorder);
상기 얼굴인식 DVR로 부터 수신한 얼굴특성코드(FC)와 얼굴 이미지(FI)를 등록되어 있던 기존의 등록자 데이터베이스와 비교하여 일치율이 설정된 기준치 이상인 경우 등록자 데이터를 상기 얼굴인식 DVR로 재전송하는 얼굴인식(FR)서버;
상기 얼굴인식 DVR과 연결되어 상기 얼굴인식(FR)서버에서 재전송한 등록자 데이터를 디스플레이하는 디스플레이부;
를 포함하고,
상기 얼굴인식 DVR은,
상기 카메라에서 획득한 영상물에서 대상자의 얼굴부분을 추출하는 얼굴검출부;
상기 얼굴검출부에서 추출한 얼굴부분을 지정된 크기로 스케일 업/다운하여 얼굴 이미지(FI)를 생성하고 JPEG로 압축하는 얼굴 이미지(FI) 생성부;
상기 얼굴검출부에서 추출한 얼굴부분에서 내부연산을 통하여 데이터베이스화가 가능한 형태의 얼굴특성코드(FC)로 부호화하는 얼굴특성코드(FC) 추출부;
상기 압축된 얼굴 이미지(FI)와 얼굴특성코드(FC)를 네트워크를 통해 얼굴인식(FR)서버로 전송하는 전송부;
상기 얼굴인식(FR)서버에서 대상자와 등록자와의 일치율이 설정된 기준치 이상으로 판정되어 재전송한 등록자 데이터를 수신하는 수신부;
를 포함하여 이루어지는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템.
At least one camera for taking an image of the subject;
Detects the face area of the subject from the image acquired by the camera, extracts the face feature code (FC) and the face image (Face Image: FI) to the face recognition server through the network. At least one face recognition DVR (Digital Video Recorder) for transmitting and receiving registrant data authenticated and retransmitted by the face recognition (FR) server;
The face recognition code (F) and the face image (FI) received from the face recognition DVR are compared with the existing registrant database, and if the matching rate is equal to or greater than the set threshold, the face recognition data is re-transmitted to the face recognition DVR ( FR) server;
A display unit connected to the face recognition DVR to display registrant data retransmitted by the face recognition (FR) server;
Including,
The face recognition DVR,
A face detector extracting a face part of the subject from an image acquired by the camera;
A face image generation unit for generating a face image FI by compressing the face portion extracted by the face detection unit to a predetermined size and compressing it into JPEG;
A facial feature code (FC) extraction unit for encoding a facial feature code (FC) in a form that can be converted into a database through an internal operation on the face part extracted by the face detection unit;
A transmission unit for transmitting the compressed face image (FI) and face characteristic code (FC) to a face recognition (FR) server through a network;
A receiving unit for receiving the registrant data re-transmitted by the face recognition (FR) server when the matching rate between the subject and the registrant is equal to or higher than a set reference value;
Ubiquitous surveillance system using a face recognition DVR, characterized in that comprises a.
삭제delete 청구항 1에 있어서,
상기 디스플레이부에서 디스플레이되는 등록자 데이터는 등록자에 대한 이름, 성별, 신장 등의 신상정보와 등록된 얼굴 이미지(FI) 및 등록자와의 일치율에 관한 데이터인 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템.
The method according to claim 1,
The registrant data displayed on the display unit is ubiquitous monitoring system using a face recognition DVR, characterized in that the personal information such as name, gender, height, etc. of the registrant, data on the registered face image (FI) and the matching rate with the registrant are registered. .
청구항 1에 있어서,
상기 대상자와 등록자와의 일치율이 기준치 이상인 경우에만 상기 얼굴인식 DVR에 내장된 릴레이를 구동시켜 출입문을 개폐시키는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템.
The method according to claim 1,
Ubiquitous monitoring system using a face recognition DVR characterized in that the door is opened and closed by driving a relay built in the face recognition DVR only when the match rate between the subject and the registrant is greater than or equal to the reference value.
청구항 1에 있어서,
상기 얼굴인식 DVR은 얼굴특성코드(FC)가 추출되는 영상만을 녹화하는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템.
The method according to claim 1,
The face recognition DVR is a ubiquitous surveillance system using a face recognition DVR, characterized in that for recording only the image extracted the facial feature code (FC).
대상자의 영상을 촬영하기 위한 적어도 하나 이상의 카메라;
상기 카메라에서 획득한 영상물로 부터 대상자의 얼굴 영역을 검출하여 얼굴특성코드(Face Feature Code:FC) 및 얼굴 이미지(Face Image:FI)를 추출하는 얼굴인식 DVR(Digital Video Recorder);
상기 얼굴인식 DVR 본체에 USB를 통해 연결되어 상기 얼굴인식 DVR에서 추출한 얼굴특성코드(FC) 및 얼굴이미지(FI)를 자체 저장된 기존의 얼굴특성코드(FC)와 비교하여 일치율이 설정된 기준치 이상인 경우 저장된 등록자 데이터를 얼굴인식 DVR로 재전송하는 외장형 얼굴인식(Face Rognition:FR) 모듈;
상기 얼굴인식 DVR과 연결되어 상기 외장형 얼굴인식(FR) 모듈에서 얼굴인식 DVR로 전송한 등록자 데이터를 디스플레이하는 디스플레이부;
를 포함하여 이루어지는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템.
At least one camera for taking an image of the subject;
A face recognition DVR (Digital Video Recorder) extracting a face feature code (FC) and a face image (FI) from a subject's face region from the image obtained by the camera;
The face recognition code FC and the face image FI extracted from the face recognition DVR are connected to the face recognition DVR via USB and compared with the existing face feature code FC. An external face recognition (FR) module for retransmitting the registrant data to the face recognition DVR;
A display unit connected to the face recognition DVR to display registrant data transmitted from the external face recognition (FR) module to the face recognition DVR;
Ubiquitous surveillance system using a face recognition DVR, characterized in that comprises a.
청구항 6에 있어서,
상기 대상자와 등록자와의 일치율이 기준치 이상인 경우에만 상기 얼굴인식 DVR에 내장된 릴레이를 구동시켜 출입문을 개폐시키는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시 시스템.
The method of claim 6,
Ubiquitous monitoring system using a face recognition DVR characterized in that the door is opened and closed by driving a relay built in the face recognition DVR only when the match rate between the subject and the registrant is greater than or equal to the reference value.
(A) 카메라를 통해 대상자의 영상을 촬영하는 단계;
(B) 얼굴인식 DVR(Digital Video Recorder)에서 상기 대상자의 영상 중 얼굴부분을 검출하여 지정된 크기로 스케일 업/다운하여 얼굴이미지(Face Image:FI)를 생성하여 JPEG로 압축하고 상기 얼굴부분을 내부연산을 통하여 데이터베이스화가 가능한 형태의 얼굴특성코드(Face Feature Code:FC)로 부호화하는 단계;
(C) 상기 압축된 얼굴이미지(FI)와 얼굴특성코드(FC)를 네트워크를 통해 얼굴인식(Face Recognition:FR)서버로 전송하는 단계;
(D) 상기 얼굴인식(FR)서버에 등록되어 있는 기존의 등록자 데이터베이스를 전송된 얼굴이미지(FI) 및 얼굴특성코드(FC)와 비교하여 일치율이 설정된 기준치 이상인 경우 등록자 데이터를 얼굴인식 DVR로 재전송하는 단계;
(E) 상기 재전송된 등록자 데이터를 디스플레이 하는 단계;
를 포함하는 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시방법.
(A) taking an image of the subject through the camera;
(B) Face recognition DVR (Digital Video Recorder) detects the face part of the subject's image, scales up / down to a specified size, generates a face image (FI), compresses it to JPEG, and internalizes the face part. Encoding into a face feature code (FC) in a form that can be converted into a database through an operation;
(C) transmitting the compressed face image (FI) and face characteristic code (FC) to a face recognition server through a network;
(D) Compare the existing registrant database registered in the face recognition server with the transmitted face image FI and facial characteristic code, and re-transmit the registrant data to the face recognition DVR if the match rate is higher than the set threshold. Doing;
(E) displaying the resent registrant data;
Ubiquitous monitoring method using a face recognition DVR comprising a.
청구항 8에 있어서,
상기 (E)단계에서 재전송되어 디스플레이되는 등록자 데이터는,
등록자에 대한 이름, 성별, 신장 등의 신상정보와 등록된 얼굴 이미지(FI) 및 등록자와의 일치율에 관한 데이터인 것을 특징으로 하는 얼굴인식 DVR을 이용한 유비쿼터스 감시방법.
The method according to claim 8,
The registrant data retransmitted and displayed in the step (E),
Ubiquitous monitoring method using a face recognition DVR, characterized in that the identification information, such as name, gender, height for the registrant, the registered face image (FI) and the data matching rate of the registrant.
KR1020100026684A 2010-03-25 2010-03-25 Ubiquitos monitoring system and method using face recognition dvr KR101170014B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100026684A KR101170014B1 (en) 2010-03-25 2010-03-25 Ubiquitos monitoring system and method using face recognition dvr

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100026684A KR101170014B1 (en) 2010-03-25 2010-03-25 Ubiquitos monitoring system and method using face recognition dvr

Publications (2)

Publication Number Publication Date
KR20110107521A KR20110107521A (en) 2011-10-04
KR101170014B1 true KR101170014B1 (en) 2012-08-01

Family

ID=45025650

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100026684A KR101170014B1 (en) 2010-03-25 2010-03-25 Ubiquitos monitoring system and method using face recognition dvr

Country Status (1)

Country Link
KR (1) KR101170014B1 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140055819A (en) 2012-11-01 2014-05-09 삼성전자주식회사 Appparatus and method for face recognition
KR101415848B1 (en) * 2012-12-12 2014-07-09 휴앤에스(주) Monitering apparatus of school-zone using detection of human body and vehicle
KR101446143B1 (en) * 2013-01-07 2014-10-06 한남대학교 산학협력단 CCTV Environment based Security Management System for Face Recognition
US10999561B2 (en) * 2013-03-15 2021-05-04 Vivint, Inc. Methods for using an image capture device integrated at a building entry with an automation control panel, and systems and devices related thereto
KR101459024B1 (en) * 2013-04-09 2014-12-04 퍼스텍주식회사 Security System for Monitoring Facilities
CN110825765B (en) * 2019-10-23 2022-10-04 中国建设银行股份有限公司 Face recognition method and device

Also Published As

Publication number Publication date
KR20110107521A (en) 2011-10-04

Similar Documents

Publication Publication Date Title
CN106204815B (en) A kind of access control system based on human face detection and recognition
US10997809B2 (en) System and method for provisioning a facial recognition-based system for controlling access to a building
KR101170014B1 (en) Ubiquitos monitoring system and method using face recognition dvr
KR101439348B1 (en) Attendance management system using face recognitionaccess control unit
US20070036395A1 (en) Reverse identity profiling system with alert function
CN105912908A (en) Infrared-based real person living body identity verification method
CN106780009A (en) A kind of self-help bank's crime prevention system
CN101266704A (en) ATM secure authentication and pre-alarming method based on face recognition
KR101838858B1 (en) Access control System based on biometric and Controlling method thereof
KR101096984B1 (en) Imaging device, imaging method, and computer readable recording medium having imaging program
US20040223629A1 (en) Facial surveillance system and method
CN110135279B (en) Early warning method, device and equipment based on face recognition and computer readable medium
CN104978784B (en) The linkage door door access control system and method associated based on image
KR100965428B1 (en) The system and operating method using two different positioned intelligent cameras for automatic verification of authenticated person's entrance
EP3341916A1 (en) System and method for in motion identification
KR20150112635A (en) Doorlock system
CN111462417A (en) Multi-information verification system and multi-information verification method for unmanned bank
JP2009108575A (en) Room entrance/exit control system
JP5621534B2 (en) Access control system and personal identification data reader
JP5529593B2 (en) Image monitoring device
CN112102548A (en) Access control system based on palm vein recognition and control method thereof
CN104637124A (en) Door having monitoring function
Dhir et al. Biometric recognition: A modern era for security
KR101381524B1 (en) Visitor management system using image
JP5341001B2 (en) Image monitoring device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
N231 Notification of change of applicant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161026

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170822

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee