KR20230068226A - Identity Authentication System and Method Using Face Recognition - Google Patents
Identity Authentication System and Method Using Face Recognition Download PDFInfo
- Publication number
- KR20230068226A KR20230068226A KR1020210162899A KR20210162899A KR20230068226A KR 20230068226 A KR20230068226 A KR 20230068226A KR 1020210162899 A KR1020210162899 A KR 1020210162899A KR 20210162899 A KR20210162899 A KR 20210162899A KR 20230068226 A KR20230068226 A KR 20230068226A
- Authority
- KR
- South Korea
- Prior art keywords
- authentication
- server
- face
- passport
- identity
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 230000001815 facial effect Effects 0.000 claims abstract description 79
- 230000004044 response Effects 0.000 claims abstract description 3
- 230000036541 health Effects 0.000 claims description 61
- 239000000284 extract Substances 0.000 claims description 6
- 230000008569 process Effects 0.000 abstract description 8
- 238000005516 engineering process Methods 0.000 description 9
- 210000004709 eyebrow Anatomy 0.000 description 4
- 238000011160 research Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 229940036051 sojourn Drugs 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000033228 biological regulation Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006798 recombination Effects 0.000 description 1
- 238000005215 recombination Methods 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
- G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
- G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/20—Individual registration on entry or exit involving the use of a pass
- G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
- G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
- G07C9/26—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition using a biometric sensor integrated in the pass
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/38—Individual registration on entry or exit not involving the use of a pass with central registration
Abstract
본 발명은 안면인식을 이용한 신분인증시스템 및 방법에 관한 것으로서, 더욱 상세하게는 모바일신분증 생성시에 안면인식을 통해 신분증 소유자 인증을 수행하는 과정 중에 생성된 안면인식 데이터를 등록하고, 이후 신분증을 소지하지 않고도 안면인식에 의해 신원을 인증함으로써 편리하게 출입하고 진료받을 수 있도록 하는 시스템 및 방법에 관한 것이다.
본 발명의 실시예에 따른 안면인식을 이용한 신분인증시스템은, 촬영한 인증대상자의 안면 영상을 분석하여 인식이 가능한지 판단하고 인식이 가능한 경우 안면인식 데이터를 생성해서 인증 서버에 신분인증을 요청하는 안면인식 서버;
상기 인증 서버의 신분인증 요청에 의해 관공서 인증 서버와 연계하여 안면인식 데이터를 토대로 신분을 인증하고, 신분인증 결과를 안면인식 서버에 전달하는 인증 서버; 및
신분증 정보와 해당 신분증 소유자의 안면인식 데이터가 기등록되고, 상기 인증 서버와 연계하여 기등록 안면인식 데이터와 생성 안면등록 데이터를 비교하여 신원을 인증하는 관공서 인증 서버;
를 포함하여 구성된다.The present invention relates to an identification system and method using facial recognition, and more particularly, registers facial recognition data generated during the process of authenticating the owner of an identification card through facial recognition when generating a mobile identification card, and then possesses the identification card. It relates to a system and method for enabling convenient entry and treatment by authenticating an identity by facial recognition without having to do so.
An identity authentication system using facial recognition according to an embodiment of the present invention analyzes a photographed face image of an authentication subject to determine whether recognition is possible, and if the recognition is possible, creates facial recognition data to request identity authentication to the authentication server. recognition server;
An authentication server that authenticates an identity based on face recognition data in association with a public office authentication server in response to an identity authentication request from the authentication server, and transmits an identity authentication result to the face recognition server; and
a public office authentication server in which identification information and face recognition data of the owner of the identification card are pre-registered, and authenticate the identity by comparing the previously registered facial recognition data with generated facial registration data in conjunction with the authentication server;
It is composed of.
Description
본 발명은 안면인식을 이용한 신분인증시스템 및 방법에 관한 것으로서, 더욱 상세하게는 모바일신분증 생성시에 안면인식을 통해 신분증 소유자 인증을 수행하는 과정 중에 생성된 안면인식 데이터를 등록하고, 이후 신분증을 소지하지 않고도 안면인식에 의해 신원을 인증함으로써 편리하게 출입하고 진료받을 수 있도록 하는 시스템 및 방법에 관한 것이다.The present invention relates to an identification system and method using facial recognition, and more particularly, registers facial recognition data generated during the process of authenticating the owner of an identification card through facial recognition when generating a mobile identification card, and then possesses the identification card. It relates to a system and method for enabling convenient entry and treatment by authenticating an identity by facial recognition without having to do so.
전자정보 기술의 발전에 따라 사람들의 라이프 스타일(life style)이 변화하고 있다.2. Description of the Related Art With the development of electronic information technology, people's lifestyles are changing.
스마트폰과 같은 휴대가 가능한 고성능의 모바일 단말이 현대인의 라이프 스타일의 중심이 되면서 스마트폰을 통한 금융 애플리케이션에 대한 사용이 빈번해지고 있으며, 생체인증을 통해 간편하게 본인인증을 하는 사용자가 점차 증가하고 있다.As portable, high-performance mobile terminals such as smartphones become the center of modern people's lifestyle, the use of financial applications through smartphones is increasing, and the number of users who conveniently authenticate themselves through biometric authentication is gradually increasing.
이에 따라, 스마트폰을 활용한 쇼핑, 금융 등의 모바일 서비스 이용시, 사용자의 개인정보 및 기타 개인과 관련된 사적인 정보 등에 대한 해킹에 따른 정보 유출의 위협으로부터 안전하고자 하는 인식이 증가하고 있으며, 이에 따른 데이터 보안의 중요도가 점점 더 커지고 있다.Accordingly, when using mobile services such as shopping and finance using smartphones, there is an increasing awareness of wanting to be safe from the threat of information leakage due to hacking of users' personal information and other personal information related to individuals. Security is becoming more and more important.
데이터 보안 기술 중, 특히 사용자 자신이 통제권을 갖는 다양한 생체인식 기술을 기반으로 하는 인증 솔루션에 대한 관심이 증대하고 있으며, 공지된 생체인식 기술로는 지문, 홍채, 안면인식 등이 있다.Among data security technologies, interest in authentication solutions based on various biometric technologies in which users themselves have control is increasing, and known biometric technologies include fingerprint, iris, and facial recognition.
이중, 안면인식(Face Recognition)기술은 얼굴의 특징점을 추출하여 저장된 데이터베이스 내 자료와 비교하여 신원을 확인하는 기술을 가리키는 것으로, 사용자의 피부가 인증 장치와 직접적으로 접촉하지 않기 때문에 기존의 생체인식에 비해 위생적이고 편의성이 높아 다양한 분야에서 활용성이 기대된다.Among them, Face Recognition technology refers to a technology that extracts facial feature points and compares them with data in a stored database to confirm identity. It is hygienic and convenient, so it is expected to be used in various fields.
특히 안면인식을 이용한 인증 방식은 사용자의 얼굴 이미지를 촬영하여 해당 얼굴 이지미에서 특징점을 추출함으로써, 사용자 인증을 실시할 수 있다.In particular, in the authentication method using facial recognition, user authentication may be performed by taking a user's face image and extracting feature points from the face image.
이러한 안면인식 기술은 현재 아이폰의 Face ID에 적용되어 스마트폰의 잠금 해제 방식으로도 이용되고 있다.This facial recognition technology is currently applied to the iPhone's Face ID and is also used as a smartphone unlocking method.
Face ID의 경우, 사용자의 최근 사진을 직접 업로드하고, 추후 잠금해제 시 실시간 얼굴 이미지를 촬영하여 사용자 인증을 실시하고 있다.In the case of Face ID, user authentication is performed by directly uploading the user's latest photo and taking a real-time face image when unlocking later.
또한, 보안이 필요로 되는 산업 시설이나 연구 시설에서는 사용자의 신분증 정보를 사전에 등록하고, 해당 시설 출입시 출입자의 실시간 얼굴 이미지와 기존에 저장된 신분증 얼굴 이미지를 서로 비교하여 신분을 확인하는 방식 역시 적용되고 있다.In addition, in industrial facilities or research facilities that require security, the user's ID information is registered in advance, and when entering the facility, a method of verifying identity by comparing the real-time face image of the person entering the facility with the previously stored face image of the ID card is also applied. It is becoming.
한편, 국민건강보험공단이 제출한 자료에 따르면 2015년부터 올해(2020년) 상반기까지 5년 반 동안 건강보험증 대여·도용 부정사용자 적발인원은 총 6,002명이며, 부정수급 결정건수는 27만 8,980건, 부정수급 결정금액은 69억 800만원에 달하는 것으로 집계됐다.Meanwhile, according to data submitted by the National Health Insurance Service, a total of 6,002 people were caught illegally borrowing or stealing health insurance cards for five and a half years from 2015 to the first half of this year (2020), and 278,980 cases of fraudulent payment decisions were made. , the amount of the illegal supply and demand decision was calculated to reach 6.98 billion won.
또한 ‘건강보험증 부정사용자에 대한 형사고발 및 처분현황’에 따르면, 지난해 건강보험증 부정사용자 53명, 올해 상반기 58명을 형사고발하는 등 2015년부터 올해 상반기까지 5년 반 동안 총 672명을 고발조치하였으며, 이 중 86.8%인 583명이 벌금형, 13.2%인 89명이 징역형을 선고받았다.In addition, according to the 'Criminal Accusations and Dispositions Against Fraudulent Health Insurance Card Users', a total of 672 cases were filed against 53 fraudulent users of health insurance cards last year and 58 cases in the first half of this year. Among them, 583 (86.8%) were sentenced to fines, and 89 (13.2%) were sentenced to imprisonment.
남인순 의원은 “건강보험증 대여 및 도용 등 부정사용은 외국인 당연적용(’19년 7월) 및 입원환자 본인확인제도(’19년 9월) 등 제도개선으로 전반적으로 감소추세에 있으나, 건강보험증이나 신분증 없이 요양기관에서 성명과 주민등록번호 등 개인정보만으로 진료가 가능하여 부정사용이 지속적으로 발생하고 있다”며 “개정 건강보험법에 따라 지난해 6월부터 ‘증대여·도용자 신고 포상금 제도’가 시행되고, 지난해 10월부터 부정수급자에 대한 처벌을 2년 이하 징역 또는 2천만원 이하 벌금으로 강화하였음에도 부정수급이 근절되지 않고 있다”고 지적했다.Rep. Nam In-soon said, “Illegal use, such as lending and stealing health insurance cards, is generally on the decline due to system improvements such as mandatory application of foreigners (July 2019) and inpatient identification system (September 2019), but health insurance cards or “According to the revised Health Insurance Act, the 'reward system for reporting increased loans/thieves' has been implemented since June of last year, and last year Since October, the punishment for illegal recipients has been strengthened with imprisonment for up to two years or a fine of up to 20 million won, but illegal receipts have not been eradicated.”
이어 “건강보험증 대여·도용 등 부정사용을 근절하기 위해서는 병·의원 등 요양기관의 본인확인 의무화 규정을 신설할 필요가 있으며, 건강보험공단과 병원협회가 MOU를 체결하여 병원 입원환자에 대해 신분증을 통한 본인여부를 확인하는 제도를 시행하고 있는데, 의원급 의료기관까지 본인확인을 확대할 수 있도록 하고, 건강보험증 대여·도용자 처벌 강화 및 신고 포상금 제도 운영 등 제도변경 사항에 대해 대국민 홍보를 강화하여야 한다”고 주장했다.“In order to eradicate fraudulent use, such as lending or stealing health insurance cards, it is necessary to establish new regulations requiring identification of medical institutions such as hospitals and clinics, and the Health Insurance Corporation and the Hospital Association signed an MOU to provide identification for inpatients in hospitals. We are implementing a system to verify identity through a system that allows identification to be extended to clinic-level medical institutions, and publicity for system changes such as strengthening punishment for lending health insurance cards and thieves and operating a bounty system for reporting should be strengthened.” insisted.
한편, 본 출원인은 등록번호 제10-1950310호(공고일자 2019년02월20일)에서 실물 여권에 기재된 여권 정보를 전자화하여 모바일여권을 생성함으로 여권 분실의 위험을 없애고 단순 스캔 또는 입력만으로 여권인증이 용이하게 이루어져 세금환급 등의 편이성을 증대시킨 모바일여권 및 이를 생성하기 위한 모바일여권 생성 시스템을 개시한 바 있다.On the other hand, the present applicant eliminates the risk of passport loss by creating a mobile passport by digitizing the passport information described in the physical passport in Registration No. 10-1950310 (notice date: February 20, 2019), and passport authentication with simple scanning or input A mobile passport with increased convenience such as tax refund and a mobile passport generation system for generating the mobile passport has been disclosed.
본 발명은 건강보험증의 부정사용 문제점을 해결하고 특정구역 출입시 출입자의 실시간 얼굴 이미지와 기존에 저장된 신분증 얼굴 이미지를 서로 비교하여 신분을 확인하는 안면인식 기술과, 본 출원인의 모바일여권 생성시에 등록한 안면인식 데이터를 병합하여 신분증을 소지하지 않고도 안면인식에 의해 신원을 인증함으로써, 예를 들어 카지노나 호텔 등의 출입과 보안을 필요로 하는 산업 시설이나 연구 시설 등의 출입에 적용하여 편리하게 출입할 수 있고 안면인식에 의한 신원인증으로 방문진료시나 원격진료시에 건강보험증 부정사용을 방지할 수 있는 안면인식을 이용한 인증시스템 및 방법을 제공한는 데 그 목적이 있다.The present invention solves the problem of fraudulent use of health insurance cards and provides a facial recognition technology that confirms identity by comparing the real-time face image of the person entering and exiting a specific area with the face image of the previously stored ID card, and By merging facial recognition data and authenticating identity by facial recognition without carrying an ID card, for example, it can be applied to access to casinos and hotels and to industrial facilities or research facilities that require security, allowing for convenient access. The purpose of this study is to provide an authentication system and method using facial recognition that can prevent fraudulent use of health insurance cards during visiting medical treatment or remote medical treatment through identity authentication by facial recognition.
상술한 목적을 달성하기 위한 본 발명의 실시예에 따른 안면인식을 이용한 신분인증시스템은, 촬영한 인증대상자의 안면 영상을 분석하여 인식이 가능한지 판단하고 인식이 가능한 경우 안면인식 데이터를 생성해서 인증 서버에 신분인증을 요청하는 안면인식 서버;In order to achieve the above object, an identification system using facial recognition according to an embodiment of the present invention analyzes a photographed face image of an authentication subject to determine whether recognition is possible, and if recognition is possible, creates facial recognition data to the authentication server. a facial recognition server requesting identity authentication;
상기 인증 서버의 신분인증 요청에 의해 관공서 인증 서버와 연계하여 안면인식 데이터를 토대로 신분을 인증하고, 신분인증 결과를 안면인식 서버에 전달하는 인증 서버; 및An authentication server that authenticates an identity based on face recognition data in association with a public office authentication server in response to an identity authentication request from the authentication server, and transmits an identity authentication result to the face recognition server; and
신분증 정보와 해당 신분증 소유자의 안면인식 데이터가 기등록되고, 상기 인증 서버와 연계하여 기등록 안면인식 데이터와 생성 안면등록 데이터를 비교하여 신원을 인증하는 관공서 인증 서버;a public office authentication server in which identification information and face recognition data of the owner of the identification card are pre-registered, and authenticate the identity by comparing the previously registered facial recognition data with generated facial registration data in conjunction with the authentication server;
를 포함하여 구성된다.It is composed of.
또한, 상기 신분증이 여권인 경우 신분인증 후 인증 서버로부터 여권복사본 사진, 촬영 얼굴 사진(영상), 여권 MRZ(machine readable zone) 데이터, 체류정보를 전송받는 호텔이나 카지노의 관리 서버가 더 구비되는 것을 특징으로 한다.In addition, if the ID is a passport, a management server of a hotel or casino that receives passport copy photos, photographed face photos (videos), passport MRZ (machine readable zone) data, and stay information from the authentication server after identity authentication is further provided to be characterized
또한, 상기 관리 서버는 출입인증 단말에 촬영 얼굴 사진(영상)을 푸시 방식으로 전달하여 출입인증 단말의 화면에 표시하며, 관리 단말에 인증대상자의 출입 사실을 등록하고 화면에 표시하는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.In addition, the management server transmits the photographed face photo (video) to the access authentication terminal in a push method and displays it on the screen of the access authentication terminal, and registers the fact of the person to be authenticated in the management terminal and displays it on the screen. Identity authentication system using facial recognition.
또한, 상기 관공서 인증 서버는 여권번호, 국적, 이름, 생년월일, 성별, 여권만기일자, 시민권번호(주민번호), 여권사진 중 적어도 하나 이상의 여권정보를 실물 여권에서 인식하여 추출하고, 이 정보를 암호화하고 재조합하여 이루어지는 모바일여권 정보를 저장하는 것을 특징으로 한다.In addition, the public office authentication server recognizes and extracts at least one passport information of passport number, nationality, name, date of birth, gender, passport expiration date, citizenship number (resident number), and passport photo from the real passport, and encrypts this information. and storing the mobile passport information obtained by recombination.
또한, 상기 신분인증 후 인증 서버로부터 신분증복사본 사진, 촬영 얼굴 사진(영상), 신분증 MRZ 데이터를 전송받아 QR코드 출입 인증을 대신하는 방역 서버가 더 구비되는 것을 특징으로 한다.In addition, after the identification authentication, a quarantine server is further provided that receives a photo copy of the ID card, a photographed face photo (video), and MRZ data of the ID card from the authentication server and replaces the QR code access authentication.
또한, 상기 관공서 인증 서버는 안면인식 데이터의 기등록일과, 기등록 안면인식 데이터와 생성 안면인식 데이터의 비교일 간의 기일차와 같은 시간 여건을 고려하여 신원을 인증하는 것을 특징으로 한다.In addition, the public office authentication server is characterized in that it authenticates the identity in consideration of time conditions such as a date difference between a registered face recognition data and a comparison date between the previously registered face recognition data and the generated face recognition data.
또한, 상기 안면인식 서버는 신분인증 요청시 CI 키를 인증 서버에 전송하는 것을 특징으로 한다.In addition, the facial recognition server is characterized in that it transmits the CI key to the authentication server when requesting identity authentication.
그리고 상기 신분증이 실물인증 건강보험증인 경우 신분인증 후 인증 서버로부터 건강보험증복사본 사진, 촬영 얼굴 사진(영상), 건강보험증 MRZ(machine readable zone) 데이터를 전송받는 병원이나 의원의 관리 서버가 더 구비되는 것을 특징으로 한다.And if the identification card is a physical authentication health insurance card, a management server of a hospital or clinic that receives a copy of the health insurance card, a photographed face photo (video), and a machine readable zone (MRZ) data from the authentication server after identity authentication is further provided characterized by
본 발명의 실시예에 따른 안면인식을 이용한 신분인증방법은, A) 안면인식 서버에서 인증대상자의 안면(얼굴)을 촬영한 영상으로 얼굴 부위별 형상이나 위치 및 크기를 추출하고 분석하여 안면을 인식하는 단계;An identity authentication method using facial recognition according to an embodiment of the present invention is A) facial recognition server extracts and analyzes the shape, location, and size of each facial part from a photographed image of the face (face) of the subject to be authenticated to recognize the face. doing;
(B) 상기 안면인식 서버에서 안면인식이 성공한 경우 안면인식 데이터를 생성하고 촬영 얼굴(안면) 영상과 CI 키(KEY)를 인증 서버에 전송하는 단계;(B) generating face recognition data and transmitting a photographed face (face) image and a CI key (KEY) to an authentication server when face recognition is successful in the face recognition server;
(C) 상기 인증 서버에서 관공서 인증 서버와 연계하여 기등록된 안면인식 데이터와 생성 안면인식 데이터를 비교하여 신분을 인증하는 단계;(C) authenticating an identity by comparing previously registered face recognition data with generated face recognition data in association with a public office authentication server in the authentication server;
(D) 상기 인증 서버에서 신분인증이 성공한 경우 관리 서버와 방역 서버에 신분증 정보와 촬영 얼굴 사진(영상)을 전송하는 단계;(D) transmitting identification information and a photograph of a face taken (video) to a management server and a quarantine server when identification is successful in the authentication server;
(E) 상기 관리 서버는 출입인증 단말에 촬영 얼굴 사진(영상)을 푸시 방식으로 전달하여 출입인증 단말의 화면에 표시하며, 관리 단말에 인증대상자의 출입 사실이나 진료 사실을 등록하고 화면에 표시하는 단계; 및(E) The management server transmits the photographed face photo (video) to the access authentication terminal in a push method and displays it on the screen of the access authentication terminal, and registers the fact of access or medical treatment of the person subject to authentication in the management terminal and displays it on the screen step; and
(F) 상기 방역 서버에서 QR코드 출입 인증을 대신하는 단계;(F) replacing QR code access authentication in the quarantine server;
를 포함하여 구성된다.It is composed of.
또한, 상기 신분증이 여권인 경우 (A)단계 이전에 실물 여권을 토대로 모바일여권을 생성하되, 안면인식 서버에서 안면인식을 수행하고 이를 통해 여권 소유자 인증을 수행하여 안면인식 데이터를 생성하며, 이를 관공서 인증 서버에 등록하는 단계를 더 수행하는 것을 특징으로 한다.In addition, if the identification card is a passport, a mobile passport is generated based on the real passport before step (A), but facial recognition is performed in the facial recognition server and passport owner authentication is performed through this to generate facial recognition data, which is used by government offices. It is characterized by further performing the step of registering in the authentication server.
그리고 상기 (C)단계에서 안면인식 데이터의 기등록일과, 기등록 안면인식 데이터와 생성 안면인식 데이터의 비교일 간의 기일차와 같은 시간 여건을 고려하여 신원을 인증하는 것을 특징으로 한다.In the step (C), the identity is authenticated in consideration of time conditions such as a difference between a registered date of face recognition data and a date of comparison between previously registered face recognition data and created face recognition data.
상술한 과제의 해결 수단에 의하면, 건강보험증의 부정사용 문제점을 해결하고 특정구역 출입시 출입자의 실시간 얼굴 이미지와 기존에 저장된 신분증 얼굴 이미지를 서로 비교하여 신분을 확인하는 안면인식 기술과, 본 출원인의 모바일여권 생성시에 등록한 안면인식 데이터를 병합하여 신분증을 소지하지 않고도 안면인식에 의해 신원을 인증함으로써, 예를 들어 카지노나 호텔 등의 출입과 보안을 필요로 하는 산업 시설이나 연구 시설 등의 출입에 적용하여 편리하게 출입할 수 있고 안면인식에 의한 신원인증으로 방문진료시나 원격진료시에 건강보험증 부정사용을 방지할 수 있다.According to the means for solving the above-described problems, the face recognition technology solves the problem of fraudulent use of the health insurance card and compares the real-time face image of the person entering and exiting a specific area with the face image of the previously stored ID card to confirm the identity, and the present applicant's By merging facial recognition data registered at the time of mobile passport creation and authenticating identity by facial recognition without carrying an ID card, for example, access to casinos and hotels, as well as access to industrial facilities and research facilities that require security By applying it, you can enter and exit conveniently, and you can prevent fraudulent use of your health insurance card during visiting medical treatment or remote medical treatment through identity authentication by facial recognition.
도 1은 본 발명의 일 실시예에 따른 안면인식을 이용한 신분인증시스템의 블록 구성도이다.
도 2는 본 발명의 일 실시예에 따른 안면인식을 이용한 신분인증방법을 나타내는 순서도이다.
도 3은 도 2에 나타낸 모바일여권이나 모바일건강보험증 생성 단계의 상세 순서도이다.
도 4는 본 발명의 다른 실시예에 따른 실물여권 스캔을 통한 여권인증방법을 나타내는 순서도이다.1 is a block diagram of an identity authentication system using facial recognition according to an embodiment of the present invention.
2 is a flowchart illustrating an identity authentication method using facial recognition according to an embodiment of the present invention.
Figure 3 is a detailed flow chart of the mobile passport or mobile health insurance card generation step shown in Figure 2.
4 is a flowchart illustrating a passport authentication method through physical passport scanning according to another embodiment of the present invention.
이하 본 발명의 실시예에 대하여 첨부된 도면을 참고로 그 구성 및 작용을 설명하기로 한다.Hereinafter, the configuration and operation of embodiments of the present invention will be described with reference to the accompanying drawings.
도면들 중 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 참조번호 및 부호들로 나타내고 있음에 유의해야 한다.It should be noted that the same reference numerals and symbols refer to the same components in the drawings as much as possible, even if they are displayed on different drawings.
하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.In the following description of the present invention, if it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the subject matter of the present invention, the detailed description will be omitted.
또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.In addition, when a part "includes" a certain component, it means that it may further include other components without excluding other components unless otherwise stated.
도 1은 본 발명의 일 실시예에 따른 안면인식을 이용한 신분인증시스템의 블록 구성도이다.1 is a block diagram of an identity authentication system using facial recognition according to an embodiment of the present invention.
도 1에 도시된 바와 같이 본 발명의 일 실시예에 따른 안면인식을 이용한 신분인증시스템은, 안면인식 서버(10), 인증 서버(20), 관공서 인증 서버(30), 방역 서버(40) 및 관리 서버(50)를 포함하여 구성되고 블록체인을 통해 서로 연결된다.As shown in FIG. 1, the identification system using face recognition according to an embodiment of the present invention includes a
특히 인증 서버(20)와 관리 서버(50)는 VPN 전용선으로 연결된다.In particular, the
여기에 더해 상기 안면인식 서버(10)는 안면인식부(12)와 출입문(14)에 연결되고, 관리 서버(50)는 카운터데스크의 출입인증 단말(52)과 관리 단말(54)에 연결될 수 있다.In addition, the
상기 안면인식 서버(10)는 안면인식부(12)에서 촬영한 인증대상자의 안면 영상을 분석하여 인식이 가능한지 판단하고 인식이 가능한 경우 안면인식 데이터를 생성해서 인증 서버(20)에 CI 키를 전송하여 신분인증을 요청하며, 인식이 불가능한 경우 안면인식부(12)에 인식오류 메시지를 전송하고 적색으로 표시하여 인증대상자나 관리자가 이를 확인할 수 있도록 한다.The
안면인식부(12)는 이를 통해 다시 한번 인증대상자의 안면을 촬영하여 안면인식 서버(10)에 전송한다.Through this, the
또한, 신분인증 요청에 대한 회신으로 상기 인증 서버(20)로부터 신분인증 성공(확인)을 전달받은 경우 출입문(14)의 잠금을 해제하여 개방함으로써 인증대상자가 출입할 수 있도록 한다.In addition, when the identity authentication success (confirmation) is received from the
여기서 상기 출입문(14)은 예를 들어 카지노나 호텔의 게이트웨이일 수 있다.Here, the
상기 안면인식부(14)는 예를 들어 출입문(14)의 앞쪽에 위치한 인증대상자의 안면을 촬영하여 안면인식하도록 구성한 안면인식카메라일 수 있다.The
상기 안면인식카메라에는 인증대상자를 향해 환하게 빛을 비추는 조명수단을 구비토록 구성하는 것이 바람직하다.It is preferable to configure the facial recognition camera to be provided with a lighting means for brightly shining light toward the person to be authenticated.
상기에서 조명수단은 LED소자의 발광원리를 이용한 LED조명의 구조를 적용하여 구성하는 것이 바람직하다.In the above, it is preferable to configure the lighting means by applying the structure of LED lighting using the light emitting principle of the LED element.
상기 안면인식카메라는 인증대상자의 얼굴을 촬영한 후 영상을 안면인식 서버(10)에 전송하여 분석할 수 있도록 한다.The face recognition camera photographs the face of the person to be authenticated and transmits the image to the
상기 안면인식 서버(10)는 인증대상자의 얼굴 각 부위(눈썹, 눈, 코, 입 등)별 형상이나 위치 및 크기 등을 추출하고 분석하여 안면인식이 가능한 경우 안면인식 데이터를 생성한다.The
이를 위해 안면인식 카메라는 인증대상자의 얼굴을 한 방향이나 각도가 아니라 다양한 각도 및 방향에서 촬영을 하게 된다.To this end, the face recognition camera takes pictures of the face of the subject of authentication not in one direction or angle, but in various angles and directions.
상기 인증대상자의 안면인식절차를 간단히 살펴보면, 먼저 인증대상자의 안면 중 눈썹 형상을 추출한 다음 눈, 코, 입 각각의 위치를 추출하는 동시에 눈, 코, 입 개개의 크기를 추출하고, 인증대상자의 얼굴을 주위 배경으로부터 분리하여 얼굴윤곽을 추출함에 따라 안면을 인식한다.Looking briefly at the facial recognition procedure of the subject of authentication, first, the shape of the eyebrows is extracted from the face of the subject of authentication, and then the position of each eye, nose, and mouth is extracted, and the size of each eye, nose, and mouth is extracted, and the face of the subject is extracted. The face is recognized by separating the face from the surrounding background and extracting the face contour.
상기 안면인식 서버(10)에서는 Haar특징값 추출 알고리즘이나 아다부스트(AdaBoost) 알고리즘을 이용하여 얼굴을 검출 및 인식하도록 이루어진다.The
또한, 상기 안면인식 서버(10)는 이를 통해 안면인식 데이터를 생성하고 촬영 얼굴(안면) 영상과 CI 키(KEY)를 인증 서버(20)에 전송한다.In addition, the
상기 인증 서버(20)는 CI 키를 토대로 관공서 인증 서버(30)와 연계하여 신분을 인증한다.The
여기서 관공서 인증 서버는 신분증(여기서는 여권이나 건강보험증을 예를 들어 설명한다)을 인증하는 공인 서버이다.Here, the government office authentication server is an authorized server that authenticates an identification card (here, a passport or health insurance card will be described as an example).
한편, 실물 여권을 가지고 모바일여권을 생성할 때, 실물여권 소유자 자신이 안면인식을 통해 여권소유자 인증을 스스로 수행하여 안면인식 데이터를 생성하고, 이를 관공서 인증 서버(30)에 등록한다.On the other hand, when creating a mobile passport with a real passport, the real passport holder himself performs passport holder authentication through facial recognition to generate facial recognition data and registers it in the government
여기서 관공서 인증 서버(30)는 관공서 예를 들어 외교부나 법무부, 관세청 등에서 운영하고 관리하는 서버로서, 문자정보DB와 이미지정보DB를 포함하여 암호화된 모바일여권 정보를 저장하고, 인증 서버(20)의 신분인증 요청시 기등록 안면인식 데이터와 인증 서버에 전송한 생성 안면인식 데이터를 비교하여 신원을 인증한다.Here, the government
또한, 실물 건강보험증을 가지고 모바일건강보험증을 생성할 때, 실물건강보험증 소유자 자신이 안면인식을 통해 건강보험증소유자 인증을 스스로 수행하여 안면인식 데이터를 생성하고, 이를 관공서 인증 서버(30)에 등록한다.In addition, when creating a mobile health insurance card with a real health insurance card, the owner of the real health insurance card himself performs the authentication of the owner of the health insurance card through facial recognition to generate facial recognition data and registers it in the public
여기서 관공서 인증 서버(30)는 관공서 예를 들어 국민건강보험공단 등에서 운영하고 관리하는 서버로서, 문자정보DB와 이미지정보DB를 포함하여 암호화된 모바일건강보험증 정보를 저장하고, 인증 서버(20)의 신분인증 요청시 기등록 안면인식 데이터와 인증 서버에 전송한 생성 안면인식 데이터를 비교하여 신원을 인증한다.Here, the public
이때 상기 관공서 인증 서버(30)는 안면인식 데이터의 기등록일과, 기등록 안면인식 데이터와 생성 안면인식 데이터의 비교일 간의 기일차와 같은 시간 여건을 고려한다. At this time, the public
상기 모바일여권 정보는 여권번호, 국적, 이름, 생년월일, 성별, 여권만기일자, 시민권번호(주민번호), 여권사진 중 적어도 하나 이상의 여권정보를 실물 여권에서 인식하여 추출하고 이 정보를 암호화하고 재조합하여 이루어진다.The mobile passport information recognizes and extracts at least one passport information of passport number, nationality, name, date of birth, gender, passport expiration date, citizenship number (residential number), and passport photo from the real passport, encrypts and recombines this information, It is done.
상기 인증 서버(20)는 관공서 인증 서버(30)에서 신분인증이 성공한 경우 신분증이 여권인 경우 모바일여권 정보 예를 들어 여권복사본 사진, 촬영 얼굴 사진(영상), 여권 MRZ(machine readable zone) 데이터, 체류정보 등을 관리 서버(40) 예를 들어 카지노나 호텔 등의 관리 서버에 전송한다.The
상기 관리 서버(50)는 이를 토대로 카지노나 호텔의 카운터 데스크에 구비된 출입인증 단말(52)과 관리 단말(54)을 제어하되, 출입인증 단말(52)에 출입자(인증대상자)의 촬영 얼굴 사진(영상)을 푸시 방식으로 전달하여 출입인증 단말(52)의 화면에 촬영 얼굴 사진(영상)이 표시되도록 하는 한편, 관리 단말(54)에 출입자(인증대상자)의 출입 사실을 등록하고 이를 화면에 표시한다.Based on this, the
또한, 상기 인증 서버(20)는 관공서 인증 서버(30)에서 신분인증이 성공한 경우 신분증이 건강보험증인 경우 모바일건강보험증정보 예를 들어 건강보험증복사본 사진, 촬영 얼굴 사진(영상), 건강보험증 MRZ(machine readable zone) 데이터 등을 관리 서버(40) 예를 들어 병원이나 의원 등의 관리 서버에 전송한다.In addition, the
상기 관리 서버(50)는 이를 토대로 병원이나 의원의 카운터 데스크에 구비된 출입인증 단말(52)과 관리 단말(54)을 제어하되, 출입인증 단말(52)에 출입자(인증대상자)의 촬영 얼굴 사진(영상)을 푸시 방식으로 전달하여 출입인증 단말(52)의 화면에 촬영 얼굴 사진(영상)이 표시되도록 하는 한편, 관리 단말(54)에 출입자(인증대상자)의 진료 사실을 등록하고 이를 화면에 표시한다.Based on this, the
또한, 상기 인증 서버(20)는 신분증이 여권인 경우 여권복사본 사진, 촬영 얼굴 사진(영상), 여권 MRZ(machine readable zone) 데이터, 체류정보 등을 방역 서버(40)에 전송하고, 방역 서버(40)는 이를 통해 코로나19 시국에서 QR출입 인증을 대신하여 인증대상자가 출입할 수 있도록 한다.In addition, when the identification card is a passport, the
그리고 상기 인증 서버(20)는 신분증이 건강보험증인 경우 건강보험증복사본 사진, 촬영 얼굴 사진(영상), 건강보험증 MRZ(machine readable zone) 데이터 등을 방역 서버(40)에 전송하고, 방역 서버(40)는 이를 통해 코로나19 시국에서 QR출입 인증을 대신하여 인증대상자가 출입할 수 있도록 한다.In addition, the
이와 같이 모바일여권이나 모바일건강보험증 생성시에 안면인식을 통해 자신이 여권소유자나 건강보험증 인증을 스스로 수행함으로써 안면인식 데이터를 생성해서 서버에 등록한 후, 실물신분증을 소지하지 않고도 안면인식에 의해 신원을 인증함으로써 호텔이나 카지노 등에 편리하게 출입할 수 있고, 방문진료나 원격진료를 받을 수 있다.In this way, when a mobile passport or mobile health insurance card is created, the user performs passport holder or health insurance card authentication through facial recognition, generates facial recognition data, registers it in the server, and then confirms identity by facial recognition without having a physical ID. Authentication allows convenient access to hotels and casinos, and visits and remote medical treatment.
도 2는 본 발명의 일 실시예에 따른 안면인식을 이용한 신분인증방법을 나타내는 순서도이다.2 is a flowchart illustrating an identity authentication method using facial recognition according to an embodiment of the present invention.
도 2에 도시된 바와 같이 본 발명의 일 실시예에 따른 안면인식을 이용한 신분인증방법은, 먼저, 실물여권(건강보험증)을 가지고 모바일여권(건강보험증)을 생성할 때, 실물여권(건강보험증) 소지자 자신이 안면인식 서버(10)를 통해 안면인식을 하고 여권(건강보험증)소유자 인증을 스스로 수행하여 안면인식 데이터를 생성하고, 이를 관공서 인증 서버(30)에 등록한다(S202).As shown in FIG. 2, in the method of authentication using facial recognition according to an embodiment of the present invention, first, when a mobile passport (health insurance card) is generated with a real passport (health insurance card), the real passport (health insurance card) ) The holder himself performs facial recognition through the
이와 같은 상태에서 예를 들어 호텔이나 카지노 또는 병원이나 의원을 출입하고자 하는 인증대상자가 출입문(14)의 앞쪽에 위치한 경우 안면인식부(12)는 인증대상자의 안면(얼굴)을 촬영하여 안면인식 서버(10)에 전달하고, 상기 안면인식 서버(10)는 인증대상자의 얼굴 각 부위(눈썹, 눈, 코, 입 등)별 형상이나 위치 및 크기 등을 추출하고 분석하여 안면을 인식한다(S204),In such a state, for example, when an authentication target who wants to enter a hotel, casino, hospital, or clinic is located in front of the
상기 안면인식이 가능하여 안면인식이 성공한 경우(S206) 안면인식 데이터를 생성하고 촬영 얼굴(안면) 영상과 CI 키(KEY)를 인증 서버(20)에 전송한다(S208).When the face recognition is successful because the face recognition is possible (S206), face recognition data is generated and a photographed face (face) image and a CI key (KEY) are transmitted to the authentication server 20 (S208).
상기 안면인식이 불가능하여 안면인식에 성공하지 못한 경우 안면인식부(12)에 인식오류 메시지를 전송하고 적색으로 표시하여 인증대상자가 이를 확인할 수 있도록 한다.If the face recognition is not successful because the face recognition is not possible, a recognition error message is transmitted to the
상기 인증 서버(20)는 CI 키를 토대로 관공서 인증 서버(30)와 연계하여 기등록된 안면인식 데이터와 생성 안면인식 데이터를 비교하여 일치하면 신분(신원)을 인증(확인)한다(S210).The
이때 안면인식 데이터의 기등록일과, 기등록 안면인식 데이터와 생성 안면인식 데이터의 비교일 간의 기일차와 같은 시간 여건을 고려하여 일치 여부를 판단한다.At this time, whether the face recognition data is matched is determined in consideration of time conditions such as a difference between the date of registration of the face recognition data and the date of comparison between the previously registered face recognition data and the created face recognition data.
즉, 기일차가 작은(짧은) 경우에는 일치 여부를 정확하게(예를 들어 일치도 90%) 보고 판단하고, 기일차가 많은(긴) 경우에는 일치 여부를 느슨하게(예를 들어 일치도 80%) 보고 판단한다.That is, when the difference in time period is small (short), the match is accurately determined (for example, 90% coincidence), and when the time difference is large (long), the match is loosely determined (eg, 80% coincidence).
상기 인증 서버(20)는 신분인증(신원확인)이 성공한 경우(S212) 관리 서버(50)와 방역 서버(40)에 관공서 인증 서버(30)에 저장된 해당 모바일여권(건강보험증) 정보 예를 들어 여권(건강보험증)복사본 사진, 촬영 얼굴 사진(영상), 여권(건강보험증) MRZ(machine readable zone) 데이터, 신분증이 여권인 경우 체류정보 등을 전송한다(S214).The
상기 관리 서버(50) 즉, 호텔이나 카지노 또는 병원이나 의원의 관리 서버는 카운터 데스크에 구비된 출입인증 단말(52)과 관리 단말(54)을 제어하되, 출입인증 단말(52)에 출입자(인증대상자)의 촬영 얼굴 사진(영상)을 푸시 방식으로 전달하여 출입인증 단말(52)의 화면에 촬영 얼굴 사진(영상)이 표시되도록 하는 한편, 관리 단말(54)에 출입자(인증대상자)의 출입 사실이나 진료 사실을 등록하고 이를 화면에 표시한다(S216).The
또한, 방역 서버는 이를 통해 요즘과 같은 코로나19 시국에서 QR출입 인증을 대신한다(S218).In addition, through this, the quarantine server replaces QR access authentication in the current Corona 19 city (S218).
한편, 인증 서버(20)는 신분인증(신원확인)이 성공한 경우(S212) 이 사실을 안면인식 서버(10)에 통보하고, 상기 안면인식 서버(10)는 출입문(14)의 잠금을 해제하여 개방함으로써 인증대상자가 안면인식을 통해 간편하게 출입할 수 있도록 한다(S220).On the other hand, the
도 3은 도 2에 나타낸 모바일여권이나 모바일건강보험증 생성 단계의 상세 순서도이다.Figure 3 is a detailed flow chart of the mobile passport or mobile health insurance card generation step shown in Figure 2.
도 3에 도시된 바와 같이, 모바일여권(건강보험증) 생성을 위해서 먼저 여권 소유자는 자신의 스마트폰에 모바일여권(건강보험증) 생성앱을 다운로드받아 설치하고(S302), 정보제공과 카지노나 호텔 또는 병원이나 의원 등의 출입 인증에 동의한다(S304).As shown in FIG. 3, in order to generate a mobile passport (health insurance card), the passport holder first downloads and installs a mobile passport (health insurance card) generating app on his/her smartphone (S302), provides information, and provides information and casinos or hotels or Agree to the access authentication of the hospital or clinic (S304).
다음 모바일여권(건강보험증) 생성앱을 실행하여 카메라로 실물 여권이나, 실물 건강보험증과 자신의 얼굴을 인식하여 추출한 여권(건강보험증)정보를 인증 서버(20)와 관공서 인증 서버(30)를 통해 정상상태의 여권(건강보험증)인지를 확인하는 과정을 거쳐 여권을 인증한다(S306).By running the following mobile passport (health insurance card) generation app, the passport (health insurance card) information extracted by recognizing the real passport or real health insurance card and one's face with the camera is transmitted through the authentication server (20) and the government office authentication server (30). The passport is authenticated through a process of checking whether the passport (health insurance card) is in normal condition (S306).
여기서 실물 여권을 촬상하여 인식하는 과정은 먼저 여권번호, 국적, 이름, 생년월일, 성별, 여권만기일자, 시민권번호, 여권사진 중 적어도 하나 이상의 여권정보는 실물 여권에서 인식하여 추출되는데, 카메라를 이용한 실물 여권의 촬상 과정을 가진다.Here, in the process of photographing and recognizing the real passport, at least one passport information among passport number, nationality, name, date of birth, gender, passport expiration date, citizenship number, and passport photo is recognized and extracted from the real passport. Have a passport photo shoot process.
다음 촬영 실물 여권의 VIZ영역(visual inspection zone)에서 사진 이미지를 검출하여 암호화하고 사진 HASH값을 부여하여 이미지 정보를 추출한다.Next, the photo image is detected and encrypted in the visual inspection zone (VIZ) of the actual passport, and image information is extracted by assigning a photo HASH value.
다음 촬영 실물 여권의 MRZ영역(machine readable zone)에서 문자영역을 추출하고, 추출된 정보에서 여권소지자의 이름, 여권번호, 국적, 생년월일, 성별, 여권만기일자, 시민권번호의 문자정보를 추출한다.Next, the character area is extracted from the MRZ area (machine readable zone) of the real passport, and the character information of the passport holder's name, passport number, nationality, date of birth, gender, passport expiration date, and citizenship number is extracted from the extracted information.
다음 상기 추출된 문자정보를 촬상된 내용과 비교확인하여, 오류가 없을 시 추출된 이미지정보와 문자정보를 저장하는 과정을 포함하여 추출한다.Next, the extracted text information is compared with the captured content, and when there is no error, the extracted image information and text information are extracted, including a process of storing them.
이러한 과정을 통해 실물 여권상의 여권정보는 이미지정보와 문자정보의 형태로 추출되어 저장된다.Through this process, passport information on the real passport is extracted and stored in the form of image information and text information.
또한, 상기한 과정을 통해 실물 건강보험증상의 건강보험증정보와 사진 정보는 이미지정보와 문자정보의 형태로 추출되어 저장된다.In addition, through the above process, health insurance card information and photo information of actual health insurance symptoms are extracted and stored in the form of image information and text information.
다음 여권(건강보험증)소유자 인증을 위하여 마스크를 벗은 상태에서 여권(건강보험증) 소유자의 안면(얼굴)을 다양한 방향과 각도에서 촬영하고 전달하고, 안면인식 서버(10)는 촬영한 얼굴 각 부위(눈썹, 눈, 코, 입 등)별 형상이나 위치 및 크기 등을 추출하고 분석하여 안면을 인식한다(S308).Then, for authentication of the passport (health insurance card) owner, the face (face) of the passport (health insurance card) owner is photographed and transmitted from various directions and angles while the mask is off, and the
다음 안면인식 서버(10)는 안면인식 데이터를 생성하고(S310) CI 키와 얼굴 사진과 함께 메타 데이터를 관공서 인증 서버(30)에 등록한다(S312).Next, the
다음 관공서 인증 서버(30)는 안면인식 서버(10)의 얼굴 사진을 실물 여권의 얼굴 사진과 비교하여 여권 소유자를 인증하고(S314), 여권 소유자 인증이 성공한 경우 인증 서버(20)에 스마트폰 번호와 비밀번호 등을 등록한다(S316).Then the government
이때 관공서 인증 서버(30)는 안면인식 서버(10)의 얼굴 사진을 실물 건강보험증 발급시 제출받았던 얼굴 사진과 비교하여 실물인증 건강보험증 소유자를 인증하고(S314), 건강보험증 소유자 인증이 성공한 경우 인증 서버(20)에 스마트폰 번호와 비밀번호 등을 등록한다(S316).At this time, the public
이와 같이 여권 소유자를 인증하거나 실물인증 건강보험증 소유자를 인증한 후 상기 306단계에서 실물 여권(건강보험증)상의 여권(건강보험증)정보를 추출하여 저장된 이미지정보와 문자정보로 모바일(건강보험증)여권을 생성하여 관공서 인증 서버(30)에 저장한다(S318).In this way, after authenticating the owner of the passport or authenticating the owner of the physical certified health insurance card, the passport (health insurance card) information on the real passport (health insurance card) is extracted in step 306, and the mobile (health insurance card) passport is converted into stored image information and text information. It is created and stored in the public office authentication server 30 (S318).
이와 같이 모바일여권(건강보험증) 생성시에 만들어져 등록된 안면인식 데이터는 추후 카지노나 호텔의 출입 인증 또는 병원이나 의원의 진료 인증 또는 식당 등의 QR 코드 출입 인증시에 사용된다.In this way, the facial recognition data created and registered when creating a mobile passport (health insurance card) is later used for authentication of access to casinos or hotels, authentication of medical treatment at hospitals or clinics, or QR code access authentication of restaurants.
도 4는 본 발명의 다른 실시예에 따른 실물여권 스캔을 통한 여권인증방법을 나타내는 순서도로서, 여권 소유자에 대한 어떠한 정보도 저장하지 않는다.4 is a flow chart showing a passport authentication method through scanning a physical passport according to another embodiment of the present invention, and does not store any information about the passport holder.
먼저, 호텔이나 카지노의 관리 단말(54)에서 여권 스캐너를 이용해 여권을 스캔하여(S402) 여권 스캔 정보를 예를 들어 호텔이나 카지노의 관리 서버(50)에 전송하면서 해당 여권의 진위 여부를 요청한다(S404).First, the
상기 관리 서버(50)는 여권국가, 여권번호, 여권성명, 생년월일을 인증 서버(20)에 전송하면서 여권의 진위 여부를 요청한다(S406)The
상기 인증 서버(20)는 관공서 인증 서버(30)에 여권의 진위와 체류 정보를 요청한다(S408).The
상기 관공서 인증 서버(30)는 여권의 진위를 인증하고(S410), 인증에 성공한 경우에(S412) 여권 상태, VISA 종류, 체류기간 만료일을 여권 인증서버(20), 호텔이나 카지노의 관리 서버(50)를 통해 호텔이나 카지노의 관리 단말(54)에 전송하여 호텔이나 카지노의 관리자가 확인할 수 있도록 한다(S414,S416,S418).The government
또한, 상기 관공서 인증 서버(30)는 여권의 진위 인증에 실패한 경우에(S414) 인증 실패 이유를 여권 인증서버(20), 호텔이나 카지노의 관리 서버(50)를 통해 호텔이나 카지노의 관리 단말(54)에 전송하여 호텔이나 카지노의 관리자가 확인할 수 있도록 한다(S420,S422,S424).In addition, when the government
이상에서 본 발명에 대한 기술 사상을 첨부 도면과 함께 서술하였지만, 이는 본 발명의 바람직한 실시예를 예시적으로 설명한 것이지 본 발명을 한정하는 것은 아니다.Although the technical idea of the present invention has been described above with the accompanying drawings, this is an illustrative example of a preferred embodiment of the present invention, but does not limit the present invention.
또한, 이 기술 분야의 통상의 지식을 가진 자라면 누구나 본 발명의 기술 사상의 범주를 이탈하지 않는 범위 내에서 다양한 변형 및 모방이 가능함은 명백한 사실이다.In addition, it is obvious that anyone skilled in the art can make various modifications and imitations without departing from the scope of the technical idea of the present invention.
10: 안면인식 서버
12: 안면인식부
14: 출입문
20: 인증 서버
30: 관공서 인증 서버
40: 방역 서버
50: 관리 서버
52: 출입인증 단말
54: 관리 단말10: face recognition server 12: face recognition unit
14: door 20: authentication server
30: government office authentication server 40: quarantine server
50: management server 52: access authentication terminal
54 management terminal
Claims (11)
상기 인증 서버의 신분인증 요청에 의해 관공서 인증 서버와 연계하여 안면인식 데이터를 토대로 신분을 인증하고, 신분인증 결과를 안면인식 서버에 전달하는 인증 서버; 및
신분증 정보와 해당 신분증 소유자의 안면인식 데이터가 기등록되고, 상기 인증 서버와 연계하여 기등록 안면인식 데이터와 생성 안면등록 데이터를 비교하여 신원을 인증하는 관공서 인증 서버;
를 포함하는 안면인식을 이용한 신분인증시스템.A facial recognition server that analyzes the photographed face image of the subject of authentication to determine whether recognition is possible, and if the recognition is possible, generates facial recognition data and requests identity authentication from the authentication server;
An authentication server that authenticates an identity based on face recognition data in association with a public office authentication server in response to an identity authentication request from the authentication server, and transmits an identity authentication result to the face recognition server; and
a public office authentication server in which identification information and face recognition data of the owner of the identification card are pre-registered, and authenticate the identity by comparing the previously registered facial recognition data with generated facial registration data in conjunction with the authentication server;
An identity authentication system using facial recognition.
상기 신분증이 여권인 경우 신분인증 후 인증 서버로부터 여권복사본 사진, 촬영 얼굴 사진(영상), 여권 MRZ(machine readable zone) 데이터, 체류정보를 전송받는 호텔이나 카지노의 관리 서버가 더 구비되는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.According to claim 1,
If the ID is a passport, a management server of a hotel or casino that receives passport copy photos, photographed face photos (videos), passport MRZ (machine readable zone) data, and stay information from the authentication server after identity authentication is further provided. Identity authentication system using facial recognition.
상기 관리 서버는 출입인증 단말에 촬영 얼굴 사진(영상)을 푸시 방식으로 전달하여 출입인증 단말의 화면에 표시하며, 관리 단말에 인증대상자의 출입 사실을 등록하고 화면에 표시하는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.According to claim 2,
The management server transmits the photographed face photo (video) to the access authentication terminal in a push method and displays it on the screen of the access authentication terminal, and registers the fact of the person to be authenticated in the management terminal and displays it on the screen. Identity authentication system using
상기 관공서 인증 서버는 여권번호, 국적, 이름, 생년월일, 성별, 여권만기일자, 시민권번호(주민번호), 여권사진 중 적어도 하나 이상의 여권정보를 실물 여권에서 인식하여 추출하고, 이 정보를 암호화하고 재조합하여 이루어지는 모바일여권 정보를 저장하는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.According to claim 2,
The government office authentication server recognizes and extracts at least one passport information of passport number, nationality, name, date of birth, gender, passport expiration date, citizenship number (resident number), and passport photo from the real passport, encrypts and recombines this information. An identity authentication system using facial recognition, characterized in that for storing mobile passport information made by.
상기 신분인증 후 인증 서버로부터 신분증복사본 사진, 촬영 얼굴 사진(영상), 신분증 MRZ 데이터를 전송받아 QR코드 출입 인증을 대신하는 방역 서버가 더 구비되는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.According to claim 1,
After the identity authentication, a quarantine server is further provided to receive a photocopy of the ID card, a photographed face photo (video), and MRZ data of the ID card from the authentication server and replace the QR code access authentication. Identity authentication system using facial recognition.
상기 관공서 인증 서버는 안면인식 데이터의 기등록일과, 기등록 안면인식 데이터와 생성 안면인식 데이터의 비교일 간의 기일차와 같은 시간 여건을 고려하여 신원을 인증하는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.According to claim 1,
The public office authentication server authenticates the identity in consideration of time conditions such as a date of registration of facial recognition data and a date of comparison between previously registered facial recognition data and generated facial recognition data. system.
상기 안면인식 서버는 신분인증 요청시 CI 키를 인증 서버에 전송하는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.According to claim 1,
The facial recognition server is an identity authentication system using facial recognition, characterized in that for transmitting the CI key to the authentication server when requesting identity authentication.
상기 신분증이 실물 인증 건강보험증인 경우 신분인증 후 인증 서버로부터 건강보험증복사본 사진, 촬영 얼굴 사진(영상), 건강보험증 MRZ(machine readable zone) 데이터를 전송받는 병원이나 의원의 관리 서버가 더 구비되는 것을 특징으로 하는 안면인식을 이용한 신분인증시스템.According to claim 1,
If the identification card is a physical authentication health insurance card, a management server of a hospital or clinic that receives a copy of the health insurance card, a photograph of the face (video), and a machine readable zone (MRZ) data from the authentication server after identity authentication is further provided An identification system using face recognition.
(B) 상기 안면인식 서버에서 안면인식이 성공한 경우 안면인식 데이터를 생성하고 촬영 얼굴(안면) 영상과 CI 키(KEY)를 인증 서버에 전송하는 단계;
(C) 상기 인증 서버에서 관공서 인증 서버와 연계하여 기등록된 안면인식 데이터와 생성 안면인식 데이터를 비교하여 신분을 인증하는 단계;
(D) 상기 인증 서버에서 신분인증이 성공한 경우 관리 서버와 방역 서버에 신분증 정보와 촬영 얼굴 사진(영상)을 전송하는 단계;
(E) 상기 관리 서버는 출입인증 단말에 촬영 얼굴 사진(영상)을 푸시 방식으로 전달하여 출입인증 단말의 화면에 표시하며, 관리 단말에 인증대상자의 출입 사실이나 진료 사실을 등록하고 화면에 표시하는 단계; 및
(F) 상기 방역 서버에서 QR코드 출입 인증을 대신하는 단계;
를 포함하는 안면인식을 이용한 신분인증방법.(A) Recognizing the face by extracting and analyzing the shape, location, and size of each face part from the image taken by the face recognition server of the face (face) of the person to be authenticated;
(B) generating face recognition data and transmitting a photographed face (face) image and a CI key (KEY) to an authentication server when face recognition is successful in the face recognition server;
(C) authenticating an identity by comparing previously registered face recognition data with generated face recognition data in association with a public office authentication server in the authentication server;
(D) transmitting identification information and a photograph of a face taken (video) to a management server and a quarantine server when identification is successful in the authentication server;
(E) The management server transmits the photographed face photo (video) to the access authentication terminal in a push method and displays it on the screen of the access authentication terminal, and registers the fact of access or medical treatment of the person subject to authentication in the management terminal and displays it on the screen step; and
(F) replacing QR code access authentication in the quarantine server;
Identity authentication method using facial recognition comprising a.
상기 신분증이 여권인 경우 (A)단계 이전에 실물 여권을 토대로 모바일여권을 생성하되, 안면인식 서버에서 안면인식을 수행하고 이를 통해 여권 소유자 인증을 수행하여 안면인식 데이터를 생성하며, 이를 관공서 인증 서버에 등록하는 단계를 더 수행하는 것을 특징으로 하는 안면인식을 이용한 신분인증방법.According to claim 9,
If the identification card is a passport, create a mobile passport based on the real passport before step (A), perform facial recognition in the face recognition server, and perform passport owner authentication through this to generate face recognition data, which is then transferred to the government office authentication server Identity authentication method using facial recognition, characterized in that further performing the step of registering.
상기 (C)단계에서 안면인식 데이터의 기등록일과, 기등록 안면인식 데이터와 생성 안면인식 데이터의 비교일 간의 기일차와 같은 시간 여건을 고려하여 신원을 인증하는 것을 특징으로 하는 안면인식을 이용한 신분인증방법.According to claim 9,
In the step (C), the identity using facial recognition is characterized in that the identity is authenticated in consideration of time conditions such as the date of registration of the face recognition data and the date of comparison between the registered face recognition data and the generated face recognition data. authentication method.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20210153769 | 2021-11-10 | ||
KR1020210153769 | 2021-11-10 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20230068226A true KR20230068226A (en) | 2023-05-17 |
KR102639356B1 KR102639356B1 (en) | 2024-02-22 |
Family
ID=86547539
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210162899A KR102639356B1 (en) | 2021-11-10 | 2021-11-24 | Identity Authentication System and Method Using Face Recognition |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102639356B1 (en) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR200448213Y1 (en) * | 2009-04-24 | 2010-03-25 | 삼성에스디에스 주식회사 | Apparatus for automatic boarding control |
KR101100700B1 (en) * | 2011-06-03 | 2011-12-29 | 주식회사 테스나 | Exit form and entry into a country control system using biometric passport |
KR20180106399A (en) * | 2017-03-20 | 2018-10-01 | 한상택 | Apparatus and method of automatically entering immigration information |
KR20190127676A (en) | 2017-06-19 | 2019-11-13 | 알리바바 그룹 홀딩 리미티드 | Authentication method and blockchain-based authentication data processing method and device |
KR20200145334A (en) * | 2019-06-21 | 2020-12-30 | 주식회사 에어큐브 | Biometric information based security system using physical security and logical security and the operation method thereof |
-
2021
- 2021-11-24 KR KR1020210162899A patent/KR102639356B1/en active IP Right Grant
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR200448213Y1 (en) * | 2009-04-24 | 2010-03-25 | 삼성에스디에스 주식회사 | Apparatus for automatic boarding control |
KR101100700B1 (en) * | 2011-06-03 | 2011-12-29 | 주식회사 테스나 | Exit form and entry into a country control system using biometric passport |
KR20180106399A (en) * | 2017-03-20 | 2018-10-01 | 한상택 | Apparatus and method of automatically entering immigration information |
KR20190127676A (en) | 2017-06-19 | 2019-11-13 | 알리바바 그룹 홀딩 리미티드 | Authentication method and blockchain-based authentication data processing method and device |
KR20200145334A (en) * | 2019-06-21 | 2020-12-30 | 주식회사 에어큐브 | Biometric information based security system using physical security and logical security and the operation method thereof |
Also Published As
Publication number | Publication date |
---|---|
KR102639356B1 (en) | 2024-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10715520B2 (en) | Systems and methods for decentralized biometric enrollment | |
US11431704B2 (en) | Method of authentication, server and electronic identity device | |
US11228587B2 (en) | Method, system, device and software programme product for the remote authorization of a user of digital services | |
KR102510706B1 (en) | User authentication based on radio frequency identifiable identification documents and gesture request-response protocols | |
KR101703714B1 (en) | Method for certification using digital image, application system, and authentication system thereof | |
US20210089635A1 (en) | Biometric identity verification and protection software solution | |
US20050220326A1 (en) | Mobile identification system and method | |
CN110543957A (en) | Intelligent hotel check-in method and corresponding device | |
JP2009543176A (en) | Traceless biometric identification system and method | |
US20100174914A1 (en) | System and method for traceless biometric identification with user selection | |
US11716330B2 (en) | Mobile enrollment using a known biometric | |
JP2018124622A (en) | Admission reception terminal, admission reception method, admission reception program, and admission reception system | |
US20190266314A1 (en) | Identification system enrollment and validation and/or authentication | |
CN107038509A (en) | Self-service registration-management system | |
JP2006252110A (en) | Financial transaction system | |
KR20180057167A (en) | An Unmanned Financial Transactions System and A Financial Transactions Method Using The Same | |
Oruh | Three-factor authentication for automated teller machine system | |
KR101748136B1 (en) | Method for certification using digital image, application system, and authentication system thereof | |
CN110570550A (en) | unmanned hotel management authentication method and device | |
US8392721B2 (en) | Method and system to electronically identify and verify an individual presenting himself for such identification and verification | |
KR102639356B1 (en) | Identity Authentication System and Method Using Face Recognition | |
KR20180057170A (en) | A Method of Non-faced Opening A Financial Account Using Mobile Terminal And A System thereof | |
KR20200060577A (en) | Theater's Ticket Reservation and Ticket Ckeckless System by Using Face Certification and Method thereof | |
TWM512176U (en) | Improved personal access management device | |
RU2523743C2 (en) | Method of authenticating bank account holder during remote banking service |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |