KR102626892B1 - User real name checking method and apparatus - Google Patents

User real name checking method and apparatus Download PDF

Info

Publication number
KR102626892B1
KR102626892B1 KR1020210084156A KR20210084156A KR102626892B1 KR 102626892 B1 KR102626892 B1 KR 102626892B1 KR 1020210084156 A KR1020210084156 A KR 1020210084156A KR 20210084156 A KR20210084156 A KR 20210084156A KR 102626892 B1 KR102626892 B1 KR 102626892B1
Authority
KR
South Korea
Prior art keywords
information
customer
facial
face
verification
Prior art date
Application number
KR1020210084156A
Other languages
Korean (ko)
Other versions
KR20230001373A (en
Inventor
정승현
정도영
이지훈
Original Assignee
중소기업은행
주식회사 메사쿠어컴퍼니
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 중소기업은행, 주식회사 메사쿠어컴퍼니 filed Critical 중소기업은행
Priority to KR1020210084156A priority Critical patent/KR102626892B1/en
Publication of KR20230001373A publication Critical patent/KR20230001373A/en
Application granted granted Critical
Publication of KR102626892B1 publication Critical patent/KR102626892B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/405—Establishing or using transaction specific rules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Finance (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Collating Specific Patterns (AREA)

Abstract

실명확인방법 및 그 장치가 개시된다. 실명확인장치는 고객 얼굴을 촬영하고, 고객 얼굴 이미지를 기초로 안면정보데이터베이스를 검색하여 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객을 파악하고, 입력받은 검증정보가 적어도 하나 이상의 고객에 대한 정보인지 검증한다.A real name verification method and device are disclosed. The real name verification device photographs the customer's face, searches the facial information database based on the customer's face image, identifies at least one customer corresponding to the customer's face image, and verifies whether the received verification information is information about at least one customer. do.

Description

실명확인방법 및 그 장치{User real name checking method and apparatus}{User real name checking method and apparatus}

본 발명의 실시 예는 사용자 실명확인 방법 및 그 장치에 관한 것으로, 보다 상세하게는 사용자가 신분증을 지참하지 않아도 사용자 본인을 확인할 수 있는 방법 및 그 장치에 관한 것이다.Embodiments of the present invention relate to a method and device for verifying a user's real name, and more specifically, to a method and device for verifying the user's identity without the user carrying an identification card.

은행을 포함한 금융권의 금융 서비스를 위해서는 사용자 본인의 실명확인이 필요하다. 예를 들어, 은행 창구에서 통장개설이나 각종 금융상품 가입시 고객은 신분증을 제시하여 실명 확인을 받아야 한다. 금융 서비스에서 보안 실패는 막대한 재산적 피해를 유발할 수 있으므로, 보안 수준을 높일 필요가 있다. 예를 들어, 악의적인 제3자가 타인의 신분증을 도용하거나 제3자의 주민번호나 핀번호(PIN, Personal Identification Number)를 해킹하여 사용하는 경우를 방지할 수 있어야 한다. 보안 수준을 높이기 위하여 일반적으로 신분증 제시와 함께 고객으로부터 핀번호 등을 추가적으로 입력받을 수 있다. 그러나 이 경우 고객이 항상 신분증을 지참하여야 하는 불편함이 존재한다. For financial services in the financial sector, including banks, verification of the user's real name is required. For example, when opening a bank account or signing up for various financial products at a bank counter, customers must present their ID to verify their real name. In financial services, security failures can cause enormous property damage, so there is a need to increase the level of security. For example, it must be possible to prevent a malicious third party from stealing another person's ID or hacking and using a third party's resident registration number or PIN (Personal Identification Number). To increase the level of security, a pin number, etc. can generally be additionally entered from the customer along with the presentation of ID. However, in this case, there is an inconvenience in that the customer must always bring an ID card.

본 발명의 실시 예가 이루고자 하는 기술적 과제는, 신분증 없이 사용자 본인을 확인할 수 있는 실명확인방법 및 그 장치를 제공하는 데 있다.The technical problem to be achieved by the embodiments of the present invention is to provide a real name verification method and device that can verify the user's identity without an identification card.

상기의 기술적 과제를 달성하기 위한, 본 발명의 실시 예에 따른 실명확인방법의 일 예는, 실명확인장치가 수행하는 실명확인방법에 있어서, 고객 얼굴을 촬영하는 단계; 고객 얼굴 이미지를 기초로 안면정보데이터베이스를 검색하여 상기 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객을 파악하는 단계; 검증정보를 입력받는 단계; 및 상기 검증정보가 상기 적어도 하나 이상의 고객에 대한 정보인지 검증하는 단계;를 포함한다.An example of a real name verification method according to an embodiment of the present invention to achieve the above technical problem is a real name verification method performed by a real name verification device, including the steps of photographing a customer's face; Searching a facial information database based on the customer's face image to identify at least one customer corresponding to the customer's face image; Step of receiving verification information; and verifying whether the verification information is information about the at least one customer.

상기의 기술적 과제를 달성하기 위한, 본 발명의 실시 예에 따른 실명확인장치의 일 예는, 카메라를 통해 고객 얼굴을 촬영하는 촬영부; 고객 얼굴 이미지를 기초로 안면정보데이터베이스를 검색하여 상기 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객을 파악하는 고객검색부; 및 검증정보를 입력받고, 상기 검증정보가 상기 적어도 하나 이상의 고객에 대한 정보인지 검증하는 검증부;를 포함한다.In order to achieve the above technical problem, an example of a real name verification device according to an embodiment of the present invention includes a photographing unit that photographs a customer's face through a camera; A customer search unit that searches a facial information database based on the customer's face image and identifies at least one customer corresponding to the customer's face image; and a verification unit that receives verification information and verifies whether the verification information is information about the at least one customer.

본 발명의 실시 예에 따르면, 신분증을 지참하지 않아도 사용자 본인을 확인할 수 있다. 다른 실시 예로, 신분증을 이용하지 않으므로 카메라로 촬영된 고객 얼굴 이미지와 비교할 안면정보를 특정할 수 없어 안면정보데이베이스에 존재하는 전체 안면정보를 비교하여야 하는데 이때 안면인식에 소요되는 시간을 절약할 수 있다. According to an embodiment of the present invention, the user's identity can be confirmed without having to bring an identification card. In another embodiment, since an ID card is not used, facial information to be compared with the customer's face image captured by a camera cannot be specified, so the entire facial information existing in the facial information database must be compared. In this case, the time required for facial recognition can be saved. there is.

도 1은 본 발명의 실시 예에 따른 실명확인장치의 일 예를 도시한 도면,
도 2는 본 발명의 실시 예에 따른 실명확인장치(100)의 구현 예를 도시한 도면,
도 3은 본 발명의 실시 예에 따른 안면인증서버의 일 예의 구성을 도시한 도면,
도 4는 본 발명의 실시 예에 따른 고객 검증 방법의 일 예를 도시한 도면,
도 5 및 도 6은 본 발명의 실시 예에 따른 고객 검증 방법의 다른 일 예를 도시한 도면,
도 7은 본 발명의 실시 예에 따른 실명확인방법의 일 예를 도시한 흐름도, 그리고,
도 8은 본 발명의 실시 예에 따른 실명확인장치의 일 예의 구성을 도시한 도면이다.1 is a diagram showing an example of a real name verification device according to an embodiment of the present invention;
Figure 2 is a diagram showing an example of implementation of the real name verification device 100 according to an embodiment of the present invention;
Figure 3 is a diagram showing the configuration of an example of a face authentication server according to an embodiment of the present invention;
4 is a diagram illustrating an example of a customer verification method according to an embodiment of the present invention;
5 and 6 are diagrams showing another example of a customer verification method according to an embodiment of the present invention;
Figure 7 is a flowchart showing an example of a real name verification method according to an embodiment of the present invention, and
Figure 8 is a diagram showing the configuration of an example of a real name verification device according to an embodiment of the present invention.

이하에서, 첨부된 도면들을 참조하여 본 발명의 실시 예에 따른 실명확인방법 및 그 장치에 대해 상세히 살펴본다.Hereinafter, the real name verification method and device according to an embodiment of the present invention will be described in detail with reference to the attached drawings.

도 1은 본 발명의 실시 예에 따른 실명확인장치의 일 예를 도시한 도면이다.1 is a diagram illustrating an example of a real name verification device according to an embodiment of the present invention.

도 1을 참조하면, 실명확인장치(100)는 사용자 신분증 없이 카메라를 통해 촬영된 고객 얼굴을 기초로 안면정보데이테베이스(120)(이하, 안면정보DB)를 검색하여 고객을 파악하고, 파악된 고객에 대해 기 정의된 적어도 하나 이상의 검증 과정을 통해 고객 본인을 확인한다. 신분증 없이 고객을 식별하는 실명확인 방법에 대해서는 도 2 이하에서 구체적으로 살펴본다.Referring to FIG. 1, the real name verification device 100 searches the facial information database 120 (hereinafter referred to as facial information DB) based on the customer's face captured through a camera without a user ID to identify and identify the customer. The customer's identity is verified through at least one verification process predefined for the customer. The real name verification method for identifying customers without an ID card will be discussed in detail in Figure 2 below.

카메라(110)는 은행 등의 금융회사의 오프라인 지점(이하, 금융지점)에 위치할 수 있다. 스마트폰이나 테블릿 PC 등 다양한 스마트기기에 존재하는 카메라가 본 실시 예의 카메라(110)로 사용될 수 있다. 일반적인 비대면 실명확인의 경우 고객 단말(예를 들어, 스마트폰 등)로부터 인터넷망 등을 통해 얼굴 영상을 수신하나, 본 실시 예는 실명확인장치(110)와 유선 또는 무선으로 연결된 카메라(110)를 통해 금융지점을 방문한 고객(140)을 직접 촬영하는 방식으로 비대면 실명확인이 아닌 일종의 대면 실명확인 방식이다. The camera 110 may be located at an offline branch (hereinafter referred to as a financial branch) of a financial company such as a bank. Cameras present in various smart devices such as smartphones and tablet PCs can be used as the camera 110 in this embodiment. In the case of general non-face-to-face real name verification, a face image is received from a customer terminal (for example, a smartphone, etc.) through an Internet network, etc., but in this embodiment, a camera 110 connected to the real name verification device 110 by wire or wirelessly is used. It is a type of face-to-face real-name verification method rather than non-face-to-face real-name verification by directly photographing customers (140) who visited a financial branch through .

일 실시 예로, 카메라(110)는 금융지점에 복수 개 존재할 수 있다. 예를 들어, 금융지점에 복수 개의 상담창구가 존재하는 경우에 상담창구마다 카메라(110)가 존재할 수 있다. 다만, 본 실시 예는 설명의 편의를 위하여 하나의 금융지점에 하나의 카메라(110)가 존재하는 경우를 가정하여 설명한다.In one embodiment, a plurality of cameras 110 may exist in a financial branch. For example, when a plurality of consultation counters exist in a financial branch, a camera 110 may be present at each consultation counter. However, for convenience of explanation, this embodiment is described assuming that one camera 110 exists in one financial branch.

안면정보DB(120)는 고객의 안면정보를 포함하는 데이터베이스이다. 안면정보DB(120)에는 고객으로부터 미리 등록받은 얼굴 이미지에 대한 안면정보가 저장된다. 안면정보는 고객으로부터 등록받은 얼굴 이미지를 포함하거나 안면인식을 위해 얼굴 이미지로부터 미리 추출된 특징점들(즉, 안면템플릿)을 포함할 수 있다. 두 영상의 얼굴을 비교하여 동일여부를 파악하는 종래의 다양한 안면인식알고리즘이 본 실시 예에 적용될 수 있으며, 적용되는 안면인식알고리즘에 따라 안면정보DB(120)에 저장되는 안면정보의 내용과 종류는 다양하게 변형될 수 있다. The facial information DB 120 is a database containing facial information of customers. The facial information DB 120 stores facial information about facial images registered in advance by customers. Facial information may include a facial image registered by a customer or feature points (i.e., facial template) extracted in advance from a facial image for facial recognition. A variety of conventional facial recognition algorithms that compare the faces of two images to determine whether they are identical can be applied to this embodiment, and the content and type of facial information stored in the facial information DB 120 depending on the facial recognition algorithm applied It can be modified in various ways.

일 실시 예로, 안면정보DB(120)의 안면정보는 고객식별정보, 안면식별정보, 등록일시, 변경일시, 특징점(안면템플릿), 얼굴 이미지(또는 얼굴 이미지가 저장된 위치정보) 등을 포함할 수 있다. 고객식별정보는 고객을 구분하기 위한 고유정보이고, 안면식별정보는 해당 고객의 얼굴 이미지가 복수 개 등록된 경우 각각의 얼굴 이미지를 구분하기 위한 고유정보이다. 이 외에도, 안면정보DB(120)의 안면정보는 고객의 성별이나 나이, 안경착용여부 등 다양한 추가 정보를 포함할 수 있다. 본 실시 예의 안면정보DB(120)의 설명은 이해를 돕기 위한 하나의 예일 뿐 본 발명이 이에 한정되는 것은 아니다.As an example, the facial information in the facial information DB 120 may include customer identification information, facial identification information, registration date and time, change date and time, feature points (facial template), face image (or location information where the face image is stored), etc. there is. Customer identification information is unique information to distinguish customers, and facial identification information is unique information to distinguish each face image when multiple face images of the customer are registered. In addition, the facial information of the facial information DB 120 may include various additional information such as the customer's gender, age, and whether or not he or she is wearing glasses. The description of the facial information DB 120 of this embodiment is only an example to aid understanding, and the present invention is not limited thereto.

고객정보데이터베이스(130)(이하, 고객정보DB)는 고객에 대한 정보를 포함한다. 고객정보DB(130)는 고객식별정보와 맵핑하여 고객 검증에 사용할 여러 정보를 포함할 수 있다. 예를 들어, 고객 검증을 위하여 핀번호나 패턴이 사용되는 경우에 고객정보DB(130)에는 고객으로부터 미리 등록받은 핀번호 또는 패턴 등이 저장되어 있을 수 있다. 고객정보DB(130)에 저장되는 정보의 종류는 실시 예에 따라 다양할 수 있다. 다른 실시 예로, 안면정보DB(120)와 고객정보DB(130)은 하나의 데이터베이스로 구현될 수 있다. 다만 이하에서는 안면정보DB(120)와 고객정보DB(130)와 각각 존재하는 경우를 가정하여 설명한다.The customer information database 130 (hereinafter referred to as customer information DB) includes information about customers. The customer information DB 130 may include various information to be used for customer verification by mapping customer identification information. For example, when a pin number or pattern is used for customer verification, the customer information DB 130 may store a pin number or pattern previously registered by the customer. The type of information stored in the customer information DB 130 may vary depending on the embodiment. In another embodiment, the facial information DB 120 and the customer information DB 130 may be implemented as one database. However, the following description will be made assuming that the face information DB 120 and the customer information DB 130 each exist.

도 2는 본 발명의 실시 예에 따른 실명확인장치(100)의 구현 예를 도시한 도면이다.Figure 2 is a diagram showing an implementation example of the real name verification device 100 according to an embodiment of the present invention.

도 2를 참조하면, 실명확인장치(100)는 창구단말(200), 게이트웨이서버(210) 및 적어도 하나 이상의 안면인증서버(220)를 포함할 수 있다. 창구단말(200)과 안면인증서버(220)과 동일 네트워크에 존재하면, 이종망 사이를 연결하는 게이트웨이서버(210)는 생략될 수 있다. Referring to FIG. 2, the real name verification device 100 may include a counter terminal 200, a gateway server 210, and at least one face authentication server 220. If the counter terminal 200 and the face authentication server 220 exist on the same network, the gateway server 210 connecting the heterogeneous networks can be omitted.

창구단말(200)은 카메라(110)를 통해 촬영된 고객의 얼굴 이미지(이하, 고객 얼굴 이미지)를 안면인증서버(220)로 전송한다. 안면인증서버(220)는 고객 얼굴 이미지를 기초로 안면정보DB(120)를 검색하여 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객을 파악한다. The counter terminal 200 transmits the customer's face image (hereinafter referred to as customer face image) captured through the camera 110 to the face authentication server 220. The face authentication server 220 searches the facial information DB 120 based on the customer's face image and identifies at least one customer corresponding to the customer's face image.

예를 들어, 안면정보DB(120)의 안면정보가 고객으로부터 등록받은 얼굴 이미지(이하, 등록 이미지)를 포함하는 경우에, 안면인증서버(220)는 고객 얼굴 이미지와 안면정보DB(120)에 존재하는 복수의 등록 이미지를 각각 비교(즉, 1:N 비교)하여 유사도가 높은 등록 이미지의 고객을 파악할 수 있다. 다른 예로, 안면정보DB(120)의 안면정보가 등록 이미지에 대하여 미리 추출된 특징점 정보를 포함하는 경우에, 안면인증서버(220)는 고객 얼굴 이미지로부터 추출한 특징점과 안면정보DB(120)에 존재하는 복수의 특징점을 비교(1:N 비교)하여 유사도가 높은 특징점의 고객을 파악할 수 있다. 안면인증서버(220)는 안면정보DB(120)에서 파악된 고객의 정보(예를 들어, 고객식별정보 및/또는 등록 이미지 등)를 창구단말(220)에 전송할 수 있다. For example, when the facial information in the facial information DB 120 includes a facial image (hereinafter referred to as registered image) registered by the customer, the facial authentication server 220 stores the customer's facial image and the facial information DB 120. By comparing multiple existing registered images (i.e., 1:N comparison), customers whose registered images have a high degree of similarity can be identified. As another example, when the face information in the face information DB 120 includes feature point information extracted in advance for the registered image, the face authentication server 220 exists in the face information DB 120 with the feature points extracted from the customer's face image. By comparing multiple feature points (1:N comparison), you can identify customers whose feature points have a high degree of similarity. The face authentication server 220 may transmit customer information (eg, customer identification information and/or registered image, etc.) identified in the face information DB 120 to the counter terminal 220.

일 실시 예로, 안면인증서버(220)가 하나만 존재하는 경우에, 하나의 안면인증서버(220)는 안면정보DB(120)에 저장된 전체 안면정보와 고객 얼굴 이미지를 비교하는 과정을 수행할 수 있다. 안면정보DB(120)에 수십~수백만 이상의 고객 안면정보가 등록되어 있다면, 안면인증서버(220)는 수십~수백만 번 이상의 안면비교 과정을 수행하여야 하므로 상당 시간이 소요되는 단점이 존재한다. As an example, when there is only one face authentication server 220, one face authentication server 220 may perform a process of comparing the entire facial information stored in the facial information DB 120 with the customer's face image. . If dozens to millions of customer facial information is registered in the facial information DB 120, the face authentication server 220 must perform a face comparison process tens to millions of times, which has the disadvantage of taking a considerable amount of time.

이를 해결하는 방법으로, 안면인증서버(220)를 복수 개로 구현할 수 있다. 복수의 안면인증서버(220)는 안면정보DB(120)에 존재하는 복수의 안면정보를 각각 나누어 안면비교 과정을 분할 수행한다. 예를 들어, N개의 안면인증서버(220)가 존재하면, 안면정보DB(120)에 존재하는 복수의 안면정보를 N개의 그룹으로 분할하여 각각의 안면인증서버(220)에 할당할 수 있다. 복수의 안면인증서버(220)는 창구단말(200)로부터 수신한 고객 얼굴 이미지와 각 그룹의 안면정보를 비교하여 유사도가 높은 안면정보를 가진 고객을 각각 검색할 수 있다. As a way to solve this problem, a plurality of face authentication servers 220 can be implemented. The plurality of face authentication servers 220 divide the plurality of face information existing in the face information DB 120 and perform the face comparison process separately. For example, if there are N face authentication servers 220, a plurality of face information existing in the face information DB 120 can be divided into N groups and assigned to each face authentication server 220. The plurality of face authentication servers 220 can compare the customer face image received from the counter terminal 200 with the facial information of each group to each search for customers with facial information with a high degree of similarity.

N 개의 안면인증서버(220)가 각각의 안면정보 그룹에 대하여 안면비교 과정을 수행하므로, N 명의 고객이 검색될 수 있다. 이 경우 N개의 안면정보 검색결과(즉, 고객 정보)가 존재하므로, 고객 얼굴 이미지에 해당하는 고객이 안면정보DB(120)의 안면인식을 통해 파악된 복수의 고객 중 어느 고객인지 확인하는 추가적인 검증방법이 필요하다. 추가적인 검증방법에 대해서는 도 4 내지 도 6에서 다시 살펴본다.Since N face authentication servers 220 perform a face comparison process for each face information group, N customers can be searched. In this case, since there are N facial information search results (i.e., customer information), additional verification is performed to confirm which of the plurality of customers identified through facial recognition in the facial information DB 120 is the customer corresponding to the customer's face image. A method is needed. Additional verification methods are reviewed again in FIGS. 4 to 6.

본 실시 예는 실명확인장치(100)의 다양한 구현 방법 중 하느의 예일 뿐 본 발명이 반드시 이에 한정되는 것은 아니다. 예를 들어, 실명확인장치(100)는 하나의 서버로 구현되어 본 실시 예에서 설명한 각종 기능이나 동작을 서버 내에서 모두 수행할 수 있다. This embodiment is only one example of various implementation methods of the real name verification device 100, and the present invention is not necessarily limited thereto. For example, the real name verification device 100 is implemented as a single server and can perform all of the various functions or operations described in this embodiment within the server.

도 3은 본 발명의 실시 예에 따른 안면인증서버의 일 예의 구성을 도시한 도면이다.Figure 3 is a diagram showing the configuration of an example of a face authentication server according to an embodiment of the present invention.

도 3을 참조하면, 안면인증서버(300)는 안면인식을 위한 복수 개의 안면인증프로세스(320)를 포함할 수 있다. 실시 예에 따라 안명인증서버(300)는 서버 자원의 부하 등을 고려하여 안면인증프로세스(320)의 개수를 동적으로 변경할 수 있다.Referring to FIG. 3, the face authentication server 300 may include a plurality of face authentication processes 320 for face recognition. Depending on the embodiment, the Anmyeong authentication server 300 may dynamically change the number of face authentication processes 320 in consideration of the load of server resources, etc.

안면인증프로세스(320)는 카메라(110)로 촬영된 고객 얼굴 이미지와 비교할 안면정보를 안면정보DB(120)로부터 매번 읽어올 수 있으나 이 경우 안면정보DB(120)로부터 매번 데이터를 읽어 오는데 상당 시간이 소요되는 단점이 있한다. 이를 해결하기 위하여, 안면인증서버(300)는 안면정보DB(120)에 저장된 안면정보를 미리 읽어와 메모리(330)에 저장할 수 있다.The face authentication process 320 can read facial information to be compared with the customer's face image captured with the camera 110 from the facial information DB 120 each time, but in this case, it takes a considerable amount of time to read data from the facial information DB 120 each time. There is a downside to this. To solve this problem, the face authentication server 300 may read the face information stored in the face information DB 120 in advance and store it in the memory 330.

예를 들어, 실명확인장치(100)가 하나의 안면인증서버(300)로 구성되는 경우에, 안면인증서버(300)는 안면정보DB(120)에 존재하는 전체 안면정보를 안면인증서버(300)의 메모리(330)에 미리 저장할 수 있다. 다른 예로, 복수의 안면인증서버(도 2의 220)가 존재하는 경우에, 안면정보DB(120)에 존재하는 복수의 안면정보는 복수 개의 그룹으로 분할된 후 각각의 그룹이 각각의 안면인증서버(300)의 메모리(330)에 저장될 수 있다. 예를 들어, 안명정보DB(120)의 안면정보를 N개의 그룹으로 분할한 후 각각의 그룹에 속한 안면정보를 N개의 안면인증서버(300)의 메모리(330)에 저장할 수 있다. For example, when the real name verification device 100 is comprised of one face authentication server 300, the face authentication server 300 transmits the entire facial information existing in the face information DB 120 to the face authentication server 300. ) can be stored in advance in the memory 330. As another example, when a plurality of face authentication servers (220 in FIG. 2) exist, the plurality of face information existing in the face information DB 120 is divided into a plurality of groups, and then each group is sent to each face authentication server. It may be stored in memory 330 of 300. For example, after dividing the face information in the face information DB 120 into N groups, the face information belonging to each group can be stored in the memory 330 of the N face authentication server 300.

일 실시 예로, 안면정보DB(120)의 안면정보와 안면인증서버(300)의 메모리(330)에 저장된 안면정보는 실시간 동기화될 수 있다. 예를 들어, 안면인증서버(300)가 부팅될 때 안면인증서버(300)는 안면정보DB(120)로부터 자신에게 할당된 안면정보를 읽어 메모리(330)에 저장할 수 있다. 이후 안면정보DB(120)에 안면정보가 추가, 삭제 또는 변경될 때 추가, 삭제 또는 변경되는 안면정보를 안면인증서버(300)의 메모리(330)에 동시에 반영할 수 있다. 예를 들어, 안면정보DB(120)에 안면정보의 추가, 삭제 또는 변경을 관리하는 관리서버(또는, 안면정보DB 관리 프로세스)는 안면정보의 추가, 삭제 또는 변경이 발생하면 이를 동시에 안명인증서버(300)의 메모리(330)에 반영하여 안면정보DB(120)와 메모리(330)가 실시간 일치하도록 관리할 수 있다. 관리서버(또는, 안면정보DB 관리 프로세스)는 안면인증서버(300)의 일부로 구현(즉, 안면인증서버에 안면정보DB 관리 프로세스가 존재)되거나 별도의 서버로 구현될 수 있다.In one embodiment, the facial information in the facial information DB 120 and the facial information stored in the memory 330 of the facial authentication server 300 may be synchronized in real time. For example, when the face authentication server 300 is booted, the face authentication server 300 may read the facial information assigned to it from the facial information DB 120 and store it in the memory 330. Thereafter, when facial information is added, deleted, or changed in the facial information DB 120, the added, deleted, or changed facial information can be simultaneously reflected in the memory 330 of the facial authentication server 300. For example, the management server (or facial information DB management process) that manages the addition, deletion, or change of facial information in the face information DB 120 simultaneously detects addition, deletion, or change of facial information to the face authentication server. By reflecting this in the memory 330 of 300, the facial information DB 120 and the memory 330 can be managed to match in real time. The management server (or face information DB management process) may be implemented as part of the face authentication server 300 (i.e., the face information DB management process exists in the face authentication server) or may be implemented as a separate server.

다른 실시 예로, 복수 개의 안면인증서버(도 2의 220)가 존재하는 경우에, 관리서버는 복수 개의 안면인증서버(300)에 추가, 삭제 또는 변경되는 안면정보를 모두 제공하고, 각각의 안면인증서버(300)는 해당 안면정보가 자신의 메모리(330)에 저장된 안면정보인지 파악하여 이를 메모리(330)에 반영할지 결정할 수 있다. 또 다른 예로, 관리서버는 추가, 삭제 또는 변경되는 안면정보가 어느 안면인증서버(도 2의 220)에 저장되어 있는 정보인지 파악하여 해당 안면인증서버(300)에만 추가, 삭제 또는 변경되는 안면정보를 제공할 수도 있다. 이 외에도, 안면정보DB(120)와 안면인증서버(300)의 메모리(330)의 안면정보를 동기화하는 종래의 다양한 방법이 본 실시 예에 적용될 수 있다.In another embodiment, when there are a plurality of face authentication servers (220 in FIG. 2), the management server provides all face information that is added, deleted, or changed to the plurality of face authentication servers 300, and performs face authentication for each face authentication server. The server 300 can determine whether the corresponding facial information is facial information stored in its memory 330 and decide whether to reflect it in the memory 330. As another example, the management server determines which face authentication server (220 in FIG. 2) stores the facial information to be added, deleted, or changed, and adds, deletes, or changes the facial information only to the facial authentication server (300). may also be provided. In addition, various conventional methods of synchronizing the facial information of the facial information DB 120 and the memory 330 of the facial authentication server 300 can be applied to this embodiment.

또 다른 실시 예로, 안면인증서버(300)의 메모리(330)는 복수 개의 안면인증프로세스(320)에 대응하는 복수 개의 메모리 영역으로 구분될 수 있다. 예를 들어, N개의 안면인증프로세스(320)가 존재하면, 안면인증서버(300)는 안면정보가 저장된 메모리(330)의 영역을 복수 개의 메모리영역으로 구분하고, 각각의 메모리영역을 N개의 안면인증프로세스(320)에 할당할 수 있다. 즉, 메모리(330)에 저장된 안면정보는 복수 개의 세부 그룹으로 분할되어 복수의 안면인증프로세서에 각각 할당될 수 있다.As another example, the memory 330 of the face authentication server 300 may be divided into a plurality of memory areas corresponding to a plurality of face authentication processes 320. For example, if there are N face authentication processes 320, the face authentication server 300 divides the area of the memory 330 in which face information is stored into a plurality of memory areas, and each memory area is divided into N faces. It can be assigned to the authentication process (320). That is, the facial information stored in the memory 330 may be divided into a plurality of detailed groups and each assigned to a plurality of facial authentication processors.

안면인증프로세스(320)의 개수가 동적으로 변경되면, 안면인증서버(300)는 그 개수에 따라 메모리영역의 개수를 동적으로 변경할 수 있다. 예를 들어, 메모리 주소0~99999가 안면정보 저장을 위한 영역인 경우에, 안면인증프로세스(320)가 3개 이면 메모리 주소 구간을 3개의 메모리영역으로 구분하고, 안명인증프로세스(320)가 5개로 변경되면, 그 메모리 주소 구간을 5개의 메모리영역으로 구분할 수 있다.When the number of face authentication processes 320 changes dynamically, the face authentication server 300 can dynamically change the number of memory areas according to the number. For example, in the case where memory addresses 0 to 99999 are areas for storing face information, if there are three face authentication processes (320), the memory address section is divided into three memory areas, and the face authentication process (320) is divided into five memory areas. When changed to , the memory address section can be divided into 5 memory areas.

분배프로세스(310)는 복수 개의 안면인증프로세스(320)에 창구단말(200)로부터 수신한 고객 얼굴 이미지를 제공하고, 각 안면인증프로세스(320)가 검색하여야 할 메모리영역에 대한 정보를 제공할 수 있다. 예를 들어, 0~99999의 메모리 주소에 안면정보가 저장되어 있고, 안면인증프로세스(320)가 3개이면, 분배프로세스(310)는 제1 안면인증프로세스에게 0~33333의 메모리 영역에 저장된 안면정보와 고객 얼굴 이미지의 비교를 요청하고, 제2 안면인증프로세스와 제3 안면인증프로세스에게는 각각 33334~66666의 메모리 영역과, 666667~99999의 메모리 영역의 안면정보와 고객 얼굴 이미지의 비교를 요청할 수 있다. 분배프로세스(310)가 각 안면인증프로세스(320)에게 안면비교를 위해 할당하는 메모리 영역의 구간은 균등하게 분할되거나 부하에 따라 차등하게 분할되는 등 실시 예에 따라 분할 구간은 다양하게 변형될 수 있다.The distribution process 310 may provide the customer face image received from the counter terminal 200 to a plurality of face authentication processes 320 and provide information about the memory area that each face authentication process 320 should search. there is. For example, if face information is stored in a memory address of 0 to 99999 and there are three face authentication processes 320, the distribution process 310 sends the face information stored in the memory area of 0 to 33333 to the first face authentication process. You can request a comparison between the information and the customer's face image, and request a comparison between the customer's face image and the facial information in the memory area 33334 to 66666 and the memory area 666667 to 99999 to the second and third face authentication processes, respectively. there is. The section of the memory area that the distribution process 310 allocates to each face authentication process 320 for face comparison may be divided equally or divided differentially according to the load, and the division section may be variously modified depending on the embodiment. .

안면인증프로세스(320)는 고객 얼굴 이미지와 안면정보의 유사도가 기 정의된 임계값 이상인 경우에 해당 안면정보를 결과값으로 출력할 수 있다. 복수 개의 안면인증프로세스(320)가 존재하는 경우에, 몇몇 안면인증프로세스는 유사도가 임계값 이상인 안면정보를 발견하지 못하여 아무런 결과값을 출력하지 않을 수도 있다. The face authentication process 320 may output the facial information as a result when the similarity between the customer's face image and the facial information is greater than or equal to a predefined threshold. When a plurality of face authentication processes 320 exist, some face authentication processes may not output any result because they cannot find facial information whose similarity is greater than the threshold.

다른 예로, 복수 개의 안면인증서버가 존재하는 경우에 각각의 안면인증서버는 고객 얼굴 이미지와 안면정보의 유사도가 임계값 이상인 경우에 그 결과값을 출력할 수 있다, 이 경우 몇몇 안면인증서버는 유사도가 임계값 이상인 경우를 발견하지 못하여 아무런 결과값을 출력하지 않을 수 있다. 또는 어떤 안면인증서버는 유사도가 임계값 이상인 복수 개의 안면정보를 발견하여 복수 개의 안면정보 결과값을 출력할 수도 있다.As another example, when a plurality of face authentication servers exist, each face authentication server can output the result when the similarity between the customer's face image and facial information is greater than a threshold. In this case, some face authentication servers may Since no case is found where is greater than the threshold, no result may be output. Alternatively, a face authentication server may discover a plurality of facial information whose similarity is greater than a threshold value and output a plurality of facial information results.

도 4는 본 발명의 실시 예에 따른 고객 검증 방법의 일 예를 도시한 도면이다.Figure 4 is a diagram illustrating an example of a customer verification method according to an embodiment of the present invention.

도 4를 참조하면, 실명확인장치(100)는 카메라(110)를 통해 촬영된 고객 얼굴 이미지를 기초로 안면정보DB(120)를 검색하여 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객(410)을 파악한다. 도 2에서 살핀 안면인증서버(220)의 개수 또는 유사도 임계값 등에 따라 복수의 고객이 검색될 수 있다. 복수의 고객이 검색된 경우의 검증방법에 대해서는 도 5에서 살펴보고, 본 실시 예는 하나의 고객이 검색된 경우에 대해 설명한다.Referring to FIG. 4, the real name verification device 100 searches the facial information DB 120 based on the customer face image captured through the camera 110 and selects at least one customer 410 corresponding to the customer face image. Understand. A plurality of customers may be searched according to the number of face authentication servers 220 or the similarity threshold value examined in FIG. 2. The verification method when multiple customers are searched is discussed in FIG. 5, and this embodiment explains the case when a single customer is searched.

실명확인장치(100)는 검증정보(420)를 입력받는다. 검증정보(420)는 고객이 직접 입력하는 정보이거나 미리 정의된 방법에 따라 자동으로 파악된 정보(예를 들어, 고객 촬영 위치 정보 등)일 수 있다. 검증정보(420)와 비교할 고객에 대한 정보는 안면정보DB(120)를 통해 파악된 고객(410)에 대한 정보이다. 일반적으로 고객 실명확인을 위해서는 고객이 제시한 신분증 등을 기초로 고객정보DB(130)에서 해당 고객이 기 등록한 생체정보나 핀번호 등을 검색한 후 고객이 창구에서 입력하는 생체정보나 핀 번호와 서로 일치하는지 파악하므로, 신분증 등이 필요하다. 그러나 본 실시 예는 사용자 신분증 없이 본인 실명확인이 가능하도록 안면정보DB(120)를 검색하여 파악한 고객(410)에 대한 정보를 고객정보DB(130)에서 파악하여 검증정보(420)와 비교한다. 검증정보(420)와 비교되는 고객에 대한 정보는 고객정보DB(130)에 기 등록된 정보이거나, 고객정보DB(130)에 기 등록된 정보를 기초로 파악된 정보(예를 들어, 위치정보 등)일 수 있다. 실명확인장치(100)는 안면정보DB(120)를 통해 파악된 고객(410)에 대한 정보와 입력받은 검증정보(420)가 일치하면 본인 실명확인이 성공하였다고 판단할 수 있다. The real name verification device 100 receives verification information 420 as input. The verification information 420 may be information directly entered by the customer or information automatically identified according to a predefined method (for example, customer shooting location information, etc.). The information about the customer to be compared with the verification information 420 is information about the customer 410 identified through the facial information DB 120. In general, to verify a customer's real name, the biometric information or PIN number that the customer has already registered is searched in the customer information DB (130) based on the ID card presented by the customer, and then the biometric information or PIN number that the customer enters at the counter is searched. We will check if they match each other, so you will need an ID card. However, in this embodiment, information about the customer 410 identified by searching the facial information DB 120 is identified from the customer information DB 130 and compared with the verification information 420 so that the user's real name can be confirmed without a user ID. The information about the customer compared to the verification information 420 is information pre-registered in the customer information DB 130, or information identified based on information pre-registered in the customer information DB 130 (e.g., location information etc.). If the information about the customer 410 identified through the facial information DB 120 matches the input verification information 420, the real name verification device 100 can determine that the real name verification has been successful.

검증정보(420)는 검증 방법에 따라 다양할 수 있다. 예를 들어, 검증정보(420)는 카메라(110)의 위치 정보(즉, 금융지점 위치 정보), 패턴, 핀번호, 질의 응답값, ARS 입력정보, 모바일앱을 통한 입력정보(예를 들어, 인증번호나 QR 코드 등), 카드정보, 생체정보 중 적어도 하나 이상을 포함할 수 있다. 이 외에도 검증정보(420)는 실시 예에 따른 다양하게 정의될 수 있다.Verification information 420 may vary depending on the verification method. For example, the verification information 420 includes location information of the camera 110 (i.e., financial branch location information), pattern, pin number, query response value, ARS input information, and input information through a mobile app (e.g., It may include at least one of (authentication number, QR code, etc.), card information, and biometric information. In addition, the verification information 420 may be defined in various ways depending on the embodiment.

일 실시 예로, 검증정보(420)가 고객 얼굴 이미지를 촬영한 위치 정보이면, 실명확인장치(100)는 검증정보(420)와 비교할 고객에 대한 정보로 고객 단말의 위치정보를 파악한다. 고객 얼굴 이미지를 촬영한 위치 정보는 실명확인장치(100)에 미리 등록되어 있을 수 있다. 또는 GPS 기능을 가진 카메라의 경우, 카메라의 위치를 정보를 파악하여 검증정보(420)로 사용할 수 있다. In one embodiment, if the verification information 420 is location information where the customer's face image was taken, the real name verification device 100 determines the location information of the customer terminal as information about the customer to be compared with the verification information 420. Location information where the customer's face image was taken may be pre-registered in the real name verification device 100. Alternatively, in the case of a camera with a GPS function, the location of the camera can be obtained and used as verification information 420.

예를 들어, 실명확인장치(100)는 안면인식을 통해 파악된 고객(410)의 전화번호 등을 고객정보DB(130)에서 파악한 후 해당 고객의 단말 위치를 통신사 서버 등을 통해 파악할 수 있다. 고객 단말의 위치를 통신사 서버를 통해 파악하는 종래의 다양한 방법이 본 실시 예에 적용될 수 있다. 예를 들어, 실명확인장치(100)는 고객의 전화번호를 포함하는 고객위치요청을 위치정보를 제공하는 외부서버에 요청하고, 외부서버로부터 고객위치정보를 수신할 수 있다. 또는 실명확인장치(100)는 검증정보의 고객 촬영 위치 정보와 고객 단말의 전화번호를 함께 외부서버에 제공한 후 두 위치가 일정 범위 내에 존재하는지 여부에 대한 결과만을 수신할 수도 있다. 실명확인장치(100)는 고객 얼굴 이미지를 촬영한 위치정보와 고객 단말의 위치정보가 일정 범위 내에 존재하면 본인 실명확인 성공으로 판단할 수 있다. 검증정보(420)로 카메라의 위치정보를 이용하는 경우 고객은 신분증이나 별도의 입력없이 금융지점의 창구에서 얼굴 인식만으로 본인 실명 확인을 받을 수 있다. For example, the real name verification device 100 can identify the phone number of the customer 410 identified through facial recognition in the customer information DB 130 and then determine the location of the customer's terminal through the telecommunication company server. Various conventional methods of determining the location of a customer terminal through a telecommunication company server can be applied to this embodiment. For example, the real name verification device 100 may request a customer location request including the customer's phone number to an external server that provides location information, and receive customer location information from the external server. Alternatively, the real name verification device 100 may provide verification information of the customer's shooting location and the phone number of the customer's terminal together to an external server and then only receive a result of whether the two locations exist within a certain range. The real name verification device 100 can determine that the real name verification is successful if the location information where the customer's face image was taken and the location information of the customer terminal are within a certain range. If the camera's location information is used as verification information (420), the customer can have his or her real name verified through facial recognition at the financial branch counter without any ID or separate input.

다른 실시 예로, 검증정보(420)가 핀번호, 패턴, 또는 고객이 사전에 등록한 질의에 대한 응답값인 경우에, 실명확인장치(100)는 상담창구에 위치한 단말기를 통해 고객으로부터 핀번호, 패턴 또는 질의에 대한 응답값을 입력받는다. 실명확인장치(100)는 안면인식을 통해 파악된 고객(410)의 핀번호, 패턴, 응답값 등을 이 고객정보DB(130)에 검색한 후 이를 검증정보와 비교하여 일치하는지 파악할 수 있다. In another embodiment, when the verification information 420 is a pin number, a pattern, or a response value to a query registered in advance by the customer, the real name verification device 100 receives the pin number, pattern, or pattern from the customer through a terminal located at the consultation window. Or, the response value to the query is input. The real name verification device 100 can search the customer information DB 130 for the pin number, pattern, response value, etc. of the customer 410 identified through facial recognition and compare it with the verification information to determine whether it matches.

또 다른 실시 예로, 검증정보(420)는 ARS 인증정보, 모바일앱을 통한 입력정보(예를 들어, QR 코드 촬영 이미지, 특정 문자나 숫자, 특정 전파/음파 등), 창구 단말기나 모바일앱을 통해 입력받은 카드정보(신용카드번호, 유효기간, CVC 등), 또는 창구에 위치한 마그네틱 리더기를 통해 입력받은 카드정보 등일 수 있다. 실명확인장치(100)는 안면인식을 통해 파악된 고객(410)의 전화번호 등을 고객정보DB(130)에서 파악한 후 파악된 고객 전화번호로 전화를 걸어 ARS 인증을 수행하거나, 고객 단말로부터 QR 코드를 수신하여 인증하거나, 고객의 카드정보와 검증정보를 비교하여 일치하는지 검증할 수 있다.In another embodiment, the verification information 420 is ARS authentication information, input information through a mobile app (e.g., QR code capture image, specific letters or numbers, specific radio waves/sound waves, etc.), a counter terminal or mobile app. This may be card information entered (credit card number, expiration date, CVC, etc.) or card information entered through a magnetic reader located at the counter. The real name verification device 100 determines the phone number of the customer 410 identified through facial recognition in the customer information DB 130 and then calls the identified customer phone number to perform ARS authentication or perform QR authentication from the customer terminal. You can receive and authenticate the code, or compare the customer's card information and verification information to verify that they match.

또 다른 실시 예로, 검증정보(420)는 생체정보일 수 있다. 실명확인장치(100)는 고객정보DB(130)에서 안면인식을 통해 파악된 고객(410)이 이전에 등록한 생체정보를 검색한 후 이를 검증정보(420)와 비교하여 일치하는지 파악한다. In another embodiment, the verification information 420 may be biometric information. The real name verification device 100 searches the biometric information previously registered by the customer 410 identified through facial recognition in the customer information DB 130 and compares it with the verification information 420 to determine whether it matches.

도 5 및 도 6은 본 발명의 실시 예에 따른 고객 검증 방법의 다른 일 예를 도시한 도면이다.5 and 6 are diagrams showing another example of a customer verification method according to an embodiment of the present invention.

도 5 및 도 6을 참조하면, 안면인식을 통해 복수의 고객이 특정된 경우의 검증방법이다. 예를 들어, 도 2의 복수의 안면인증서버(220)를 통해 고객 얼굴 이미지와 유사도가 높은 복수의 고객이 검색된 경우에, 실명확인장치(100)는 복수의 고객에 대한 고객정보(500)를 파악한 후 이를 검증정보(510)와 비교하여 일치하는 고객이 존재하는지 파악한다. 검증정보(510)와 고객2의 정보(502)가 일치하면, 실명확인장치(100)는 고객2에 대한 본인 인증이 완료되었다고 판단할 수 있다.Referring to Figures 5 and 6, this is a verification method when multiple customers are identified through facial recognition. For example, when a plurality of customers with high similarity to the customer's face image are searched through the plurality of face authentication servers 220 of FIG. 2, the real name verification device 100 provides customer information 500 for the plurality of customers. After identifying this, it is compared with the verification information 510 to determine whether a matching customer exists. If the verification information 510 and customer 2's information 502 match, the real name verification device 100 may determine that identity verification for customer 2 has been completed.

예를 들어, 검증정보가 고객 얼굴의 촬영 위치정보(610)(예를 들어, 카메라 위치 정보 등)인 경우에, 실명확인장치(100)는 도 6과 같이 안면인식을 통해 특정된 복수의 고객에 대한 단말 위치(600)를 파악한다. 그리고 실명확인장치(100)는 고객 얼굴 촬영 위치정보(610)와 일정 범위 내에 고객 단말의 위치정보(600)가 존재하는지 파악할 수 있다. 고객2의 사용자 단말 위치정보와 검증정보의 위치정보과 일치(즉, 일정 범위 내)하면, 실명확인장치는 고객2에 대한 본인 인증이 완료되었다고 판단할 수 있다.For example, when the verification information is the customer's face capture location information 610 (e.g., camera location information, etc.), the real name verification device 100 collects a plurality of customers identified through facial recognition as shown in FIG. 6. Determine the terminal location 600. In addition, the real name verification device 100 can determine whether the customer face capture location information 610 and the customer terminal location information 600 exist within a certain range. If customer 2's user terminal location information matches the location information of the verification information (i.e., within a certain range), the real name verification device can determine that identity verification for customer 2 has been completed.

이 외에도, 도 4에서 살핀 바와 같이 검증정보(510)는 패턴, 핀번호, 질의 응답값, ARS 입력정보, 비대면모바일앱을 통한 입력정보, 카드정보, 생체정보 중 적어도 하나 이상일 수 있다. 이 경우 검증정보(510)가 복수의 고객 중 어느 하나에 대한 정보인지 검증할 수 있다. 도 4의 예가 고객에 관한 정보와 검증정보의 1:1 비교라면, 도 5 및 도 6은 N:1의 비교과정이다. In addition, as seen in FIG. 4, the verification information 510 may be at least one of a pattern, a pin number, a query response value, ARS input information, information input through a non-face-to-face mobile app, card information, and biometric information. In this case, it can be verified whether the verification information 510 is information about one of a plurality of customers. If the example in Figure 4 is a 1:1 comparison of customer information and verification information, Figures 5 and 6 show an N:1 comparison process.

도 7은 본 발명의 실시 예에 따른 실명확인방법의 일 예를 도시한 흐름도이다.Figure 7 is a flowchart showing an example of a real name verification method according to an embodiment of the present invention.

도 7을 참조하면, 실명확인장치(100)는 카메라(110)를 통해 고객 얼굴을 촬영한다(S700). 실명확인장치(100)는 고객 얼굴 이미지를 기초로 안면정보DB(120)를 검색하여 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객을 파악한다(S710). 일 실시 예로, 실명확인장치(100)는 도 2와 같이 안면정보DB(120)에 존재하는 복수의 안면정보를 복수 개의 그룹으로 분할하고, 복수의 안면인증서버(220)를 통해 복수 개의 그룹에서 각각 고객 얼굴 이미지와 유사도가 높은 고객을 파악할 수 있다.Referring to FIG. 7, the real name verification device 100 photographs the customer's face through the camera 110 (S700). The real name verification device 100 searches the facial information DB 120 based on the customer's face image and identifies at least one customer corresponding to the customer's face image (S710). In one embodiment, the real name verification device 100 divides a plurality of face information existing in the face information DB 120 into a plurality of groups as shown in FIG. 2, and collects information from the plurality of groups through a plurality of face authentication servers 220. Customers with a high degree of similarity to each customer's face image can be identified.

실명확인장치(100)는 검증정보를 입력받고, 검증정보가 안면인식을 통해 특정된 고객에 대한 정보인지 검증한다(S720). 일 실시 예로, 복수의 안면인증서버(220)를 통해 복수의 고객이 특정된 경우에, 실명확인장치(100)는 검증정보가 복수 개의 그룹에서 각각 파악된 복수의 고객 중 어느 하나의 고객에 대한 정보인지 검증한다. 검증정보를 이용하여 고객을 검증하는 다양한 방법의 예가 도 4 내지 도 6에 도시되어 있다.The real name verification device 100 receives verification information and verifies whether the verification information is information about a customer specified through facial recognition (S720). As an example, when a plurality of customers are specified through a plurality of face authentication servers 220, the real name verification device 100 provides verification information for one of the plurality of customers identified from each of the plurality of groups. Verify whether it is information. Examples of various methods for verifying a customer using verification information are shown in FIGS. 4 to 6.

다른 실시 예로, 실명확인장치(100)는 고객 단말로부터 얼굴을 촬영한 이미지를 수신하면, 그 이미지에서 얼굴 영역을 검출하고, 얼굴 영역에서 특징점을 추출한 후 특징점을 포함하는 안면정보를 안면정보DB에 저장하는 고객정보 등록과정을 수행할 수 있다.In another embodiment, when the real name verification device 100 receives an image of a face from a customer terminal, it detects a face area in the image, extracts feature points from the face area, and then stores facial information including the feature points in the face information DB. You can perform the registration process to save customer information.

도 8은 본 발명의 실시 예에 따른 실명확인장치의 일 예의 구성을 도시한 도면이다.Figure 8 is a diagram showing the configuration of an example of a real name verification device according to an embodiment of the present invention.

도 8을 참조하면, 실명확인장치(100)는 등록부(800), 촬영부(810), 고객검색부(820) 및 검증부(830)를 포함한다. 실명확인장치(100)는 메모리 및 프로세서를 포함하는 컴퓨팅 장치로 구현되고, 각 구성은 소프트웨어 구현되어 메모리에 탑재된 후 프로세서에 의해 수행될 수 있다.Referring to FIG. 8, the real name verification device 100 includes a registration unit 800, a photographing unit 810, a customer search unit 820, and a verification unit 830. The real name verification device 100 is implemented as a computing device including a memory and a processor, and each component may be implemented in software, loaded on the memory, and then performed by the processor.

등록부(800)는 본 실시 예의 실명확인 서비스를 위하여 고객으로부터 얼굴 이미지를 수신하여 안면정보DB(130)에 등록한다. The registration unit 800 receives a facial image from a customer and registers it in the facial information DB 130 for the real name verification service of this embodiment.

촬영부(810)는 금융지점에 방문한 고객을 카메라(110)를 통해 촬영하여 고객 얼굴 이미지를 획득한다. The photographing unit 810 acquires an image of the customer's face by photographing the customer visiting the financial branch using the camera 110.

고객검색부(820)는 고객 얼굴 이미지를 기초로 안면정보DB(120)를 검색하여 적어도 하나 이상의 고객을 특정한다. 예를 들어, 고객검색부(820)는 도 2에서 살핀 적어도 하나 이상의 안면인증서버(820)를 통해 촬영부(810)에 의해 촬영된 고객 얼굴 이미지와 유사도가 높은 적어도 하나 이상의 고객을 특정할 수 있다. The customer search unit 820 searches the facial information DB 120 based on the customer's face image and specifies at least one customer. For example, the customer search unit 820 can specify at least one customer with a high degree of similarity to the customer face image captured by the photographing unit 810 through at least one face authentication server 820 shown in FIG. 2. there is.

검증부(830)는 고객검색부(820)에 의해 특정된 고객에 대한 정보와 검증정보를 비교하여 일치하는지 파악한다. 예를 들어, 검증부(830)는 고객 얼굴 촬영 위치 정보를 검증정보로 입력받고, 고객검색부(820)에 의해 특정된 고객의 단말 위치를 파악한 후, 고객의 단말 위치와 검증정보의 위치정보가 일치하는지 여부를 기초로 고객 본인 여부를 검증할 수 있다. 이 외에도 다양한 검증방법이 본 실시 예에 적용될 수 있으며 그 예가 도 4 내지 도 6에 도시되어 있다. The verification unit 830 compares the verification information with the information about the customer specified by the customer search unit 820 to determine whether they match. For example, the verification unit 830 receives the customer's face shooting location information as verification information, determines the location of the customer's terminal specified by the customer search unit 820, and then receives the customer's terminal location and the location information of the verification information. The customer's identity can be verified based on whether they match. In addition, various verification methods can be applied to this embodiment, examples of which are shown in FIGS. 4 to 6.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, SSD, 광데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The present invention can also be implemented as computer-readable code on a computer-readable recording medium. Computer-readable recording media include all types of recording devices that store data that can be read by a computer system. Examples of computer-readable recording media include ROM, RAM, CD-ROM, SSD, and optical data storage devices. Additionally, computer-readable recording media can be distributed across networked computer systems so that computer-readable code can be stored and executed in a distributed manner.

이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.So far, the present invention has been examined focusing on its preferred embodiments. A person skilled in the art to which the present invention pertains will understand that the present invention may be implemented in a modified form without departing from the essential characteristics of the present invention. Therefore, the disclosed embodiments should be considered from an illustrative rather than a restrictive perspective. The scope of the present invention is indicated in the claims rather than the foregoing description, and all differences within the equivalent scope should be construed as being included in the present invention.

Claims (13)

실명확인장치가 수행하는 실명확인방법에 있어서,
고객 얼굴을 촬영하는 단계;
고객 얼굴 이미지를 기초로 안면정보데이터베이스를 검색하여 상기 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객을 파악하는 단계;
검증정보를 입력받는 단계; 및
상기 검증정보가 상기 적어도 하나 이상의 고객에 대한 정보인지 검증하는 단계;를 포함하고,
상기 고객을 파악하는 단계는, 상기 안면정보데이터베이스에 존재하는 복수의 안면정보를 복수 개의 그룹으로 분할하고, 복수의 안면인증서버를 통해 복수 개의 그룹을 각각 검색하여 상기 고객 얼굴 이미지와 유사도가 높은 고객을 파악하는 단계;를 포함하고,
상기 검증하는 단계는, 상기 검증정보가 상기 복수 개의 그룹을 각각 검색하여 파악된 복수의 고객 중 어느 하나의 고객에 대한 정보인지 검증하는 단계;를 포함하고,
상기 복수의 안면인증서버의 메모리에는 각 그룹에 속한 안면정보가 각각 저장되고,
상기 복수의 안면인증서버의 메모리에 각각 저장된 안면정보는 상기 안면정보데이터베이로부터 추가, 삭제 또는 변경되는 정보를 수신하여 상기 안면정보데이터베이스와 실시간 동기화되는 것을 특징으로 하는 실명확인방법.In the real name verification method performed by the real name verification device,
Photographing a customer's face;
Searching a facial information database based on the customer's face image to identify at least one customer corresponding to the customer's face image;
Step of receiving verification information; and
Comprising: verifying whether the verification information is information about the at least one customer,
In the step of identifying the customer, the plurality of facial information existing in the facial information database is divided into a plurality of groups, and each of the plurality of groups is searched through a plurality of face authentication servers to find a customer with a high similarity to the customer's face image. Includes; determining,
The verifying step includes verifying whether the verification information is information about one customer among a plurality of customers identified by searching each of the plurality of groups,
Facial information belonging to each group is stored in the memory of the plurality of face authentication servers,
The facial information stored in the memory of the plurality of facial authentication servers is synchronized in real time with the facial information database by receiving information to be added, deleted, or changed from the facial information database. 삭제delete 제 1항에 있어서,
적어도 하나의 안면인증서버는 복수의 안면인증프로세스를 포함하고,
메모리에 저장된 안면정보는 복수 개의 세부 그룹으로 분할되어 상기 복수의 안면인증프로세서에 각각 할당되는 것을 특징으로 하는 실명확인방법.According to clause 1,
At least one face authentication server includes a plurality of face authentication processes,
A real name verification method, characterized in that the facial information stored in the memory is divided into a plurality of detailed groups and each assigned to the plurality of facial authentication processors. 제 1항에 있어서,
실명확인 서비스 제공을 위한 고객정보를 등록하는 단계;를 더 포함하고,
상기 등록하는 단계는,
고객 단말로부터 얼굴을 촬영한 이미지를 수신하는 단계;
상기 이미지에서 얼굴 영역을 검출하는 단계;
상기 얼굴 영역에서 특징점을 추출하는 단계; 및
상기 특징점을 포함하는 안면정보를 상기 안면정보데이터베이스에 저장하는 단계;를 포함하는 것을 특징으로 하는 실명확인방법.According to clause 1,
It further includes: registering customer information to provide real name verification service,
The registration step is,
Receiving an image of a face from a customer terminal;
detecting a facial area in the image;
extracting feature points from the face area; and
A real name verification method comprising: storing facial information including the feature points in the facial information database. 제 1항에 있어서,
상기 검증정보는 상기 고객 얼굴을 촬영한 위치 정보이고,
상기 검증하는 단계는, 상기 안면정보데이터베이스를 통해 파악된 적어도 하나 이상의 고객의 휴대폰 단말의 위치정보가 상기 검증정보와 일치하는지 파악하는 단계;를 포함하는 것을 특징으로 하는 실명확인방법. According to clause 1,
The verification information is location information where the customer's face was taken,
The verifying step includes determining whether the location information of at least one customer's mobile phone terminal identified through the facial information database matches the verification information. 제 1항에 있어서,
상기 검증정보는 패턴, 핀번호, 질의 응답값, ARS 입력정보, 모바일앱을 통해 입력된 정보, 카드정보, 생체정보 중 적어도 하나를 포함하고,
상기 검증하는 단계는, 상기 검증정보가 상기 안면정보데이터베이스를 통해 파악된 적어도 하나 이상의 고객에 대해 기 등록된 정보 또는 상기 기 등록된 정보를 기초로 파악되는 정보와 일치하는지 파악하는 단계를 포함하는 것을 특징으로 하는 실명확인방법.According to clause 1,
The verification information includes at least one of a pattern, pin number, inquiry response value, ARS input information, information entered through a mobile app, card information, and biometric information,
The verifying step includes determining whether the verification information matches pre-registered information about at least one customer identified through the facial information database or information identified based on the pre-registered information. Featured real name verification method. 카메라를 통해 고객 얼굴을 촬영하는 촬영부;
고객 얼굴 이미지를 기초로 안면정보데이터베이스를 검색하여 상기 고객 얼굴 이미지에 해당하는 적어도 하나 이상의 고객을 파악하는 고객검색부; 및
검증정보를 입력받고, 상기 검증정보가 상기 적어도 하나 이상의 고객에 대한 정보인지 검증하는 검증부;를 포함하고,
상기 고객검색부는, 상기 안면정보데이터베이스에 존재하는 복수의 안면정보를 복수 개의 그룹으로 분할하고, 복수의 안면인증서버를 통해 복수 개의 그룹을 각각 검색하여 상기 고객 얼굴 이미지와 유사도가 높은 고객을 파악하고,
상기 검증부는, 상기 검증정보가 상기 복수 개의 그룹을 각각 검색하여 파악된 복수의 고객 중 어느 하나의 고객에 대한 정보인지 검증하고,
상기 복수의 안면인증서버의 메모리에는 각 그룹에 속한 안면정보가 각각 저장되고,
상기 복수의 안면인증서버의 메모리에 각각 저장된 안면정보는 상기 안면정보데이터베이로부터 추가, 삭제 또는 변경되는 정보를 수신하여 상기 안면정보데이터베이스와 실시간 동기화되는 것을 특징으로 하는 실명확인장치.A photography unit that photographs the customer's face through a camera;
A customer search unit that searches a facial information database based on the customer's face image and identifies at least one customer corresponding to the customer's face image; and
It includes a verification unit that receives verification information and verifies whether the verification information is information about the at least one customer,
The customer search unit divides a plurality of facial information existing in the facial information database into a plurality of groups, searches each of the plurality of groups through a plurality of face authentication servers, and identifies customers with a high degree of similarity to the customer face image. ,
The verification unit verifies whether the verification information is information about one customer among a plurality of customers identified by searching each of the plurality of groups,
Facial information belonging to each group is stored in the memory of the plurality of face authentication servers,
The facial information stored in the memory of the plurality of facial authentication servers is synchronized in real time with the facial information database by receiving information to be added, deleted, or changed from the facial information database. 삭제delete 제 7항에 있어서,
상기 복수의 안면인증서버는 복수의 안면인증 프로세스를 포함하고,
메모리에 저장된 안면정보는 복수 개의 세부 그룹으로 분할되어 상기 복수의 안면인증프로세서에 각각 할당되는 것을 특징으로 하는 실명확인장치.According to clause 7,
The plurality of face authentication servers include a plurality of face authentication processes,
A real name verification device, characterized in that the facial information stored in the memory is divided into a plurality of detailed groups and each assigned to the plurality of facial authentication processors. 제 7항에 있어서,
고객 단말로부터 얼굴을 촬영한 이미지를 수신하고, 상기 이미지에서 얼굴 영역을 검출하고, 상기 얼굴 영역에서 특징점을 추출하고, 상기 특징점을 포함하는 안면정보를 상기 안면정보데이터베이스에 저장하는 등록부;를 더 포함하는 것을 특징으로 하는 실명확인장치.According to clause 7,
It further includes a registration unit that receives an image of a face from a customer terminal, detects a face area in the image, extracts a feature point from the face area, and stores facial information including the feature point in the face information database. A real name verification device characterized by: 제 7항에 있어서,
상기 검증정보는 상기 고객 얼굴을 촬영한 위치 정보이고,
상기 검증부는, 상기 안면정보데이터베이스를 통해 파악된 적어도 하나 이상의 고객의 휴대폰 단말의 위치정보가 상기 검증정보와 일치하는지 파악하는 것을 특징으로 하는 실명확인장치.According to clause 7,
The verification information is location information where the customer's face was taken,
The verification unit is a real name verification device characterized in that it determines whether the location information of at least one customer's mobile phone terminal identified through the facial information database matches the verification information. 제 7항에 있어서,
상기 검증정보는 패턴, 핀번호, 질의 응답값, ARS 입력정보, 모바일앱을 통해 입력된 정보, 카드정보, 생체정보 중 적어도 하나를 포함하고,
상기 검증부는, 상기 검증정보가 상기 안면정보데이터베이스를 통해 파악된 적어도 하나 이상의 고객에 대해 기 등록된 정보 또는 상기 기 등록된 정보를 기초로 파악되는 정보와 일치하는지 파악하는 것을 특징으로 하는 실명확인장치.According to clause 7,
The verification information includes at least one of a pattern, pin number, inquiry response value, ARS input information, information entered through a mobile app, card information, and biometric information,
The verification unit is a real name verification device characterized in that it determines whether the verification information matches pre-registered information for at least one customer identified through the facial information database or information identified based on the pre-registered information. . 제 1항에 기재된 방법을 수행하기 위한 컴퓨터 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.

A computer-readable recording medium recording a computer program for performing the method described in claim 1.
KR1020210084156A 2021-06-28 2021-06-28 User real name checking method and apparatus KR102626892B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210084156A KR102626892B1 (en) 2021-06-28 2021-06-28 User real name checking method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210084156A KR102626892B1 (en) 2021-06-28 2021-06-28 User real name checking method and apparatus

Publications (2)

Publication Number Publication Date
KR20230001373A KR20230001373A (en) 2023-01-04
KR102626892B1 true KR102626892B1 (en) 2024-01-19

Family

ID=84925367

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210084156A KR102626892B1 (en) 2021-06-28 2021-06-28 User real name checking method and apparatus

Country Status (1)

Country Link
KR (1) KR102626892B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019086971A (en) * 2017-11-06 2019-06-06 大日本印刷株式会社 Personal identification system and personal identification method

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140011522A (en) * 2012-06-28 2014-01-29 주식회사 우리은행 Method and apparatus for performing electronic finance transaction using face recognition
KR101813950B1 (en) * 2015-12-18 2018-01-04 한국정보통신주식회사 An automated teller machine and a method for operating it
KR20210003485A (en) * 2019-07-02 2021-01-12 효성티앤에스 주식회사 Method and apparatus for providing financial transaction in atm based on face recognition
KR20210058157A (en) * 2019-11-13 2021-05-24 한국전자통신연구원 Apparatus and method for identificating user based on face image

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019086971A (en) * 2017-11-06 2019-06-06 大日本印刷株式会社 Personal identification system and personal identification method

Also Published As

Publication number Publication date
KR20230001373A (en) 2023-01-04

Similar Documents

Publication Publication Date Title
CN106651363B (en) Hardware wallet and holder identity verification method thereof
JP6636922B2 (en) Personal authentication using human biometrics
AU2018323233A1 (en) Resource transfer method, fund payment method and apparatus, and electronic device
KR102160915B1 (en) Apparatus for providing purchase service through identification without media and method thereof
US10475014B1 (en) Payment device security
US11271931B2 (en) Dynamic and private security fingerprinting
US20240154961A1 (en) Using common identifiers related to location to link fraud across mobile devices
CN106303599A (en) A kind of information processing method, system and server
AU2019232782A1 (en) Information processing device, authentication system, authentication method, and program
US20210174331A1 (en) Transferring a customer from an atm transaction to a device-based transaction during an error state, and applications thereof
KR101763275B1 (en) The method for customer certification using credit bereau information, the system thereof, and computer-readable recording medium for recording program executing the same method
US10936706B2 (en) Biometric authentication
KR102626892B1 (en) User real name checking method and apparatus
US10003464B1 (en) Biometric identification system and associated methods
KR100927589B1 (en) Identification system and method using multiple biometric information
KR102399524B1 (en) System and method for collectin, depositing and managing personal identification information
WO2022065059A1 (en) Authentication system
KR102308016B1 (en) Apparatus for credit card payment service using biometric data
KR102381261B1 (en) Server and method for processing payment thereof, method for user authentication of server
JP7428240B2 (en) Authentication system, terminal, terminal control method and computer program
KR102228632B1 (en) Video playing method, business card server and video playing system connected to a business card
US10628665B1 (en) Enhancing capabilities by cooperatively using identity systems and identification databases
KR102435231B1 (en) Apparatus for credit card payment service using biometric data
US11776303B2 (en) Biometric gallery management using wireless identifiers
CN111241328A (en) Identity authentication and identification service method and device, readable storage medium and electronic equipment

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant