KR102180719B1

KR102180719B1 - Non-faced account opening system and non-faced account opening method using the same

Info

Publication number: KR102180719B1
Application number: KR1020200034245A
Authority: KR
Inventors: 윤영호; 이명성
Original assignee: 한국인식산업(주)
Priority date: 2020-03-20
Filing date: 2020-03-20
Publication date: 2020-11-19

Abstract

According to the present invention, a contactless account opening system comprises: a user terminal to photograph an identification card of a user to generate an identification card image, and receive customer information required to open a contactless account from the user; and a contactless account opening server to receive the photographed identification card image from the user terminal to check whether the identification card is genuine, receive the customer information to carry out a contactless account opening process, and compare a user face image automatically photographed in a background mode of the user terminal and a face image of the identification card to perform verification of the user. Accordingly, the present invention secures reliability for contactless account opening and shortens authentication time to effectively carry out contactless account opening.

Description

Non-face-to-face account opening system and a non-face-to-face account opening method using the same {NON-FACED ACCOUNT OPENING SYSTEM AND NON-FACED ACCOUNT OPENING METHOD USING THE SAME}

본 발명은 신분증의 진위 확인과 사용자 본인 확인 서비스를 제공하는 비대면 계좌 개설 시스템 및 이를 이용한 비대면 계좌 개설 방법에 관한 것이다.The present invention relates to a non-face-to-face account opening system and a non-face-to-face account opening method using the same.

은행 등의 금융기관을 이용하는 고객은 해당 금융기관에 계좌를 개설하고 개설된 계좌를 통해서 각종 금융서비스를 이용할 수 있다. 그리고, 고객은 금융기관의 계좌를 개설하기 위하여 해당 금융기관을 방문하고 계좌 개설에 필요한 정보를 금융기관에 제공하고, 금융기관은 사용자로부터 제공받은 정보에 기초하여 신분 확인 등을 한 후 사용자의 계좌를 개설했다.Customers who use financial institutions such as banks can open an account with the financial institution and use various financial services through the opened account. In addition, the customer visits the financial institution in order to open an account with the financial institution and provides the information necessary for opening an account to the financial institution, and the financial institution confirms the identity based on the information provided by the user, and then the user's account Opened.

또한, 최근에는 고객의 편의성을 향상시키기 위해서 비대면으로 계좌를 개설하는 기술이 개발되고 있다. 그리고, 비대면으로 계좌를 개설하는 경우에는 불법적인 계좌 개설을 방지하기 위해서 신분증 확인 등의 절차를 거쳐서 계좌 개설을 진행하고 있다.In addition, in recent years, in order to improve the convenience of customers, technology for opening an account in a non-face-to-face has been developed. In the case of opening an account non-face-to-face, in order to prevent illegal account opening, the account is opened through procedures such as identification card verification.

이러한 비대면 계좌개설 서비스를 통해 금융기관의 서비스를 이용하고자 하는 고객은 자신의 사용자 단말로 용이하게 계좌를 개설하고, 해당 금융기관의 서비스를 이용할 수 있게 되었다.Through such a non-face-to-face account opening service, a customer who wants to use the service of a financial institution can easily open an account with his user terminal and use the service of the financial institution.

하지만, 최근에는 분실이나 도난된 타인의 신분증을 습득하거나 정상적인 신분증으로 위변조하여 계좌를 개설하고, 또는 타인의 얼굴 사진을 도용하여 계좌를 개설하는 사기 행위 등으로 인해서 비대면 계좌 개설에 대한 신뢰성을 확보하지 못하는 어려움이 있었다.However, in recent years, the reliability of non-face-to-face account opening has been secured due to fraudulent activities such as acquiring the identity card of another person who has been lost or stolen or forged with a normal identity card, or opening an account by stealing another person's face photo. There were difficulties that could not be done.

또한, 분실이나 도난된 신분증을 필터링하기 위해서는 비대면 계좌 개설 신청시에 영상통화를 진행하는 등으로 인해서 업무 효율성이 떨어지고, 고객에게 불편함을 주는 어려움이 있었다.In addition, in order to filter out lost or stolen ID cards, there is a difficulty in reducing work efficiency and causing inconvenience to customers due to video calls when applying for non-face-to-face account opening.

이 배경기술 부분에 기재된 사항은 발명의 배경에 대한 이해를 증진하기 위하여 작성된 것으로서, 이 기술이 속하는 분야에서 통상의 지식을 가진 자에게 이미 알려진 종래기술이 아닌 사항을 포함할 수 있다.The matters described in this background are prepared to enhance an understanding of the background of the invention, and may include matters not known in the prior art to those of ordinary skill in the field to which this technology belongs.

본 발명은 백그라운드 모드로 카메라를 구동시켜 사용자의 얼굴 이미지를 촬영하고, 촬영된 사용자 얼굴 이미지와 신분증 얼굴 이미지를 비교하는 사용자 본인 확인 절차를 통해서 비대면 계좌를 개설함으로써, 비대면 계좌 개설의 신뢰성을 확보할 수 있는 비대면 계좌 개설 시스템 및 이를 이용한 비대면 계좌 개설 방법을 제안하고자 한다.The present invention drives the camera in a background mode to capture a user's face image, and opens a non-face-to-face account through a user identification procedure that compares the photographed user's face image and the ID card face image, thereby increasing the reliability of the non-face-to-face account opening. We would like to propose a non-face-to-face account opening system that can be secured and a non-face-to-face account opening method using the same.

또한, 본 발명은 신분증 진위 여부와 해당 신분증으로 비대면 계좌를 개설하는 사용자의 본인확인 여부를 병렬로 처리하여 비대면 계좌를 개설함으로써, 비대면 계좌 개설의 인증시간을 단축시켜 비대면 계좌 개설을 보다 효과적으로 진행할 수 있는 비대면 계좌 개설 시스템 및 이를 이용한 비대면 계좌 개설 방법을 제안하고자 한다.In addition, the present invention opens a non-face-to-face account by parallel processing whether the identification card is authentic and whether the user who opens a non-face-to-face account with the corresponding identification card is opened, thereby shortening the authentication time for opening a non-face-to-face account to open a non-face-to-face account. We would like to propose a non-face-to-face account opening system that can be carried out more effectively and a non-face-to-face account opening method using the same.

본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템은 사용자의 신분증을 촬영하여 신분증 이미지를 생성하고, 상기 사용자로부터 비대면 계좌 개설에 필요한 고객정보를 입력받는 사용자 단말, 그리고 상기 사용자 단말로부터 촬영된 신분증 이미지를 수신하여 상기 신분증의 진위 여부를 확인하고, 상기 고객정보를 수신하여 비대면 계좌 개설 프로세스를 진행하되, 상기 사용자 단말의 백그라운드 모드에서 자동으로 촬영된 사용자 얼굴 이미지와 상기 신분증의 얼굴 이미지를 비교하여 상기 사용자의 본인확인 여부를 수행하는 비대면 계좌 개설 서버를 포함한다.In the non-face-to-face account opening system according to an embodiment of the present invention, a user terminal that generates an identification card image by photographing a user's identification card, receives customer information required for opening a non-face-to-face account from the user, and photographed from the user terminal. Receiving an identification card image to check the authenticity of the identification card, receiving the customer information to proceed with a non-face-to-face account opening process, the user's face image and the face image of the identification card automatically photographed in the background mode of the user terminal It includes a non-face-to-face account opening server that compares and verifies the user's identity.

상기 비대면 계좌 개설 서버는, 상기 사용자 단말에 비대면 계좌 개설 프로세스에 필요한 데이터를 요청하고 상기 사용자 단말로부터 상기 고객 정보, 상기 신분증 이미지, 및 상기 사용자 얼굴 이미지를 수신하는 송수신모듈, 그리고 수신된 상기 신분증 이미지와 기저장된 신분증 이미지 파일을 비교하여 상기 신분증의 진위 여부를 확인하되, 상기 신분증 이미지에서 신분증 얼굴 이미지를 추출하고, 상기 신분증 얼굴 이미지의 특징점을 추출하는 신분증 진위확인 모듈을 포함할 수 있다.The non-face-to-face account opening server, a transmission/reception module for requesting data necessary for a non-face-to-face account opening process from the user terminal and receiving the customer information, the identification card image, and the user face image from the user terminal, and the received It may include an identification card authenticity checking module that compares the identification card image with a previously stored identification card image file to check whether the identification card is authentic, extracts an identification card face image from the identification card image, and extracts feature points of the identification card face image.

상기 비대면 계좌 개설 서버는, 학습된 위조사진 판별 알고리즘을 통해서 상기 사용자 단말에서 수신된 상기 사용자 얼굴 이미지가 실제 이미지인지 또는 위조사진인지 여부를 판단하는 위조사진 판별 모듈을 더 포함할 수 있다.The non-face-to-face account opening server may further include a fake photo determination module that determines whether the user's face image received from the user terminal is a real image or a fake photo through a learned fake photo determination algorithm.

상기 비대면 계좌 개설 서버는, 상기 사용자 얼굴 이미지의 특징점을 추출하고, 상기 사용자 얼굴 이미지의 특징점과 상기 신분증 얼굴 이미지의 특징점을 비교하여 상기 사용자의 본인확인 여부를 수행하는 사용자 본인확인 모듈을 더 포함할 수 있다.The non-face-to-face account opening server further includes a user identity verification module that extracts feature points of the user's face image, compares feature points of the user face image with feature points of the identification card face image, and performs identity verification of the user. can do.

상기 사용자 단말은, 상기 사용자 단말의 후방에 배치되며, 상기 신분증을 촬영하는 제1 카메라, 상기 사용자 단말의 전방에 배치되며, 상기 사용자의 얼굴을 촬영하는 제2 카메라, 그리고 상기 사용자 단말의 디스플레이 화면에서 상기 비대면 계좌 개설에 필요한 상기 고객정보가 입력되는 도중에, 상기 제2 카메라를 상기 백그라운드 모드로 구동시키는 사용자 어플리케이션을 포함할 수 있다.The user terminal is disposed at the rear of the user terminal, a first camera for photographing the identification card, a second camera disposed in front of the user terminal and for photographing the user's face, and a display screen of the user terminal In the middle of inputting the customer information necessary for opening the non-face-to-face account, a user application for driving the second camera in the background mode may be included.

상기 사용자 어플리케이션은, 상기 제2 카메라의 구동시에 상기 백그라운드 모드에서 가상 프리뷰 모듈을 구동하여 가상 가이드 라인을 생성하고, 상기 가상 가이드 라인 내에 상기 사용자의 얼굴이 배치될 때 상기 사용자 얼굴 이미지를 촬영하도록 상기 제2 카메라의 동작을 제어할 수 있다.The user application generates a virtual guideline by driving a virtual preview module in the background mode when the second camera is driven, and captures the user's face image when the user's face is placed in the virtual guideline. It is possible to control the operation of the second camera.

본 발명의 한 실시예에 따른 비대면 계좌 개설 방법은 비대면 계좌 개설 서버가, 비대면으로 계좌를 개설하는 방법에서, 상기 비대면 계좌 개설 서버가, 사용자 단말에서 촬영된 신분증의 신분증 이미지를 수신하는 단계, 상기 비대면 계좌 개설 서버가, 상기 신분증 이미지에서 신분증 얼굴 이미지를 추출하는 단계, 상기 비대면 계좌 개설 서버가, 상기 사용자 단말의 백그라운드 모드에서 자동으로 촬영된 사용자 얼굴 이미지를 수신하는 단계, 그리고 상기 비대면 계좌 개설 서버가, 상기 사용자 얼굴 이미지와 상기 신분증 얼굴 이미지를 비교하여 상기 사용자의 본인확인 여부를 수행하는 단계를 포함한다.In a non-face-to-face account opening method according to an embodiment of the present invention, in a method of opening an account in a non-face-to-face account by a non-face-to-face account opening server, the non-face-to-face account opening server receives an image of an identification card photographed from a user terminal. The step of, the non-face-to-face account opening server, extracting an identification card face image from the identification card image, the non-face-to-face account opening server, receiving a user face image automatically photographed in a background mode of the user terminal, And performing, by the non-face-to-face account opening server, comparing the face image of the user with the face image of the identification card to verify the identity of the user.

수신된 상기 신분증 이미지와 기저장된 신분증 파일을 비교하여 상기 신분증의 진위 여부를 확인하는 단계를 더 포함할 수 있다.The method may further include comparing the received identification card image with a previously stored identification card file to check whether the identification card is authentic or not.

상기 사용자의 본인확인 여부를 수행하는 단계는, 학습된 위조사진 판별 알고리즘을 통해서 상기 사용자 얼굴 이미지가 실제 이미지인지 또는 위조 사진인지 여부를 판단하는 단계를 포함할 수 있다.The step of performing identity verification of the user may include determining whether the user's face image is a real image or a fake photo through a learned counterfeit photo identification algorithm.

상기 사용자의 본인확인 여부를 수행하는 단계는, 상기 사용자 얼굴 이미지의 특징점을 추출하는 단계, 상기 신분증 얼굴 이미지의 특징점을 추출하는 단계, 그리고 상기 사용자 얼굴 이미지의 특정점과 상기 신분증 얼굴 이미지의 특징점을 비교하는 단계를 포함할 수 있다.The performing of the identity verification of the user may include extracting a feature point of the user's face image, extracting a feature point of the identification card face image, and determining a specific point of the user's face image and a feature point of the ID card face image. It may include the step of comparing.

상기 사용자 얼굴 이미지는, 상기 사용자 단말의 디스플레이 화면에서 상기 비대면 계좌 개설에 필요한 고객정보가 입력되는 도중에, 상기 사용자 단말의 전방에 배치된 전방 카메라가 백그라운드 모드에서 구동되어 사용자의 얼굴을 자동으로 촬영하여 생성될 수 있다.The user's face image automatically captures the user's face by driving a front camera placed in front of the user terminal in the background mode while the customer information required for opening the non-face-to-face account is input on the display screen of the user terminal. Can be created by

본 발명의 한 실시예에 따른 비대면 계좌 개설 프로그램이 기록된 컴퓨터로 판독가능한 기록매체는 사용자 단말의 후방에 배치된 제1 카메라로 사용자의 신분증을 촬영하여 신분증 이미지를 생성하고, 상기 사용자로부터 비대면 계좌 개설에 필요한 고객정보가 입력되는 도중에, 상기 사용자 단말의 전방에 배치된 제2 카메라를 백그라운드 모드에서 자동으로 구동시켜 상기 사용자의 얼굴을 촬영하여 사용자 얼굴 이미지를 생성하는 사용자 어플리케이션을 포함한다.In the computer-readable recording medium on which the non-face-to-face account opening program is recorded according to an embodiment of the present invention, the user's identification card is photographed with a first camera disposed at the rear of the user terminal to generate an identification card image, and And a user application that automatically drives a second camera disposed in front of the user terminal in a background mode while capturing customer information required to open a face-to-face account to generate a user face image.

본 발명에 따르면, 비대면 계좌를 개설하는 사용자가 제공하는 신분증의 진위 확인 여부를 수행하고, 이와 동시에 해당 신분증을 소지한 사용자의 본인확인 여부를 수행하여 비대면 계좌를 개설함으로써, 비대면 계좌 개설의 신뢰성을 확보하고, 타인의 신분증을 도용하여 비대면으로 계좌를 개설하는 사기를 미연에 방지할 수 있는 환경을 제공한다.According to the present invention, a non-face-to-face account is opened by performing verification of the authenticity of an identification card provided by a user who opens a non-face-to-face account, and at the same time performing identity verification of the user holding the corresponding identification card. It provides an environment to secure the reliability of the company and prevent fraud in opening an account non-face-to-face by stealing someone else's ID card.

또한, 본 발명은 비대면 계좌를 개설하기 위해서 사용자가 고객정보를 입력하는 도중에, 사용자 단말의 전방카메라를 백그라운드 모드로 구동시켜 사용자의 얼굴 이미지를 촬영함으로써, 비대면 계좌 개설의 절차를 간소화하고 인증시간을 단축하면서도 비대면 계좌 개설의 신뢰성을 확보할 수 있는 환경을 제공한다.In addition, in order to open a non-face-to-face account, the present invention simplifies and authenticates the procedure of opening a non-face-to-face account by driving the front camera of the user terminal in the background mode to capture the user's face image while the user inputs customer information. It provides an environment in which the reliability of non-face-to-face account opening can be secured while shortening the time.

또한, 본 발명은 사용자 단말의 디스플레이 화면에서 비대면 계좌 개설에 필요한 고객정보가 입력되는 도중에 사용자 얼굴 이미지를 획득하고, 획득된 사용자 얼굴 이미지를 신분증 얼굴 이미지와 비교하여 특정 신분증으로 비대면 계좌를 개설하는 특정 사용자가 상기 특정 신분증의 진정한 당사자인지 여부를 확인함으로써, 비대면 계좌 개설의 신뢰성을 확보할 수 있는 환경을 제공한다.In addition, the present invention acquires a user's face image while the customer information required to open a non-face-to-face account is input on the display screen of the user terminal, and compares the obtained user's face image with the identification card face image to open a non-face-to-face account with a specific identification card. By checking whether a specific user who is a specific user is a true party to the specific identification card, an environment in which the reliability of opening a non-face-to-face account can be secured is provided.

또한, 본 발명은 신분증 진위 여부와 사용자 본인 확인 여부를 병렬로 처리함으로써, 비대면 계좌 개설에 필요한 인증시간을 단축하고 비대면 계좌를 개설하는 사용자들의 만족도를 증대시킬 수 있는 환경을 제공한다.In addition, the present invention provides an environment capable of shortening the authentication time required for opening a non-face-to-face account and increasing the satisfaction level of users who open a non-face-to-face account by processing the authenticity of an identification card and whether the user's identity is verified in parallel.

또한, 본 발명은 사용자 단말의 전방에 배치된 카메라를 백그라운드 모드로 구동시에, 가상 프리뷰 모듈을 상기 백그라운드 모드에서 함께 구동시켜 가상 가이드 라인을 생성하고, 상기 가상 가이드 라인 내에 사용자의 얼굴이 배치될 때 상기 사용자의 얼굴 이미지를 촬영함으로써, 백그라운드 모드에서의 사용자 얼굴 촬영 및 인식 확률을 증가시킬 수 있는 환경을 제공한다.In addition, the present invention generates a virtual guideline by driving the camera disposed in front of the user terminal in the background mode, driving the virtual preview module together in the background mode, and when the user's face is placed in the virtual guideline. By capturing the user's face image, an environment capable of increasing the probability of capturing and recognizing the user's face in the background mode is provided.

또한, 본 발명은 딥러닝을 이용한 위조사진 판별 알고리즘을 통해서 동영상 위변조 영상을 감지하고, 사용자의 얼굴 이미지가 실제이미지 인지 또는 위조사진 인지 여부를 판단함으로써, 비대면 계좌 개설의 신뢰성을 향상시킬 수 있는 환경을 제공한다.In addition, the present invention can improve the reliability of opening a non-face-to-face account by detecting a video forgery and altered image through a fake photo identification algorithm using deep learning and determining whether the user's face image is a real image or a fake photo. Provide the environment.

또한, 본 발명은 사용자 얼굴 이미지의 특징점과 신분증 얼굴 이미지의 특징점을 비교하여 사용자의 본인확인 여부를 수행함으로써, 비대면 계좌 개설의 신뢰성을 향상시킬 수 있는 환경을 제공한다.In addition, the present invention provides an environment in which the reliability of opening a non-face-to-face account can be improved by comparing the feature points of the user's face image and the feature points of the ID card face image to verify the user's identity.

도 1은 본 발명의 한 실시예에 따라 비대면으로 계좌 개설 서비스를 제공하는 비대면 계좌 개설 시스템을 간략히 도시한 도면이다.
도 2는 본 발명의 한 실시예에 따른 비대면 계좌 개설 서버의 개략적인 구성을 나타낸 블록도이다.
도 3은 본 발명의 한 실시예에 따른 DTN 네트워크의 구조를 도시함 도면이다.
도 4는 본 발명의 한 실시예에 따른 사용자 단말의 개략적인 구성을 나타낸 블록도이다.
도 5는 본 발명의 한 실시예에 따라 비대면 계좌 개설 시스템에서 신분증 진위 확인과 사용자 본인 확인을 병렬로 처리하여 비대면 계좌를 개설하는 과정을 간략히 도시한 흐름도이다.
도 6은 신분증 진위 확인과 사용자 본인 확인을 통해서 비대면 계좌를 개설하는 예를 도시한 도면이다.
도 7은 본 발명의 한 실시예에 따라 사용자 단말에서 제2 카메라를 백그라운드 모드로 구동시켜 사용자 얼굴이미지를 획득하여 비대면 계좌 개설을 신청하는 과정을 간략히 도시한 흐름도이다.
도 8은 본 발명의 한 실시예에 따라 학습된 위조사진 판별 알고리즘을 통해서 위조사진 여부를 판별하는 과정을 간략히 도시한 흐름도이다.
도 9는 본 발명의 한 실시예에 따라 신분증 얼굴 이미지와 사용자 얼굴 이미지를 비교하여 비대면 계좌를 개설하는 과정을 간략히 도시한 흐름도이다.1 is a schematic diagram of a non-face-to-face account opening system for providing a non-face-to-face account opening service according to an embodiment of the present invention.
2 is a block diagram showing a schematic configuration of a non-face-to-face account opening server according to an embodiment of the present invention.
3 is a diagram showing the structure of a DTN network according to an embodiment of the present invention.
4 is a block diagram showing a schematic configuration of a user terminal according to an embodiment of the present invention.
FIG. 5 is a flow chart schematically illustrating a process of opening a non-face-to-face account by parallel processing identification card authenticity and user identification in a non-face-to-face account opening system according to an embodiment of the present invention.
6 is a diagram illustrating an example of opening a non-face-to-face account through identification of the authenticity of an identification card and user identification.
7 is a flowchart schematically illustrating a process of obtaining a user's face image by driving a second camera in a background mode in a user terminal and applying for a non-face-to-face account opening according to an embodiment of the present invention.
8 is a flowchart briefly illustrating a process of determining whether a forged photo exists through a learned forged photo identification algorithm according to an embodiment of the present invention.
9 is a flowchart schematically illustrating a process of opening a non-face-to-face account by comparing a face image of an identification card with a face image of a user according to an embodiment of the present invention.

이하, 본 발명의 바람직한 실시예를 첨부한 도면에 의거하여 상세하게 설명하면 다음과 같다.Hereinafter, a preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings.

이에 앞서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.Prior to this, since the embodiments described in the present specification and the configurations shown in the drawings are only the most preferred embodiments of the present invention and do not represent all the technical ideas of the present invention, they can be replaced at the time of application. It should be understood that there may be various equivalents and variations.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art can easily implement the embodiments of the present invention. However, the present invention may be implemented in various different forms and is not limited to the embodiments described herein. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and similar reference numerals are assigned to similar parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.Throughout the specification, when a part "includes" a certain component, it means that other components may be further included rather than excluding other components unless otherwise stated. In addition, terms such as "... unit", "... group", and "module" described in the specification mean units that process at least one function or operation, which can be implemented by hardware or software or a combination of hardware and software. have.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When a component is referred to as being "connected" or "connected" to another component, it is understood that it may be directly connected or connected to the other component, but other components may exist in the middle. Should be. On the other hand, when a component is referred to as being "directly connected" or "directly connected" to another component, it should be understood that there is no other component in the middle.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the embodiment belongs. Terms as defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and should not be interpreted as an ideal or excessively formal meaning unless explicitly defined in this application. Does not.

또한, 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. In addition, when it is determined that detailed descriptions of related known technologies may unnecessarily obscure the subject matter of the embodiments in describing the embodiments, detailed descriptions thereof will be omitted.

이제 도 1 내지 도 9를 참고하여 본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템 및 이를 이용한 비대면 계좌 개설 방법에 대하여 상세하게 설명한다.Now, a non-face-to-face account opening system and a non-face-to-face account opening method using the same according to an embodiment of the present invention will be described in detail with reference to FIGS. 1 to 9.

도 1은 본 발명의 한 실시예에 따라 비대면으로 계좌 개설 서비스를 제공하는 비대면 계좌 개설 시스템을 간략히 도시한 도면이다. 이때, 비대면 계좌 개설 시스템(10)는 본 발명의 실시예에 따른 설명을 위해 필요한 개략적인 구성만을 도시할 뿐 이러한 구성에 국한되는 것은 아니다.1 is a schematic diagram of a non-face-to-face account opening system for providing a non-face-to-face account opening service according to an embodiment of the present invention. At this time, the non-face-to-face account opening system 10 only shows a schematic configuration necessary for explanation according to an embodiment of the present invention, but is not limited to this configuration.

도 1을 참조하면, 본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템(10)은 본 발명의 한 실시예에 따라 비대면 계좌 개설 서버(100), 사용자 단말(200), 그리고 신분증 진위확인 서버(300)를 포함한다. Referring to FIG. 1, a non-face-to-face account opening system 10 according to an embodiment of the present invention includes a non-face-to-face account opening server 100, a user terminal 200, and an identification card authenticity check according to an embodiment of the present invention. It includes a server 300.

우선, 비대면 계좌 개설 서버(100)는 사용자 단말(200)로부터 촬영된 신분증 이미지를 수신하여 신분증의 진위 여부를 확인하고, 상기 사용자 단말(200)로부터 사용자의 고객정보를 수신하여 비대면 계좌 개설 프로세스를 진행한다. First, the non-face-to-face account opening server 100 receives an image of an identification card taken from the user terminal 200 to check the authenticity of the identification card, and receives the user's customer information from the user terminal 200 to open a non-face-to-face account. Go through the process.

이때, 비대면 계좌 개설 서버(100)는 상기 사용자 단말(200)로부터 수신된 신분증 이미지와 기저장된 신분증 이미지 파일을 비교하여 상기 신분증의 진위 여부를 확인하거나 또는, 수신된 상기 신분증 이미지를 신분증 진위확인 서버(300)에 전송하여 신분증의 진위 여부를 요청할 수 있다.At this time, the non-face-to-face account opening server 100 compares the identification card image received from the user terminal 200 with a previously stored identification card image file to check the authenticity of the identification card, or check the identity card authenticity of the received identification card image. It may be transmitted to the server 300 to request the authenticity of the identification card.

그리고, 사용자 단말(200)은 소정의 절차에 따라 사용자의 신분증을 촬영하여 신분증 이미지를 생성하고, 생성된 신분증 이미지를 비대면 계좌 개설 서버(100)로 전송할 수 있다. 여기서, 사용자 단말(200)은 비대면으로 계좌를 개설하는 고객이 소지한 디바이스를 포함한다.In addition, the user terminal 200 may generate an identification card image by photographing the user's identification card according to a predetermined procedure, and transmit the generated identification card image to the non-face-to-face account opening server 100. Here, the user terminal 200 includes a device held by a customer who opens an account in a non-face-to-face manner.

또한, 사용자 단말(200)은 사용자로부터 비대면 계좌 개설에 필요한 고객정보를 입력받을 수 있다. 이때, 사용자 단말(200)은 디스플레이 화면에서 상기 비대면 계좌 개설에 필요한 고객정보가 입력되는 도중에, 사용자 단말(200)의 전방에 배치된 카메라를 백그라운드 모드(background mode)에서 구동시키고, 사용자의 얼굴을 촬영하여 사용자 얼굴 이미지를 생성할 수 있다. 여기서, 백그라운드 모드는 사용자 단말(200)의 디스플레이부(280)에 노출되지 않으면서 카메라가 구동되거나, 사용자가 상기 카메라가 구동중인 것을 인지할 수 없는 상태를 포함한다. In addition, the user terminal 200 may receive customer information necessary for opening a non-face-to-face account from the user. At this time, the user terminal 200 drives the camera disposed in front of the user terminal 200 in a background mode while the customer information required for opening the non-face-to-face account is being input on the display screen, and You can create an image of the user's face by photographing. Here, the background mode includes a state in which the camera is driven without being exposed to the display unit 280 of the user terminal 200 or the user cannot recognize that the camera is being driven.

그리고, 비대면 계좌 개설 서버(100)는 상기 백그라운드 모드에서 자동으로 촬영된 사용자 얼굴 이미지를 상기 사용자 단말(200)로부터 수신한다. 또한, 비대면 계좌 개설 서버(100)는 수신된 사용자 얼굴 이미지와 상기 신분증의 얼굴 이미지를 비교하고, 상기 신분증으로 비대면 계좌를 개설하고자 하는 사용자가 상기 신분증의 실제 당사자인지 여부를 확인하는 사용자 본인 확인 절차를 진행한다. In addition, the non-face-to-face account opening server 100 receives, from the user terminal 200, an image of a user's face automatically photographed in the background mode. In addition, the non-face-to-face account opening server 100 compares the received user face image with the face image of the identification card, and checks whether the user who intends to open a non-face-to-face account with the identification card is the actual party to the identification card. Proceed with the verification process.

그리고 나서, 상기 신분증으로 비대면 계좌를 개설하는 사용자가 상기 신분증의 진정한 당사자로 확인된 경우에, 비대면 계좌 개설 서버(100)는 비대면 계좌 개설에 필요한 절차를 진행할 수 있다.Then, when the user who opens a non-face-to-face account with the identification card is identified as a true party to the identification card, the non-face-to-face account opening server 100 may proceed with a procedure necessary for opening a non-face-to-face account.

이와 같이, 본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템(10)은 비대면 계좌를 개설하는 신분증의 진위 확인 여부를 수행하고, 이와 동시에 해당 신분증을 소지한 사용자의 본인확인 여부를 수행함으로써, 비대면 계좌 개설의 신뢰성을 확보하고, 타인의 신분증을 도용하여 비대면으로 계좌를 개설하는 사기를 미연에 방지할 수 있는 환경을 제공한다.In this way, the non-face-to-face account opening system 10 according to an embodiment of the present invention performs verification of the authenticity of the identification card for opening the non-face-to-face account, and at the same time, performs identification of the user holding the corresponding identification card. , Secure the reliability of opening a non-face-to-face account, and provide an environment to prevent fraud of opening an account non-face-to-face by stealing someone's ID card.

도 2는 본 발명의 한 실시예에 따른 비대면 계좌 개설 서버의 개략적인 구성을 나타낸 블록도이다. 이때, 비대면 계좌 개설 서버(100)는 본 발명의 실시예에 따른 설명을 위해 필요한 개략적인 구성만을 도시할 뿐 이러한 구성에 국한되는 것은 아니다.2 is a block diagram showing a schematic configuration of a non-face-to-face account opening server according to an embodiment of the present invention. At this time, the non-face-to-face account opening server 100 only shows a schematic configuration necessary for explanation according to an embodiment of the present invention, but is not limited to this configuration.

도 2를 참조하면, 본 발명의 한 실시예에 따른 비대면 계좌 개설 서버(100)는 비대면 계좌를 개설하는 신분증의 진위 확인 여부를 수행하고, 이와 동시에 해당 신분증을 소지한 사용자의 본인확인 여부를 수행하여 비대면 계좌를 개설할 수 있다. 2, the non-face-to-face account opening server 100 according to an embodiment of the present invention performs verification of the authenticity of an identification card for opening a non-face-to-face account, and at the same time, whether the user who has the corresponding identification card is You can open a non-face-to-face account by doing.

이러한, 비대면 계좌 개설 서버(100)는 본 발명의 한 실시예에 따라 비대면 계좌개설 제어모듈(110), 송수신모듈(120), 신분증 진위확인 모듈(130), 사용자 본인확인 모듈(140), 위조사진 판별모듈(150), 그리고 데이터베이스(160)를 포함한다. Such, non-face-to-face account opening server 100 is a non-face-to-face account opening control module 110, transmission/reception module 120, identification card authenticity verification module 130, user identification module 140 according to an embodiment of the present invention , A fake photo determination module 150, and a database 160.

비대면 계좌개설 제어모듈(110)은 사용자 단말(200)로부터 수신된 신분증 이미지를 이용하여 신분증의 진위 여부를 확인하고, 사용자 단말(200)로부터 수신된 고객정보를 이용하여 비대면 계좌 개설 프로세스를 진행하도록 제어할 수 있다. The non-face-to-face account opening control module 110 checks the authenticity of the identification card using the identification card image received from the user terminal 200, and performs a non-face-to-face account opening process using the customer information received from the user terminal 200. You can control it to proceed.

또한, 비대면 계좌개설 제어모듈(110)은 상기 신분증 이미지에서 신분증 얼굴 이미지를 추출하고, 사용자 단말(200)에서 수신된 사용자 얼굴 이미지와 상기 신분증 얼굴 이미지를 비교하여 상기 사용자의 본인확인 여부를 수행하도록 상기 각부의 동작을 제어할 수 있다.In addition, the non-face-to-face account opening control module 110 extracts an ID card face image from the ID card image, compares the user face image received from the user terminal 200 with the ID card face image to verify the user's identity. The operation of each part can be controlled so as to be.

송수신모듈(120)은 상기 사용자 단말(200)에 비대면 계좌 개설 프로세스에 필요한 각종 데이터를 요청하고, 상기 사용자 단말(200)로부터 상기 고객 정보, 상기 신분증 이미지, 및 상기 사용자 얼굴 이미지 등을 수신할 수 있다. 또한, 송수신모듈(120)은 신분증의 진위 확인을 위해서 사용자 단말(200)로부터 수신된 상기 신분증 이미지를 신분증 진위확인 서버(300)에 전송할 수도 있다.The transmission/reception module 120 requests various data necessary for the non-face-to-face account opening process to the user terminal 200, and receives the customer information, the identification card image, and the user face image from the user terminal 200. I can. In addition, the transmission/reception module 120 may transmit the identification card image received from the user terminal 200 to the identification card authenticity confirmation server 300 in order to confirm the authenticity of the identification card.

그리고, 신분증 진위확인 모듈(130)은 사용자 단말(200)로부터 수신된 상기 신분증 이미지와 데이터베이스(160)에 기저장된 신분증 이미지 파일을 비교하여 상기 신분증의 진위 여부를 확인한다. 또한, 신분증 진위확인 모듈(130)은 신분증 진위확인 서버(300)에 상기 신분증 이미지의 진위 확인을 요청할 수도 있다. 그리고, 신분증 진위확인 모듈(130)은 상기 신분증 이미지에서 신분증 얼굴 이미지를 추출하고, 상기 신분증 얼굴 이미지의 특징점을 추출할 수 있다.Further, the identification card authenticity checking module 130 compares the identification card image received from the user terminal 200 with the identification card image file previously stored in the database 160 to check whether the identification card is authentic. In addition, the identification card authenticity confirmation module 130 may request the identification card authenticity confirmation server 300 to confirm the authenticity of the identification card image. Further, the identification card authenticity checking module 130 may extract an identification card face image from the identification card image and extract feature points of the identification card face image.

그리고, 신분증 진위확인 모듈(130)은 본 발명의 한 실시예에 따라 신분증 얼굴 추출부(132), 신분증 얼굴이미지 특정점 추출부(134), 그리고 신분증 진위 확인부(136)을 포함한다.In addition, the identification card authenticity checking module 130 includes an identification card face extracting unit 132, an identification card face image specific point extracting unit 134, and an identification card authenticity checking unit 136 according to an embodiment of the present invention.

신분증 얼굴 추출부(132)는 사용자 단말(200)로부터 수신된 신분증 이미지에서 신분증의 얼굴 이미지를 추출할 수 있다. The identification card face extracting unit 132 may extract a face image of the identification card from the identification card image received from the user terminal 200.

신분증 얼굴이미지 특정점 추출부(134)는 신분증 얼굴 추출부(132)에서 추출된 신분증 얼굴 이미지에서 특징점을 추출할 수 있다.The identification card face image specific point extracting unit 134 may extract a feature point from the identification card face image extracted by the identification card face extracting unit 132.

신분증 진위 확인부(136)는 사용자 단말(200)에서 수신된 신분증 이미지와 데이터베이스(160)에 기저장된 신분증 이미지 파일을 비교하여 상기 신분증의 진위 여부를 확인할 수 있다.The identification card authenticity check unit 136 may check whether the identification card is authentic by comparing the identification card image received from the user terminal 200 with the identification card image file previously stored in the database 160.

사용자 본인확인 모듈(140)은 사용자의 얼굴 이미지와 신분증 얼굴 이미지를 비교하여 신분증을 소지한 사용자가 상기 신분증의 진정한 당사자인지 여부를 확인할 수 있다. The user identification module 140 may compare the user's face image and the identification card face image to determine whether the user holding the identification card is a true party to the identification card.

예를 들어, 사용자 본인확인 모듈(140)은 사용자 단말(200)로부터 수신된 사용자 얼굴 이미지에서 특징점을 추출하고, 상기 사용자 얼굴 이미지의 특징점과 상기 신분증 얼굴이미지 특정점 추출부(134)에서 추출된 신분증 얼굴 이미지의 특징점을 비교함으로써, 특정 신분증으로 비대면 계좌를 개설하는 특정 사용자가 상기 특정 신분증의 진정한 당사자인지 여부를 확인할 수 있다. For example, the user identification module 140 extracts feature points from the user's face image received from the user terminal 200, and extracts feature points from the user's face image and the identification card face image specific point extraction unit 134. By comparing the feature points of the face image of the identification card, it is possible to check whether a specific user who opens a non-face-to-face account with a specific identification card is a true party to the specific identification card.

그리고, 사용자 본인확인 모듈(140)은 본 발명의 한 실시예에 따라 사용자 얼굴이미지 특정점 추출부(142), 특정점 비교부(144), 그리고 사용자 본인 확인부(146)을 포함한다.In addition, the user identification module 140 includes a user's face image specific point extraction unit 142, a specific point comparison unit 144, and a user identification unit 146 according to an embodiment of the present invention.

사용자 얼굴이미지 특정점 추출부(142)는 사용자 단말(200)로부터 수신된 사용자 얼굴 이미지에서 특징점을 추출할 수 있다.The user face image specific point extraction unit 142 may extract a feature point from the user face image received from the user terminal 200.

특정점 비교부(144)는 상기 사용자 얼굴이미지 특정점 추출부(142)에서 추출된 상기 사용자 얼굴 이미지의 특징점과 상기 신분증 얼굴이미지 특정점 추출부(134)에서 추출된 신분증 얼굴 이미지의 특징점을 비교할 수 있다. The specific point comparison unit 144 compares the feature points of the user's face image extracted from the user's face image specific point extracting unit 142 with the feature points of the identification card face image extracted from the identification card face image specific point extracting unit 134. I can.

사용자 본인 확인부(146)는 상기 특정점 비교부(144)에서의 특징점 비교 결과를 기초로 상기 신분증으로 비대면 계좌를 개설하는 사용자가 상기 신분증의 진정한 당사자인지 여부를 판단할 수 있다.The user identity verification unit 146 may determine whether a user who opens a non-face-to-face account with the identification card is a true party to the identification card based on the result of comparison of the characteristic points in the specific point comparison unit 144.

위조사진 판별모듈(150)은 딥러닝을 이용한 위조사진 판별 알고리즘을 통해서 동영상 위변조 영상 및 위변조 이미지를 감지할 수 있다. 그리고, 위조사진 판별모듈(150)은 사용자의 얼굴 이미지가 실제이미지 인지 또는 위변조사진 인지 여부를 판단할 수 있다.The counterfeit photo determination module 150 may detect a video forgery image and a forgery image through a forgery photo identification algorithm using deep learning. In addition, the forged photo determination module 150 may determine whether the user's face image is a real image or a forged photo.

예를 들어, 위조 사진 판별 알고리즘은 CNN(Convolutional Neural Network) 등으로 구성된 DTN(Deep Tree Network) 기반 딥 러닝 네트워크를 학습하고, 학습된 네트워크를 이용하여 입력 이미지가 실제이미지(Live) 인지, 혹은 사진을 들고 찍거나, 휴대폰 등의 영사기기를 이용하여 녹화해둔 영상을 들고 찍은 위변조이미지(Spoof) 인지 여부를 구분하는 작업을 수행할 수 있다.For example, the counterfeit photo identification algorithm learns a DTN (Deep Tree Network)-based deep learning network composed of CNN (Convolutional Neural Network), etc., and uses the learned network to recognize whether the input image is a real image (Live), or It is possible to identify whether or not it is a spoof taken while holding a picture or a video recorded using a projection device such as a mobile phone.

그리고, 위조사진 판별모듈(150)은 본 발명의 한 실시예에 따라 학습부(152), 위조사진 판별부(154), 그리고 이미지 크기 조정부(156)를 포함한다.Further, the forged photo determination module 150 includes a learning unit 152, a forged photo determination unit 154, and an image size adjustment unit 156 according to an embodiment of the present invention.

학습부(152)는 위조사진 판별을 위해서 DTN(Deep Tree Network) 네트워크를 학습할 수 있다. 예를 들어, 학습부(152)는 256x256사이즈의 이미지, 해당 이미지에서 가짜인 부분을 표시한 32x32사이즈의 이진수 마스크 맵(Mask Map), 그리고 해당 이미지가 실제이미지인지(Live) 혹은 위변조이미지(Spoof) 인지를 나타내는 라벨값(예를 들어, Live시 0, Spoof시 1의 값을 가짐)을 이용하여 DTN 네트워크를 학습시킬 수 있다.The learning unit 152 may learn a deep tree network (DTN) network in order to discriminate a fake photo. For example, the learning unit 152 includes a 256x256 size image, a 32x32 size binary mask map that displays a fake part of the image, and whether the image is a real image (Live) or a spoof image (Spoof). ) The DTN network can be trained using a label value indicating recognition (eg, 0 for Live and 1 for Spoof).

여기서, 이진수 마스크 맵(Mask Map)은 실제이미지에서 전부 0 값을 갖고, 위변조이미지에서는 전부 1 값을 가질 수 있다. 하지만, 화장을 했다거나, 좀 두꺼운 안경을 썼거나 등으로 얼굴을 가리는 무언가가 있을 경우에는 해당 화장된 부분 혹은 안경의 부분만을 1로 가질 수 있다. 그리고, 실제 학습시에는 이진수 마스크 맵(Mask Map)을 상기 라벨값에 따라 전부 0, 혹은 전부 1로 통일하여 학습시킬 수도 있다.Here, the binary mask map may have all 0 values in the actual image and all 1 values in the forged and altered image. However, if you wear makeup, wear thick glasses, or have something that covers your face with the back, you can have only the makeup part or the part of the glasses as 1. In the actual learning, a binary mask map may be trained by unifying all 0s or all 1s according to the label value.

도 3은 본 발명의 한 실시예에 따른 DTN 네트워크의 구조를 도시함 도면이다. 3 is a diagram showing the structure of a DTN network according to an embodiment of the present invention.

도 3에서 볼 수 있듯이 본 발명의 위조 사진 판별 알고리즘은 총 7개의 CRU(Convolutional Residual Unit)(400a 내지 400c), 7개의 TRU(Tree Routing Unit)(500a 내지 500c), 그리고 8개의 SFL(Supervised Feature Learning)(600)을 포함할 수 있다. As can be seen in FIG. 3, the algorithm for determining a fake photo of the present invention includes a total of 7 Convolutional Residual Units (CRUs) 400a to 400c, 7 Tree Routing Units (TRUs) 500a to 500c, and 8 Supervised Features (SFLs). Learning) (600) may be included.

예를 들어, CRU(400a 내지 400c)는 CNN(Convolutional Neural Network) 세개가 합쳐져서 구성되고, 해당 입력값에서 특징점을 뽑아내는 역할을 할 수 있다. 그리고, CRU(400a)에서 추출된 특징점이 TRU(500a)에 의해 정해진 다음 CRU(400b)의 입력값으로 입력될 수 있다.For example, the CRUs 400a to 400c are configured by combining three CNNs (Convolutional Neural Networks), and may play a role of extracting a feature point from a corresponding input value. Then, the feature point extracted from the CRU 400a may be determined by the TRU 500a and then input as an input value of the CRU 400b.

그리고, TRU(500a 내지 500c)는 CNN 세개가 합쳐져서 구성되지만, CRU(400a)와 다르게, 결과값을 이용하여 입력값을 왼쪽 CRU 혹은 오른쪽 CRU로 보낼지를 결정하는 역할을 한다. 여기서, TRU(500a 내지 500c)는 어느 CRU로 갈 지만 정하고, 실제로 보내는 값은 CRU에서 처리된 특징점 값을 그대로 보낼 수 있다.In addition, the TRUs 500a to 500c are configured by combining three CNNs, but, unlike the CRU 400a, the TRU plays a role of determining whether to send the input value to the left CRU or the right CRU using the result value. Here, the TRUs 500a to 500c only determine which CRU to go to, and the value actually sent may send the feature point value processed by the CRU as it is.

그리고, SFL(600)는 CNN 다섯개로 구성되며, SFL에 들어온 입력값으로부터 예상되는 마스크 맵 결과값, 그리고 예상되는 라벨값을 도출하는 역할을 할 수 있다. 그리고, SFL(600)는 마스크 맵 결과값과 라벨값들, 및 실제값의 오류값 등을 이용하여 네트워크의 변수값을 조정할 수 있다.Further, the SFL 600 is composed of five CNNs, and may play a role of deriving an expected mask map result value and an expected label value from an input value entered into the SFL. In addition, the SFL 600 may adjust the variable value of the network using the mask map result value, label values, and error value of the actual value.

위조사진 판별부(154)는 상기 학습부(152)에서 학습된 네트워크에 사용자 단말(200)로부터 수신된 사용자 얼굴 이미지를 입력하고, 상기 사용자 얼굴 이미지가 실제이미지인지 또는 위변조 사진인지 여부를 판단할 수 있다.The counterfeit photo determination unit 154 inputs the user face image received from the user terminal 200 into the network learned by the learning unit 152, and determines whether the user face image is a real image or a forged photo. I can.

그리고, 위조사진 판별부(154)는 결과값으로 SFL(600)에서 0 내지 1 사이의 값을 도출하고, 도출된 이미지를 기준값과 비교하여 위변조 여부를 판별할 수 있다. 예를 들어, 결과값이 0에 가까우면 실제이미지인지(Live)로 판정할 수 있고, 1에 가까우면 위변조이미지(Spoof)로 판정할 수 있다. 또흔, 위조사진 판별부(154)는 기준값(예를 들어, 0.3)을 설정하고, 상기 기준값보다 크면 위변조이미지로 판별하고, 상기 기준값보다 작으면 실제이미지로 판별할 수 있다.In addition, the forged photo determination unit 154 may derive a value between 0 and 1 from the SFL 600 as a result value, and compare the derived image with a reference value to determine whether or not forgery has been altered. For example, if the result value is close to 0, it can be determined as a real image (Live), and if it is close to 1, it can be determined as a spoof. In addition, the forged photo determination unit 154 may set a reference value (eg, 0.3), and if it is greater than the reference value, it may be determined as a forged and modulated image, and if it is smaller than the reference value, it may be determined as an actual image.

그리고, 이미지 크기 조정부(156)는 사용자 단말(200)로부터 수신된 사용자 얼굴 이미지의 크기가 설정된 사이즈(예를 들어, 256x256)보다 크거나 작은 경우 이미지의 크기를 조정할 수 있다. 그리고, 이미지 크기 조정부(156)는 크기가 조정된 사용자 얼굴 이미지를 상기 위조사진 판별부(154)에 제공할 수 있다.In addition, the image size adjustment unit 156 may adjust the size of the image when the size of the user's face image received from the user terminal 200 is larger or smaller than a set size (eg, 256x256). In addition, the image size adjustment unit 156 may provide the face image of the user whose size has been adjusted to the forged photo determination unit 154.

따라서, 본 발명은 딥러닝을 이용한 위조사진 판별 알고리즘을 통해서 동영상 위변조 영상이나 이미지를 감지하고, 사용자의 얼굴 이미지가 실제 이미지인지 또는 위조 사진인지 여부를 판단함으로써, 비대면 계좌 개설의 신뢰성을 향상시킬 수 있는 환경을 제공한다.Therefore, the present invention detects a video forgery or altered image or image through a fake photo identification algorithm using deep learning, and determines whether the user's face image is a real image or a fake photo, thereby improving the reliability of opening a non-face-to-face account. Provide an environment that can be used.

도 4는 본 발명의 한 실시예에 따른 사용자 단말의 개략적인 구성을 나타낸 블록도이다. 이때, 사용자 단말(200)은 본 발명의 실시예에 따른 설명을 위해 필요한 개략적인 구성만을 도시할 뿐 이러한 구성에 국한되는 것은 아니다.4 is a block diagram showing a schematic configuration of a user terminal according to an embodiment of the present invention. In this case, the user terminal 200 only shows a schematic configuration necessary for description according to an embodiment of the present invention, but is not limited to this configuration.

도 4를 참조하면, 본 발명의 한 실시예에 따른 사용자 단말(200)은 사용자 어플리케이션(210), 통신부(250), 입력부(260), 제1 카메라(270), 제2 카메라(272), 디스플레이부(280) 그리고 저장부(290)를 포함한다. 4, a user terminal 200 according to an embodiment of the present invention includes a user application 210, a communication unit 250, an input unit 260, a first camera 270, a second camera 272, and A display unit 280 and a storage unit 290 are included.

사용자 어플리케이션(210)은 사용자 단말(200)에 설치되고, 비대면 계좌 개설 서버(100)와의 통신을 통해서 비대면 계좌 개설 프로세스를 진행한다. 그리고, 사용자 어플리케이션(210)은 입력부(260)를 통해 사용자로부터 비대면 계좌 개설에 필요한 고객정보를 입력받고, 입력된 고객정보를 통신부(250)를 통해서 비대면 계좌 개설 서버(100)에 전송할 수 있다. 또한, 사용자 어플리케이션(210)은 비대면 계좌 개설과 관련된 각종 데이터를 저장부(290)에 저장하고, 저장된 데이터를 송금이나 계좌이체 등에 사용할 수도 있다.The user application 210 is installed in the user terminal 200 and performs a non-face-to-face account opening process through communication with the non-face-to-face account opening server 100. In addition, the user application 210 receives customer information required for non-face-to-face account opening from the user through the input unit 260, and transmits the input customer information to the non-face-to-face account opening server 100 through the communication unit 250. have. In addition, the user application 210 may store various data related to a non-face-to-face account opening in the storage unit 290, and may use the stored data for remittance or account transfer.

그리고, 사용자 어플리케이션(210)은 본 발명의 한 실시예에 따라 어플리케이션 제어부(220), 인증부(230), 그리고 카메라 구동 제어부(240)를 포함한다.In addition, the user application 210 includes an application control unit 220, an authentication unit 230, and a camera driving control unit 240 according to an embodiment of the present invention.

어플리케이션 제어부(220)는 비대면 계좌 개설 서버(100)와의 통신을 통해서 상기 비대면 계좌 개설 프로세스를 진행하도록 각부의 동작을 제어할 수 있다.The application control unit 220 may control the operation of each unit to proceed with the non-face-to-face account opening process through communication with the non-face-to-face account opening server 100.

인증부(230)는 신분증의 진위 확인 여부를 수행하도록 사용자의 신분증 이미지를 비대면 계좌 개설 서버(100)에 제공할 수 있다. 또한, 인증부(230)는 상기 신분증을 소지한 사용자의 본인확인 여부를 수행하도록 사용자의 얼굴 이미지를 비대면 계좌 개설 서버(100)에 제공할 수 있다. 물론, 필요한 경우에 상기 인증부(230)는 신분증 이미지의 진위 확인 또는 사용자의 본인확인 절차를 직접 수행할 수도 있다.The authentication unit 230 may provide the user's identification card image to the non-face-to-face account opening server 100 so as to verify the authenticity of the identification card. In addition, the authentication unit 230 may provide the user's face image to the non-face-to-face account opening server 100 so as to verify the identity of the user who has the identification card. Of course, if necessary, the authentication unit 230 may directly perform a procedure for verifying the authenticity of the ID card image or verifying the user's identity.

그리고, 인증부(230)는 본 발명의 한 실시예에 따라 신분증 인증부(232), 그리고 사용자 인증부(234)를 포함한다. In addition, the authentication unit 230 includes an identification card authentication unit 232 and a user authentication unit 234 according to an embodiment of the present invention.

신분증 인증부(232)는 소정의 절차 및 사용자의 조작에 의해서 상기 사용자 단말(200)의 후방에 배치된 제1 카메라(270)를 구동시킬 수 있고, 이를 통해서 사용자 단말(200)은 사용자의 신분증을 촬영하여 신분증 이미지를 생성할 수 있다. 그리고, 신분증 인증부(232)는 상기 통신부(250)를 통해서 비대면 계좌 개설 서버(100)에 상기 신분증 이미지를 제공할 수 있다.The identification card authentication unit 232 can drive the first camera 270 disposed at the rear of the user terminal 200 by a predetermined procedure and a user's manipulation, through which the user terminal 200 You can create an ID image by taking a picture. In addition, the identification card authentication unit 232 may provide the identification card image to the non-face-to-face account opening server 100 through the communication unit 250.

또한, 사용자 인증부(234)는 사용자 단말(200)의 디스플레이부(280)에서 상기 비대면 계좌 개설에 필요한 고객정보가 입력되는 도중에, 상기 사용자 단말(200)의 전방에 배치된 제2 카메라(272)를 백그라운드 모드로 구동시킬 수 있다. 여기서, 백그라운드 모드는 사용자 단말(200)의 디스플레이부(280)에는 노출되지 않으면서 카메라가 구동되거나, 사용자가 상기 카메라가 구동중인 것을 인지할 수 없는 상태를 포함한다.In addition, the user authentication unit 234 is a second camera disposed in front of the user terminal 200 while the customer information required for opening the non-face-to-face account is being input from the display unit 280 of the user terminal 200. 272) can be driven in a background mode. Here, the background mode includes a state in which the camera is driven without being exposed to the display unit 280 of the user terminal 200 or the user cannot recognize that the camera is being driven.

예를 들어, 사용자 인증부(234)는 사용자가 특정화면에서 특정한 고객정보를 입력하고 있고 있거나, 혹은 비대면 계좌 개설 서버(100)로부터 특정한 제어신호를 수신한 경우에, 상기 제2 카메라(272)를 백그라운드 모드로 구동시킬 수 있고, 제2 카메라(272)를 통해서 사용자의 얼굴 이미지를 촬영할 수 있다. 그리고, 사용자 인증부(234)는 상기 통신부(250)를 통해서 상기 사용자 얼굴 이미지를 비대면 계좌 개설 서버(100)에 제공할 수 있다.For example, the user authentication unit 234, when the user is inputting specific customer information on a specific screen, or when a specific control signal is received from the non-face-to-face account opening server 100, the second camera 272 ) May be driven in a background mode, and a face image of the user may be captured through the second camera 272. In addition, the user authentication unit 234 may provide the user's face image to the non-face-to-face account opening server 100 through the communication unit 250.

카메라 구동 제어부(240)는 상기 인증부(230)의 동작에 대응하여 제1 카메라(270) 및 제2 카메라(272)의 구동을 제어할 수 있다. 또한, 카메라 구동 제어부(240)는 상기 카메라들의 동작 및 상기 인증부(230)의 동작에 대응하여 프리뷰 모듈(242) 또는 가상 프리뷰 모듈(244)을 구동시킬 수도 있다. The camera driving control unit 240 may control driving of the first camera 270 and the second camera 272 in response to the operation of the authentication unit 230. In addition, the camera driving control unit 240 may drive the preview module 242 or the virtual preview module 244 in response to the operation of the cameras and the operation of the authentication unit 230.

그리고, 카메라 구동 제어부(240)는 본 발명의 한 실시예에 따라 프리뷰 모듈(242), 그리고 가상 프리뷰 모듈(244)를 포함한다.In addition, the camera driving control unit 240 includes a preview module 242 and a virtual preview module 244 according to an embodiment of the present invention.

프리뷰 모듈(242)은 제1 카메라(270)가 구동되어 신분증을 촬영하는 경우에 구동되어 가이드라인을 생성하고, 생성된 가이드라인을 사용자 단말(200)의 디스플레이부(280)에 표시할 수 있다.The preview module 242 may be driven when the first camera 270 is driven to take an ID card to generate a guideline and display the generated guideline on the display unit 280 of the user terminal 200. .

가상 프리뷰 모듈(244)은 제2 카메라(272)가 백그라운드 모드에서 구동되는 경우에 백그라운드 모드로 구동될 수 있으며, 가상 가이드라인을 생성할 수 있다. 그리고 이때 생성된 가상 가이드 라인은 사용자 단말(200)의 디스플레이부(280) 상에 노출되거나 표시되지 않을 수 있다. The virtual preview module 244 may be driven in a background mode when the second camera 272 is driven in a background mode, and may generate a virtual guideline. In addition, the generated virtual guide line may be exposed or not displayed on the display unit 280 of the user terminal 200.

또한, 사용자 어플리케이션(210)은 상기 가상 가이드 라인 내에 사용자의 얼굴이 배치될 때 상기 사용자 얼굴 이미지를 촬영하도록 상기 제2 카메라(272)의 동작을 제어할 수 있다. In addition, the user application 210 may control the operation of the second camera 272 to capture the user's face image when the user's face is placed in the virtual guide line.

이와 같이, 본 발명은 사용자 단말의 전방에 배치된 카메라를 백그라운드 모드에서 구동시에, 가상 프리뷰 모듈을 상기 백그라운드 모드에서 구동하여 가상 가이드 라인을 생성하고, 상기 가상 가이드 라인 내에 사용자의 얼굴이 배치될 때 상기 사용자의 얼굴 이미지를 촬영함으로써, 백그라운드 모드에서의 사용자 얼굴 촬영 및 인식 확률을 증가시킬 수 있는 환경을 제공한다.As described above, the present invention generates a virtual guide line by driving a virtual preview module in the background mode when the camera disposed in front of the user terminal is driven in the background mode, and when the user's face is placed in the virtual guide line. By capturing the user's face image, an environment capable of increasing the probability of capturing and recognizing the user's face in the background mode is provided.

도 5는 본 발명의 한 실시예에 따라 비대면 계좌 개설 시스템에서 신분증 진위 확인과 사용자 본인 확인을 병렬로 처리하여 비대면 계좌를 개설하는 과정을 간략히 도시한 흐름도이고, 도 6은 신분증 진위 확인과 사용자 본인 확인을 통해서 비대면 계좌를 개설하는 예를 도시한 도면이다. 이때, 이하의 흐름도는 도 1 내지 도 4의 구성과 연계하여 동일한 도면부호를 사용하여 설명한다.FIG. 5 is a flow chart schematically illustrating a process of opening a non-face-to-face account by parallel processing identification and user identification in a non-face-to-face account opening system according to an embodiment of the present invention. A diagram showing an example of opening a non-face-to-face account through user identification. In this case, the following flowchart will be described using the same reference numerals in connection with the configurations of FIGS. 1 to 4.

도 5 및 도 6을 참조하면, 본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템(10)은 비대면 계좌 개설 서버(100)가 사용자 단말(200)로부터 비대면 계좌 개설 요청을 수신한 경우, 비대면 계좌 개설에 필요한 고객 정보 등의 각종 데이터를 사용자 단말(200)에 요청할 수 있다(S102, S104). 5 and 6, the non-face-to-face account opening system 10 according to an embodiment of the present invention is when the non-face-to-face account opening server 100 receives a non-face-to-face account opening request from the user terminal 200 , Various data such as customer information necessary for opening a non-face-to-face account may be requested from the user terminal 200 (S102, S104).

그리고, 비대면 계좌 개설 서버(100)는 사용자 단말(200)로부터 신분증 이미지를 획득하고, 획득된 신분증 이미지의 진위여부를 확인할 수 있다(S106, S108). 이때, 비대면 계좌 개설 서버(100)는 상기 신분증 이미지를 신분증 진위확인 서버(300)에 전송하여 상기 신분증 이미지의 진위 확인을 요청할 수 있다. 물론, 비대면 계좌 개설 서버(100)는 데이터베이스(160)에 기저장된 신분증 이미지 파일을 비교하여 상기 신분증의 진위 여부를 확인할 수도 있다.In addition, the non-face-to-face account opening server 100 may obtain an identification card image from the user terminal 200 and check whether the obtained identification card image is authentic (S106, S108). In this case, the non-face-to-face account opening server 100 may transmit the identification card image to the identification card authenticity verification server 300 to request authenticity verification of the identification card image. Of course, the non-face-to-face account opening server 100 may check the authenticity of the identification card by comparing the identification card image files previously stored in the database 160.

이와 동시에, 비대면 계좌 개설 서버(100)는 사용자 단말(200)로부터 사용자 얼굴 이미지를 획득하고, 비대면 계좌 개설을 진행하는 사용자가 신분증의 진정한 당사자인지 여부를 확인할 수 있다(S110).At the same time, the non-face-to-face account opening server 100 may obtain a user's face image from the user terminal 200 and check whether the user who proceeds to open the non-face-to-face account is a true party to the identification card (S110).

이때, 비대면 계좌 개설 서버(100)는 딥러닝을 이용한 위조사진 판별 알고리즘을 통해서 사용자 단말(200)로부터 수신된 사용자 얼굴 이미지가 실제사진인지 또는 위조사진인지 여부를 판별할 수 있다(S112).In this case, the non-face-to-face account opening server 100 may determine whether the user's face image received from the user terminal 200 is a real photo or a fake photo through a fake photo determination algorithm using deep learning (S112).

그리고, 상기 사용자 얼굴 이미지가 위조사진이 아닌 경우에, 비대면 계좌 개설 서버(100)는 상기 사용자 얼굴 이미지의 특징점과 신분증 얼굴 이미지의 특징점을 비교하여 상기 사용자의 본인확인 여부를 수행할 수 있다(S114).And, when the user's face image is not a forged picture, the non-face-to-face account opening server 100 may perform identity verification of the user by comparing the feature points of the user's face image with the feature points of the ID card face image ( S114).

그리고 나서, 비대면 계좌 개설 서버(100)는 신분증의 진위가 확인되고, 비대면 계좌를 개설하는 사용자가 상기 신분증의 당사자로 확인된 경우에 비대면 계좌를 개설할 수 있다(S116).Then, the non-face-to-face account opening server 100 may open a non-face-to-face account when the authenticity of the identification card is confirmed and the user who opens the non-face-to-face account is confirmed as a party to the identification card (S116).

이와 같이, 본 발명은 비대면 계좌를 개설하는 사용자가 제공하는 신분증의 진위 확인 여부를 수행하고, 이와 동시에 해당 신분증을 소지한 사용자의 본인확인 여부를 수행하여 비대면 계좌를 개설함으로써, 비대면 계좌 개설의 신뢰성을 확보하고, 타인의 신분증을 도용하여 비대면으로 계좌를 개설하는 사기를 미연에 방지할 수 있는 환경을 제공한다.As described above, the present invention performs verification of the authenticity of the identification card provided by the user who opens a non-face-to-face account, and at the same time, performs identification of the user holding the corresponding identification card to open a non-face-to-face account, It provides an environment to secure the credibility of opening and prevent fraud of opening an account non-face-to-face by stealing someone else's ID card.

도 7은 본 발명의 한 실시예에 따라 사용자 단말에서 제2 카메라를 백그라운드 모드로 구동시켜 사용자 얼굴이미지를 획득하여 비대면 계좌 개설을 신청하는 과정을 간략히 도시한 흐름도이다. 이때, 이하의 흐름도는 도 1 내지 도 4의 구성과 연계하여 동일한 도면부호를 사용하여 설명한다.7 is a flowchart schematically illustrating a process of applying for a non-face-to-face account opening by acquiring a user face image by driving a second camera in a background mode in a user terminal according to an embodiment of the present invention. In this case, the following flowchart will be described using the same reference numerals in connection with the configurations of FIGS. 1 to 4.

도 7을 참조하면, 본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템(10)은 사용자가 사용자 어플리케이션을 사용자 단말(200)에 설치한 후, 약관 동의 및 고객정보 입력 등을 통해서 비대면 계좌를 개설할 수 있다(S202 내지 S206).Referring to FIG. 7, in the non-face-to-face account opening system 10 according to an embodiment of the present invention, after a user installs a user application on the user terminal 200, a non-face-to-face account is entered through agreement of terms and conditions and input of customer information. Can be opened (S202 to S206).

그리고, 사용자 단말(200)은 제1 카메라(270)를 구동하여 신분증을 촬영하여 비대면 계좌 개설에 필요한 신분증 이미지를 생성할 수 있다(S208). 이때, 사용자 단말(200)은 프리뷰 모듈을 구동시키고, 디스플레이부(280)에 가이드라인을 표시하여 신분증을 촬영할 수 있다(S210 및 S212).In addition, the user terminal 200 may generate an ID image required for opening a non-face-to-face account by driving the first camera 270 to take an ID card (S208). In this case, the user terminal 200 drives the preview module and displays a guideline on the display unit 280 to take an ID card (S210 and S212).

또한, 사용자 단말(200)은 디스플레이부(280)에서 비대면 계좌 개설에 필요한 고객정보가 입력되는 도중에, 제2 카메라(272)를 백그라운드 모드로 구동시키고, 사용자 얼굴을 촬영하여 사용자 얼굴 이미지를 촬영할 수 있다(S214). 이때, 사용자 단말(200)은 가상 프리뷰 모듈을 구동시켜 가상 가이드 라인을 생성하고, 상기 가상 가이드 라인에 사용자의 얼굴이 검출될 때 제2 카메라(272)를 동작시켜 사용자 얼굴을 촬영할 수도 있다(S216 내지 S220). In addition, the user terminal 200 drives the second camera 272 in the background mode while the display unit 280 is inputting customer information necessary for opening a non-face-to-face account, and captures the user's face image. Can be (S214). In this case, the user terminal 200 may generate a virtual guideline by driving the virtual preview module, and when the user's face is detected in the virtual guideline, the user terminal 200 may operate the second camera 272 to take a picture of the user's face (S216). To S220).

그리고, 사용자 단말(200)은 상기 고객 정보, 상기 신분증 이미지, 및 상기 사용자 얼굴 이미지를 비대면 계좌 개설 서버(100)에 전송하여 비대면 계좌를 개설할 수 있다(S222).Further, the user terminal 200 may open a non-face-to-face account by transmitting the customer information, the identification card image, and the user's face image to the non-face-to-face account opening server 100 (S222).

이와 같이, 본 발명은 비대면 계좌를 개설하기 위해서 사용자가 고객정보를 입력하는 도중에, 사용자 단말의 전방카메라를 백그라운드 모드로 구동시켜 사용자의 얼굴 이미지를 촬영함으로써, 비대면 계좌 개설의 절차를 간소화하고 인증시간을 단축하면서도 비대면 계좌 개설의 신뢰성을 확보할 수 있는 환경을 제공한다.As described above, the present invention simplifies the procedure of opening a non-face-to-face account by taking a face image of the user by driving the front camera of the user terminal in the background mode while the user inputs customer information in order to open a non-face-to-face account. It provides an environment in which the reliability of non-face-to-face account opening can be secured while shortening the authentication time.

도 8은 본 발명의 한 실시예에 따라 학습된 위조사진 판별 알고리즘을 통해서 위조사진 여부를 판별하는 과정을 간략히 도시한 흐름도이다. 이때, 이하의 흐름도는 도 1 내지 도 4의 구성과 연계하여 동일한 도면부호를 사용하여 설명한다.8 is a flow chart schematically illustrating a process of determining whether a forged photo exists through a learned forged photo identification algorithm according to an embodiment of the present invention. In this case, the following flowchart will be described using the same reference numerals in connection with the configurations of FIGS. 1 to 4.

도 8을 참조하면, 본 발명의 한 실시예에 따른 비대면 계좌 개설 서버(100)는 위조사진 판별을 위해서 DTN(Deep Tree Network) 네트워크를 학습시킬 수 있다(S302). Referring to FIG. 8, the non-face-to-face account opening server 100 according to an embodiment of the present invention may train a Deep Tree Network (DTN) network to determine a forged photo (S302).

그리고, 비대면 계좌 개설 서버(100)는 학습된 DTN 네트워크에 사용자 단말(200)로부터 수신된 사용자 얼굴 이미지를 입력한다(S304).Then, the non-face-to-face account opening server 100 inputs the user's face image received from the user terminal 200 to the learned DTN network (S304).

이때, 비대면 계좌 개설 서버(100)는 사용자 얼굴 이미지의 크기가 설정된 사이즈 보다 크거나 작은 경우에 상기 사용자 얼굴 이미지의 크기를 조정할 수 있다(S306).In this case, the non-face-to-face account opening server 100 may adjust the size of the user's face image when the size of the user's face image is larger or smaller than the set size (S306).

그리고, 비대면 계좌 개설 서버(100)는 입력된 사용자 얼굴 이미지로부터 SFL의 결과값을 도출하고, 도출된 결과값을 기설정된 기준값과 비교할 수 있다(S308, S310).In addition, the non-face-to-face account opening server 100 may derive a result value of the SFL from the input user's face image, and compare the derived result value with a preset reference value (S308, S310).

예를 들어, 비대면 계좌 개설 서버(100)는 상기 SLF의 결과값이 상기 기준값보다 크면 위변조이미지로 판별하고, 상기 기준값보다 작으면 실제이미지로 판별할 수 있다(S312).For example, if the result value of the SLF is greater than the reference value, the non-face-to-face account opening server 100 may determine it as a forgery image, and if it is smaller than the reference value, it may determine it as an actual image (S312).

도 9는 본 발명의 한 실시예에 따라 신분증 얼굴 이미지와 사용자 얼굴 이미지를 비교하여 비대면 계좌를 개설하는 과정을 간략히 도시한 흐름도이다. 이때, 이하의 흐름도는 도 1 내지 도 4의 구성과 연계하여 동일한 도면부호를 사용하여 설명한다.9 is a flowchart schematically illustrating a process of opening a non-face-to-face account by comparing a face image of an identification card with a face image of a user according to an embodiment of the present invention. In this case, the following flowchart will be described using the same reference numerals in connection with the configurations of FIGS. 1 to 4.

도 9를 참조하면, 본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템(10)은 사용자 단말(200)에 비대면 계좌 개설을 위한 사용자 어플리케이션이 설치된다(S402). 9, in the non-face-to-face account opening system 10 according to an embodiment of the present invention, a user application for opening a non-face-to-face account is installed on the user terminal 200 (S402).

그리고, 사용자 단말(200)은 약관동의 등의 절차를 거쳐서 비대면 계좌 개설 서버(10)에 비대면 계좌 개설을 요청할 수 있다(S404).Then, the user terminal 200 may request a non-face-to-face account opening to the non-face-to-face account opening server 10 through a procedure such as agreement to terms and conditions (S404).

이때, 사용자 단말(200)은 사용자 단말(200)의 후방에 배치된 제1 카메라(270)를 구동시켜 신분증을 촬영하고, 생성된 신분증 이미지를 비대면 계좌 개설 서버(10)에 전송할 수 있다(S406 내지 S410).At this time, the user terminal 200 may take an identification card by driving the first camera 270 disposed at the rear of the user terminal 200 and transmit the generated identification card image to the non-face-to-face account opening server 10 ( S406 to S410).

그리고, 비대면 계좌 개설 서버(10)는 기저장된 신분증 이미지 파일을 비교하여 상기 신분증의 진위 여부를 확인할 수 있다(S412). In addition, the non-face-to-face account opening server 10 may check whether the identification card is authentic or not by comparing the previously stored identification card image files (S412).

또한, 비대면 계좌 개설 서버(10)는 신분증 이미지에서 신분증 얼굴 이미지를 추출하고, 추출된 신분증 얼굴 이미지에서 특징점을 추출할 수 있다(S412 및 S414).In addition, the non-face-to-face account opening server 10 may extract an ID card face image from the ID card image and extract feature points from the extracted ID card face image (S412 and S414).

이때, 사용자 단말(200)에서는 사용자가 비대면 계좌 개설에 필요한 고객정보를 입력하는 도중에, 사용자 단말(200)의 전방에 배치된 제2 카메라(272)를 백그라운드 모드로 구동시킬 수 있다(S418 및 S420).At this time, the user terminal 200 may drive the second camera 272 disposed in front of the user terminal 200 in the background mode while the user inputs customer information necessary for opening a non-face-to-face account (S418 and S420).

그리고, 상기 제2 카메라(272)는 사용자가 인지하지 못하고 있는 상태에서 사용자의 얼굴을 촬영하고 사용자 얼굴 이미지를 생성할 수 있다(S422).In addition, the second camera 272 may capture the user's face and generate the user's face image in a state that the user is not aware of it (S422).

또한, 사용자 단말(200)은 생성된 사용자 얼굴 이미지를 비대면 계좌 개설 서버(10)에 전송할 수 있다(S424).In addition, the user terminal 200 may transmit the generated user face image to the non-face-to-face account opening server 10 (S424).

그리고, 비대면 계좌 개설 서버(10)는 딥러닝을 이용한 위조사진 판별 알고리즘을 통해서 사용자 단말(200)로부터 수신된 사용자 얼굴 이미지가 위조사진인지 여부를 판별할 수 있다(S428).In addition, the non-face-to-face account opening server 10 may determine whether the user's face image received from the user terminal 200 is a forged photo through a fake photo determination algorithm using deep learning (S428).

판별 결과, 상기 사용자 얼굴 이미지가 상기 사용자를 직접 촬영한 실제이미지인 경우, 비대면 계좌 개설 서버(10)는 사용자 얼굴 이미지의 특징점을 추출하고, 사용자 얼굴 이미지의 특징점과 신분증 얼굴 이미지의 특징점을 비교할 수 있다(S426 내지 S430).As a result of the determination, if the user's face image is a real image photographed by the user, the non-face-to-face account opening server 10 extracts the feature points of the user's face image and compares the feature points of the user's face image with the feature points of the ID card face image. It can be (S426 to S430).

그리고, 비대면 계좌 개설 서버(10)는 신분증의 진위가 확인되고, 상기 신분증으로 비대면 계좌를 개설하는 사용자가 상기 신분증의 진정한 당사자로 본인확인된 경우에 비대면 계좌를 개설할 수 있다(S432 및 S434).In addition, the non-face-to-face account opening server 10 may open a non-face-to-face account when the authenticity of the identification card is verified, and the user who opens a non-face-to-face account with the identification card is identified as a true party to the identification card (S432). And S434).

이와 같이, 본 발명의 한 실시예에 따른 비대면 계좌 개설 시스템 및 이를 이용한 비대면 계좌 개설 방법은 비대면 계좌를 개설하는 사용자가 제공하는 신분증의 진위 확인 여부를 수행하고, 이와 동시에 해당 신분증을 소지한 사용자의 본인확인 여부를 수행하여 비대면 계좌를 개설함으로써, 비대면 계좌 개설의 신뢰성을 확보하고, 타인의 신분증을 도용하여 비대면으로 계좌를 개설하는 사기를 미연에 방지할 수 있는 환경을 제공한다.As described above, the non-face-to-face account opening system and the non-face-to-face account opening method using the same according to an embodiment of the present invention perform verification of the authenticity of the identification card provided by the user who opens the non-face-to-face account, and at the same time hold the corresponding identification card. By performing identity verification of one user and opening a non-face-to-face account, it secures the reliability of opening a non-face-to-face account, and provides an environment to prevent fraud in opening an account in a non-face-to-face by stealing another person's ID card. do.

이상에서 설명한 본 발명의 실시예는 장치 및 방법을 통해서만 구현이 되는 것은 아니며, 본 발명의 실시예의 구성에 대응하는 기능을 실현하는 프로그램 또는 그 프로그램이 기록된 기록 매체를 통해 구현될 수도 있다. 이러한 기록 매체는 서버뿐만 아니라 사용자 단말에서도 실행될 수 있다.The embodiments of the present invention described above are not implemented only through an apparatus and a method, but may be implemented through a program that realizes a function corresponding to the configuration of the embodiment of the present invention or a recording medium on which the program is recorded. Such a recording medium can be executed not only in the server but also in the user terminal.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다. Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements by those skilled in the art using the basic concept of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

Claims

A user terminal that photographs the user's identification card to generate an identification card image, and receives customer information necessary for opening a non-face-to-face account from the user, and
Receiving the image of the identification card photographed from the user terminal to check the authenticity of the identification card, receiving the customer information to proceed with a non-face-to-face account opening process, the customer information is displayed by the user on the display of the user terminal Comprising a non-face-to-face account opening server for performing identity verification of the user by comparing the user's face image automatically photographed in the background mode of the user terminal during the input and the face image of the identification card,
The user terminal,
A first camera disposed at the rear of the user terminal and photographing the identification card;
A second camera disposed in front of the user terminal and photographing the user's face, and
A user application for driving the second camera in the background mode while the customer information required for opening the non-face-to-face account is input on the display screen of the user terminal,
The user application generates a virtual guideline by driving a virtual preview module in the background mode when the second camera is driven in the background mode, and the user face image when the user's face is placed in the virtual guideline. Non-face-to-face account opening system, characterized in that for controlling the operation of the second camera to automatically photograph.

In claim 1,
The non-face-to-face account opening server,
A transmission/reception module for requesting data necessary for a non-face-to-face account opening process to the user terminal and receiving the customer information, the identification card image, and the user face image from the user terminal, and
An identification card authenticity verification module that compares the received identification card image with a previously stored identification card image file to check the authenticity of the identification card, extracts an identification card face image from the identification card image, and extracts feature points of the identification card face image
Non-face-to-face account opening system comprising a.

In paragraph 2,
The non-face-to-face account opening server,
A fake photo determination module that determines whether the user's face image received from the user terminal is a real image or a fake photo through a learned fake photo determination algorithm
A non-face-to-face account opening system further comprising.

In paragraph 3,
The non-face-to-face account opening server,
User identification module that extracts the feature points of the user's face image and compares the feature points of the user's face image with the feature points of the identification card face image to verify the user's identity
A non-face-to-face account opening system further comprising.

delete

In how the non-face-to-face account opening server opens an account non-face-to-face,
The non-face-to-face account opening server receiving, by the user terminal, an identification card image of an identification card,
Extracting, by the non-face-to-face account opening server, an identification card face image from the identification card image,
Receiving, by the non-face-to-face account opening server, an image of a user's face automatically photographed in a background mode of the user terminal while customer information required for the non-face-to-face account opening is input by the user to a display unit of the user terminal , And
Comprising, by the non-face-to-face account opening server, comparing the face image of the user and the face image of the identification card to verify the identity of the user,
The user terminal,
A first camera disposed at the rear of the user terminal and photographing the identification card;
A second camera disposed in front of the user terminal and photographing the user's face, and
A user application for driving the second camera in the background mode while the customer information required for opening the non-face-to-face account is input on the display screen of the user terminal,
The user application generates a virtual guideline by driving a virtual preview module in the background mode when the second camera is driven in the background mode, and the user face image when the user's face is placed in the virtual guideline. Non-face-to-face account opening method, characterized in that controlling the operation of the second camera to automatically photograph the.

In clause 7,
Comparing the received identification card image with a previously stored identification card file to check whether the identification card is authentic or not
A non-face-to-face account opening method further comprising.

In clause 7,
The step of performing identity verification of the user,
Determining whether the user's face image is a real image or a fake photo through a learned fake photo identification algorithm
A non-face-to-face account opening method comprising a.

In clause 7,
The step of performing identity verification of the user,
Extracting feature points of the user face image,
Extracting feature points of the face image of the identification card, and
Comparing the specific point of the user's face image and the characteristic point of the ID card face image
A non-face-to-face account opening method comprising a.

delete

The user's identification card is photographed with a first camera placed at the rear of the user terminal to generate an identification card image, and while customer information necessary for opening a non-face-to-face account is input to the display unit of the user terminal, the user terminal Including; a user application for automatically driving the second camera disposed in the front in a background mode to capture the user's face to generate a user face image; and
The user application generates a virtual guideline by driving a virtual preview module in the background mode when the second camera is driven in the background mode, and the user face image when the user's face is placed in the virtual guideline. A computer-readable recording medium on which a non-face-to-face account opening program is recorded, characterized in that controlling the operation of the second camera so as to automatically take a picture.