KR20030093464A - Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition - Google Patents

Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition Download PDF

Info

Publication number
KR20030093464A
KR20030093464A KR1020020031033A KR20020031033A KR20030093464A KR 20030093464 A KR20030093464 A KR 20030093464A KR 1020020031033 A KR1020020031033 A KR 1020020031033A KR 20020031033 A KR20020031033 A KR 20020031033A KR 20030093464 A KR20030093464 A KR 20030093464A
Authority
KR
South Korea
Prior art keywords
mobile communication
face
security
feature information
communication terminal
Prior art date
Application number
KR1020020031033A
Other languages
Korean (ko)
Inventor
김호성
Original Assignee
(주)아이엠에이테크놀로지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)아이엠에이테크놀로지 filed Critical (주)아이엠에이테크놀로지
Priority to KR1020020031033A priority Critical patent/KR20030093464A/en
Publication of KR20030093464A publication Critical patent/KR20030093464A/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06Authentication

Abstract

PURPOSE: A method for certifying the security of a mobile communication terminal using face recognition is provided to reduce a memory capacity of the mobile communication terminal and to use a function of the mobile communication terminal depending on each security level by comparing and verifying the face characteristic information of a user with the previously registered face characteristic information. CONSTITUTION: A face image is obtained by capturing a face of the user(S100). The face characteristic information is extracted from the face image, and a shape and a color of the face is converted into a parameter(S101). In case of the registration and change, the face characteristic information converted into the parameter is transmitted to a mobile communication company server, and is registered or updated(S104). In case of the security certification through the face characteristic information, the face characteristic information stored in the mobile communication company server is requested and verified(S106). The function of the mobile communication terminal is unlocked according to the security level(S108).

Description

얼굴인식을 이용한 이동통신단말기의 보안 인증방법{Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition}Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition}

본 발명은 얼굴인식을 이용한 이동통신단말기의 보안 인증방법에 관한 것으로서, 특히 이동통신단말기의 화상카메라를 통해 캡쳐된 사용자의 얼굴 특징정보를 얼굴형상 및 얼굴색으로 파라미터(Parameter)화하여 이동통신사 서버에 기등록되어 저장된 상기 사용자의 얼굴 특징정보와 비교 검증함으로써, 각 보안단계에 따라 상기 이동통신단말기의 기능을 차별화시켜 사용자를 보안 인증하기 위한 얼굴인식을 이용한 이동통신단말기의 보안 인증방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a security authentication method of a mobile communication terminal using face recognition, and in particular, parameterizes facial feature information of a user captured through an image camera of a mobile communication terminal into a face shape and a color of a face to a mobile communication server. The present invention relates to a security authentication method of a mobile communication terminal using face recognition for verifying security of a user by differentiating a function of the mobile communication terminal according to each security step by comparing and verifying with facial feature information of the user.

일반적으로, 휴대전화 등 이동통신단말기의 기능을 보안 인증하는 방법으로는 비밀번호 입력이 사용되어 왔다. 그러나, 상기 비밀번호를 통한 보안 인증방법은 사용자가 비밀번호를 기억하지 못할 경우 별도의 전화기로 이동통신회사에 전화를 걸어 사용자 인증확인을 받아야 하는 번거로움이 있고, 상기 이동통신단말기를 분실하거나 도난당했을 경우 오용될 수 있는 문제점이 있었다. 특히, 근래에는 이동통신단말기를 통한 무선인터넷 이용 및 결제기능이 상용화되고 있어 상기한 문제의 중요성이 커지고 있는 실정이다.In general, a password input has been used as a method for securely authenticating a function of a mobile communication terminal such as a cellular phone. However, the security authentication method using the password is a hassle to call the mobile communication company with a separate phone to receive the user authentication confirmation if the user does not remember the password, if the mobile communication terminal is lost or stolen There was a problem that could be misused. In particular, in recent years, the use of the wireless Internet and payment function through a mobile communication terminal has been commercialized, the importance of the above problem is increasing.

따라서, 상기 비밀번호를 통한 보안 인증방법의 문제점을 해결하기 위한 방법의 일환으로, 얼굴인식기술을 이용하여 이동통신단말기를 보안 인증하는 방법들이 다수 공개되어 있다. 즉, 종래의 얼굴인식기술을 이용한 이동통신단말기 보안 인증방법은 IMT-2000 등의 이동통신단말기를 통해 사용자의 얼굴을 캡쳐하여 상기 이동통신단말기의 메모리에 저장했다가 보안 인증 필요시 캡쳐되는 사용자의 얼굴정보와 비교분석하여 일치할 경우(기준값 이상일 경우) 보안 인증하는 것이다.Therefore, as part of a method for solving the problem of the security authentication method using the password, a number of methods for security authentication of the mobile communication terminal using face recognition technology are disclosed. That is, the conventional mobile communication terminal security authentication method using face recognition technology captures the user's face through a mobile communication terminal such as IMT-2000, stores it in the memory of the mobile communication terminal, and captures the user's face when security authentication is required. If it compares with the face information and matches (more than the standard value), it is security authentication.

그러나, 상기한 종래의 보안 인증방법은 일일이 사용자의 얼굴을 캡쳐하여 이동통신단말기의 메모리에 저장해야 하기 때문에 상기 메모리의 용량이 더 커져야하는 문제점이 있고, 보안 인증시에 상기 메모리에 저장된 얼굴정보와 정확히 일치해야 하므로 얼굴각도, 조명변화, 나이 등에 따라 변화되는 얼굴정보에 대처하면서 상기 이동통신단말기를 이용하기 힘든 문제점이 있다. 또한, 상대적으로 중요하지 않은 이동통신단말기의 기능 이용시에도 캡쳐되는 사용자의 얼굴정보가 상기 메모리에 저장된 얼굴정보와 일치해야 하므로, 사용자의 얼굴영상을 반복적으로 재입력시켜야 하는 문제가 생길 수 있다.However, the conventional security authentication method has a problem in that the capacity of the memory needs to be larger because the face of the user must be captured and stored in the memory of the mobile communication terminal. Because it must match exactly, there is a problem that it is difficult to use the mobile communication terminal while coping with face information that changes according to face angle, light change, age, and the like. In addition, even when using a function of a relatively insignificant mobile communication terminal, since the face information of the user to be captured must match the face information stored in the memory, there may be a problem that the user's face image must be repeatedly input.

상기한 문제점들을 해결하기 위한 본 발명의 목적은, IMT-2000 등 이동통신단말기의 화상카메라를 통해 캡쳐된 사용자의 얼굴 특징정보를 얼굴형상 및 얼굴색으로 파라미터화(변수화)하고 이동통신사 서버에 기등록된 상기 사용자의 얼굴 특징정보와 비교 검증하여 각 보안단계에 따라 상기 이동통신단말기의 기능을 차별화시켜 보안 인증함으로써, 상기 이동통신단말기의 메모리 용량을 줄이고 상기 각 보안등급에 따라 이동통신단말기의 기능을 이용할 수 있는 얼굴인식을 이용한 이동통신단말기의 보안 인증방법을 제공하는데 있다.An object of the present invention for solving the above problems is to parameterize (parameterize) the facial feature information of a user captured through an image camera of a mobile communication terminal such as IMT-2000 into a face shape and a face color and register it with a mobile communication company server. By comparing and verifying the facial feature information of the user with the different security functions by differentiating the functions of the mobile communication terminal according to each security step, reducing the memory capacity of the mobile communication terminal and the function of the mobile communication terminal according to each security level The present invention provides a security authentication method for a mobile communication terminal using face recognition.

도 1은 본 발명의 일 실시예에 따른 이동통신단말기의 보안 인증방법을 개략적으로 설명하기 위한 구성도이다.1 is a configuration diagram schematically illustrating a security authentication method of a mobile communication terminal according to an embodiment of the present invention.

도 2는 본 발명의 일 실시예에 따른 이동통신단말기의 보안 인증방법을 위한 이동통신단말기의 구성을 부분적으로 나타내는 블록도이다.2 is a block diagram partially illustrating a configuration of a mobile communication terminal for a security authentication method of a mobile communication terminal according to an embodiment of the present invention.

도 3은 본 발명의 일 실시예에 따른 얼굴인식을 이용한 이동통신단말기의 보안 인증방법을 나타내는 흐름도이다.3 is a flowchart illustrating a security authentication method of a mobile communication terminal using face recognition according to an embodiment of the present invention.

도 4a는 도 3의 단계 101을 좀 더 구체적으로 설명하기 위한 흐름도이다.FIG. 4A is a flowchart for describing step 101 of FIG. 3 in more detail.

도 4b는 도 3의 단계 108에서 각 보안등급에 따라 달라지는 보안 해제방법을 설명하기 위한 흐름도이다.FIG. 4B is a flowchart for describing a security releasing method that varies according to each security level in step 108 of FIG. 3.

※도면의 주요부분에 대한 부호의 설명※ Explanation of symbols for main parts of drawing

10: 이동통신단말기 11: 화상카메라10: mobile communication terminal 11: video camera

12: 영상신호처리부 13: 정지화상캡쳐부12: Image signal processor 13: Still image capture unit

14: 얼굴특징정보 처리부 15: 마이크로프로세서14: facial feature information processing unit 15: a microprocessor

16: 송수신부 17: 메모리부16: transceiver 17: memory

18: 디스플레이부 20: 이동통신사 서버18: display unit 20: mobile carrier server

상기 목적을 달성하기 위한 본 발명에 따른 얼굴인식을 이용한 이동통신단말기의보안 인증방법은, 이동통신단말기 사용자가 얼굴정보를 입력하면 사용자의 얼굴을 갭쳐하여 얼굴영상을 획득하는 단계; 상기 획득된 얼굴영상에서 얼굴 특징정보를 추출하여 얼굴형상 및 얼굴색을 파라미터값으로 변환하는 단계; 상기 얼굴 특징정보를 이동통신사 서버에 등록/변경할지 확인하는 단계; 상기 얼굴 특징정보를 통해 보안 인증할지 확인하는 단계; 상기 이동통신사 서버에 등록/변경할 경우, 상기 파라미터값으로 변환된 얼굴 특징정보를 상기 이동통신사 서버로 전송하여 얼굴특징정보 데이터베이스에 저장 또는 업데이트하는 단계; 상기 얼굴 특징정보를 통해 보안 인증할 경우, 상기 이동통신사 서버로 상기 사용자의 기저장된 얼굴 특징정보를 요청하여 상기 이동통신사 서버로부터 수신되는 얼굴 특징정보와 비교 검증하는 단계 및 상기 수신된 얼굴 특징정보와 일치하는지 확인하여 그 일치 정도에 따라 기설정된 보안등급에 의해 상기 이동통신단말기의 기능을 보안 해제하는 단계를 포함하여 이루어진다.According to an aspect of the present invention, there is provided a security authentication method of a mobile communication terminal using face recognition, the method comprising: obtaining a face image by capturing a face of a user when a user inputs face information; Extracting face feature information from the acquired face image and converting a face shape and a face color into parameter values; Confirming whether to register / change the facial feature information to a mobile communication company server; Confirming whether to authenticate security using the facial feature information; When registering / changing in the mobile telecommunication company server, transmitting the facial feature information converted into the parameter value to the mobile telecommunication company server and storing or updating the facial feature information database; In the case of security authentication through the face feature information, requesting the pre-stored face feature information of the user to the mobile communication company server, comparing and verifying with the face feature information received from the mobile communication company server, and receiving the received face feature information and Checking whether there is a match and releasing security of the function of the mobile communication terminal by a preset security level according to the degree of matching.

상기 보안등급은, 상기 이동통신단말기의 통화기능만을 허용하는 보안 1단계, 상기 통화기능을 포함하고 인터넷 접속, 자기번호/통화목록 확인, 벨소리 선택, 일정관리 등의 상기 이동통신단말기 기능을 허용하는 보안 2단계 및 상기 보안 2단계의 기능을 포함하며 휴대폰 관리와 결제기능을 허용하는 보안 3단계로 이루어지는 것이 바람직하다.The security level is a security step 1 to allow only the call function of the mobile communication terminal, including the call function and to allow the mobile communication terminal functions such as Internet access, self-number / call list check, ringtone selection, schedule management, etc. It comprises a security two-stage and the security two-stage function and preferably consists of a three-stage security to allow mobile phone management and payment functions.

상기 각 보안등급에는 상기 이동통신사 서버로부터 수신된 얼굴 특징정보와 상기 입력된 사용자의 얼굴 특징정보를 비교 검증하기 위해 서로 다른 비교 기준값이 설정되는 것이 바람직하다.Preferably, different security reference values are set for each security level to compare and verify the facial feature information received from the mobile communication company server and the input facial feature information of the user.

이하에서 본 발명에 따른 얼굴인식을 이용한 이동통신단말기의 보안 인증방법의 바람직한 일 실시예를 첨부한 도면을 참조로 상세히 설명한다.Hereinafter, with reference to the accompanying drawings a preferred embodiment of a security authentication method of a mobile communication terminal using face recognition according to the present invention will be described in detail.

도 1은 본 발명의 일 실시예에 따른 이동통신단말기의 보안 인증방법을 개략적으로 설명하기 위한 구성도이다. 도면에서 도시되고 있는 것처럼, 본 발명에 따른 이동통신단말기의 보안 인증방법은, 우선 IMT-2000 등의 이동통신단말기(10)에 부착된 화상카메라(11)를 통해 입력되는 사용자의 얼굴을 캡쳐한 후, 얼굴 특징정보를 이동통신사 서버(20)의 얼굴특징정보 DB(21)에 저장 또는 업데이트하여 등록/변경해 둔다. 그리고, 상기 이동통신단말기(10)의 보안 인증 필요시, 이동통신단말기(10)를 통해 이동통신사 서버(20)의 얼굴특징정보 DB(21)에 기저장된 얼굴 특징정보를 요청하면 이동통신사 서버(20)는 상기 얼굴특징정보를 이동통신단말기(10)로 전송한다. 상기 이동통신단말기(10)는 이동통신사 서버(20)로부터 수신된 얼굴특징정보와 현재 입력된 사용자의 얼굴 특징정보를 비교 검증하여 일치 정도에 따라 기설정된 보안등급에 의해 이동통신단말기(10)의 기능을 보안 해제한다.1 is a configuration diagram schematically illustrating a security authentication method of a mobile communication terminal according to an embodiment of the present invention. As shown in the figure, the security authentication method of the mobile communication terminal according to the present invention, first captured the face of the user input through the image camera 11 attached to the mobile communication terminal 10, such as IMT-2000 Thereafter, the facial feature information is stored or updated in the facial feature information DB 21 of the mobile communication company server 20 to be registered / modified. When the security authentication of the mobile communication terminal 10 is required, the mobile communication server 10 requests the facial feature information previously stored in the facial feature information DB 21 of the mobile communication company server 20 through the mobile communication terminal 10. 20) transmits the facial feature information to the mobile communication terminal (10). The mobile communication terminal 10 compares and verifies the facial feature information received from the mobile communication company server 20 and the facial feature information of the currently input user, and determines that the mobile communication terminal 10 of the mobile communication terminal 10 is set according to a preset security level. Unsecure the feature.

상기 이동통신사 서버(20)는 데이터 통신을 위한 송수신장치, 마이크로프로세서, 각종 DB 서버, 응용서버(Application Server) 등으로 이루어지며, 상기 DB 서버는 사용자 확인을 위한 사용자정보 DB(22)를 포함할 수 있다. 상기한 이동통신사 서버(20)의 구성은 무선 인터넷 분야에서 이미 공지된 기술에 해당하는 바, 이하에서 상세한 설명은 생략한다.The mobile telecommunication company server 20 is composed of a transceiver for data communication, a microprocessor, various DB servers, an application server (Application Server), etc., the DB server may include a user information DB 22 for user confirmation. Can be. The configuration of the mobile telecommunication company server 20 corresponds to a technique already known in the wireless Internet field, and a detailed description thereof will be omitted below.

도 2는 본 발명의 일 실시예에 따른 얼굴인식을 이용한 이동통신단말기의 보안 인증방법을 위한 이동통신단말기의 구성을 부분적으로 나타내는 블록도이다.2 is a block diagram partially illustrating a configuration of a mobile communication terminal for a security authentication method of a mobile communication terminal using face recognition according to an embodiment of the present invention.

도면에서 나타낸 바와 같이, 본 발명에 따른 보안 인증방법을 위한 이동통신단말기(10)는, 사용자의 얼굴을 촬영하여 얼굴영상을 획득하기 위한 화상카메라(11), 상기 화상카메라(11)를 통해 획득된 얼굴영상신호를 엔코딩하여 마이크로프로세서(15)로 출력하는 영상신호처리부(12), 화상카메라(11)로부터 출력되는 얼굴영상신호를 캡쳐하여 디지털 신호로 변환하는 정지화상캡쳐부(13), 마이크로프로세서(15)와 연동하여 상기 정지화상캡쳐부(13)의 출력신호에서 얼굴 특징정보를 추출하고 얼굴형상 및 얼굴색을 파라미터값으로 변환하는 얼굴특징정보 처리부(14), 상기 파라미터값으로 변환된 얼굴 특징정보를 이동통신망을 통해 이동통신사 서버로 송신하고 보안 인증시 상기 이동통신사 서버로부터 저장된 상기 얼굴 특징정보를 수신하는 송수신부(16), 보안등급 설정 등 본 발명에 따른 제어프로그램을 저장하기 위한 프로그램 메모리와 데이터 연산처리를 위한 데이터 메모리를 포함하는 메모리부(17) 및 상기 각 구성요소들을 전반적으로 제어하고 상기 설정된 보안등급에 따라 이동통신단말기(10)의 기능을 보안 해제하여 디스플레이부(18)를 통해 출력하는 마이크로프로세서(15)를 포함한다.As shown in the figure, the mobile communication terminal 10 for the security authentication method according to the present invention is obtained through the image camera 11, the image camera 11 for obtaining a face image by photographing the user's face The image signal processor 12 for encoding the face image signal to be output to the microprocessor 15, the still image capture unit 13 for capturing the face image signal output from the image camera 11, and converting the face image signal into a digital signal; The facial feature information processor 14 which extracts facial feature information from the output signal of the still image capturing unit 13 and converts a face shape and a face color into a parameter value in cooperation with the processor 15, and the face converted into the parameter value. Transmitting and receiving unit 16 for transmitting feature information to a mobile communication server through a mobile communication network and receiving the facial feature information stored from the mobile communication company server during security authentication. A memory unit 17 including a program memory for storing a control program according to the present invention, such as a class setting, and a data memory for data operation processing, and each of the above components, and the mobile communication terminal according to the set security level. And a microprocessor 15 for releasing the security of 10 and outputting the same through the display unit 18.

상기 메모리부(17)는 상기 입력된 얼굴 특징정보를 별도로 저장하지 않으며, 상기 마이크로프로세서(15)는 영상신호처리부(12)로부터 입력되는 얼굴영상신호를 디스플레이부(18)를 통해 동화상으로 그대로 출력할 수 있고, 보안등급에 따라 통화기능 허용시 송수신부(16)를 통해 다른 이동통신단말기(10)로 전송되어 디스플레이될 수 있다. 상기 송수신부(16)는 동화상, 정지화상, 음성, 문자 등 각종 데이터 신호를 다중화/역다중화하고 변복조하여 송수신하는 통신장치이다.The memory unit 17 does not separately store the input face feature information, and the microprocessor 15 outputs the face image signal input from the image signal processing unit 12 as a moving image through the display unit 18 as it is. In accordance with the security level, the call function may be transmitted to and displayed on another mobile communication terminal 10 through the transceiver 16 when the call function is allowed. The transceiver 16 is a communication device that multiplexes / demultiplexes, modulates and demodulates various data signals such as moving pictures, still pictures, voices, and texts.

참고로, 도 2는 본 발명에 따른 보안 인증방법을 위한 이동통신단말기(10)의 구성만을 개략적으로 나타낸 것이며, 상기한 구성의 이동통신단말기(10)는 통상의 IMT-2000 휴대전화단말기, PDA, 노트북 PC에 적용될 수 있다. 이러한 구성의 단말기 장치 및 데이터 송수신방법은 대부분 공개된 기술에 해당하는 것으로서, 본 발명은 이러한 공개된 기술을 이용하여 새로운 효과를 창출하기 위한 보안 인증방법임을 밝혀둔다.For reference, Figure 2 schematically shows the configuration of the mobile communication terminal 10 for the security authentication method according to the present invention, the mobile communication terminal 10 of the above configuration is a conventional IMT-2000 mobile phone terminal, PDA , Can be applied to notebook PC. The terminal device and the data transmission / reception method of such a configuration mostly correspond to the disclosed technology, and the present invention discloses a security authentication method for creating a new effect using the disclosed technology.

도 3은 본 발명의 일 실시예에 따라 도 1과 도 2에서 나타낸 이동통신단말기(10) 및 이동통신사 서버(20)를 이용해 이동통신단말기(10)를 보안 인증하는 방법을 나타내는 흐름도이다.3 is a flowchart illustrating a method of securely authenticating a mobile communication terminal 10 using the mobile communication terminal 10 and the mobile communication company server 20 shown in FIGS. 1 and 2 according to an embodiment of the present invention.

우선, 이동통신단말기(10)의 사용자가 화상카메라(11)를 통해 얼굴정보를 입력하면 정지화상캡쳐부(13)를 통해 사용자의 얼굴을 갭쳐하여 얼굴영상을 획득하고(S100), 마이크로프로세서(15)와 연동되는 얼굴특징정보 처리부(14)를 통해 상기 정지화상캡쳐부(13)의 얼굴영상에서 얼굴 특징정보를 추출하여 얼굴형상 및 얼굴색을 파라미터값으로 변환한다(S101). 그리고, 상기 얼굴 특징정보를 이동통신사 서버(20)에 등록 또는 변경할지 확인하여(S102), 상기 이동통신사 서버(20)에 등록/변경할 경우, 상기 파라미터값으로 변환된 얼굴 특징정보를 송수신부(16)를 통해 이동통신사 서버(20)로 전송하여 얼굴특징정보 DB(21)에 저장 또는 업데이트한다(S104).First, when a user of the mobile communication terminal 10 inputs face information through the image camera 11, the user captures a face image by capturing the face of the user through the still image capturing unit 13 (S100), and the microprocessor ( The facial feature information processing unit 14 linked with 15) extracts facial feature information from the facial image of the still image capture unit 13 and converts the face shape and the face color into parameter values (S101). Also, by checking whether the face feature information is registered or changed in the mobile communication company server 20 (S102), when registering / changing in the mobile communication company server 20, the face feature information converted into the parameter value is transmitted and received ( 16, it is transmitted to the mobile communication company server 20 and stored or updated in the facial feature information DB (21) (S104).

만약 이동통신사 서버(20)에 등록/변경하지 않는다면, 상기 얼굴 특징정보를 통해 사용자를 보안 인증할지 확인한다(S103). 상기 얼굴 특징정보를 통해 보안 인증할 경우, 이동통신사 서버(20)로 상기 사용자의 기저장된 얼굴 특징정보를요청하고(S105), 마이크로프로세서(15)는 이동통신사 서버(20)로부터 수신되는 얼굴 특징정보를 현재 입력된 사용자의 얼굴 특징정보와 비교 검증한다(S106).If not registered / modified in the mobile communication company server 20, it is checked whether the user is securely authenticated through the facial feature information (S103). When the security feature is authenticated through the face feature information, the mobile communication company server 20 requests previously stored face feature information of the user (S105), and the microprocessor 15 receives the face feature received from the mobile communication company server 20. The information is compared and verified with the facial feature information of the user currently input (S106).

이 때, 비교되는 각각의 얼굴 특징정보는 파라미터로 변환된 값이며, 마이크로프로세서(15)는 얼굴특징정보 처리부(14)를 통해 파라미터화된 현재 사용자의 얼굴 특징정보가 이동통신사 서버(20)로부터 수신된 얼굴 특징정보와 일정 기준값 이상으로 일치하는지 확인하여(S107), 기준값 이상으로 일치할 경우 그 일치 정도에 따라 메모리부(17)에 기설정된 보안등급에 의해 이동통신단말기(10)의 기능을 보안 해제한다(S108). 만약, 상기 기준값 미만일 경우에는 디스플레이부(18)를 통해 사용자에게 얼굴정보를 재입력하도록 요구하고(S109), 단계 100으로 돌아간다.At this time, each of the facial feature information to be compared is a value converted into a parameter, the microprocessor 15 is the facial feature information of the current user parameterized by the facial feature information processing unit 14 from the mobile communication company server 20 Check whether or not the received facial feature information matches a predetermined reference value or more (S107), and if it matches more than the reference value, the function of the mobile communication terminal 10 by the security level preset in the memory unit 17 according to the degree of matching. Release the security (S108). If the reference value is less than the reference value, the display unit 18 requests the user to input the face information again (S109), and returns to step 100.

도 4a는 도 3의 단계 101을 좀 더 구체적으로 설명하기 위한 흐름도로서, 이동통신단말기(10)의 마이크로프로세서(15)와 연동되는 얼굴특징정보 처리부(14)에서 구현되는 것이다. 즉, 얼굴특징정보 처리부(14)는 정지화상캡쳐부(13)를 통해 획득된 사용자의 얼굴영상정보에서 얼굴영역을 탐색하여(S200), 눈, 코, 입 등 얼굴의 형태, 기하학적 배치를 포함하는 얼굴형상과 주변배경, 밝기나 조명 등에 따른 얼굴색 등 얼굴 특징정보를 추출한다(S201). 그리고, 상기 추출된 얼굴형상 및 얼굴색 등의 얼굴 특징정보에서 상기 주변배경, 밝기나 조명에 따라 변화되는 얼굴색 또는 얼굴영상의 명도, 화상카메라(11)와의 거리 또는 나이에 따른 얼굴크기, 표정변화에 따른 얼굴영상의 기울어짐 등에 따라 변화되는 상기 얼굴 특징정보의 변화값을 미리 규정해 둠으로써 상기한 변화를 교정한다(S202). 그 후, 상기 교정된 얼굴 특징정보의 얼굴형상 및 얼굴색을 파라미터값으로 변환한다(S203).FIG. 4A is a flowchart illustrating step 101 of FIG. 3 in more detail, and is implemented in the facial feature information processor 14 interoperating with the microprocessor 15 of the mobile communication terminal 10. That is, the facial feature information processing unit 14 searches for a face region in the face image information of the user acquired through the still image capturing unit 13 (S200), and includes the shape and geometric arrangement of the face such as eyes, nose, and mouth. The facial feature information such as the face shape and the surrounding background, the face color according to the brightness or the lighting is extracted (S201). In addition, in the extracted facial feature information such as the extracted face shape and face color, the brightness of the face color or face image that is changed according to the surrounding background, the brightness or the illumination, the face size according to the distance or age with the image camera 11, and the facial expression change. The change is corrected by predefining a change value of the facial feature information that changes according to the tilting of the face image, in step S202. Thereafter, the face shape and the face color of the corrected face feature information are converted into parameter values (S203).

상기 얼굴 특징정보를 추출하고 파라미터화(변수화)하는 방법으로 눈, 코, 입 등 얼굴의 특징점들을 찾는 안면검출방법, 상기 특징점들간의 상대적 위치를 변수화하는 직접 변수화, 상기 검출된 특징점들을 일정 패턴으로 선형조합하여 나타내는 간접 변수화 등 공지된 다양한 방법들이 적용될 수 있다.Facial detection method for finding facial feature points such as eyes, nose, mouth, etc. by extracting and parameterizing the facial feature information, parameterizing the relative position between the feature points, and detecting the detected feature points in a predetermined pattern Various known methods may be applied, such as indirect parameterization represented by linear combination.

도 4b는 도 3의 단계 108에서 각 보안등급에 따라 달라지는 보안 해제방법을 설명하기 위한 흐름도이다. 즉, 본 발명에 따른 보안등급은, 이동통신단말기(10)의 통화기능만을 허용하는 보안 1단계, 상기 보안 1단계의 통화기능을 허용하고 인터넷 접속, 자기번호/통화목록 확인, 벨소리 선택, 일정관리 등의 이동통신단말기(10) 기능을 허용하는 보안 2단계 및 상기 보안 2단계의 기능을 허용하며 휴대폰 관리와 결제기능을 허용하는 보안 3단계로 이루어지며, 이동통신사 서버(20)로부터 수신된 얼굴 특징정보와 현재 입력된 얼굴 특징정보를 비교 검증하기 위해 상기 각 보안등급별로 서로 다른 비교 기준값이 설정된다.FIG. 4B is a flowchart for describing a security releasing method that varies according to each security level in step 108 of FIG. 3. That is, the security level according to the present invention, the security stage 1, which allows only the call function of the mobile communication terminal 10, allows the call function of the security step 1, Internet access, self-number / call list check, ringtone selection, schedule It consists of two stages of security that allows the mobile communication terminal 10 functions such as management and three stages of security that allows the security two-stage function, and permits mobile phone management and payment function, received from the mobile communication company server 20. In order to compare and verify the facial feature information and the currently input facial feature information, different comparison reference values are set for each security level.

물론 상기 각 보안등급별 비교 기준값은 도 3의 단계 107에서 설정된 일정 기준값 이상이어야 하며, 상기 각 보안등급별 이동통신단말기(10)의 기능은 메모리부(17)와 연동된 마이크로프로세서(15)의 제어신호에 의해 키패드(미도시), 송수신부(16), 디스플레이부(18) 등으로 출력되어 보안 해제되는 것이다.Of course, the comparison reference value for each security level should be equal to or greater than a predetermined reference value set in step 107 of FIG. 3, and the function of the mobile communication terminal 10 for each security level is the control signal of the microprocessor 15 linked to the memory unit 17. By outputting to the keypad (not shown), the transmission and reception unit 16, the display unit 18 and the like is released security.

전술한 바와 같이 본 발명의 일 실시예에 따른 이동통신단말기의 보안 인증방법에 의하면, 사용자의 얼굴 특징정보를 이동통신사 서버(20)에 저장 또는 업데이트하고 이동통신단말기의 보안 인증 필요시에만 상기 저장/변경된 얼굴 특징정보를 요청하여 비교 검증함으로써 이동통신단말기(10)의 메모리 용량을 줄이고, 설정된 각 보안등급에 따라 이동통신단말기의 기능을 차별화하여 보안 인증할 수 있다.As described above, according to the security authentication method of the mobile communication terminal according to an embodiment of the present invention, the user's face feature information is stored or updated in the mobile communication company server 20 and stored only when the security authentication of the mobile communication terminal is required. By requesting / verifying and verifying the changed facial feature information, the memory capacity of the mobile communication terminal 10 can be reduced, and the function of the mobile communication terminal can be differentiated and security certified according to each set security level.

이상에서 살펴본 바와 같이 본 발명에 따른 얼굴인식을 이용한 이동통신단말기의 보안 인증방법에 의하면, IMT-2000 등 이동통신단말기의 화상카메라를 통해 캡쳐된 사용자의 얼굴 특징정보를 얼굴형상 및 얼굴색으로 파라미터화하고 이동통신사 서버에 기등록된 상기 사용자의 얼굴 특징정보와 비교 검증하여 각 보안단계에 따라 상기 이동통신단말기의 기능을 차별화시켜 보안 인증함으로써, 상기 이동통신단말기의 메모리 용량을 줄이고, 상기 각 보안등급에 따라 이동통신단말기의 기능을 이용할 수 있는 효과가 있다.As described above, according to the security authentication method of the mobile communication terminal using the face recognition according to the present invention, parameterization of the facial feature information of the user captured by the image camera of the mobile communication terminal, such as IMT-2000 into a face shape and face color And verify and compare the feature information of the user's face registered in the mobile communication company server to differentiate and secure the function of the mobile communication terminal according to each security step, thereby reducing the memory capacity of the mobile communication terminal, According to the effect that can use the function of the mobile communication terminal.

이상에서 본 발명은 기재된 구체예에 대해서만 상세히 설명하였지만 본 발명의 기술사상 범위 내에서 다양한 변형 및 수정이 가능함은 당업자에게 있어서 명백한 것이며, 이러한 변형 및 수정이 첨부된 특허청구범위에 속함은 당연한 것이다.Although the present invention has been described in detail only with respect to the described embodiments, it will be apparent to those skilled in the art that various modifications and variations are possible within the technical spirit of the present invention, and such modifications and modifications belong to the appended claims.

Claims (3)

이동통신단말기 사용자가 얼굴정보를 입력하면 사용자의 얼굴을 갭쳐하여 얼굴영상을 획득하는 단계;Obtaining a face image by capturing a face of a user when a user of the mobile communication terminal inputs face information; 상기 획득된 얼굴영상에서 얼굴 특징정보를 추출하여 얼굴형상 및 얼굴색을 파라미터값으로 변환하는 단계;Extracting face feature information from the acquired face image and converting a face shape and a face color into parameter values; 상기 얼굴 특징정보를 이동통신사 서버에 등록/변경할지 확인하는 단계;Confirming whether to register / change the facial feature information to a mobile communication company server; 상기 얼굴 특징정보를 통해 보안 인증할지 확인하는 단계;Confirming whether to authenticate security using the facial feature information; 상기 이동통신사 서버에 등록/변경할 경우, 상기 파라미터값으로 변환된 얼굴 특징정보를 상기 이동통신사 서버로 전송하여 얼굴특징정보 데이터베이스에 저장 또는 업데이트하는 단계;When registering / changing in the mobile telecommunication company server, transmitting the facial feature information converted into the parameter value to the mobile telecommunication company server and storing or updating the facial feature information database; 상기 얼굴 특징정보를 통해 보안 인증할 경우, 상기 이동통신사 서버로 상기 사용자의 기저장된 얼굴 특징정보를 요청하여 상기 이동통신사 서버로부터 수신되는 얼굴 특징정보와 비교 검증하는 단계; 및When the security authentication is performed through the face feature information, requesting the pre-stored face feature information of the user to the mobile communication company server and comparing the face feature information received from the mobile communication company server; And 상기 수신된 얼굴 특징정보와 일치하는지 확인하여 그 일치 정도에 따라 기설정된 보안등급에 의해 상기 이동통신단말기의 기능을 보안 해제하는 단계;Checking whether the received facial feature information matches the security feature and releasing the security of the function of the mobile communication terminal according to a preset security level according to the matching degree; 를 포함하여 이루어지는 얼굴인식을 이용한 이동통신단말기의 보안 인증방법.Security authentication method of a mobile communication terminal using a face recognition comprising a. 제 1 항에 있어서,The method of claim 1, 상기 보안등급은,The security level is 상기 이동통신단말기의 통화기능만을 허용하는 보안 1단계;Security first step of allowing only a call function of the mobile communication terminal; 상기 통화기능을 포함하고 인터넷 접속, 자기번호/통화목록 확인, 벨소리 선택, 일정관리 등의 상기 이동통신단말기 기능을 허용하는 보안 2단계; 및A second security step including the call function and permitting the mobile communication terminal functions such as internet access, self-number / call list check, ringtone selection, and schedule management; And 상기 보안 2단계의 기능을 포함하며 휴대폰 관리와 결제기능을 허용하는 보안 3단계;A security third step including a security step 2 function and allowing a mobile phone management and a payment function; 로 이루어지는 것을 특징으로 하는 상기 얼굴인식을 이용한 이동통신단말기의 보안 인증방법.Security authentication method of a mobile communication terminal using the face recognition, characterized in that consisting of. 제 2 항에 있어서,The method of claim 2, 상기 각 보안등급에는 상기 이동통신사 서버로부터 수신된 얼굴 특징정보와 상기 입력된 사용자의 얼굴 특징정보를 비교 검증하기 위해 서로 다른 비교 기준값이 설정되는 것을 특징으로 하는 상기 얼굴인식을 이용한 이동통신단말기의 보안 인증방법.The security level of the mobile communication terminal using the face recognition is set in each security level, different comparison reference values are set to compare and verify the face feature information received from the mobile communication company server and the face feature information of the user. Authentication method.
KR1020020031033A 2002-06-03 2002-06-03 Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition KR20030093464A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020020031033A KR20030093464A (en) 2002-06-03 2002-06-03 Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020020031033A KR20030093464A (en) 2002-06-03 2002-06-03 Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition

Publications (1)

Publication Number Publication Date
KR20030093464A true KR20030093464A (en) 2003-12-11

Family

ID=32385635

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020020031033A KR20030093464A (en) 2002-06-03 2002-06-03 Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition

Country Status (1)

Country Link
KR (1) KR20030093464A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100572768B1 (en) * 2004-06-02 2006-04-24 김상훈 Automatic detection method of human facial objects for the digital video surveillance
KR100604311B1 (en) * 2004-04-29 2006-07-24 삼성테크윈 주식회사 Managament method of the digital camera
KR100702226B1 (en) * 2004-11-23 2007-04-03 홍기천 Apparatus and method for detecting and authenticating facial data
KR100725771B1 (en) * 2005-09-23 2007-06-08 삼성전자주식회사 Apparatus and method of face recognition and authentication for a mobile terminal
KR100795160B1 (en) * 2007-03-22 2008-01-16 주식회사 아트닉스 Apparatus for face detection and recognition and method for face detection and recognition
KR100874067B1 (en) * 2006-03-15 2008-12-12 오므론 가부시키가이샤 User equipment, certify system, certify method, certify program and write medium
KR100874066B1 (en) * 2006-03-15 2008-12-12 오므론 가부시키가이샤 Certify apparatus, certify method, certify program and write medium of possibility computer reading
KR100907597B1 (en) * 2007-12-05 2009-07-14 에스케이 텔레콤주식회사 Face recognition system and method based on lighting control, and apparatus and server applied thereto
US10635798B2 (en) 2017-09-15 2020-04-28 Lg Electronics Inc. Digital device and biometric authentication method therein

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010074059A (en) * 2001-01-20 2001-08-04 정인수 Personal Verification Method and Apparatus Based on Facial Images for Mobile Systems
KR20010107545A (en) * 2001-04-03 2001-12-07 경두수 A terminal for fingerprint recognition and a finger print reconition system using thereof
KR20020014593A (en) * 2000-08-18 2002-02-25 최진영 Module for certifying a right user of a personal portable phone and method for certifying the right user using the same
KR20020018496A (en) * 2000-09-02 2002-03-08 장기화 Method and Device for Controlling The Usage of Communication Device using Image Based Face Verification Technology
KR20020023310A (en) * 2002-01-15 2002-03-28 장학선 Method and apparatus for settlementing using biometrics
KR20030061491A (en) * 2002-01-14 2003-07-22 소병혁 Fingerprint Authentication Method on Computer Network

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020014593A (en) * 2000-08-18 2002-02-25 최진영 Module for certifying a right user of a personal portable phone and method for certifying the right user using the same
KR20020018496A (en) * 2000-09-02 2002-03-08 장기화 Method and Device for Controlling The Usage of Communication Device using Image Based Face Verification Technology
KR20010074059A (en) * 2001-01-20 2001-08-04 정인수 Personal Verification Method and Apparatus Based on Facial Images for Mobile Systems
KR20010107545A (en) * 2001-04-03 2001-12-07 경두수 A terminal for fingerprint recognition and a finger print reconition system using thereof
KR20030061491A (en) * 2002-01-14 2003-07-22 소병혁 Fingerprint Authentication Method on Computer Network
KR20020023310A (en) * 2002-01-15 2002-03-28 장학선 Method and apparatus for settlementing using biometrics

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100604311B1 (en) * 2004-04-29 2006-07-24 삼성테크윈 주식회사 Managament method of the digital camera
KR100572768B1 (en) * 2004-06-02 2006-04-24 김상훈 Automatic detection method of human facial objects for the digital video surveillance
KR100702226B1 (en) * 2004-11-23 2007-04-03 홍기천 Apparatus and method for detecting and authenticating facial data
KR100725771B1 (en) * 2005-09-23 2007-06-08 삼성전자주식회사 Apparatus and method of face recognition and authentication for a mobile terminal
KR100874067B1 (en) * 2006-03-15 2008-12-12 오므론 가부시키가이샤 User equipment, certify system, certify method, certify program and write medium
KR100874066B1 (en) * 2006-03-15 2008-12-12 오므론 가부시키가이샤 Certify apparatus, certify method, certify program and write medium of possibility computer reading
KR100795160B1 (en) * 2007-03-22 2008-01-16 주식회사 아트닉스 Apparatus for face detection and recognition and method for face detection and recognition
KR100907597B1 (en) * 2007-12-05 2009-07-14 에스케이 텔레콤주식회사 Face recognition system and method based on lighting control, and apparatus and server applied thereto
US10635798B2 (en) 2017-09-15 2020-04-28 Lg Electronics Inc. Digital device and biometric authentication method therein

Similar Documents

Publication Publication Date Title
KR100705598B1 (en) Apparatus and method for controlling access of user information through face recognition in video phone
KR100774058B1 (en) The authentication system and the authentication method which use a portable communication terminal
US20050085217A1 (en) Method for setting shortcut key and performing function based on fingerprint recognition and wireless communication terminal using thereof
US8224128B2 (en) Portable information terminal device
US20040257196A1 (en) Method and apparatus using biometric sensors for controlling access to a wireless communication device
US20130007876A1 (en) System and method of providing biometric quick launch
US9977924B2 (en) Method and device for providing notification indicating loss of terminal
CN109255863A (en) The intelligent door lock and its operation method verified based on user's face and two dimensional code
CN101459515B (en) ID identification system and method for handhold portable electronic device
KR20100074580A (en) System and method for user certification using face-recognition
KR20030093464A (en) Security Certifying Method of Mobile Telecommunication Devices using Face-Recognition
KR100674441B1 (en) Apparatus and method for inputting character using finger print identification in portable wireless terminal
KR100725771B1 (en) Apparatus and method of face recognition and authentication for a mobile terminal
CN104579665B (en) Method for authenticating and device
KR100705164B1 (en) System and method for user registration using portable device
KR101931867B1 (en) Entrance managing system using of a mobile device
CN114595437A (en) Access control method, electronic device, and computer-readable storage medium
KR20050045773A (en) Person verification and identification method and apparatus with 3d facial representation for mobile device
KR101927336B1 (en) APPARATUS AND METHOD FOR IDENTIFY TERMINAL DEVICE USER and FALSIFICATION OR TEMPERING
CN108153568B (en) Information processing method and electronic equipment
CN107508965B (en) Image acquisition method and related product
JP2013190992A (en) Information processing terminal, and authentication method and authentication program of the same
KR101906141B1 (en) Apparatus and Method for Multi-level Iris Scan in Mobile Communication Terminal
JP5017905B2 (en) User authentication method, user authentication device, and computer program
KR20020014593A (en) Module for certifying a right user of a personal portable phone and method for certifying the right user using the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application