KR102021491B1 - 사용자 인증을 위한 장치 및 방법 - Google Patents

사용자 인증을 위한 장치 및 방법 Download PDF

Info

Publication number
KR102021491B1
KR102021491B1 KR1020180047261A KR20180047261A KR102021491B1 KR 102021491 B1 KR102021491 B1 KR 102021491B1 KR 1020180047261 A KR1020180047261 A KR 1020180047261A KR 20180047261 A KR20180047261 A KR 20180047261A KR 102021491 B1 KR102021491 B1 KR 102021491B1
Authority
KR
South Korea
Prior art keywords
information
ecg signal
deep learning
representative waveform
face image
Prior art date
Application number
KR1020180047261A
Other languages
English (en)
Inventor
반성범
김민구
Original Assignee
조선대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 조선대학교산학협력단 filed Critical 조선대학교산학협력단
Priority to KR1020180047261A priority Critical patent/KR102021491B1/ko
Priority to PCT/KR2019/003293 priority patent/WO2019208933A1/ko
Application granted granted Critical
Publication of KR102021491B1 publication Critical patent/KR102021491B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • A61B5/0456—
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A61B5/346—Analysis of electrocardiograms
    • A61B5/349—Detecting specific parameters of the electrocardiograph cycle
    • A61B5/352—Detecting R peaks, e.g. for synchronising diagnostic apparatus; Estimating R-R interval
    • G06K9/00221—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Cardiology (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Computational Linguistics (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

본 발명은 사용자 인증을 위한 장치 및 방법에 관한 것이다. 본 발명의 일 실시예에 따른 전자 장치의 동작 방법은 사용자의 심전도 신호 및 얼굴 이미지를 획득하는 단계, 상기 획득된 심전도 신호 및 얼굴 이미지에 기반하여 딥 러닝(deep learning)을 수행하는 단계 및 상기 딥 러닝의 출력 값에 기반하여 상기 사용자를 인증하는 단계를 포함할 수 있다.

Description

사용자 인증을 위한 장치 및 방법{APPARATUS AND METHOD FOR USER AUTHENTICATION}
본 발명은 사용자 인증을 위한 장치 및 방법에 관한 것으로, 더욱 상세하게는 심전도 신호 및 얼굴 이미지에 기반하여 사용자를 인증하기 위한 장치 및 방법에 관한 것이다.
종래에는 열쇠, 카드 키, 및 패스워드 등을 사용하는 사용자 인증 방법이 사용되었다. 하지만, 열쇠나 카드 키를 사용하는 사용자 인증 방법은 인증에 필요한 도구를 휴대하여야 하기 때문에 불편하고, 패스워드를 사용하는 사용자 인증 방법은 패스워드가 누출될 위험성이 있다는 문제점이 있다.
이러한 문제를 해결하기 위하여 음성 인식, 지문 인식, 홍채 인식, 및 혈관 인식 등과 같은 생체 인식을 사용한 생체 인증 방법이 등장하였다. 음성 인식을 사용한 생체 인증 방법은 장치의 구조가 비교적 간단하지만, 인증에 오류가 발생할 수 있다는 문제점이 있으며, 지문 인식, 홍채 인식, 및 혈관 인식을 사용한 생체 인증 방법은 인증에 오류가 비교적 적지만, 장치의 구조가 매우 복잡하다는 문제점이 있다.
[특허문헌 1] 한국공개특허 제10-2013-0140439호
본 발명은 전술한 문제점을 해결하기 위하여 창출된 것으로, 심전도 신호 및 얼굴 이미지에 기반하여 사용자를 인증하기 위한 장치 및 방법을 제공하는 것을 그 목적으로 한다.
또한, 본 발명은 심전도 신호의 대표 파형 정보 및 1차원 얼굴 정보를 딥 러닝(deep learning) 모델에 적용하여 사용자를 인증하기 위한 장치 및 방법을 제공하는 것을 그 목적으로 한다.
본 발명의 목적들은 이상에서 언급한 목적들로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.
상기한 목적들을 달성하기 위하여, 본 발명의 일 실시예에 따른 전자 장치의 동작 방법은 사용자의 심전도 신호 및 얼굴 이미지를 획득하는 단계; 상기 획득된 심전도 신호 및 얼굴 이미지에 기반하여 딥 러닝(deep learning)을 수행하는 단계; 및 상기 딥 러닝의 출력 값에 기반하여 상기 사용자를 인증하는 단계; 를 포함할 수 있다.
일 실시예에서, 상기 전자 장치의 동작 방법은 상기 심전도 신호로부터 대표 파형 정보를 획득하는 단계; 및 상기 얼굴 이미지를 1차원 얼굴 정보로 변환하는 단계; 를 포함할 수 있다.
일 실시예에서, 상기 딥 러닝을 수행하는 단계는, 상기 대표 파형 정보와 상기 1차원 얼굴 정보를 일렬로 정렬하는 단계; 및 상기 정렬된 대표 파형 정보 및 상기 1차원 얼굴 정보를 딥 러닝 모델에 적용하는 단계; 를 포함할 수 있다.
일 실시예에서, 상기 심전도 신호로부터 상기 대표 파형 정보를 획득하는 단계는, 상기 심전도 신호의 R-피크를 검출하는 단계; 및 상기 검출된 R-피크에 기반하여 상기 심전도 신호를 주기별로 분할하여 상기 대표 파형 정보를 획득하는 단계; 를 포함할 수 있다.
일 실시예에서, 상기 얼굴 이미지를 상기 1차원 얼굴 정보로 변환하는 단계는, PCA(principal component analysis)를 적용하여 상기 얼굴 이미지로부터 특징 정보를 추출하는 단계; 및 상기 추출된 특징 정보를 1차원으로 변환하여 상기 1차원 얼굴 정보를 획득하는 단계; 를 포함할 수 있다.
일 실시예에서, 상기 딥 러닝은, 컨벌루션 레이어(convolution layer), 풀링 레이어(pooling layer) 및 완전 연결 레이어(fully connected layer)를 포함할 수 있다.
일 실시예에서, 전자 장치는, 사용자의 심전도 신호를 획득하는 심전도 측정 모듈; 상기 사용자의 얼굴 이미지를 획득하는 카메라 모듈; 및 상기 획득된 심전도 신호 및 얼굴 이미지에 기반하여 딥 러닝을 수행하고, 상기 딥 러닝의 출력 값에 기반하여 상기 사용자를 인증하는 프로세서; 를 포함할 수 있다.
일 실시예에서, 상기 프로세서는, 상기 심전도 신호로부터 대표 파형 정보를 획득하고, 상기 얼굴 이미지를 1차원 얼굴 정보로 변환할 수 있다.
일 실시예에서, 상기 프로세서는, 상기 대표 파형 정보와 상기 1차원 얼굴 정보를 일렬로 정렬하고, 상기 정렬된 대표 파형 정보 및 상기 1차원 얼굴 정보를 딥 러닝 모델에 적용할 수 있다.
일 실시예에서, 상기 프로세서는, 상기 심전도 신호의 R-피크를 검출하고, 상기 검출된 R-피크에 기반하여 상기 심전도 신호를 주기별로 분할하여 상기 대표 파형 정보를 획득할 수 있다.
일 실시예에서, 상기 프로세서는, PCA를 적용하여 상기 얼굴 이미지로부터 특징 정보를 추출하고, 상기 추출된 특징 정보를 1차원으로 변환하여 상기 1차원 얼굴 정보를 획득할 수 있다.
일 실시예에서, 상기 딥 러닝은, 컨벌루션 레이어, 풀링 레이어 및 완전 연결 레이어를 포함할 수 있다.
상기한 목적들을 달성하기 위한 구체적인 사항들은 첨부된 도면과 함께 상세하게 후술될 실시예들을 참조하면 명확해질 것이다.
그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라, 서로 다른 다양한 형태로 구성될 수 있으며, 본 발명의 개시가 완전하도록 하고 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자(이하, "통상의 기술자")에게 발명의 범주를 완전하게 알려주기 위해서 제공되는 것이다.
본 발명의 일 실시예에 의하면, 사용자 인증을 위해 생체 신호인 심전도 신호를 이용함으로써, 살아있는 모든 사람들로부터 측정 가능하고(보편성), 시간이 지나도 신호의 파형이 크게 변하지 않아 등록을 자주 해주지 않아도 되며(영속성), 개인 고유의 특성을 가지므로 개인 간의 구별이 뚜렷하다는(고유성) 장점과 함께, 사용자 인증을 위해 생체 정보인 얼굴 이미지를 추가적으로 이용함으로써, 위조/변조의 가능성을 보다 크게 낮출 수 있다(보안성).
본 발명의 효과들은 상술된 효과들로 제한되지 않으며, 본 발명의 기술적 특징들에 의하여 기대되는 잠정적인 효과들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 전자 장치의 기능적 구성을 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 전자 장치의 동작 방법의 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 전자 장치의 동작 방법의 다른 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 심전도 신호 그래프이다.
도 5는 본 발명의 일 실시예에 따른 딥 러닝(deep learning) 모델의 개념도이다.
본 발명은 다양한 변경을 가할 수 있고, 여러 가지 실시예들을 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 이를 상세히 설명하고자 한다.
청구범위에 개시된 발명의 다양한 특징들은 도면 및 상세한 설명을 고려하여 더 잘 이해될 수 있을 것이다. 명세서에 개시된 장치, 방법, 제법 및 다양한 실시예들은 예시를 위해서 제공되는 것이다. 개시된 구조 및 기능상의 특징들은 통상의 기술자로 하여금 다양한 실시예들을 구체적으로 실시할 수 있도록 하기 위한 것이고, 발명의 범위를 제한하기 위한 것이 아니다. 개시된 용어 및 문장들은 개시된 발명의 다양한 특징들을 이해하기 쉽게 설명하기 위한 것이고, 발명의 범위를 제한하기 위한 것이 아니다.
본 발명을 설명함에 있어서, 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그 상세한 설명을 생략한다.
이하, 본 발명의 일 실시예에 따른 사용자 인증을 위한 장치 및 방법을 설명한다.
도 1은 본 발명의 일 실시예에 따른 전자 장치(100)의 기능적 구성을 도시한 도면이다.
도 1을 참고하면, 전자 장치(100)는 심전도 측정 모듈(110), 카메라 모듈(120), 디스플레이(130), 메모리(140) 및 프로세서(150)를 포함할 수 있다.
심전도 측정 모듈(110)은 사용자로부터 심전도 신호를 측정할 수 있다. 여기서, 심전도 신호(electrocardiography, ECG)는 심장에서 발생한 전기적 신호를 피부에 부착한 전극을 통해 기록한 신호를 의미한다. 심전도 신호는 한 주기(period)의 심장의 전기적 활동에 의한 전기적 신호를 의미할 수 있다. 일 실시예에서, 심전도 측정 모듈(110)은 심전도 신호를 측정할 수 있는 신체의 표면에 부착된 적어도 하나의 전극(electrode)을 포함할 수 있다. 또한, 심전도 측정 모듈(110)은 심전도 신호를 증폭시키는 증폭기(amplifier)와, 증폭된 심전도 신호를 아달로그 신호에서 디지털 신호로 변환시키는 컨버터(converter)와, 심전도 신호의 잡음을 제거할 수 있는 필터(filter)를 포함할 수 있다.
카메라 모듈(120)은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 일 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, 이미지 시그널 프로세서(image signal processor, ISP), 또는 플래시(예: 네온 램프)를 포함할 수 있다. 카메라 모듈(120)은 사용자의 얼굴 이미지를 캡쳐할 수 있다.
디스플레이(130)는 액정 디스플레이(liquid crystal display, LCD), 발광 다이오드(light emitting diode, LED) 디스플레이, 유기 발광 다이오드(organic light emitting diode, OLED) 디스플레이, 또는 마이크로 전자기계 시스템(microelectromechanical system, MEMS) 디스플레이, 또는 전자종이(electronic paper) 디스플레이를 포함할 수 있다. 디스플레이(130)는, 예를 들면, 사용자에게 각종 콘텐츠(예: 텍스트, 이미지, 비디오, 아이콘, 및/또는 심볼 등)을 표시할 수 있다. 디스플레이(130)는, 터치 스크린을 포함할 수 있으며, 예를 들면, 전자 펜 또는 사용자의 신체의 일부를 이용한 터치, 제스쳐, 근접, 또는 호버링 입력을 수신할 수 있다. 일 실시예에서, 디스플레이(130)는 카메라 모듈(120)의 캡쳐 영역에 속한 사용자의 얼굴 이미지를 실시간으로 디스플레이할 수 있다. 일 실시예에서, 디스플레이(130)는 카메라 모듈(120)에 의해 캡쳐된 사용자의 얼굴 이미지를 디스플레이할 수 있다.
메모리(140)는 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 메모리(130)는, 예를 들면, 전자 장치(100)의 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다. 메모리(140)는 프로세서(150)의 요청에 따라 저장된 데이터를 제공할 수 있다.
프로세서(150)는 중앙처리장치, 어플리케이션 프로세서, 또는 커뮤니케이션 프로세서(communication processor, CP) 중 하나 또는 그 이상을 포함할 수 있다. 프로세서(150)는, 예를 들면, 전자 장치(100)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다. 일 실시예에서, 프로세서(150)는 심전도 신호 정보 및 얼굴 특징 정보에 기반하여 사용자를 인증할 수 있다.
도 1에서, 전자 장치(100)는 심전도 측정 모듈(110), 카메라 모듈(120), 디스플레이(130), 메모리(140) 및 프로세서(150)를 포함하는데, 본 발명의 다양한 실시 예들에서 전자 장치(100)는 도 1에 도시된 구성들이 필수적인 것은 아니어서, 도 1에 도시된 구성들보다 많은 구성들을 가지거나, 또는 그보다 적은 구성들을 가지는 것으로 구현될 수 있다.
도 2는 본 발명의 일 실시예에 따른 전자 장치(100)의 동작 방법의 흐름도이다.
도 2를 참고하면, S201 단계에서, 전자 장치(100)는 사용자의 심전도 신호 및 얼굴 이미지를 획득한다. 일 실시예에서, 전자 장치(100)는 심전도 측정 모듈(110)을 통해 심전도 신호를 측정하고, 카메라 모듈(120)을 통해 얼굴 이미지를 캡쳐할 수 있다. 이 경우, 측정된 심전도 신호는 1차원 데이터일 수 있다.
S203 단계에서, 전자 장치(100)는 심전도 신호 및 얼굴 이미지에 기반하여 딥 러닝을 수행한다. 구체적으로, 전자 장치(100)는 심전도 신호의 R-피크에 기반하여 심전도 신호를 주기별로 분할하여 심전도 신호의 대표 파형 정보를 획득하고, PCA(principal component analysis)를 적용하여 얼굴 이미지의 특징 정보로부터 1차원 얼굴 정보를 생성할 수 있다. 이후, 전자 장치(100)는 대표 파형 정보 및 1차원 얼굴 정보를 결합하여 딥 러닝(deep learning) 모델에 적용할 수 있다.
S205 단계에서, 전자 장치(100)는 딥 러닝의 출력 값에 기반하여 사용자를 인증한다. 일 실시예에서, 딥 러닝의 출력 값이 미리 설정된 특정 카테고리로 분류되는 경우, 전자 장치(100)는 해당 심전도 신호 및 얼굴 이미지의 사용자를 인증할 수 있다.
도 3은 본 발명의 일 실시예에 따른 전자 장치(100)의 동작 방법의 다른 흐름도이다.
도 3을 참고하면, S301 단계에서, 전자 장치(100)는 심전도 신호를 획득할 수 있다. 일 실시예에서, 전자 장치(100)는 심전도 측정 모듈(110)을 통해 심전도 신호를 측정할 수 있다.
S303 단계에서, 전자 장치(100)는 심전도 신호의 R-피크를 검출할 수 있다. 즉, 전자 장치(100)는 자기상관함수를 이용하여 심전도 신호의 R-R 간격을 검출할 수 있다. 여기서, 자기상관함수는 시간에서의 신호값과 다른 시간에서의 신호값과의 상관성을 나타내는 것으로, 자기상관함수 Rxx(
Figure 112018040640850-pat00001
)는 시간 t에서의 신호값 x(t)와 t만큼의 시간 지연이 있을 때, 즉, 시간 (t+
Figure 112018040640850-pat00002
)에서의 신호값 x(t+
Figure 112018040640850-pat00003
)의 곱에 대한 평균으로 하기 <수학식 1>과 같이 정의될 수 있다.
Figure 112018040640850-pat00004
자기상관함수는 항상 실수값을 갖는 우함수이고
Figure 112018040640850-pat00005
=0에서 최대값을 가지며, 이는 하기 <수학식 2>와 같이 정의될 수 있다.
Figure 112018040640850-pat00006
즉, 전자 장치(100)는 자기상관함수를 이용하여 심전도 신호의 최대값을 구한 후 최대값의 1/3을 취하여, 이 수치보다 큰 값만을 추출하여 R-피크를 측정할 수 있다.
S305 단계에서, 전자 장치(100)는 R-피크에 기반하여 심전도 신호를 주기별로 분할할 수 있다. 즉, 전자 장치(100)는 R-피크에 기반하여 심전도 신호의 대표 파형 정보를 획득할 수 있다. 구체적으로, 전자 장치(100)는 R-피크를 검출한 후, P, QRS, T 파로 구성된 신호를 주기별로 분할할 수 있다. 일 실시예에서, 대표 파형 정보는 심전도 신호의 대표 파형에 대한 1차원 특징 벡터를 의미할 수 있다.
예를 들어, 도 4의 (a) 및 (b)를 참고하면, 심전도 신호의 파형으로부터 복수의 P-피크들이 검출되고, 연속적인 R-피크 간의 간격인 심전도 신호의 주기를 기준으로 심전도 신호가 주기별로 분할될 수 있다. 즉, 심전도 신호의 대표 파형이 획득될 수 있다.
S307 단계에서, 전자 장치(100)는 사용자의 얼굴 이미지를 획득할 수 있다. 일 실시예에서, 전자 장치(100)는 카메라 모듈(120)을 통해 사용자의 얼굴 이미지를 획득할 수 있다.
S309 단계에서, 전자 장치(100)는 얼굴 이미지의 특징 정보를 추출할 수 있다. 일 실시예에서, 전자 장치(100)는 주성분 분석 기술인 PCA(principal component analysis)를 이용하여 얼굴 이미지의 특징 정보를 추출할 수 있다. 얼굴 인식 분야에서 주성분 분석 기술은 새로운 공간을 구성하는 고유 벡터를 이미지화 하였을 때 마치 얼굴과 비슷하다고 하여 고유 얼굴 기술로 지칭될 수 있다.
S311 단계에서, 전자 장치(100)는 PCA를 이용하여 추출된 특징 정보를 1차원 데이터로 변환할 수 있다. 즉, 전자 장치(100)는 추출된 특징 정보에 기반하여 1차원 얼굴 정보를 획득할 수 있다. 예를 들어, 전자 장치(100)는 하기 <수학식 3>과 같이 특징 정보를 1차원 데이터로 변환할 수 있다.
Figure 112018040640850-pat00007
여기서, x는 입력 벡터, y는 변환된 벡터, A는 x의 공분산 행렬로부터 구한 고유 벡터를 행으로 가지는 변환 행렬을 나타낸다. 이 중 값이 큰 고유값에 대응하는 벡터들만을 이용하면 얼굴을 저차원에서도 효과적으로 나타낼 수 있다. 이 경우, 고유 벡터의 순서는 대응되는 고유 값의 크기에 따라 정렬될 수 있다. 따라서, A를 구성하는 고유 벡터의 개수에 따라 y의 차원이 결정될 수 있다.
PCA의 경우, 적은 수의 고유 벡터를 사용하여 원래 데이터 x를 표현할 수 있다. 즉, 작은 값
Figure 112018040640850-pat00008
에 대하여, 하기 <수학식 4>가 만족될 수 있다.
Figure 112018040640850-pat00009
여기서, x는 입력 벡터, y는 변환된 벡터, A는 x의 공분산 행렬로부터 구한 고유 벡터를 행으로 가지는 변환 행렬, N은 입력 벡터의 차원, k(<<N)는 사용한 고유 벡터의 수,
Figure 112018040640850-pat00010
는 i 번째 고유 값을 나타낸다. 즉, 특징 정보는 상기 <수학식 4>를 통해 1 차원의 특징 벡터로 변환될 수 있다.
S313 단계에서, 전자 장치(100)는 대표 파형 정보 및 1차원 얼굴 정보를 결합할 수 있다. 예를 들어, 전자 장치(100)는 대표 파형 정보와 1차원 얼굴 정보가 일렬로 정렬되도록 후처리(postprocess)할 수 있다.
S315 단계에서, 전자 장치(100)는 결합된 대표 파형 정보 및 1차원 얼굴 정보를 딥 러닝 모델에 적용할 수 있다. 러닝 모델은 컨벌루션 레이어(convolution layer), 풀링 레이어(pooling layer) 및 완전 연결 레이어(fully connected layer)를 포함할 수 있으며, 구체적인 내용은 하기 도 5에서 후술된다.
S317 단계에서, 전자 장치(100)는 딥 러닝 모델의 적용에 따른 출력 값을 객체의 카테고리 별로 분류하여 사용자 인증을 수행할 수 있다.
일 실시예에서, 도 3의 각 단계는 순서에 관계없이 또는 동시에 수행될 수 있으며, 도 3의 일부 단계는 생략될 수 있다.
도 5는 본 발명의 일 실시예에 따른 딥 러닝 모델의 개념도이다.
도 5를 참고하면, 딥 러닝 모델은 컨벌루션 레이어(501), 풀링 레이어(503) 및 완전 연결 레이어(505)를 포함할 수 있다.
컨벌루션 레이어(501)는 입력되는 전체 데이터에 대해 컨벌루션 연산을 수행하여 특징 맵을 추출할 수 있다. 풀링 레이어(503)는 추출된 특징 맵을 기반으로 서브 샘플링을 이용하여 차원 축소와 입력 공간의 추상화를 통해 약한 특징은 무시하고 강한 특징만을 추출할 수 있다.
완전 연결 레이어(505)는 앞의 레이어들의 반복을 통해 추출된 특징들을 이용한 객체의 카테고리 별 분류를 위해 사용되며, 분류를 위한 클래스 점수(class score)를 나타낸다. 이와 같이, 딥 러닝 모델은 컨벌루션 레이어(501), 풀링 레이어(503) 및 완전 연결 레이어(505)와 같은 3가지 계층을 깊게 쌓아 신경망의 성능을 높일 수 있다.
이상의 설명은 본 발명의 기술적 사상을 예시적으로 설명한 것에 불과한 것으로, 통상의 기술자라면 본 발명의 본질적인 특성이 벗어나지 않는 범위에서 다양한 변경 및 수정이 가능할 것이다.
따라서, 본 명세서에 개시된 실시예들은 본 발명의 기술적 사상을 한정하기 위한 것이 아니라, 설명하기 위한 것이고, 이러한 실시예들에 의하여 본 발명의 범위가 한정되는 것은 아니다.
본 발명의 보호범위는 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 이해되어야 한다.
100: 전자 장치
110: 심전도 측정 모듈
120: 카메라 모듈
130: 디스플레이
140: 메모리
150: 프로세서
501: 컨벌루션 레이어
503: 풀링 레이어
505: 완전 연결 레이어

Claims (12)

  1. 전자 장치의 동작 방법에 있어서,
    사용자의 심전도 신호 및 얼굴 이미지를 획득하는 단계;
    상기 심전도 신호로부터 대표 파형 정보를 획득하고 상기 얼굴 이미지를 1차원 얼굴 정보로 변환하는 단계;
    상기 대표 파형 정보와 상기 1차원 얼굴 정보를 일렬로 정렬하는 단계; 및
    상기 정렬된 대표 파형 정보 및 상기 1차원 얼굴 정보를 딥 러닝(deep learning) 모델에 입력하는 단계; 및
    상기 딥 러닝 모델의 출력 값에 기반하여 상기 사용자를 인증하는 단계;
    를 포함하는 방법.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 심전도 신호로부터 상기 대표 파형 정보를 획득하는 단계는,
    상기 심전도 신호의 R-피크를 검출하는 단계; 및
    상기 검출된 R-피크에 기반하여 상기 심전도 신호를 주기별로 분할하여 상기 대표 파형 정보를 획득하는 단계;
    를 포함하는 방법.
  5. 제1항에 있어서,
    상기 얼굴 이미지를 상기 1차원 얼굴 정보로 변환하는 단계는,
    PCA(principal component analysis)를 적용하여 상기 얼굴 이미지로부터 특징 정보를 추출하는 단계; 및
    상기 추출된 특징 정보를 1차원으로 변환하여 상기 1차원 얼굴 정보를 획득하는 단계;
    를 포함하는 방법.
  6. 제1항에 있어서,
    상기 딥 러닝은, 컨벌루션 레이어(convolution layer), 풀링 레이어(pooling layer) 및 완전 연결 레이어(fully connected layer)를 포함하는 방법.
  7. 전자 장치에 있어서,
    사용자의 심전도 신호를 획득하는 심전도 측정 모듈;
    상기 사용자의 얼굴 이미지를 획득하는 카메라 모듈; 및
    상기 심전도 신호로부터 대표 파형 정보를 획득하고, 상기 얼굴 이미지를 1차원 얼굴 정보로 변환하고, 상기 대표 파형 정보와 상기 1차원 얼굴 정보를 일렬로 정렬하고,
    상기 정렬된 대표 파형 정보 및 상기 1차원 얼굴 정보를 딥 러닝(deep learning) 모델에 입력하고, 상기 딥 러닝 모델의 출력 값에 기반하여 상기 사용자를 인증하는 프로세서;
    를 포함하는 장치.
  8. 삭제
  9. 삭제
  10. 제7항에 있어서,
    상기 프로세서는,
    상기 심전도 신호의 R-피크를 검출하고,
    상기 검출된 R-피크에 기반하여 상기 심전도 신호를 주기별로 분할하여 상기 대표 파형 정보를 획득하는 장치.
  11. 제7항에 있어서,
    상기 프로세서는,
    PCA(principal component analysis)를 적용하여 상기 얼굴 이미지로부터 특징 정보를 추출하고,
    상기 추출된 특징 정보를 1차원으로 변환하여 상기 1차원 얼굴 정보를 획득하는 장치.
  12. 제7항에 있어서,
    상기 딥 러닝은, 컨벌루션 레이어(convolution layer), 풀링 레이어(pooling layer) 및 완전 연결 레이어(fully connected layer)를 포함하는 장치.
KR1020180047261A 2018-04-24 2018-04-24 사용자 인증을 위한 장치 및 방법 KR102021491B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020180047261A KR102021491B1 (ko) 2018-04-24 2018-04-24 사용자 인증을 위한 장치 및 방법
PCT/KR2019/003293 WO2019208933A1 (ko) 2018-04-24 2019-03-21 사용자 인증을 위한 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180047261A KR102021491B1 (ko) 2018-04-24 2018-04-24 사용자 인증을 위한 장치 및 방법

Publications (1)

Publication Number Publication Date
KR102021491B1 true KR102021491B1 (ko) 2019-09-16

Family

ID=68067105

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180047261A KR102021491B1 (ko) 2018-04-24 2018-04-24 사용자 인증을 위한 장치 및 방법

Country Status (2)

Country Link
KR (1) KR102021491B1 (ko)
WO (1) WO2019208933A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220086126A (ko) * 2020-12-16 2022-06-23 조선대학교산학협력단 심전도 신호 분석 시스템 및 이를 이용한 심전도 신호 분석 방법

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111882559B (zh) * 2020-01-20 2023-10-17 深圳数字生命研究院 Ecg信号的获取方法及装置、存储介质、电子装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130140439A (ko) 2012-06-14 2013-12-24 삼성전자주식회사 심전도 신호를 이용한 사용자 인증 방법 및 장치
KR101494874B1 (ko) * 2014-05-12 2015-02-23 김호 사용자 인증 방법, 이를 실행하는 장치 및 이를 저장한 기록 매체
KR20170082440A (ko) * 2016-01-06 2017-07-14 삼성전자주식회사 심전도 인증 방법 및 장치

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102257289B1 (ko) * 2014-08-26 2021-05-27 삼성전자주식회사 심전도 신호를 이용한 사용자 인증 방법 및 장치
KR20170082024A (ko) * 2016-01-05 2017-07-13 한국전자통신연구원 얼굴 인식 장치 및 방법
KR102501838B1 (ko) * 2016-02-01 2023-02-23 삼성전자주식회사 심전도 신호를 이용한 인증 장치 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130140439A (ko) 2012-06-14 2013-12-24 삼성전자주식회사 심전도 신호를 이용한 사용자 인증 방법 및 장치
KR101494874B1 (ko) * 2014-05-12 2015-02-23 김호 사용자 인증 방법, 이를 실행하는 장치 및 이를 저장한 기록 매체
KR20170082440A (ko) * 2016-01-06 2017-07-14 삼성전자주식회사 심전도 인증 방법 및 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220086126A (ko) * 2020-12-16 2022-06-23 조선대학교산학협력단 심전도 신호 분석 시스템 및 이를 이용한 심전도 신호 분석 방법
WO2022131522A1 (ko) * 2020-12-16 2022-06-23 조선대학교산학협력단 심전도 신호 분석 시스템 및 이를 이용한 심전도 신호 분석 방법
KR102498835B1 (ko) * 2020-12-16 2023-02-09 조선대학교산학협력단 심전도 신호 분석 시스템 및 이를 이용한 심전도 신호 분석 방법

Also Published As

Publication number Publication date
WO2019208933A1 (ko) 2019-10-31

Similar Documents

Publication Publication Date Title
CN105787420B (zh) 用于生物认证的方法、装置以及生物认证系统
Hammad et al. A novel two-dimensional ECG feature extraction and classification algorithm based on convolution neural network for human authentication
Jain et al. 50 years of biometric research: Accomplishments, challenges, and opportunities
JP4578529B2 (ja) 手書き署名の取得、分析および認証のためのシステムと方法
CA2835460C (en) System and method for enabling continuous or instantaneous identity recognition based on physiological biometric signals
Abhyankar et al. Integrating a wavelet based perspiration liveness check with fingerprint recognition
US11580775B2 (en) Differentiating between live and spoof fingers in fingerprint analysis by machine learning
Tan et al. New approach for liveness detection in fingerprint scanners based on valley noise analysis
Islam et al. Biometric template extraction from a heartbeat signal captured from fingers
Moctezuma et al. Subjects identification using EEG-recorded imagined speech
Donida Labati et al. Biometric recognition of PPG cardiac signals using transformed spectrogram images
Tiwari et al. A review of advancements in biometric systems
KR102021491B1 (ko) 사용자 인증을 위한 장치 및 방법
Raut et al. Biometric palm prints feature matching for person identification
Chakraborty et al. Biometric analysis using fused feature set from side face texture and electrocardiogram
Manjunathswamy et al. Multimodal biometric authentication using ECG and fingerprint
KR101587874B1 (ko) 단일 채널 심전도를 이용한 생체 인식 장치 및 그 방법
EP2148296A1 (en) Vein pattern management system, vein pattern registration device, vein pattern authentication device, vein pattern registration method, vein pattern authentication method, program, and vein data structure
KR102094488B1 (ko) Hmd 착용자의 얼굴 표정 변화 시 측정된 근전도를 이용한 사용자의 개인 인증 장치 및 방법
TWI730589B (zh) 光學式活體特徵檢測方法及利用其之生物特徵採集裝置和資訊處理裝置
KR20080017763A (ko) 스코어 레벨 결합을 통한 홍채 인식 방법
Ennaama et al. Comparative and analysis study of biometric systems
Parihar et al. Palm vein recognition system for human authentication: A review
TanishaAggarwal Fake Fingerprint Detection Methods
RU2003101745A (ru) Способ комплексной идентификации личности человека, паспортного контроля и диагностики текущего психофизиологического состояния личности и компьютерная система для его осуществления

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant