KR20180060223A - 사용자 인증 장치 및 그 동작 방법 - Google Patents

사용자 인증 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR20180060223A
KR20180060223A KR1020160159472A KR20160159472A KR20180060223A KR 20180060223 A KR20180060223 A KR 20180060223A KR 1020160159472 A KR1020160159472 A KR 1020160159472A KR 20160159472 A KR20160159472 A KR 20160159472A KR 20180060223 A KR20180060223 A KR 20180060223A
Authority
KR
South Korea
Prior art keywords
image
user
authentication
change
user image
Prior art date
Application number
KR1020160159472A
Other languages
English (en)
Inventor
이인권
최찬석
Original Assignee
주식회사 두넥스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 두넥스 filed Critical 주식회사 두넥스
Priority to KR1020160159472A priority Critical patent/KR20180060223A/ko
Publication of KR20180060223A publication Critical patent/KR20180060223A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06K9/00281—
    • G06K9/00597—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Ophthalmology & Optometry (AREA)
  • Collating Specific Patterns (AREA)

Abstract

본 발명의 일 실시예에 따라 사용자 인증 장치의 동작 방법이 제공된다. 상기 방법은, 사용자를 촬영하여 제 1 사용자 영상을 생성하는 단계; 상기 사용자 영상으로부터 얼굴 영역을 추출하고, 상기 얼굴 영역의 영상과 소정의 얼굴 영역의 영상과 비교하여 제 1 인증을 수행하는 단계; 상기 제 1 인증에 성공하면, 디스플레이부 상에 소정의 인증 이미지를 표시하는 단계; 상기 사용자를 촬영하여 제 2 사용자 영상을 생성하는 단계; 및 상기 제 1 사용자 영상과 상기 제 2 사용자 영상을 비교하여 사용자 영상의 변화를 판단함으로써 제 2 인증을 수행하는 단계를 포함할 수 있다.

Description

사용자 인증 장치 및 그 동작 방법{USER AUTHENTICATION APPARATUS AND THE OPERATIN METHOD THEREOF}
본 발명은 사용자 인증 장치 및 그 동작 방법에 관한 것으로서, 더 구체적으로, 사용자 영상의 이미지 변화를 통해 사용자 실물 여부를 판단하고 이를 사용자 인증에 활용하는 사용자 인증 장치 및 그 동작 방법에 관한 것이다.
사용자 인증이나 출입 통제 등의 보안 기술로서, 얼굴 인식 관련 기술이 활용되고 있다. 이러한 인증은 암호를 입력하는 등 별도의 행위를 거치지 않고, 사용자를 촬영하고 그 사용자 영상만으로 사용자 인증을 수행한다는 점에서 간편하고, 특히 암호 도용 등의 경우와 같이 타인에 의한 인증을 방지할 수 있는 장점이 있어 널리 활용되고 있다.
그러나 이러한 보안 기술의 경우, 사용자 영상에 기반하여 사용자 인증을 수행한다는 점을 악용하여 정당한 사용자 아니라도 우회적으로 사용자 인증을 수행할 수 있다. 구체적으로, 정당한 사용자의 사진이나 동영상을 보안 시스템에 제시하는 경우, 보안 시스템은 이러한 사진이나 동영상으로부터 사용자 영상을 획득하여 사용자 인증을 수행하기 때문에 이러한 악의적인 접근을 막을 수 없다는 단점이 존재한다.
이러한 문제를 해결하기 위해 보안 시스템에서는, 별도의 조명(특히 IR, 적외선 등의 특수 조명 등)을 설치하거나 복수의 카메라를 이용하는 사용자 실물 측정 방안이 제안되고 있으나, 이러한 방안은 별도의 장비를 부가해야 한다는 점에서 비용이 발생하거나 시스템 변경이 필요한 문제점이 있다.
따라서 이를 해결하기 위한 사용자 인증 장치 및 그 동작 방법이 요구된다.
본 발명은 상기 문제점을 해결하기 위한 것으로서, 사용자 영상의 이미지 변화를 통해 사용자 실물 여부를 판단하고 이를 사용자 인증에 활용하는 사용자 인증 장치 및 그 동작 방법을 제공하는 것을 그 목적으로 한다.
본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재들로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따라 사용자 인증 장치의 동작 방법이 제공된다. 상기 방법은, 사용자를 촬영하여 제 1 사용자 영상을 생성하는 단계; 상기 사용자 영상으로부터 얼굴 영역을 추출하고, 상기 얼굴 영역의 영상과 소정의 얼굴 영역의 영상과 비교하여 제 1 인증을 수행하는 단계; 상기 제 1 인증에 성공하면, 디스플레이부 상에 소정의 인증 이미지를 표시하는 단계; 상기 사용자를 촬영하여 제 2 사용자 영상을 생성하는 단계; 및 상기 제 1 사용자 영상과 상기 제 2 사용자 영상을 비교하여 사용자 영상의 변화를 판단함으로써 제 2 인증을 수행하는 단계를 포함할 수 있다.
바람직하게는, 상기 사용자 영상의 변화는 상기 사용자의 얼굴 방향의 변화, 시선 방향의 변화 및 눈의 깜빡임 중 적어도 하나를 포함할 수 있다.
또한, 바람직하게는, 상기 제 2 인증을 수행하는 단계는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 변화가 상기 인증 이미지의 표시 위치 및 표시 시간 중 적어도 하나에 대응하는지를 비교함으로써 수행될 수 있다.
또한, 바람직하게는, 상기 디스플레이부 상에 표시되는 상기 인증 이미지를 변화시키는 단계; 및 상기 사용자를 촬영하여 제 3 사용자 영상을 생성하는 단계를 더 포함하고, 상기 제 2 인증을 수행하는 단계를 포함하는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 비교에 부가하여, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 비교에 기초하여 수행될 수 있다.
또한, 바람직하게는, 상기 변화는 상기 인증 이미지를 다른 인증 이미지로 대체함으로써 수행될 수 있으며, 상기 다른 인증 이미지는 상기 인증 이미지와 표시 위치, 형상 및 색 중 적어도 하나가 상이할 수 있다.
또한, 바람직하게는, 상기 제 2 인증을 수행하는 단계는, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 변화가 상기 인증 이미지의 변화의 방향 및 속도 중 적어도 하나에 대응하는지를 비교함으로써 수행될 수 있다.
본 발명의 일 실시예에 따라 사용자 인증 장치의 동작 방법을 수행하기 위한 프로그램이 기록된 컴퓨터 판독 가능한 기록매체가 제공된다.
본 발명의 일 실시예에 따라 사용자 인증 장치가 제공된다. 상기 장치는, 사용자를 촬영하여 제 1 사용자 영상을 생성하는 촬영부; 상기 사용자 영상으로부터 얼굴 영역을 추출하고, 상기 얼굴 영역의 영상과 소정의 얼굴 영역의 영상과 비교하여 제 1 인증을 수행하는 제어부; 및 상기 제 1 인증에 성공하면, 소정의 인증 이미지를 표시하는 디스플레이부를 포함하고, 상기 촬영부는, 상기 디스플레이부가 상기 인증 이미지를 표시한 후에 상기 사용자를 촬영하여 제 2 사용자 영상을 생성하고, 상기 제어부는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상을 비교하여 사용자 영상의 변화를 판단함으로써 제 2 인증을 수행할 수 있다.
바람직하게는, 상기 사용자 영상의 변화는 상기 사용자의 얼굴 방향의 변화, 시선 방향의 변화 및 눈의 깜빡임 중 적어도 하나를 포함할 수 있다.
또한, 바람직하게는, 상기 제어부는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 변화가 상기 인증 이미지의 표시 위치 및 표시 시간 중 적어도 하나에 대응하는지를 비교함으로써 상기 제 2 인증을 수행할 수 있다.
또한, 바람직하게는, 상기 디스플레이부가 상기 인증 이미지를 변화시키면, 상기 촬영부는 상기 사용자를 촬영하여 제 3 사용자 영상을 생성하고, 상기 제어부는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 비교에 부가하여, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 비교에 기초하여 상기 제 2 인증을 수행할 수 있다.
또한, 바람직하게는, 상기 변화는 상기 인증 이미지를 다른 인증 이미지로 대체함으로써 수행될 수 있으며, 상기 다른 인증 이미지는 상기 인증 이미지와 표시 위치, 형상 및 색 중 적어도 하나가 상이할 수 있다.
또한, 바람직하게는, 상기 제어부는, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 변화가 상기 인증 이미지의 변화의 방향 및 속도 중 적어도 하나에 대응하는지를 비교함으로써 상기 제 2 인증을 수행할 수 있다.
본 발명에 따르면, 기존의 사용자 영상을 통한 얼굴 인식 등을 통한 사용자 인증에 부가하여 디스플레이부 상의 인증 이미지 표시를 통한 사용자 영상의 변화에 기초하여 사용자의 실물 판정을 수행함으로써, 사용자 인증의 신뢰도를 개선할 수 있다.
또한, 본 발명에 따르면, 기존의 사용자 인증 장치의 구성을 이용하면서, 조명의 조사에 따른 이미지 변화만을 이용해서 사용자 인증을 보완함으로써, 실물 판정을 위한 구성을 소형/경량화 하거나 기존 시스템에 별도 확장 없이 적용할 수 있다.
본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 간단한 설명이 제공된다.
도 1은 본 발명의 일 실시예에 따라 사용자 인증 장치를 도시한다.
도 2는 본 발명의 일 실시예에 따라 사용자 인증 장치의 동작 방법이 도시된다.
도 3은 본 발명의 일 실시예에 따라 사용자 인증 장치의 동작 방법이 도시된다.
도 4는 본 발명의 일 실시예에 따른 사용자 인증 장치의 동작 예시를 도시한다.
도 5는 본 발명의 일 실시예에 따른 사용자 인증 장치의 동작 예시를 도시한다.
도 6은 본 발명의 일 실시예에 따른 사용자 인증 장치의 동작 예시를 도시한다.
이하, 본 발명에 따른 실시예들은 첨부된 도면들을 참조하여 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 실시예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 실시예들을 설명할 것이나, 본 발명의 기술적 사상은 이에 한정되거나 제한되지 않고 당업자에 의해 변형되어 다양하게 실시될 수 있다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 본 발명의 실시예의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다.
도 1은 본 발명의 일 실시예에 따라 사용자 인증 장치를 도시한다.
도 1을 참조하면, 장치(100)는 통신부(110), 촬영부(120), 저장부(130), 디스플레이부(140) 및 제어부(150)를 포함할 수 있다.
통신부(110)는 외부와의 직접 연결 또는 네트워크를 통한 연결을 위해 제공되는 것으로서, 유선 및/또는 무선 통신부(110)일 수 있다. 구체적으로, 통신부(110)는 제어부(150), 저장부(130) 등으로부터의 데이터를 유선 또는 무선으로 전송하거나, 외부로부터 데이터를 유선 또는 무선 수신하여 제어부(150)로 전달하거나 저장부(130)에 저장할 수 있다. 상기 데이터에는 다양한 사용자 영상 정보 및 이들 간의 비교 정보, 인증 이미지 등이 포함될 수 있으나, 이에 한정되지 않는다. 통신부(110)는 랜(LAN), WCDMA(Wideband Code Division Multiple Access), LTE(Long Term Evolution), WiBro(Wireless Broadband Internet), RF(Radio Frequency)통신, 무선랜(Wireless LAN), 와이파이(Wireless Fidelity), NFC(Near Field Communication), 블루투스, 적외선 통신 등을 통해 통신할 수 있다. 다만, 이는 예시적인 것으로서, 본 발명이 적용되는 실시예에 따라 당해 기술분야에서 적용 가능한 다양한 유, 무선 통신 기술이 이용될 수 있다.
촬영부(120)는 사용자 인증 장치(100)에 인접한 사용자를 촬영하여 사용자 영상을 생성할 수 있다. 여기서 사용자 영상은 정지 화상 또는 동화상일 수 있으며, 제어부(150)로 전송되어, 소정의 프로세싱을 거친 후 사용자 인증에 이용될 수 있다. 촬영부(120)는 카메라 등 사용자 영상을 생성할 수 있는 다양한 촬영 모듈로 구현될 수 있다.
저장부(130)에는 사용자 인증 장치(100)의 동작에 수반되는 다양한 데이터가 저장될 수 있다. 상기 데이터에는 다양한 사용자 영상 정보 및 이들 간의 비교 정보, 인증 이미지 등이 포함될 수 있으나, 이에 한정되지 않는다. 저장부(130)는, 통상의 기술자에게 알려진 바와 같이, HDD(Hard Disk Drive), ROM(Read Only Memory), RAM(Random Access Memory), EEPROM(Electrically Erasable and Programmable Read Only Memory), 플래시 메모리(flash memory), CF(Compact Flash) 카드, SD(Secure Digital) 카드, SM(Smart Media) 카드, MMC(Multimedia) 카드 또는 메모리 스틱(Memory Stick) 등 정보의 입출력이 가능한 다양한 형태의 저장 장치로 구현될 수 있으며, 사용자 인증 장치(100) 내부에 구비되거나, 별도의 장치에 구비될 수 있다.
디스플레이부(140)는 제어부(150)로부터 제공되는 이미지 또는 데이터를 화면에 표시하고, 사용자 인증 장치(100)의 동작을 위해 요구되는 사용자의 입력을 위한 사용자 인터페이스를 제공할 수 있다. 디스플레이부(140)는 액정표시장치(100)(LCD, Liquid Crystal Display), 유기 발광 다이오드(OLED, Organic Light Emitting Diodes), 능동형 유기 발광 다이오드(AMOLED, Active Matrix Organic Light Emitting Diodes) 등으로 형성될 수 있다.
제어부(150)는 사용자 인증 장치(100)의 전반적인 동작 및 그 내부 구성들 간의 신호 흐름을 제어하고, 데이터를 처리하는 데이터 처리 기능을 수행할 수 있다.
제어부(150)는 사용자 인증을 수행하기 위한 것으로서, 촬영부(120)를 통해 사용자를 촬영하여 제 1 사용자 영상을 생성하고, 이를 소정의 사용자 영상과 비교하여 사용자 인증을 수행할 수 있다.
구체적으로, 제어부(150)는 사용자 영상으로부터 얼굴 영역을 추출하고, 추출된 얼굴 영역을 소정의 인증용 사용자 영상의 얼굴 영역과 비교하여 제 1 인증을 수행할 수 있다. 이때, 제어부(150)는, 얼굴의 주요 특징부인 랜드마크(landmark)에 기초하여 얼굴 영역을 분할하고, 분할된 얼굴 영역에 대해 비교를 통한 제 1 인증을 수행할 수 있다.
또한, 제어부(150)는 실물 판정을 통해 이미지 분석에 의한 사용자 인증을 보완하여 보안성을 개선할 수 있다.
구체적으로, 제어부(150)는 디스플레이부(140)를 통해 소정의 인증 이미지를 표시하고, 촬영부(120)를 통해 사용자를 촬영하여 제 2 사용자 영상을 생성한 후, 제 1 사용자 영상과 비교하여 사용자 영상의 변화를 판단함으로써, 제 2 인증을 수행할 수 있다. 이때, 사용자 영상의 변화는 사용자의 얼굴 방향의 변화, 시선 방향의 변화 및 눈의 깜빡임 중 적어도 하나를 포함할 수 있다. 즉, 제어부(150)는 인증 이미지의 표시에 의해 사용자의 얼굴 방향이나 시선 방향이 변화하거나, 눈의 깜빡임이 발생하는 경우 인증 대상인 사용자가 실물인 것으로 판정할 수 있다. 이때, 제어부(150)는, 사용자 영상의 변화, 즉 제 1 사용자 영상과 제 2 사용자 영상 간의 변화가 인증 이미지의 표시 위치 및 표시 시간 중 적어도 하나에 대응하는지를 고려할 수 있다.
또한, 제어부(150)는 디스플레이부(140)를 통해 인증 이미지를 변화시키고, 촬영부(120)를 통해 사용자를 촬영하여 제 3 사용자 영상을 생성한 후, 제 2 인증에 제 3 사용자 영상을 추가적으로 고려할 수 있다. 즉, 제어부(150)는, 제 1 사용자 영상 및 제 2 사용자 영상 간의 비교에 기초하여 인증 이미지의 표시에 따라 사용자의 얼굴 방향이나 시선 방향이 변화하거나, 눈의 깜빡임이 발생하는 것을 판단하고, 제 2 사용자 영상 및 제 3 사용자 영상 간의 비교에 기초하여 인증 이미지의 변화에 따라 사용자의 얼굴 방향이나 시선 방향이 변화하거나, 눈의 깜빡임이 발생하는 것을 판단하여 제 2 인증을 수행할 수 있다. 이때, 제어부(150)는, 사용자 영상의 변화, 즉, 제 2 사용자 영상 및 제 3 사용자 영상 간의 변화가 인증 이미지의 변화의 방향 및 속도 중 적어도 하나에 대응하는지를 고려할 수 있다
도 1에는 도시되지 않으나, 실시예에 따라, 장치(100)는 사용자로부터 다양한 명령 또는 정보를 입력 받을 수 있는 사용자 입력부를 더 포함할 수 있다. 사용자 입력부는 키, 터치 패널, 스위치 등 당해 기술 분야에서 적용 가능한 다양한 입력 장치(100)가 이용될 수 있다. 통신부(110)에 의해 수신되는 다양한 데이터들이 사용자 입력부를 통해 입력될 수 있으며, 이 경우 통신부(110)는 입력부로써 구현될 수 있다.
도 2는 본 발명의 일 실시예에 따라 사용자 인증 장치의 동작 방법이 도시된다.
S210 단계에서, 제어부(150)는 촬영부(120)를 통해 사용자를 촬영하여 제 1 사용자 영상을 생성할 수 있다. S210 단계는 예를 들어, 입력부 또는 통신부(110)에 의해 촬영 입력이 수신되거나, 촬영부(120)의 촬영 범위 내에 사용자가 위치하는 경우에 수행될 수 있다. 또한, S210 단계에서 생성되는 사용자 영상은 정지 화상 또는 동화상일 수 있다.
S220 단계에서, 사용자 영상으로부터 얼굴 영역을 추출하고, 추출된 얼굴 영역의 영상과 소정의 얼굴 영역의 영상과 비교하여 제 1 인증을 수행할 수 있다. 여기서 소정의 얼굴 영역의 영상은 인증이 허여된 사용자의 얼굴 영역에 관한 것으로서, 제어부(150)는 제 1 사용자 영상에 기초하여 얼굴(또는 안면) 인식을 통하여 동일인임을 판단하여 인증을 수행할 수 있다. 이때, 인증은 얼굴 영역 전체에 대해 수행되거나, 얼굴의 주요 특징부인 랜드마크(landmark)에 기초하여 각 얼굴 영역을 분할하는 적어도 하나의 분할 얼굴 영역에 대해 수행될 수 있다. 예를 들어, 제어부(150)는 추출된 얼굴 영역 및 소정의 얼굴 영역을 분할하고, 분할된 각 얼굴 영역 간의 비교를 통해 인증을 수행할 수 있다.
S230 단계에서, 제어부(150)는 디스플레이부(140)를 통해 소정의 인증 이미지를 표시할 수 있다. S230 단계는 S220 단계에서 제 1 인증에 성공하면 수행되는 것으로서, 여기서 소정의 인증 이미지는 사용자 영상의 변화를 야기하기 위한 임의의 색과 형상을 갖는 이미지로서, 디스플레이부(140)의 표시 영역 중 사용자가 표시되는 영역을 제외한 영역에 표시될 수 있다.
S240 단계에서, 제어부(150)는 촬영부(120)를 통해 사용자를 촬영하여 제 2 사용자 영상을 생성할 수 있다. S240 단계는 인증 이미지 표시 후에 사용자의 변화를 촬영하여 사용자 영상을 생성하기 위한 것으로서 S210 단계와 마찬가지로 수행될 수 있다.
S250 단계에서, 제어부(150)는 제 1 사용자 영상 및 제 2 사용자 영상에 기초하여 제 2 인증을 수행할 수 있다. S250 단계는 제 1 인증에 성공한 사용자의 실물 판정을 위한 것으로서, 구체적으로, 제어부(150)가 제 1 사용자 영상과 제 2 사용자 영상을 비교하여 사용자 영상의 변화를 판단함으로써 수행될 수 있다. 이때, 사용자 영상의 변화는 사용자의 얼굴 방향의 변화, 시선 방향의 변화 및 눈의 깜빡임 중 적어도 하나를 포함할 수 있다. 즉, S230 단계의 인증 이미지의 표시에 의해 사용자의 얼굴 방향이나 시선 방향이 변화하거나, 눈의 깜빡임이 발생하는 경우 인증 대상인 사용자가 실물인 것으로 판정할 수 있다.
실시예에 따라, 제어부(150)는, 사용자 영상의 변화, 즉 제 1 사용자 영상과 제 2 사용자 영상 간의 변화가 인증 이미지의 표시 위치 및 표시 시간 중 적어도 하나에 대응하는지를 고려할 수 있다. 일 예시에서, 제어부(150)는, 사용자의 얼굴 방향 또는 시선 방향의 변화가 인증 이미지의 표시 위치에 대응하는 경우, 사용자가 실물이라고 판단할 수 있다. 일 예시에서, 제어부(150)는, 사용자의 얼굴 방향, 시선 방향의 변화 또는 눈의 깜빡임의 발생이 인증 이미지의 표시 시간에 대응하는 경우(즉, 동일하거나 소정의 시간 이내인 경우), 사용자가 실물이라고 판단할 수 있다.
도 3은 본 발명의 일 실시예에 따라 사용자 인증 장치의 동작 방법이 도시된다.
방법은 방법의 S240 단계 및 S250 단계 사이에 수행될 수 있다.
S240 단계에 의해 제 2 사용자 영상이 생성되면, S310 단계에서, 제어부(150)는 디스플레이부(140)를 통해 인증 이미지를 변화시킬 수 있다. 상기 변화는 디스플레이부(140) 상에 표시되는 인증 이미지를 다른 인증 이미지로 대체함으로써 수행될 수 있으며, 상기 다른 인증 이미지는 상기 인증 이미지와 표시 위치, 형상 및 색 중 적어도 하나가 상이할 수 있다.
계속해서, S320 단계에서, 제어부(150)는 촬영부(120)를 통해 사용자를 촬영하여 제 3 사용자 영상을 생성할 수 있다. S320 단계는 인증 이미지의 변화에 따른 사용자의 변화를 촬영하여 사용자 영상을 생성하기 위한 것으로서 S210 단계 또는 S240 단계와 마찬가지로 수행될 수 있다.
제 3 사용자 영상이 생성되면, S250 단계는, 제 1 사용자 영상과 제 2 사용자 영상 간의 비교에 부가하여, 제 2 사용자 영상과 제 3 사용자 영상 간의 비교에 기초하여 수행될 수 있다. 즉, 제어부(150)는, 제 1 사용자 영상 및 제 2 사용자 영상 간의 비교에 기초하여 인증 이미지의 표시에 따라 사용자의 얼굴 방향이나 시선 방향이 변화하거나, 눈의 깜빡임이 발생하는 것을 판단하고, 제 2 사용자 영상 및 제 3 사용자 영상 간의 비교에 기초하여 인증 이미지의 변화에 따라 사용자의 얼굴 방향이나 시선 방향이 변화하거나, 눈의 깜빡임이 발생하는 것을 판단하여 제 2 인증을 수행할 수 있다.
실시예에 따라, 제어부(150)는, 사용자 영상의 변화, 즉, 제 2 사용자 영상 및 제 3 사용자 영상 간의 변화가 인증 이미지의 변화의 방향 및 속도 중 적어도 하나에 대응하는지를 고려할 수 있다. 일 예시에서, 제어부(150)는, 사용자의 얼굴 방향 또는 시선 방향의 변화 방향이 인증 이미지의 변화 방향에 대응하는 경우, 사용자가 실물이라고 판단할 수 있다. 일 예시에서, 제어부(150)는, 사용자의 얼굴 방향, 시선 방향의 변화 또는 눈의 깜빡임의 발생이 인증 이미지의 변화 시간에 대응하는 경우(즉, 동일하거나 소정의 시간 이내인 경우), 사용자가 실물이라고 판단할 수 있다.
도 4는 본 발명의 일 실시예에 따른 사용자 인증 장치의 동작 예시를 도시한다.
도 4의 (a)를 참조하면, 사용자 인증 장치(100)는 디스플레이부(140)가 전면에 위치하고, 디스플레이부(140)에 인접하여 촬영부(120)가 위치할 수 있다. 촬영부(120)는 사용자를 촬영하여 사용자 영상을 생성하고, 디스플레이부(140)는 촬영부(120)에 의해 생성되는 사용자 영상을 표시하여, 사용자로 하여금 인증을 위한 적절한 위치 등을 파악하도록 할 수 있다.
도 4의 (b)를 참조하면, 촬영부(120)가 사용자를 촬영하여 사용자 영상을 생성하면, 제어부(150)는 사용자 영상을 수신한 후, 사용자 영상에서 얼굴 영역을 추출할 수 있다. 이때 당해 기술분야에서 이용 가능한 다양한 안면 인식 기술 등이 적용될 수 있다. 이후 제어부(150)는, 얼굴의 주요 특징부인 랜드마크(landmark)에 기초하여 각 얼굴 영역을 분할하고, 각 분할 얼굴 영역에 대해 사용자 인증을 수행할 수 있다.
도 5는 본 발명의 일 실시예에 따른 사용자 인증 장치의 동작 예시를 도시한다.
도시되는 바와 같이, 제 1 사용자 인증이 완료되면, 제어부(150)는 디스플레이부(140)를 통해 소정의 인증 이미지를 표시할 수 있다. 여기서 인증 이미지는 사용자 영상의 변화를 야기하기 위한 임의의 색과 형상을 갖는 이미지로서, 디스플레이부(140)의 표시 영역 중 사용자가 표시되는 영역을 제외한 영역에 표시될 수 있다.
인증 이미지의 표시에 따라 촬영부(120)는 사용자를 촬영하여 제 2 사용자 영상을 생성하고, 제어부(150)는 이에 기초하여 사용자의 시선이나 얼굴 방향의 변화 또는 눈의 깜빡임이 발생하면 사용자가 실물임을 판정할 수 있다.
도 6은 본 발명의 일 실시예에 따른 사용자 인증 장치의 동작 예시를 도시한다.
도 6의 (a)에서 도시되는 바와 같이, 제 1 인증 이미지(610)가 디스플레이부(140) 상에 표시될 수 있다. 제 1 인증 이미지(610)의 표시에 따라 촬영부(120)는 사용자를 촬영하여 제 2 사용자 영상을 생성할 수 있다.
이후, 제어부(150)는 디스플레이부(140)를 통해 제 1 인증 이미지(610)를 제 2 인증 이미지(620, 630, 640)로 대체하여 표시할 수 있다. 이때, 제 2 인증 이미지(620, 630, 640)는 제 1 인증 이미지(610)와 표시 위치, 형상 및 색 중 적어도 하나가 상이할 수 있다.
구체적으로, 도 6의 (b)에서 도시되는 바와 같이, 제 2 인증 이미지(620)는, 제 1 인증 이미지(610)와 동일한 색 및 형상을 가지며, 표시 위치만이 변경된 이미지일 수 있다. 또한, 도 6의 (c)에서 도시되는 바와 같이, 제 2 인증 이미지(620)는, 제 1 인증 이미지(610)와 동일한 표시 위치를 가지되, 색 및 형상이 변경된 이미지일 수 있다. 또한, 도 6의 (d)에서 도시되는 바와 같이, 제 2 인증 이미지(620)는, 제 1 인증 이미지(610)와는 색, 형상 및 표시 위치가 모두 변경된 이미지일 수 있다.
제 2 인증 이미지(620, 630, 640)의 표시에 따라, 촬영부(120)는 사용자를 촬영하여 제 3 사용자 영상을 생성하고, 제어부(150)는, 제 2 사용자 영상 및 제 3 사용자 영상을 추가적으로 고려하여 제 2 인증을 수행할 수 있다.
한편, 본 명세서에 기재된 다양한 실시예들은 하드웨어, 미들웨어, 마이크로코드, 소프트웨어 및/또는 이들의 조합에 의해 구현될 수 있다. 예를 들어, 다양한 실시예들은 하나 이상의 주문형 반도체(ASIC)들, 디지털 신호 프로세서(DSP)들, 디지털 신호 프로세싱 디바이스(DSPD)들, 프로그램어블 논리 디바이스(PLD)들, 필드 프로그램어블 게이트 어레이(FPGA)들, 프로세서들, 컨트롤러들, 마이크로컨트롤러들, 마이크로프로세서들, 여기서 제시되는 기능들을 수행하도록 설계되는 다른 전자 유닛들 또는 이들의 조합 내에서 구현될 수 있다.
또한, 예를 들어, 다양한 실시예들은 명령들을 포함하는 컴퓨터-판독가능한 매체에 수록되거나 인코딩될 수 있다. 컴퓨터-판독가능한 매체에 수록 또는 인코딩된 명령들은 프로그램 가능한 프로세서 또는 다른 프로세서로 하여금 예컨대,　명령들이 실행될 때 방법을 수행하게끔 할 수 있다. 컴퓨터-판독가능한 매체는 컴퓨터 저장 매체,　및 하나의 장소로부터 다른 장소로 컴퓨터 프로그램의 이송을 용이하게 하는 임의의 매체를 포함하는 통신 매체 모두를 포함한다.　저장 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수도 있다.　예를 들어,　이러한 컴퓨터-판독가능한 매체는 RAM, ROM, EEPROM, CD-ROM　또는 기타 광학 디스크 저장 매체,　자기 디스크 저장 매체 또는 기타 자기 저장 디바이스,　또는 원하는 프로그램 코드를 컴퓨터에 의해 액세스가능한 명령들 또는 데이터 구조들의 형태로 반송하거나 저장하는데 이용될 수 있는 임의의 다른 매체를 포함할 수 있다.
이러한 하드웨어, 소프트웨어, 펌웨어 등은 본 명세서에 기술된 다양한 동작들 및 기능들을 지원하도록 동일한 디바이스 내에서 또는 개별 디바이스들 내에서 구현될 수 있다. 추가적으로, 본 발명에서 "~부"로 기재된 구성요소들, 유닛들, 모듈들, 컴포넌트들 등은 함께 또는 개별적이지만 상호 운용가능한 로직 디바이스들로서 개별적으로 구현될 수 있다. 모듈들, 유닛들 등에 대한 서로 다른 특징들의 묘사는 서로 다른 기능적 실시예들을 강조하기 위해 의도된 것이며, 이들이 개별 하드웨어 또는 소프트웨어 컴포넌트들에 의해 실현되어야만 함을 필수적으로 의미하지 않는다. 오히려, 하나 이상의 모듈들 또는 유닛들과 관련된 기능은 개별 하드웨어 또는 소프트웨어 컴포넌트들에 의해 수행되거나 또는 공통의 또는 개별의 하드웨어 또는 소프트웨어 컴포넌트들 내에 통합될 수 있다.
특정한 순서로 동작들이 도면에 도시되어 있지만, 이러한 동작들이 원하는 결과를 달성하기 위해 도시된 특정한 순서, 또는 순차적인 순서로 수행되거나, 또는 모든 도시된 동작이 수행되어야 할 필요가 있는 것으로 이해되지 말아야 한다. 임의의 환경에서는, 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 더욱이, 상술한 실시예에서 다양한 구성요소들의 구분은 모든 실시예에서 이러한 구분을 필요로 하는 것으로 이해되어서는 안되며, 기술된 구성요소들이 일반적으로 단일 소프트웨어 제품으로 함께 통합되거나 다수의 소프트웨어 제품으로 패키징될 수 있다는 것이 이해되어야 한다.
이상에서와 같이 도면과 명세서에서 최적 실시예가 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.

Claims (13)

  1. 사용자 인증 장치의 동작 방법으로서,
    사용자를 촬영하여 제 1 사용자 영상을 생성하는 단계;
    상기 사용자 영상으로부터 얼굴 영역을 추출하고, 상기 얼굴 영역의 영상과 소정의 얼굴 영역의 영상과 비교하여 제 1 인증을 수행하는 단계;
    상기 제 1 인증에 성공하면, 디스플레이부 상에 소정의 인증 이미지를 표시하는 단계;
    상기 사용자를 촬영하여 제 2 사용자 영상을 생성하는 단계; 및
    상기 제 1 사용자 영상과 상기 제 2 사용자 영상을 비교하여 사용자 영상의 변화를 판단함으로써 제 2 인증을 수행하는 단계를 포함하는, 방법.
  2. 제 1 항에 있어서,
    상기 사용자 영상의 변화는 상기 사용자의 얼굴 방향의 변화, 시선 방향의 변화 및 눈의 깜빡임 중 적어도 하나를 포함하는, 방법.
  3. 제 2 항에 있어서,
    상기 제 2 인증을 수행하는 단계는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 변화가 상기 인증 이미지의 표시 위치 및 표시 시간 중 적어도 하나에 대응하는지를 비교함으로써 수행되는, 방법.
  4. 제 1 항에 있어서,
    상기 디스플레이부 상에 표시되는 상기 인증 이미지를 변화시키는 단계; 및
    상기 사용자를 촬영하여 제 3 사용자 영상을 생성하는 단계를 더 포함하고,
    상기 제 2 인증을 수행하는 단계를 포함하는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 비교에 부가하여, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 비교에 기초하여 수행되는, 방법.
  5. 제 4 항에 있어서,
    상기 변화는 상기 인증 이미지를 다른 인증 이미지로 대체함으로써 수행될 수 있으며, 상기 다른 인증 이미지는 상기 인증 이미지와 표시 위치, 형상 및 색 중 적어도 하나가 상이한, 방법.
  6. 제 4 항에 있어서,
    상기 제 2 인증을 수행하는 단계는, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 변화가 상기 인증 이미지의 변화의 방향 및 속도 중 적어도 하나에 대응하는지를 비교함으로써 수행되는, 방법.
  7. 제 1 항 내지 제 6 항 중 어느 한 항에 따른 방법을 수행하기 위한 프로그램이 기록된 컴퓨터 판독 가능한 기록매체.
  8. 사용자 인증 장치로서,
    사용자를 촬영하여 제 1 사용자 영상을 생성하는 촬영부;
    상기 사용자 영상으로부터 얼굴 영역을 추출하고, 상기 얼굴 영역의 영상과 소정의 얼굴 영역의 영상과 비교하여 제 1 인증을 수행하는 제어부; 및
    상기 제 1 인증에 성공하면, 소정의 인증 이미지를 표시하는 디스플레이부를 포함하고,
    상기 촬영부는, 상기 디스플레이부가 상기 인증 이미지를 표시한 후에 상기 사용자를 촬영하여 제 2 사용자 영상을 생성하고,
    상기 제어부는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상을 비교하여 사용자 영상의 변화를 판단함으로써 제 2 인증을 수행하는, 장치.
  9. 제 8 항에 있어서,
    상기 사용자 영상의 변화는 상기 사용자의 얼굴 방향의 변화, 시선 방향의 변화 및 눈의 깜빡임 중 적어도 하나를 포함하는, 장치.
  10. 제 9 항에 있어서,
    상기 제어부는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 변화가 상기 인증 이미지의 표시 위치 및 표시 시간 중 적어도 하나에 대응하는지를 비교함으로써 상기 제 2 인증을 수행하는, 장치.
  11. 제 8 항에 있어서,
    상기 디스플레이부가 상기 인증 이미지를 변화시키면, 상기 촬영부는 상기 사용자를 촬영하여 제 3 사용자 영상을 생성하고, 상기 제어부는, 상기 제 1 사용자 영상과 상기 제 2 사용자 영상 간의 비교에 부가하여, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 비교에 기초하여 상기 제 2 인증을 수행하는, 장치.
  12. 제 10 항에 있어서,
    상기 변화는 상기 인증 이미지를 다른 인증 이미지로 대체함으로써 수행될 수 있으며, 상기 다른 인증 이미지는 상기 인증 이미지와 표시 위치, 형상 및 색 중 적어도 하나가 상이한, 장치.
  13. 제 11 항에 있어서,
    상기 제어부는, 상기 제 2 사용자 영상과 상기 제 3 사용자 영상 간의 변화가 상기 인증 이미지의 변화의 방향 및 속도 중 적어도 하나에 대응하는지를 비교함으로써 상기 제 2 인증을 수행하는, 장치.
KR1020160159472A 2016-11-28 2016-11-28 사용자 인증 장치 및 그 동작 방법 KR20180060223A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160159472A KR20180060223A (ko) 2016-11-28 2016-11-28 사용자 인증 장치 및 그 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160159472A KR20180060223A (ko) 2016-11-28 2016-11-28 사용자 인증 장치 및 그 동작 방법

Publications (1)

Publication Number Publication Date
KR20180060223A true KR20180060223A (ko) 2018-06-07

Family

ID=62621516

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160159472A KR20180060223A (ko) 2016-11-28 2016-11-28 사용자 인증 장치 및 그 동작 방법

Country Status (1)

Country Link
KR (1) KR20180060223A (ko)

Similar Documents

Publication Publication Date Title
US11093731B2 (en) Analysis of reflections of projected light in varying colors, brightness, patterns, and sequences for liveness detection in biometric systems
TWI613564B (zh) 眼睛注視認證技術
US20200026920A1 (en) Information processing apparatus, information processing method, eyewear terminal, and authentication system
US10885362B2 (en) Facial recognition method and apparatus and imposter recognition method and apparatus
US11775627B2 (en) Biometric authentication device, method and recording medium
US20150110364A1 (en) Image processing device and image processing method
US20130322705A1 (en) Facial and fingerprint authentication
JP2014206932A (ja) 認証装置、認証方法、制御プログラムおよび記録媒体
US10956553B2 (en) Method of unlocking an electronic device, unlocking device and system and storage medium
KR20170138110A (ko) 미러 디스플레이 장치 및 그 동작 방법
US20170228582A1 (en) Fingerprint authentication display device and authentication display method
US11194894B2 (en) Electronic device and control method thereof
KR101679265B1 (ko) 투명 디스플레이 장치 및 그 동작 방법
EP3314899B1 (en) Technologies for depth-based user authentication
JP2017142859A (ja) 認証装置、認証方法、制御プログラムおよび記録媒体
KR20180060224A (ko) 조명 변화를 통한 사용자 인증 장치 및 그 동작 방법
KR20180056116A (ko) 순환식 보안 키패드 및 중첩 이미지를 이용한 인증 방법 및 장치
KR20180060223A (ko) 사용자 인증 장치 및 그 동작 방법
US11928795B2 (en) Filtering pulse-width modulated (PWM) noise from a fingerprint image captured with an optical under-display fingerprint sensor (UDFPS)
KR102274370B1 (ko) 안면인식장치 및 안면인식 방법
US10831926B1 (en) Privacy proof visual sensor
US20150350203A1 (en) Mobile device, method of authenticating a user, computer program, article of manufacture, display
US20190171802A1 (en) Electronic device and controlling method thereof
CN114170412A (zh) 证件真伪的识别方法、装置及设备