KR20230112973A - 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법 - Google Patents

영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법 Download PDF

Info

Publication number
KR20230112973A
KR20230112973A KR1020220009259A KR20220009259A KR20230112973A KR 20230112973 A KR20230112973 A KR 20230112973A KR 1020220009259 A KR1020220009259 A KR 1020220009259A KR 20220009259 A KR20220009259 A KR 20220009259A KR 20230112973 A KR20230112973 A KR 20230112973A
Authority
KR
South Korea
Prior art keywords
image
target
camera
authentication
data
Prior art date
Application number
KR1020220009259A
Other languages
English (en)
Inventor
김종헌
송치영
신호철
박근한
Original Assignee
엔에이치엔클라우드 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엔에이치엔클라우드 주식회사 filed Critical 엔에이치엔클라우드 주식회사
Priority to KR1020220009259A priority Critical patent/KR20230112973A/ko
Publication of KR20230112973A publication Critical patent/KR20230112973A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45Structures or tools for the administration of authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/001Image restoration
    • G06T5/002Denoising; Smoothing
    • G06T5/70

Abstract

본 발명에 따른 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법은, 카메라의 화각 내에 위치하는 타겟을 촬영하여 영상을 생성하는 단계, 소정의 패턴을 디스플레이 장치에 적어도 부분적으로 디스플레이하는 단계, 그리고 영상에서 소정의 패턴에 대응하는 추가적인 오브젝트가 감지되는지 여부에 기반하여 타겟을 인증하기 위한 인증 신호를 디스에이블하는 단계를 포함한다.

Description

영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법{DEVICE AND METHOD TO AUTHORIZE USER BASED ON VIDEO DATA}
본 발명은 영상 데이터를 처리하기 위한 장치 및 방법에 관한 것으로, 좀 더 구체적으로는 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법에 관한 것이다.
사용자 인증 시스템에서 컴퓨터 장치는 사용자로부터 제공되는 인증 데이터에 기반하여 컴퓨터 장치의 사용을 허용할지 여부, 컴퓨터 장치의 동작들 중 적어도 일부의 수행을 허용할지 여부 등을 결정할 수 있다. 인증 데이터는 다양한 방식들로 제공될 수 있으며, 예를 들면 사용자에 의해 입력되는 패스워드, 생체 정보(biometric information) 등을 포함할 수 있다. 생체 정보는 지문(fingerprint), 홍채(iris), 및 얼굴에 대한 정보를 포함할 수 있다.
컴퓨터 장치가 대체로 이미지 및/또는 영상을 촬영할 수 있는 카메라를 포함함을 고려할 때, 사용자의 얼굴을 촬영하여 수행되는 얼굴 인증 방식이 다른 인증 방식들 대비 경제적 이점을 가질 수 있다.
위 기재된 내용은 오직 본 발명의 기술적 사상들에 대한 배경 기술의 이해를 돕기 위한 것이며, 따라서 그것은 본 발명의 기술 분야의 당업자에게 알려진 선행 기술에 해당하는 내용으로 이해될 수 없다.
사용자의 얼굴을 촬영하여 수행되는 얼굴 인증 방식에서는 악의적으로 오 인증을 유발하는 스푸핑 공격이 존재할 수 있으며, 이에 따라 얼굴 인증 방식에서는 이를 방지할 수 있는 수단이 요구된다.
본 발명의 실시 예들에 따른 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법은 향상된 보안 수준으로 사용자를 인증할 수 있다. 예를 들면, 사용자 인증 장치 및 방법은 사람이 아닌 물체가 촬영되게 하여 사용자 인증을 패스하고자 하는 스푸핑 공격을 효과적 및 효율적으로 검출해낼 수 있다.
본 발명의 실시 예에 따른 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법은, 상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 상기 영상을 생성하는 단계; 소정의 패턴을 디스플레이 장치에 적어도 부분적으로 디스플레이하는 단계; 및 상기 영상에서 상기 소정의 패턴에 대응하는 추가적인 오브젝트가 감지되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 단계를 포함한다.
상기 방법은 상기 인증 신호에 응답하여 데이터 서버로의 액세스를 허용 또는 차단하는 단계를 더 포함할 수 있다.
상기 방법은 상기 영상으로부터 노이즈 신호들을 추출하는 단계; 및 상기 노이즈 신호들로부터 특징 데이터를 추출하는 단계를 더 포함할 수 있다. 상기 인증 신호를 생성하는 단계는 상기 특징 데이터가 소정의 검증 데이터와 매치되는지 여부에 더 기반하여 상기 인증 신호를 디스에이블하는 단계를 포함할 수 있다.
상기 노이즈 신호들을 추출하는 단계는 상기 타겟에 대응하는 타겟 오브젝트를 제외한 상기 영상의 배경 영역으로부터 상기 노이즈 신호들을 추출하는 단계를 포함할 수 있다.
상기 방법은 상기 영상에 기반하여 라이브니스 검사를 수행하는 단계를 더 포함할 수 있다. 상기 인증 신호를 디스에이블하는 단계는 상기 라이브니스 검사의 결과에 더 기반하여 상기 인증 신호를 디스에이블하는 단계를 포함할 수 있다.
상기 방법은 상기 영상에서 상기 타겟에 대응하는 타겟 오브젝트를 감지하는 단계; 및 상기 타겟 오브젝트가 소정의 기준 데이터와 매치되는지 여부를 판별하는 단계를 더 포함할 수 있다.
상기 소정의 패턴을 디스플레이하는 단계는 상기 타겟 오브젝트가 상기 기준 데이터와 매치될 때 수행될 수 있다.
본 발명의 다른 실시 예에 따른 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법은, 상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 상기 영상을 생성하는 단계; 상기 영상으로부터 노이즈 신호들을 추출하는 단계; 상기 노이즈 신호들로부터 특징 데이터를 추출하는 단계; 및 상기 특징 데이터가 소정의 검증 데이터와 매치되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 단계를 포함한다.
상기 노이즈 신호들을 추출하는 단계는 상기 타겟에 대응하는 타겟 오브젝트를 제외한 상기 영상의 배경 영역으로부터 상기 노이즈 신호들을 추출하는 단계를 포함할 수 있다.
상기 방법은 소정의 패턴을 디스플레이 장치에 적어도 부분적으로 디스플레이하는 단계를 더 포함할 수 있다. 상기 영상에서 상기 소정의 패턴에 대응하는 추가적인 오브젝트가 감지되는지 여부에 더 기반하여 상기 인증 신호를 디스에이블하는 단계를 포함할 수 있다.
상기 방법은 상기 영상에서 상기 타겟에 대응하는 타겟 오브젝트를 감지하는 단계; 및 상기 타겟 오브젝트가 소정의 기준 데이터와 매치되는지 여부를 판별하는 단계를 더 포함할 수 있다. 상기 노이즈 신호들을 추출하는 단계는 상기 타겟 오브젝트가 상기 기준 데이터와 매치될 때 수행될 수 있다.
본 발명의 다른 일면은 컴퓨터 프로그램을 저장하는, 컴퓨터 장치에 의해 판독 가능한 저장 매체에 있어서, 상기 컴퓨터 장치는 카메라, 디스플레이 장치, 및 상기 카메라와 상기 디스플레이 장치에 연결되는 프로세서를 포함하고, 상기 컴퓨터 프로그램은 상기 프로세서에 의해 실행될 때, 상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 영상을 생성하고; 소정의 패턴을 디스플레이 장치에 적어도 부분적으로 디스플레이하고; 상기 영상에서 상기 소정의 패턴에 대응하는 추가적인 오브젝트가 감지되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 명령어들을 포함한다.
본 발명의 다른 실시 예에 따른 컴퓨터 프로그램을 저장하는, 컴퓨터 장치에 의해 판독 가능한 저장 매체에 있어서, 상기 컴퓨터 장치는 카메라, 디스플레이 장치, 및 상기 카메라와 상기 디스플레이 장치에 연결되는 프로세서를 포함하고, 상기 컴퓨터 프로그램은 상기 프로세서에 의해 실행될 때, 상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 영상을 생성하고; 상기 영상으로부터 노이즈 신호들을 추출하고; 상기 노이즈 신호들로부터 특징 데이터를 추출하고; 상기 특징 데이터가 소정의 검증 데이터와 매치되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 명령어들을 포함한다.
본 발명의 실시 예들에 따르면, 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법은 향상된 보안 수준으로 사용자를 인증할 수 있다.
도 1은 클라이언트 단말기와 그 앞에 위치한 사용자를 보여주는 도면이다.
도 2는 본 발명의 실시 예에 따른 네트워크 시스템을 보여주는 블록도이다.
도 3은 도 2의 사용자 인증기의 실시 예를 보여주는 블록도이다.
도 4는 도 3의 사용자 오브젝트 감지부에 의해 디스플레이 장치에 표시되는 그래픽 인터페이스의 일 예를 보여주는 도면이다.
도 5는 도 3의 패턴 출력부에 의해 디스플레이 장치에 표시되는 그래픽 인터페이스의 일 예를 보여주는 도면이다.
도 6은 도 2의 사용자 인증기의 다른 실시 예를 보여주는 블록도이다.
도 7은 타겟 이미지 및 그와 비교되는 검증 이미지를 보여주는 도면이다.
도 8은 도 2의 사용자 인증기의 또 다른 실시 예를 보여주는 블록도이다.
도 9는 도 2의 사용자 인증기의 다른 실시 예를 보여주는 블록도이다.
도 10은 본 발명의 실시 예에 따른 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법의 실시 예를 보여주는 순서도이다.
도 11은 본 발명의 실시 예에 따른 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법의 다른 실시 예를 보여주는 순서도이다.
도 12는 도 2의 클라이언트 단말기를 구현하기에 적합한 컴퓨터 장치의 실시 예를 보여주는 블록도이다.
도 13은 도 12의 클라이언트 제어 모듈 혹은 그것의 설치 파일을 제공하는 클라이언트 서버의 실시 예를 보여주는 블록도이다.
이하, 본 발명에 따른 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명에 따른 동작을 이해하는데 필요한 부분만이 설명되며 그 이외 부분의 설명은 본 발명의 요지를 모호하지 않도록 하기 위해 생략될 것이라는 것을 유의하여야 한다. 또한 본 발명은 여기에서 설명되는 실시 예에 한정되지 않고 다른 형태로 구체화될 수도 있다. 단지, 여기에서 설명되는 실시 예는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여 제공되는 것이다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함한다. 여기에서 사용된 용어는 특정한 실시예들을 설명하기 위한 것이며 본 발명을 한정하기 위한 것이 아니다. 명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. "X, Y, 및 Z 중 적어도 어느 하나", 그리고 "X, Y, 및 Z로 구성된 그룹으로부터 선택된 적어도 어느 하나"는 X 하나, Y 하나, Z 하나, 또는 X, Y, 및 Z 중 둘 또는 그 이상의 어떤 조합 (예를 들면, XYZ, XYY, YZ, ZZ) 으로 해석될 수 있다. 여기에서, "및/또는"은 해당 구성들 중 하나 또는 그 이상의 모든 조합을 포함한다.
도 1은 클라이언트 단말기와 그 앞에 위치한 사용자를 보여주는 도면이다.
도 1을 참조하면, 클라이언트 단말기(20)는 사용자 인증을 통해 클라이언트 단말기(20) 혹은 그것과 연결된 데이터 서버를 이용하고자 하는 사용자(10)를 인증할 수 있다. 예를 들면, 클라이언트 단말기(20)는 카메라(CMR)를 이용하여 사용자(10)의 얼굴 영상을 획득하고, 획득된 얼굴 영상을 분석하여 클라이언트 단말기(20)의 임의의 동작을 허용할지 여부를 결정할 수 있다. 실시 예들에서, 영상에서 얼굴에 대응하는 오브젝트가 검출되고, 검출된 오브젝트가 유효(valid) 사용자와 연관하여 등록된 데이터와 비교되고, 비교 결과에 기반하여 사용자가 인증될 수 있다. 인증의 패스는 클라이언트 단말기(20)의 다양한 동작들, 예를 들면 사용자 입력에 응답하여 수행되는 동작들을 허용하거나 트리거할 수 있다.
유효 사용자는 자신의 얼굴을 카메라(CMR)로 촬영하는 방법 등을 통해 클라이언트 단말기(20)에 미리 등록할 수 있고, 클라이언트 단말기(20)는 등록된 얼굴과 연관된 데이터를 저장 장치 혹은 그와 연관된 네트워크 데이터베이스에 저장할 수 있다. 예를 들면, 유효 사용자의 얼굴 영상으로부터 추출된 특징 데이터가 유효 사용자의 등록 데이터로서 저장될 수 있다.
사용자 인증을 악의적으로 무력화하는 공격이 시도될 수 있다. 예를 들면, 전자 기기에 디스플레이된 유효 사용자의 얼굴, 사진 혹은 종이 등에 인쇄된 유효 사용자의 얼굴 등이 카메라(CMR)에 의해 촬영되게 하여 사용자 인증을 시도할 수 있다. 만약 사용자 인증이 패스된다면, 클라이언트 단말기(20), 그와 연결된 데이터 서버, 및/또는 그것들과 연관된 데이터에 대한 보안은 취약해질 수 있다. 본 발명의 실시 예에 따른 네트워크 시스템 및/또는 클라이언트 단말기(20)는 이러한 오 인증을 방지하도록 구성된다.
도 2는 본 발명의 실시 예에 따른 네트워크 시스템을 보여주는 블록도이다.
도 2를 참조하면, 네트워크 시스템(100)은 네트워크(105), 클라이언트 단말기(110), 및 데이터 서버(120)를 포함할 수 있다.
네트워크 시스템(100)은 여기에 설명된 본 발명의 실시 예들에 따른 다양한 방법들을 수행하도록 동작하는 복수의 장치들, 서버들, 및/또는 소프트웨어 구성들을 포함할 수 있다. 도 2에 도시된 장치들 및/또는 서버들은 다른 방식들로 구성될 수 있으며, 장치들 및/또는 서버들에 의해 제공되는 동작들 및 서비스들은 여기에 설명된 실시 예들을 위해 결합되거나 분리될 수 있으며, 더 많은 수 혹은 더 적은 수의 장치들 및/또는 서버들에 의해 수행될 수 있다. 하나 또는 그 이상의 장치들 및/또는 서버들은 동일 혹은 상이한 기업체들에 의해 구동 및/또는 유지될 수 있다.
네트워크(105)는 클라이언트 단말기(110) 및 데이터 서버(120)와 같은 네트워크 시스템(100) 내 구성 요소들을 연결한다. 네트워크(105)는 공용 네트워크(public network), 적어도 하나의 사설 네트워크(private network), 유선 네트워크, 무선 네트워크, 다른 적절한 타입의 네트워크, 및 그것들의 조합들 중 적어도 하나를 포함할 수 있다. 네트워크 시스템(100) 내 구성 요소들 각각은 유선 통신 기능 및 무선 통신 기능 중 적어도 하나를 포함할 수 있으며, 그에 따라 네트워크(105)를 통해 상호 간 통신할 수 있다.
클라이언트 단말기(110)는 사용자의 제어에 응답하여 네트워크(105)를 통해 데이터 서버(120)에 액세스할 수 있다. 클라이언트 단말기(110)는 디스플레이 장치(111), 사용자 입력 장치(112), 통신기(113), 카메라(CMR), 및 클라이언트 제어 장치(114)를 포함할 수 있다.
클라이언트 단말기(110)는 사용자가 인지할 수 있는 형태의 정보를 출력하도록 구성되는 출력 인터페이스 장치를 포함할 수 있으며, 도 2에서는 디스플레이 장치(111)와 같은 형태로서 출력 인터페이스 장치가 제공된다. 디스플레이 장치(111)는 클라이언트 제어 장치(114)에 연결되어 그것의 제어에 따라 동작한다. 실시 예들에서, 출력 인터페이스 장치는 클라이언트 제어 장치(114)의 제어에 따라 사용자에게 청각적 정보를 전달하도록 구성되는 음향 장치를 더 포함할 수 있다.
사용자 입력 장치(112)는 클라이언트 제어 장치(114)에 연결되며, 클라이언트 제어 장치(114)의 동작들을 제어하기 위한 사용자 입력들을 사용자로부터 수신하고 수신된 사용자 입력들을 클라이언트 제어 장치(114)에 제공하도록 구성된다. 실시 예들에서, 사용자 입력 장치(112)는 키 패드, 터치 패드, 마우스 등을 포함할 수 있다. 특히, 터치 패드가 디스플레이 장치(111)의 디스플레이 장치와 일체로 형성되는 경우, 이를 터치 스크린(touch screen)이라 부를 수 있다. 이러한 경우, 사용자 입력 장치(112)는 디스플레이 장치(111)에 의해 시각화될 수 있다.
통신기(113)는 네트워크(105)에 연결되며, 클라이언트 제어 장치(114)의 제어에 따라 외부의 장치 및/또는 서버, 예를 들면 데이터 서버(120)와 통신을 수행하도록 구성된다. 통신기(113)는 유선 통신 기능 및/또는 무선 통신 기능을 지원하며, 이들을 통해 네트워크(105) 상 데이터 서버(120)와 통신할 수 있다.
카메라(CMR)는 적절한 영역을 지향하도록 설치되며, 클라이언트 제어 장치(114)의 제어에 응답하여 지향하는 영역을 촬영하여 영상(VD)을 제공하도록 구성된다.
클라이언트 제어 장치(114)는 디스플레이 장치(111), 사용자 입력 장치(112), 통신기(113), 및 카메라(CMR)를 제어하도록 구성된다. 클라이언트 제어 장치(114)는 메인 컨트롤러(115) 및 사용자 인증기(116)를 포함할 수 있다. 메인 컨트롤러(115)는 다양한 목적들(예를 들면, 재택 근무)을 위한 다양한 동작들을 수행할 수 있다. 실시 예들에서, 클라이언트 제어 장치(114)는 데이터 서버(120)에 액세스하기 위한 범용 혹은 전용 응용 애플리케이션으로서 구현될 수 있다. 메인 컨트롤러(115)는 데이터 서버(120)로부터 데이터를 수신하고 수신된 데이터를 디스플레이 장치(111)를 통해 디스플레이할 수 있다. 메인 컨트롤러(115)는 사용자 입력을 수신하고, 수신된 사용자 입력에 따른 데이터를 통신기(113)를 통해 데이터 서버(120)로 전송할 수 있다. 이와 같이, 메인 컨트롤러(115)는 데이터 서버(120)와 인터랙션하여 다양한 동작들을 수행할 수 있다.
메인 컨트롤러(115)의 다양한 동작들 중 적어도 일부의 동작들은 인증 신호(AS)에 따라 허용 또는 금지된다. 해당 동작들은 인증 신호(AS)가 인에이블되는 동안에 허용되며, 인증 신호(AS)가 디스에이블되는 동안에 금지된다. 예를 들면, 메인 컨트롤러(115)는 인증 신호(AS)가 인에이블될 때 사용자 입력에 응답하여 데이터 서버(120)로부터 데이터를 수신하고 수신된 데이터를 디스플레이할 수 있다. 예를 들면, 메인 컨트롤러(115)는 인증 신호(AS)가 디스에이블될 때 사용자 입력에 따른 요청이 수신됨에도 불구하고 데이터 서버(120)로부터 데이터를 수신하는 동작을 수행하지 않을 수 있다. 이와 같이 메인 컨트롤러(115)의 동작들은 인증 신호(AS)에 따라 허용 또는 금지될 수 있으며, 인증 신호(AS)가 높은 신뢰성의 사용자 인증에 기반한다면 클라이언트 단말기(110) 및/또는 데이터 서버(120)와 연관된 데이터 보안이 향상될 수 있음을 의미한다.
사용자 인증기(116)는 카메라(CMR)에 의해 촬영된 영상(VD)에 기반하여 클라이언트 단말기(110)를 사용하고 있는 사용자를 인증하고, 그에 따라 인증 신호(AS)를 생성하도록 구성된다. 사용자 인증기(116)는 영상(VD)에서 사용자의 얼굴에 대응하는 오브젝트를 검출하고, 검출된 오브젝트를 유효 사용자와 연관하여 등록된 데이터와 비교하고, 비교 결과에 따라 인증 신호(AS)를 인에이블하여 해당 사용자를 인증할 수 있다. 또한, 사용자 인증기(116)는 여기에 설명된 바에 따라 위 사용자 인증이 오인증인지 여부를 판별하고, 판별 결과에 따라 인증 신호(AS)를 디스에이블할 수 있다.
도 3은 도 2의 사용자 인증기의 실시 예를 보여주는 블록도이다. 도 4는 도 3의 사용자 오브젝트 감지부에 의해 디스플레이 장치에 표시되는 그래픽 인터페이스의 일 예를 보여주는 도면이다. 도 5는 도 3의 패턴 출력부에 의해 디스플레이 장치에 표시되는 그래픽 인터페이스의 일 예를 보여주는 도면이다.
먼저 도 2 및 도 3을 참조하면, 사용자 인증기(200)는 사용자 오브젝트 감지부(210), 오브젝트 기반 인증부(220), 인증 신호 생성부(230), 패턴 출력부(240), 및 패턴 감지부(250)를 포함할 수 있다.
사용자 오브젝트 감지부(210)는 카메라(CMR, 도 2 참조)로부터 영상(VD)을 수신하고, 영상(VD)에서 사용자의 신체 중 적어도 일부, 예를 들면 얼굴 부분을 타겟 오브젝트(TOBJ)로서 감지하도록 구성된다. 이를 위해 이 분야에 잘 알려진 얼굴 감지 알고리즘들 중 적어도 하나가 사용될 수 있다. 도 4를 참조하면, 그래픽 인터페이스(GUI1)는 영상(VD)을 디스플레이하며, 사용자 오브젝트 감지부(210)는 영상(VD) 내 사용자의 얼굴 부분을 타겟 오브젝트(TOBJ)로서 감지할 수 있다. 실시 예들에서, 사용자 오브젝트 감지부(210)는 영상(VD) 내에서 타겟 오브젝트(TOBJ)를 하이라이트 및/또는 표시할 수 있다. 다시 도 2 및 도 3을 참조하면, 사용자 오브젝트 감지부(210)는 감지된 타겟 오브젝트(TOBJ)를 오브젝트 기반 인증부(220)에 전송한다.
오브젝트 기반 인증부(220)는 타겟 오브젝트(TOBJ)를 수신한다. 오브젝트 기반 인증부(220)는 타겟 오브젝트(TOBJ)가 기준 데이터(RFR)와 매치되는지 여부에 따라 오브젝트 감지 신호(ODS)를 생성하도록 구성된다. 실시 예들에서, 유효 사용자는 자신의 얼굴을 촬영하여 클라이언트 단말기(110)에 미리 등록할 수 있고, 오브젝트 기반 인증부(220)는 촬영된 유효 사용자의 얼굴로부터 특징 데이터를 추출하고 추출된 특징 데이터를 기준 데이터(RFR)로서 클라이언트 단말기(110)의 저장 매체에 저장해 둘 수 있다. 오브젝트 기반 인증부(220)는 타겟 오브젝트(TOBJ)로부터 특징 데이터를 추출하고, 추출된 특징 데이터가 기준 데이터(RFR)와 매치될 때 오브젝트 감지 신호(ODS)를 생성할 수 있다. 오브젝트 기반 인증부(220)는 오브젝트 감지 신호(ODS)를 인증 신호 생성부(230) 및 패턴 출력부(240)에 제공할 수 있다.
패턴 출력부(240)는 오브젝트 감지 신호(ODS)에 응답하여 동작한다. 패턴 출력부(240)는 특정 패턴을 디스플레이 장치(111)에 디스플레이하도록 구성된다. 실시 예들에서, 복수의 패턴들이 클라이언트 단말기(110)의 저장 매체에 저장될 수 있으며, 패턴 출력부(240)는 복수의 패턴들 중 어느 하나를 선택하여 도 5에 도시된 바와 같이 선택된 패턴(PTN)을 디스플레이 장치(111)를 통해 시각화할 수 있다. 선택된 패턴(PTN)이 디스플레이되는 동안 카메라(CMR)는 디스플레이 장치(111) 앞에 위치한 객체, 예를 들면 사용자를 촬영하여 영상(VD)를 생성하고 있다. 패턴 출력부(240)는 선택된 패턴(PTN)의 정보를 패턴 감지부(250)에 알릴 수 있다.
패턴 감지부(250)는 영상(VD)에서 패턴(PTN)에 대응하는 오브젝트가 감지되는지 여부를 판별하고, 판별 결과에 따라 제 1 인증 디스에이블 신호(ADN1)를 생성할 수 있다. 제 1 인증 디스에이블 신호(ADN1)는 인증 신호 생성부(230)에 전송된다. 예를 들면, 카메라(CMR)가 임의의 전자 기기에 디스플레이된 사용자의 얼굴을 촬영하고 있다면, 해당 전자 기기는 패턴(PTN)과 연관된 광을 적어도 부분적으로 반사할 수 있고, 이러한 경우 패턴 감지부(250)는 영상(VD)에서 패턴(PTN)에 대응하는 오브젝트를 감지할 수 있다. 카메라(CMR)가 실제 사용자의 얼굴을 촬영한다면, 패턴 감지부(250)는 패턴(PTN)에 대응하는 오브젝트를 영상(VD)에서 감지할 수 없다. 이와 같이, 패턴 감지부(250)는 오 인증을 시도하는 데에 사용될 수 있는 객체들의 광 반사 특성들에 따라 패턴(PTN)에 대응하는 오브젝트를 영상(VD)에서 감지하도록 구성된다. 패턴 감지부(250)는 패턴(PTN)에 대응하는 오브젝트가 감지될 때 제 1 인증 디스에이블 신호(ADN1)를 생성할 수 있다.
인증 신호 생성부(230)는 오브젝트 감지 신호(ODS) 및 제 1 인증 디스에이블 신호(ADN1)에 기반하여 인증 신호(AS)를 생성하도록 구성된다. 오브젝트 감지 신호(ODS)가 인에이블되고 제 1 인증 디스에이블 신호(ADN1)가 디스에이블될 때, 인증 신호 생성부(230)는 인증 신호(AS)를 인에이블할 수 있다. 예를 들면, 오브젝트 감지 신호(ODS)가 인에이블되더라도 제 1 인증 디스에이블 신호(ADN1)가 인에이블될 때, 인증 신호 생성부(230)는 인증 신호(AS)를 디스에이블할 수 있다.
본 발명의 실시 예에 따르면, 사용자 인증기(200)는 영상(VD)에서 패턴(PTN)에 대응하는 오브젝트가 감지되는지 여부를 참조하여 인증 신호(AS)를 생성함으로써, 의도치 않은 물체를 카메라에 촬영되게 하여 오 인증을 시도하는 악의적인 공격을, 만약 그 물체가 빛을 반사하는 성질을 갖는다면 효과적 및 효율적으로 검출할 수 있다.
도 6은 도 2의 사용자 인증기의 다른 실시 예를 보여주는 블록도이다. 도 7은 타겟 이미지 및 그와 비교되는 검증 이미지를 보여주는 도면이다.
도 2 및 도 6을 참조하면, 사용자 인증기(300)는 사용자 오브젝트 감지부(310), 오브젝트 기반 인증부(320), 인증 신호 생성부(330), 노이즈 추출부(340), 특징 추출부(350), 및 특징 검증부(360)를 포함할 수 있다.
사용자 오브젝트 감지부(310) 및 오브젝트 기반 인증부(320)는 도 3을 참조하여 설명된 사용자 오브젝트 감지부(210) 및 오브젝트 기반 인증부(220)와 마찬가지로 설명된다. 이하, 중복되는 설명은 생략된다.
제 2 인증 디스에이블 신호(ADN2)를 생성하기 위한 동작들은 오브젝트 감지 신호(ODS)에 응답하여 수행될 수 있다. 이를 위해, 오브젝트 감지 신호(ODS)는 노이즈 추출부(340)에 제공되며, 노이즈 추출부(340)는 오브젝트 감지 신호(ODS)에 응답하여 동작할 수 있다. 노이즈 추출부(340)는 영상(VD)으로부터 노이즈 신호들을 추출한다. 실시 예들에서, 노이즈 추출부(340)는 타겟 오브젝트(TOBJ)를 제외한 영상(VD)의 배경 영역으로부터 노이즈 신호들을 추출할 수 있다. 이를 위해, 노이즈 추출부(340)는 타겟 오브젝트(TOBJ)에 대한 정보를 사용자 오브젝트 감지부(310)로부터 수신할 수 있다.
영상(VD)으로부터 노이즈 신호들을 추출하기 위한 다양한 방식들이 사용될 수 있다. 실시 예들에서, 영상(VD)에 저주파 및/또는 대역 통과 필터가 적용되고, 필터가 적용된 영상과 영상(VD) 사이의 차 영상을 산출하고, 그로부터 노이즈 신호들을 추출할 수 있다. 예를 들면, 영상(VD)의 신호값들에 중간값 필터(median filter) 및/또는 가우시안 필터를 적용하여 연산 값들을 생성하고, 영상(VD)의 신호값들에서 연산 값들을 뺌으로써, 노이즈 신호들이 결정될 수 있다.
특징 추출부(350)는 추출된 노이즈 신호들로부터 특징 데이터(혹은 값들)를 추출하도록 구성된다. 특징 검증부(360)는 노이즈 신호들에 대응하는 위 특징 데이터가 검증 데이터(VRF)와 매치되는지 여부를 판별하고, 판별 결과에 따라 제 2 인증 디스에이블 신호(ADN2)를 생성하도록 구성된다. 도 7을 참조하면, 검증 데이터(VRF)에 대응하는 검증 이미지(VRFIMG)가 도시되어 있다. 또한, 카메라(CMR)에 의해 촬영된 영상(VD)이 예시되어 있다. 도 7의 검증 이미지(VRFIMG)에 보여지는 바와 같이, 검증 데이터(VRF)는 사용자의 얼굴을 디스플레이하는 전자 기기와 같이 오 인증을 시도하는 데에 사용될 수 있는 객체를 촬영할 때 영상에 나타나는 특징 패턴들(예를 들면 왜곡 패턴, 무아레 패턴 등)의 특징 데이터를 포함할 수 있다. 카메라(CMR)가 위 오 인증을 시도하는 데에 사용될 수 있는 객체를 촬영하여 영상(VD)을 생성하였다면, 영상(VD), 특히 그 배경 영역은 그러한 특징 패턴들 중 적어도 하나를 포함할 수 있다. 이러한 경우, 도 2 및 도 6을 참조하면, 특징 검증부(360)는 영상(VD)의 배경 영역에 대응하는 특징 데이터가 검증 데이터(VRF)와 매치될 때 제 2 인증 디스에이블 신호(ADN2)를 생성할 수 있다.
인증 신호 생성부(330)는 오브젝트 감지 신호(ODS) 및 제 2 인증 디스에이블 신호(ADN2)에 기반하여 인증 신호(AS)를 생성하도록 구성된다. 오브젝트 감지 신호(ODS)가 인에이블되고 제 2 인증 디스에이블 신호(ADN2)가 디스에이블될 때, 인증 신호 생성부(230)는 인증 신호(AS)를 인에이블할 수 있다. 오브젝트 감지 신호(ODS)가 인에이블되더라도 제 2 인증 디스에이블 신호(ADN2)가 인에이블될 때, 인증 신호 생성부(230)는 인증 신호(AS)를 디스에이블할 수 있다.
본 발명의 실시 예에 따르면, 사용자 인증기(300)는 영상(VD)의 노이즈 신호들에 대응하는 특징 데이터가 검증 데이터와 매치되는지 여부를 참조하여 인증 신호(AS)를 생성함으로써, 의도치 않은 물체를 카메라에 촬영되게 하여 오 인증을 시도하는 악의적인 공격을 효과적 및 효율적으로 검출할 수 있다.
도 8은 도 2의 사용자 인증기의 또 다른 실시 예를 보여주는 블록도이다.
도 8을 참조하면, 사용자 인증기(400)는 사용자 오브젝트 감지부(410), 오브젝트 기반 인증부(420), 인증 신호 생성부(430), 패턴 출력부(440), 패턴 감지부(450), 노이즈 추출부(460), 특징 추출부(470), 및 특징 검출부(480)를 포함할 수 있다.
사용자 오브젝트 감지부(410), 오브젝트 기반 인증부(420), 패턴 출력부(440) 및 패턴 감지부(450)는 도 3을 참조하여 설명된 사용자 오브젝트 감지부(210), 오브젝트 기반 인증부(220), 패턴 출력부(240), 및 패턴 감지부(250)와 각각 마찬가지로 설명된다. 노이즈 추출부(460), 특징 추출부(470), 및 특징 검출부(480)는 도 6을 참조하여 설명된 노이즈 추출부(340), 특징 추출부(350), 및 특징 검증부(360)와 각각 마찬가지로 설명된다. 이하, 중복되는 설명은 생략된다.
인증 신호 생성부(430)는 오브젝트 감지 신호(ODS), 제 1 인증 디스에이블 신호(ADN1), 및 제 2 인증 디스에이블 신호(ADN2)에 기반하여 인증 신호(AS)를 생성하도록 구성된다. 오브젝트 감지 신호(ODS)가 인에이블되고 제 1 및 제 2 인증 디스에이블 신호들(ADN1, ADN2)이 디스에이블될 때, 인증 신호 생성부(430)는 인증 신호(AS)를 인에이블할 수 있다. 오브젝트 감지 신호(ODS)가 인에이블되더라도 제 1 및 제 2 인증 디스에이블 신호들(ADN1, ADN2) 중 적어도 하나가 인에이블될 때, 인증 신호 생성부(430)는 인증 신호(AS)를 디스에이블할 수 있다. 오브젝트 감지 신호(ODS)가 디스에이블될 때 인증 신호 생성부(430)는 인증 신호(AS)를 디스에이블할 수 있다.
도 9는 도 2의 사용자 인증기의 다른 실시 예를 보여주는 블록도이다.
도 9를 참조하면, 사용자 인증기(500)는 사용자 오브젝트 감지부(510), 오브젝트 기반 인증부(520), 인증 신호 생성부(530), 패턴 출력부(540), 패턴 감지부(550), 노이즈 추출부(560), 특징 추출부(570), 특징 검출부(580), 및 라이브니스 검사부(590)를 포함할 수 있다.
사용자 오브젝트 감지부(510), 오브젝트 기반 인증부(520), 패턴 출력부(540), 패턴 감지부(550), 노이즈 추출부(560), 특징 추출부(570), 및 특징 검출부(580)는 도 8을 참조하여 설명된 사용자 오브젝트 감지부(410), 오브젝트 기반 인증부(420), 패턴 출력부(440), 패턴 감지부(450), 노이즈 추출부(460), 특징 추출부(470), 및 특징 검출부(480)와 각각 마찬가지로 설명된다. 이하, 중복되는 설명은 생략된다.
인증 신호 생성부(530)는 오브젝트 감지 신호(ODS) 및 제 1 내지 제 3 인증 디스에이블 신호들(ADN1~ADN3)에 기반하여 인증 신호(AS)를 생성하도록 구성된다. 오브젝트 감지 신호(ODS)가 인에이블되고 제 1 내지 제 3 인증 디스에이블 신호들(ADN1~ADN3)이 디스에이블될 때, 인증 신호 생성부(530)는 인증 신호(AS)를 인에이블할 수 있다. 오브젝트 감지 신호(ODS)가 인에이블되더라도 제 1 내지 제 3 인증 디스에이블 신호들(ADN1~ADN3) 중 적어도 하나가 인에이블될 때, 인증 신호 생성부(530)는 인증 신호(AS)를 디스에이블할 수 있다.
라이브니스 검사부(590)는 오브젝트 감지 신호(ODS)에 응답하여 제 3 인증 디스에이블 신호(ADN3)를 생성하도록 구성된다. 라이브니스 검사부(590)는 타겟 오브젝트(TOBJ)에 대해 라이브니스 검사(liveness test)를 수행하고 검사 결과를 제 3 인증 디스에이블 신호(ADN3)로서 제공한다. 라이브니스 검사는 타겟 오브젝트(TOBJ)가 살아있는 객체인지 여부를 검사하는 것으로, 타겟 오브젝트(TOBJ)에 대응하는 객체의 진위를 판단하기 위한 것이다. 예를 들면, 라이브니스 검사는 타겟 오브젝트(TOBJ)가 사람의 진짜 얼굴(genuine face)인지 아니면 가짜 얼굴(fake face)인지 여부를 검사한다. 이와 같이, 라이브니스 검사는 살아있지 않은 객체(예를 들면, 위조 수단으로서 사용된 사진, 종이, 동영상 및 모형 등)와 살아있는 객체(예를 들면, 사람의 진짜 얼굴 등)를 구별하는데 이용된다. 실시 예들에서, 라이브니스 검사부(590)는 다양한 종류들의 라이브니스 검사 알고리즘들을 중 적어도 하나를 이용하여 타겟 오브젝트(TOBJ)에 대해 라이브니스 검사를 수행할 수 있다. 실시 예들에서, 라이브니스 검사부(590)는 오브젝트를 입력하면 그것이 라이브니스에 해당하는지 여부를 나타내는 출력 데이터를 제공하도록 학습된 인공지능 모델을 포함하여, 그러한 인공지능 모델을 이용하여 타겟 오브젝트(TOBJ)에 대한 라이브니스 검사를 수행할 수 있다. 실시 예들에서, 라이브니스 검사부(590)는 타겟 오브젝트(TOBJ)에서 일정 시간 동안 눈 깜박임이 탐지되지 않는지 여부에 따라 타겟 오브젝트(TOBJ)가 라이브니스에 해당하는지 여부를 판별할 수 있다.
이와 같이 타겟 오브젝트(TOBJ)에 대한 라이브니스 검사에 더 기반하여 인증 신호(AS)를 생성함으로써, 의도치 않은 물체를 카메라에 촬영되게 하여 오 인증을 시도하는 악의적인 공격을 효과적 및 효율적으로 검출할 수 있다.
도 10은 본 발명의 실시 예에 따른 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법의 실시 예를 보여주는 순서도이다.
도 10을 참조하면, S110단계에서, 카메라(예도 1의 CMR 참조)를 이용하여 사용자가 촬영되어 영상을 생성한다. S120단계에서, 촬영된 영상에서 사용자의 신체 중 적어도 일부에 대응하는 타겟 오브젝트가 감지된다.
S130단계에서, 타겟 오브젝트가 소정의 기준 데이터와 매치되는지 여부가 판별된다. 타겟 오브젝트로부터 특징 데이터가 추출되고, 추출된 특징 데이터가 기준 데이터와 매치되는지 판별될 수 있다. 실시 예들에서, 유효 사용자의 얼굴이 미리 촬영될 수 있으며, 촬영된 유효 사용자의 얼굴로부터 특징 데이터가 추출되고 추출된 특징 데이터가 기준 데이터로서 저장될 수 있다.
타겟 오브젝트가 소정의 기준 데이터와 매치된다면, S140단계가 수행된다. 타겟 오브젝트가 소정의 기준 데이터와 매치되지 않는다면, S160단계가 수행된다.
S140단계에서, 소정의 패턴이 디스플레이 장치에 디스플레이된다. 예를 들면, 도 5에 도시된 바와 같은 패턴(PTN)이 디스플레이될 수 있다. S150단계에서, 영상에서 디스플레이된 패턴에 대응하는 오브젝트가 감지되는지 여부가 판별되고, 판별 결과에 따라 S160단계 또는 S170단계가 수행된다. 예를 들면, 카메라가 임의의 전자 기기에 디스플레이된 사용자의 얼굴을 촬영한다면, 해당 전자 기기는 디스플레이된 패턴과 연관된 광을 적어도 부분적으로 반사할 수 있고, 이러한 경우 영상에서 패턴에 대응하는 오브젝트를 감지할 수 있다.
S160단계에서, 인증 신호(AS)가 디스에이블될 수 있다. S170단계에서, 인증 신호(AS)가 인에이블될 수 있다.
이와 같이, 디스플레이된 패턴에 대응하는 오브젝트가 영상에서 감지되는지 여부를 참조하여 인증 신호(AS)를 생성함으로써, 의도치 않은 물체를 카메라에 촬영되게 하여 오 인증을 시도하는 악의적인 공격을, 만약 그 물체가 빛을 반사하는 성질을 갖는다면 효과적 및 효율적으로 검출할 수 있다.
실시 예들에서, 도 10의 S110단계 내지 S170단계는 도 2의 클라이언트 단말기(110)에 의해 수행될 수 있다.
도 11은 본 발명의 실시 예에 따른 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법의 다른 실시 예를 보여주는 순서도이다.
도 11을 참조하면, S210단계 내지 S230단계는 도 10을 참조하여 설명된 S110단계 내지 S130단계와 각각 마찬가지로 설명된다. 이하, 중복되는 설명은 생략된다.
S240단계에서, 카메라에 의해 촬영되는 영상으로부터 노이즈 신호들을 추출한다. 실시 예들에서, 타겟 오브젝트를 제외한 영상의 배경 영역으로부터 노이즈 신호들이 추출될 수 있다. 영상으로부터 노이즈 신호들을 추출하기 위한 다양한 방식들이 사용될 수 있다. 실시 예들에서, 영상에 저주파 및/또는 대역 통과 필터가 적용하고, 필터가 적용된 영상과 영상 사이의 차 영상을 산출하고, 그로부터 노이즈 신호들을 추출할 수 있다.
S250단계에서, 추출된 노이즈 신호들로부터 특징 데이터가 추출된다. S260단계에서, 특징 데이터가 소정의 검증 데이터와 매치되는지 여부가 판별된다. 만약 그렇다면, S270단계가 수행된다. 만약 그렇지 않다면, S280단계가 수행된다. 도 7의 검증 이미지(VRFIMG)에 보여지는 바와 같이, 검증 데이터는 오 인증을 시도하는 데에 사용될 수 있는 객체(예를 들면 사용자의 얼굴을 디스플레이하는 전자 기기)를 촬영할 때 나타나는 특징 패턴들(예를 들면 왜곡 패턴, 무아레 패턴 등)로부터 추출된 특징 데이터를 포함할 수 있다. 카메라(CMR)가 오 인증을 시도하는 데에 사용될 수 있는 객체를 촬영하여 영상을 생성하였다면, 영상의 배경 영역은 위 특징 패턴들 중 적어도 하나를 포함할 수 있다. 영상이 위 특징 패턴을 포함하는 경우, 노이즈 신호들로부터 추출된 특징 데이터는 검증 데이터와 매치될 것이다.
S270단계에서, 인증 신호가 디스에이블된다. S280단계에서, 인증 신호가 인에이블된다.
이와 같이, 영상의 노이즈 신호들에 대응하는 특징 데이터가 검증 데이터와 매치되는지 여부를 참조하여 인증 신호(AS)를 생성함으로써, 의도치 않은 물체를 카메라에 촬영되게 하여 오 인증을 시도하는 악의적인 공격을 효과적 및 효율적으로 검출할 수 있다.
실시 예들에서, 도 11의 S210단계 내지 S280단계는 도 2의 클라이언트 단말기(110)에 의해 수행될 수 있다.
도 12는 도 2의 클라이언트 단말기를 구현하기에 적합한 컴퓨터 장치의 실시 예를 보여주는 블록도이다.
도 12를 참조하면, 컴퓨터 장치(1000)는 카메라(CMR), 디스플레이 장치(1100), 사용자 입력 장치(1200), 통신기(1300), 불휘발성 저장 매체(1400), 프로세서(1500), 및 시스템 메모리(1600)를 포함할 수 있다.
카메라(CMR)는 프로세서(1500)의 제어에 응답하여 지향하는 영역을 촬영하여 영상을 생성하며, 생성된 영상을 프로세서(1500)에 제공할 수 있다. 카메라(CMR)는 도 2의 카메라(CMR)로서 제공될 수 있다.
디스플레이 장치(1100)는 프로세서(1500)에 의해 처리되는 정보를 디스플레이한다. 실시 예들에서, 디스플레이 장치(1100)는 액정 디스플레이(liquid crystal display), 유기 발광 다이오드(organic light-emitting diode) 디스플레이, 플렉서블 디스플레이(flexible display), 등 중 적어도 하나를 포함할 수 있다. 사용자 입력 장치(1200)는 컴퓨터 장치(1000)의 동작을 제어하기 위한 사용자 입력을 수신한다. 사용자 입력 장치(1200)는 키 패드, 돔 스위치, 터치 패드(정압/정전), 조그 휠, 조그 스위치, 핑거 마우스 등을 포함할 수 있다. 특히, 터치 패드가 디스플레이 장치(1100)와 일체로 형성되는 경우, 이를 터치 스크린이라 부를 수 있다. 이러한 경우, 사용자 입력 장치(1200)는 디스플레이 장치(1100)에 의해 시각화될 수 있다. 통신기(1300)는 프로세서(1500)의 제어에 응답하여 유선 및/또는 무선 통신을 통해 네트워크(105, 도 2 참조)에 접속하도록 구성된다. 디스플레이 장치(1100), 사용자 입력 장치(1200), 및 통신기(1300)는 각각 도 2의 디스플레이 장치(111), 사용자 입력 장치(112), 및 통신기(113)로서 제공될 수 있다.
불휘발성 저장 매체(1400)는 플래시 메모리(flash memory type), 하드 디스크 (hard disk type), 멀티미디어 카드(multimedia card) 등 전원이 차단되더라도 저장된 데이터를 유지하는 저장 매체들 중 적어도 하나를 포함할 수 있다. 불휘발성 저장 매체(1400)는 프로세서(1500)의 제어에 응답하여 데이터를 기입하고 독출하도록 구성된다. 불휘발성 저장 매체(1400)는 도 3, 도 6, 도 8, 및 도 9의 기준 데이터(RFR), 검증 데이터(VRF), 및 패턴 출력부(440)에 의해 선택되어 디스플레이되는 복수의 패턴들을 저장할 수 있다.
프로세서(1500)는 카메라(CMR), 디스플레이 장치(1100), 사용자 입력 장치(1200), 통신기(1300), 불휘발성 저장 매체(1400), 및 시스템 메모리(1600)의 동작들을 제어한다. 프로세서(1500)는 복수의 처리 유닛들(혹은 복수의 코어들)을 포함하여 연산, 비교 등의 다양한 처리들을 수행할 수 있다. 예를 들면, 프로세서(1500)는 중앙 처리 장치(central processing unit)를 포함할 수 있다. 예를 들면, 프로세서(1500)는 그래픽 처리 장치(graphic processing unit)를 더 포함할 수 있다.
프로세서(1500)는 프로그램 코드들 및/또는 명령어들을 시스템 메모리(1600)에 로딩하고, 로딩된 프로그램 코드들 및/또는 명령어들을 실행함으로써 도 2의 클라이언트 제어 장치(114)의 동작들을 수행할 수 있다. 프로세서(1500)는 클라이언트 제어 모듈(1620)을 시스템 메모리(1600)에 로딩하고, 로딩된 클라이언트 제어 모듈(1620)을 실행함으로써 도 2의 클라이언트 제어 장치(114)의 동작들을 수행할 수 있다. 예를 들면, 프로세서(1500)는 임의의 클라이언트 서버로부터 설치 파일을 다운로드하고, 다운로드된 설치 파일을 설치하여 클라이언트 제어 모듈(1620)을 획득할 수 있다.
또한, 프로세서(1500)는 운영 체제(1610)를 시스템 메모리(1600)에 로딩하고, 로딩된 운영 체제(1610)를 실행하여 컴퓨터 장치(1000)의 제반 동작들을 제어할 수 있다. 운영 체제(1610)는 카메라(CMR), 디스플레이 장치(1100), 사용자 입력 장치(1200), 통신기(1300), 불휘발성 저장 매체(1400), 및 시스템 메모리(1600)에 대한 인터페이스를 운영 체제(1610) 하에서 동작하는 응용 프로그램들, 예를 들면 클라이언트 제어 모듈(1620)에 제공할 수 있다. 이와 같이, 운영 체제(1610)는 클라이언트 제어 모듈(1620)이 컴퓨터 장치(1000)의 하드웨어 장치들을 사용할 수 있도록 하는 환경을 제공한다.
시스템 메모리(1600)는 램(Random Access Memory, RAM), 롬(Read Only Memory, ROM), 및 다른 타입들의 컴퓨터에 의해 판독 가능한 저장 매체들 중 적어도 하나를 포함할 수 있다. 도 12에서, 시스템 메모리(1600)는 프로세서(1500)와 분리된 구성 요소로서 도시되어 있으나, 이는 예시적인 것으로 시스템 메모리(1600)의 적어도 일부는 프로세서(1500) 내에 포함될 수 있다. 시스템 메모리(1600)는 필요에 따라 복수의 구성 요소들로 분리될 수 있다.
도 13은 도 12의 클라이언트 제어 모듈 혹은 그것의 설치 파일을 제공하는 클라이언트 서버의 실시 예를 보여주는 블록도이다.
도 13을 참조하면, 클라이언트 서버(2000)는 도 12의 컴퓨터 장치(1000)와 네트워크(105, 도 12 참조)를 통해 연결될 수 있다. 컴퓨터 장치(1000)에 의해 실행되는 컴퓨터 프로그램은 클라이언트 서버(2000)로부터 제공될 수 있다. 도 13을 참조하면, 클라이언트 서버(2000)는 통신기(2100), 프로세서(2200), 및 데이터베이스(2300)를 포함할 수 있다. 통신기(2100)는 네트워크(105)를 통해 컴퓨터 장치(1000)와 통신할 수 있다. 데이터베이스(2300)는 컴퓨터 장치(1000)에 의해 실행될 수 있는 컴퓨터 프로그램, 예를 들면 도 12의 클라이언트 제어 모듈(1620) 혹은 해당 프로그램 코드들 및/또는 명령어들을 포함하는 설치 파일을 저장하도록 구성되는 저장 매체를 포함할 수 있다. 데이터베이스(2300)는 플래시 메모리, 하드 디스크, 멀티미디어 카드 등과 같은 불휘발성 저장 매체들 중 적어도 하나로 구현될 수 있다.
프로세서(2200)는 컴퓨터 장치(1000)로부터의 요청에 응답하여, 데이터베이스(2300)에 저장된 컴퓨터 프로그램을 통신기(2100)를 통해 컴퓨터 장치(1000)에 제공할 수 있다. 컴퓨터 프로그램은 컴퓨터 장치(1000)에 설치되어 실행될 수 있다.
비록 특정 실시 예들 및 적용 례들이 여기에 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정들 및 변형들이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
110: 클라이언트 단말기
111: 디스플레이 장치
112: 사용자 입력 장치
113: 통신기
114: 클라이언트 제어 장치
115: 메인 컨트롤러
116, 200, 300, 400, 500: 사용자 인증기
CMR: 카메라

Claims (12)

  1. 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법에 있어서:
    상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 상기 영상을 생성하는 단계;
    소정의 패턴을 디스플레이 장치에 적어도 부분적으로 디스플레이하는 단계; 및
    상기 영상에서 상기 소정의 패턴에 대응하는 추가적인 오브젝트가 감지되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 단계를 포함하는 방법.
  2. 제 1 항에 있어서,
    상기 인증 신호에 응답하여 데이터 서버로의 액세스를 허용 또는 차단하는 단계를 더 포함하는 방법.
  3. 제 1 항에 있어서,
    상기 영상으로부터 노이즈 신호들을 추출하는 단계; 및
    상기 노이즈 신호들로부터 특징 데이터를 추출하는 단계를 더 포함하며,
    상기 인증 신호를 생성하는 단계는 상기 특징 데이터가 소정의 검증 데이터와 매치되는지 여부에 더 기반하여 상기 인증 신호를 디스에이블하는 단계를 포함하는 방법.
  4. 제 3 항에 있어서,
    상기 노이즈 신호들을 추출하는 단계는 상기 타겟에 대응하는 타겟 오브젝트를 제외한 상기 영상의 배경 영역으로부터 상기 노이즈 신호들을 추출하는 단계를 포함하는 방법.
  5. 제 1 항에 있어서,
    상기 영상에 기반하여 라이브니스 검사를 수행하는 단계를 더 포함하며,
    상기 인증 신호를 디스에이블하는 단계는 상기 라이브니스 검사의 결과에 더 기반하여 상기 인증 신호를 디스에이블하는 단계를 포함하는 방법.
  6. 제 1 항에 있어서,
    상기 영상에서 상기 타겟에 대응하는 타겟 오브젝트를 감지하는 단계; 및
    상기 타겟 오브젝트가 소정의 기준 데이터와 매치되는지 여부를 판별하는 단계를 더 포함하며,
    상기 소정의 패턴을 디스플레이하는 단계는 상기 타겟 오브젝트가 상기 기준 데이터와 매치될 때 수행되는 방법.
  7. 카메라에 의해 촬영된 영상에 기반하여 사용자를 인증하는 방법에 있어서:
    상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 상기 영상을 생성하는 단계;
    상기 영상으로부터 노이즈 신호들을 추출하는 단계;
    상기 노이즈 신호들로부터 특징 데이터를 추출하는 단계; 및
    상기 특징 데이터가 소정의 검증 데이터와 매치되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 단계를 포함하는 방법.
  8. 제 7 항에 있어서,
    상기 노이즈 신호들을 추출하는 단계는 상기 타겟에 대응하는 타겟 오브젝트를 제외한 상기 영상의 배경 영역으로부터 상기 노이즈 신호들을 추출하는 단계를 포함하는 방법.
  9. 제 7 항에 있어서,
    소정의 패턴을 디스플레이 장치에 적어도 부분적으로 디스플레이하는 단계를 더 포함하며,
    상기 영상에서 상기 소정의 패턴에 대응하는 추가적인 오브젝트가 감지되는지 여부에 더 기반하여 상기 인증 신호를 디스에이블하는 단계를 포함하는 방법.
  10. 제 7 항에 있어서,
    상기 영상에서 상기 타겟에 대응하는 타겟 오브젝트를 감지하는 단계; 및
    상기 타겟 오브젝트가 소정의 기준 데이터와 매치되는지 여부를 판별하는 단계를 더 포함하며,
    상기 노이즈 신호들을 추출하는 단계는 상기 타겟 오브젝트가 상기 기준 데이터와 매치될 때 수행되는 방법.
  11. 컴퓨터 프로그램을 저장하는, 컴퓨터 장치에 의해 판독 가능한 저장 매체에 있어서:
    상기 컴퓨터 장치는 카메라, 디스플레이 장치, 및 상기 카메라와 상기 디스플레이 장치에 연결되는 프로세서를 포함하고,
    상기 컴퓨터 프로그램은 상기 프로세서에 의해 실행될 때,
    상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 영상을 생성하고;
    소정의 패턴을 디스플레이 장치에 적어도 부분적으로 디스플레이하고;
    상기 영상에서 상기 소정의 패턴에 대응하는 추가적인 오브젝트가 감지되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 명령어들을 포함하는 저장 매체.
  12. 컴퓨터 프로그램을 저장하는, 컴퓨터 장치에 의해 판독 가능한 저장 매체에 있어서:
    상기 컴퓨터 장치는 카메라, 디스플레이 장치, 및 상기 카메라와 상기 디스플레이 장치에 연결되는 프로세서를 포함하고,
    상기 컴퓨터 프로그램은 상기 프로세서에 의해 실행될 때,
    상기 카메라의 화각 내에 위치하는 타겟을 촬영하여 영상을 생성하고;
    상기 영상으로부터 노이즈 신호들을 추출하고;
    상기 노이즈 신호들로부터 특징 데이터를 추출하고;
    상기 특징 데이터가 소정의 검증 데이터와 매치되는지 여부에 기반하여 상기 타겟을 인증하기 위한 인증 신호를 디스에이블하는 명령어들을 포함하는 저장 매체.
KR1020220009259A 2022-01-21 2022-01-21 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법 KR20230112973A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220009259A KR20230112973A (ko) 2022-01-21 2022-01-21 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220009259A KR20230112973A (ko) 2022-01-21 2022-01-21 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20230112973A true KR20230112973A (ko) 2023-07-28

Family

ID=87427177

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220009259A KR20230112973A (ko) 2022-01-21 2022-01-21 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20230112973A (ko)

Similar Documents

Publication Publication Date Title
US11093731B2 (en) Analysis of reflections of projected light in varying colors, brightness, patterns, and sequences for liveness detection in biometric systems
US7844082B2 (en) Method and system for biometric authentication
CN110414200B (zh) 身份验证方法、装置、存储介质和计算机设备
KR102543623B1 (ko) 모바일 보안 대책들
Smith et al. Face recognition on consumer devices: Reflections on replay attacks
US11057413B2 (en) System and method for behavioural biometric authentication using program modelling
EP3163926B1 (en) User authentication method and system using variable keypad and biometric identification
US8508338B1 (en) Method and system for defeat of replay attacks against biometric authentication systems
JP2015503866A (ja) チューリングテストに基づくユーザ認証ならびにユーザ存在検証のデバイス、および方法
CN106453422B (zh) 一种基于移动终端动态认证方法及系统
JP2011215662A (ja) 生体認証装置
KR20120102034A (ko) 기준 포인트 이용 및 미이용에 의한 확실한 생체 특징 추출
JP2011165102A (ja) 生体認証システムおよび携帯端末
Latha et al. A study on attacks and security against fingerprint template database
US20220078020A1 (en) Biometric acquisition system and method
KR20230112973A (ko) 영상 데이터에 기반하여 사용자를 인증하는 장치 및 방법
KR102172200B1 (ko) 라이브니스를 검증하는 모바일 장치 및 방법
KR101576075B1 (ko) 모바일 결제 시스템, 모바일 단말기, 및 모바일 결제방법
CN105701392B (zh) 信息处理方法及电子设备
JP2018169943A (ja) 顔認証処理装置、顔認証処理方法及び顔認証処理システム
KR20180131141A (ko) 지문 등록 방법 및 이를 이용한 지문 인증 방법과 이를 수행하기 위한 장치
Chen et al. {InfinityGauntlet}: Expose Smartphone Fingerprint Authentication to Brute-force Attack
TWI646474B (zh) 用於身分核實系統中的造假生物特徵過濾裝置
KR101906141B1 (ko) 이동 통신 단말에서의 다중 레벨 홍채 인식 장치 및 방법
WO2023119560A1 (ja) 認証装置、認証方法、及び、記録媒体

Legal Events

Date Code Title Description
E902 Notification of reason for refusal