KR102324706B1 - 얼굴인식 잠금해제 방법 및 장치, 기기, 매체 - Google Patents

Abstract

본 발명은 얼굴인식 잠금해제 방법, 장치, 기기, 매체를 제공하였고, 여기서, 얼굴인식 잠금해제 방법은, 이미지에 대해 얼굴 검출을 수행하는 단계(102); 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하는 단계(104); 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계(106) - 적어도 상기 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함함 - ; 및 적어도 상기 추출된 얼굴 특징이 인증을 통과한 것에 응답하여, 잠금해제 동작을 수행하는 단계(108)를 포함한다. 상기 방법은 얼굴 기반 잠금해제를 구현하였고, 인증 방식은 동작이 간단하고, 편리성이 높으며, 보안성이 높고, 얼굴인식 잠금해제의 성공률이 높다.

Description

얼굴인식 잠금해제 방법 및 장치, 기기, 매체

관련 출원의 상호 참조

본 출원은 2017년 9월 7일에 중국 특허청에 제출한 출원번호가 CN201710802146.1이고, 발명의 명칭이 “얼굴인식 잠금해제 방법 및 이의 정보 등록 방법, 장치, 기기, 프로그램, 매체”인 중국 특허 출원의 우선권을 요청하며, 그 전부 내용을 원용하여 본 출원에 결합하였다.

본 발명은 인공 지능 기술에 관한 것으로, 특히 얼굴인식 잠금해제 방법 및 이의 정보 등록 방법, 장치, 기기, 프로그램, 매체에 관한 것이다.

정보화 시대에는 다양한 단말 응용 프로그램(APP)들이 속출하고 있으며, 다양한 응용 프로그램을 사용할 때, 각 사용자는 사용자 데이터를 보존 및 보호하기 위해, 사용자 정보를 모두 등록해야 한다. 또한, 인터넷 기술의 발전에 따라, 단말 기기는 통신, 사진 저장, 다양한 응용 프로그램의 설치 등과 같은 점점 더 많은 기능을 사용자에게 제공할 수 있으며, 많은 사용자는 단말 기기의 사용자 데이터가 유출되지 않도록 자신의 단말 기기를 잠근다. 따라서, 단말 기기 및 응용 프로그램에서의 개인 데이터를 보호하는 것은 점차 주목의 대상이 된다.

인공 지능 기술의 발달로, 컴퓨터 비전 기술은 보안 모니터링, 금융, 자율 주행 등 모든 분야에서 큰 응용 가치를 구비한다.

본 발명 실시예는 얼굴인식 잠금해제의 기술 방안을 제공한다.

본 발명 실시예의 일 측면에 따르면, 얼굴인식 잠금해제 방법을 제공하며,

이미지에 대해 얼굴 검출을 수행하는 단계;

얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하는 단계;

저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계 - 적어도 상기 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함함 - ; 및

적어도 상기 추출된 얼굴 특징이 인증을 통과한 것에 응답하여, 잠금해제 동작을 수행하는 단계를 포함한다.

본 발명 실시예의 다른 측면에 따르면, 얼굴인식 잠금해제 정보 등록 방법을 제공하며,

동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하는 단계;

획득된 이미지에 대해 얼굴 검출을 수행하는 단계;

각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행하는 단계; 및

각 각도의 얼굴 이미지의 추출된 얼굴 특징, 및 상기 각 각도의 얼굴 이미지의 얼굴 특징과 상기 동일한 ID 사이의 대응관계를 저장하는 단계를 포함한다.

본 발명 실시예의 또 다른 측면에 따르면, 얼굴인식 잠금해제 장치를 제공하며,

이미지에 대해 얼굴 검출을 수행하기 위한 얼굴 검출 모듈;

얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하기 위한 특징 추출 모듈;

저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하기 위한 인증 모듈 - 적어도 상기 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함함 - ; 및

적어도 상기 추출된 얼굴 특징이 인증을 통과한 것에 응답하여, 잠금해제 동작을 수행하기 위한 제어 모듈을 포함한다.

본 발명 실시예의 또 다른 측면에 따르면, 전자 기기를 제공하며,

프로세서 및 본 발명의 실시예 중 어느 하나에 따른 얼굴인식 잠금해제 장치를 포함하며;

프로세서에서 상기 인증 장치가 실행될 때, 본 발명의 실시예 중 어느 하나에 따른 얼굴인식 잠금해제 장치의 유닛은 작동된다.

본 발명 실시예의 또 다른 측면에 따르면, 전자 기기를 제공하며,

실행 가능한 명령어를 저장하는 메모리; 및

실행 가능 명령어를 실행함으로써 본 발명의 실시예 중 어느 하나에 따른 방법에서의 각 단계의 동작을 완료하기 위해 메모리와 통신하는 하나 또는 복수 개의 프로세서를 포함한다.

본 발명 실시예의 또 다른 측면에 따르면, 컴퓨터 판독 가능 코드를 포함하는 컴퓨터 프로그램을 제공하며, 상기 컴퓨터 판독 가능 코드가 기기에서 작동될 때, 상기 기기의 프로세서는 본 발명의 실시예 중 어느 하나에 따른 상기 방법에서의 각 단계를 구현하기 위한 명령어를 실행한다.

본 발명 실시예의 또 다른 측면에 따르면, 컴퓨터 판독 가능 명령어를 저장하기 위한 컴퓨터 판독 가능 매체를 제공하며, 상기 명령어는 실행될 때 본 발명의 실시예 중 어느 하나에 따른 방법에서의 각 단계의 동작을 구현한다.

본 발명의 상기 실시예에서 제공한 얼굴인식 잠금해제 방법 및 이의 정보 등록 방법, 장치, 기기, 매체는, 등록 프로세스를 통해 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 미리 저장하고, 얼굴인식 잠금해제를 수행할 때, 이미지에 대해 얼굴 검출을 수행하며, 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하고, 저장된 얼굴 특징에 기반하여 상기 추출된 얼굴 특징에 대해 인증을 수행하며, 상기 추출된 얼굴 특징이 인증을 통과한 후, 잠금해제 동작을 수행함으로써, 얼굴에 기반한 인증 잠금해제를 구현하고, 본 발명 실시예의 잠금해제 방식은 동작이 간단하며, 편리성이 높고, 보안성이 높으며; 또한, 본 발명 실시예는 등록 프로세스를 통해 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 미리 저장함으로써, 상기 동일한 ID에 대응하는 사용자와 저장된 얼굴 특징에 대응하는 임의의 각도의 얼굴 이미지를 획득하면, 상기 사용자에 기반한 얼굴인식 잠금해제를 성공적으로 구현할 수 있으며, 얼굴인식 잠금해제의 성공률을 향상시키고, 동일한 사용자 인증 시 얼굴 각도와 등록 시 얼굴 각도의 차이로 인한 인증 실패 가능성을 감소시킨다.

아래에 첨부 도면과 실시예를 통해, 본 발명의 기술적 해결수단을 더 상세히 설명한다.

명세서의 일부를 구성하는 첨부 도면은 본 발명의 실시예를 설명하고, 또한 설명과 함께 본 발명의 원리를 해석되도록 사용된다.
이하의 상세한 설명에 따르면, 본 발명은 첨부 도면을 참조하여 더욱 명확하게 이해될 수 있다.
도 1은 본 발명의 얼굴인식 잠금해제 방법의 일 실시예의 흐름도이다.
도 2는 본 발명의 얼굴인식 잠금해제 방법의 다른 실시예의 흐름도이다.
도 3은 본 발명의 얼굴인식 잠금해제 방법의 또 다른 실시예의 흐름도이다.
도 4는 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 일 실시예의 흐름도이다.
도 5는 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 다른 실시예의 흐름도이다.
도 6은 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 또 다른 실시예의 흐름도이다.
도 7은 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 또 다른 실시예의 흐름도이다.
도 8은 본 발명의 얼굴인식 잠금해제 장치의 일 실시예의 구조 모식도이다.
도 9는 본 발명의 얼굴인식 잠금해제 장치의 다른 실시예의 구조 모식도이다.
도 10은 본 발명 전자 기기의 일 실시예의 구조 모식도이다.

이하, 첨부 도면을 참조하여 본 발명의 다양한 예시적 실시예를 상세히 설명한다. 유의해야 할 것은, 달리 업급되지 않는 한, 이러한 실시예들에서 제시된 구성 요소, 단계의 상대적 배열, 수치 표현 및 값은 본 발명의 범위를 한정하지 않는다.

적어도 하나의 예시적 실시예에 대한 다음의 설명은 다만 예시적인 것이며, 본 발명 및 그 응용 또는 사용을 한정하려는 것은 아니다.

관련 기술분야의 통상의 기술자에게 공지된 기술, 방법 및 기기는 상세하게 논의되지 않을 수 있지만, 상기 기술, 방법 및 기기는 적절한 상황에서 본 명세서의 일부로서 고려되어야 한다.

유의해야 할 것은, 다음의 첨부 도면에서 유사한 참조 번호와 문자는 유사한 항목을 표시하므로, 어느 한 항목이 하나의 도면에서 정의되면, 후속 도면에서 이에 대해 추가로 논의될 필요가 없다.

본 발명 실시예들은 다수의 다른 범용 또는 특수 목적 컴퓨팅 시스템 환경 또는 구성과 함께 동작될 수 있는 단말 기기, 컴퓨터 시스템 및 서버와 같은 전자 기기에 적용될 수 있다. 단말 기기, 컴퓨터 시스템 및 서버와 같은 전자 기기와 함께 사용되기에 적합한 잘 알려진 단말 기기, 컴퓨팅 시스템, 환경 및 구성 중 적어도 하나의 예는 개인용 컴퓨터 시스템, 서버 컴퓨터 시스템, 씬 클라이언트, 씩 클라이언트, 핸드헬드 또는 랩톱 기기, 마이크로 프로세서 기반 시스템, 셋톱 박스, 프로그래머블 가전 제품, 네트워크 개인용 컴퓨터, 소형 컴퓨터 시스템, 메인 프레임 컴퓨터 시스템 및 상기 임의의 시스템을 포함한 분산 클라우드 컴퓨팅 기술 환경을 포함하나 이에 한정되지 않는다.

단말 기기, 컴퓨터 시스템, 서버 등 전자 기기는 컴퓨터 시스템에 의해 수행되는 컴퓨터 시스템의 수행 가능 명령어(예를 들어, 프로그램 모듈)의 일반적인 맥락에서 설명될 수 있다. 일반적으로, 프로그램 모듈은 특정 작업을 실행하거나 특정 추상 데이터 타입을 구현하기 위한 루틴, 프로그램, 타겟 프로그램, 어셈블리, 논리, 데이터 구조 등을 포함할 수 있다. 컴퓨터 시스템/서버는 작업이 통신 네트워크를 통해 연결된 원격 처리 장치에 의해 실행되는 분산 클라우드 컴퓨팅 환경에서 구현 될 수있다. 분산 클라우드 컴퓨팅 환경에서, 프로그램 모듈은 저장 기기를 포함하는 로컬 또는 원격 컴퓨팅 시스템 저장 매체에 위치할 수있다.

도 1은 본 발명의 얼굴인식 잠금해제 방법의 일 실시예의 흐름도이다. 도 1에 도시된 바와 같이, 상기 실시예의 얼굴인식 잠금해제 방법은 다음의 단계들을 포함한다.

단계 102에 있어서, 이미지에 대해 얼굴 검출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 102는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 104에 있어서, 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 104는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 특징 추출 모듈에 의해 실행 될 수도 있다.

단계 106에 있어서, 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행한다.

여기서, 본 발명 각 실시예에서, 적어도 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함한다. 여기서, ID는 저장된 얼굴 특징에 대응되는 사용자 정보를 의미하고, 예를 들어, 사용자 이름, 번호, 닉네임 등일 수 있다.

본 발명 각 실시예의 선택적인 일 예에 있어서, 상기 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지는 예를 들어, 상기 동일한 ID에 대응하는 정면 얼굴 이미지, 헤드업 얼굴 이미지, 헤드다운 얼굴 이미지, 헤드 좌회전 얼굴 이미지, 헤드 우회전 얼굴 이미지 중 2 개 또는 2 개 이상의 각도의 얼굴 이미지를 포함할 수 있지만 이에 한정되는 것은 아니다.

선택적인 일 예에 있어서, 상기 단계 106은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 인증 모듈에 의해 실행될 수도 있다.

단계 108에 있어서, 적어도 추출된 얼굴 특징이 인증을 통과하는 것에 응답하여, 잠금해제 동작을 수행한다.

선택적인 일 예에 있어서, 상기 단계 108은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 제어 모듈에 의해 실행될 수도 있다.

본 발명의 상기 실시예에서 제공한 얼굴인식 잠금해제 방법은, 등록 프로세스를 통해 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 미리 저장하고, 얼굴인식 잠금해제를 수행할 때, 이미지에 대해 얼굴 검출을 수행하며, 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하고, 저장된 얼굴 특징에 기반하여 상기 추출된 얼굴 특징에 대해 인증을 수행하며, 상기 추출된 얼굴 특징이 인증을 통과한 후, 잠금해제 동작을 수행함으로써, 얼굴에 기반한 인증 잠금해제를 구현하고, 본 발명 실시예의 잠금해제 방식은 동작이 간단하며, 편리성이 높고, 보안성이 높으며; 또한, 본 발명 실시예는 등록 프로세스를 통해 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 미리 저장함으로써, 상기 동일한 ID에 대응하는 사용자와 저장된 얼굴 특징에 대응하는 임의의 각도의 얼굴 이미지를 획득하면, 상기 사용자에 기반한 얼굴인식 잠금해제를 성공적으로 구현할 수 있으며, 얼굴인식 잠금해제의 성공률을 향상시키고, 동일한 사용자 인증 시 얼굴 각도와 등록 시 얼굴 각도의 차이로 인한 인증 실패 가능성을 감소시킨다.

본 발명의 얼굴인식 잠금해제 방법의 각 실시예의 선택적인 일 예에서, 단계 108에서, 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계는,

추출된 얼굴 특징과 적어도 하나의 저장된 얼굴 특징 사이의 유사도를 획득하는 단계; 및

추출된 얼굴 특징과 임의의 저장된 얼굴 특징 사이의 유사도가 설정된 임계값보다 큰 것에 응답하여, 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하는 단계로 구현될 수 있다.

그렇지 않으면, 즉 추출된 얼굴 특징과 저장된 모든 각도의 얼굴 특징 사이의 유사도가 모두 설정된 임계값보다 크지 않으면, 추출된 얼굴 특징이 인증을 통과하지 못한 것으로 결정된다.

상기 실시예에 기반하여, 추출된 얼굴 특징과 저장된 각 각도의 얼굴 특징 사이의 유사도를 하나씩 비교할 수 있으며, 추출된 얼굴 특징과 임의의 각도의 저장된 얼굴 특징 사이의 유사도가 설정된 임계값보다 크면, 추출된 얼굴 특징이 인증을 통과하는 것으로 바로 결정할 수 있으며, 즉 상기 실시예에서, 추출된 얼굴 특징과 하나의 각도 또는 일부 각도의 저장된 얼굴 특징 사이의 유사도만 비교함으로써 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하는 것이 가능하므로, 추출된 얼굴 특징과 나머지 각도의 저장된 얼굴 특징 사이의 유사도를 추가로 비교할 필요가 없으며, 따라서 인증 효율의 개선에 유리하다.

또는, 본 발명의 얼굴인식 잠금해제 방법의 각 실시예의 선택적인 일 예에서, 단계 108에서 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계는,

추출된 얼굴 특징과 복수 개의 저장된 얼굴 특징 사이의 유사도를 각각 획득하는 단계; 및

추출된 얼굴 특징과 복수 개의 저장된 얼굴 특징 사이의 복수 개의 유사도 중의 최대값이 설정된 임계값보다 큰 것에 응답하여, 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하는 단계로 구현된다.

여기서, 상기 복수 개의 저장된 얼굴 특징은 저장된 모든 각도의 얼굴 특징 또는 여기서 일부 각도의 얼굴 특징일 수 있다. 상기 복수 개의 저장된 얼굴 특징이 저장된 일부 각도의 얼굴 특징이고, 추출된 얼굴 특징과 상기 일부 각도의 얼굴 특징 사이의 복수 개의 유사도 중의 최대값이 설정된 임계값보다 크면, 추출된 얼굴 특징이 인증을 통과하는 것으로 바로 결정할 수 있고, 추출된 얼굴 특징과 나머지 각도의 얼굴 특징 사이의 유사도를 추가로 비교할 필요가 없으므로, 인증 효율의 개선에 유리하다. 추출된 얼굴 특징과 상기 일부 각도의 얼굴 특징 사이의 복수 개의 유사도 중의 최대값이 설정된 임계값보다 크지 않을 때, 추출된 얼굴 특징이 인증을 통과하지 못한 것으로 결정하며, 나머지 각도의 얼굴 특징에서 복수 개의 각도의 얼굴 특징을 재선택할 수 있으며, 유사한 방식으로, 재선택된 복수 개의 각도의 얼굴 특징과 상기 추출된 얼굴 특징 사이의 복수 개의 유사도 중의 최대값이 설정된 임계값보다 크면, 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하거나, 추출된 얼굴 특징과 저장된 모든 각도의 얼굴 특징 사이의 유사도의 비교가 완료되어도, 최대값이 설정된 임계값보다 큰 유사도가 없으면, 추출된 얼굴 특징이 인증을 통과하지 못한 것으로 결정한다.

도 2는 본 발명의 얼굴인식 잠금해제 방법의 다른 실시예의 흐름도이다. 도 2에 도시된 바와 같이, 상기 실시예의 얼굴인식 잠금해제 방법은 다음의 단계들을 포함한다.

단계 202에 있어서, 이미지를 획득한다.

선택적인 일 예에 있어서, 상기 단계 202는, 프로세서에 의해 카메라를 호출하여 실행될 수 있으며, 프로세서에 의해 작동되는 하나의 수신 모듈에 의해 실행될 수도 있다.

단계 204에 있어서, 획득된 이미지에 대해 광선 등화 조정 처리를 수행한다.

본 발명 각 실시예의 선택적인 일 예에 있어서, 획득된 이미지에 대해 광선 등화 조정 처리를 수행하는 상기 단계 204는 직접 실행될 수 있다.

또는, 본 발명 각 실시예의 다른 선택적인 일 예에서, 상기 단계 204 전에, 획득된 이미지의 품질이 소정의 얼굴 검출 조건을 만족시키는지 여부를 먼저 결정하고, 이미지의 품질이 소정의 얼굴 검출 조건을 만족하지 않을 때, 이미지에 대해 광선 등화 조정 처리를 수행하는 상기 단계 204를 실행하며, 품질이 소정의 얼굴 검출 조건을 만족하면 이미지에 대해 단계 204를 더이상 실행하지 않고, 단계 206을 통해 이미지에 대해 얼굴 검출을 수행하며, 상기 실시예는 품질이 소정의 얼굴 검출 조건을 만족하는 이미지에 대해 광선 등화 조정 처리 단계를 더이상 진행하지 않으므로, 얼굴인식 잠금해제의 효율의 개선에 유리하다.

여기서, 예를 들어, 소정의 얼굴 검출 조건은 이미지의 픽셀값 분포가 기설정된 분포 범위에 부합되지 않는 것, 이미지의 속성값이 기설정된 값 범위 내에 있지 않는 것 중 적어도 하나를 포함할 수 있지만 이에 한정되지 않는다. 여기서, 예를 들어, 이미지의 속성값은 이미지의 채도, 밝기, 콘트라스트 및 포화도 등 속성값이다.

선택적인 일 예에 있어서, 상기 단계 204는 메모리에 저장된 대응되는 명령어를 호출함으로써 프로세서에 의해 수행될 수 있거나, 프로세서에 의해 작동되는 광 처리 모듈에 의해 수행될 수도 있다.

단계 206에 있어서, 광선 등화 조정 처리된 이미지에 대해 얼굴 검출을 수행한다.

본 발명의 각 실시예에서, 이미지로부터 얼굴이 검출되지 않으면, 선택적으로 단계 202로 되돌아갈 수 있으며, 즉 이미지의 단계를 계속 실행할 수 있다. 이미지로부터 얼굴이 검출되지 않으면, 단계 208을 실행한다.

선택적인 일 예에 있어서, 상기 단계 206은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 208에 있어서, 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 208은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 특징 추출 모듈에 의해 실행 될 수도 있다.

단계 210에 있어서, 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행한다.

여기서, 본 발명의 각 실시예에서, 적어도 저장된 얼굴 특징은 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함한다.

선택적인 일 예에 있어서, 상기 단계 210은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 인증 모듈에 의해 실행될 수도 있다.

단계 212에 있어서, 적어도 추출된 얼굴 특징이 인증을 통과하는 것에 응답하여, 잠금해제 동작을 수행한다.

상기 실시예에 기반한 선택적인 일 실시예에서, 추출된 얼굴 특징이 인증을 통과하면, 또한 상기 추출된 얼굴 특징에 대응하는 ID를 획득하고 디스플레이할 수 있어, 사용자는 현재 인증을 통과한 사용자 정보를 알 수있다.

추출된 얼굴 특징이 인증을 통과하지 못하면, 잠금해제 단계를 실행하지 않는다. 또는, 본 발명의 얼굴인식 잠금해제 방법의 선택적인 일 실시예에서, 얼굴인식 잠금해제 실패의 프롬프트 메시지를 출력할 수도 있다.

선택적인 일 예에 있어서, 상기 단계 212는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 제어 모듈에 의해 실행될 수도 있다.

실제 상황에서, 백라이트, 하드 라이트, 다크 라이트 등 복잡한 장면이 자주 발생하며, 예를 들어, 밤에 밖에서 뒤로부터 나오는 빛이 있거나 실내 조명이 어두울 때 캡쳐된 이미지에서 얼굴에 대한 검출이 수행되면, 배경이 너무 두드러져 얼굴 검출에 어려움이 있거나, 얼굴이 검출되더라도 이미지로부터 추출된 얼굴 특징이 매우 흐리다. 일반적인 장면의 얼굴 검출과 비교하면, 다크 라이트 장면의 픽셀값은 낮은 값 영역에 집중되고, 텍스처 그라디언트는 작으며, 이미지 전체 정보 특징은 모두 매우 흐리며, 유효한 정보, 특히 얼굴을 검출하는 것에 어려움이 있다. 일반 장면에 대해, 백라이트, 하드 라이트 장면에서, 전체 밝기는 유사하지만, 배경 조명이 매우 밝으므로, 얼굴 부분의 윤곽과 디테일 텍스처가 매우 흐려서, 얼굴 특징 추출에 매우 큰 어려움이 있다.

본 발명자는 연구를 통해, 백라이트, 하드 라이트, 다크 라이트 등 복잡한 조명 장면의 경우, 이러한 장면의 이미지에서, 픽셀값 분포가 종종 일정한 국소성을 가지고 기설정된 분포 범위, 및/또는 이미지의 속성값이 기설정된 값 범위 내에 있지 않을 수 있다는 것을 발견하였다. 예를 들어, 다크 라이트 장면에서, 픽셀값은 종종 낮은 값의 영역에 집중되며, 이 경우, 이미지의 콘트라스트, 채도 등은 모두 매우 낮아서, 검출기가 이들 이미지에서의 얼굴을 처리하는 것이 어렵거나 오보가 생성될 수 있다.

도 2에 도시된 실시예의 선택적인 일 예에 있어서, 단계 204에서, 획득된 이미지에 대해 광선 등화 조정 처리를 수행하는 단계는, 이미지의 그레이스케일 이미지를 획득하는 단계; 및 상기 이미지의 그레이스케일 이미지에 대한 히스토그램 등화 처리를 적어도 수행함으로써, 이미지의 그레이스케일 이미지의 픽셀값 분포가 전체 픽셀값 공간에 균일하게 확산될 수 있는 동시에, 히스토그램 등화 처리된 이미지의 그레이스케일 이미지에 대한 후속 동작을 수행하기 위해, 원래 이미지 픽셀값을 유지하는 단계를 포함할 수 있다.

도 2에 도시된 실시예의 다른 선택적인 일 예에 있어서, 단계 204에서, 획득된 이미지에 대해 광선 등화 조정 처리를 수행하는 단계는, 이미지를 기설정된 조명 조건을 만족시키는 이미지로 변환하기 위해 적어도 이미지에 대해 이미지 조명 변환을 수행하는 단계를 포함할 수 있다.

본 발명 실시예의 선택적인 일 예에서, 획득된 이미지에 대해 품질 검출을 수행하고, 이미지의 품질이 소정의 얼굴 검출 조건을 만족하지 않으면, 예를 들어, 이미지의 밝기가 기설정된 밝기 조건을 만족하지 않으면, 이미지의 그레이스케일 이미지에 대해 히스토그램 등화 처리를 수행하며, 즉 먼저 이미지의 그레이스케일 이미지에 대해 픽셀값에서 히스토그램 등화를 수행하여, 이미지의 그레이스케일 이미지의 픽셀값 분포로 하여금 전체 픽셀값 공간에 균일하게 확산되도록 하는 동시에, 원래 이미지 픽셀값의 상대적 분포를 유지하고, 히스토그램 등화 처리된 이미지에 대해 얼굴 검출을 수행하여, 히스토그램 등화 처리를 수행한 이미지의 그레이스케일 이미지에서 특징이 보다 뚜렷하고, 텍스처가 더욱 선명하여, 얼굴 검출이 용이하다. 또는, 이미지에 대해 이미지 조명 변환을 수행하여, 이미지를 기설정된 조명 조건을 만족시키는 이미지로 변환한 다음, 얼굴 검출을 수행함으로써, 얼굴 검출을 용이하게 한다. 본 발명 실시예는 다크 라이트, 백라이트 등 극한 조명 조건 하에서, 이미지에서의 얼굴을 여전히 정확하게 검출할 수 있고, 특히 실제 장면에서 실내 또는 야간 조명이 매우 어두워 거의 완전히 캄캄한 상황, 또는 야간 배경 조명이 강하고, 얼굴이 어둡고 텍스처가 흐릿한 상황에서도 모두 얼굴을 검출할 수 있으므로, 본 발명은 얼굴인식 잠금해제 응용 프로그램을 더 잘 구현할 수 있다.

또한, 본 발명 상기 각 실시예에 기반한 얼굴인식 잠금해제 방법의 또 다른 실시예에서, 상기 방법은 획득된 이미지에 대해 생체 검출을 수행하는 단계를 더 포함할 수 있다. 이와 상응하게, 상기 실시예에서, 추출된 얼굴 특징이 인증을 통과하고, 상기 이미지가 생체 검출을 통과하는 것에 응답하여, 잠금해제 동작을 수행한다.

예시적으로, 본 발명 각 실시예의 얼굴인식 잠금해제 방법에서, 이미지를 획득한 후, 이미지에 대해 생체 검출을 수행할 수 있고; 또는, 이미지로부터 얼굴을 검출한 것에 응답하여, 상기 검출된 얼굴의 이미지에 대해 생체 검출을 수행할 수도 있으며; 또는, 추출된 얼굴 특징이 인증을 통과하는 것에 응답하여, 추출된 얼굴 특징이 인증을 통과한 이미지에 대해 생체 검출을 수행할 수도 있다.

본 발명의 각 실시예의 선택적인 일 예에 있어서, 이미지에 대해 생체 검출을 수행하는 단계는,

뉴럴 네트워크를 이용하여, 이미지에 대해 이미지 특징 추출을 수행하는 단계, 추출된 이미지 특징이 적어도 하나의 위조 단서 정보를 포함하는지 여부를 검출하는 단계; 및 상기 적어도 하나의 위조 단서 정보의 검출 결과에 기반하여, 이미지가 생체 검출을 통과하는지 여부를 결정하는 단계를 포함할 수 있다. 추출된 이미지 특징이 임의의 위조 단서 정보를 포함하지 않으면, 상기 이미지가 생체 검출을 통과하고; 그렇지 않으면, 즉 추출된 이미지 특징이 임의의 하나 또는 복수 개의 위조 단서 정보를 포함하면, 상기 이미지는 생체 검출을 통과하지 못한다.

예시적으로, 본 발명의 각 실시예에서의 이미지 특징은, 예를 들어, 로컬 이진 패턴(LBP) 특징, 스파스 코드 히스토그램(HSC) 특징, 파노라마(LARGE) 특징, 얼굴맵(SMALL) 특징, 얼굴 세부맵(TINY) 특징 중 어느 하나 또는 복수 개를 포함할 수 있지만 이에 한정되지 않는다. 실제 응용에서, 추출될 필요가 있는 이미지 특징에 포함된 특징 항목은 가능하게 발생할 수 있는 위조 단서 정보에 따라 업데이트될 수 있다.

여기서, 검출될 이미지에서의 가장자리 정보는 LBP 특징으로 강조할 수 있으며, 검출될 이미지에서의 반사 및 퍼지 정보는 HSC 특징을 통해 보다 명확하게 반영되며, LARGE 특징은 파노라마 특징이며, 이미지에서 가장 뚜렷한 위조 단서(hack)는 LARGE 특징에 기반하여 추출되며, 얼굴 맵(SMALL)은 검출될 이미지에서의 얼굴 프레임의 몇 배의 크기(예를 들어, 1.5 배 크기)를 갖는 영역 컷 맵이고, 얼굴, 얼굴과 배경에 적합한 부분을 포함하며, 반사, 복사 장치의 화면 무아레 패턴 및 모델, 또는 마스크의 가장자리와 같은 위조 단서는 SMALL 특징을 기반으로 추출되며; 얼굴 세부맵(TINY)은 얼굴 프레임의 크기를 가진 영역 컷 맵이며, 얼굴을 포함하고, TINY 특징을 기반으로, 이미지 PS(포토샵 편집), 복사 화면 모아레와 모델, 또는 마스크의 텍스처 등 위조 단서를 추출할 수 있다. 상기 각 항목 특징에 포함된 위조 얼굴의 위조 단서는, 뉴럴 네트워크를 미리 훈련함으로써, 뉴럴 네트워크에 의해 학습될 수 있으며, 이러한 위조 단서를 포함하는 이미지는 뉴럴 네트워크에 입력된 후 모두 검출되므로, 상기 이미지가 위조 얼굴 이미지인지, 아니면 실제 얼굴 이미지인지를 판단함으로써, 얼굴의 생체 검출을 구현할 수 있다.

예시적으로, 본 발명 실시예에서의 상기 적어도 하나의 위조 단서 정보는, 예를 들어, 2D 타입 위조 단서 정보, 2.5D 타입 위조 단서 정보 및 3D 타입 위조 단서 정보 중 어느 하나 또는 복수 개를 포함할 수 있지만 이에 한정되지 않으며, 선택적으로, 위조 단서 정보의 상기 다차원 위조 단서 정보는 나타날 수 있는 위조 단서 정보에 따라 업데이트될 수 있다.

본 발명 실시예에서의 위조 단서 정보는 인간의 눈으로 관찰될 수 있다. 위조 단서 정보의 차원은 2D 타입, 2.5D 타입 및 3D 타입 위조 단서로 구분될 수 있다. 여기서, 2D 타입 위조 얼굴은 종이 타입 재료로 인쇄된 얼굴 이미지를 지칭하며, 상기 2D 타입 위조 단서 정보는 일반적으로 종이 얼굴의 가장자리, 종이 재질, 지면 반사, 종이 가장자리 등 위조 정보를 포함한다. 2.5D 타입 위조 얼굴은 비디오 복사 기기 등 캐리어 기기에 의해 캐리되는 얼굴 이미지를 지칭하고, 상기 2.5D 타입 위조 단서 정보는 일반적으로 비디오 복사 기기 등 캐리어 기기의 화면 모아레, 화면 반사, 화면 가장자리 등 위조 정보를 포함한다. 3D 타입 위조 얼굴은 마스크, 모델, 조각, 및 3D 인쇄와 같은 실제로 존재하는 위조 얼굴을 지칭하며, 상기 3D 타입 위조 얼굴은 마스크의 이음새, 모델의 보다 추상적이거나 지나치게 매끄러운 피부와 같은 상응하는 위조 정보를 갖는다.

본 발명의 상기 실시예에 기반하여, 다차원으로 이미지가 위조 얼굴 이미지인지를 검출하고, 상이한 차원, 다양한 타입의 위조 얼굴 이미지를 검출함으로써, 위조 얼굴 검출의 정확도를 개선하고, 불법분자가 생체 검출 과정에서 검증될 사용자의 사진 또는 비디오를 사용하여 위조 공격을 진행하는 것을 효과적으로 방지할 수 있으며; 또한, 뉴럴 네트워크를 통해 얼굴 위조 방지 검출을 수행하여, 다양한 위조 얼굴 모드의 위조 단서 정보를 훈련하고 학습할 수 있으며, 새로운 위조 얼굴 모드가 나타나면, 하드웨어 구조를 개선하지 않고도 새로운 위조 단서 정보를 기반으로 뉴럴 네트워크를 훈련하고 미세 조정하여 , 뉴럴 네트워크를 신속히 업데이트할 수 있음으로써, 새로운 얼굴 위조 방지 검출 요구사항에 빠르고 효과적으로 대응할 수 있다.

도 3은 본 발명의 얼굴인식 잠금해제 방법의 또 다른 실시예의 흐름도이다. 본 발명 실시예에서, 이미지를 획득 한 후 이미지에 대해 생체 검출을 수행하는 단계를 예로서, 본 발명 실시예를 설명하며, 당업자는 본 발명에 기재에 따라, 이미지로부터 얼굴을 검출하는 것에 응답하여, 상기 검출된 얼굴의 이미지에 대해 생체 검출을 수행하는 구현방안; 및 추출된 얼굴 특징이 인증을 통과하는 것에 응답하여, 인증된 이미지를 통해 추출된 얼굴 특징에 대해 생체 검출을 수행하는 구현방안을 알 수 있으며, 여기서 더이상 설명하지 않는다. 도 3에 도시된 바와 같이, 상기 실시예의 얼굴인식 잠금해제 방법은 다음의 단계들을 포함한다.

단계 302에 있어서, 이미지를 획득한다.

다음 단계 304 및 단계 308을 각각 실행한다.

선택적인 일 예에 있어서, 상기 단계 302는, 프로세서에 의해 카메라를 호출하여 실행될 수 있으며, 프로세서에 의해 작동되는 하나의 수신 모듈에 의해 실행될 수도 있다.

단계 304에 있어서, 획득된 이미지가 기설정된 품질 요구사항을 만족하는지 여부를 인식한다.

여기서, 품질 요구사항의 표준은 생체 검출을 위한 고품질의 이미지를 선택하도록 미리 설정될 수 있다. 여기서 품질 요구사항의 표준은, 예를 들어, 얼굴 방향이 정면을 향하는지 여부, 이미지 해상도의 수준, 노출 레벨 중 어느 하나 또는 복수 개를 포함할 수 있으며, 상응하는 표준에 따라 생체 검출을 위해 비교적 표괄적인 품질을 갖는 이미지를 선택한다.

이미지가 기설정된 품질 요구사항을 만족하는 것에 응답하여, 상기 이미지에 대해 단계 306을 실행한다. 그렇지 않으면, 이미지가 기설정된 품질 요구사항을 만족하지 않는 것에 응답하여, 단계 302를 다시 실행하여 이미지를 획득한다.

선택적인 일 예에 있어서, 상기 단계 304는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있거나, 프로세서에 의해 작동되는 광 처리 모듈에 의해 수행될 수도 있다.

단계 306에 있어서, 획득된 이미지에 대해 생체 검출을 수행한다.

다음, 단계 314를 실행한다.

선택적인 일 예에 있어서, 상기 단계 306은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 308에 있어서, 획득된 이미지에 대해 얼굴 검출을 수행한다.

선택적으로, 상기 단계 308은, 획득된 이미지의 품질이 소정의 얼굴 검출 조건을 만족하지 않을 때, 먼저 이미지에 대해 광선 등화 조정 처리를 수행하는 단계, 및 다음 광선 등화 조정 처리된 이미지에 대해 얼굴 검출을 수행하는 단계를 포함할 수 있다. 획득된 이미지의 품질이 소정의 얼굴 검출 조건을 만족할 때, 상기 이미지에 대해 얼굴 검출을 직접 수행할 수 있다.

선택적인 일 예에 있어서, 상기 단계 308은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 310에 있어서, 이미지로부터 얼굴을 검출하였는지 여부를 인식한다.

이미지로부터 얼굴을 검출한 것에 응답하여, 단계 312를 실행한다. 그렇지 않으면, 이미지로부터 얼굴이 검출되지 않은 것에 응답하여, 계속하여 단계 302를 실행할 수 있으며, 즉 이미지를 다시 획득하고 후속 프로세스를 수행한다.

선택적인 일 예에 있어서, 상기 단계 310은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 312에 있어서, 얼굴이 검출된 이미지에 대해 특징 추출을 수행하고, 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행한다.

여기서, 본 발명의 각 실시예에서, 적어도 저장된 얼굴 특징은 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함한다.

선택적인 일 예에 있어서, 상기 단계 312는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 특징 추출 모듈에 의해 실행될 수도 있다.

단계 314에 있어서, 추출된 얼굴 특징이 인증을 통과하고, 획득된 이미지가 생체 검출을 통과하는지 여부를 결정한다.

추출된 얼굴 특징이 인증을 통과하는 것과, 획득된 이미지가 생체 검출을 통과하는 것에 응답하여, 단계 316을 실행한다. 그렇지 않으면, 추출된 얼굴 특징이 인증을 통과하지 못한 것 및/또는 획득된 이미지가 생체 검출을 통과하지 못한 것에 응답하여, 상기 실시예의 후속 프로세스를 실행하지 않거나, 선택적으로 단계 318을 실행한다.

선택적인 일 예에 있어서, 상기 단계 314는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 인증 모듈에 의해 실행될 수도 있다.

단계 316에 있어서, 잠금해제 동작을 수행한다.

선택적으로, 본 발명의 다른 실시예에서, 추출된 얼굴 특징이 인증을 통과하는 것에 응답하여, 미리 저장된 대응관계로부터 상기 인증을 통과한 얼굴 특징에 대응하는 ID를 획득하고 디스플레이할 수 있다.

선택적인 일 예에 있어서, 상기 단계 316은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 제어 모듈에 의해 실행될 수도 있다.

다음, 상기 실시예의 후속 프로세스를 실행하지 않는다.

단계 318에 있어서, 인증 실패 프롬프트 메시지 및/또는 인증 실패 원인 프롬프트 메시지를 출력한다.

여기서, 인증 실패의 원인은, 예를 들어, 얼굴이 검출되지 않고, 얼굴 특징이 인증을 통과하지 못하고, 생체 검출(예를 들어, 얼굴이 사진 등으로 검출됨)을 통과하지 못하는 등일 수 있다.

선택적인 일 예에 있어서, 상기 단계 318은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 인증 모듈에 의해 실행될 수도 있다.

또한, 본 발명의 또 다른 실시예의 얼굴인식 잠금해제 방법에서,

추출된 얼굴 특징이 인증을 통과하지 못한 것에 응답하여, 미리 설정된 허용된 중복 횟수 정보를 획득하고, 이번 얼굴인식 잠금해제 방법 프로세스에서의 인증 횟수를 누적하고, 현재 누적된 인증 횟수가 허용 중복 횟수에 도달하는지를 인식하는 단계;

허용된 중복 횟수에 도달하지 않으면, 사용자에게 재인증을 프롬프트하는 단계;

사용자에 의해 송신된 재인증 요청을 수신하는 것에 응답하여, 단계 102, 단계 202 또는 단계 302로 되돌아가서, 계속하여 이미지를 획득하고, 상기 실시예의 얼굴인식 잠금해제 프로세스를 재실행하는 단계; 및

현재 누적된 인증 횟수가 허용된 중복 횟수에 도달한 것에 응답하여, 인증 실패 프롬프트 메시지 또는 인증 실패 원인 프롬프트 메시지를 출력하는 단계를 실행한다.

본 발명 각 실시예의 얼굴인식 잠금해제 방법은, 전자 기기 화면 잠금해제, 응용 프로그램(APP)의 잠금해제, 응용 프로그램 중의 얼굴인식 잠금해제 등 잠금해제를 필요로 하는 모든 장면, 예를 들어, 이동 단말이 작동될 때 본 발명의 각 실시예의 얼굴인식 잠금해제 방법을 사용하여 화면 잠금을 해제할 수 있으며, 이동 단말의 APP에서, 본 발명의 각 실시예의 얼굴인식 잠금해제 방법을 통해 응용 프로그램의 잠금을 해제할 수 있고, 결제 응용 프로그램에서 본 발명 각 실시예의 얼굴인식 잠금해제 방법에 의해 얼굴인식 잠금해제 등을 수행할 수 있다. 이로써, 본 발명 각 실시예의 얼굴인식 잠금해제 방법은 사용자에 의해 송신된 얼굴 인증 요청을 수신하는 것에 응답하여, 또는 응용이나 운영체제에 의해 송신된 얼굴 인증 요청을 수신하는 것에 응답하여, 실행을 트리거할 수 있다. 잠금을 해제한 후, 기기 및 응용 절차를 정상적으로 동작하거나, 또는 후속 프로세스를 정상적으로 수행할 수 동작할 수 있다. 예를 들어, 얼굴인식 잠금해제가 필요한 전자 기기는 잠금해제 후 전자 기기(예를 들어, 이동 단말 등)는 정상적으로 사용되고 작동될 수 있으며; 얼굴인식 잠금해제가 필요한 APP(예를 들어, 다양한 쇼핑 클라이언트, 은행 클라이언트, 단말의 사진 앨범 등)는 잠금해제 후 상기 APP에 들어가, 상기 APP를 정상적으로 사용할 수 있으며; 다양한 APP의 지불 절차에 얼굴인식 잠금해제가 필요할 때, 잠금해제 성공 후 지불 등을 완성할 수 있다.

본 발명 상기 각 실시예의 얼굴인식 잠금해제 방법 프로세스 전에, 얼굴인식 잠금해제 정보 등록 프로세스를 통해 저장된 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 획득하는 단계를 더 포함할 수 있다.

예시적으로, 상기 얼굴인식 잠금해제 정보 등록 프로세스는 본 발명의 아래의 각 실시예의 얼굴인식 잠금해제 정보 등록 방법 실시예를 통해 구현될 수 있다.

도 4는 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 일 실시예의 흐름도이다. 도 4에 도시된 바와 같이, 본 실시예의 얼굴인식 잠금해제 정보 등록 방법은 다음의 단계들을 포함한다.

단계 402에 있어서, 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력한다.

선택적인 일 예에 있어서, 상기 단계 402는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동될 때 인터렉션 모듈에 의해 실행될 수도 있다.

단계 404에 있어서, 획득된 이미지에 대해 얼굴 검출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 404는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 406에 있어서, 각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 406은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 특징 추출 모듈에 의해 실행 될 수도 있다.

단계 408에 있어서, 각 각도의 얼굴 이미지의 추출된 얼굴 특징, 및 각 각도의 얼굴 이미지의 얼굴 특징과 상기 동일한 ID 사이의 대응관계를 저장한다.

여기서, 본 발명의 각 실시예에서, 적어도 저장된 얼굴 특징은 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함한다. 여기서, ID는 저장된 얼굴 특징에 대응되는 사용자 정보를 나타내고, 예를 들어, 사용자 이름, 번호 등일 수 있다.

본 발명 각 실시예의 선택적인 일 예에 있어서, 상기 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지는 예를 들어, 상기 동일한 ID에 대응하는 정면 얼굴 이미지, 헤드업 얼굴 이미지, 헤드다운 얼굴 이미지, 헤드 좌회전 얼굴 이미지, 헤드 우회전 얼굴 이미지 중 2 개 또는 2 개 이상의 각도의 얼굴 이미지를 포함할 수 있지만 이에 한정되지 않는다.

선택적인 일 예에 있어서, 상기 단계 408은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 저장 모듈에 의해 실행될 수도 있다.

본 발명의 상기 실시예에서 제공한 얼굴인식 잠금해제 정보 등록 방법에 기반하여, 상기 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징에 기반하여 얼굴인식 잠금해제를 후속적으로 수행하기 위해, 등록 프로세스를 통해 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 미리 저장함으로써, 얼굴인식 잠금해제의 성공률을 향상시킴에 있어서 유리하고, 동일한 사용자 인증 시 얼굴 각도와 등록 시 얼굴 각도의 차이로 인한 인증 실패의 가능성을 감소시킨다.

도 5는 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 다른 실시예의 흐름도이다. 도 5에 도시된 바와 같이, 본 실시예의 얼굴인식 잠금해제 정보 등록 방법은 다음의 단계들을 포함한다.

단계 502에 있어서, 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력한다.

선택적인 일 예에 있어서, 상기 단계 502는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동될 때 인터렉션 모듈에 의해 실행될 수도 있다.

단계 504에 있어서, 이미지를 획득한다.

선택적인 일 예에 있어서, 상기 단계 504는 프로세서에 의해 카메라를 호출함으로써 실행될 수 있으며, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 506에 있어서, 획득된 이미지에 대해 광선 등화 조정 처리를 수행한다.

본 발명 각 실시예의 선택적인 일 예에 있어서, 상기 단계 506는, 획득된 이미지에 대해 광선 등화 조정 처리를 수행하기 위해 직접 실행될 수 있다

또는, 본 발명 각 실시예의 다른 선택적인 일 예에서, 상기 단계 506 전에, 획득된 이미지의 품질이 소정의 얼굴 검출 조건을 만족시키는지 여부를 먼저 결정하고, 이미지의 품질이 소정의 얼굴 검출 조건을 만족하지 않을 때, 상기 단계 506을 실행하여, 이미지에 대해 광선 등화 조정 처리를 수행하고, 품질이 소정의 얼굴 검출 조건을 만족하면 이미지에 대해 단계 506을 더이상 실행하지 않고, 단계 508을 통해 이미지에 대해 얼굴 검출을 수행하며, 상기 실시예는 품질이 소정의 얼굴 검출 조건을 만족하는 이미지에 대해 광선 등화 조정 처리 단계를 더이상 진행하지 않으므로, 얼굴인식 잠금해제의 효율의 개선에 유리하다.

여기서, 예를 들어, 소정의 얼굴 검출 조건은, 이미지의 픽셀값 분포가 기설정된 분포 범위에 부합되지 않는 것, 이미지의 속성값이 기설정된 값 범위 내에 있지 않는 것 중 적어도 하나를 포함할 수 있지만 이에 한정되지 않는다. 여기서, 예를 들어, 이미지의 속성값은 이미지의 채도, 밝기, 콘트라스트 및 포화도 등 속성값이다.

상기 실시예의 선택적인 일 예에 있어서, 단계 506에서, 획득된 이미지에 대해 광선 등화 조정 처리를 수행하는 단계는, 이미지의 그레이스케일 이미지를 획득하는 단계; 및 상기 이미지의 그레이스케일 이미지에 대한 히스토그램 등화 처리를 적어도 수행함으로써, 이미지의 그레이스케일 이미지의 픽셀값 분포가 전체 픽셀값 공간에 균일하게 확산될 수 있는 동시에, 히스토그램 등화 처리된 이미지의 그레이스케일 이미지에 대한 후속 동작을 수행하기 위해, 원래 이미지 픽셀값을 유지하는 단계를 포함할 수 있다.

상기 실시예의 다른 선택적인 일 예에 있어서, 단계 506에서, 획득된 이미지에 대해 광선 등화 조정 처리를 수행하는 단계는, 이미지를 기설정된 조명 조건을 만족시키는 이미지로 변환하기 위해 적어도 이미지에 대해 이미지 조명 변환을 수행하는 단계를 포함할 수 있다.

선택적인 일 예에 있어서, 상기 단계 506은 메모리에 저장된 대응되는 명령어를 호출함으로써 프로세서에 의해 수행될 수 있거나, 프로세서에 의해 작동되는 광 처리 모듈에 의해 수행될 수도 있다.

단계 508에 있어서, 획득된 이미지에 대해 얼굴 검출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 508은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 510에 있어서, 이미지로부터 얼굴을 검출하였는지 여부를 인식한다.

이미지로부터 얼굴을 검출한 것에 응답하여, 단계 512를 실행한다. 그렇지 않으면, 이미지로부터 얼굴이 검출되지 않은 것에 응답하여, 단계 504로 되돌아가서, 이미지를 다시 획득한다.

선택적인 일 예에 있어서, 상기 단계 510은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 512에 있어서, 각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 512는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 특징 추출 모듈에 의해 실행 될 수도 있다.

단계 514에 있어서, 각 각도의 얼굴 이미지의 추출된 얼굴 특징 및 이와 상기 동일한 ID 사이의 대응관계를 저장한다.

선택적인 일 예에 있어서, 상기 단계 514는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

본 발명 실시예에서, 먼저 획득된 이미지에 대해 광선 등화 조정 처리를 수행하고, 계속하여 얼굴 검출을 수행함으로써, 얼굴 검출을 용이하게 하고, 다크 라이트, 백라이트 등 극한 조명 조건 하에서, 이미지에서의 얼굴을 여전히 정확하게 검출하며, 특히 실제 장면에서 실내 또는 야간 조명이 매우 어두워 거의 완전히 캄캄한 상황, 또는 야간 배경 조명이 강하고, 얼굴이 어둡고 텍스처가 흐릿한 상황에서도 모두 얼굴을 검출할 수 있으므로, 본 발명은 얼굴인식 잠금해제 응용 프로그램을 더 잘 구현할 수 있다.

도 6은 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 또 다른 실시예의 흐름도이다. 도 6에 도시된 바와 같이, 도 5의 실시예와 비교하면, 상기 실시예의 얼굴인식 잠금해제 정보 등록 방법에서, 단계 514 전에, 예를 들어, 단계 512 전, 후 또는 동시에, 다음의 단계를 실행한다.

단계 602에 있어서, 이미지에 포함된 얼굴의 각도를 검출한다.

선택적인 일 예에 있어서, 상기 단계 602는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 저장 모듈에 의해 실행될 수도 있다.

단계 604에 있어서, 검출된 각도가 프롬프트 정보에 대응하는 각도와 일치하는지 여부를 결정한다. 검출된 각도가 프롬프트 정보에 대응하는 각도와 일치한 것으로 결정할 때, 단계 512, 즉 각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행하는 단계, 또는 단계 514, 즉 각 각도의 얼굴 이미지의 추출된 얼굴 특징, 및 각 각도의 얼굴 이미지의 얼굴 특징과 상기 동일한 ID 사이의 대응관계를 저장하는 단계를 실행한다.

선택적으로, 다른 실시예에서, 검출된 각도가 프롬프트 정보에 대응하는 각도와 일치하지 않는 것에 응답하여, 또한 상기 각도의 얼굴 이미지의 재입력을 나타내는 새로운 프롬프트 정보를 출력함으로써, 얼굴 각도를 조정하여, 본 발명 실시예의 얼굴인식 잠금해제 정보 등록 방법 프로세스를 재실행할 수 있다.

선택적인 일 예에 있어서, 상기 단계 604는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 저장 모듈에 의해 실행될 수도 있다.

도 6에 도시된 실시예의 선택적인 일 예에서, 즉 이미지에 포함된 얼굴의 각도를 검출하는 단계 602는,

얼굴에 대해 키포인트 검출을 수행하는 단계;

검출된 키포인트에 따라 얼굴의 좌우 각도 및 상하 각도와 같은 얼굴 각도를 계산하는 단계; 및

계산된 얼굴 각도에 따라, 검출된 각도가 프롬프트 정보에 대응하는 각도와 일치하는지 여부를 결정하는 단계를 포함한다.

본 발명 실시예에서, 얼굴인식 잠금해제 정보 등록 프로세스에 저장된 얼굴 특징에 기반하여 사용자에 대해 얼굴인식 잠금해제를 후속적으로 수행하여, 얼굴인식 잠금해제를 후속적으로 수행할 때 얼굴인식 잠금해제를 진행하는 얼굴 각도가 등록 시와 상이한 것으로 인한 얼굴인식 잠금해제 실패를 방지하여, 얼굴인식 잠금해제의 성공률을 향상시키고, 본 발명 실시예는 동일한 사용자에 대해 복수 개의 각도(예를 들어, 5 개의 각도)의 얼굴 이미지의 얼굴 특징을 저장할 수 있다. 여기서, 상이한 각도의 얼굴은 예를 들어, 정면, 헤드업, 헤드 다운, 헤드 좌회전, 헤드 우회전 5 가지 각도의 얼굴이다. 본 발명 실시예에서, 얼굴(즉, 머리)의 좌우 각도 및 상하 각도는 얼굴 각도를 나타내며, 얼굴이 정면일 경우, 얼굴의 좌우 각도 및 상하 각도를 모두 0으로 설정할 수 있다.

이와 상응하게, 도 6에 도시된 실시예의 다른 선택적인 일 예에 있어서, 단계 502에서, 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하는 단계는, 미리 설정된 다각도의 파라미터에 따라, 하나의 기설정된 각도를 선택하고 사용자에게 상기 하나의 기설정된 각도의 얼굴 이미지를 입력하도록 프롬프트하는 단계를 포함한다. 여기서 다각도의 파라미터는 획득해야 할 얼굴 이미지의 복수 개의 각도의 정보를 포함한다. 이와 상응하게, 상기 예에서, 상기 하나의 기설정된 각도의 얼굴 이미지의 얼굴 특징 및 이와 상기 동일한 ID 사이의 대응관계를 저장한 후, 다각도의 파라미터에 대응하는 모든 기설정된 각도를 선택 완료하였는지 여부를 인식하는 단계; 다각도의 파라미터에 대응하는 모든 기설정된 각도를 선택하지 않은 것에 응답하여, 다음 하나의 기설정된 각도를 선택하고 상기 다음 하나의 기설정된 각도에 대해 상기 도 5 또는 도 6에 도시된 실시예를 실행하는 단계를 더 포함할 수 있다. 다각도의 파라미터에 대응하는 모든 기설정된 각도를 선택 완료하면, 이번 얼굴인식 잠금해제 정보 등록을 완료한다.

선택적으로, 다각도의 파라미터에 대응하는 모든 기설정된 각도를 선택완료한 것, 또는 매번 하나의 각도의 얼굴 특징을 추출한 것에 응답하여, 사용자가 상기 동일한 ID를 입력하도록 프롬프트하기 위한 프롬프트 정보를 출력할 수 있다. 이와 상응하게, 각 각도의 얼굴 이미지의 추출된 얼굴 특징 및 이와 상기 동일한 ID 사이의 대응관계를 저장하는 단계는, 추출된 적어도 2 개의 각도의 얼굴 이미지의 얼굴 특징과 사용자에 의해 입력된 ID를 저장하고, 상기 ID 및 상기 적어도 2 개의 각도의 얼굴 이미지의 얼굴 특징 사이의 대응관계를 확립하는 단계를 포함한다.

상기 예에 기반하여, 동일한 사용자에 대해 복수 개의 상이한 각도의 얼굴의 얼굴 특징을 저장하는 것을 구현한다.

본 발명의 상기 각 실시예의 얼굴인식 잠금해제 정보 등록 방법은, 이미지에 대해 생체 검출을 수행하는 단계를 더 포함할 수 있다. 이와 상응하게, 본 발명의 상기 각 얼굴인식 잠금해제 방법 실시예에서, 상기 이미지가 생체 검출을 통과하는 것에 응답하여, 상기 각 각도의 얼굴 이미지의 추출된 얼굴 특징 및 이와 상기 동일한 ID 사이의 대응관를 저장하는 동작을 실행한다.

예시적으로, 본 발명 각 실시예의 얼굴인식 잠금해제 방법에서, 이미지에 대해 생체 검출을 수행하고, 이미지를 획득한 후, 획득된 이미지에 대해 생체 검출을 수행할 수 있으며; 또는, 각 각도의 검출된 얼굴의 이미지에 대해 생체 검출을 수행할 수 있으며; 또는, 검출된 얼굴의 각도와 기설정된 각도가 일치한 것에 응답하여, 이미지에 대해 생체 검출을 수행하며; 또는, 얼굴 특징 추출을 수행한 후, 이미지에 대해 생체 검출을 수행할 수 있다.

본 발명의 각 얼굴인식 잠금해제 정보 등록 방법의 실시예에서, 이미지에 대해 생체 검출을 수행하는 구현 방식은, 본 발명의 상기 각 얼굴인식 잠금해제 방법의 실시예에서 이미지에 대해 생체 검출을 수행하는 구현 방식을 참조할 수 있으며, 여기서 더이상 설명하지 않는다.

도 7은 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 또 다른 실시예의 흐름도이다. 본 발명 실시예에서, 이미지를 획득한 후, 이미지에 대해 생체 검출을 수행하는 것을 예로 들어, 본 발명 실시예를 설명하며, 당업자는 본 발명의 기재에 따라, 각 각도의 검출된 얼굴의 이미지에 대해 생체 검출을 수행하는 구현방안, 검출된 얼굴의 각도가 기설정된 각도에 일치하는 것에 응답하여 이미지에 대해 생체 검출을 수행하는 구현방안, 검출된 각 각도의 얼굴의 이미지에 대해 얼굴 추출을 수행한 후, 이미지에 대해 생체 검출을 수행하는 구현방안 등을 알수 있으며, 여기서 더이상 설명하지 않는다. 도 7에 도시된 바와 같이, 본 실시예의 얼굴인식 잠금해제 정보 등록 방법은 다음의 단계들을 포함한다.

단계 702에 있어서, 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력한다.

선택적인 일 예에 있어서, 상기 단계 702는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 인터렉션 모듈에 의해 실행될 수도 있다.

단계 704에 있어서, 이미지를 획득하고, 획득된 이미지에 대해 생체 검출을 수행한다.

상기 이미지가 생체 검출을 통과하는 것에 응답하여, 단계 706을 실행한다. 그렇지 않으면, 상기 이미지가 생체 검출을 통과하지 못하면, 상기 실시예의 후속적인 프로세스를 실행하지 않는다.

선택적인 일 예에 있어서, 상기 단계 704는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 706에 있어서, 획득된 이미지에 대해 얼굴 검출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 706은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 708에 있어서, 이미지로부터 얼굴을 검출하였는지 여부를 인식한다.

이미지로부터 얼굴을 검출한 것에 응답하여, 단계 710을 실행한다. 이미지로부터 얼굴이 검출되지 않으면, 단계 702를 계속하여 실행하며, 또는 이미지를 계속하여 획득하고 단계 704를 실행한다.

선택적인 일 예에 있어서, 상기 단계 708은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 얼굴 검출 모듈에 의해 실행될 수도 있다.

단계 710에 있어서, 이미지에 포함된 얼굴의 각도를 검출한다.

선택적인 일 예에 있어서, 상기 단계 710은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 저장 모듈에 의해 실행될 수도 있다.

단계 712에 있어서, 검출된 각도가 프롬프트 정보에 대응하는 각도와 일치하는지 여부를 결정한다.

검출된 각도가 프롬프트 정보에 대응하는 각도에 일치하는 것에 응답하여, 단계 714를 실행한다. 그렇지 않으면, 검출된 각도가 프롬프트 정보에 대응하는 각도에 일치하지 않으면, 단계 702를 다시 실행한다.

선택적인 일 예에 있어서, 상기 단계 712는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 저장 모듈에 의해 실행될 수도 있다.

단계 714에 있어서, 각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행한다.

선택적인 일 예에 있어서, 상기 단계 714는 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 특징 검출 모듈에 의해 실행될 수도 있다.

단계 716에 있어서, 각 각도의 얼굴 이미지의 추출된 얼굴 특징, 및 각 각도의 얼굴 이미지의 얼굴 특징과 상기 동일한 ID 사이의 대응관계를 저장한다.

또한, 본 발명의 얼굴인식 잠금해제 정보 등록 방법의 또 다른 실시예로서, 도 7에 도시된 실시예의 단계 704에서, 획득된 이미지가 기설정된 품질 요구사항을 만족하는지 여부를 인식할 수 있으며; 이미지가 기설정된 품질 요구사항에 만족하는 것에 응답하여, 이미지에 대해 생체 검출을 수행하고; 그렇지 않으면, 이미지가 기설정된 품질 요구사항을 만족하지 않는 것에 응답하여, 단계 702 또는 단계 704를 계속하여 실행한다.

선택적인 일 예에 있어서, 상기 단계 716은 메모리에 저장된 대응하는 명령어를 호출함으로써 프로세서에 의해 실행될 수 있고, 프로세서에 의해 작동되는 저장 모듈에 의해 실행될 수도 있다.

본 발명의 상기 실시예는 다차원으로 이미지가 위조 얼굴 이미지인지를 검출하고, 상이한 차원, 다양한 타입의 위조 얼굴 이미지를 검출함으로써, 위조 얼굴 검출의 정확도를 개선하고, 불법분자가 생체 검출 과정에서 검증될 사용자의 사진 또는 비디오를 사용하여 위조 공격을 진행하는 것을 효과적으로 방지할 수 있으며, 얼굴인식 잠금해제 정보 등록 시의 이미지가 진실적인 사용자 이미지 인것을 확보하며; 또한, 뉴럴 네트워크를 통해 얼굴 위조 방지 검출을 수행하여, 다양한 위조 얼굴 모드의 위조 단서 정보를 훈련하고 학습할 수 있으며, 새로운 위조 얼굴 모드가 나타나면, 새로운 위조 단서 정보를 기반으로 뉴럴 네트워크를 훈련하고, 미세 조정하여 하드웨어 구조를 개선하지 않고도 뉴럴 네트워크를 신속히 업데이트할 수 있음으로써, 새로운 얼굴 위조 방지 검출 요구사항에 빠르고 효과적으로 대응할 수 있다.

본 발명 상기 각 실시예의 얼굴인식 잠금해제 정보 등록 방법은, 사용자에 의해 송신된 얼굴 입력 요청을 수신하는 것에 응답하여 실행할 수 있거나, 응용 프로그램 또는 운영체제에 의해 송신된 얼굴 요청을 입력하는 것에 응답하여 실행할 수 있다.

본 발명의 실시예에서 제공한 임의의 얼굴인식 잠금해제 방법 및 얼굴인식 잠금해제 정보 등록 방법은 임의의 적합한 데이터 처리 능력을 구비한 단말 기기 및 서버 등을 포함하는 기기에 의해 실행되지만 이에 한정되는 것은 아니다. 또는, 본 발명 실시예에서 제공한 임의의 얼굴인식 잠금해제 방법 및 얼굴인식 잠금해제 정보 등록 방법은 프로세서에 의해 실행되고, 예를 들어, 프로세서는 메모리에 저장된 상응하는 명령어를 호출하으로써 본 발명 실시예에서 언급된 임의의 얼굴인식 잠금해제 방법 및 얼굴인식 잠금해제 정보 등록 방법을 실행한다. 아래에 더이상 설명하지 않는다.

당업자는 상기 방법 실시예를 구현하기 위한 모든 또는 일부 동작은 프로그램 명령어와 관련되는 하드웨어를 통해 완성되며, 전술한 프로그램은 컴퓨터 판독 가능 저장 매체에 저장될 수 있으며, 상기 프로그램이 수행될 때, 수행은 상기 방법 실시예의 동작을 포함하며; 전술한 저장 매체는 판독 전용 메모리(Read Only Memory, ROM), 랜덤 액세스 메모리(Random Access Memory, RAM), 자기 디스크 또는 광 디스크와 같은 프로그램 코드를 저장할 수 있는 다양한 매체를 포함한다.

도 8은 본 발명의 얼굴인식 잠금해제 장치의 일 실시예의 구조 모식도이다. 상기 실시예의 얼굴인식 잠금해제 장치는 본 발명의 상기 각 방법의 실시예를 구현하기 위한 것이다. 도 8에 도시된 바와 같이, 상기 실시예의 얼굴인식 잠금해제 장치는 얼굴 검출 모듈, 특징 추출 모듈, 인증 모듈 및 제어 모듈을 포함한다. 즉,

이미지에 대해 얼굴 검출을 수행하기 위한 얼굴 검출 모듈;

얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하기 위한 특징 추출 모듈; 및

저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하기 위한 인증 모듈을 포함한다.

여기서, 저장된 얼굴 특징 적어도 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함한다. 예시적으로, 상기 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지는 예를 들어, 동일한 ID에 대응하는 정면 얼굴 이미지, 헤드업 얼굴 이미지, 헤드다운 얼굴 이미지, 헤드 좌회전 얼굴 이미지, 헤드 우회전 얼굴 이미지 중 2 개 또는 2 개 이상의 각도의 얼굴 이미지를 포함할 수 있지만 이에 한정되지 않는다.

제어 모듈은, 적어도 추출된 얼굴 특징이 인증을 통과하는 것에 응답하여, 잠금해제 동작을 수행하기 위한 것이다.

여기서, 선택적인 일 예에서, 인증 모듈은 추출된 얼굴 특징과 적어도 하나의 저장된 얼굴 특징 사이의 유사도를 획득하고; 획득된 임의의 유사도가 설정된 임계값보다 큰 것에 응답하여, 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하기 위한 것이다. 다른 선택적인 일 예에서, 인증 모듈은 추출된 얼굴 특징과 적어도 하나의 저장된 얼굴 특징 사이의 유사도를 획득하고; 획득된 임의의 유사도 중의 최대값이 설정된 임계값보다 큰 것에 응답하여, 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하기 위한 것이다.

본 발명 실시예서 제공한 얼굴인식 잠금해제 장치는, 이미지에 대해 얼굴 검출을 수행하는 단계, 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하고, 저장된 얼굴 특징에 기반하여 상기 추출된 얼굴 특징에 대해 인증을 수행하며, 상기 추출된 얼굴 특징이 인증을 통과한 후, 잠금해제 동작을 수행함으로써, 얼굴에 기반한 인증 잠금해제를 구현하며, 본 발명 실시예의 잠금해제 방식은 동작이 간단하며, 편리성이 높고, 보안성이 높으며; 또한, 본 발명 실시예는 등록 프로세스를 통해 동일한 ID에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 미리 저장함으로써, 상기 동일한 ID에 대응하는 사용자와 저장된 얼굴 특징에 대응하는 임의의 각도의 얼굴 이미지를 획득하면, 상기 사용자에 기반한 얼굴인식 잠금해제를 성공적으로 구현할 수 있으며, 얼굴인식 잠금해제의 성공률을 향상시키고, 동일한 사용자 인증 시 얼굴 각도와 등록 시 얼굴 각도의 차이로 인한 인증 실패 가능성을 감소시킨다.

도 9는 본 발명의 얼굴인식 잠금해제 장치의 다른 실시예의 구조 모식도이다. 도 9에 도시된 바와 같이, 도 8에 도시된 실시예와 비교하면, 상기 실시예의 얼굴인식 잠금해제 장치는, 획득 모듈 및 광선 처리 모듈을 더 포함한다. 여기서,

획득 모듈은 이미지를 획득하기 위한 것이다. 상기 획득 모듈은, 예를 들어, 하나의 카메라 또는 다른 이미지 수집 기기일 수 있다.

광선 처리 모듈은 이미지에 대해 광선 등화 조정 처리를 수행하기 위한 것이다.

이와 상응하게, 얼굴 검출 모듈은 광선 등화 조정 처리된 이미지에 대해 얼굴 검출을 수행하기 위한 것이다.

여기서, 선택적인 일 예에서, 광선 처리 모듈은 이미지의 그레이스케일 이미지를 획득하고, 적어도 이미지의 그레이스케일 이미지에 대해 히스토그램 등화 처리를 수행하기 위한 것이다. 다른 선택적인 일 예에서, 광선 처리 모듈은, 적어도 이미지에 대해 이미지 조명 변환을 수행하여, 이미지를 기설정된 조명 조건을 만족시키는 이미지로 변환하기 위한 것이다. 또 다른 선택적인 일 예에서, 광선 처리 모듈은 이미지의 품질이 소정의 얼굴 검출 조건을 만족하지 않는 것으로 결정되면, 이미지에 대해 광선 등화 조정 처리를 수행하기 위한 것이다. 여기서, 예를 들어, 소정의 얼굴 검출 조건은 이미지의 픽셀값 분포가 기설정된 분포 범위에 부합되지 않는 것, 이미지의 속성값이 기설정된 값 범위 내에 있지 않는 것 중 적어도 하나를 포함할 수 있지만 이에 한정되지 않는다.

더 나아가, 도 9를 다시 참조하면, 본 발명의 얼굴인식 잠금해제 장치의 또 다른 실시예에서, 인터렉션 모듈 및 저장 모듈을 더 포함할 수 있다. 여기서, 인터렉션 모듈은, 상기 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하기 위한 것이다. 저장 모듈은, 특징 추출 모듈에 의해 추출된 각 각도의 얼굴 이미지의 얼굴 특징 및 이와 상기 동일한 ID 사이의 대응관계를 저장하기 위한 것이다

여기서, 선택적인 일 예에서, 저장 모듈은 이미지에 포함된 얼굴의 각도를 저장하고, 검출된 각도가 프롬프트 정보에 대응하는 각도와 일치한 것으로 결정되면, 특징 추출 모듈에 의해 추출된 각 각도의 얼굴 이미지의 얼굴 특징 및 이와 동일한 ID 사이의 대응관계를 저장하기 위한 것이다.

다른 선택적인 일 예에서, 저장 모듈은, 이미지에 포함된 얼굴의 각도를 검출할 때, 이미지에 대해 얼굴 키포인트 검출을 수행하고, 검출된 얼굴 키포인트에 따라 이미지에 포함된 얼굴의 각도를 계산하기 위한 것이다.

또한, 본 발명의 얼굴인식 잠금해제 장치의 또 다른 하나의 실시예에서, 저장 모듈은 또한, 검출된 각도가 프롬프트 정보에 대응하는 각도와 일치하지 않을 때, 인터렉션 모듈에 상기 각도의 얼굴 이미지의 재입력을 나타내는 새로운 프롬프트 정보를 출력하도록 요청하기 위한 것이다.

또 다른 선택적인 일 예에서, 저장 모듈은, 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 저장 완료하였는지를 인식하고; 상기 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 저장 완료하지 않은 것에 응답하여, 상기 인터렉션 모듈에 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하는 동작을 요청하며; 상기 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 저장 완료하는 것에 응답하여, 상기 인터렉션 모듈에 사용자가 상기 동일한 ID를 입력하도록 프롬프트하기 위한 프롬프트 정보를 출력하도록 요청하며; 상기 적어도 2 개의 각도의 얼굴 이미지의 추출된 얼굴 특징과 사용자에 의해 입력된 상기 동일한 ID를 저장하고, 상기 동일한 ID 및 상기 적어도 2 개의 각도의 얼굴 이미지의 얼굴 특징 사이의 대응관계를 확립하기 위한 것이다.

나아가, 도 9를 다시 참조하면, 본 발명의 얼굴인식 잠금해제 장치의 또 다른 하나의 실시예에서, 이미지에 대해 생체 검출을 수행하기 위한 생체 검출 모듈을 더 포함할 수 있다. 이와 상응하게, 상기 실시예에서, 제어 모듈은 적어도 추출된 얼굴 특징이 인증을 통과하는 것과, 이미지가 생체 검출을 통과하는 것에 응답하여, 잠금해제 동작을 수행하기 위한 것이다.

여기서, 선택적인 일 예에서, 생체 검출 모듈은, 이미지가 기설정된 품질 요구사항에 만족하는 것에 응답하여, 이미지에 대해 생체 검출을 수행하기 위한 것이다.

다른 선택적인 일 예에서, 생체 검출 모듈은 뉴럴 네트워크를 통해 구현될 수 있다. 상기 뉴럴 네트워크는, 이미지에 대해 이미지 특징 추출을 수행하고; 추출된 이미지 특징이 적어도 하나의 위조 단서 정보를 포함하는지 여부를 검출하며; 적어도 하나의 위조 단서 정보의 검출 결과에 기반하여, 이미지가 생체 검출을 통과하는지 여부를 결정하기 위한 것이다.

여기서, 뉴럴 네트워크를 이용하여 이미지로부터 추출된 이미지 특징은, 예를 들어, LBP특징, HSC특징, LARGE특징, SMALL특징, TINY특징 중 어느 하나 또는 복수 개를 포함하지만 이에 한정되지 않는다.

상기 적어도 하나의 위조 단서 정보는, 예를 들어, 2D 타입 위조 얼굴 정보, 2.5D 타입 위조 얼굴 정보 및 3D 타입 위조 얼굴 정보 중 어느 하나 또는 복수 개를 포함하지만 이에 한정되지 않는다.

여기서, 2D 타입 위조 얼굴 정보가 종이 타입 재료로 얼굴 이미지를 인쇄한 것에 대한 위조 정보를 포함하는 것; 및, 2.5D 타입 위조 얼굴 정보가 얼굴 이미지를 캐리어 기기에 의해 캐리한 것에 대한 위조 정보를 포함하는 것; 및, 3D 타입 위조 얼굴 정보가 얼굴을 위조한 것에 대한 정보를 포함하는 것 중 적어도 하나이다.

본 발명 실시예는 본 발명의 상기 임의의 실시예의 얼굴인식 잠금해제 장치를 포함하는 전자 기기를 더 제공한다.

또한, 본 발명 실시예는 다른 전자 기기를 제공하며, 상기 전자 기기는,

프로세서 및 본 발명 상기 임의의 실시예의 얼굴인식 잠금해제 장치를 포함하며;

프로세서에서 상기 얼굴인식 잠금해제를 작동할 때, 상기 임의의 실시예의 얼굴인식 잠금해제 중의 모듈이 작동된다.

또한, 본 발명 실시예는 또 다른 전자 기기를 제공하며, 상기 전자 기기는,

실행 가능한 명령어를 저장하는 메모리; 및

실행 가능 명령어를 실행하기 위해 메모리와 통신함으로써 본 발명의 상기 임의의 실시예의 얼굴인식 잠금해제 방법 또는 얼굴인식 잠금해제 정보 등록 방법의 단계의 동작을 구현하는 하나 또는 복수 개의 프로세서를 포함한다.

또한, 본 발명 실시예는 컴퓨터 판독 가능 코드를 포함하는 컴퓨터 프로그램을 추가로 제공하며, 상기 컴퓨터 판독 가능 코드가 기기에서 작동될 때, 기기 중의 프로세서는 본 발명의 상기 임의의 실시예의 얼굴인식 잠금해제 방법 또는 얼굴인식 잠금해제 정보 등록 방법 중의 단계를 구현하기 위한 명령어를 실행한다.

또한, 본 발명 실시예는 컴퓨터 판독 가능 명령어를 저장하기 위한 컴퓨터 판독 가능 매체를 추가로 제공하며, 상기 명령어가 실행될 때 본 발명의 상기 임의의 실시예의 얼굴인식 잠금해제 방법 또는 얼굴인식 잠금해제 정보 등록 방법 중의 단계의 동작을 구현한다.

도 10은 본 발명 전자 기기의 일 실시예의 구조 모식도이다. 도 10을 참조하면, 본 출원의 실시예의 단말 기기 또는 서버를 구현하기에 적합한 전자 기기의 구조 모식도를 나타낸다. 도 10에 도시된 바와 같이, 상기 전자 기기는 하나 또는 복수 개의 프로세서, 통신부 등을 포함하며, 상기 하나 또는 복수 개의 프로세서는 예를 들어, 하나 또는 복수 개의 중앙처리장치(CPU)(801) 및 하나 또는 복수 개의 그래픽 처리 장치(GPU)(813) 중 적어도 하나이며, 프로세서는 판독 전용 메모리(ROM)(802)에 저장된 수행 가능 명령어 또는 저장 부분(808)으로부터 랜덤 액세스 메모리(RAM)(803)에 로딩된 수행 가능 명령어에 따라 다양한 적절한 동작 및 처리를 수행할 수 있다. 통신부(812)는 네트워크 카드를 포함할 수 있지만 이에 한정되지 않으며, 상기 네트워크 카드는 인피니밴드(Infiniband, IB) 네트워크 카드를 포함할 수 있지만 이에 한정되지 않으며, 프로세서는 판독 전용 메모리(802) 및/또는 랜덤 액세스 메모리(803)와 통신하여 실행 가능한 명령어를 실행하고, 버스(804)를 통해 통신부(812)에 연결되고, 통신부(812)를 통해 다른 목표 장치와 통신함으로써, 본 출원의 실시 예에서 제공되는 임의의 방법에 대응하는 단계, 예를 들어, 이미지에 대해 얼굴 검출을 수행하는 단계; 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하는 단계; 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계 - 적어도 상기 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함함 - ; 및 적어도 상기 추출된 얼굴 특징이 인증을 통과한 것에 응답하여, 잠금해제 동작을 수행하는 단계를 완료한다. 또는, 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하는 단계; 획득된 이미지에 대해 얼굴 검출을 수행하는 단계; 각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행하는 단계; 및 각 각도의 얼굴 이미지의 추출된 얼굴 특징과 이와 상기 동일한 ID 사이의 대응관계를 저장하는 단계를 포함한다.

또한, RAM(803)에는 장치의 동작에 필요한 다양한 프로그램 및 데이터가 더 저장될 수 있다. CPU(801), ROM(802) 및 RAM(803)은 통신 버스(804)를 통해 서로 연결된다. RAM(803)이 있는 경우, ROM(802)은 옵션 모듈이다. RAM(803)은 실행 가능 명령어를 저장하고, 또는 작동될 경우, ROM(802)에 실행 가능 명령어를 기록하며, 실행 가능 명령어는 중앙처리장치(801)로 하여금 상기 통신 방법에 대응하는 동작을 실행하도록 한다. 입력/출력(I/O) 인터페이스(805)도 버스(804)에 연결된다. 통신부(812)는 통합될 수 있거나, 버스에 연결된 복수 개의 서브 모듈(예를 들어, 복수 개의 IB 랜 카드)을 갖도록 구성될 수 있다.

키보드, 마우스 등을 포함하는 입력 부분(806); 음극 선관(CRT), 액정 디스플레이(LCD), 스피커 등을 포함하는 출력 부분(807); 하드웨어 등을 포함하는 저장 부분(808); 및 LAN 카드, 모뎀 등을 포함하는 네트워크 인터페이스 카드의 통신 부분(809) 등 구성 요소는 I/O 인터페이스(805)에 연결된다. 통신 부분(809)은 인터넷과 같은 네트워크를 통해 통신 처리를 실행한다. 드라이버(810)는 필요에 따라 I/O 인터페이스(805)에 연결될 수도 있다. 자기 디스크, 광 디스크, 광 자기 디스크, 반도체 메모리 등과 같은 찰탁 가능한 매체(811)는 필요에 따라 찰탁 가능한 매체로부터 판독된 컴퓨터 프로그램이 저장 부분(808)에 설치되도록 필요에 따라 드라이버(810)에 장착된다.

설명해야 할 것은, 도 10에 도시된 아키텍쳐는 다만 선택적인 구현 방식일 뿐, 구체적인 실천 과정에서, 상기 도 10의 구성 요소의 개수 및 유형은 실제 필요에 따라 선택, 감소, 증가 또는 교체되며; 상이한 기능적 구성 요소 설치에서 분리 설치 또는 통합 설치 등 구현 방식을 사용할 수 있으며, 예를 들어 GPU(813) 및 CPU(801)는 분리 설치되거나 GPU(813)가 CPU(801)에 통합되며, 통신부는 분리 설치되거나, CPU(801) 또는 GPU(813)에 통합 설치될 수 있는 등이다. 이들 대안적인 실시 형태는 모두 본 발명에 개시된 보호범위에 속한다.

특히, 본원의 실시예에 따른 흐름도를 참조하여 설명된 과정은 컴퓨터 소프트웨어 프로그램에 의해 구현된다. 예를 들어, 본 발명의 실시예는 컴퓨터 프로그램 제품을 포함하며, 컴퓨터 프로그램은 기계 판독 가능 매체에 유형으로 포함되고, 컴퓨터 프로그램은 흐름도에 도시된 방법을 실행하기 위한 프로그램 코드를 포함하고, 프로그램 코드는 본 출원의 실시예에서 제공된 방법 단계를 실행하는 것에 대응하는 명령어를 포함할 수 있으며, 예를 들어, 이미지에 대해 얼굴 검출을 수행하는 단계; 얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하는 단계; 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계 - 적어도 상기 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함함 - ; 및 적어도 상기 추출된 얼굴 특징이 인증을 통과한 것에 응답하여, 잠금해제 동작을 수행하는 단계를 포함한다. 또는, 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하는 단계; 획득된 이미지에 대해 얼굴 검출을 수행하는 단계; 각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행하는 단계; 및 각 각도의 얼굴 이미지의 추출된 얼굴 특징과 이와 상기 동일한 ID 사이의 대응관계를 저장하는 단계를 포함한다.

본 명세서에, 각 실시예는 모두 점진적으로 설명되며, 각 실시예는 다른 실시예와의 차이점에 초점을 맞추고, 각 실시예 사이의 동일하거나 유사한 부분은 서로 참조될 수 있다. 시스템 실시예는 방법 실시예에 거의 대응되므로, 설명이 비교적 간단하고, 관련 부분에 대해서는 방법 실시예의 설명을 참조한다.

본 발명의 방법 및 장치, 기기는 많은 방식으로 구현될 수 있다. 예를 들어, 본 발명의 방법과 장치는 소프트웨어, 하드웨어, 펌웨어 또는 소프트웨어, 하드웨어, 펌웨어의 임의의 조합으로 구현될 수 있다. 달리 구체적으로 언급되지 않는 한, 상기 방법의 상기 단계의 상기 순서는 다만 설명을 위한 것이며, 본 발명의 방법의 단계를 한정하려는 것은 아니다. 또한, 일부 실시예에 있어서, 본 발명은 기록 매체에 기록된 프로그램으로서 구현될 수도 있으며, 이들 프로그램은 본 발명의 방법을 구현하기 위한 기계 판독 가능 명령어를 포함한다. 따라서, 본 발명은 본 발명에 따른 방법들을 실행하기 위한 프로그램을 저장하는 기록 매체를 더 포함한다.

본 발명의 설명은 예시 및 설명을 목적으로 제공되며, 누락되지 않는 형태로 한정하거나 본 출원을 개시된 형태로 한정하려는 것은 아니다. 많은 보정과 변경이 본 기술분야의 통상의 기술자에게 명백하다. 실시예들은 본 발명의 원리 및 실제 적용을 더 잘 설명하고, 본 기술분야의 통상의 기술자로 하여금 특정 사용에 적용 가능한 다양한 수정들을 갖는 다양한 실시예들을 설계하기 위해 본 발명을 이해하도록 하기 위해 선택되고 설명된다.

Claims (65)

1. 전자 기기에 적용되는 얼굴인식 잠금해제 방법으로서,
   이미지에 대해 얼굴 검출을 수행하는 단계;
   얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하는 단계;
   저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계 - 적어도 상기 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함함 - ;
   뉴럴 네트워크를 이용하여 상기 이미지에 대해 이미지 특징 추출을 수행하여, 추출된 이미지 특징이 위조 단서 정보를 포함하는지 여부를 검출하는 단계 - 상기 위조 단서 정보는 복수 개의 차원의 위조 단서 정보를 포함함 - ;
   상기 위조 단서 정보의 검출 결과에 기반하여, 상기 이미지가 생체 검출을 통과하는지 여부를 결정하는 단계; 및
   상기 추출된 얼굴 특징이 인증을 통과하고, 상기 이미지가 생체 검출을 통과한 것에 응답하여, 잠금해제 동작을 수행하는 단계를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
2. 제1항에 있어서,
   상기 이미지에 대해 얼굴 검출을 수행하기 전에, 이미지에 대해 광선 등화 조정 처리를 수행하는 단계를 더 포함하고;
   상기 이미지에 대해 얼굴 검출을 수행하는 단계는, 광선 등화 조정 처리된 이미지에 대해 얼굴 검출을 수행하는 단계를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
3. 제2항에 있어서,
   상기 이미지에 대해 광선 등화 조정 처리를 수행하는 단계는,
   상기 이미지를 기설정된 조명 조건을 만족시키는 이미지로 변환하기 위해, 상기 이미지에 대해 적어도 이미지 조명 변환을 수행하는 단계를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
4. 제2항에 있어서,
   상기 이미지에 대해 광선 등화 조정 처리를 수행하기 전에,
   상기 이미지의 품질이 소정의 얼굴 검출 조건을 만족하지 않는 것으로 결정하는 단계를 더 포함하며,
   상기 소정의 얼굴 검출 조건은, 상기 이미지의 픽셀값 분포가 기설정된 분포 범위에 부합되지 않는 것, 상기 이미지의 속성값이 기설정된 값 범위 내에 있지 않는 것 중 어느 하나 또는 복수 개를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
5. 제1항 내지 제4항 중 어느 한 항에 있어서,
   상기 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하는 단계는,
   상기 추출된 얼굴 특징과 적어도 하나의 저장된 얼굴 특징 사이의 유사도를 획득하는 단계; 및
   상기 추출된 얼굴 특징과 임의의 저장된 얼굴 특징 사이의 유사도가 설정된 임계값보다 큰 것에 응답하여, 상기 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하는 단계를 포함하며,
   또는
   상기 추출된 얼굴 특징과 복수 개의 저장된 얼굴 특징 사이의 유사도를 각각 획득하는 단계; 및
   상기 추출된 얼굴 특징과 복수 개의 저장된 얼굴 특징 사이의 유사도 중의 최대값이 설정된 임계값보다 큰 것에 응답하여, 상기 추출된 얼굴 특징이 인증을 통과하는 것으로 결정하는 단계를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
6. 삭제
7. 삭제
8. 제1항에 있어서,
   상기 뉴럴 네트워크를 이용하여 상기 이미지로부터 추출된 이미지 특징은, 로컬 이진 패턴(LBP) 특징, 스파스 코드 히스토그램(HSC) 특징, 파노라마(LARGE) 특징, 얼굴맵(SMALL) 특징, 얼굴 세부맵(TINY) 특징 중 어느 하나 또는 복수 개를 포함하며,
   상기 적어도 하나의 위조 단서 정보는, 2D 타입 위조 단서 정보, 2.5D 타입 위조 단서 정보 및 3D 타입 위조 단서 정보 중 어느 하나 또는 복수 개를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
9. 제1항 내지 제4항 중 어느 한 항에 있어서,
   상기 저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하기 전에,
   얼굴인식 잠금해제 정보 등록 프로세스를 통해, 상기 동일한 ID에 대응하는 저장된 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 획득하는 단계를 더 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
10. 제9항에 있어서,
    상기 얼굴인식 잠금해제 정보 등록 프로세스는,
    동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하는 단계;
    획득된 이미지에 대해 얼굴 검출을 수행하는 단계;
    각 각도의 검출된 얼굴의 이미지에 대해 얼굴 특징 추출을 수행하는 단계; 및
    각 각도의 얼굴 이미지의 추출된 얼굴 특징, 및 상기 각 각도의 얼굴 이미지의 얼굴 특징과 상기 동일한 ID 사이의 대응관계를 저장하는 단계를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
11. 제10항에 있어서,
    상기 획득된 이미지에 대해 얼굴 검출을 수행하기 전에, 획득된 이미지에 대해 광선 등화 조정 처리를 수행하는 단계를 더 포함하고;
    상기 획득된 이미지에 대해 얼굴 검출을 수행하는 단계는, 광선 등화 조정 처리된 이미지에 대해 얼굴 검출을 수행하는 단계를 포함하며;
    상기 획득된 이미지에 대해 광선 등화 조정 처리를 수행하기 전에, 상기 이미지의 품질이 소정의 얼굴 검출 조건을 만족하지 않는 것으로 결정하는 단계를 더 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
12. 제10항에 있어서,
    각 각도의 얼굴 이미지의 추출된 얼굴 특징을 저장하기 전에,
    상기 이미지에 포함된 얼굴의 각도를 검출하는 단계; 및
    검출된 각도가 프롬프트 정보에 대응하는 각도와 일치한 것으로 결정하는 단계를 더 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
13. 제12항에 있어서,
    상기 이미지에 포함된 얼굴의 각도를 검출하는 단계는,
    상기 이미지에 대해 얼굴 키포인트 검출을 수행하는 단계; 및
    검출된 얼굴 키포인트에 따라 상기 이미지에 포함된 얼굴의 각도를 계산하는 단계를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
14. 제10항에 있어서,
    상기 이미지에 대해 생체 검출을 수행하는 단계; 및
    상기 이미지가 생체 검출을 통과한 것에 응답하여, 상기 각 각도의 얼굴 이미지의 추출된 얼굴 특징, 및 상기 각 각도의 얼굴 이미지의 얼굴 특징과 상기 동일한 ID 사이의 대응관계를 저장하는 동작을 실행하는 단계를 더 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
15. 제10항에 있어서,
    상기 각 각도의 얼굴 이미지의 추출된 얼굴 특징을 저장한 후,
    상기 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 저장 완료하였는지를 인식하는 단계; 및
    상기 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 저장 완료하지 않은 것에 응답하여, 상기 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지를 획득할 것으로 나타내는 프롬프트 정보를 출력하는 동작을 실행하는 단계를 더 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
16. 제15항에 있어서,
    상기 동일한 ID의 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 저장 완료하는 것에 응답하여, 사용자가 상기 동일한 ID를 입력하도록 프롬프트하기 위한 프롬프트 정보를 출력하는 단계를 더 포함하며;
    상기 각 각도의 얼굴 이미지의 추출된 얼굴 특징, 및 상기 각 각도의 얼굴 이미지의 얼굴 특징과 상기 동일한 ID 사이의 대응관계를 저장하는 단계는, 상기 적어도 2 개의 각도의 얼굴 이미지의 추출된 얼굴 특징과 사용자에 의해 입력된 상기 동일한 ID를 저장하고, 상기 동일한 ID 및 상기 적어도 2 개의 각도의 얼굴 이미지의 얼굴 특징 사이의 대응관계를 확립하는 단계를 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 방법.
17. 얼굴인식 잠금해제 장치로서,
    이미지에 대해 얼굴 검출을 수행하기 위한 얼굴 검출 모듈;
    얼굴이 검출된 이미지에 대해 얼굴 특징 추출을 수행하기 위한 특징 추출 모듈;
    저장된 얼굴 특징에 기반하여 추출된 얼굴 특징에 대해 인증을 수행하기 위한 인증 모듈 - 적어도 상기 저장된 얼굴 특징은 동일한 식별자(ID)에 대응하는 적어도 2 개의 상이한 각도의 얼굴 이미지의 얼굴 특징을 포함함 - ;
    뉴럴 네트워크를 이용하여 상기 이미지에 대해 이미지 특징 추출을 수행하여, 추출된 이미지 특징이 위조 단서 정보를 포함하는지 여부를 검출하고, 상기 위조 단서 정보의 검출 결과에 기반하여, 상기 이미지가 생체 검출을 통과하는지 여부를 결정하기 위한 생체 검출 모듈 - 상기 위조 단서 정보는 복수 개의 차원의 위조 단서 정보를 포함함 - ; 및
    상기 추출된 얼굴 특징이 인증을 통과하고, 상기 이미지가 생체 검출을 통과한 것에 응답하여, 잠금해제 동작을 수행하기 위한 제어 모듈을 포함하는 것을 특징으로 하는 얼굴인식 잠금해제 장치.
18. 전자 기기로서,
    실행 가능한 명령어를 저장하는 메모리; 및
    실행 가능 명령어를 실행함으로써 제1항 내지 제4항 중 어느 한 항에 따른 방법에서의 각 단계의 동작을 완료하기 위해 메모리와 통신하는 하나 또는 복수 개의 프로세서를 포함하는 것을 특징으로 하는 전자 기기.
19. 컴퓨터 판독 가능 명령어를 저장한 컴퓨터 판독 가능 매체로서,
    상기 명령어가 실행될 때 제1항 내지 제4항 중 어느 한 항에 따른 방법에서의 각 단계의 동작을 구현하는 것을 특징으로 하는 컴퓨터 판독 가능 매체.
20. 삭제
21. 삭제
22. 삭제
23. 삭제
24. 삭제
25. 삭제
26. 삭제
27. 삭제
28. 삭제
29. 삭제
30. 삭제
31. 삭제
32. 삭제
33. 삭제
34. 삭제
35. 삭제
36. 삭제
37. 삭제
38. 삭제
39. 삭제
40. 삭제
41. 삭제
42. 삭제
43. 삭제
44. 삭제
45. 삭제
46. 삭제
47. 삭제
48. 삭제
49. 삭제
50. 삭제
51. 삭제
52. 삭제
53. 삭제
54. 삭제
55. 삭제
56. 삭제
57. 삭제
58. 삭제
59. 삭제
60. 삭제
61. 삭제
62. 삭제
63. 삭제
64. 삭제
65. 삭제

Images