CN109040420B - 终端设备解锁方法、装置、电子设备及存储介质 - Google Patents

终端设备解锁方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN109040420B
CN109040420B CN201810621315.6A CN201810621315A CN109040420B CN 109040420 B CN109040420 B CN 109040420B CN 201810621315 A CN201810621315 A CN 201810621315A CN 109040420 B CN109040420 B CN 109040420B
Authority
CN
China
Prior art keywords
face
unlocking
image sensor
image
preview data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810621315.6A
Other languages
English (en)
Other versions
CN109040420A (zh
Inventor
聂和平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Mobile Communications Technology Co Ltd
Original Assignee
Hisense Mobile Communications Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Mobile Communications Technology Co Ltd filed Critical Hisense Mobile Communications Technology Co Ltd
Priority to CN201810621315.6A priority Critical patent/CN109040420B/zh
Publication of CN109040420A publication Critical patent/CN109040420A/zh
Application granted granted Critical
Publication of CN109040420B publication Critical patent/CN109040420B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72463—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions to restrict the functionality of the device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/757—Matching configurations of points or features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Environmental & Geological Engineering (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Artificial Intelligence (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephone Function (AREA)
  • Studio Devices (AREA)

Abstract

本申请提供一种终端设备解锁方法、装置、电子设备及存储介质，该方法包括：获取用户触发的解锁指令，该解锁指令用于启动终端设备的相机，在该相机启动时，对相机中图像传感器获取的所有帧图像进行图像信号处理，输出所有帧图像对应的图像传感器预览数据，基于上述图像传感器预览数据以及人脸解锁算法进行人脸解锁。该技术方案缩短了人脸解锁时长，提升了人脸解锁的性能。

Description

终端设备解锁方法、装置、电子设备及存储介质
技术领域
本申请涉及通信技术领域，尤其涉及一种终端设备解锁方法、装置、电子设备及存储介质。
背景技术
人脸识别解锁(face-to-unlock)是人脸识别技术之一，是指通过识别人脸特征来判定是否允许用户登录终端设备的技术。该技术能够有效辨识人脸图像的真实性，提高了终端设备解锁的安全性。
现有技术中，人脸识别解锁方法的基本原理是：通过摄像头获取人脸图像，并获取该摄像头对应的相机预览数据，检测该相机预览数据中人脸图像数据对应的特征信息与终端设备中预先存储的脸部特征信息是否一致，若两者一致，便解锁、登录终端设备。
然而，现有的人脸识别解锁方法是通过对相机预览数据中人脸图像数据对应的特征信息进行检测并识别来解锁终端设备。由于相机预览数据需要很好的还原取景场景，因而摄像头获取到的人脸图像需要经过特殊处理以得到相机预览数据，其耗费了一定的时间，导致了人脸解锁耗时长。
发明内容
本申请提供一种终端设备解锁方法、装置、电子设备及存储介质，以解决现有人脸识别解锁方法人脸解锁耗时长的问题。
本申请第一方面提供的一种终端设备解锁方法，应用于终端设备，所述方法包括：
获取用户触发的解锁指令，所述解锁指令用于启动终端设备的相机；
在所述相机启动时，对所述相机中图像传感器获取的所有帧图像进行图像信号处理，输出所述所有帧图像对应的图像传感器预览数据；
基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁。
可选的，在本申请第一方面的一实施例中，在所述基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁之前，所述方法还包括：
确定所述图像传感器预览数据包括人脸图像数据；
提高所述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加所述图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度，所述人脸区域为所述图像中所述人脸图像数据对应的区域，所述非人脸区域为所述图像中除所述人脸区域之外的区域。
可选的，在本申请第一方面的另一实施例中，在所述获取用户触发的解锁指令之后，所述方法还包括：
确定所述终端设备处于锁屏状态。
可选的，在本申请第一方面的再一实施例中，所述基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁，包括：
判断所述图像传感器预览数据中是否包括人脸图像数据；
在所述图像传感器预览数据包括人脸图像数据时，获取所述人脸图像数据对应的捕获人脸特征值；
判断所述捕获人脸特征值与所述终端设备中的预设人脸特征值是否匹配；
在所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配成功时，解锁所述终端设备；
在所述图像传感器预览数据不包括人脸图像数据，或者，所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配不成功时，保持所述终端设备处于锁屏状态。
本申请第二方面提供一种终端设备解锁装置，集成于终端设备，所述装置包括：获取模块、处理模块和解锁模块；
所述获取模块，用于获取用户触发的解锁指令，所述解锁指令用于启动终端设备的相机；
所述处理模块，用于在所述相机启动时，对所述相机中图像传感器获取的所有帧图像进行图像信号处理，输出所述所有帧图像对应的图像传感器预览数据；
所述解锁模块，用于基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁。
可选的，在本申请第二方面的一实施例中，所述处理模块，还用于在所述解锁模块基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁之前，确定所述图像传感器预览数据包括人脸图像数据，并提高所述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加所述图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度，所述人脸区域为所述图像中所述人脸图像数据对应的区域，所述非人脸区域为所述图像中除所述人脸区域之外的区域。
可选的，在本申请第二方面的另一实施例中，所述处理模块，还用于在所述获取模块获取用户触发的解锁指令之后，确定所述终端设备处于锁屏状态。
可选的，在本申请第二方面的再一实施例中，所述解锁模块，具体用于判断所述图像传感器预览数据中是否包括人脸图像数据，在所述图像传感器预览数据包括人脸图像数据时，获取所述人脸图像数据对应的捕获人脸特征值，判断所述捕获人脸特征值与所述终端设备中的预设人脸特征值是否匹配，在所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配成功时，解锁所述终端设备，以及在所述图像传感器预览数据不包括人脸图像数据，或者，所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配不成功时，保持所述终端设备处于锁屏状态。
本申请第三方面提供一种电子设备，包括处理器、存储器及存储在所述存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述第一方面所述的方法。
本申请第四方面提供一种存储介质，所述存储介质中存储有指令，当其在计算机上运行时，使得计算机执行如第一方面所述的方法。。
本申请实施例提供的终端设备解锁方法、装置、电子设备及存储介质，通过获取用户触发的解锁指令，该解锁指令用于启动终端设备的相机，在该相机启动时，对相机中图像传感器获取的所有帧图像进行图像信号处理，输出所有帧图像对应的图像传感器预览数据，最后基于上述图像传感器预览数据以及人脸解锁算法进行人脸解锁。该技术方案在图像信号处理器对所有帧图像进行图像信号处理时，不包括去帧处理，缩短了图像传感器预览数据输入到人脸解锁算法的时间，相应的，缩短了人脸解锁时长，提升了人脸解锁的性能。
附图说明
图1为本申请实施例提供的终端设备的结构示意图；
图2为本申请实施例提供的终端设备解锁方法实施例一的流程示意图；
图3为本申请实施例提供的终端设备解锁方法实施例二的流程示意图；
图4为本申请实施例提供的终端设备解锁方法实施例三的流程示意图；
图5为本申请实施例提供的终端设备解锁装置实施例的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请实施例提供的终端设备解锁方法应用于终端设备中，图1为本申请实施例提供的终端设备的结构示意图。如图1所示，该终端设备包括：外壳11、设置在外壳11正面的触摸屏12、设置在触摸屏12上方的摄像头13和传感器14、设置在触摸屏12下方的home键10、以及设置在外壳11侧面的音量控制键15和电源键16。
值得说明的是，图1所示的终端设备只是一种示例，其包括部件和部件的位置可以根据实际情况进行确定，本申请实施例并不对其进行限定。
可选的，音量控制键15可以集调大或调小音量功能为一体，也可以设计成两个独立的按键，包括音量上键和音量下键，该音量上键用于增大终端设备的音量，该音量下键用于减小终端设备的音量。可选的，本申请实施例并不对音量控制键的具体结构进行限定。
可选的，本申请实施例的终端设备中还可以设置图像传感器和图像信号处理器，该图像传感器与上述摄像头13连接，用于将该摄像头获取到的图像(光信号)转换为图像数据(电信号)，该图像信号处理器与该图像传感器连接，用于对图像传感器输出的图像数据进行处理，具体的，将图像传感器输出的图像数据转换为显示支持的格式。
本申请实施例的终端设备中还可以包括处理器、存储器等其他实体模块，本实施例不限于此。
可选的，本申请实施例的终端设备可以以多种形式存在，例如，移动通信设备、超移动个人计算机设备、便携式娱乐设备、或其他具有数据交互功能的电子装置等。可选的，移动通信设备可以包括：智能手机、多媒体手机、功能性手机或低端手机等，超移动个人计算机设备可以包括掌上电脑(personal digital assistant，PDA)等，便携式娱乐设备可以包括：音频、视频播放器、掌上游戏机、电子书、智能玩具和便携式车载导航设备等。本申请实施例并不对终端设备的表现形式进行限定。
本申请实施例中，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
鉴于现有技术中人脸识别解锁方法由于摄像头获取到的人脸图像经过特殊处理变成相机预览数据耗费了一定的时间，致使人脸解锁耗时长的问题，本申请实施例提供一种终端设备解锁方法、装置、电子设备及存储介质，可以缩短人脸解锁时长，提升了人脸解锁的性能。下面，通过具体实施例对本申请的技术方案进行详细说明。
需要说明的是，下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。
图2为本申请实施例提供的终端设备解锁方法实施例一的流程示意图。该终端设备解锁方法应用于终端设备。如图2所示，该终端设备解锁方法可以包括如下步骤：
步骤21：获取用户触发的解锁指令。
其中，该解锁指令用于启动终端设备的相机。
可选的，在本申请的实施例中，当用户需要使用锁屏的终端设备时，首先需要触发终端设备执行人脸解锁流程。可选的，用户可以通过按压电源键或者home键唤醒终端设备，使终端设备处于亮屏状态，进而在终端设备处于亮屏状态时，用户再按压home键，以触发人脸解锁流程。
可选的，在用户按压home键时，终端设备的控制器产生解锁指令，相应的，人脸解锁装置或模块可以获取该解锁指令，进而启动该终端设备的相机。可选的，用户操作终端设备时，通常使终端设备的正面触摸屏正对用户，因而，为了确保终端设备的相机可以拍摄到包括该用户的人脸图像，在本实施例中，该解锁指令启动的相机可以采用前置摄像头拍摄图像。
步骤22：在相机启动时，对该相机中图像传感器获取的所有帧图像进行图像信号处理，输出所有帧图像对应的图像传感器预览数据。
可选的，在本申请实施例中，终端设备的相机启动时，首先通过终端设备的前置摄像头拍摄图像，其次将相机中图像传感器获取到的所有帧图像送入终端设备中的图像信号处理器进行处理，进而得到所有帧图像对应的图像传感器预览数据。
可选的，当用户需要利用终端设备的相机拍照时，此时，相机启动后图像传感器获取到的图像也会输入到图像信号处理器进行处理。但是，鉴于相机刚启动时，图像传感器获取到的前几帧图像可能不稳定，为了防止相机预览图像异常，即输出到触摸屏上的图像不清晰，影响到用户体验，在相机模式下，图像传感器获取到的所有帧图像在经过图像信号处理器处理时，通常会去除所述所有帧图像中的前三帧图像，进而得到去三帧后的图像对应的图像传感器预览数据。
在本实施例中，当终端设备处于人脸解锁模式时，由于用户并不关注，也看不到相机预览图像，因而，若仍执行相机模式下的所有帧图像去三帧处理流程，则会延迟去三帧后的图像对应的图像传感器预览数据输入到人脸解锁算法的时间，进而导致人脸解锁流程耗时长。所以，在本实施例中，终端设备对相机中图像传感器获取的所有帧图像进行图像信号处理时，并不执行去三帧处理，因而，输出的是所有帧图像对应的图像传感器预览数据，相应的提升了解锁性能。
步骤23：基于上述图像传感器预览数据以及人脸解锁算法进行人脸解锁。
可选的，在本实施例中，终端设备的人脸解锁模块中存储有人脸解锁算法，因而，当该人脸解锁模块接收到图像传感器输出的所有帧图像对应的图像传感器预览数据时，便可以根据所有帧图像对应的图像传感器预览数据以及人脸解锁算法进行人脸解锁。关于人脸解锁的具体步骤可参见下述图4实施例的记载，此处不再赘述。
本申请实施例提供的终端设备解锁方法，通过获取用户触发的解锁指令，该解锁指令用于启动终端设备的相机，在该相机启动时，对相机中图像传感器获取的所有帧图像进行图像信号处理，输出所有帧图像对应的图像传感器预览数据，最后基于上述图像传感器预览数据以及人脸解锁算法进行人脸解锁。该技术方案在图像信号处理器对所有帧图像进行图像信号处理时，不包括去帧处理，缩短了图像传感器预览数据输入到人脸解锁算法的时间，相应的，缩短了人脸解锁时长，提升了人脸解锁的性能。
可选的，在上述实施例的基础上，图3为本申请实施例提供的终端设备解锁方法实施例二的流程示意图。如图3所示，本实施例提供的终端设备解锁方法，在上述步骤23(基于上述图像传感器预览数据以及人脸解锁算法进行人脸解锁)之前，还可以包括如下步骤：
步骤31：确定上述图像传感器预览数据包括人脸图像数据。
可选的，在本申请的实施例中，当基于图像传感器预览数据以及人脸解锁算法进行人脸解锁之前，可以首先根据人脸图像的特点，判断上述所有帧图像对应的图像传感器预览数据中是否包括人脸图像数据。可选的，在确定出上述图像传感器预览数据包括人脸图像数据时，则可以对该图像传感器预览数据进行进一步处理，以提高人脸检测效率。
步骤32：提高上述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加该图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度。
其中，人脸区域为该图像中人脸图像数据对应的区域，非人脸区域为该图像中除所述人脸区域之外的区域。
可选的，在某些场景下(例如，暗光场景)，终端设备的摄像头拍摄到的图像有时比较昏暗，此时，即使该图像中有人脸，但暗光下，图像传感器预览数据输出图像受光线影响，表现为噪点变大，同时人脸区域表征不明显，解锁算法很难定位并匹配人脸特征信息，使得人脸解锁失败的概率较大，而且人脸解锁流程在每次检测失败后都会重启发起下一次检测，导致终端设备解锁耗时较长。
本申请实施例中，为了提高终端设备的解锁性能，降低由于图像不清晰或对比度低造成的解锁失败情况，当确认上述图像传感器预览数据包括人脸图像数据时，可以通过对图像传感器预览数据进行进一步处理，提高上述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加该图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度。
可选的，可以从提升相机预览效果的角度出发，针对人脸解锁算法，调试出一套暗光场景下匹配人脸识别算法的效果，即解锁专用效果文件。
作为一种示例，可以将该解锁专用效果文件设置在终端设备中，在人脸解锁模式下，终端设备在获取到所有帧图像对应的图像传感器预览数据后，可以自动启用该解锁专用效果文件，并将经过解锁专用效果文件处理后的图像传感器预览数据输出到人脸解锁算法。
由于该解锁专用效果文件可以提高上述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加该图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度，使得在人脸解锁时，优化了暗光下人脸特征的标识，保证送到人脸解锁算法的图像传感器预览数据可以尽快的被识别成功，提升人脸解锁算法的效率
值得说明的是，在实际应用中，对于相机应用，用户看到的相机预览越能还原当前的取景越好，即最理想的状态即是用户通过肉眼直观看到的和相机预览看到的基本一致。为了保证这个效果，终端设备中可以设置并维护多套相机效果文件，在不同的场景下可以自动调用对应的相机效果文件，保证对应场景下的预览还原效果。
然而，对于人脸解锁模式来讲，并不是相机预览和用户肉眼看到的越接近越能提升解锁效率，而是输送到人脸解锁算法的图像传感器数据越能突出人脸特征，越容易解锁，尤其是在光线略暗的环境。因而，针对暗光场景，当终端设备处于人脸解锁模式时，可以提高人脸区域的亮度，增加人脸区域和其他区域的对比度，从而突出人脸特征点，这样人脸解锁算法更容易读取人脸特征值，提升了人脸识别解锁的成功率。
本申请实施例提供的终端设备解锁方法，在基于图像传感器预览数据以及人脸解锁算法进行人脸解锁之前，确定出图像传感器预览数据包括人脸图像数据时，再提高该图像传感器预览数据对应的图像中人脸区域的亮度，以及增加图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度。该方案提升了人脸识别解锁的成功率。
进一步的，在上述实施例的基础上，本实施例提供的终端设备解锁方法，在上述步骤21(获取用户触发的解锁指令)之后，还可以包括如下步骤：
确定终端设备处于锁屏状态。
可选的，在本申请实施例中，在终端设备获取到用户触发的解锁指令之后，可以检测终端设备是否处于锁屏状态，若是，则执行人脸解锁流程，若否，则忽略。或者，根据用户触发解锁指令操作的按键执行对应按键的操作。
举例来说，在终端设备处于亮屏状态时，通过用户再按压home键，来触发人脸解锁流程，但是当终端设备的屏幕没有上锁时，用户按压home键时，则执行返回到主屏幕的操作。
通过确定终端设备处于锁屏状态，可以保证终端设备可以按照人脸解锁流程执行人脸解锁。
可选的，在本申请的一实施例中，图4为本申请实施例提供的终端设备解锁方法实施例三的流程示意图。如图4所示，在本实施例中，上述步骤23(基于图像传感器预览数据以及人脸解锁算法进行人脸解锁)可以通过如下步骤实现：
步骤41：判断图像传感器预览数据中是否包括人脸图像数据；若是，执行步骤42，若否，执行步骤45。
可选的，在本申请实施例中，可以首先判断图像传感器预览数据中是否包括人脸图像数据。对于如何判断是否包括人脸图像数据的依据和方式参见上述图3所示实施例中步骤31的记载，此处不再赘述。
步骤42：获取该人脸图像数据对应的捕获人脸特征值。
可选的，当图像传感器预览数据中包括人脸图像数据时，终端设备可以根据该人脸图像数据确定出对应人脸区域中脸的位置、大小和各个主要面部器官的位置等信息，再依据这些信息，进一步获取该人脸图像数据对应的捕获人脸特征值。
步骤43：判定上述捕获人脸特征值与终端设备中的预设人脸特征值是否匹配；若是，执行步骤44，若否，执行步骤45。
当获取到人脸图像数据对应的捕获人脸特征值时，将该捕获人脸特征值与终端设备中的预设人脸特征值进行匹配，进而根据匹配结果，对终端设备执行相应的步骤。
步骤44：解锁终端设备。
作为一种示例，在捕获人脸特征值与终端设备中的预设人脸特征值匹配成功时，此时，表明该终端设备可能归该用户所有，或者该终端设备中存储有触发解锁流程的用户的人脸图像或人脸特征值，因而，可以解锁该终端设备，使该终端设备从锁屏状态变为未锁状态。
步骤45：保持终端设备处于锁屏状态。
作为另一种示例，在图像传感器预览数据不包括人脸图像数据，或者，捕获人脸特征值与终端设备中的预设人脸特征值匹配不成功时，终端设备均无法实现自动解锁，此时，终端设备仍需要保持锁屏状态，以保护终端设备所属用户的隐私安全。
本申请实施例提供的终端设备解锁方法，通过判断图像传感器预览数据中是否包括人脸图像数据，并在图像传感器预览数据包括人脸图像数据时，获取人脸图像数据对应的捕获人脸特征值，并将捕获人脸特征值与终端设备中的预设人脸特征值进行匹配，在捕获人脸特征值与终端设备中的预设人脸特征值匹配成功时，解锁终端设备，在图像传感器预览数据不包括人脸图像数据，或者，捕获人脸特征值与终端设备中的预设人脸特征值匹配不成功时，保持终端设备处于锁屏状态。该技术方案可以既可以保护用户的隐私安全，又可以在匹配时快速的解锁，提高了用户体验。
下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。
图5为本申请实施例提供的终端设备解锁装置实施例的结构示意图。该终端设备解锁装置可以集成于终端设备中，如图5所示，该装置可以包括：获取模块51、处理模块52和解锁模块53。
其中，所述获取模块51，用于获取用户触发的解锁指令，所述解锁指令用于启动终端设备的相机；
所述处理模块52，用于在所述相机启动时，对所述相机中图像传感器获取的所有帧图像进行图像信号处理，输出所述所有帧图像对应的图像传感器预览数据；
所述解锁模块53，用于基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁。
可选的，在本申请的一实施例中，所述处理模块52，还用于在所述解锁模块53基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁之前，确定所述图像传感器预览数据包括人脸图像数据，并提高所述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加所述图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度。
其中，所述人脸区域为所述图像中所述人脸图像数据对应的区域，所述非人脸区域为所述图像中除所述人脸区域之外的区域。
可选的，在本申请的另一实施例中，所述处理模块52，还用于在所述获取模块51获取用户触发的解锁指令之后，确定所述终端设备处于锁屏状态。
可选的，在本申请的再一实施例中，所述解锁模块53，具体用于判断所述图像传感器预览数据中是否包括人脸图像数据，在所述图像传感器预览数据包括人脸图像数据时，获取所述人脸图像数据对应的捕获人脸特征值，判断所述捕获人脸特征值与所述终端设备中的预设人脸特征值是否匹配，在所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配成功时，解锁所述终端设备，以及在所述图像传感器预览数据不包括人脸图像数据，或者，所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配不成功时，保持所述终端设备处于锁屏状态。
本实施例的终端设备解锁装置可用于执行图2至图4所示方法实施例的实现方案，具体实现方式和技术效果类似，这里不再赘述。
本申请实施例还提供一种电子设备，包括处理器、存储器及存储在所述存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述图2至图4所示方法实施例所示的终端设备解锁方法中的各个步骤。
本申请还提供一种存储介质，所述存储介质中存储有指令，当其在计算机上运行时，使得计算机执行如图2至图4所示方法实施例的方法。
本申请还提供一种程序产品，该程序产品包括计算机程序，该计算机程序存储在存储介质中。终端设备解锁装置的至少一个处理器可以从存储介质读取该计算机程序，至少一个处理器执行该计算机程序使得终端设备解锁装置执行图2至图4所示方法实施例的方法。
本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (10)

1.一种终端设备解锁方法，其特征在于，包括：
获取用户触发的解锁指令，所述解锁指令用于启动终端设备的相机；
在所述相机启动时，对所述相机中图像传感器获取的所有帧图像进行图像信号处理，输出所述所有帧图像对应的图像传感器预览数据，所述图像信号处理不包括去帧处理；
基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁。
2.根据权利要求1所述的方法，其特征在于，在所述基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁之前，还包括：
确定所述图像传感器预览数据包括人脸图像数据；
提高所述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加所述图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度，所述人脸区域为所述图像中所述人脸图像数据对应的区域，所述非人脸区域为所述图像中除所述人脸区域之外的区域。
3.根据权利要求1所述的方法，其特征在于，在所述获取用户触发的解锁指令之后，还包括：
确定所述终端设备处于锁屏状态。
4.根据权利要求1-3任一项所述的方法，其特征在于，所述基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁，包括：
判断所述图像传感器预览数据中是否包括人脸图像数据；
在所述图像传感器预览数据包括人脸图像数据时，获取所述人脸图像数据对应的捕获人脸特征值；
判断所述捕获人脸特征值与所述终端设备中的预设人脸特征值是否匹配；
在所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配成功时，解锁所述终端设备；
在所述图像传感器预览数据不包括人脸图像数据，或者，所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配不成功时，保持所述终端设备处于锁屏状态。
5.一种终端设备解锁装置，其特征在于，包括：获取模块、处理模块和解锁模块；
所述获取模块，用于获取用户触发的解锁指令，所述解锁指令用于启动终端设备的相机；
所述处理模块，用于在所述相机启动时，对所述相机中图像传感器获取的所有帧图像进行图像信号处理，输出所述所有帧图像对应的图像传感器预览数据，所述图像信号处理不包括去帧处理；
所述解锁模块，用于基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁。
6.根据权利要求5所述的装置，其特征在于，
所述处理模块，还用于在所述解锁模块基于所述图像传感器预览数据以及人脸解锁算法进行人脸解锁之前，确定所述图像传感器预览数据包括人脸图像数据，并提高所述图像传感器预览数据对应的图像中人脸区域的亮度，以及增加所述图像传感器预览数据对应的图像中人脸区域和非人脸区域的对比度，所述人脸区域为所述图像中所述人脸图像数据对应的区域，所述非人脸区域为所述图像中除所述人脸区域之外的区域。
7.根据权利要求5所述的装置，其特征在于，
所述处理模块，还用于在所述获取模块获取用户触发的解锁指令之后，确定所述终端设备处于锁屏状态。
8.根据权利要求5-7任一项所述的装置，其特征在于，
所述解锁模块，具体用于判断所述图像传感器预览数据中是否包括人脸图像数据，在所述图像传感器预览数据包括人脸图像数据时，获取所述人脸图像数据对应的捕获人脸特征值，判断所述捕获人脸特征值与所述终端设备中的预设人脸特征值是否匹配，在所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配成功时，解锁所述终端设备，以及在所述图像传感器预览数据不包括人脸图像数据，或者，所述捕获人脸特征值与所述终端设备中的预设人脸特征值匹配不成功时，保持所述终端设备处于锁屏状态。
9.一种电子设备，包括处理器、存储器及存储在所述存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如上述权利要求1-4任一项所述的方法。
10.一种存储介质，其特征在于，所述存储介质中存储有指令，当其在计算机上运行时，使得计算机执行如权利要求1-4任一项所述的方法。
CN201810621315.6A 2018-06-15 2018-06-15 终端设备解锁方法、装置、电子设备及存储介质 Active CN109040420B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810621315.6A CN109040420B (zh) 2018-06-15 2018-06-15 终端设备解锁方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810621315.6A CN109040420B (zh) 2018-06-15 2018-06-15 终端设备解锁方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN109040420A CN109040420A (zh) 2018-12-18
CN109040420B true CN109040420B (zh) 2020-11-24

Family

ID=64609490

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810621315.6A Active CN109040420B (zh) 2018-06-15 2018-06-15 终端设备解锁方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN109040420B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110020522B (zh) * 2019-04-02 2020-09-29 Oppo广东移动通信有限公司 数据处理方法及相关产品

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8994499B2 (en) * 2011-03-16 2015-03-31 Apple Inc. Locking and unlocking a mobile device using facial recognition
CN105872352A (zh) * 2015-12-08 2016-08-17 乐视移动智能信息技术（北京）有限公司 一种拍摄照片的方法及装置
CN105868690A (zh) * 2016-03-11 2016-08-17 博康智能信息技术有限公司 识别驾驶员打手机行为的方法和装置
CN106941506A (zh) * 2017-05-17 2017-07-11 北京京东尚科信息技术有限公司 基于生物特征的数据处理方法和装置
CN107480601B (zh) * 2017-07-20 2019-12-13 Oppo广东移动通信有限公司 检测方法及相关产品
CN107545251A (zh) * 2017-08-31 2018-01-05 北京图铭视界科技有限公司 人脸质量判别及图片增强的方法及装置
CN107563338B (zh) * 2017-09-12 2021-01-08 Oppo广东移动通信有限公司 人脸检测方法及相关产品
CN107657164A (zh) * 2017-09-26 2018-02-02 广东欧珀移动通信有限公司 解锁方法及相关产品

Also Published As

Publication number Publication date
CN109040420A (zh) 2018-12-18

Similar Documents

Publication Publication Date Title
CN110955912B (zh) 基于图像识别的隐私保护方法、装置、设备及其存储介质
CN108197586B (zh) 脸部识别方法和装置
EP1914961B1 (en) Mobile information terminal apparatus
EP1916588B1 (en) Mobile information terminal device
CN107832595B (zh) 一种锁定方法及相关设备
US9930525B2 (en) Method and system for eyeprint recognition unlocking based on environment-filtering frames
US20110151934A1 (en) Automatic Keypad Unlocking Method and Apparatus for Mobile Terminal
KR20210065178A (ko) 생체 검출 방법 및 장치, 전자 기기 및 저장 매체
CN108197450B (zh) 人脸识别方法、人脸识别装置、存储介质及电子设备
US20070286524A1 (en) Camera Module and Mobile Terminal Having the Same
WO2022099989A1 (zh) 活体识别、门禁设备控制方法和装置、电子设备和存储介质、计算机程序
CN108509944B (zh) 指纹识别方法及装置
WO2022134388A1 (zh) 乘车逃票检测方法及装置、电子设备、存储介质、计算机程序产品
JP4646731B2 (ja) 携帯情報端末装置
CN103873834A (zh) 图像采集方法及相应图像采集单元
WO2019011106A1 (zh) 状态控制方法及相关产品
CN107437016A (zh) 应用控制方法及相关产品
CN109040420B (zh) 终端设备解锁方法、装置、电子设备及存储介质
CN116645258A (zh) 水印嵌入、水印提取、水印识别模型构建方法、电子设备
CN102054150B (zh) 使用安全防护功能的图像处理的设备和方法
JP5322969B2 (ja) 認証方法及び認証処理装置
CN105744165A (zh) 拍照方法、装置及终端
CN110826045A (zh) 认证方法及装置、电子设备和存储介质
CN114565962A (zh) 人脸图像处理方法及装置、电子设备和存储介质
WO2017088419A1 (zh) 图像信息的获取方法、用户设备及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 266071 Shandong city of Qingdao province Jiangxi City Road No. 11

Patentee after: Qingdao Hisense Mobile Communication Technology Co.,Ltd.

Address before: 266071 Shandong city of Qingdao province Jiangxi City Road No. 11

Patentee before: HISENSE MOBILE COMMUNICATIONS TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder