CN110084213B - 人脸图像处理方法及装置 - Google Patents

Abstract

本申请公开了一种人脸图像处理方法及装置。该方法包括：接收用户的图像处理请求；响应于所述图像处理请求，在用户界面上显示图像处理模式接口；响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面；根据所述图像处理界面接收输入的图像，得到图像处理结果；在所述图像处理界面显示所述图像处理结果。还公开了相应的装置。通过本申请提供的技术方案可实现人脸图像处理，尤其适用于门禁设备出现故障的情况下的人脸图像处理。

Description

人脸图像处理方法及装置

技术领域

本申请涉及安防技术领域，尤其涉及一种人脸图像处理方法及装置。

背景技术

随着政府、企业、个人的安全管理意识加强和智能硬件设备的普及，越来越多的人脸识别门禁设备投入到实际应用当中，然而当门禁设备异常时，将无法使用人脸识别的功能，只能由相关人员进行人工识别，识别效率低。

发明内容

本申请提供一种人脸图像处理方法及装置，以实现人脸图像处理。

第一方面，提供了一种人脸图像处理方法，所述方法包括：接收用户的图像处理请求；响应于所述图像处理请求，在用户界面上显示图像处理模式接口；响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面；根据所述图像处理界面接收输入的图像，得到图像处理结果；在所述图像处理界面显示所述图像处理结果。

在一种可能实现的方式中，所述在所述用户界面显示图像处理界面，包括：所述图像处理界面悬浮于所述用户界面之上；或，所述图像处理界面与所述用户界面层叠显示。

在该种可能实现的方式中，通过悬浮或层叠的方式可在不影响用户界面的情况下进行显示使图像处理界面。

在另一种可能实现的方式中，所述在所述用户界面显示图像处理界面之后，还包括：响应于用户对所述图像处理界面进行的预定操作，所述图像处理界面在所述用户界面上进行移动，其中，所述预定操作包括：拖拽所述图像处理界面。

在该种可能实现的方式中，可在不影响用户界面的情况下，对通过对图像处理界面进行预定操作使图像处理界面在用户界面上移动，可在通过图像处理界面进行图像处理与通过用户界面的进行操作互不影响。

在又一种可能实现的方式中，所述用户通过所述图像处理模式接口选择的处理模式为图像质量检测；所述根据所述图像处理界面接收输入的图像，得到图像处理结果，包括：接收用户通过所述图像处理界面输入的待评价图像；根据预先设定的图像质量评价指标得到所述待评价图像的质量分数。

在该种可能实现的方式中，根据图像质量评价指标实现对图像质量的评价。

在又一种可能实现的方式中，所述人脸图像处理方法还包括：将质量分数达到阈值的待评价图像作为可进行预定处理的图像，并通过所述图像处理界面显示提示，所述预定处理包括将所述待评价图像存入人脸图像库，所述提示包括所述可进行预定处理的图像的质量分数以及所述可进行预定处理的图像可用于所述预定处理。

在该种可能实现的方式中，根据图像质量分数判断图像是否可进行预定处理并向用户进行提示，可提高基于图像实现的预定处理的精确率。

在又一种可能实现的方式中，所述图像质量评价指标包括以下至少一个：图像中是否包含人脸图像、图像中包含的人脸的数量、图像中人脸区域的清晰度、图像中人脸区域的遮挡情况。

在该种可能实现的方式中，通过图像质量评价指标包括的具体内容对图像进行质量评价，可提高存入人脸图像库的图像的质量。

在又一种可能实现的方式中，所述根据所述图像处理界面接收输入的图像，得到图像处理结果，包括：根据用户拖拽至所述图像处理界面内的目标区域的图像，得到所述图像处理结果；和/或根据用户通过所述图像处理界面内的目标区域选取的图像，得到所述图像处理结果。

在该种可能实现的方式中，可通过拖拽的方式从图像处理界面输入图像，如：通过拖拽的方式将用户界面上的图像输入至图像处理界面，也可通过在图像处理界面的目标区域内选取图像，如：通过目标区域从本地选取图像作为输入的图像。

在又一种可能实现的方式中，所述图像处理界面接收输入的图像为多张，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸比对；所述图像处理结果包括以下至少一个：所述图像处理界面接收输入的图像中的人脸是否为同一个人、所述图像处理界面接收输入的图像的人脸之间的相似度。

在该种可能实现的方式中，可通过图像处理界面实现人脸比对，得到输入的多张图像中的人脸是否为同一个人以及相似度，以便用户根据人脸比对结果进行后续处理。

在又一种可能实现的方式中，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸识别；所述图像处理结果包括以下至少一个：所述图像中的人脸对应的人是否为可信任的人、所述图像的人脸与人脸图像库中的人脸图像的最高相似度。

在该种可能实现的方式中，可通过图像处理界面实现人脸识别，以便用户根据人脸识别结果确认人物的身份。

第二方面，提供了一种人脸图像处理装置，所述装置包括：接收单元，用于接收用户的图像处理请求；第一显示单元，用于响应于所述图像处理请求，在用户界面上显示图像处理模式接口；第二显示单元，用于响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面；处理单元，用于根据所述图像处理界面接收输入的图像，得到图像处理结果；第三显示单元，用于在所述图像处理界面显示所述图像处理结果。

在一种可能实现的方式中，所述第二显示单元具体用于：使所述图像处理界面悬浮于所述用户界面之上；或，使所述图像处理界面与所述用户界面层叠显示。

在另一种可能实现的方式中，所述人脸图像处理装置还包括：移动单元，用于响应于用户对所述图像处理界面进行的预定操作，所述图像处理界面在所述用户界面上进行移动，其中，所述预定操作包括：拖拽所述图像处理界面。

在又一种可能实现的方式中，所述用户通过所述图像处理模式接口选择的处理模式为图像质量检测；所述处理单元具体用于：接收用户通过所述图像处理界面输入的待评价图像；以及根据预先设定的图像质量评价指标得到所述待评价图像的质量分数。

在又一种可能实现的方式中，所述人脸图像处理装置还包括：确定单元，用于将质量分数达到阈值的待评价图像作为可进行预定处理的图像，所述第三显示单元，还用于通过所述图像处理界面显示提示，所述预定处理包括将所述待评价图像存入人脸图像库，所述提示包括所述可进行预定处理的图像的质量分数以及所述可进行预定处理的图像可用于所述预定处理。

在又一种可能实现的方式中，所述图像质量评价指标包括以下至少一个：图像中是否包含人脸图像、图像中包含的人脸的数量、图像中人脸区域的清晰度、图像中人脸区域的遮挡情况。

在又一种可能实现的方式中，所述处理单元具体还用于：根据用户拖拽至所述图像处理界面内的目标区域的图像，得到所述图像处理结果；和/或根据用户通过所述图像处理界面内的目标区域选取的图像，得到所述图像处理结果。

在又一种可能实现的方式中，所述图像处理界面接收输入的图像为多张，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸比对；所述图像处理结果包括以下至少一个：所述图像处理界面接收输入的图像中的人脸是否为同一个人、所述图像处理界面接收输入的图像的人脸之间的相似度。

在又一种可能实现的方式中，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸识别；所述图像处理结果包括以下至少一个：所述图像中的人脸对应的人是否为可信任的人、所述图像的人脸与人脸图像库中的人脸图像的最高相似度。

第三方面，提供了一种人脸图像处理装置，包括：处理器、接收装置、显示装置，所述处理器、所述接收装置和所述显示装置相互连接；所述接收装置用于接收用户输入的数据；所述显示装置用于向用户显示数据；所述处理器用于执行上述第一方面及其任一种可能的实现方式的方法。

第四方面，提供了一种电子设备，包括：处理器、输入装置、输出装置和存储器，所述处理器、输入装置、输出装置和存储器相互连接，所述存储器中存储有程序指令；所述程序指令被所述处理器执行时，使所述处理器执行上述第一方面及其任一种可能的实现方式的方法。

第五方面，提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被电子设备的处理器执行时，使所述处理器执行上述第一方面及其任一种可能的实现方式的方法。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，而非限制本公开。

附图说明

为了更清楚地说明本申请实施例或背景技术中的技术方案，下面将对本申请实施例或背景技术中所需要使用的附图进行说明。

此处的附图被并入说明书中并构成本说明书的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。

图1为本申请实施例提供的一种人脸图像处理方法的流程示意图；

图2为本申请实施例提供的另一种人脸图像处理方法的流程示意图；

图3为本申请实施例提供的另一种人脸图像处理方法的流程示意图；

图4为本申请实施例提供的另一种人脸图像处理方法的流程示意图；

图5为本申请实施例提供的一种人脸图像处理装置的结构示意图；

图6为本申请实施例提供的一种人脸图像处理装置的硬件结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选的还包括没有列出的步骤或单元，或可选的还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

近几年，越来越多的人脸识别门禁设备应用到实际生活中，如：企业大厅的出入门禁设备，小区门口的出入门禁设备，楼栋大门的门禁设备等等。通过这些人脸识别门禁采集访客的人脸图像，并对采集到的人脸图像进行人脸识别处理，可得到相应的识别结果。例如：门禁设备绑定有人脸图像库，该人脸图像库中包含可通过该门禁设备的人物的人脸图像，将采集到的人脸图像与人脸图像库中的图像进行比对，并将采集到的人脸图像与人脸图像库中的图像的最高相似度作为识别结果(此处的相似度指两张图像中的人脸的相似度)，再通过将最高相似度与相似度阈值进行比较，确定该访客是否为可信任的人，若为可信任的人则打开门禁。

但门禁设备毕竟是机器，是机器就会有出现故障的情况，如：摄像头无法正常采集图像、传输设备无法正常传输图像等等。此外，对于需要确认访客身份信息的情况下，若人脸图像库中不存在该访客的人脸图像，则该访客无法通过门禁设备的身份认证，被拒之门外。因此，在门禁设备无法确认访客身份的情况下，如何高效、准确的确认访客是否是可信任的人就变得非常有价值。

应用本申请实施例需要用户(此处的用户表泛指，指具有管理门禁设备的人员)使用终端(如:手机、电脑等)采集访客的人脸图像，并将采集到的人脸图像发送给服务器，服务器对终端发送的图像进行人脸识别处理，并将识别结果发送给终端，用户根据识别结果可确定该访客是否是可信任的人，若是可信任的人，则可手动打开门禁设备给该访客放行，也可为访客打开其他可通行的通道(如侧门)给该访客放行。

下面结合本申请实施例中的附图对本申请实施例进行详细描述。

请参阅图1，图1是本申请实施例提供的一种人脸图像处理方法的流程示意图。

101、接收用户的图像处理请求。

本申请实施例中，图像处理请求可以是人脸比对请求，也可以是人脸识别请求，还可以是图像质量检测请求。其中，人脸比对指确定用户输入的多张待比对图像中的人脸的相似度；人脸识别指通过确定人脸图像库中是否存在与用户输入的待识别人脸图像匹配的图像，进而可确定用户输入的图像中的人的身份信息，以及确定与用户输入的图像相似度最高的图像，并可确定该相似度最高的图像所属的视频，根据该视频确定用户输入的图像中的人的行动轨迹等信息；图像质量检测指对用户输入的待检测的图像的质量进行评价。

本申请实施例应用于终端(如：手机、平板电脑、笔记本电脑等等)，用户可通过点击终端显示的用户界面内的预设按钮发送图像处理请求，也可通过语音输入的方式向终端发送图像处理请求。

102、响应于所述图像处理请求，在用户界面上显示图像处理模式接口。

本申请实施例中，图像处理模式接口可以是待选择框，其中，待选择框内包含待选择的图像处理模式。图像处理模式接口也可以是待选择图标，其中，待选择图标与图像处理模式一一对应。

本申请实施例中，显示图像处理模式接口可以以下拉菜单方式显示，在下拉菜单中，图像处理模式接口可以隐藏，例如：在光标未在该图像处理模式接口区域内时，可隐藏该图像处理模式接口。又例如：在预定时间内未对该图像处理模式接口进行任何操作，可隐藏该图像处理模式接口。可以以弹出图像处理模式接口的方式进行显示。本申请对此不作限定。

103、响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面。

与101中的图像处理请求对应，处理模式可以是人脸比对，也可以是人脸识别，还可以是图像质量检测。

用户可通过图像处理模式接口选择处理模式，例如：用户可通过点击图像处理模式接口内的人脸比对图标选择人脸比对。

本申请实施例中，用户可通过图像处理界面输入待处理的图像，用户还可通过图像处理界面获知图像处理结果。

用户界面指终端当前的显示界面，例如(例1)：终端可登录人脸图像处理系统，并通过人脸识别系统的操作界面输入图像处理请求，此时，用户界面即该操作界面，其中，人脸图像处理系统指包括人脸识别(如：人脸比对、人脸识别等等)软件的计算机软件系统。下文中的人脸识别系统与此处的意义相同，将不再赘述。

可选的，图像处理界面可悬浮于用户界面之上，即图像处理界面的显示和用户界面的显示相互不影响。图像处理界面还可与用户界面层叠显示，将处于最上方的界面作为当前显示页面，例如：图像处理界面在用户界面之上，此时图像处理界面为当前显示页面，且对图像处理界面的操作是有效的，而对用户界面的任何操作均是无效的。

需要理解的是，当图像处理界面悬浮于用户界面之上时，用户界面和图像处理界面之间的显示相互不影响，即通过用户界面输入图像处理请求，并在图像处理模式接口内选择图像处理模式后显示图像处理界面的整个过程中，并不影响用户界面的显示。相应的，在显示图像处理界面后，若通过用户显示界面进行其他操作，也不会影响图像处理界面的显示。

可选的，响应于用户对图像处理界面进行的预定操作，图像处理界面可在用户界面上进行移动，其中，预定操作包括：拖拽图像处理界面。例如：将光标放置于图像处理界面内，并按下鼠标的左键，同时移动鼠标，使图像处理界面在用户界面上进行移动。进一步的，通过上述预定操作将图像处理界面移动至终端的用户界面的边界时，图像处理界面将自动隐藏，当光标再次放置于边界中隐藏的图像处理界面对应的范围内时，图像处理界面将重新在用户界面上显示。

104、根据所述图像处理界面接收输入的图像，得到图像处理结果。

可选的，用户通过图像处理界面输入的图像可以是通过摄像头实时采集的图像，也可以是储存在终端内的图像，还可以是终端通过互联网接收到的图像。其中，储存在终端内的图像包括储存在终端的存储介质中的图像以及与终端连接的可移动存储介质中的图像。

终端在接收到用户通过图像处理界面输入图像后，可根据用户输入的图像处理模式对该图像进行相应的处理，例如：用户选择的图像处理模式是人脸比对，且通过图像处理界面输入了待比对的2张图像，终端将对这2张待比对图像进行比对处理，并得到这2张待比对图像中的人脸的相似度。

可选的，图像处理过程可以由终端完成，也可以由服务器完成，本申请对此不作限定。

接着例1继续举例(例2)，终端向服务器发送登录人脸图像处理系统的请求，并在成功登录人脸图像处理系统之后与服务器建立通信连接，其中，该通信连接可以是无线通信技术(如蜂窝数据)，也可以是通过互联网建立通信连接。终端在接收到用户输入的2张待比对图像后，将这2张待比对图像发送至服务器，以使服务器对这2张待比对图像中的人脸进行比对，并接收服务器发送的比对结果(如：2张待比对图像中人脸的相似度)。

105、在所述图像处理界面显示所述图像处理结果。

本实施例中，用户通过图像处理界面向终端输入待处理的图像，并发送处理请求，这样可在不影响用户界面的显示的前提下，完成图像处理，为用户提供更多便利，有利于提高用户体验。

请参阅图2，图2是本申请实施例提供的一种在上述场景中的一种人脸图像处理方法的流程示意图。

201、接收用户的图像处理请求。

具体请参见101，此处将不再赘述。

202、响应于所述图像处理请求，在用户界面上显示图像处理模式接口。

具体请参见102、此处将不再赘述。

203、响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面。

本实施例中，用户通过图像处理模式接口选择的处理模式为图像质量检测，相应的，终端响应于用户的选择，在用户界面上显示图像质量检测界面。

204、根据所述图像处理界面接收输入的图像，得到图像处理结果。

接收用户通过图像质量检测界面输入的待评价图像，根据预先设定的图像质量评价指标得到待评价图像的质量分数。其中，图像质量评价指标包括以下至少一个：图像中是否包含人脸图像、图像中包含的人脸的数量、图像中人脸区域的清晰度、图像中人脸区域的遮挡情况。即根据上述图像质量评价指标给待评价图像进行评分。

由于后续将基于图像中的人脸区域进行处理，因此图像中需要包含人脸图像，且人脸区域的清晰度越高表征图像质量越高，被遮挡的人脸区域越小也表征图像质量越高。此外，若需要将待评价图像作为人脸识别或人脸比对的参考图像，还需确定待评价图像中人脸的数量，而人脸识别或人脸比对均是对单张图像中的一个人脸区域进行处理，因此，待评价图像中的人脸数量有且仅有一张时表征图像质量高，反之，待评价图像中的人脸数量大于一张时表征图像质量低。

举例来说(例3)，根据上述图像质量评价指标可对用户输入的待评价图像的质量进行评分，如：若图像中包含有人脸图像评分增加5分，若图像中包含有多个人脸图像，则评分减2分。图像中人脸区域被遮挡的区域越大，减分越多，如：被遮挡的区域的面积小于或等于15％，评分减0.5分，被遮挡的区域的面积大于15％小于或等于40％，评分减1分，被遮挡的区域的面积大于40％小于或等于70％，评分减2分，被遮挡的区域的面积大于70％，评分减3.5分。此外，图像中人脸的数量大于1，评分减2分。还可根据图像中人脸区域的清晰度从1～5分中获得相应的分数，最后将各项得分，得到图像质量分数。需要理解的是，图像中人脸区域的清晰度的判断可由任意图像清晰度算法实现，如：灰度方差函数、灰度方差乘积函数、能量梯度函数，对此本申请不做具体限定。

205、在所述图像处理界面显示所述图像处理结果。

可选的，基于上述图像质量评价指标得到的质量分数可作为待评价图像是否可进行预定处理的依据，预定处理包括将待评价图像存入人脸图像库。将质量分数达到第一阈值的待评价图像作为可进行预定处理的图像，并通过图像质量检测界面提示，提示包括可进行预定处理的图像的质量分数以及可进行预定处理的图像可用于预定处理。

接着例3继续举例(例4)，当图像的图像质量分数达到4分时，确定该图像的可作为人脸识别的参考图像。若根据图像质量评价指标对用户输入的待评价图像的质量进行评分，得到的质量分数为5分，因此，通过图像处理界面向用户提示：该待评价图像的图像质量分数为5分，可存入人脸图像库。在接收到用户通过图像处理界面选择将该待评价图像存入人脸图像库的指令的情况下，将该待评价图像存入人脸图像库。若根据图像质量评价指标对用户输入的待评价图像的质量进行评分，得到的质量分数为3分，通过图像处理界面向用户提示：该待评价图像的图像质量分数为3分，不建议存入人脸图像库。

本实施例中，用户通过将待评价图像输入图像处理界面可获得待评价图像的质量分数以及终端给出的相应的提示，根据质量分数以及提示对待评价图像进行预定处理有利于后续基于预定处理完成的一些处理。如：将质量分数更高的图像存入人脸图像库，可提高后续基于该人脸图像库中的图像实现人脸识别处理的准确率。

在一种可能存在的场景中，按A公司和B公司的约定，A公司派员工张三去B公司进行业务交流。在张三去A公司之前，A公司可将张三的人脸图像发送给B公司，以便B公司确认张三的身份。然而，在张三到达B公司大门前时，发现B公司大门处的门禁设备出故障了，无法通过门禁设备确认张三的身份，此时，B公司的前台用户可通过终端采集张三的人脸图像，并将采集到的人脸图像和A公司发送的人脸图像一起发送给服务器。服务器对终端发送的两张图像进行比对处理，得到两张图像中的人脸图像的相似度，可选的，还可根据相似度判断终端发送的两张图像中的人脸是否是同一个人，最后将相似度和判断结果(即是否是同一个人)发送给终端。用户可根据服务器发送的相似度和判断结果决定是否给张三放行。

请参阅图3，图3是本申请实施例提供的一种在上述场景中的一种人脸图像处理方法的流程示意图。

301、接收用户的图像处理请求。

具体请参见101，此处将不再赘述。

302、响应于所述图像处理请求，在用户界面上显示图像处理模式接口。

具体请参见102、此处将不再赘述。

303、响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面。

本实施例中，用户通过图像处理模式接口选择的处理模式为人脸比对，相应的，终端响应于用户的选择，在用户界面上显示人脸比对界面。

304、根据所述图像处理界面接收输入的图像，得到图像处理结果。

本申请实施例应用于终端，且终端与服务器相连。服务器内存储有图像处理(如：特征提取处理，特征匹配处理等等)所需的程序，且可运行该程序实现相应地图像处理功能。

本申请实施例中，用户可通过人脸比对界面输入多张待比对的人脸图像，其中，多张待比对的人脸图像包括A公司发送的张三的人脸图像(下文以第一待比对图像代替)。第一待比对图像可由A公司发送给终端并进行存储，也可由A公司发送给服务器并进行存储，还可以是A公司发送其他终端(除用户使用的终端和服务器之外的终端)。该多张待比对图像中还包括终端采集到的张三的人脸图像(下文以第二待比对图像代替)。

本申请实施例中，服务器上还可运行人脸图像处理系统，可选的，在终端显示用户界面之前，用户通过终端向服务器发送登录该人脸图像处理系统的请求，该登录请求包括登录账号和登录密码。服务器根据人脸图像处理系统的数据库中已注册的信息确定终端发送的登陆账号和登录密码是否匹配，在确定登录账号和登录密码匹配的情况下，向终端发送指令，该指令用于指示所述终端显示用户界面，即终端在接收到指令的情况下，显示人脸识别系统的操作页面(即用户界面)。

在一种可能实现的方式中，通过将第一待比对图像和第二待比对图像拖拽到人脸比对界面内的目标区域，将第一待比对图像和第二待比对图像发送给服务器。需要理解的是，在该种可能实现的方式中，可将终端内的任意一张图像拖拽至人脸比对界面内的目标区域，如：用户界面内的图像、终端内存储的图像，还可以是接入终端的存储设备(如：硬盘、U盘)中的图像。

在另一种可能实现的方式中，通过点击人脸比对界面内相应的按钮(如“+”按钮)，弹出图像选取框，通过图像选取框从本地选取第一待比对图像(此处第一待比对图像存储于终端)和第二待比对图像，并将第一待比对图像和第二待比对图像发送给服务器。

需要理解的是，前面两种可能实现的方式中，通过人脸比对界面将第一待比对图像和第二待比对图像发送给服务器，即向服务器发送人脸比对请求。

举例来说，用户点击人脸比对界面内的“人脸比对”按钮，弹出如“选择需要比对的图像”的页面，并通过前面两种可能实现的方式将第一待比对图像和第二待比对图像发送给服务器，即向服务器发送了人脸比对请求。

可选的，若B公司将第一待比对图像发送至服务器，终端向服务器发送图像搜索请求，其中，图像搜索请求包括待确认人物(此处为张三)的身份信息，其中，身份信息可以是身份证号码、访客编号等等。

服务器根据终端发送的待确认人物的身份信息确定包含与所述身份信息相符的人物的图像所属的人脸图像库。

举例来说，B公司在将张三的人脸图像发送至服务器的同时，还将张三的身份信息发送至服务器，服务器对张三的人脸图像和张三的身份信息进行绑定(即通过张三的身份信息可确定张三的人脸图像)，并将张三的人脸图像存储于人脸图像库。

为保证人脸图像库中的数据的安全，在接收到终端发送的图像搜索请求后，可对终端的登录账号进行鉴权，即确定终端的登录账号是否具有从该人脸图像库中获得图像的权限。在确定终端的登录账号具备从人脸图像库中获得图像的权限的情况下，将人脸图像库中与身份信息相符的人物的图像作为第一待比对图像发送给终端。

举例来说，在上述人脸识别系统中，具备从人脸图像库中获得图像的权限的账号为预设的，服务器在接收到终端发送的图像搜索请求的情况下，在确定该终端的登陆账号具备从该人脸图像库中获得图像的权限的情况下，根据张三的身份信息从人脸图像库中确定张三的图像，并将张三的图像发送给终端。

需要理解的是，在该种通过终端的图像处理界面输入图像，并向服务器发送人脸比对的实现方式中，由于人脸比对程序并未集成于人脸图像处理系统的程序中，因此，对人脸比对程序进行任何修改或更新，均不会影响人脸识别系统的程序，有利于对人脸识别系统和图像比对程序的维护。此外，对图像处理界面进行任何操作均不会影响用户界面的显示，反之，对用户界面进行任何操作均不会影响图像处理界面的显示。

服务器在接收到第一待比对图像和第二待比对图像后，可对第一待比对图像中的人脸和第二待比对图像中的人脸进行比对处理，具体步骤如下：

分别对第一待比对图像和第二待比对图像进行特征提取处理，得到第一特征图像和第二特征图像；

对第一特征图像和第二特征图像进行特征匹配处理，得到第一待比对图像中的人脸和第二待比对图像中的人脸的第一相似度。

可选的，对第一待比对图像中的任意一个像素点，使卷积模板的中心点和该像素点重合，卷积模板上的点与第一待比对图像上对应的像素点相乘，最后再将每个像素点的积相加，得到该像素点的卷积值，通过对第一待比对图像中每个像素点进行上述卷积处理，将待比对图像缩小，并提取出第一特征图像。同理，可对第二待比对图像进行上述卷积处理得到第二特征图像。

再根据第一特征图像的特征和第二特征图像中的特征的匹配度确定第一待比对图像中的人脸与第二待比对图像中的人脸的相似度，并将该相似度作为图像处理结果。

可选的，在相似度达到第二阈值的情况下，确定图像处理结果还可包括第一待比对图像中的人脸和第二待比对图像中的人脸是同一个人。在相似度未达到第二阈值的情况下，确定图像处理结果还可包括第一待比对图像中的人脸和第二待比对图像中的人脸不是同一个人。

305、在所述图像处理界面显示所述图像处理结果。

用户可根据终端接收到服务器发送的图像处理结果判断是否给张三(即需要确认身份的访客)放行。

举例来说，识别结果为第一待比对图像中的人脸和第二待比对图像中的人脸是同一个人，用户可手动打开门禁设备，给访客放行，也可带领访客走特殊通道(如侧门)，本实施例对具体放行方式不做限定。

应用本实施例，可通过图像处理界面完成人脸比对处理，获得图像处理结果，并根据图像处理结果确认访客的身份。这样，可在不影响用户界面的显示的情况下，完成人脸比对处理。此外，应用本实施例，可在门禁设备无法确认访客身份信息的情况下，通过终端确认访客的身份信息，提高确认访客身份信息的准确率。

在另一个应用场景中，李四是C公司的员工，C公司门禁设备的人脸图像库中包含有李四的人脸图像，在门禁设备处故障的情况下，李四无法通过门禁设备，此时，用户可通过终端采集李四的人脸图像，并将采集到的人脸图像发送给服务器，请求服务器的将采集到的人脸图像与人脸图像库中的人脸图像进行比对，用户再根据服务器发送的比对结果判断是否给李四放行。

下面结合本申请实施例中的附图对本申请在该应用场景中实施方式进行详细描述。

请参阅图4，图4是本申请实施例提供的一种在上述场景中的人脸图像处理方法的流程示意图。

401、接收用户的图像处理请求。

具体请参见101，此处将不再赘述。

402、响应于所述图像处理请求，在用户界面上显示图像处理模式接口。

具体请参见102、此处将不再赘述。

403、响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面。

本实施例中，用户通过图像处理模式接口选择的处理模式为人脸识别，相应的，终端响应于用户的选择，在用户界面上显示人脸识别界面。

404、根据所述图像处理界面接收输入的图像，得到图像处理结果。

本申请实施例应用于终端，且终端与服务器相连。服务器内存储有图像处理(如：特征提取处理，特征匹配处理等等)所需的程序，且可运行该程序实现相应地图像处理功能。

在本申请实施例中，将终端采集到的待确认身份信息的访客的人脸图像作为待识别图像，其中，待确认身份信息的访客指请求通过门禁设备的人。

本申请实施例中，服务器上还可运行人脸图像处理系统，可选的，在终端显示用户界面之前，用户通过终端向服务器发送登录该人脸图像处理系统的请求，登录的具体过程可参见304，此处将不再赘述。

与204中通过拖拽图像或点击人脸比对界面中相应的按钮向服务器发送待比对图像以及人脸比对请求的方式相同，可通过拖拽图像或点击人脸识别界面中相应的按钮向服务器发送待识别图像以及人脸识别请求，具体实现方式可参见304，此处将不再赘述。

可选的，用户可通过终端向服务器发送的人脸识别请求中包括：门禁设备标识或人脸图像库标识。

举例来说，用户点击人脸识别界面内的“人脸识别”按钮，弹出如“选择需要识别的图像”的页面，并通过拖拽或点击相应的按钮的方式选取待识别图像，再弹出“请选择门禁设备”或“请选择人脸图像库”，将用户输入的待识别图像以及选择门禁设备的标识或用户选择的人脸图像库的标识作为人脸识别请求发送给服务器。

服务器根据终端发送的门禁设备的标识或所述人脸图像库标识，确定人脸图像库；将待识别图像与人脸图像库中的图像进行比对处理，将待识别图像中的人脸与人脸图像库中的图像中的人脸的最大相似度与第三阈值进行比较；在最大相似度达到第三阈值的情况下，确定图像处理结果为待识别图像中的人脸对应的人为可信任的人；在最大相似度未达到第三阈值的情况下，确定图像处理结果为待识别图像中的人脸对应的人非可信任的人。

为可信任的人表征人脸图像库中存在待确定身份信息的访客的人脸图像，即可为该访客放行。非可信任的人表征人脸图像库中不存在待确定身份信息的访客的人脸图像，即不能为该访客放行。

可选的，不同的门禁设备或不同的人脸图像库对应的区域也不相同。例如：1号门禁设备(或1号人脸图像库)对应的区域为C公司的内部的1号区域，在确定1号门禁设备的人脸图像库(或1号人脸图像库)中存在李四的人脸图像的情况下，李四在C公司内部的被允许自由出入的区域为1号区域。

405、在所述图像处理界面显示所述图像处理结果。

用户可根据终端接收到服务器发送的图像处理结果判断是否给该访客放行。

举例来说，图像处理结果为待识别图像中的人脸对应的人为可信任的人，表明可为待确认身份信息的人物放行，用户可打开门禁设备为该人物放行，也可带领访客走特殊通道(如侧门)。

应用本实施例，可通过图像处理界面完成人脸识别处理，获得图像处理结果，并根据图像处理结果确认访客的身份。这样，可在不影响用户界面的显示的情况下，完成人脸识别处理。此外，应用本实施例，可在门禁设备无法确认访客身份信息的情况下，通过终端确认访客的身份信息，提高确认访客身份信息的准确率。

本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。

上述详细阐述了本申请实施例的方法，下面提供了本申请实施例的装置。

请参阅图5，图5为本申请实施例提供的一种人脸图像处理装置的结构示意图，该装置1包括：接收单元11、第一显示单元12、第二显示单元13、处理单元14、第三显示单元15、移动单元16以及确定单元17。其中：

接收单元11，用于接收用户的图像处理请求；

第一显示单元12，用于响应于所述图像处理请求，在用户界面上显示图像处理模式接口；

第二显示单元13，用于响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面；

处理单元14，用于根据所述图像处理界面接收输入的图像，得到图像处理结果；

第三显示单元15，用于在所述图像处理界面显示所述图像处理结果。

在一种可能实现的方式中，所述第二显示13单元具体用于：使所述图像处理界面悬浮于所述用户界面之上；或，使所述图像处理界面与所述用户界面层叠显示。

在另一种可能实现的方式中，所述人脸图像处理装置1还包括：移动单元16，用于响应于用户对所述图像处理界面进行的预定操作，所述图像处理界面在所述用户界面上进行移动，其中，所述预定操作包括：拖拽所述图像处理界面。

在又一种可能实现的方式中，所述用户通过所述图像处理模式接口选择的处理模式为图像质量检测；所述处理单元14具体用于：接收用户通过所述图像处理界面输入的待评价图像；以及根据预先设定的图像质量评价指标得到所述待评价图像的质量分数。

在又一种可能实现的方式中，所述人脸图像处理装置1还包括：确定单元17，用于将质量分数达到阈值的待评价图像作为可进行预定处理的图像，所述第三显示单元，还用于通过所述图像处理界面显示提示，所述预定处理包括将所述待评价图像存入人脸图像库，所述提示包括所述可进行预定处理的图像的质量分数以及所述可进行预定处理的图像可用于所述预定处理。

在又一种可能实现的方式中，所述图像质量评价指标包括以下至少一个：图像中是否包含人脸图像、图像中包含的人脸的数量、图像中人脸区域的清晰度、图像中人脸区域的遮挡情况。

在又一种可能实现的方式中，所述处理单元14具体还用于：根据用户拖拽至所述图像处理界面内的目标区域的图像，得到所述图像处理结果；和/或根据用户通过所述图像处理界面内的目标区域选取的图像，得到所述图像处理结果。

在又一种可能实现的方式中，所述图像处理界面接收输入的图像为多张，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸比对；所述图像处理结果包括以下至少一个：所述图像处理界面接收输入的图像中的人脸是否为同一个人、所述图像处理界面接收输入的图像的人脸之间的相似度。

在又一种可能实现的方式中，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸识别；所述图像处理结果包括以下至少一个：所述图像中的人脸对应的人是否为可信任的人、所述图像的人脸与人脸图像库中的人脸图像的最高相似度。

在一些实施例中，本公开实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法，其具体实现可以参照上文方法实施例的描述，为了简洁，这里不再赘述。

图6为本申请实施例提供的一种人脸图像处理装置的硬件结构示意图。该装置2包括处理器21，还可以包括输入装置22、输出装置23和存储器24。该输入装置22、输出装置23、存储器24和处理器21之间通过总线相互连接。

存储器包括但不限于是随机存储记忆体(random access memory，RAM)、只读存储器(read-only memory，ROM)、可擦除可编程只读存储器(erasable programmable readonly memory，EPROM)、或便携式只读存储器(compact disc read-only memory，CD-ROM)，该存储器用于相关指令及数据。

输入装置用于输入数据和/或信号，以及输出装置用于输出数据和/或信号。输出装置和输入装置可以是独立的器件，也可以是一个整体的器件。

处理器可以包括是一个或多个处理器，例如包括一个或多个中央处理器(centralprocessing unit，CPU)，在处理器是一个CPU的情况下，该CPU可以是单核CPU，也可以是多核CPU。

存储器用于存储网络设备的程序代码和数据。

处理器用于调用该存储器中的程序代码和数据，执行上述方法实施例中的步骤。具体可参见方法实施例中的描述，在此不再赘述。

可以理解的是，图6仅仅示出了一种人脸图像处理装置的简化设计。在实际应用中，人脸图像处理装置还可以分别包含必要的其他元件，包含但不限于任意数量的输入/输出装置、处理器、控制器、存储器等，而所有可以实现本申请实施例的人脸图像处理装置都在本申请的保护范围之内。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。所属领域的技术人员还可以清楚地了解到，本申请各个实施例描述各有侧重，为描述的方便和简洁，相同或类似的部分在不同实施例中可能没有赘述，因此，在某一实施例未描述或未详细描述的部分可以参见其他实施例的记载。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者通过所述计算机可读存储介质进行传输。所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriberline，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，数字通用光盘(digital versatiledisc，DVD))、或者半导体介质(例如固态硬盘(solid state disk，SSD))等。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，该流程可以由计算机程序来指令相关的硬件完成，该程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。而前述的存储介质包括：只读存储器(read-only memory，ROM)或随机存储存储器(random access memory，RAM)、磁碟或者光盘等各种可存储程序代码的介质。

Claims (19)

1.一种人脸图像处理方法，其特征在于，所述人脸图像处理方法用于在人脸识别门禁设备出现故障的情况下对访客进行人脸识别，所述人脸图像方法应用于人脸图像处理装置，所述方法包括：

接收用户的图像处理请求；所述图像处理请求包括人脸比对请求；

响应于所述图像处理请求，在用户界面上显示图像处理模式接口；

响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面，所述处理模式为人脸比对；

根据所述图像处理界面接收输入的包括所述人脸图像处理装置采集到的所述访客的脸部的图像和终端发送的第一待比对图像，得到图像处理结果；所述图像处理结果包括所述脸部的图像与所述第一待比对图像的人脸比对结果；

在所述图像处理界面显示所述图像处理结果，所述图像处理结果包括以下至少一个：所述图像处理界面接收输入的图像中的人脸是否为同一个人、所述图像处理界面接收输入的图像的人脸之间的相似度。

2.根据权利要求1所述的方法，其特征在于，所述在所述用户界面显示图像处理界面，包括：

所述图像处理界面悬浮于所述用户界面之上；或，

所述图像处理界面与所述用户界面层叠显示。

3.根据权利要求2所述的方法，其特征在于，所述在所述用户界面显示图像处理界面之后，还包括：

响应于用户对所述图像处理界面进行的预定操作，所述图像处理界面在所述用户界面上进行移动，其中，所述预定操作包括：拖拽所述图像处理界面。

4.根据权利要求1所述的方法，其特征在于，所述用户通过所述图像处理模式接口选择的处理模式为图像质量检测；

所述根据所述图像处理界面接收输入的图像，得到图像处理结果，包括：

接收用户通过所述图像处理界面输入的待评价图像；

根据预先设定的图像质量评价指标得到所述待评价图像的质量分数。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

将质量分数达到阈值的待评价图像作为可进行预定处理的图像，并通过所述图像处理界面显示提示，所述预定处理包括将所述待评价图像存入人脸图像库，所述提示包括所述可进行预定处理的图像的质量分数以及所述可进行预定处理的图像可用于所述预定处理。

6.根据权利要求4或5所述的方法，其特征在于，所述图像质量评价指标包括以下至少一个：图像中是否包含人脸图像、图像中包含的人脸的数量、图像中人脸区域的清晰度、图像中人脸区域的遮挡情况。

7.根据权利要求1所述的方法，其特征在于，所述根据所述图像处理界面接收输入的图像，得到图像处理结果，包括：

根据用户拖拽至所述图像处理界面内的目标区域的图像，得到所述图像处理结果；和/或

根据用户通过所述图像处理界面内的目标区域选取的图像，得到所述图像处理结果。

8.根据权利要求1至5、7中的任意一项所述的方法，其特征在于，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸识别；

所述图像处理结果包括以下至少一个：所述图像中的人脸对应的人是否为可信任的人、所述图像的人脸与人脸图像库中的人脸图像的最高相似度。

9.一种人脸图像处理装置，其特征在于，所述人脸图像处理装置用于在人脸识别门禁设备出现故障的情况下对访客进行人脸识别，所述装置包括：

接收单元，用于接收用户的图像处理请求；所述图像处理请求包括人脸比对请求；

第一显示单元，用于响应于所述图像处理请求，在用户界面上显示图像处理模式接口；

第二显示单元，用于响应于用户通过所述图像处理模式接口选择的处理模式，在所述用户界面显示图像处理界面，所述处理模式为人脸比对；

处理单元，用于根据所述图像处理界面接收输入的包括所述人脸图像处理装置采集到的所述访客的脸部的图像和终端发送的第一待比对图像，得到图像处理结果；所述图像处理结果包括所述脸部的图像与所述第一待比对图像的人脸比对结果；

第三显示单元，用于在所述图像处理界面显示所述图像处理结果，所述图像处理结果包括以下至少一个：所述图像处理界面接收输入的图像中的人脸是否为同一个人、所述图像处理界面接收输入的图像的人脸之间的相似度。

10.根据权利要求9所述的装置，其特征在于，所述第二显示单元具体用于：

使所述图像处理界面悬浮于所述用户界面之上；或，

使所述图像处理界面与所述用户界面层叠显示。

11.根据权利要求10所述的装置，其特征在于，所述人脸图像处理装置还包括：

移动单元，用于响应于用户对所述图像处理界面进行的预定操作，所述图像处理界面在所述用户界面上进行移动，其中，所述预定操作包括：拖拽所述图像处理界面。

12.根据权利要求9所述的装置，其特征在于，所述用户通过所述图像处理模式接口选择的处理模式为图像质量检测；

所述处理单元具体用于：

接收用户通过所述图像处理界面输入的待评价图像；

以及根据预先设定的图像质量评价指标得到所述待评价图像的质量分数。

13.根据权利要求12所述的装置，其特征在于，所述人脸图像处理装置还包括：

确定单元，用于将质量分数达到阈值的待评价图像作为可进行预定处理的图像，所述第三显示单元，还用于通过所述图像处理界面显示提示，所述预定处理包括将所述待评价图像存入人脸图像库，所述提示包括所述可进行预定处理的图像的质量分数以及所述可进行预定处理的图像可用于所述预定处理。

14.根据权利要求12或13所述的装置，其特征在于，所述图像质量评价指标包括以下至少一个：图像中是否包含人脸图像、图像中包含的人脸的数量、图像中人脸区域的清晰度、图像中人脸区域的遮挡情况。

15.根据权利要求9所述的装置，其特征在于，所述处理单元具体还用于：

根据用户拖拽至所述图像处理界面内的目标区域的图像，得到所述图像处理结果；和/或

根据用户通过所述图像处理界面内的目标区域选取的图像，得到所述图像处理结果。

16.根据权利要求9至13、15中的任意一项所述的装置，其特征在于，所述图像处理界面接收输入的图像为多张，所述图像包括人脸，所述用户通过所述图像处理模式接口选择的处理模式为人脸比对；

所述图像处理结果包括以下至少一个：所述图像处理界面接收输入的图像中的人脸是否为同一个人、所述图像处理界面接收输入的图像的人脸之间的相似度。

17.一种人脸图像处理装置，其特征在于，包括：处理器、接收装置、显示装置，所述处理器、所述接收装置和所述显示装置相互连接；所述接收装置用于接收用户输入的数据；所述显示装置用于向用户显示数据；所述处理器用于执行如权利要求1至8任一项权利要求所述的方法。

18.一种电子设备，其特征在于，包括：处理器、输入装置、输出装置和存储器，所述处理器、输入装置、输出装置和存储器相互连接，所述存储器中存储有程序指令；所述程序指令被所述处理器执行时，使所述处理器执行如权利要求1至8任一项权利要求所述的方法。

19.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被电子设备的处理器执行时，使所述处理器执行权利要求1至8任意一项所述的方法。