CN105744112B - 信息处理装置和信息处理方法 - Google Patents

Abstract

本发明涉及一种信息处理装置和信息处理方法，所述信息处理装置包括：获取表示由图像捕获单元捕获的用户的面部的面部信息的获取单元；将允许登录所述信息处理装置的用户的标识符和表示所述用户的面部的第一面部信息的存储器相关联地进行存储的存储器；如果在从用户登录所述信息处理装置到所述用户退出所述信息处理装置期间满足预定条件，则将由所述获取单元获取的所述面部信息作为与所述用户的标识符相关联的第二面部信息写入所述存储器中的写入单元；以及如果有关由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件，则限制作为与所述第一面部信息相关联的所述标识符的所述用户的登录的限制单元。

Description

信息处理装置和信息处理方法

技术领域

本发明涉及一种信息处理装置和信息处理方法。

背景技术

例如，日本专利文献特开2005-84991号公报公开了一种将预先录制的面部图像和捕获的面部图像进行比较来判定预先录制的面部图像中的人是否与捕获的面部图像中的人相匹配的技术。根据该技术，当用户登录终端时，成像单元捕获该用户的面部，并且将最近从捕获图像中获取的面部图像数据与存储在存储器中的面部图像数据进行比较以此来判定这两个面部图像数据的匹配程度。如果这两个面部图像数据相匹配，则将最近获取的面部图像数据，即，用户的最新面部图像数据存储在存储器中，从而更新面部图像数据。

发明内容

因此，本发明的目的在于提供一种当基于用户的面部允许使用装置时不会误允许错误的用户使用该装置技术。

根据本发明的第一方面，提供了一种信息处理装置，其包括：获取单元，所述获取单元获取面部信息，所述面部信息表示由图像捕获单元捕获的用户的面部；存储器，所述存储器将允许登录所述信息处理装置的用户的标识符和表示所述用户的面部的第一面部信息相关联地进行存储；写入单元，如果在从用户登录所述信息处理装置到所述用户退出所述信息处理装置期间满足预定条件，则所述写入单元将由所述获取单元获取的所述面部信息作为与所述用户的标识符相关联的第二面部信息写入所述存储器中；以及限制单元，如果有关由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件，则所述限制单元限制作为与所述第一面部信息相关联的所述标识符的所述用户的登录。

根据本发明的第二方面，如果有关由所述图像捕获单元获取的所述面部信息，与所述第二面部信息不相关联的所述第一面部信息满足预定条件，则所述限制单元不限制与所述第一面部信息相关联的所述标识符的所述用户的登录。

根据本发明的第三方面，提供了一种信息处理方法，所述方法包括：获取步骤，获取面部信息，所述面部信息表示由图像捕获单元捕获的用户的面部；存储步骤，将允许登录所述信息处理装置的用户的标识符和表示所述用户的面部的第一面部信息相关联地进行存储；写入步骤，如果在从用户登录所述信息处理装置到所述用户退出所述信息处理装置期间满足预定条件，则将由所述获取单元获取的所述面部信息作为与所述用户的标识符相关联的第二面部信息写入所述存储器中；以及限制步骤，如果有关由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件，则限制作为与所述第一面部信息相关联的所述标识符的所述用户的登录。

根据本发明的第一和第三方面，当基于用户的面部允许登录装置时，不会允许错误的用户登录到该装置。

根据本发明的第二方面，如果在过去曾经错误地允许捕获过图像的用户作为另一用户登录装置，则在下一次捕获该用户的图像时就不会允许将其作为其他用户登录到该装置。

附图说明

以下，将基于附图对本发明的示例性实施例进行详细描述，其中：

图1图示了根据本发明的一示例性实施例的图像形成装置的外观；

图2图示了图像形成装置的硬件配置；

图3图示了认证表TB1的示例；

图4是图示了图像形成装置的功能配置的框图；

图5是认证处理的流程图；

图6是退出后的处理的流程图；

图7图示了显示在显示器上的屏幕的示例；以及

图8图示了显示在显示器上的屏幕的示例。

具体实施方式

示例性实施例

(示例性实施例的配置)

在下文中，将对应用于图像形成装置的根据本发明的示例性实施例的信息处理装置进行描述。图1是图示了根据本发明的示例性实施例的图像形成装置10的外观的透视图。使用图像形成装置10的用户站在图像形成装置10的前方，并且操作操作面板单元100。操作面板单元100位于图像形成装置10的上表面的正面侧。在该示例中，操作面板单元100包括操作单元12、显示器14和图像捕获单元18。图像形成装置10根据在操作单元12上进行的操作执行各种信息处理，诸如生成已读取文档的图像的扫描、制作文档的副本的复制、以及经由通信线路发送/接收文档的图像的传真通信。允许由管理图像形成装置10的管理员预先确定的用户使用图像形成装置10。图像形成装置10执行认证用户是否是被允许使用图像形成装置10的人的处理。

图2是图示了图像形成装置10的硬件配置的框图。如图2所示，图像形成装置10包括控制器11、操作单元12、存储器13、显示器14、图像形成单元15和图像捕获单元18。

控制器11包括中央处理单元(CPU)、只读存储器(ROM)和随机存取存储器(RAM)。CPU通过执行存储在ROM和存储器13中的控制程序来控制图像形成装置10的各种单元。

图像捕获单元18在图像形成装置10的宽度方向上与显示器14相邻。图像捕获单元18具有图像捕获透镜和成像装置。图像捕获单元18捕获用户的面部以生成被捕获面部的图像数据。图像捕获单元18可以不必与显示器14相邻而可以位于其他地方，只要图像捕获单元18能够捕获用户的面部。

操作单元12是包括多个操作组件的操作装置。操作单元12接收用户进行的操作，并且向控制器11提供表示接收到的操作的操作信号。

存储器13具有例如硬盘装置。存储器13存储由控制器11执行的控制程序和面部的图像数据。存储器13具有第一存储区131和第二存储区132作为存储面部的图像数据的存储区。在第一存储区131中，作为第一图像数据，存储被允许使用图像形成装置10的每个用户的面部的图像数据。在第二存储区132中，作为第二图像数据，存储在误认证用户时使用的图像数据中由图像捕获单元18生成的图像数据。存储器13是存储表示用户的面部的面部信息的存储器的示例。第一图像数据是表示用户的面部的第一面部信息的示例。第二图像数据是由图像捕获单元18生成并写入存储器13中的第二面部信息的示例。

存储器13存储认证表TB1。用于认证通过管理员被允许使用图像形成装置10的人的信息存储在认证表TB1中。图3图示了认证表TB1的示例。在认证表TB1中，为每个被允许使用图像形成装置10的人提供一个记录。用户名字段存储被允许使用图像形成装置10的人的名字。用户ID字段存储分配给被允许使用图像形成装置10的人的标识符。密码字段存储用于验证被允许使用图像生成装置10的人的密码。第一图像数据名称字段存储表示用户的面部的第一图像数据的文件名。第二图像数据名称字段存储在第二存储区132中存储的第二图像数据的文件名。

显示器14例如包括液晶显示器。显示器14在图像形成装置10的宽度方向上与操作单元12相邻。显示器14是在其显示表面上显示图像(屏幕)的显示装置。由控制器11控制的图像形成单元15通过电子照相处理在一张纸等上形成图像。除了如上所述的部件之外，图像形成装置10还具有其他部件，诸如读取文档等的图像的图像读取单元以及经由通信线路与外部装置通信的通信单元。

下面将对由图像形成装置10执行的信息处理的示例进行描述。当执行复制时，控制器11使图像读取单元读取文档的图像以生成该文档的图像数据，并且基于该图像数据通过图像形成单元15在片材上形成图像。当执行扫描时，控制器11使图像读取单元读取文档的图像以生成图像数据，并且将该图像数据存储在存储器13中或者经由通信线路发送至外部装置。当执行传真通信时，在发送数据时，控制器11使图像读取单元读取文档的图像以生成图像数据，并且经由电话线路(未图示)发送该图像数据；以及，在接收数据时，经由电话线路(未图示)接收图像数据，并且基于接收到的图像数据通过图像形成单元15在片材上形成图像。

图4是图示了图像形成装置10的控制器11的功能配置的框图。如图4所示，控制单元11具有获取单元111、写入单元112和允许单元113。

获取单元111从图像捕获单元18获取用户的面部的图像数据。此时获取的图像数据是表示用户的面部的面部信息的示例。

写入单元112是写入单元的示例，如果在从用户被允许使用图像形成装置10到该用户结束使用图像形成装置10期间满足预定条件，则该写入单元将由图像捕获单元18生成的图像数据作为与该用户的用户名相关联的第二图像数据写入存储器13的第二存储区132中。

允许单元113是允许用户使用图像形成装置10的允许单元的示例。如果有关由获取单元111获取的图像数据，存储在第一存储区131中的第一图像数据满足预定条件，则允许单元113允许用户使用图像形成装置10。具体地，如果满足以下预定条件，即，在从由获取单元111获取的图像数据获取的面部的特征与从第一图像数据获取的面部的特征之间的差异小于阈值，则允许单元113允许具有与第一图像数据相关联的用户名的用户使用图像形成装置10。如果满足以下预定条件，即，在从由获取单元111获取的图像数据获取的面部的特征与从存储在第二存储区132中的第二图像数据获取的面部的特征之间的差异小于阈值，则允许单元113限制具有与第二图像数据相关联的用户名的用户使用图像形成装置10。即，允许单元113是限制用户使用图像形成装置10的限制单元的示例。

(示例性实施例的操作示例)

图5和图6是图示了由图像形成装置10执行的处理的流程图。下面将参照图5和图6对当图像形成装置10执行用户面部认证时的操作的示例进行描述。

首先，将对当正确认证用户时的操作的示例进行描述，控制器11控制显示器14，从而当用户未登录时，显示器14显示用于提示该用户在使用面部图像的认证方法和使用用户ID和密码的认证方法中选择其一的屏幕(图7)。例如，一旦用户C在图7所示的屏幕上执行了选择面部认证作为认证方法的操作，控制器11控制图像捕获单元18和显示器14，从而将通过图像捕获单元18捕获的图像显示在显示器14上(步骤SA1)。图8图示了在该用户选择面部认证作为认证方法之后显示在显示器14上的屏幕的示例。当用户C看着显示器14时，用户C移动其身体以使面部显示在框架内。

控制器11分析由图像捕获单元18生成的图像数据，并且获取所捕获的面部的特征(步骤SA2)。接下来，控制器11获取存储在第一存储区131中的第一图像数据，即，被允许使用图像形成装置10的每个用户的面部的图像数据，并且获取由第一图像数据表示的面部的特征(步骤SA3)。控制器11将在步骤SA2中获取的特征与步骤SA3中获取的特征进行比较，并且判断是否存在与步骤SA2中获取的特征之间的差异小于阈值的任何第一图像数据(步骤SA4)。

如果存在特征与步骤SA2中的获取的特征之间的差异小于阈值的第一图像数据(步骤SA4中为“是”)，则控制器11查找在存储有特征之间的差异小于阈值的第一图像数据的文件名的认证表TB1中的记录，并且判断该记录是否存储有第二图像数据的文件名(步骤SA5)。如果查找到的记录未存储有第二图像数据的文件名(步骤SA5中为“否”)，即，如果过去尚未将不同于用户C的人认证为用户C，则控制器11允许用户C使用图像形成装置10(步骤SA6)。由此，形成用户C登录了图像形成装置10的状态。

另外，控制器11从认证表TB1获取与获取的特征之间的差异小于阈值的第一图像数据的文件名相关联的用户名，并控制显示器14以显示获取到的用户名、“用户C”和通知现在允许使用图像形成装置10的消息(步骤SA7)。

用户C检查显示的用户名，以确认用户C本人是否已被认证。在确认到用户C本人已被认证时，用户C操作操作单元12以使用图像形成装置10。图像形成装置10记录根据用户操作执行的处理的日志。如果要结束使用图像形成装置10，用户C利用操作单元12执行退出操作。

一旦用户C执行了退出操作，控制器11查找记录的日志，并判断在从用户C登录到退出期间是否已经执行了预定操作。在本示例性实施例中，将预定操作定义为除了退出操作之外的操作。预定操作可以是一个特定的操作，诸如指令执行复制的操作、指令执行扫描的操作和指令执行传真通信的操作。

如果在从用户C登录到退出期间已经执行了预定操作(步骤SB1中为“是”)，则控制器11用图像捕获单元18生成的图像数据更新在存储在第一存储区131中的第一图像数据中的表示用户C的面部的第一图像数据(步骤SB2)。具体地，控制器11将图像捕获单元18生成的用户C的面部的图像数据写入第一存储区131中。另外，在认证表TB1中，控制器11将写入第一存储区131中的图像数据的文件名存储在已经退出的用户C的记录的第一图像数据名称字段中。另外，控制器11从第一存储区131删除具有在更新第一图像数据名称字段之前早先写入用户C的记录中的文件名的第一图像数据。

如上所述，当正确认证用户时，用在认证时捕获的面部的图像数据来更新用于认证该用户的面部的图像数据。

接下来，将对当没有正确认证用户时的操作的示例进行描述。例如，当用户B选择面部认证作为认证方法时，按照与认证用户C时相同的方式执行步骤SA1到步骤SA4的处理。在此，例如假设即使已经捕获了用户B的面部，由用户A的第一图像数据所表示的面部的特征与捕获的用户B面部的特征之间的差异也小于阈值。在这种情况下，步骤SA4中的判断结果变为“是”。当步骤SA4中的判断结果变为“是”时，控制器11查找在存储特征差异小于阈值的第一图像数据的文件名的认证表TB1中的记录，即，在本示例中的用户A的记录，并判断该记录是否存储有第二图像数据的文件名(步骤SA5)。

如果查找到的记录未存储有第二图像数据的文件名(步骤SA5中为“否”)，即，如果过去尚未将与用户A不同的人认证为用户A，则控制器11允许使用图像形成装置10(步骤SA6)。由此，形成即使操作图像形成装置10的人是用户B，用户A也能登录到图像形成装置10的状态。

接下来，控制器11从认证表TB1获取与获取的特征之间的差异小于阈值的第一图像数据的文件名相关联的用户名，即，在本示例中的用户A的用户名，并控制显示器14以显示获取到的用户名和通知现在允许使用图像形成装置10的消息(步骤SA7)。

用户B在已经查看了显示器14并且意识到显示的用户名不是其本人的用户名后，利用操作单元12执行退出操作，而不使用图像形成装置10的各种功能。一旦用户执行了退出操作，控制器11查找记录的日志，并且判断用户在从登录到退出期间是否已经执行了预定操作。

如果用户在从登录到退出期间尚未执行预定操作(步骤SB1中为“否”)，则控制器11将图像捕获单元18生成的图像数据的文件名存储在认证表TB1中的用户A的记录的第二图像数据名称字段中(步骤SB3)，并将图像捕获单元18生成的图像数据作为第二图像数据写入第二存储区132中(步骤SB4)。

接下来，将对如上所述当被错误地认证为用户A的用户B试图再次登录时的操作的示例进行描述。当用户B选择面部认证作为认证方法时，执行步骤SA1到步骤SA4的处理。在此，假设即使已经捕获了用户B的面部，也再次将在由用户A的第一图像数据表示的面部的特征与捕获的用户B面部的特征之间的差异判断为小于阈值。在这种情况下，步骤SA4中的判断结果为“是”。

当步骤SA4中的判断结果为“是”时，控制器11查找在存储特征差异小于阈值的第一图像数据的文件名的认证表TB1中的记录，即，在本示例中的用户A的记录，并判断该记录是否存储有第二图像数据的文件名(步骤SA5)。此时，用户A的记录存储有通过如上所述的操作(在如上所述的操作示例中捕获的用户B的面部的图像数据)写入第二存储区132中的第二图像数据的文件名。因此，控制器11将该处理转入步骤SA8。

在步骤SA8中，控制器11获取文件名存储在认证表TB1中的用户A的记录的第二图像数据名称字段中的第二图像数据，即，通过如上所述的操作写入第二存储区132中的用户B的面部的图像数据，并判断在获取的第二图像数据中包括的面部的特征与图像捕获单元18捕获的用户B的面部的特征之间的差异是否小于阈值。

如果这两个面部的特征之间的差异小于阈值(步骤SA8中为“是”)，则控制器11判断，在不包括与步骤SA2中获取的用户B的面部的特征之间的差异被判断为小于步骤SA4中的阈值的用户A的第一图像数据的第一图像数据中，是否存在与步骤SA2中获取的用户B的面部的特征之间的差异小于阈值的任何第一图像数据(SA9)。

此时，如果在不包括用户A的第一图像数据的第一图像数据中存在用户B的第一图像数据，并且由用户B的第一图像数据表示的面部的特征与在步骤SA2中获取的特征之间的差异小于阈值，则控制器11将该处理转入步骤SA5。控制器11查找在存储有用户B的第一图像数据的文件名的认证表TB1中的记录，并判断该记录是否存储有第二图像数据的文件名(步骤SA5)。如果查找到的记录未存储有第二图像数据的文件名(步骤SA5为“否”)，则控制器11允许用户B使用图像形成装置10(步骤SA6)。由此，形成用户B登录了图像形成装置10的状态。

另外，控制器11从认证表TB1获取与获取的特征与步骤SA2中获取的特征之间的差异小于阈值的第一图像数据的文件名相关联的用户名，并控制显示器14以显示获取到的用户名、“用户B”和通知现在允许使用图像形成装置10的消息(步骤SA7)。

用户B检查显示的用户名，以确认用户B本人是否已被认证。在确认用户B本人已被认证时，用户B操作操作单元12以使用图像形成装置10。图像形成装置10记录根据用户操作执行的处理的日志。如果要结束使用图像形成装置10，用户B利用操作单元12执行退出操作。

一旦用户B执行了退出操作，控制器11查找记录的日志，并判断在从用户B登录到退出期间是否已经执行了预定操作。如果在从用户B登录到退出期间已经执行了预定操作(步骤SB1中为“是”)，则控制器11用图像捕获单元18生成的图像数据更新存储在第一存储区131中的用户B的面部的第一图像数据(步骤SB2)。具体地，控制器11将图像捕获单元18捕获的用户B的面部的图像数据写入第一存储区131中。另外，在认证表TB1中，控制器11将写入第一存储区131中的图像数据的文件名存储在已经退出的用户B的记录的第一图像数据名称字段中。另外，控制器11从第一存储区131删除具有在更新第一图像数据名称字段之前早先写入用户B的记录中的文件名的图像数据。

控制器11控制显示器14，从而如果步骤SA4或SA9中的判断结果为“否”，则显示表示认证失败的消息(步骤SA10)。如果步骤SA8中的判断结果为“否”，则控制器11将处理流程转入步骤SA6中。

如上所述，根据本示例性实施例，如果将已试图登录的用户错误地认证为另一用户，存储在该错误认证时捕获的面部的图像数据。使用该存储的图像数据，从而使错误认证的用户在下一次试图登录时不会被认证为另一用户。

变形例

以上，对本发明的示例性实施例进行了描述，但示例性实施例不限于上述的示例性实施例，可以以各种方式实施示例性实施例。例如，可以对上述的示例性实施例进行如下修改和实施。可以将上述的示例性实施例与下述的各变形例相结合。

在上述的示例性实施例中，用于认证用户的面部的图像数据存储在存储器13中。然而，示例性实施例不限于该配置。例如，可以采用替代配置，即，存储认证表TB1和面部的图像数据的服务器装置经由通信线路连接至图像形成装置10，并将图像捕获单元18生成的图像数据发送至该服务器装置，从而使服务器装置执行认证处理。另外，服务器装置在认证用户时可以控制图像形成装置10，从而允许用户使用图像形成装置10。在该配置的情况下，日志数据可以存储在图像形成装置10中，或者可以存储在服务器装置中。

在上述的示例性实施例中，第一图像数据存储在第一存储区131中，以及第二图像数据存储在第二存储区132中。然而，示例性实施例不限于该配置。例如，代替第一图像数据，表示被允许使用图像形成装置10的各用户的面部的特征的特征数据可以存储在第一存储区131中；以及代替第二图像数据，表示图像捕获单元18捕获的面部的特征的特征数据可以存储在第二存储区132中。根据该配置，通过将图像捕获单元18捕获的面部的特征与由存储在存储器13中的特征数据表示的特征进行比较来认证用户。相较于从存储在存储器13中的每个面部的图像数据获取特征然后再将该特征与捕获的面部的特征进行比较，该配置使得不必在每次执行认证时都从面部的图像数据获取面部的特征，因此实现了更快的认证处理。

根据本发明的示例性实施例的信息处理装置可以不必是具有多种功能的图像形成装置。例如，该信息处理装置可以实施为诸如扫描装置、复印机或者传真装置等信息处理装置，或者可以实施为诸如个人计算机或者服务器装置等信息处理装置。由根据上述的示例性实施例或其变形例的图像形成装置10的控制器11实施的各种功能可以通过至少一个硬件电路来实施，可以通过由运算单元执行至少一个程序来实施，或者可以通过两者的组合来实施。如果通过使用至少一个程序来实施控制器11的功能，则可以在该程序存储在计算机可读记录介质中时提供该程序，该计算机可读记录介质诸如是磁记录介质(诸如磁带或磁盘(硬盘驱动器(HDD)或软盘(FD))、光学记录介质(诸如光盘)、磁光记录介质或半导体存储器，或者经由通信线路分布该程序。

为了进行图示和说明，以上对本发明的示例性实施例进行了描述。其目的并不在于全面详尽地描述本发明或将本发明限定于所公开的具体形式。很显然，许多修改以及变形对本领域的技术人员而言是显而易见的。本实施例的选择和描述，其目的在于最好地说明本发明的原理及其实际应用，从而使本领域的其他技术人员能够理解本发明的各种实施例和适合于预期的确定用途的各种变形。本发明的范围由与本说明书一起提交的权利要求书及其等同物来限定。

Claims (3)

1.一种信息处理装置，其特征在于，包括：

获取单元，所述获取单元获取面部信息，所述面部信息表示由图像捕获单元捕获的用户的面部；

存储器，所述存储器将允许登录所述信息处理装置的用户的标识符和表示所述用户的面部的第一面部信息相关联地进行存储；

写入单元，如果在从用户登录所述信息处理装置到所述用户退出所述信息处理装置期间满足预定条件即用户未进行除退出操作之外的操作，则所述写入单元将由所述获取单元获取的所述面部信息作为与所述用户的标识符相关联的第二面部信息写入所述存储器中；以及

限制单元，如果相对于由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件，则所述限制单元限制与所述第二面部信息相关联的所述标识符的所述用户的登录，

如果相对于由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件、并且相对于由所述获取单元获取的所述面部信息，与所述第二面部信息不相关联的所述第一面部信息满足预定条件，则所述限制单元不限制与所述第一面部信息相关联的所述标识符的所述用户的登录。

2.根据权利要求1所述的信息处理装置，其中，

所述信息处理装置还具有判断单元，如果相对于由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件，则所述判断单元针对除了与所述第二面部信息对应的标识符的用户以外的所述第一面部信息，判断所述存储器中是否存在满足预定条件的第一面部信息。

3.一种信息处理方法，其特征在于，包括：

获取步骤，获取单元获取面部信息，所述面部信息表示由图像捕获单元捕获的用户的面部；

存储步骤，将允许登录所述信息处理装置的用户的标识符和表示所述用户的面部的第一面部信息相关联地进行存储；

写入步骤，如果在从用户登录所述信息处理装置到所述用户退出所述信息处理装置期间满足预定条件即用户未进行除退出操作之外的操作，则将由所述获取单元获取的所述面部信息作为与所述用户的标识符相关联的第二面部信息写入存储器中；以及

限制步骤，如果相对于由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件，则限制与所述第二面部信息相关联的所述标识符的所述用户的登录，

如果相对于由所述获取单元获取的所述面部信息，所述第二面部信息满足预定条件、并且相对于由所述获取单元获取的所述面部信息，与所述第二面部信息不相关联的所述第一面部信息满足预定条件，则不限制与所述第一面部信息相关联的所述标识符的所述用户的登录。