CN112016070A - 信息处理装置、控制方法和存储介质 - Google Patents

信息处理装置、控制方法和存储介质 Download PDF

Info

Publication number
CN112016070A
CN112016070A CN202010441623.8A CN202010441623A CN112016070A CN 112016070 A CN112016070 A CN 112016070A CN 202010441623 A CN202010441623 A CN 202010441623A CN 112016070 A CN112016070 A CN 112016070A
Authority
CN
China
Prior art keywords
login
user
face authentication
processing apparatus
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010441623.8A
Other languages
English (en)
Inventor
细田泰弘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN112016070A publication Critical patent/CN112016070A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/34—User authentication involving the use of external additional devices, e.g. dongles or smart cards
    • G06F21/35—User authentication involving the use of external additional devices, e.g. dongles or smart cards communicating wirelessly
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1238—Secure printing, e.g. user identification, user rights for device usage, unallowed content, blanking portions or fields of a page, releasing held jobs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/169—Holistic features and representations, i.e. based on the facial image taken as a whole
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G06V40/173—Classification, e.g. identification face re-identification, e.g. recognising unknown faces across different face tracks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computing Systems (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Signal Processing (AREA)
  • Facsimiles In General (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明公开了信息处理装置、控制方法和存储介质。在信息处理装置中启用了人脸认证登录功能和简单登录功能的至少两种登录功能的情况下，信息处理装置基于指示出允许用户登录到信息处理装置的条件被满足的人脸认证结果来执行登录处理并且显示登录后的画面，并且信息处理装置基于指示出允许用户登录到信息处理装置的条件不被满足的人脸认证结果来在登录画面上显示与从人脸认证结果获得的一个或多个候选者中的每个候选者对应的按钮，在按钮被选择后执行登录处理，并且显示登录后的画面。

Description

信息处理装置、控制方法和存储介质
技术领域
本发明涉及包括人脸认证登录功能的信息处理装置、控制方法和存储介质。
背景技术
已知包括人脸认证登录功能的信息处理装置(参见日本专利申请特许公开No.2015-35178)。此外，已知提供简单登录功能的信息处理装置，其中分别与多个用户对应的按钮被显示在画面上并且用户按下与该用户对应的按钮(参见日本专利申请特许公开No.2015-227048)。
发明内容
根据本发明的一方面，信息处理装置提供人脸认证登录功能和简单登录功能。人脸认证登录功能允许通过基于用相机捕获用户的图像所取得的人脸数据进行人脸认证而识别出的用户登录到信息处理装置。简单登录功能允许基于从与登录画面上显示的多个用户对应的按钮中选择的按钮而识别出的用户登录到信息处理装置。信息处理装置包括设定单元，该设定单元被配置成接收用于启用人脸认证登录功能和简单登录功能的至少两个登录功能的设定。在信息处理装置中启用了人脸认证登录功能和简单登录功能的至少两个登录功能的情况下，信息处理装置基于指示出允许用户登录到信息处理装置的条件被满足的人脸认证结果来执行登录处理并且显示登录后的画面，并且，信息处理装置基于指示出允许用户登录到信息处理装置的条件不被满足的人脸认证结果来在登录画面上显示与从人脸认证结果获得的一个或多个候选者中的每个候选者对应的按钮，在按钮被选择后执行登录处理，并且显示登录后的画面。
通过以下参考附图对示例性实施例的描述，本发明的其它特征将变得清楚。
附图说明
图1是图示出系统配置的图。
图2是图示出多功能外围设备(MFP)的硬件配置的框图。
图3是图示出系统中的MFP和人脸认证服务器中的每个的软件配置的框图。
图4A和图4B是图示出要在MFP的操作单元上显示的用户界面的图。
图5是图示出人脸认证处理的流程图。
图6A和图6B是图示出在人脸认证之后的简单登录画面的图。
图7是图示出当检测到多个人脸时的捕获图像的图。
具体实施方式
存在使用人脸认证的登录并非一直都成功的问题。在一些情况下，人脸认证失败，而在其它情况下，作为人脸认证的结果，尝试登录的用户的候选者的数量无法缩小到一个，从而用户无法登录。为了应对这个问题，能够将人脸认证登录功能与如下的登录功能(称为简单登录功能)一起使用，其中在画面上显示与多个用户对应的按钮并且提示每个用户选择与该用户对应的按钮以允许该用户登录。但是，仅组合使用两个登录功能是不合适的，这是因为每个用户搜索与该用户对应的按钮花费时间和精力。
本发明致力于提供两种登录功能，即，人脸认证登录功能和简单登录功能，并且致力于使用户能够在没有任何混乱的情况下登录到信息处理装置，由此提高用户友好性。
下面将参考附图描述本发明的示例性实施例。
<系统配置>
图1是图示出包括对其应用本发明的图像形成装置的系统的结构的图。多功能外围设备(MFP)101是对其应用本发明的信息处理装置的示例。MFP 101使用相机单元捕获接近MFP 101的用户的图像，并且执行人脸认证。如果人脸认证的结果满足用于允许用户登录的特定条件，那么MFP 101允许用户自动登录。如果人脸认证的结果不满足用于允许用户自动登录的条件，那么MFP 101将使用人脸认证的结果的简单登录功能作为替代登录功能提供给用户。
人脸认证服务器102是接收人脸数据、执行人脸认证并返回认证结果(即，候选者的标识符和评分)的人脸认证服务器。人脸数据是关于捕获的人脸图像的数据，或者是通过使用已有技术从人脸图像中提取人脸的特征量而获得的数据。MFP 101和人脸认证服务器102经由局域网(LAN)或因特网连接。在本示例性实施例中，人脸认证服务器102是被构建为云服务上的虚拟服务器的服务。但是，作为人脸认证服务器102，可以使用在内联网上设定的服务器，或者也可以使用结合在MFP 101中的人脸认证功能。术语“人脸认证登录功能”是指用于执行人脸认证以允许用户登录的功能。人脸认证登录功能也简称为人脸认证功能。
<MFP的硬件配置>
图2是简单地图示出MFP 101的硬件配置的框图。中央处理单元(CPU)201是控制整个MFP 101的操作的处理器。随机存取存储器(RAM)203是易失性存储器，并且被用作用于加载存储在只读存储器(ROM)202和硬盘驱动器(HDD)204中的各种控制程序的临时存储区域。
ROM 202是非易失性存储器，并且存储用于MFP 101的引导程序。HDD 204是容量大于RAM 203的容量的非易失性硬盘。HDD 204存储用于MFP 101的控制程序。HDD 204还存储操作系统(OS)和应用程序。
当MFP 101启动时，CPU 201执行存储在ROM 202中的引导程序。引导程序被用于读出存储在HDD 204中的OS的程序，并将该程序加载到RAM 203中。在执行引导程序之后，CPU201执行加载到RAM 203中的OS的程序，由此控制MFP 101。另外，CPU 201还将用于控制程序的操作的数据存储在RAM 203中，并且读取和写入该数据。
在MFP 101中，单个CPU 201执行以下将描述的流程图中所示的每个处理，但是MFP101可以替代地具有其他配置。例如，以下将要描述的流程图中示出的每个处理可以由多个CPU或微处理器(MPU)协作地执行。可替代地，以下将描述的处理的一部分可以由诸如专用集成电路(ASIC)或现场可编程门阵列(FPGA)之类的硬件电路执行。
操作单元205是可以在其上执行触摸操作的显示器。在操作单元205上显示以下将要描述的各种用户界面。打印机206是用于打印经由通信单元207从外部装置接收的打印数据的打印机引擎。通信单元207是用于将信息处理装置连接到因特网或办公室中的LAN的网络接口。
集成电路(IC)卡读取器208是用于从IC卡中读出用于用户认证的信息的单元，并且是实现IC卡认证所使用的单元。相机209是用于捕获使用MFP 101的用户的人脸图像的相机单元。相机209可以是可经由通用串行总线(USB)或无线LAN连接到信息处理装置的外部相机。
<软件配置>
图3是简单地图示出MFP 101和人脸认证服务器102的每个的软件配置的框图。
<人脸认证服务器的软件配置>
将描述人脸认证服务器102的软件配置。表征状态转移(REST)服务310是使用REST从经由因特网连接的终端(包括MFP 101)接收人脸数据注册请求和人脸认证请求的服务。例如，REST服务310使用REST接收人脸数据和用户名，并且将接收到的人脸数据和用户名彼此关联地注册在人脸数据管理单元312中。此时，发布个人标识(ID)作为用于标识每个用户的唯一ID，并将该个人ID通知给发送了请求的终端。例如，人脸数据管理单元312管理多个用户的人脸数据，如表1中所示。
表1
个人ID 用户名 人脸数据
96df7500-7e82… Alice ********
6fc11e17-faf4… Carol ********
1fb233f6-1f8e… Dave ********
如果REST服务310接收到人脸数据以及人脸认证请求，那么人脸认证单元311参考表1中所示的关于注册用户的数据，并获得候选者并为每个候选者计算评分。评分以百分比表示指示出候选者是基于接收到的人脸数据计算出的用户的可能性的值。代替以百分比表示评分，可以用自然数的值的大小来表示评分。在一些情况下，计算结果可以指示出候选者的数量为零。在其它情况下，可以针对单个人的人脸数据识别出多个候选者，并且可以计算针对每个识别出的候选者的评分。如果在接收到的人脸数据中包括多个人脸数据，那么获得多个候选者并且计算针对每个候选者的评分。计算结果经由REST服务310返回给终端。
如上所述的云服务一般被称为认知服务。用于提供人脸认证功能的服务的示例是Microsoft公司提供的
Figure BDA0002504191880000052
例如，
Figure BDA0002504191880000053
提供用于接收请求的REST服务，如表2中所示。
表2
Figure BDA0002504191880000051
MFP 101如上所述地与认知服务协作以向用户提供人脸认证登录功能。
<MFP的软件配置>
将描述MFP 101的软件配置。MFP 101的本地用户界面(UI)301在操作单元205的显示器上为用户提供用于改变MFP 101的设定以及使用MFP 101的功能的用户界面。图4A和图4B图示出由本地UI 301提供的用户界面的示例。远程UI 302包括超文本传输协议(HTTP)服务器功能，并向用户提供由超文本标记语言(HTML)构成的用户界面。用户可以使用用户终端的web浏览器来访问远程UI 302，并且可以改变MFP 101的设定以及使用MFP 101的功能。登录服务303是用于认证使用本地UI 301或远程UI 302的用户并使得已认证的用户登录到MFP 101的软件模块。在登录服务303中，可以经由诸如本地UI 301或远程UI 302之类的用户界面在HDD 204中注册管理员和普通用户的账户。表3图示出存储在HDD 204中的账户信息的示例。作为账户信息，可以在HDD 204中注册用户名、密码、IC卡的卡ID、角色(管理员/普通用户)、电子邮件地址等。此外，空白的个人ID字段指示没有为用户注册人脸认证。
表3
Figure BDA0002504191880000061
在MFP 101的出厂默认设定中，用户认证功能被禁用。在MFP 101启动后，本地UI301显示用于选择应用的选单画面401。本文使用的术语“用户认证功能”不完全指示用户认证功能，这是因为简单登录功能在不执行用户认证的情况下识别每个用户并允许识别出的用户登录。但是，术语“用户认证功能”的使用使得MFP 101的用户能够容易地理解该功能。因而，在本示例性实施例中使用术语“用户认证功能”。可以从用户认证设定画面402中选择的用户认证功能也可以被称为登录功能。
用户可以经由选单画面401显示用户认证设定画面402。可以在用户认证设定画面402上选择启用/禁用用户认证功能。当选择启用用户认证功能时，可以从键盘认证功能、简单登录功能、IC卡认证功能和人脸认证功能中选择一个或多个登录功能。用户认证设定画面402表示启用用户认证功能并且选择了所有登录功能的状态。
当启用人脸认证功能时，可以在文本框413中输入和设定用于允许用户通过人脸认证自动登录到MFP 101的评分的阈值。例如，将范围从1到100的值设定为评分。代替要求用户输入值，可以向用户呈现诸如“大”、“中”和“小”之类的选项以供从选项中选择一个，或者可以通过诸如滑动条之类的UI部件来设定值。用户选择的设定被存储在HDD 204中，并且登录服务303参考该设定并启动与用户选择的设定对应的登录功能。
如果启用了所有登录功能(键盘认证功能、简单登录功能、IC卡认证功能和人脸认证功能)，那么本地UI 301显示简单登录画面403。在简单登录画面403被显示的同时，用户仍然可以通过将他/她的IC保持在IC卡读取器208上方来执行IC卡认证，并且用户仍然可以通过选择按钮406以使画面转换到键盘认证画面412来执行键盘认证。换句话说，如果将简单登录功能设定为登录功能，那么即使启用了其它登录功能，本地UI 301也显示简单登录画面403。如果未设定简单登录功能并且仅启用了键盘认证，那么显示键盘认证画面412。如果仅启用IC卡认证或者启用IC卡认证和键盘认证二者，那么显示IC卡认证画面414。IC卡认证画面414提供用于显示键盘认证画面412的按钮415。
登录服务303不允许仅启用人脸认证功能作为登录功能的操作。如果用户从用户认证设定画面402设定了人脸认证功能，那么本地UI 301控制该画面以使得除人脸认证功能以外的三种认证功能中的至少一种被设定。简单登录画面403显示分别与注册用户对应的按钮。每个用户将选择与该用户对应的按钮，以便该用户登录到MFP 101。此时，执行参考与所选择的按钮对应的用户ID的处理，并且不执行用于核实认证信息的所谓认证处理。更具体而言，用户不需要经由IC卡或键盘输入认证信息。
如果分别与注册用户对应的按钮数量太大以至于无法在一个画面上显示所有按钮，那么这些按钮被显示在多页上。按钮407指示当前显示页面的页编号，并且用于页面转换。简单登录画面403包括按钮排序功能。下拉框404被用于选择对按钮进行排序的次序。作为对按钮进行排序的次序，例如，可以选择字母次序、注册的降序和上次登录时间的降序。
新用户注册按钮405被用于注册普通用户的账户。在检测到新用户注册按钮405被按下时，本地UI 301显示用户注册画面408。用户注册画面408接收输入信息，诸如新注册用户的用户名、密码和电子邮件地址。简单登录画面403提供了用于选择要与和用户对应的按钮一起显示的图标的功能。如果检测到按下了卡ID注册按钮409，那么操作IC卡读取器208以使得能够经由IC卡读取器驱动器304读取IC卡上的数据。当将IC卡保持在IC卡读取器208上方时，取得卡ID。
如果检测到按下了人脸图像注册按钮410，那么经由相机驱动器305操作相机209以捕获在MFP 101前面的用户的图像。另外，通过使用人脸检测库306对取得的图像执行人脸检测处理，以检查图像中是否包括人脸图像。开源OpenCV一般已知为具有功能的库的示例，诸如图像处理功能、图像分析功能和机器学习功能。作为人脸检测库306，可以使用如上所述的任何开源库。不是必须在用户注册画面408上注册卡ID或人脸图像，并且卡ID或人脸图像可以不被注册。
如果检测到按下了注册按钮411，那么将取得的信息作为账户信息(表3)注册在HDD 204中。如果通过按下人脸图像注册按钮410取得了包括人脸图像的图像，那么用于注册人脸数据的请求经由人脸认证服务器通信单元307被发送到人脸认证服务器102的REST服务310。在这种情况下，根据需要，以人脸认证服务器102支持的格式(诸如图像文件或通过计算仅人脸的特征量而获得的值)发送人脸数据。登录服务303接收作为对注册人脸数据的请求的响应的个人ID，并将个人ID作为账户信息(表3)注册在HDD 204中。
登录服务303可以基于账户信息(表3)中个人ID的存在来确定用户是否已注册了人脸图像。可以与存储在HDD 204中的账户信息相关联地记录人脸图像文件或指示人脸图像是否已被注册的信息。关于账户信息的注册，可以提供用于集体地注册关于多个用户的账户信息的功能(使用本地UI 301或远程UI 302作为用于MFP 101的管理员的UI)。管理员用来集体地注册账户信息的卡ID和人脸图像可以是从MFP 101的IC卡读取器208和相机209以外的装置取得的数据。
在检测到IC卡后，登录服务303参考存储在HDD 204中的账户信息，并允许与卡ID对应的用户登录到MFP 101。在检测到按下了用于显示键盘认证画面的按钮406后，显示键盘认证画面412以接收用户名和密码的输入。登录服务303将在键盘认证画面412上输入的用户名和密码与存储在HDD 204中的账户信息进行比较，并允许与该用户名和密码对应的用户登录到MFP 101。
登录服务303存储称为登录上下文的对象作为关于登录用户的信息，并将该对象发送到其他软件模块。表4中图示出要存储为登录上下文的信息的示例。如表4中所示，登录用户的用户名、角色和电子邮件地址被存储为登录上下文。
表4
项 值
登录用户名 Alice
角色 普通用户
电子邮件 alice@wxyz.com
如果到MFP 101的登录成功，那么本地UI 301关闭诸如简单登录画面403之类的登录画面，并使该画面转换到选单画面401。作为选单画面401，在通过参考上述登录上下文识别出登录用户之后，提供用于登录用户的选单画面。选单画面和用于各种功能(例如，复印、扫描)的画面提供了用于基于用户偏好来使画面个性化的功能。
<人脸认证操作流程>
接下来，将参考图5中所示的流程图描述当登录服务303执行人脸认证时要执行的操作。本示例性实施例描述了如下的配置，其中如上所述启用人脸认证功能和简单登录功能的至少两种登录功能。登录服务303由MFP 101的CPU 201执行，CPU 201控制被加载到RAM203中的登录服务303的程序。
当在本地UI 301上显示简单登录画面403时，在步骤S501中，登录服务303经由相机驱动器305激活相机209，并开始捕获接近MFP 101的用户的图像。在步骤S502中，登录服务303定期从相机209取得捕获的图像。接下来，在步骤S503中，登录服务303通过使用人脸检测库306对取得的捕获的图像执行人脸检测处理，检查是否捕获了人脸图像，并确定捕获了多少个人脸图像。
如果检测到的人脸图像的数量为零(没有捕获到人脸图像)，那么处理返回到步骤S502以取得新的捕获图像。如果检测到的人脸图像的数量为一个，那么处理前进到步骤S504。在步骤S504中，执行人脸认证处理。此外，在步骤S504中，将取得的捕获图像和人脸认证请求发送到人脸认证服务器102的REST服务310，并且取得每个候选者的个人ID、用户名和人脸认证评分作为对人脸认证请求的响应。
接下来，在步骤S505中，登录服务303检查从人脸认证服务器102取得的候选者的数量。如果取得的候选者数量为一个，那么处理前进到步骤S506。在步骤S506中，登录服务303确定取得的评分是否大于或等于阈值。阈值是在文本框413中设定的值。阈值可以是作为MFP 101的出厂默认设定值而预先记录在MFP 101的ROM 202上的值。如果评分大于或等于阈值(在S506中为“是”)，那么处理前进到步骤S507。在步骤S507中，允许一个识别出的候选者登录到MFP 101。在步骤S507的登录处理中，登录服务303参考账户信息(表3)并取得与从人脸认证服务器102取得的用户名和个人ID对应的用户的角色和电子邮件地址，以生成登录上下文(表4)。接下来，在步骤S508中，登录服务303通过在本地UI 301的画面上显示选单画面401作为登录后的画面来提供登录用户可用的功能。
在步骤S505中，如果取得的候选者的数量为零个，那么可以确定接近MFP 101的用户可能是未注册人脸图像的用户或未注册账户信息的用户。因而，处理前进到步骤S509。在步骤S509中，登录服务303定制简单登录画面403以使得显示与未注册人脸图像的用户对应的按钮，并显示定制的简单登录画面。图6A和图6B图示出在人脸认证之后定制的简单登录画面的示例。例如，如果未注册Bob和Frank的人脸图像，那么如画面601中所示，仅显示与Bob和Frank对应的按钮。另外，由于存在该用户可能是未注册账户信息的用户的可能性，因此可以以突出的方式显示新用户注册按钮405。
如果即使在步骤S505中取得的候选者的数量为一个时也在步骤S506中确定取得的评分小于阈值(S506中为“否”)，那么处理前进到步骤S510。在步骤S510中，登录服务303定制简单登录画面以使得显示与一个候选者对应的按钮，并且显示定制的简单登录画面。例如，如果一个候选者是Alice，那么如画面602中所示，仅显示与Alice对应的按钮。在步骤S505中，如果取得的候选者的数量为两个或更多个，那么处理前进到步骤S511。在步骤S511中，按照评分的降序显示与评分较高的候选者对应的按钮。例如，如果在步骤S504中取得了将在下面描述的表5中所示的用户名和评分，那么登录服务303按照评分的降序(即，以Alice和Carol的次序)显示与Alice和Carol对应的按钮，如画面603中所示。画面603指示最左侧显示的用户具有最高评分，而其他用户从左到右按照降序具有较低的评分。
表5
用户名 评分
Alice 70
Coral 15
在步骤S503中，如果检测到的人脸图像的数量为两个或更多个，那么处理前进到步骤S512。在步骤S512中，切出具有与每个检测到的人脸图像的边缘对应的边缘的矩形。然后，比较切出的矩形的大小。确定较大的矩形指示用户位于更靠近MFP 101的位置，并且该用户可能正在尝试登录到MFP 101。例如，作为人脸检测的结果，从图7所示的捕获图像中切出矩形701和702。在图7中所示的捕获图像中，由矩形701指示的人脸图像大于由矩形702指示的人脸图像。换句话说，与在捕获图像中具有较高占用面积比的人脸图像对应的用户可以被认为是试图登录到MFP 101的用户。
接下来，在步骤S513中，将由矩形701指示的人脸图像和人脸认证请求发送到人脸认证服务器102的REST服务310，并且取得候选者的个人ID、用户名和人脸认证评分作为对人脸认证请求的响应。另外，由矩形702指示的人脸图像和人脸认证请求被发送到人脸认证服务器102的REST服务310，并且取得候选者的个人ID、用户名和人脸认证评分作为对人脸认证请求的响应。例如，如果作为对由矩形701指示的人脸图像执行人脸认证的结果而取得了表6中所示的用户名和评分，并且如果作为对由矩形702指示的人脸图像执行了人脸认证的结果，登录服务303取得了表7中所示的用户名和评分，那么在S514中，登录服务303通过按照人脸图像的大小的降序和评分的降序布置按钮来显示与候选者对应的按钮，如画面604中所示。虽然在以下描述的示例中Alice的评分最高，但由于人脸图像的大小优先于评分，因此按Grace、Ellen、Alice和Carol的次序显示按钮。更具体而言，基于多个人脸图像中的每个人脸图像的矩形区域来确定第一显示次序，然后基于每个人脸图像的评分来确定第二显示次序。
表6
用户名 评分
Grace 60
Ellen 10
表7
用户名 评分
Alice 70
Carol 15
向使用人脸认证功能登录失败的用户提供简单登录画面(601、602、603和604)，并提示用户按下按钮以登录到MFP 101。另外，为了防止错误检测、不正确操作或被他人欺骗，可以显示用于输入密码的画面以提示用户在使用人脸认证功能登录期间或通过按下简单登录功能的按钮登录期间输入密码。
在如画面601、602、603和604中所图示的那样过滤和显示仅要显示的按钮的情况下，由于例如人脸认证中的错误检测，在一些情况下可能不显示与注册了账户信息的用户对应的按钮。为此，在简单登录画面上显示用于显示所有按钮的按钮605。
此外，在过滤和显示仅与要显示的候选者对应的按钮的情况下，在一些情况下可能显示大量按钮。因此，提供了用于按钮排序功能的下拉框404。不仅可以按照评分的降序对按钮进行排序，而且可以按照字母次序、注册的降序、最后登录时间的降序等对按钮进行排序。更具体而言，虽然与用户对应的按钮通过图5中所示的处理按照评分的降序排序，但是用户可以将排序次序改为任意次序。
代替仅显示要显示的按钮，所有按钮都可以一直显示。在这种情况下，可以从顶部开始依次显示要显示的按钮，并且可以按照字母次序布置其它不显示的按钮并在多页上显示。
如上所述，根据本发明示例性实施例的图像形成装置基于候选者的数量和评分来限制允许用户使用人脸认证功能登录的条件，由此降低了不同用户自动登录的安全性风险。另外，即使当用户不能使用人脸认证功能进行登录时，也如画面601、602、603和604中所示显示与更可能是该用户的候选者对应的按钮。因此，与不使用人脸认证的简单登录画面相比，用户友好性得到了增强。
其它实施例
本发明的(一个或多个)实施例还可以通过读出并执行记录在存储介质(其也可以被更完整地称为“非瞬态计算机可读存储介质”)上的计算机可执行指令(例如，一个或多个程序)以执行上述(一个或多个)实施例中的一个或多个实施例的功能和/或包括用于执行上述(一个或多个)实施例中的一个或多个实施例的功能的一个或多个电路(例如，专用集成电路(ASIC))的系统或装置的计算机来实现，以及通过例如从存储介质读出并执行计算机可执行指令以执行上述(一个或多个)实施例中的一个或多个实施例的功能和/或控制一个或多个电路执行上述(一个或多个)实施例中的一个或多个实施例的功能而通过由系统或装置的计算机执行的方法来实现。计算机可以包括一个或多个处理器(例如，中央处理单元(CPU)、微处理单元(MPU))，并且可以包括单独计算机或单独处理器的网络，以读出并执行计算机可执行指令。计算机可执行指令可以例如从网络或存储介质提供给计算机。存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算系统的存储装置、光盘(诸如紧凑盘(CD)、数字多功能盘(DVD)或蓝光盘(BD)TM)、闪存设备、存储卡等。
其它实施例
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然已经参考示例性实施例描述了本发明，但是应该理解的是，本发明不限于所公开的示例性实施例。所附权利要求的范围应被赋予最广泛的解释，以涵盖所有这些修改以及等同的结构和功能。

Claims (20)

1.一种信息处理装置，提供人脸认证登录功能和简单登录功能，人脸认证登录功能允许通过基于用相机捕获用户的图像所取得的人脸数据进行人脸认证而识别出的用户登录到信息处理装置，简单登录功能允许基于从与登录画面上显示的多个用户对应的按钮中选择的按钮而识别出的用户登录到信息处理装置，该信息处理装置包括：
设定部件，被配置成接收用于启用人脸认证登录功能和简单登录功能的至少两个登录功能的设定，
其中，在信息处理装置中启用了人脸认证登录功能和简单登录功能的至少两个登录功能的情况下，信息处理装置基于指示出允许用户登录到信息处理装置的条件被满足的人脸认证结果来执行登录处理并且显示登录后的画面，并且信息处理装置基于指示出允许用户登录到信息处理装置的条件不被满足的人脸认证结果来在登录画面上显示与从人脸认证结果获得的一个或多个候选者中的每个候选者对应的按钮，在按钮被选择后执行登录处理，并且显示登录后的画面。
2.根据权利要求1所述的信息处理装置，其中，在关于作为人脸认证的结果而识别出的一个用户的人脸数据的评分小于阈值的情况下，在登录画面上显示与从人脸认证的结果获得的用户对应的按钮作为候选者按钮。
3.根据权利要求1所述的信息处理装置，其中，在作为人脸认证的结果根据关于一个人的人脸数据识别出两个或更多个用户的情况下，基于从人脸认证的结果获得的所述两个或更多个用户的评分，按照评分的降序在登录画面上显示与候选者对应的按钮。
4.根据权利要求1所述的信息处理装置，其中，在作为人脸认证的结果没有识别出用户作为候选者的情况下，在登录画面上显示与未注册人脸数据的用户对应的按钮作为候选者按钮。
5.根据权利要求1所述的信息处理装置，其中，在用相机捕获的数据包括关于两个或更多个人的人脸数据的情况下，对所述关于两个或更多个人的人脸数据中的每个人脸数据执行人脸认证，并且按照数据中人脸数据的占用面积比的降序在登录画面上显示与候选者对应的按钮。
6.根据权利要求5所述的信息处理装置，其中，在当按照数据中人脸数据的占用面积比的降序布置与候选者对应的按钮时根据关于一个人的人脸数据识别出两个或更多个用户的情况下，基于从人脸认证的结果获得的所述两个或更多个用户的评分，按照评分的降序在登录画面上显示与候选者对应的按钮，并且按照占用面积比的降序在登录画面上显示与候选者对应的按钮。
7.根据权利要求1所述的信息处理装置，其中，设定部件接收由用户在用于选择登录功能的设定画面上选择的登录功能作为有效登录功能的设定。
8.根据权利要求1所述的信息处理装置，其中，在与所述一个或多个候选者中的每个候选者对应的按钮被显示在登录画面上的情况下，与未被选为候选者的其他用户对应的按钮不被显示在登录画面上。
9.一种用于控制信息处理装置的控制方法，该信息处理装置提供人脸认证登录功能和简单登录功能，人脸认证登录功能允许通过基于用相机捕获用户的图像所取得的人脸数据进行人脸认证而识别出的用户登录到信息处理装置，简单登录功能允许基于从与登录画面上显示的多个用户对应的按钮中选择的按钮而识别出的用户登录到信息处理装置，该控制方法包括：
设定步骤，接收用于启用人脸认证登录功能和简单登录功能的至少两个登录功能的设定，
其中，在信息处理装置中启用了人脸认证登录功能和简单登录功能的至少两个登录功能的情况下，信息处理装置基于指示出允许用户登录到信息处理装置的条件被满足的人脸认证结果来执行登录处理并且显示登录后的画面，并且信息处理装置基于指示出允许用户登录到信息处理装置的条件不被满足的人脸认证结果来在登录画面上显示与从人脸认证结果获得的一个或多个候选者中的每个候选者对应的按钮，在按钮被选择后执行登录处理，并且显示登录后的画面。
10.根据权利要求9所述的控制方法，其中，在关于作为人脸认证的结果而识别出的一个用户的人脸数据的评分小于阈值的情况下，在登录画面上显示与从人脸认证的结果获得的用户对应的按钮作为候选者按钮。
11.根据权利要求9所述的控制方法，其中，在作为人脸认证的结果根据关于一个人的人脸数据识别出两个或更多个用户的情况下，基于从人脸认证的结果获得的所述两个或更多个用户的评分，按照评分的降序在登录画面上显示与候选者对应的按钮。
12.根据权利要求9所述的控制方法，其中，在作为人脸认证的结果没有识别出用户作为候选者的情况下，在登录画面上显示与未注册人脸数据的用户对应的按钮作为候选者按钮。
13.根据权利要求9所述的控制方法，其中，在用相机捕获的数据包括关于两个或更多个人的人脸数据的情况下，对所述关于两个或更多个人的人脸数据中的每个人脸数据执行人脸认证，并且按照数据中人脸数据的占用面积比的降序在登录画面上显示与候选者对应的按钮。
14.根据权利要求9所述的控制方法，其中，接收设定的设定步骤接收由用户在用于选择登录功能的设定画面上选择的登录功能作为有效登录功能的设定。
15.一种非暂态计算机可读存储介质，存储用于执行用于控制信息处理装置的控制方法的程序,该信息处理装置提供人脸认证登录功能和简单登录功能，人脸认证登录功能允许通过基于用相机捕获用户的图像所取得的人脸数据进行人脸认证而识别出的用户登录到信息处理装置，简单登录功能允许基于从与登录画面上显示的多个用户对应的按钮中选择的按钮而识别出的用户登录到信息处理装置，该控制方法包括：
接收用于启用人脸认证登录功能和简单登录功能的至少两个登录功能的设定的步骤，
其中，在信息处理装置中启用了人脸认证登录功能和简单登录功能的至少两个登录功能的情况下，信息处理装置基于指示出允许用户登录到信息处理装置的条件被满足的人脸认证结果来执行登录处理并且显示登录后的画面，并且信息处理装置基于指示出允许用户登录到信息处理装置的条件不被满足的人脸认证结果来在登录画面上显示与从人脸认证结果获得的一个或多个候选者中的每个候选者对应的按钮，在按钮被选择后执行登录处理，并且显示登录后的画面。
16.根据权利要求15所述的非暂态计算机可读存储介质，其中，在关于作为人脸认证的结果而识别出的一个用户的人脸数据的评分小于阈值的情况下，在登录画面上显示与从人脸认证的结果获得的用户对应的按钮作为候选者按钮。
17.根据权利要求15所述的非暂态计算机可读存储介质，其中，在作为人脸认证的结果根据关于一个人的人脸数据识别出两个或更多个用户的情况下，基于从人脸认证的结果获得的所述两个或更多个用户的评分，按照评分的降序在登录画面上显示与候选者对应的按钮。
18.根据权利要求15所述的非暂态计算机可读存储介质，其中，在用相机捕获的数据包括关于两个或更多个人的人脸数据的情况下，对所述关于两个或更多个人的人脸数据中的每个人脸数据执行人脸认证，并且按照数据中人脸数据的占用面积比的降序在登录画面上显示与候选者对应的按钮。
19.根据权利要求15所述的非暂态计算机可读存储介质，其中，在用相机捕获的数据包括关于两个或更多个人的人脸数据的情况下，对所述关于两个或更多个人的人脸数据中的每个人脸数据执行人脸认证，并且按照数据中人脸数据的占用面积比的降序在登录画面上显示与候选者对应的按钮。
20.根据权利要求15所述的非暂态计算机可读存储介质，其中，接收设定的设定步骤接收由用户在用于选择登录功能的设定画面上选择的登录功能作为有效登录功能的设定。
CN202010441623.8A 2019-05-31 2020-05-22 信息处理装置、控制方法和存储介质 Pending CN112016070A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-102880 2019-05-31
JP2019102880A JP7330766B2 (ja) 2019-05-31 2019-05-31 情報処理装置、制御方法およびプログラム

Publications (1)

Publication Number Publication Date
CN112016070A true CN112016070A (zh) 2020-12-01

Family

ID=73506600

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010441623.8A Pending CN112016070A (zh) 2019-05-31 2020-05-22 信息处理装置、控制方法和存储介质

Country Status (3)

Country Link
US (1) US20200380103A1 (zh)
JP (1) JP7330766B2 (zh)
CN (1) CN112016070A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112905131A (zh) * 2021-02-05 2021-06-04 深圳市商汤科技有限公司 自助打印后台的兼容方法及装置、设备、存储介质和系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023141022A (ja) * 2022-03-23 2023-10-05 東芝テック株式会社 画像形成装置、および制御方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009199235A (ja) * 2008-02-20 2009-09-03 Ricoh Co Ltd 画像処理装置、認証方法、認証プログラム、及び記録媒体
CN104158790A (zh) * 2013-05-14 2014-11-19 腾讯科技（深圳）有限公司 用户登录方法、装置及设备
CN105100108A (zh) * 2015-08-18 2015-11-25 赛肯(北京)科技有限公司 一种基于人脸识别的登录认证方法、装置及系统
CN105706102A (zh) * 2013-11-07 2016-06-22 索尼互动娱乐公司 信息处理设备
CN106993106A (zh) * 2015-12-11 2017-07-28 佳能株式会社 信息处理系统、信息处理设备、服务器和信息处理方法
JP2018197980A (ja) * 2017-05-24 2018-12-13 シャープ株式会社 画像表示装置、画像形成装置、制御プログラムおよび制御方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6100467B2 (ja) * 2012-03-05 2017-03-22 ホーチキ株式会社 出入管理システム及び認証装置
JP6418033B2 (ja) * 2015-03-30 2018-11-07 オムロン株式会社 個人識別装置、識別閾値設定方法、およびプログラム
JP6833571B2 (ja) * 2017-03-10 2021-02-24 キヤノン株式会社 画像処理装置、画像処理システム、および、制御方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009199235A (ja) * 2008-02-20 2009-09-03 Ricoh Co Ltd 画像処理装置、認証方法、認証プログラム、及び記録媒体
CN104158790A (zh) * 2013-05-14 2014-11-19 腾讯科技（深圳）有限公司 用户登录方法、装置及设备
CN105706102A (zh) * 2013-11-07 2016-06-22 索尼互动娱乐公司 信息处理设备
US20160301692A1 (en) * 2013-11-07 2016-10-13 Sony Interactive Entertainment Inc. Information processing apparatus
CN105100108A (zh) * 2015-08-18 2015-11-25 赛肯(北京)科技有限公司 一种基于人脸识别的登录认证方法、装置及系统
CN106993106A (zh) * 2015-12-11 2017-07-28 佳能株式会社 信息处理系统、信息处理设备、服务器和信息处理方法
JP2018197980A (ja) * 2017-05-24 2018-12-13 シャープ株式会社 画像表示装置、画像形成装置、制御プログラムおよび制御方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112905131A (zh) * 2021-02-05 2021-06-04 深圳市商汤科技有限公司 自助打印后台的兼容方法及装置、设备、存储介质和系统

Also Published As

Publication number Publication date
JP7330766B2 (ja) 2023-08-22
US20200380103A1 (en) 2020-12-03
JP2020197849A (ja) 2020-12-10

Similar Documents

Publication Publication Date Title
CN112424791B (zh) 信息处理装置、信息处理方法和信息处理程序
US9760274B2 (en) Information processing apparatus, information processing method, and computer-readable storage medium
US9491152B2 (en) Data transmission apparatus, data transmission method, and non-transitory computer readable medium
US9086827B2 (en) Job processing apparatus, job processing method for job processing apparatus, and storage medium
CN112016070A (zh) 信息处理装置、控制方法和存储介质
US11770489B2 (en) Image processing apparatus, control method for image processing apparatus, and storage medium
US11462056B2 (en) Information processing device including face authentication, control method, and medium
US11790063B2 (en) Information processing apparatus, control method, and medium
JP5892123B2 (ja) 情報処理装置及び情報処理プログラム
US20080184352A1 (en) Information processing apparatus, authentication system, authentication method, and authentication program using biometric information for authentication
US9372857B2 (en) Information processing apparatus, trail collection system, information processing method, and non-transitory computer readable medium
JP6245287B2 (ja) 情報処理装置及び情報処理プログラム
US11836233B2 (en) Image processing apparatus and authentication method using biometric information
US10706581B2 (en) Image processing apparatus for clipping and sorting images from read image according to cards and control method therefor
JP7409427B2 (ja) 情報処理装置、情報処理システム、及びプログラム
US10536451B2 (en) Authentication apparatus and authentication program
CN110942075A (zh) 信息处理装置、存储介质及信息处理方法
US11176617B1 (en) Mobile submission of pharmacy insurance information
WO2018128047A1 (ja) 電子機器
US11238144B2 (en) User selection assistance apparatus, image forming apparatus, user selection assistance method, and storage medium storing user selection assistance program
CN110942068A (zh) 信息处理装置、存储介质及信息处理方法
US20230236777A1 (en) Processing system, information processing apparatus, non-transitory computer-readable storage medium storing control program, and image processing apparatus
JP6866714B2 (ja) 画像処理装置、画像処理システム、画像処理方法、及びプログラム
WO2023153324A1 (ja) 証跡管理装置、証跡管理システム、証跡管理方法及び記録媒体
US20240104964A1 (en) Person authentication support system, person authentication support method, and non-transitory storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination