JP2021043585A - 情報処理装置、制御方法およびプログラム - Google Patents

Abstract

【課題】顔認証を利用しつつ円滑なユーザの交代を実現し、可用性を向上させた情報処理装置、制御方法及びプログラムを提供する。【解決手段】方法は、第１のユーザがログインしている状態で、第２のユーザの顔認証を行う第１の認証手段と、顔認証が成功した場合、顔認証とは異なる第２の方式でユーザの認証を行う第２の認証手段と、第２の認証手段による認証が成功し、認証されたユーザが第２のユーザである場合、第１のユーザから第２のユーザへとログインユーザを切り替える切り替え手段と、を有する。【選択図】図５

Description

本発明は、顔認証ログイン機能を備えた情報処理装置、制御方法およびプログラムに関する。

顔認証ログイン機能を備えた情報処理装置が知られている（特許文献１参照）。また、顔認証実施後のログアウト手法については、ログイン済みユーザを情報処理装置と接続されたカメラ等で追尾し、ユーザが離れたタイミングでログアウトさせる手法が提案されている（特許文献２参照）。

特開２０１５−３５１７８号公報 特開２０１５−４５９１６号公報

顔認証によるログアウト処理は特許文献２のようにユーザが離れたタイミングでログアウトさせる手法や、ログアウトボタン押下後、一定時間経過したタイミングで顔認証処理を実施する手法が存在する。これらのケースでは別ユーザが顔認証を実施し情報処理装置を利用する場合において、前ユーザが装置の利用を終えても直ちに次のユーザがログインできず、情報処理装置の生産性を低下させていた。

本発明は、上記課題を鑑みてなされたもので、顔認証を利用しつつ円滑なユーザの交代を実現し、可用性を向上させた情報処理装置を提供することを目的とする。

上記目的を達成するために本発明は以下の構成を有する。
本発明の一側面によれは、第１のユーザがログインしている状態で、第２のユーザの顔認証を行う第１の認証手段と、
前記顔認証が成功した場合、顔認証とは異なる第２の方式でユーザの認証を行う第２の認証手段と、
前記第２の認証手段による認証が成功し、認証されたユーザが前記第２のユーザである場合、前記第１のユーザから前記第２のユーザへとログインユーザを切り替える切り替え手段と
を有することを特徴とする情報処理装置が提供される。

本発明によれば、顔認証を利用しつつ円滑なユーザの交代を実現し、可用性を向上させた情報処理装置を提供することが可能となる。

システム構成を示す図である。 ＭＦＰ１０１のハードウェア構成を示す図である。 システムにおけるソフトウェア構成を示す図である。 ＭＦＰ１０１の操作部に表示されるユーザインタフェースの例を示す図である。 ＭＦＰ１０１の操作部に表示されるユーザインタフェースの例を示す図である。 割り込みログインによるユーザ切り替え処理を示すフローチャートである。 割り込んだユーザがログアウトする際の処理を示すフローチャートである。 図6の手順でログアウト処理が行われた際に表示されるユーザインタフェースの例を示す図である。

以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

［実施形態１］
＜システム構成＞
図１は、本発明を適用した画像形成装置を含む画像形成システム（あるいは顔認証システムと呼ぶこともある。）を示す構成図である。ＭＦＰ１０１はＭＦＰ(Multifunction Peripheral、多機能周辺機器)であり本実施形態の発明を適用した情報処理装置である。ＭＦＰ１０１はカメラユニットを用いてＭＦＰ１０１に近づくユーザを撮影し顔認証を実施する。顔認証の結果がユーザのログインを許可する特定の条件を満たす場合にＭＦＰ１０１はユーザを自動ログインさせる。顔認証に基づいて自動ログインさせる条件を満たさない場合は、顔認証結果を利用したシンプルログイン機能を代替ログイン手段としてユーザに提供する。なおシンプルログイン機能とは、ＭＦＰ１０１が印刷ジョブの受信時に当該ジョブのユーザ名を元にしてユーザ登録を行う機能と、登録されたユーザに対応するオブジェクト（例えばボタン）を画面に表示してユーザに自分のボタンを選択させてログインさせる機能とを含む。本実施形態ではさらにこのシンプルログイン機能に顔認証に用いる顔データの登録を組み合わせているがその詳細については例えば図５、図９等を参照して後で説明する。

顔認証サーバ１０２は、認証の要求元から顔データを受信して顔認証を実施し、認証結果（候補者の識別子とスコア）を認証の要求元へと返す。顔データは、撮影した顔画像そのもの、もしくは顔画像から既存の技術により顔画像の特徴量を抽出した特徴データである。顔認証は、例えば、顔認証サーバ１０２に保持された登録済みユーザの顔画像の特徴データと、要求元から受信した顔画像の特徴データとの間で、類似度を評価することで行われる。そして一定の基準値を超えたスコアが得られたユーザを候補者としてそのＩＤとスコアなどを要求元に返す。ＭＦＰ１０１と顔認証サーバ１０２は、ＬＡＮやインターネットを介して接続される。本実施形態では、顔認証サーバ１０２は、クラウド上の仮想サーバとして構築されたサービスであるとするが、イントラネットに設定されたサーバでも良いし、ＭＦＰ１０１内部に顔認証機能が組み込まれていても良い。なお、顔認証ログイン機能とは顔認証を行いログインさせる機能のことを指しているが、単に顔認証機能と呼称することもある。

＜ＭＦＰのハードウェア構成＞
図２は、ＭＦＰ１０１のハードウェア構成を示す簡略図である。ＣＰＵ２０１はＭＦＰ１０１全体の動作を制御する中央演算装置（プロセッサ）である。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３は揮発性メモリであり、ＲＯＭ２０２及びＨＤＤ２０４に格納された各種制御プログラムを展開するための一時記憶領域として用いられる。

ＲＯＭ２０２は不揮発性メモリであり、ＭＦＰ１０１のブートプログラムなどが格納されている。ＨＤＤ２０４はＲＡＭ２０３と比較して大容量な不揮発性のハードディスクである。ＨＤＤ２０４には、ＭＦＰの制御用プログラムが格納されている。また、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）やアプリケーションプログラムもＨＤＤ２０４に格納されている。

ＣＰＵ２０１はＭＦＰ１０１の起動時、ＲＯＭ２０２に格納されているブートプログラムを実行する。このブートプログラムは、ＨＤＤ２０４に格納されているＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）のプログラムを読み出し、ＲＡＭ２０３上に展開するためのものである。ＣＰＵ２０１はブートプログラムを実行すると、続けてＲＡＭ２０３上に展開したＯＳのプログラムを実行し、ＭＦＰ１０１の制御を行う。また、ＣＰＵ２０１は制御用プログラムによる動作に用いるデータもＲＡＭ２０３上に格納して読み書きを行う。

なお、ＭＦＰ１０１は、１つのＣＰＵ２０１が後述するフローチャートに示す各処理を実行するものとするが、他の態様であっても構わない。例えば、複数のＣＰＵやマイクロプロセッサ（ＭＰＵ）が協働して後述するフローチャートに示す各処理を実行するようにすることもできる。また、後述する処理の一部をＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等のハードウェア回路を用いて実行するようにしても良い。

操作部２０５は、タッチ操作可能なディスプレイであり、後述する各種ユーザインタフェースは操作部２０５に表示される。プリンタ２０６は、通信部２０７を介して外部から受信した印刷データをプリントするプリンタエンジンである。通信部２０７は、インターネットやオフィスのＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）に接続する為のネットワークインタフェースである。

ＩＣカードリーダ２０８は、ＩＣカードからユーザ認証に使用する情報を読み出す為の装置であり、ＩＣカード認証を実現するために必要なユニットである。カメラ２０９は、ＭＦＰ１０１を利用するユーザの顔を撮像する為のカメラユニットである。カメラ２０９は、ＵＳＢや無線ＬＡＮを介して接続可能な外付けのカメラであっても良い。このほか不図示ではあるが、スキャナユニットも備えられている。

＜ソフトウェア構成＞
図３は、ＭＦＰ１０１、顔認証サーバ１０２のソフトウェア構成を示す簡略図である。
＜顔認証サーバ１０２のソフトウェア構成＞
顔認証サーバ１０２のソフトウェア構成について説明する。ＲＥＳＴサービス３１０は、インターネットを介して接続する端末（ＭＦＰ１０１を含む）から顔データの登録や顔認証の要求をＲＥＳＴ（ＲＥｐｒｅｓｅｎｔａｔｉｏｎａｌ Ｓｔａｔｅ Ｔｒａｎｓｆｅｒ）で受け付けるサービスである。ＲＥＳＴは、例えばＸＭＬベースの、ＨＴＴＰを用いたＷｅｂインターフェースであってよい。例えば、ＲＥＳＴで顔データとユーザ名を受信し、受信したデータとユーザ名を対応付けて顔データ管理部３１２に登録する。この際に、ユーザを識別する為のユニークなＩＤとしてＰｅｒｓｏｎａｌＩＤを発行し要求元の端末へＰｅｒｓｏｎａｌＩＤを通知する。例えば、顔データ管理部３１２は表１のように複数のユーザの顔データを、顔認証データベースにより管理する。なお表1においてユーザ名は表示等に用いられるユーザの名称であり、顔データは、顔認証サーバ１０２が対応している形式であればよく、たとえば顔画像データや、顔画像の特徴量を抽出した特徴データなどでよい。

ＲＥＳＴサービスが顔データと共に顔認証要求を受けると、顔認証部３１１は表１に示す登録者のデータを参照し、候補者と各候補者に対するスコアを算出する。スコアは受信した顔データに該当する候補者である可能性の高さを示す値であり、たとえばパーセンテージで示したものである。スコアは、パーセンテージではなく、自然数の数値の大きさで示しても良い。スコアの値に応じて、受信した顔データに該当する候補者が決定される。たとえば閾値を設け、疎の閾値を超えたスコアに該当する登録済ユーザを候補者と決定してよい。そのためスコアの算出の結果、候補者0人と決定する場合がある。また、１人の顔データに対して複数の候補者を特定する場合もある。また、受信した顔データに複数人の顔データが含まれる場合は、複数人それぞれについてスコアを算出し、それぞれの候補者を決定する。算出結果として得られた候補者のＩＤ及びユーザ名とそのスコアは、ＲＥＳＴサービス３１０を介して認証の要求元の端末に返される。

このようなクラウドサービスは一般にコグニティサービスと呼ばれ、顔認証機能を提供するサービスとしてマイクロソフト社（商標）のＦａｃｅＡＰＩなどがある。例えば、ＦａｃｅＡＰＩは、表２のようなリクエストを受け付けるＲＥＳＴサービスを提供している。

ＭＦＰ１０１は上記のようなコグニティサービスと連携することにより顔認証ログイン機能をユーザに提供することができる。

＜ＭＦＰ１０１のソフトウェア構成＞
ＭＦＰ１０１のソフトウェア構成について説明する。ＭＦＰ１０１のローカルＵＩ３０１は、操作部２０５のディスプレイを介し、ユーザがＭＦＰ１０１の設定変更や機能を利用する為のユーザインタフェースを提供する。ローカルＵＩ３０１が提供するユーザインタフェースの例を図４Ａ、図４Ｂに示す。リモートＵＩ３０２は、ＨＴＴＰ（Ｈｙｐｅｒｔｅｘｔ Ｔｒａｎｓｆｅｒ Ｐｒｏｔｏｃｏｌ）サーバ機能を有し、 ＨＴＭＬ（ＨｙｐｅｒＴｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）で構成されるユーザインタフェースをユーザに提供する。ユーザは、ユーザ端末のウェブブラウザを利用してリモートＵＩ３０２にアクセスし、ＭＦＰ１０１の設定変更や機能を利用することができる。提供されるユーザインタフェース画面はローカルＵＩと同様でよい。ログインサービス３０３は、ローカルＵＩ３０１やリモートＵＩ３０２を利用するユーザを認証してＭＦＰ１０１にログインさせるソフトウェアモジュールである。ログインサービス３０３は、ローカルＵＩ３０１やリモートＵＩ３０２のユーザインタフェースを介して、ＨＤＤ２０４に管理者や一般ユーザのアカウントを登録することができる。ＨＤＤ２０４に記憶するアカウント情報を含むアカウント情報データベースの例を下記の表３に示す。ＨＤＤ２０４には、アカウント情報として、ユーザ名、パスワード、ＩＣカードのカードＩＤ、ロール（管理者/一般ユーザ）、メールアドレスなどが登録できる。なお、Personal IDが空白のユーザは、顔認証登録がなされていない状態であることを示す。

ＭＦＰ１０１の工場出荷時の設定は、ユーザ認証機能は無効であり、ＭＦＰ１０１を起動すると、ローカルＵＩ３０１はアプリケーションを選択するメニュー画面４０１を表示する。なお、ユーザ認証機能と記載するが、シンプルログイン機能はユーザ認証を行わずユーザを特定しログインさせる機能であるため正確にはユーザ認証機能ではない。しかし、MFP１０１を利用するユーザにとってはユーザ認証機能と表示する方が理解しやすいため、実施形態１ではあえてこのように表示することにしている。ユーザ認証設定画面４０２から選択できるユーザ認証機能をログイン機能と称することもある。

ユーザは、メニュー画面４０１を介して、ユーザ認証設定画面４０２を表示することができる。ユーザ認証設定画面４０２では、ユーザ認証機能の有効／無効を選択することができる。また、ユーザ認証機能有効を選択した場合は、更に、キーボード認証、シンプルログイン、ＩＣカード認証、顔認証から１つもしくは複数のログイン機能を選択することができる。ユーザ認証設定画面４０２は、ユーザ認証機能を有効にしたうえで全てのログイン機能を選択した状態を示す。

顔認証を有効にした場合、顔認証詳細設定画面４１５より顔認証でＭＦＰに自動ログインさせるスコアの閾値をテキストボックス４１６に入力し設定することができる。例えばスコアの設定は１から１００の間で数値を設定する。ユーザに数値を入力させるのではなく、大中小のような選択肢をユーザに提示して選択させるようにしても良いし、スライドバーのようなＵＩ部品で設定できるようにしても良い。ユーザが選択した設定はＨＤＤ２０４へ記憶し、ログインサービス３０３が参照し、ユーザの設定に応じたログイン機能を起動する。

全てのログイン機能（キーボード認証、シンプルログイン、ＩＣカード認証、顔認証）を有効にした場合、ローカルＵＩ３０１はシンプルログイン画面４０３を表示する。なお、ユーザは４０３の画面からでもＩＣカードをかざすことでＩＣカード認証は可能であり、かつキーボード認証もボタン４０６を選択することでキーボード認証画面４１２へ遷移し認証可能である。つまり、ログイン機能としてシンプルログイン機能が設定された場合は、ローカルＵＩ３０１は他のログイン機能が有効だとしてもシンプルログイン画面４０３を表示する。そして、シンプルログイン機能が設定されていない場合でキーボード認証のみが有効であればキーボード認証画面４１２が、ＩＣカード認証のみ有効もしくはＩＣカード認証とキーボード認証が有効であればICカード認証画面４１３が表示される。ＩＣカード認証画面４１３は、キーボード認証画面４１２を表示するボタン４１４を提供する。

ログインサービス３０３はログイン機能として顔認証機能のみ有効にすることは許可していない。ローカルＵＩ３０１はユーザがユーザ認証設定画面４０２から顔認証を設定した場合は、それ以外の３つの認証設定の中から少なくとも１つ以上は設定するように画面制御する。シンプルログイン画面４０３は、登録済みのユーザのボタンを表示する。ユーザにシンプルログイン画面４０３から自分のボタンを選択させることによって、ＭＦＰ１０１にユーザをログインさせることができる。この際行われるのは選択されたボタンのユーザＩＤの参照処理であり、いわゆる認証情報の検証を行う認証処理は行われない。つまり、ユーザはＩＣカードやキーボードを介した認証情報の入力を行う必要がない。

登録済みのユーザのボタンを一画面に表示しきれない場合は、複数のページに渡ってボタンを表示する。ページ遷移ボタン４０７は、現在表示中のページ番号とページ遷移の為のボタンである。シンプルログイン画面４０３は、ボタンのソート機能を備える。ソート順ドロップダウン４０４は、ボタンのソート順を選択する為のドロップダウンである。例えば、名称順、登録順、最終ログイン時刻順などが選択可能とする。

新規ユーザ登録ボタン４０５は、一般ユーザが自分のアカウントを新規に登録する為のボタンである。ローカルＵＩ３０１は、新規ユーザ登録ボタン４０５の押下を検知すると、ユーザ登録画面４０８を表示する。ユーザ登録画面４０８では、新規に登録するユーザのユーザ名、パスワード、メールアドレスなどの入力を受け付ける。また、シンプルログイン画面４０３で、ユーザのボタンと共に表示されるアイコンを選択する機能を提供する。また、カードＩＤの登録ボタン４０９の押下を検知した場合は、ＩＣカードリーダのドライバ３０４を介して、ＩＣカードリーダ２０８を稼働しＩＣカードのデータを読み込み可能な状態にする。ＩＣカードリーダ２０８にＩＣカードがかざされた場合は、ＩＣカードからカードＩＤを取得する。

顔画像の登録ボタン４１０の押下を検知した場合は、カメラドライバ３０５を介してカメラ２０９を稼働させ、ＭＦＰ１０１の前にいるユーザを撮像する。更に顔検知ライブラリ３０６を使用して取得した画像に対して顔検知処理を実施し、顔が写っていることを確認する。一般に、画像処理、画像解析および機械学習等の機能を持つライブラリとしてオープンソースのＯｐｅｎＣＶが一般に知られており、顔検知ライブラリ３０６としてこれらのオープンソースのライブラリを利用しても良い。ユーザ登録画面４０８において、カードＩＤおよび顔画像の登録は必須ではなく、未登録のままであっても良い。

登録ボタン４１１の押下を検知すると、上記取得した情報を、アカウント情報（表３）としてＨＤＤ２０４に登録する。顔画像の登録ボタン４１０で顔画像を含む画像を取得した場合には、顔認証サーバ通信部３０７を介して、顔認証サーバ１０２のＲＥＳＴサービスに顔データの登録要求を行う。この際、顔データは、必要に応じて顔認証サーバ１０２が対応している形式（画像ファイルや顔の特徴量だけを算出した値など）で送信する。ログインサービス３０３は、顔登録要求の応答として、ＰｅｒｓｏｎａｌＩＤを受信し、アカウント情報（表３）としてＨＤＤ２０４に登録する。

ログインサービス３０３は、アカウント情報（表３）のＰｅｒｓｏｎａｌＩＤの有無から顔画像登録済みのユーザか否かを判断することができる。ＨＤＤ２０４のアカウント情報と関連付けて顔画像ファイルや、顔画像登録済みか否かを示す情報を記録するようにしても良い。また、アカウント情報の登録に関して、複数ユーザのアカウント情報を一括登録できる機能（ＭＦＰの管理者向けのＵＩをローカルＵＩ３０１やリモートＵＩ３０２）を提供するようにしても良い。管理者が一括登録する際に使用するカードＩＤや顔画像は、ＭＦＰ１０１のＩＣカードリーダ２０８やカメラ２０９以外の装置から取得したデータであっても良い。

ログインサービス３０３がＩＣカードを検知した場合、ＨＤＤ２０４に記憶したアカウント情報を参照して、カードＩＤの一致するユーザをＭＦＰ１０１にログインさせる。また、キーボード認証を表示するボタン４０６の押下を検知した場合には、キーボード認証画面４１２を表示し、ユーザ名およびパスワードの入力を受け付ける。ログインサービス３０３は、キーボード認証画面４１２に入力されたユーザ名、パスワードとＨＤＤ２０４に記憶したアカウント情報を照合し、一致するユーザをＭＦＰ１０１にログインさせる。

ログインサービス３０３は、ログインしたユーザの情報をログインコンテキストと称するオブジェクトに格納して、他のソフトウェアモジュールへ伝達する。ログインコンテキストに格納する情報の例を下記の表４に示す。ログインコンテキストには、表４に示すようにログインしたユーザのユーザ名、ロール、メールアドレスなどを格納する。

ＭＦＰ１０１へのログインが成功した場合、ローカルＵＩ３０１はシンプルログイン画面４０３などのログイン画面を閉じて、メニュー画面４０１に画面を遷移させる。メニュー画面４０１は、上記ログインコンテキストを参照し、ログインしたユーザを特定した上で、ログインしたユーザ向けのメニュー画面を提供する。メニュー画面や各種機能（コピーやスキャン）の画面は、ユーザの好みに応じてパーソナライズできる機能を提供する。

●ログインに係る諸設定
ログインサービス３０３はログアウトの機能を提供する。ログイン処理実施後は上述した何れかの認証方式であってもメニュー画面４０１に示す通り、ローカルＵＩ上にログアウトボタンを表示する。またこの際、ハードキー操作によるログアウト処理として、ＭＦＰ１０１に設置されているＩＤボタン押下によるイベントを受信することでログアウト処理を実施しても良い。他にも電力設定画面４１６より設定可能なオートクリア処理やオートスリープ処理によるログアウトイベントが存在する。

オートクリアはＭＦＰ１０１を利用するユーザが一定時間操作を実施しない状態である場合、未保存状態の設定をクリアし起動時に表示する画面へ強制的に遷移する機能である。電力設定画面４２０に記載した通り、オートクリア移行時間４２１を設定することによって一定間隔でオートクリア処理を実施する。またオートクリア後の機能４２２としてオートクリア実施後、そのままスリープ移行するのか画面復帰を実施するのかを設定することが可能となる。

オートスリープはオートクリア同様、ユーザが一定時間ＭＦＰ１０１を利用していない場合、ローカルＵＩ上の表示を中断し省電力モードに移行する機能である。尚この際オートクリア処理も同時に実施される。オートスリープもオートクリア同様オートスリープ移行時間４２３を設定することが可能であり、その際スリープ時の省電力４２４設定にてスリープ移行時の電力制御を実施することが可能となる。

またユーザ認証設定画面４０２にて顔認証が有効となっている場合、顔認証詳細設定画面４１５から顔認証有効時のログアウト処理に関する詳細な設定を実施することが可能である。顔認証有効時のログアウト処理に関する設定として、ログアウト後の顔認証停止時間４１７の設定を実施することが可能となる。本設定は例えばユーザが顔認証実施後、ローカルＵＩ上に表示されているログアウトボタン押下によるログアウトを実施した場合、顔認証処理によって再度ログインしてしまうといった現象を防ぐための機能である。本設定によってログアウト実施後、一定時間顔認証処理を受け付けないため、ユーザが意図しない顔認証処理を防止することが可能となる。
また本実施形態に記載のＭＦＰ１０１では第二認証によるログイン切り替え機能を実行可能とする。この機能を実行させるための設定が、顔認証設定画面４１５のログイン切り換え処理設定４１８である。本設定が有効である場合、ユーザログイン中の場合においても顔認証処理に必要なカメラ２０９の起動処理を実施し、ログイン中ユーザとは異なる別ユーザがログインすることが可能となる。またその際、別ユーザが顔認証によるログインが成功していること、顔認証以外の第二認証方式によって認証処理に成功していること、それぞれの認証処理により生成する表４で示すログインコンテキストが一致していることがログインを許す条件となる。尚本実施形態においては第二認証方式として、ＩＣカードなどの媒体に記録したアカウント情報を読み取って認証を行うＩＣカード認証を利用するパターンを記載するが、顔認証以外の別の認証方式であればそのほかの認証方式であってもよい。

別の認証方式としては、ユーザが入力したパスワードなどの秘密情報を含むアカウント情報に基づく方式（キーボード認証）と、秘密情報を含まないアカウント情報に基づくシンプルログイン方式となどを含む。

また第二認証方式によるログインユーザ切り替え処理において、ログイン中のユーザに対しポップアップ表示をする設定を設ける。この設定は顔認証設定画面４１５の、切り換え処理時のポップアップ表示設定４１９である。この設定が有効であると、ログインユーザ切り替え処理時にポップアップ画面４２５が表示される。この画面を表示することでログイン中のユーザにユーザ切り替えの通知を行い、承認すなわち「はい」が選択されたタイミングで別ユーザに切り替えることが可能となる。拒否すなわち「いいえ」が選択されると、ログインユーザの切り替えは行われず、ログイン中のユーザがそのままログインし、新たなユーザのログインコンテキストは廃棄されてよい。

●ユーザ切り替え処理
次に本実施形態のログインユーザ切り替え処理の説明を記載する。また第1のユーザがログインしている状態からの、第2のユーザ（別ユーザとも呼ぶ）が顔認証を受けて割り込み、ユーザ切り替えを行う処理動作フローとなる。第2のユーザが、ユーザ認証設定画面４０２から選択できるキーボード認証、シンプルログイン、ＩＣカード認証など顔認証以外の認証のみによりログインする場合については適用されない。本実施形態ではユーザ認証設定画面４０２で例示している通り、すべての認証機能を併用しているものとするが、顔認証に続けて行われる第二認証の方式としてＩＣカード認証を採用する。

＜ログイン中のユーザ切り替えの動作フロー＞
図５のフローチャートを参照して、ユーザ切り替え処理を実施する際の動作を説明する。図５の処理はＣＰＵ２０１により実行される。またソフトウェアモジュールの観点ではログインサービス３０３により実行される。

ログインサービス３０３は、ログイン中の第1のユーザ（ログインユーザ）がいることを確認する（Ｓ５０２）。ログインユーザの有無はログインコンテキストを参照することで判定できる。ログインユーザがいなければこの時点で図５の処理は終了となり、通常のログイン処理に移行する（不図示）。通常のログイン処理は本実施形態では1段階認証であって第二認証が不要であり、また、認証方式も顔認証である必要がない。一方、すでにログインユーザがいれば、現在のログイン済みユーザとは別の第2のユーザの顔を、カメラ２０９で撮影した画像から検知する（Ｓ５０３）。該当する顔を検知したなら、顔認証詳細設定画面４１５で設定されたログインユーザ切り替え処理４１８の設定を確認する（Ｓ５０４）。確認した結果、第二認証方式によるログインユーザ切り替え処理４１８が有効であると判定した場合、別ユーザに対して顔認証を実施する（Ｓ５０５）。顔認証は、顔認証サーバ１０２に対して顔画像またはそこから抽出した特徴を含む顔データとともに認証要求を送信することで行う。一方、ログインユーザ切り替え処理４１８が無効であると判定した場合、処理を終了する（Ｓ５１５）。

顔認証後、顔認証が成功したか判定し（Ｓ５０６）、別ユーザによる顔認証が成功した場合、ログインサービス３０３は表４に示す通り別ユーザのログインコンテキストを作成し、第二認証イベント受付状態に遷移する（Ｓ５０７）。第二認証イベント受付状態では、第二認証方式（あるいは第２認証方式）で認証を受けるためのイベントを待機する。ここで、下記(1)〜(3)のうちいずれかの条件が満たされた場合に第二認証イベント受付状態を解除する。
(1)別ユーザによる第二認証成功時
(2)別ユーザによる第二認証失敗時
(3)ログアウトイベント受信時。

一方、ステップＳ５０６で、別ユーザによる顔認証が失敗であった場合、Ｓ５１４に示す通り、メニュー画面４０１記載のステータス通知領域に、顔認証が失敗したこと、及びその理由を示すエラー表示を行う。また通知領域に表示するエラー文言は下記に示すエラーシーケンスを想定している。
(1)顔画像登録されていないユーザである場合
(2)登録ユーザだが、設定された自動ログインスコアの規定に満たない場合
(3)顔認証サーバ１０２へのアクセスエラーである場合。

第二認証イベント受付状態に遷移後、別ユーザによる第二認証イベントを検知すると（Ｓ５０８）、第二認証処理を開始する。第二認証処理とは顔認証とは異なる第二認証方式によるユーザ認証の処理である。第二認証処理が行われると、第二認証に成功したか判定する（Ｓ５０９）。第二認証に成功すると、ログインサービス３０３は表４に示す別ユーザのログインコンテキストを作成する。これは顔認証ユーザと第認証処理ユーザとが同一であるかを判定するための処理である。

次に、顔認証成功時に作成したログインコンテキストと、第二認証成功時に作成したログインコンテキストとが一致するかを判定する（Ｓ５１０）。両者が一致している場合、ステップＳ５１１に移行する。一致していない場合は、顔認証で認証されたユーザと第二認証で認証されたユーザとが同一ユーザでない、という理由でユーザ切り替え処理を中断し、ステータス通知領域に失敗理由とともに表示を行う。

作成した二つのログインコンテキストを比較した結果、両者が一致し、認証されたユーザが同一ユーザであった場合、ユーザ切り替え処理時にポップアップを表示する設定４１９が有効かどうかを判定する（Ｓ５１１）。有効であると判定した場合、図４Ｂのポップアップ画面４２５を表示する。無効であると判定した場合、ポップアップ画面４２５の表示を実施せずにユーザ切り替え処理を実施する（Ｓ５１３）。またポップアップ表示時においては画面表示上の「はい」ボタンがタッチされたか判定し（Ｓ５１２）、タッチされた場合にユーザ切り替え処理を実施する（Ｓ５１３）。「いいえ」ボタンの押下を検知した場合、ユーザ切り替え処理は実行せず、ユーザ切り換えが拒否されたという失敗理由をステータスバーに表示して処理を終了する。

ステップＳ５２３におけるユーザ切り替え処理では、たとえば、先にログインしていた第1のユーザのログインコンテキストを消去して強制的にログアウトさせ、割り込んだ第2のユーザのログインコンテキストをログインユーザのログインコンテキストとして保持する。なお第1のユーザが何らかの処理を行っている場合には、その完了を待ってからユーザ切り替えを行ってもよい。ただし本実施形態では、割り込んだ第2のユーザがログアウトする際に、割り込まれた第1のユーザの情報を用いることがある。そこで、第1のユーザのユーザＩＤは、ログインユーザにより割り込まれたユーザのユーザＩＤとして保存される。

以上の手順により、あるユーザがログインしている間に、他のユーザが、顔認証と、顔認証とは異なる第2認証方式による認証とに成功したなら、そのユーザをログインさせる。これにより、ログインユーザのログアウトを待ったり、あるいはログインユーザのログアウト後の所定時間の経過を待ったりすることなく、別のユーザが割り込んでログインできる。

なお別のユーザにより割り込まれたログインユーザは、上記手順では強制的にログアウトさせているが、ログインユーザとして復帰可能なようにコンテキストを保存したうえで一時的にログイン状態を解除してもよい。

なお後者の場合には、割り込んだユーザがログアウトした後で、割り込まれたユーザをログイン状態に復帰させてもよい。また後者の場合には、入れ子状にユーザが割り込む可能性もあるので、ユーザが割り込んでログインしている状態では、割り込まれたユーザか、割り込んだユーザのいずれかがログアウトするまで次のユーザによる割り込みを拒否してもよい。

さらに、ステップＳ５０５における顔認証は、たまたまそばにいる登録済みユーザに対して行われることもあり得る。そこで、ステップＳ５０８における第二認証イベントを待機する際にタイマを所定時間にセットしておき、第二認証イベントが生じないまま所定時間が満了したなら第二認証は失敗したと判定してもよい。

＜ユーザ切り替え処理後のログアウト動作フロー＞
ユーザ切り替え処理実施後のログアウトイベントを検知した際の動作をフローチャート図６より説明する。ログアウトイベントは、たとえばユーザによるログアウト操作や、オートクリア又はオートスリープ時間の経過などきっかけとして生じるイベントである。

ログインサービス３０３はユーザ切り替え処理実施後のログアウトイベントを検知するとログアウト処理を実行し（Ｓ６０２）、ユーザ認証設定４０２を確認する（Ｓ６０３）。ログアウト処理では例えば現在のログインコンテキストを消去する。ステップＳ６０３では、顔認証、ＩＣカード認証、シンプルログイン認証が有効であることか判定する。本フローはシンプルログインによるユーザアイコンボタン表示の絞り込みのフローであるため、上記認証設定が一つでも有効となっていない場合、通常の顔認証ログアウトの処理と同じく、ログアウトイベントから所定の顔認証停止時間の経過を待ち（Ｓ６０６）、その経過後、顔認証受付状態のデフォルトのシンプルログイン画面を表示し（Ｓ６０７）、処理を終了する（Ｓ６１２）。認証設定がすべて有効である場合、ログインサービス３０３はログアウトイベントの種別を判定する（Ｓ６０４）。

ログアウトイベントが、ユーザ操作に該当するソフトキーまたはハードキー押下であった場合、ユーザ切り替え処理実施前のユーザが再度複合機を利用する可能性がある。そのため、ログアウト後の顔認証停止時間中において、ログインユーザ切り替え処理実施前のユーザのユーザアイコンのみをシンプルログイン画面に表示する（Ｓ６０５）。ログインユーザ切り替え処理実施前のログインユーザのユーザＩＤは、本例では図５のステップＳ５１３で保存されている。この状態でステップＳ６０６に移行し、所定の顔認証停止時間の経過を待つ。この所定の顔認証停止時間の経過までは顔認証によるログイン処理は実施できないが、表示されているシンプルログイン画面のユーザアイコンを押下することでログインが可能となる。顔認証停止時間の経過後、顔認証受付状態のデフォルトのシンプルログイン画面を表示し（Ｓ６０７）、処理を終了する。

一方でログアウトイベントがユーザ操作ではないと判定した場合には、ログインサービス３０３が、ログアウトイベントはオートクリアまたはオートスリープであるか、すなわち一定期間の無操作であるか判定する（Ｓ６０８）。ログアウトイベントがオートクリアまたはオートスリープであると判定した場合、顔認証詳細設定４１５及び電力設定４２０から顔認証停止時間並びにオートクリア移行時間またはオートスリープ移行時間とを参照する。参照の対象はログアウトイベントに対応する方の移行時間であってよい。たとえばログアウトイベントがオートクリアであれば、オートクリア移行時間を参照し、オートスリープであれば、オートスリープ移行時間を参照すればよい。参照したオートクリア時間またはオートスリープ時間が顔認証停止時間より短い場合（Ｓ６０８）、ユーザ利用中に意図せぬクリア処理によるログアウトが発生したと判断し、ユーザ切り替え実施後のユーザアイコンボタンのみをシンプルログイン画面に表示する（Ｓ６０９）。すなわち現在のログインユーザのユーザアイコンボタンのみを表示する。

また、オートクリアまたはオートスリープによるログアウトイベントの場合、通常はＭＦＰ１０１のそばにユーザがいないケースが多いため、顔認証停止時間を設けることはない。しかし、本ユースケースの場合、特定のユーザのアイコンのみをシンプルログイン画面に表示するという、アイコンの絞り込みを実施している。そのため、絞り込みを行っているＵＩ表示処理を、他のユーザもログインできるようデフォルト表示に戻す必要がある。その際のタイミングとしてログアウト後の顔認証停止時間を利用し、ステップＳ６１０ではその時間の経過を待つ。この間には顔認証も受け付けられる。ログアウト後の顔認証停止時間が終了すると、表示しているシンプルログインのＵＩ表示をデフォルトへと遷移させる（Ｓ６０７）。

一方、ステップＳ６０８で、参照したオートクリア時間またはオートスリープ時間が顔認証停止時間より長いと判定した場合、シンプルログインアイコン表示の絞り込み処理を実行せず、デフォルトアイコン表示を実施する（Ｓ６１１）。これは、ユーザはＭＦＰ１０１を利用し終えてＭＦＰ１０１から離れた状態である可能性が高いためである。その後ステップＳ６１０へと分岐する。なおこの場合には、ステップＳ６０７でシンプルログイン画面を再表示してもその内容が変わることはないため、ステップＳ６０７をスキップしてもよい。またステップＳ６０４でログアウトイベントがユーザ操作ではないと判定した場合にはステップＳ６０８をスキップし、ステップＳ６０９に分岐してもよい。

図７は、図６の手順の中で表示されるシンプルログイン画面の例を示す。シンプルログイン画面７０１はステップＳ６０７およびＳ６１１で表示されるデフォルトのシンプルログイン画面である。ソート用のプルダウン４０４、すべてのユーザのアイコンをボタンとして表示させるための全ボタン表示ボタン７０４、新規ユーザ登録のためのボタン４０５が画面に含まれている。またシンプルログインを行おうとするユーザは、そのユーザのアイコンを表示したユーザボタンをタッチすればよい。デフォルトのシンプルログイン画面７０１では、顔認証のための顔画像が登録されていないユーザについて、ユーザボタンを表示している。顔画像が登録されているユーザは顔認証を受ければよいからである。

シンプルログイン画面７０２はステップＳ６０５で表示されるシンプルログイン画面である。シンプルログイン画面７０２に含まれるユーザボタンは、割り込みログインされたユーザのユーザボタンに絞り込まれている。またシンプルログイン画面７０３はステップＳ６０９で表示されるシンプルログイン画面である。シンプルログイン画面７０３に含まれるユーザボタンは、割り込みログインしたユーザのユーザボタンに絞り込まれている。なお、本実施形態では、割り込みログインするユーザは顔認証を受けねばならないので、顔画像が認証用に登録済みである。そのためシンプルログイン画面７０３に含まれたユーザＢｏｂのユーザボタンは、デフォルトのシンプルログイン画面７０１には表示されない。

以上のように、本実施形態によれば、第１のユーザがログインしている状態で、第２のユーザが割り込んでログインし、ログインユーザを切り替えることができる。このため第１のユーザが、そのユーザのＭＦＰ１０１からの離脱によりログアウトすることや、また手動によるログアウト後に顔認証停止時間の経過を待つ必要がない。これによってＭＦＰ１０１の可用性が高まり、生産性を向上させることができる。

さらに、割り込みログインを行うためには、顔認証に加えて、顔認証ではない第２認証方式による認証をユーザは受ける必要があり、偶発的な割り込みログインを防止できる。

また割り込んだ第２のユーザがログアウトした後には、次のユーザのログイン画面として、ログアウトイベントに応じた画面が表示される。これにより、第２のユーザのログアウトに引き続くユーザのログインを円滑に行うことができる。具体的には、ログアウトイベントがログアウト操作であれば、割り込まれた第１のユーザが再度ログインする可能性があるので、顔認証停止期間を設けて第２のユーザの偶発的なログインを防止する。また第１のユーザのユーザボタンに絞り込まれたログイン画面を表示することで、第１のユーザがログインしやすくしている。

また、ログアウトイベントが、所定時間にわたり操作がなかったことであり、かつ、操作がなかった時間が顔認証停止時間よりも短ければ、割り込んだ第２のユーザが再度ログインする可能性がある。そこで、顔認証停止期間を設けることなく、第２のユーザのユーザボタンに絞り込まれたログイン画面を表示する。こうすることで、第２のユーザがログインしやすくしている。

また、ログアウトイベントが、所定時間にわたり操作がなかったことであり、かつ、操作がなかった時間が顔認証停止時間以上であれば、割り込んだ第２のユーザがＭＦＰの利用をやめてその場を離脱したと考えられる。そこで、顔認証停止期間を設けることなく、かつ、顔認証を利用できないユーザに対してシンプルログインの機会をあたえるべく、デフォルトのログイン画面を表示する。こうすることで、すべてのユーザがログインしやすくしている。

［その他の実施例］
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。

１０１ 画像形成装置（ＭＦＰ）、１０２ 顔認証サーバ、３０１ ローカルＵＩ、３０２ リモートＵＩ、３０３ ログインサービス、３０４ ＩＣカードリーダドライバ、３０５ カメラドライバ、３０６ 顔検知ライブラリ、３０７ 顔認証サーバ通信部、３１０ RESTサービス、３１１ 顔認証部、３１２ 顔データ管理部

Claims (12)

1. 第１のユーザがログインしている状態で、第２のユーザの顔認証を行う第１の認証手段と、
   前記顔認証が成功した場合、顔認証とは異なる第２の方式でユーザの認証を行う第２の認証手段と、
   前記第２の認証手段による認証が成功し、認証されたユーザが前記第２のユーザである場合、前記第１のユーザから前記第２のユーザへとログインユーザを切り替える切り替え手段と
   を有することを特徴とする情報処理装置。
2. 請求項１に記載の情報処理装置であって、
   前記切り替え手段は、前記第２の認証手段により認証されたユーザが前記第２のユーザである場合、ユーザによる確認の操作を受け付け、前記確認の操作に応じて前記第１のユーザから前記第２のユーザへとログインユーザを切り替える
   ことを特徴とする情報処理装置。
3. 請求項１または２に記載の情報処理装置であって、
   前記第１の認証手段は、ログインユーザの切り替えを行う設定が有効でない場合には、前記第１のユーザがログインしている状態で前記第２のユーザの顔認証を行わない
   ことを特徴とする情報処理装置。
4. 請求項１乃至３のいずれか一項に記載の情報処理装置であって、
   前記切り替え手段により前記第２のユーザがログインしている状態で生じたログアウトイベントに応じて前記第２のユーザをログアウトさせ、前記ログアウトイベントの種別に応じたログイン画面を表示させるログアウト処理手段をさらに有する
   ことを特徴とする情報処理装置。
5. 請求項４に記載の情報処理装置であって、
   前記ログアウト処理手段は、前記第２のユーザがログインしている状態で生じた前記ログアウトイベントの種別がユーザ操作である場合には、前記ログイン画面に、対象のユーザとして前記第１のユーザに絞り込んだログイン画面を表示させ、前記顔認証を所定時間にわたり停止する
   ことを特徴とする情報処理装置。
6. 請求項４に記載の情報処理装置であって、
   前記ログアウト処理手段は、前記第２のユーザがログインしている状態で生じた前記ログアウトイベントの種別が一定時間を超える無操作である場合には、前記ログイン画面に、対象のユーザとして前記第２のユーザに絞り込んだログイン画面を表示させ、前記顔認証を停止しない
   ことを特徴とする情報処理装置。
7. 請求項５または６に記載の情報処理装置であって、
   前記ログアウト処理手段は、前記ログイン画面を表示してから、あらかじめ定められた、前記顔認証を停止する所定時間が経過すると、前記ログイン画面を、対象のユーザとして、前記顔認証のための顔データが登録されていないユーザに絞り込んだログイン画面に変える
   ことを特徴とする情報処理装置。
8. 請求項４に記載の情報処理装置であって、
   前記ログアウト処理手段はさらに、前記第１のユーザがログインしている状態で生じたログアウトイベントに応じて前記第１のユーザをログアウトさせ、前記顔認証を所定時間にわたり停止し、
   前記ログアウト処理手段さらには、前記第２のユーザがログインしている状態で生じた前記ログアウトイベントの種別が一定期間を超える無操作である場合には、前記一定期間が前記所定時間よりも短ければ、前記ログイン画面に、対象のユーザとして、前記顔認証のための顔データが登録されていないユーザに絞り込んだログイン画面を表示させ、前記顔認証を停止しない
   ことを特徴とする情報処理装置。
9. 請求項４乃至８のいずれか一項に記載の情報処理装置であって、
   前記ログイン画面には、対象のユーザのアイコンが含まれる
   ことを特徴とする情報処理装置。
10. 請求項９に記載の情報処理装置であって、
    前記アイコンはユーザの顔画像を含む
    ことを特徴とする情報処理装置。
11. 第１のユーザがログインしている状態で、第２のユーザの顔認証を行う第１の認証手段と、
    前記顔認証が成功した場合、顔認証とは異なる第２の方式でユーザの認証を行う第２の認証手段と、
    前記第２の認証手段による認証が成功し、認証されたユーザが前記第２のユーザである場合、前記第１のユーザから前記第２のユーザへとログインユーザを切り替える切り替え手段と
    してコンピュータを機能させるためのプログラム。
12. 第１のユーザがログインしている状態で、第２のユーザの顔認証を行い、
    前記顔認証が成功した場合、顔認証とは異なる第２の方式でユーザの認証を行い、
    前記第２の方式による認証が成功し、認証されたユーザが前記第２のユーザである場合、前記第１のユーザから前記第２のユーザへとログインユーザを切り替える
    ことを特徴とする情報処理装置の制御方法。

Images