JP2020123166A - 情報処理装置、情報処理システム、及び情報処理プログラム - Google Patents

Abstract

【課題】ログインさせるユーザを一意に特定することを目的としている。【解決手段】１又は複数の他の情報処理装置と、ユーザにより利用される外部装置とに通信可能に接続される情報処理装置であって、前記外部装置が前記情報処理装置の認証領域内に入ること及び前記外部装置が前記情報処理装置のログイン領域内に入ることを検出する検出部と、前記外部装置が前記ログイン領域内に入ったことが検出された場合に、前記情報処理装置と対応付けられた撮像装置により撮像された画像から、前記ログイン領域内の人物の顔画像を認識する顔認識部と、認識された前記人物の顔と、前記外部装置のユーザの顔とが一致している場合に、前記外部装置のユーザのログイン処理を行うログイン制御部と、を有する。【選択図】図１０

Description

本発明は、情報処理装置、情報処理システム、及び情報処理プログラムに関する。

ＢＬＥ（Ｂｌｕｅｔｏｏｔｈ（登録商標） Ｌｏｗ Ｅｎｅｒｇｙ）搭載機器の増加に伴い、ビーコンによる位置検出を利用した自動ログインが行えることが知られている。

自動ログインの手法として、例えば、ＭＦＰが、ウェアラブル端末から加速度情報とユーザ情報とを受信し、加速度情報から特定のログイン用のジェスチャを検出すると、ユーザ情報に基づいてユーザ認証とログイン処理を行う技術が知られている（例えば、特許文献１）。

従来の技術では、例えば、複数のユーザから特定のログイン用のジェスチャが検出された場合等には、どのユーザに対して優先的にログイン処理をすべきかを判定することが困難である。

開示の技術は、ログインさせるユーザを一意に特定することを目的としている。

本発明の実施形態に係る情報処理装置は、１又は複数の他の情報処理装置と、ユーザにより利用される外部装置とに通信可能に接続される情報処理装置であって、前記外部装置が前記情報処理装置の認証領域内に入ること及び前記外部装置が前記情報処理装置のログイン領域内に入ることを検出する検出部と、前記外部装置が前記ログイン領域内に入ったことが検出された場合に、前記情報処理装置と対応付けられた撮像装置により撮像された画像から、前記ログイン領域内の人物の顔画像を認識する顔認識部と、認識された前記人物の顔と、前記外部装置のユーザの顔とが一致している場合に、前記外部装置のユーザのログイン処理を行うログイン制御部と、を有する。

ログインさせるユーザを一意に特定できる。

情報処理システムの一例を示す概要図である。 ログイン処理について説明する図である。 画像形成装置のハードウェア構成の一例を示す図である。 ユーザ端末のハードウェア構成の一例を示す図である。 画像形成装置の機能構成を説明する図である。 ユーザ端末の機能構成を説明する図である。 情報処理システムにおいて実行される認証処理の一例を示すシーケンス図である。 画像形成装置によるログイン処理を説明するフローチャートである。 ユーザ端末の動作を説明するフローチャートである。 情報処理システムにおいて実行されるログイン処理の一例を説明するシーケンス図である。

以下に、図面を参照して実施形態について説明する。図１は、情報処理システムの一例を示す概要図である。本実施形態の情報処理システム１は、ユーザ端末１０と、画像形成装置群２０Ｇｒを含む。

画像形成装置群２０Ｇｒは、ＢＬＥ（Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ）などの通信に対応しメッシュネットワークを構築可能な画像形成装置２０Ａ〜２０Ｄにより構成される。各画像形成装置２０Ａ〜２０Ｄは、コピー機能及びスキャン機能などの機能を有する。本実施形態の情報処理システム１において、画像形成装置２０Ａ〜２０Ｄは相互に通信可能である。

ユーザ端末１０は、ユーザに保持されて移動可能な外部装置の一例であり、ＢＬＥなどの通信に対応した携帯可能な端末である。ユーザ端末１０を保持するユーザは、画像形成装置２０Ａ〜２０Ｄのいずれかに近づいてログインし、ログインした画像形成装置にコピー機能及びスキャン機能などの機能を実行させることができる。

本実施形態によれば、従来必要であった共通のネットワークに属している必要はなく、ユーザ端末１０が相互に通信可能な画像形成装置２０Ａ〜２０Ｄのうち何れかの一台と通信可能であれば、ユーザ端末１０による自動ログインを実現できる。

すなわち、本実施形態によれば、ユーザ端末１０及び画像形成装置２０Ａ〜２０Ｄは、ＢＬＥを利用したメッシュネットワークを構成することができ、ユーザにより保持されて移動可能なユーザ端末１０は、メッシュネットワークを拡張することができる。

ユーザ端末１０は、例えば、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）やＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、携帯電話、ゲーム機器、又は家電機器などのＢＬＥ機能が搭載された端末装置として実現される。

尚、図１では、画像形成装置群２０Ｇｒには、４台の画像形成装置２０Ａ〜２０Ｄを含むものとしたが、これに限定されない。また、画像形成装置２０Ａ〜２０Ｄは、各々同様の構成を有するものであるので、以下の説明では、画像形成装置２０Ａ〜２０Ｄを区別しない場合には、単に画像形成装置２０と称する。画像形成装置２０は、情報処理装置の一例である。また、図１の例では、画像形成装置２０にログインするユーザ端末１０を１台しているが、これに限定されない。

本実施形態の画像形成装置２０は、ユーザ端末１０が、予め決められた認証領域内に入ったことを検出すると、ユーザ端末１０の認証処理を行う。そして、本実施形態の画像形成装置２０は、認証されたユーザ端末１０が、認証領域よりも狭いログイン領域内に入ったことを検出すると、ユーザ端末１０のユーザの情報処理システム１に対するログイン処理を行う。

具体的には、本実施形態の画像形成装置２０は、ログイン領域のユーザ端末１０のユーザの顔認証による認証処理を行い、認証された場合に、ログイン処理を行う。また、本実施形態の画像形成装置２０は、ログイン領域内に複数のユーザ端末１０が存在する場合に、ユーザ端末１０から送信される信号の信号強度に基づき、ログインさせるユーザを特定する。

以下に、図２を参照して、本実施形態のログイン処理について説明する。図２は、ログイン処理について説明する図である。

図２では、情報処理システム１に、画像形成装置２０Ａ、２０Ｂと、ユーザ端末１０ｘ、１０ｙが含まれるものとして、説明する。

尚、本実施形態では、１組の画像形成装置２０とメッシュネットワークを形成可能なユーザ端末１０とが存在してれば、最小構成としての情報処理システム１が形成される。また、本実施形態では、新たに画像形成装置２０をメッシュネットワーク形成できる距離に設置すれば、画像形成装置群２０Ｇｒを大きくすることができ、より広範囲において、自動認証を行うことができる。

本実施形態の画像形成装置２０Ａは、ユーザ端末１０ｘとユーザ端末１０ｙとが、画像形成装置２０Ａの認証領域内にあるログイン領域Ｒａ内に入ったことを検出すると、画像形成装置２０Ａの有する撮像装置が撮像した画像から人の顔の特徴を検出する。

そして、画像形成装置２０Ａは、人の顔の特徴を示す情報を、ユーザ端末１０ｘ、１０ｙのうち、画像形成装置２０Ａが受信した信号の強度が高い方のユーザ端末１０へ、送信する。尚、人の顔の特徴を示す情報とは、人の顔の画像データであっても良いし、画像の特徴量であっても良い。以下の説明では、人の顔の特徴を示す情報を、特徴情報と呼ぶ場合がある。

特徴情報を受信したユーザ端末１０では、特徴情報が示す顔が、ユーザ端末１０のユーザと一致する場合に、ログイン要求を行うことができる。画像形成装置２０Ａは、特徴情報を送信したユーザ端末１０からログイン要求を受け付けると、このユーザ端末１０を情報処理システム１へログインさせる。

次に、本実施形態に係る情報処理システム１の有する各装置のハードウェア構成について説明する。

まず、本実施形態の画像形成装置２０のハードウェア構成について説明する。図３は、画像形成装置のハードウェア構成の一例を示す図である。

図３に示されているように、画像形成装置（ＭＦＰ；Ｍultifunction Peripheral/Product/Printer)２０は、コントローラ２１０、近距離通信回路２２０、エンジン制御部２３０、操作パネル２４０、ネットワークＩ／Ｆ２５０、撮像装置２５１を備えている。

これらのうち、コントローラ２１０は、コンピュータの主要部であるＣＰＵ２０１、システムメモリ（ＭＥＭ−Ｐ）２０２、ノースブリッジ（ＮＢ）２０３、サウスブリッジ（ＳＢ）２０４、ＡＳＩＣ(Application Specific Integrated Circuit)２０６、記憶部であるローカルメモリ（ＭＥＭ−Ｃ）２０７、ＨＤＤコントローラ２０８、及び、記憶部であるＨＤ２０９を有し、ＮＢ２０３とＡＳＩＣ２０６との間をＡＧＰ(Accelerated Graphics Port)バス２２１で接続した構成となっている。

これらのうち、ＣＰＵ２０１は、画像形成装置２０の全体制御を行う制御部である。ＮＢ２０３は、ＣＰＵ２０１と、ＭＥＭ−Ｐ２０２、ＳＢ２０４、及びＡＧＰバス２２１とを接続するためのブリッジであり、ＭＥＭ−Ｐ２０２に対する読み書きなどを制御するメモリコントローラと、ＰＣＩ(Peripheral Component Interconnect)マスタ及びＡＧＰターゲットとを有する。

ＭＥＭ−Ｐ２０２は、コントローラ２１０の各機能を実現させるプログラムやデータの格納用メモリであるＲＯＭ２０２ａ、プログラムやデータの展開、及びメモリ印刷時の描画用メモリなどとして用いるＲＡＭ２０２ｂとからなる。尚、ＲＡＭ２０２ｂに記憶されているプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

ＳＢ２０４は、ＮＢ２０３とＰＣＩデバイス、周辺デバイスとを接続するためのブリッジである。ＡＳＩＣ２０６は、画像処理用のハードウェア要素を有する画像処理用途向けのＩＣ(Integrated Circuit)であり、ＡＧＰバス２２１、ＰＣＩバス２２２、ＨＤＤ２０８及びＭＥＭ−Ｃ２０７をそれぞれ接続するブリッジの役割を有する。このＡＳＩＣ２０６は、ＰＣＩターゲットおよびＡＧＰマスタ、ＡＳＩＣ２０６の中核をなすアービタ（ＡＲＢ）、ＭＥＭ−Ｃ２０７を制御するメモリコントローラ、ハードウェアロジックなどにより画像データの回転などを行う複数のＤＭＡＣ(Direct Memory Access Controller)、並びに、スキャナ部２３１及びプリンタ部２３２との間でＰＣＩバス２２２を介したデータ転送を行うＰＣＩユニットとからなる。なお、ＡＳＩＣ２０６には、ＵＳＢ(Universal Serial Bus)のインターフェースや、ＩＥＥＥ１３９４(Institute of Electrical and Electronics Engineers 1394）のインターフェースを接続するようにしてもよい。

ＭＥＭ−Ｃ２０７は、コピー用画像バッファ及び符号バッファとして用いるローカルメモリである。ＨＤ２０９は、画像データの蓄積、印刷時に用いるフォントデータの蓄積、フォームの蓄積を行うためのストレージである。ＨＤ２０９は、ＣＰＵ２０１の制御にしたがってＨＤ２０９に対するデータの読出又は書込を制御する。ＡＧＰバス２２１は、グラフィック処理を高速化するために提案されたグラフィックスアクセラレータカード用のバスインタフェースであり、ＭＥＭ−Ｐ２０２に高スループットで直接アクセスすることにより、グラフィックスアクセラレータカードを高速にすることができる。

また、近距離通信回路２２０は、ＮＦＣ、Ｂｌｕｅｔｏｏｔｈ等の通信回路である。更に、エンジン制御部２３０は、スキャナ部２３１及びプリンタ部２３２によって構成されている。また、操作パネル２４０は、現在の設定値や選択画面等を表示させ、操作者からの入力を受け付けるタッチパネル等のパネル表示部２４０ａ、並びに、濃度の設定条件などの画像形成に関する条件の設定値を受け付けるテンキー及びコピー開始指示を受け付けるスタートキー等からなる操作パネル２４０ｂを備えている。

コントローラ２１０は、画像形成装置２０全体の制御を行い、例えば、描画、通信、操作パネル２４０からの入力等を制御する。スキャナ部２３１又はプリンタ部２３２には、誤差拡散やガンマ変換などの画像処理部分が含まれている。

尚、画像形成装置２０は、操作パネル２４０のアプリケーション切り替えキーにより、ドキュメントボックス機能、コピー機能、プリンタ機能、およびファクシミリ機能を順次に切り替えて選択することが可能となる。ドキュメントボックス機能の選択時にはドキュメントボックスモードとなり、コピー機能の選択時にはコピーモードとなり、プリンタ機能の選択時にはプリンタモードとなり、ファクシミリモードの選択時にはファクシミリモードとなる。

また、ネットワークＩ／Ｆ２５０は、通信ネットワークを利用してデータ通信をするためのインターフェースである。近距離通信回路２２０及びネットワークＩ／Ｆ２５０は、ＰＣＩバス２２２を介して、ＡＳＩＣ２０６に電気的に接続されている。

撮像装置２５１は、画像形成装置２０の周辺の画像データを撮像する。尚、画像形成装置２０は、撮像装置２５１を有しておらず、画像形成装置２０に、画像形成装置２０とは別の撮像装置が取り付けられていても良い。撮像装置２５１は、画像形成装置２０の近傍に設置されており、画像形成装置２０と対応付けられていれば良い。

次に、ユーザ端末１０ハードウェア構成について説明する。図４は、ユーザ端末のハードウェア構成の一例を示す図である。

図４に示されているように、ユーザ端末１０は、ＣＰＵ１０１、ＲＯＭ１０２、ＲＡＭ１０３、ＥＥＰＲＯＭ１０４、ＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサ１０５、撮像素子Ｉ／Ｆ１０６、加速度・方位センサ１０７、メディアＩ／Ｆ１０８、ＧＰＳ受信部１１１を備えている。

これらのうち、ＣＰＵ１０１は、ユーザ端末１０全体の動作を制御する。ＲＯＭ１０２は、ＣＰＵ１０１やＩＰＬ等のＣＰＵ１０１の駆動に用いられるプログラムを記憶する。ＲＡＭ１０３は、ＣＰＵ１０１のワークエリアとして使用される。ＥＥＰＲＯＭ１０４は、ＣＰＵ１０１の制御にしたがって、スマートフォン用プログラム等の各種データの読み出し又は書き込みを行う。ＣＭＯＳセンサ１０５は、ＣＰＵ１０１の制御に従って被写体（主に自画像）を撮像して画像データを得る内蔵型の撮像手段の一種である。尚、撮像手段は、ＣＭＯＳセンサではなく、ＣＣＤ(Charge Coupled Device)センサ等の撮像手段であってもよい。撮像素子Ｉ／Ｆ１０６は、ＣＭＯＳセンサ１０５の駆動を制御する回路である。加速度・方位センサ１０７は、地磁気を検知する電子磁気コンパスやジャイロコンパス、加速度センサ等の各種センサである。メディアＩ／Ｆ１０８は、フラッシュメモリ等の記録メディア１０９に対するデータの読み出し又は書き込み（記憶）を制御する。ＧＰＳ受信部１１１は、ＧＰＳ衛星からＧＰＳ信号を受信する。

また、ユーザ端末１０は、遠距離通信回路１１２、ＣＭＯＳセンサ１１３、撮像素子Ｉ／Ｆ１１４、マイク１１５、スピーカ１１６、音入出力Ｉ／Ｆ１１７、ディスプレイ１１８、外部機器接続Ｉ／Ｆ(Interface)１１９、近距離通信回路１２０、近距離通信回路１２０のアンテナ１２０ａ、及びタッチパネル１２１を備えている。

これらのうち、遠距離通信回路１１２は、通信ネットワークを介して、他の機器と通信する回路である。ＣＭＯＳセンサ１１３は、ＣＰＵ１０１の制御に従って被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。撮像素子Ｉ／Ｆ１１４は、ＣＭＯＳセンサ１１３の駆動を制御する回路である。マイク１１５は、音を電気信号に変える内蔵型の回路である。スピーカ１１６は、電気信号を物理振動に変えて音楽や音声などの音を生み出す内蔵型の回路である。音入出力Ｉ／Ｆ１１７は、ＣＰＵ１０１の制御に従ってマイク１１５及びスピーカ１１６との間で音信号の入出力を処理する回路である。ディスプレイ１１８は、被写体の画像や各種アイコン等を表示する液晶や有機ＥＬ(Electro Luminescence)などの表示手段の一種である。外部機器接続Ｉ／Ｆ１１９は、各種の外部機器を接続するためのインターフェースである。近距離通信回路１２０は、ＮＦＣ(Near Field Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。タッチパネル１２１は、利用者がディスプレイ１１８を押下することで、ユーザ端末１０を操作する入力手段の一種である。

また、ユーザ端末１０は、バスライン１２２を備えている。バスライン１２２は、図４に示されているＣＰＵ１０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

次に、情報処理システム１の有する各装置の機能構成について説明する。始めに、図５を参照して、画像形成装置２０の機能構成について説明する。図５は、画像形成装置の機能構成を説明する図である。

本実施形態の画像形成装置２０は、ユーザ情報記憶部２７０、検出部２７１、認証制御部２７２、顔認識部２７３、特徴情報取得部２７４、ログイン制御部２７５、操作部２７６、無線通信部２８０を有する。これらのユーザ情報記憶部２７０以外の各部は、ＣＰＵ２０１が、ＭＥＭ−Ｐ２０２等に格納されたプログラムを読み出して実行することで実現される。また、ユーザ情報記憶部２７０は、ＭＥＭ−Ｐ２０２等によって実現されても良い。

ユーザ情報記憶部２７０は、ユーザ毎に、ユーザを識別するための識別情報であるユーザＩＤ及びパスワードを関連付けたユーザ情報を記憶する。本実施形態では、例えば、ユーザが画像形成装置２０を操作することによって、ユーザＩＤ及びパスワードがユーザ情報記憶部２７０に格納されても良い。また、本実施形態では、ユーザが、ユーザ端末１０からユーザＩＤ及びパスワードを画像形成装置２０へ送信して、ユーザＩＤ及びパスワードをユーザ情報記憶部２７０に予め格納してもよい。

また、本実施形態では、ユーザＩＤの代わりに、ユーザ端末１０を特定するための端末ＩＤを用いても良い。また、本実施形態では、ユーザＩＤが、ユーザ端末１０を特定するための識別情報として用いられても良い。

検出部２７１は、画像形成装置２０の認証領域の中にユーザ端末１０が入ったことと、認証領域の外へ出たことを検出する。具体的には、検出部２７１は、無線通信部２８０により、ユーザ端末１０からビーコン信号を受信した場合に、ユーザ端末１０が認証領域内に入ったことを検出し、ビーコン信号の受信が途絶えたとき、ユーザ端末１０が認証領域外へ出たことを検出しても良い。

また、検出部２７１は、画像形成装置２０のログイン領域内にユーザ端末１０が入ったことと、ログイン領域外へ出たことを検出する。

具体的には、検出部２７１は、撮像装置２５１が撮像した画像データにおいて人物が認識されたとき、ユーザ端末１０がログイン領域内に入ったことを検出しても良い。また、検出部２７１は、撮像装置２５１が撮像した画像データにおいて人物が認識されなくなった場合に、ユーザ端末１０がログイン領域外へ出たことを検出しても良い。

本実施形態の認証領域とは、例えば、画像形成装置２０が、ユーザ端末１０から発信されたビーコン信号を受信し、その応答となる信号を送信できる領域である。また、ログイン領域とは、認証領域よりも狭い領域であって、画像形成装置２０の有する撮像装置によって画像データとされる撮像領域であっても良い。

尚、認証領域の範囲及びログイン領域の範囲は、ネットワーク構成や用途に応じて変更可能であってもよい。

認証制御部２７２は、認証領域内のユーザ端末１０から送信される認証要求に応答して、ユーザ端末１０のユーザを認証するかどうかを判定するための認証処理を行う。具体的には、認証制御部２７２は、ユーザ端末１０から送信された認証要求に含まれるパスワード及びユーザＩＤが、ユーザ情報記憶部２７０に記憶されているかどうかを判定する。つまり、認証制御部２７２は、ユーザ端末１０から受信したパスワード及びユーザＩＤに応じてユーザを特定する特定部の一例である。

尚、認証要求には、ユーザＩＤの代わりに端末ＩＤが含まれていても良い。

認証制御部２７２は、ユーザ端末１０から送信されたユーザＩＤ及びパスワードが、ユーザ情報記憶部２７０に記憶されている場合、ユーザ端末１０のユーザを認証する。また、認証制御部２７２は、ユーザ端末１０から送信されたユーザＩＤ及びパスワードが、ユーザ情報記憶部２７０に記憶されていない場合、ユーザ端末１０のユーザを認証しない。

さらに、認証制御部２７２は、認証処理の結果を示す認証情報を生成する。また、認証制御部２７２は、認証領域外へユーザ端末１０が出たことが検出されると、生成された認証情報を破棄しても良い。

顔認識部２７３は、画像形成装置２０の有する撮像装置２５１によって撮像された画像データから、人の顔を認識する。

尚、本実施形態の顔認識部２７３は、例えば、ユーザ端末１０がログイン領域内に入ったことが検出されたときに、自動的に画像形成装置２０の撮像装置２５１を起動させても良い。

また、本実施形態の顔認識部２７３は、人の顔が画像形成装置２０を操作することができる向きで捉えられたときに、人の顔と認識する。具体的には、顔認識部２７３は、撮像装置２５１が撮像した画像における所定の範囲内に人の顔が写っていた場合に、人の顔と認識しても良い、所定の範囲は、予め設定されていても良い。

さらに、顔認識部２７３は、撮像装置２５１によって連続して撮像された複数の画像データから、人が画像形成装置２０へ向かってきているか否かを判定し、人が向かってきていると判定した場合に、人の顔を認識したものとしても良い。

特徴情報取得部２７４は、顔認識部２７３により、人の顔が認識された場合に、認識した人の顔の特徴を示す特徴情報を取得する。

ログイン制御部２７５は、認証情報を用いて、検出部２７１によって検出されたログイン領域内のユーザ端末１０のユーザが画像形成装置２０にログインすることを許可するためのログイン処理を行う。

ログイン制御部２７５は、認証情報が示す認証結果が、ユーザが認証されたことを示す場合、ユーザのログインを許可する。また、ログイン制御部２７５は、認証情報が示す認証結果が、ユーザが認証されていないことを示す場合、ユーザのログインを許可しない。また、ログイン制御部２７５は、ログイン処理の結果を示すログイン情報を生成する。また、ログイン制御部２７５は、ユーザ端末１０がログイン領域外へ出たことが検出されると、ログイン情報を破棄しても良い。

画像形成装置２０は、ログイン制御部２７５によるログイン処理によって、ユーザのログインが許可されると、例えば、コピー機能及びスキャン機能の少なくとも一方を利用可能なログイン状態へ移行する。

操作部２７６は、画像形成装置２０にログイン中のユーザから、コピー実行要求及びスキャン実行要求などの要求を受け付ける。

無線通信部２８０は、他の画像形成装置２０及びユーザ端末１０と無線通信を行う。無線通信部２８０は、認証要求受信部２８１、認証要求送信部２８２、認証情報受信部２８３、認証情報送信部２８４、ログイン要求受信部２８５、特徴情報送信部２８６、ログイン情報受信部２８７、ログイン情報送信部２８８を有する。

認証要求受信部２８１は、検出部２７１によって検出された認証領域内のユーザ端末１０から認証要求を受信する。また、認証要求受信部２８１は、ユーザ端末１０から受信したユーザＩＤ及びパスワードを記憶していない他の画像形成装置２０から認証要求を受信する。

認証要求送信部２８２は、ユーザ端末１０から受信したユーザＩＤ及びパスワードが画像形成装置２０のユーザ情報記憶部２７０に記憶されていない場合、他の画像形成装置２０へ認証要求を送信する。すなわち、認証要求送信部２８２は、認証制御部２７２がユーザを認証しないと判定すると、他の画像形成装置２０へ認証要求を送信して、ユーザを認証するかどうかを判定するための認証処理を行うよう１又は他の画像形成装置２０に要求する。

認証情報受信部２８３は、認証処理の結果を示す認証情報を他の画像形成装置２０から受信する。認証情報送信部２８４は、認証処理の結果を示す認証情報を他の画像形成装置２０及びユーザ端末１０へ送信する。すなわち、認証情報受信部２８３及び認証情報送信部２８４は、ユーザ端末１０及び他の画像形成装置２０と認証情報を共有する認証情報共有部の一例である。

ログイン要求受信部２８５は、ログイン領域内のユーザ端末１０からのログイン要求を受信する。

特徴情報送信部２８６は、ログイン要求を送信したユーザ端末１０に対し、特徴情報取得部２７４が取得した特徴情報を送信する。また、特徴情報送信部２８６は、例えば、画像形成装置２０のログイン領域内に複数のユーザ端末１０が検出された場合には、受信したビーコン信号の強度が最も大きいユーザ端末１０へ特徴情報を送信する。

ログイン情報受信部２８７は、ログイン処理の結果を示すログイン情報を他の画像形成装置２０から受信する。ログイン情報送信部２８８は、ログイン処理の結果を示すログイン情報を他の画像形成装置２０へ送信する。すなわち、ログイン情報受信部２８７及びログイン情報送信部２８８は、ユーザ端末１０及び他の画像形成装置２０とログイン情報を共有するログイン情報共有部の一例である。

次に、ユーザ端末１０の機能構成について説明する。図６は、ユーザ端末の機能構成を説明する図である。ユーザ端末１０は、操作部１１０、記憶部１２５、無線通信部１３０、制御部１４０を有する。

操作部１１０は、各種画面をタッチパネル１２１に表示し、ユーザから各種操作を受け付ける。また、ユーザは、操作部１１０を介してユーザＩＤ及びパスワードを設定することができる。

記憶部１２５は、例えば、ＲＯＭ１０２、ＲＡＭ１０３、ＥＥＰＲＯＭ１０４等によって実現され、ユーザＩＤ及びパスワードを記憶する。また、本実施形態の記憶部１２５は、ユーザ端末１０のユーザの顔の特徴を示す情報が格納されている。記憶部１２５に格納されている顔の特徴を示す情報は、ユーザ端末１０のユーザの顔の画像データであっても良い。

無線通信部１３０は、例えば近距離無線通信回路１２０等によって実現され、画像形成装置２０と無線通信を行う。具体的には、無線通信部１３０は、ユーザＩＤ及びパスワードを含む認証要求を画像形成装置２０へ送信する。また、無線通信部１３０は、画像形成装置２０から認証処理の結果を示す認証情報及びログイン処理の結果を示すログイン情報を受信する。また、無線通信部１３０は、画像形成装置２０へログイン要求を送信する。また。無線通信部１３０は、画像形成装置２０から特徴情報を受信する。

制御部１４０は、画像形成装置２０の特徴情報送信部２８６から送信された特徴情報と、記憶部１２５に格納された顔の特徴を示す情報とを照合し、両者が一致するか否かを判定する。尚、制御部１４０に格納された顔の特徴を示す情報は、ユーザ端末１０のユーザの顔の特徴を示す情報である。

そして、制御部１４０は、両者が一致する場合に、無線通信部１３０を介して、画像形成装置２０に対してログイン要求を送信する。

次に、情報処理システム１により実行される認証処理について説明する。図７は、情報処理システムにおいて実行される認証処理の一例を示すシーケンス図である。図７では、ユーザ端末１０のユーザが、画像形成装置２０Ａの認証領域内に入ったときの処理を示している。

画像形成装置群２０Ｇｒに含まれる画像形成装置２０Ａは、検出部２７１により、ユーザ端末１０が認証領域内に入ったこと検出すると（ステップＳ７０１）、無線通信部２８０により、ユーザ端末１０を検出したこと示す応答信号をユーザ端末１０に送信する（ステップＳ７０２）。

ユーザ端末１０は、応答信号を受信すると（ステップＳ７０３）、認証要求を画像形成装置２０Ａに送信する（ステップＳ７０４）。ここで送信される認証要求は、ユーザ情報を含む。ユーザ情報は、ユーザ端末１０の記憶部１２５に記憶されているユーザＩＤ及びパスワードを含む。

尚、ユーザ端末１０は、設定に応じて、画像形成装置２０Ａから応答信号を受信すると、認証要求を画像形成装置２０Ａへ自動的に送信しても良い。また、ユーザ端末１０は、設定に応じて、画像形成装置２０から応答信号を受信すると、認証要求を送信することを促す画面を操作部１１０に表示させても良い。そして、ユーザ端末１０は、ユーザによって認証要求を送信するための操作が行われると、認証要求を画像形成装置２０へ送信しても良い。

画像形成装置２０Ａは、認証要求を受信すると（ステップＳ７０５）、認証制御部２７２により、認証要求に含まれるユーザ情報に基づく認証処理を開始する（ステップＳ７０６）。ここで、認証制御部２７２は、ユーザ端末１０から送信されたユーザ情報が、画像形成装置２０Ａのユーザ情報記憶部２７０に記憶されたユーザ情報と一致する場合、ユーザ端末１０のユーザを認証する。

そして、画像形成装置２０Ａは、他の画像形成装置２０及びユーザ端末１０と認証処理の結果を示す認証情報を共有する（ステップＳ７０７）。この場合に共有される認証情報は、ユーザ端末１０のユーザが認証されたことを示すものとなる。

次に、図８を参照して、画像形成装置２０によるログイン処理について説明する。図８は、画像形成装置によるログイン処理を説明するフローチャートである。

本実施形態の画像形成装置２０は、検出部２７１により、自機のログイン領域内にユーザ端末１０が検出されたか否かを判定する（ステップＳ８０１）。ステップＳ８０１において、ログイン領域内にユーザ端末１０が検出されない場合、画像形成装置２０は、待機する。

ステップＳ８０１において、ログイン領域内にユーザ端末１０が検出された場合、画像形成装置２０は、顔認識部２７３により、撮像装置２５１が撮像した画像データを取得する（ステップＳ８０２）。

続いて、画像形成装置２０は、顔認識部２７３が、画像データにおいて人の顔を認識したか否かを判定する（ステップＳ８０３）。具体的には、画像形成装置２０は、特徴情報取得部２７４が特徴情報を取得したか否かを判定している。

ステップＳ８０３において、人の顔が認識されていない場合、画像形成装置２０は、ステップＳ８０１へ戻る。

ステップＳ８０３において、人の顔が認識された場合、画像形成装置２０は、特徴情報送信部２８６により、特徴情報取得部２７４が取得した特徴情報を、受信したビーコン信号の強度が最も大きいユーザ端末１０へ送信する（ステップＳ８０４）。

続いて、画像形成装置２０は、ログイン要求受信部２８５により、特徴情報を送信したユーザ端末１０から、特徴情報を受信したことに対する応答信号を受信する（ステップＳ８０５）。

この応答信号は、ユーザ端末１０において、特徴情報がユーザ端末１０のユーザの特徴を示す情報と一致するか否かを照合した結果を示す情報を含む。ユーザ端末１０の処理の詳細は後述する。

言い換えれば、この応答信号は、画像形成装置２０に対するログイン要求、又は、ログイン要求を行わないことを示す通知の何れか一方を含む。

画像形成装置２０は、ログイン要求受信部２８５により、特徴情報を受信したユーザ端末１０から、ログイン要求を受信したか否かを判定する（ステップＳ８０６）。つまり、ログイン要求受信部２８５は、応答信号にログイン要求が含まるか否かを判定している。

ステップＳ８０６において、ログイン要求を受信しない場合、つまり、応答信号にログイン要求を行わないことを示す通知が含まれていた場合に、画像形成装置２０は、次に受信したビーコン信号の強度が大きいユーザ端末１０が存在するか否かを判定する（ステップＳ８０７）。

ステップＳ８０７において、該当するユーザ端末１０が存在する場合、画像形成装置２０は、ステップＳ８０４へ戻り、次にビーコン信号の強度が大きいユーザ端末１０に、特徴情報を送信する。

尚、ログイン領域内では、ユーザ端末１０は常に移動しており、信号の強度は変化している。画像形成装置２０は、特徴情報を受信しておらず、且つ、信号の強度が大きいユーザ端末１０から順に、特徴情報を送信する。

ステップＳ８０７において、該当するユーザ端末１０が存在しない場合、画像形成装置２０は、処理を終了する。

ステップＳ８０６において、ログイン要求を受信した場合、画像形成装置２０は、ログイン制御部２７５により、ユーザ端末１０のログイン処理を実行し（ステップＳ８０８）、処理を終了する。

次に、図９を参照して、特徴情報を受信したときのユーザ端末１０の動作について説明する。図９は、ユーザ端末の動作を説明するフローチャートである。

本実施形態のユーザ端末１０は、特徴情報を受信すると、制御部１４０により、記憶部１２５に格納された、ユーザ端末１０のユーザの顔の特徴を示す情報と、受信した特徴情報とを照合する（ステップＳ９０１）。

続いて、ユーザ端末１０の制御部１４０は、特徴情報が、ユーザ端末１０のユーザの顔の特徴を示す情報と一致するか否かを判定する（ステップＳ９０２）。つまり、画像形成装置２０の撮像装置２５１に撮像された人物がユーザ端末１０のユーザであるか否かを判定する。

ステップＳ９０２において、特徴情報が、ユーザ端末１０のユーザの顔の特徴を示す情報と一致する場合、ユーザ端末１０の制御部１４０は、無線通信部１３０を介してログイン要求を画像形成装置２０へ送信し（ステップＳ９０３）、処理を終了する。

ステップＳ９０２において、特徴情報が、ユーザ端末１０のユーザの顔の特徴を示す情報と一致しない場合、ユーザ端末１０の制御部１４０は、ログイン要求を画像形成装置２０へ送信せずに（ステップＳ９０４）、処理を終了する。

本実施形態では、このように、ユーザ端末１０で特徴情報と、ユーザの顔の特徴を示す情報とを照合するため、例えば、ユーザ端末１０が第三者の手に渡っていた場合等において、ユーザ端末１０が自動的にログインすることがなく、安全性を向上させることができる。

また、本実施形態では、ユーザ端末１０が自動でログインされるものとしたが、これに限定されない。本実施形態では、ユーザ端末１０がログイン要求を送信する代わりに、ログイン要求の送信を促す画面を操作部１１０によって表示させても良い。

次に、図１０を参照して、ユーザＸとユーザＹとが画像形成装置２０Ａのログイン領域内に存在する場合の情報処理システム１の動作について説明する。

図１０は、情報処理システムにおいて実行されるログイン処理の一例を説明するシーケンス図である。

本実施形態の画像形成装置２０Ａは、検出部２７１により、ユーザＸとユーザＹとが自機のログイン領域内に存在していることを検出している。また、ユーザＸと紐付けられたユーザ端末１０であるユーザ端末１０ｘと、ユーザＹと紐付けられたユーザ端末１０であるユーザ端末１０ｙとは、認証制御部２７２によって認証されている。

画像形成装置２０Ａは、顔認識部２７３により、ユーザＸの顔を認識し、ユーザＸの顔の特徴を示す特徴情報を取得する（ステップＳ１００１）。

次に、画像形成装置２０Ａは、受信したビーコン信号の強度が最も大きいユーザ端末１０へ特徴情報を送信する。ここでは、ユーザＸの方がユーザＹよりも画像形成装置２０の近くに位置しており、ユーザ端末１０ｘから画像形成装置２０Ａが受信するビーコン信号の強度の方が、ユーザ端末１０ｙから画像形成装置２０Ａが受信するビーコン信号の強度よりも大きい。したがって、画像形成装置２０Ａは、ユーザ端末１０ｙへ特徴情報を送信する（ステップＳ１００２）。

ユーザ端末１０ｙは、特徴情報を受信すると、ユーザ端末１０ｙの記憶部１２５に格納された、ユーザＹの顔の特徴を示す情報と、特徴情報とを照合し、ログイン要求を送信するか否かを判定する（ステップＳ１００３）。ここでは、特徴情報は、ユーザＸの顔の特徴を示す情報であるため、特徴情報は、ユーザＹの顔の特徴を示す情報と一致しない。

よって、ユーザ端末１０ｙは、ログイン要求を行わないことを示す通知を含む応答信号を、画像形成装置２０Ａへ送信する（ステップＳ１００４）。

画像形成装置２０Ａは、この通知を受け付けると、特徴情報を受信しておらず、次にビーコン信号の強度が大きいユーザ端末１０へ、特徴情報を送信する。ここでは、画像形成装置２０Ａは、ユーザ端末１０ｘへ特徴情報を送信する（ステップＳ１００５）。

ユーザ端末１０ｘは、特徴情報を受信すると、ユーザ端末１０ｘの記憶部１２５に格納された、ユーザＸの顔の特徴を示す情報と、特徴情報とを照合し、ログイン要求を送信するか否かを判定する（ステップＳ１００６）。特徴情報は、ユーザＸの顔の特徴を示す情報であるため、特徴情報は、ユーザＸの顔の特徴を示す情報と一致する。

よって、ユーザ端末１０ｘは、ログイン要求を含む応答信号を、画像形成装置２０Ａへ送信する（ステップＳ１００７）。

画像形成装置２０Ａは、この応答信号をログイン要求受信部２８５により受信すると、ログイン制御部２７５により、ユーザ端末１０ｘのログイン処理を実行する（ステップＳ１００８）。

このように、本実施形態では、画像形成装置２０に向かって近づいてきたユーザの顔認証を用いて、画像形成装置２０のログイン領域内に複数の人物が存在している状況であっても、ログインさせるユーザを特一意に特定できる。

尚、本実施形態では、画像形成装置２０は、顔認識部２７３が取得した特徴情報を、ユーザ端末１０でユーザ端末１０のユーザの顔の特徴を示す情報と照合した結果を受信して、ログイン処理を行うか否かを判定するものとしたが、これに限定されない。

画像形成装置２０は、例えば、ユーザ情報記憶部２７０に、ユーザＩＤ及びパスワードと、ユーザＩＤによって特定されるユーザの顔の特徴を示す情報とを対応づけ格納しておき、顔認識部２７３が取得した特徴情報と、認証されたユーザＩＤと対応付けられたユーザの顔の特徴を示す情報とを照合しても良い。この場合には、ユーザ端末１０において照合を行わなくても良い。

また、画像形成装置２０は、他の画像形成装置２０のユーザ情報記憶部２７０に格納された、ユーザの顔の特徴を示す情報と、特徴情報とを照合しても良い。ユーザＩＤによって特定されるユーザの顔の特徴を示す情報は、画像形成装置群２０Ｇｒに含まれる画像形成装置２０の何れかに格納されていれば良い。

また、本実施形態の画像形成装置２０は、情報処理装置の一例である。情報処理装置は、通信機能を備えた装置であれば良く、例えば、ＰＪ（Projector：プロジェクタ）、ＩＷＢ（Interactive White Board：相互通信が可能な電子式の黒板機能を有する白板）、デジタルサイネージ等の出力装置、ＨＵＤ（Head Up Display）装置、産業機械、撮像装置、集音装置、医療機器、ネットワーク家電、自動車（Connected Car）、ノートＰＣ（Personal Computer）、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、デジタルカメラ、ウェアラブルＰＣまたはデスクトップＰＣ等であってもよい。

１ 情報処理システム１
１０ ユーザ端末
２０ 画像形成装置
１１０ 操作部
１２５ 記憶部
１３０ 無線通信部
１４０ 制御部
２７０ ユーザ情報記憶部
２７１ 検出部
２７２ 認証制御部
２７３ 顔認識部
２７４ 特徴情報取得部
２７５ ログイン制御部
２７６ 操作部
２８０ 無線通信部
２８１ 認証要求受信部
２８２ 認証要求送信部
２８３ 認証情報受信部
２８４ 認証情報送信部
２８５ ログイン要求受信部
２８６ 特徴情報送信部
２７０ ログイン情報受信部
２７２ ログイン情報送信部

特開２０１８−０４５６６６号公報

Claims (7)

1. １又は複数の他の情報処理装置と、ユーザにより利用される外部装置とに通信可能に接続される情報処理装置であって、
   前記外部装置が前記情報処理装置の認証領域内に入ること及び前記外部装置が前記情報処理装置のログイン領域内に入ることを検出する検出部と、
   前記外部装置が前記ログイン領域内に入ったことが検出された場合に、前記情報処理装置と対応付けられた撮像装置により撮像された画像から、前記ログイン領域内の人物の顔画像を認識する顔認識部と、
   認識された前記人物の顔と、前記外部装置のユーザの顔とが一致する場合に、前記外部装置のユーザのログイン処理を行うログイン制御部と、を有する情報処理装置。
2. 前記顔認識部により認識された前記人物の顔の特徴を示す特徴情報を、前記ログイン領域内に入った前記外部装置へ送信する特徴情報送信部と、
   前記外部装置において、前記特徴情報が示す特徴が、前記外部装置のユーザの顔の特徴と一致すると判定された場合に、前記外部装置からログイン要求を受信するログイン要求受信部と、を有し、
   前記ログイン制御部は、前記ログイン要求に基づき前記ログイン処理を行う、請求項１記載の情報処理装置。
3. 前記特徴情報送信部は、
   前記外部装置から、前記特徴情報が示す特徴が、前記外部装置のユーザの顔の特徴と一致しないことを示す通知を受信した場合に、前記ログイン領域内に入ったことが検出された他の外部装置へ前記特徴情報を送信する、請求項２記載の情報処理装置。
4. 前記ログイン領域内に複数の外部装置が入ったことが検出された場合に、
   前記特徴情報送信部は、
   前記複数の外部装置のうち、強度の大きい信号を送信した外部装置から順に、前記特徴情報を送信する、請求項３記載の情報処理装置。
5. 前記外部装置が前記認証領域内に入ったことが検出された場合に、前記外部装置を特定するための識別情報を前記外部装置から受信する受信部と、
   前記外部装置を特定するための識別情報と、前記外部装置のユーザの顔の特徴を示す情報とが、対応付けられて格納されたユーザ情報記憶部と、を有し、
   前記識別情報に基づき、前記外部装置のユーザの顔の特徴を示す情報を特定し、特定した前記ユーザの顔の特徴を示す情報と、前記特徴情報との照合を行う、請求項２乃至４の何れか一項に記載の情報処理装置。
6. １又は複数の他の情報処理装置と、ユーザにより利用される外部装置とに通信可能に接続される情報処理装置と、を有する情報処理システムであって、
   前記情報処理装置は、
   前記外部装置が前記情報処理装置の認証領域内に入ること及び前記外部装置が前記情報処理装置のログイン領域内に入ることを検出する検出部と、
   前記外部装置が前記ログイン領域内に入ったことが検出された場合に、前記情報処理装置と対応付けられた撮像装置により撮像された画像から、前記ログイン領域内の人物の顔画像を認識する顔認識部と、
   認識された前記人物の顔と、前記外部装置のユーザの顔とが一致している場合に、前記外部装置のユーザのログイン処理を行うログイン制御部と、を有する情報処理システム。
7. １又は複数の他の情報処理装置と、ユーザにより利用される外部装置とに通信可能に接続される情報処理装置に、
   前記外部装置が前記情報処理装置の認証領域内に入ること及び前記外部装置が前記情報処理装置のログイン領域内に入ることを検出する検出処理と、
   前記外部装置が前記ログイン領域内に入ったことが検出された場合に、前記情報処理装置と対応付けられた撮像装置により撮像された画像から、前記ログイン領域内の人物の顔画像を認識する顔認識処理と、
   認識された前記人物の顔と、前記外部装置のユーザの顔とが一致している場合に、前記外部装置のユーザのログイン処理を行うログイン制御処理と、を実行させる情報処理プログラム。

Images