JP2010218039A - System and method for authenticating face - Google Patents

System and method for authenticating face Download PDF

Info

Publication number
JP2010218039A
JP2010218039A JP2009061694A JP2009061694A JP2010218039A JP 2010218039 A JP2010218039 A JP 2010218039A JP 2009061694 A JP2009061694 A JP 2009061694A JP 2009061694 A JP2009061694 A JP 2009061694A JP 2010218039 A JP2010218039 A JP 2010218039A
Authority
JP
Japan
Prior art keywords
authentication
unit
face
person
authenticated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2009061694A
Other languages
Japanese (ja)
Inventor
Masako Nakamura
雅子 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2009061694A priority Critical patent/JP2010218039A/en
Publication of JP2010218039A publication Critical patent/JP2010218039A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a face authentication system capable of surely performing an authentication while hardly impairing the convenience of the authentication using a moving image. <P>SOLUTION: A face authentication system includes: a detection part 111 for detecting an authentication candidate; an image pickup part 112 for picking up the image of the detected authentication candidate, and for generating moving image data; a feature extraction part 122 for generating feature information by extracting the features of the face of the authentication candidate based on the moving image data; an authentication part 123 for performing face authentication based on the feature information; and a guidance part 113 for guiding the authentication candidate to turn his or her face to the direction of the image pickup means in a prescribed time or more when the feature of the face of the authentication candidate can not be extracted by the feature extraction means. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、顔認証システム及び顔認証方法に関する。   The present invention relates to a face authentication system and a face authentication method.

動画像（映像）を用いる顔認証システムは、認証対象者の動きや顔の表情の変化をある程度許容するとともに、静止画像を用いる顔認証システムに比べてなりすましが困難であるという特徴がある。   A face authentication system that uses a moving image (video) has a feature that it allows a certain amount of movement of the person to be authenticated and changes in facial expressions, and is more difficult to impersonate than a face authentication system that uses still images.

しかしながら、認証対象者がカメラに顔を向けない場合には認証を行うことができないのは、動画像を用いる場合も静止画像を用いる場合も同じである。   However, if the person to be authenticated does not turn his face to the camera, the authentication cannot be performed both in the case of using a moving image and in the case of using a still image.

従来の認証対象者に顔をカメラに向けさせる方法として、反射行動を誘発させる物理的作用を与える方法がある（例えば、特許文献１参照）。   As a conventional method of directing the face of the person to be authenticated to the camera, there is a method of giving a physical action that induces reflex behavior (see, for example, Patent Document 1).

特開２００５−９４７１０号公報JP-A-2005-94710

特許文献１に記載された方法は、認証対象者が物理的作用に対して反射的に取った行動の結果として、顔がカメラの方向を向くことを期待するものであって、顔認証を行える確率を上昇させる可能性を有するが、顔認証を確実に行えるようにするものではない。即ち、この方法では、認証に要する時間だけ、継続して顔をカメラに向けさせることは期待できない。   The method described in Patent Literature 1 expects the face to face the direction of the camera as a result of the action of the person to be authenticated reflexively with respect to the physical action, and can perform face authentication. Although it has a possibility of increasing the probability, it does not ensure face authentication. In other words, with this method, it is not expected to continuously face the camera for the time required for authentication.

その一方で、顔認証を確実に行うため、認証対象者に対して認証のたびに、カメラに対して所定の姿勢を取るように要求することは、動画像を用いた認証の利便性を損なうものである。   On the other hand, in order to reliably perform face authentication, requesting the authentication target person to take a predetermined posture with respect to the authentication target deteriorates the convenience of authentication using moving images. Is.

そこで、本発明は、認証対象者の利便性を殆ど損なうことなく、顔認証を確実に行えるようにした顔認証システムを提供することを目的とする。   Therefore, an object of the present invention is to provide a face authentication system that can reliably perform face authentication without substantially impairing the convenience of the person to be authenticated.

本発明の一要旨に係る顔認証システムは、認証対象者を検出する検出手段と、該検出手段によって検出された前記認証対象者を撮像し動画像データを生成する撮像手段と、前記動画像データに基づいて前記認証対象者の顔の特徴を抽出し特徴情報を生成する特徴抽出手段と、前記特徴情報に基づき認証を行う認証手段と、前記特徴抽出手段によって前記認証対象者の顔の特徴が抽出できなかったときに、前記認証対象者に対して、顔を前記撮像手段の方向へ所定時間以上向かせるように誘導する誘導手段と、を備えていることを特徴とする。   A face authentication system according to an aspect of the present invention includes a detection unit that detects a person to be authenticated, an image pickup unit that captures an image of the person to be detected detected by the detection unit and generates moving image data, and the moving image data The feature extraction means for extracting the feature of the face of the person to be authenticated based on the above and generating feature information, the authentication means for performing authentication based on the feature information, and the feature of the face of the person to be authenticated by the feature extraction means And a guiding unit that guides the person to be authenticated to face the face toward the image capturing unit for a predetermined time or longer when extraction is not possible.

本発明によれば、認証対象者の顔の特徴を抽出することができなかったときに、顔を所定時間以上撮像手段の方へ向けるように誘導するようにし、特徴を抽出できた場合には、認証対象者に対して行動を要求しない。このため、認証対象者の利便性を殆ど損なうことなく、確実に顔認証を行うことができる。   According to the present invention, when the feature of the face of the person to be authenticated cannot be extracted, the face is guided to face the imaging means for a predetermined time or more, and when the feature can be extracted , No action is required on the subject of authentication. For this reason, face authentication can be reliably performed without substantially impairing the convenience of the person to be authenticated.

本発明の第１の実施の形態に係る認証システムの概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the authentication system which concerns on the 1st Embodiment of this invention. 本発明の第２の実施の形態に係る認証システムの概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the authentication system which concerns on the 2nd Embodiment of this invention. 図２の認証システムの動作を説明するためのフローチャートである。It is a flowchart for demonstrating operation | movement of the authentication system of FIG.

以下、図面を参照して本発明の実施の形態について詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図１は、本発明の第１の実施の形態に係る顔認証システムの概略構成を示すブロック図である。   FIG. 1 is a block diagram showing a schematic configuration of a face authentication system according to the first embodiment of the present invention.

図示の顔認証システムは、認証装置１１と、認証サーバ１２と、記憶装置１３とを有している。   The illustrated face authentication system includes an authentication device 11, an authentication server 12, and a storage device 13.

認証装置１１は、検出部１１１、撮像部１１２及び誘導部１１３を有している。   The authentication device 11 includes a detection unit 111, an imaging unit 112, and a guidance unit 113.

また、認証サーバ１２は、制御部１２１、特徴抽出部１２２及び認証部１２３を有している。   The authentication server 12 includes a control unit 121, a feature extraction unit 122, and an authentication unit 123.

さらに、記憶部１３は、認証データ記憶部１３１を有している。   Furthermore, the storage unit 13 includes an authentication data storage unit 131.

認証装置１１は、施錠装置等の認証対象機器の近くに配置されるか、あるいはその一部又は全部が認証対象機器に組み込まれる。   The authentication device 11 is disposed near an authentication target device such as a locking device, or a part or all of the authentication device 11 is incorporated in the authentication target device.

検出部１１１は、認証対象機器を操作しようする者（認証対象者）が立ち入ると想定される領域に立ち入った者がいることを検出するセンサであってよい。あるいは、認証対象者が認証対象機器を操作する際に最初に触れる部分（スイッチ等）に組み込まれたセンサであってもよい。検出部１１１は、認証対象者の存在を検出すると、認証対象者を検出したことを認証サーバ１２に通知する。   The detection unit 111 may be a sensor that detects that there is a person who enters an area assumed to be entered by a person (authentication target person) who operates the authentication target device. Alternatively, the sensor may be a sensor incorporated in a portion (a switch or the like) that is first touched when the authentication target person operates the authentication target device. When detecting the presence of the authentication target person, the detection unit 111 notifies the authentication server 12 that the authentication target person has been detected.

撮像部１１２は、撮像手段として機能し、例えばＣＣＤカメラであってよい。撮像部１１２は、認証対象機器に関して定められた所定の領域を撮像する。この所定の領域は、認証対象者の顔が認証対象機器を操作しようとする場合に存在すると想定される領域に定められる。撮像部１１２からの撮像データは、認証サーバ１２へ送られる。   The imaging unit 112 functions as an imaging unit, and may be a CCD camera, for example. The imaging unit 112 images a predetermined area defined for the authentication target device. This predetermined area is defined as an area assumed to exist when the face of the person to be authenticated attempts to operate the device to be authenticated. Imaging data from the imaging unit 112 is sent to the authentication server 12.

誘導部１１３は、例えば、表示器及びスピーカを含んでよい。誘導部１１３は、認証サーバ１２からの指示に従い、認証対象者の顔が撮像部１１２によって撮像されるように、表示や音声により認証対象者を誘導する。   The guiding unit 113 may include, for example, a display and a speaker. In accordance with an instruction from the authentication server 12, the guiding unit 113 guides the authentication target person by display or sound so that the image of the authentication target person's face is captured by the imaging unit 112.

制御部１２１は、制御プログラムに従って動作し、認証システム全体の制御を司る。制御プログラムは、記憶装置１３に格納されてよい。または、制御プログラムは認証サーバ１２に内蔵される図示しない記憶装置１３に格納されてよい。あるいは、磁気ディスクや光ディスク等の記録媒体に記録され、認証サーバ１２の備える読取装置（図示せず）により読み出されるようにしてもよい。   The control unit 121 operates according to the control program and controls the entire authentication system. The control program may be stored in the storage device 13. Alternatively, the control program may be stored in a storage device 13 (not shown) built in the authentication server 12. Alternatively, it may be recorded on a recording medium such as a magnetic disk or an optical disk and read by a reading device (not shown) provided in the authentication server 12.

制御部１２１は、検出部１１１からの検出通知に応じて認証装置１１の撮像部１１２からの撮像データが特徴抽出部１２２へ送られるようにする。また、制御部１２１は、特徴抽出部１２２からの特徴抽出不可の通知に応じて、認証装置１１の誘導部１１３へ誘導指示を出す。   The control unit 121 causes the imaging data from the imaging unit 112 of the authentication device 11 to be sent to the feature extraction unit 122 in response to the detection notification from the detection unit 111. In addition, the control unit 121 issues a guidance instruction to the guidance unit 113 of the authentication device 11 in response to the feature extraction failure notification from the feature extraction unit 122.

特徴抽出部１２２は、認証装置１１からの撮像データに基づき、認証対象者の顔の特徴を抽出し、特徴情報を認証部１２３へ送る。所定時間内に認証対象者の顔の特徴を抽出できなかったなら、制御部１２１へその旨通知する。   The feature extraction unit 122 extracts the facial features of the person to be authenticated based on the imaging data from the authentication device 11 and sends the feature information to the authentication unit 123. If the facial features of the person to be authenticated cannot be extracted within a predetermined time, the control unit 121 is notified accordingly.

認証部１２３は、特徴抽出部１２２からの特徴情報と、記憶装置１３の認証データ記憶部１３１に記憶された認証データとに基づいて認証を行う。認証結果は、制御部１２１に通知され、制御部１２１より認証対象機器へ送られる。   The authentication unit 123 performs authentication based on the feature information from the feature extraction unit 122 and the authentication data stored in the authentication data storage unit 131 of the storage device 13. The authentication result is notified to the control unit 121 and sent from the control unit 121 to the authentication target device.

認証データ記憶部１３１は、一以上の登録者の顔の特徴を認証データとして予め記憶している。   The authentication data storage unit 131 stores in advance the facial features of one or more registrants as authentication data.

次に、図１の顔認証システムの動作について説明する。   Next, the operation of the face authentication system in FIG. 1 will be described.

検出部１１１は、検出手段として機能し、認証対象者を検出すると、その旨を認証サーバ１２へ通知する。   The detection unit 111 functions as a detection unit, and when detecting the person to be authenticated, notifies the authentication server 12 to that effect.

認証サーバ１２の制御部１２１は、認証装置１１の検出部１１１からの認証対象者検出の通知を受けて、認証装置１１の撮像部１１２からの撮像データを特徴抽出部１２２に取り込ませる。この場合において、撮像部１１２は、常時、所定の領域を撮像し続けていてもよいし、制御部１２１からの指示を受けて所定の領域を撮像するようにしてもよい。   The control unit 121 of the authentication server 12 receives the notification of the authentication target person detection from the detection unit 111 of the authentication device 11 and causes the feature extraction unit 122 to capture the image data from the imaging unit 112 of the authentication device 11. In this case, the imaging unit 112 may continuously capture a predetermined area, or may capture an image of the predetermined area in response to an instruction from the control unit 121.

特徴抽出部１２２は、制御部１２１の制御の下で特徴抽出手段として機能する。即ち、特徴抽出部１２２は、認証装置１１の撮像部１１２から逐次送られてくる撮像データに基づいて認証対象者の顔の特徴抽出を試みる。例えば、特徴抽出部１２２は、所定時間内に得られた画像フレーム（所定数の画像フレーム）を用いて認証対象者の顔の特徴抽出を試みる。特徴抽出に成功した場合、その旨、制御部１２１に通知するとともに、得られた特徴情報を認証部１２３に渡す。一方、特徴抽出ができなかった場合は、その旨制御部１２１に通知する。   The feature extraction unit 122 functions as a feature extraction unit under the control of the control unit 121. That is, the feature extraction unit 122 attempts to extract the feature of the face of the person to be authenticated based on the imaging data sequentially transmitted from the imaging unit 112 of the authentication device 11. For example, the feature extraction unit 122 attempts to extract the feature of the face of the person to be authenticated using image frames (a predetermined number of image frames) obtained within a predetermined time. When the feature extraction is successful, the control unit 121 is notified to that effect, and the obtained feature information is passed to the authentication unit 123. On the other hand, if feature extraction has failed, the control unit 121 is notified to that effect.

認証部１２３は、制御装置１２１の制御の下で認証手段として機能する。即ち、認証部１２３は、特徴抽出部１２２から特徴情報を受け取ると、記憶装置１３の認証データ記憶部１３１に記憶されている認証データと照合する。認証データ記憶部１３１に記憶されている認証データの中に、特徴抽出部１２２からの特徴情報と一致する又は所定以上の確率で一致すると判定される認証データが存在する場合、認証部１２３は認証可と判断し、制御部１２１にその旨通知する。そのような認証データが存在しない場合、認証部１２３は認証不可と判断し、制御部１２１にその旨通知する。   The authentication unit 123 functions as an authentication unit under the control of the control device 121. That is, when receiving the feature information from the feature extraction unit 122, the authentication unit 123 collates with authentication data stored in the authentication data storage unit 131 of the storage device 13. If the authentication data stored in the authentication data storage unit 131 includes authentication data that matches the feature information from the feature extraction unit 122 or is determined to match with a predetermined probability, the authentication unit 123 authenticates the authentication data. It judges that it is possible and notifies the control part 121 to that effect. If such authentication data does not exist, the authentication unit 123 determines that authentication is not possible, and notifies the control unit 121 accordingly.

制御部１２１は、認証部１２３からの認証結果を認証対象機器へ送る。認証対象機器は、制御部１２１からの認証結果に基づいて、認証対象者の入力操作等を有効又は無効にする。   The control unit 121 sends the authentication result from the authentication unit 123 to the authentication target device. The authentication target device enables or disables the input operation of the authentication target person based on the authentication result from the control unit 121.

特徴抽出部１２２が特徴抽出不可を制御部１２１に通知した場合、制御部１２１は、認証装置１１の誘導部１１３に対して誘導指示を出す。   When the feature extraction unit 122 notifies the control unit 121 that the feature cannot be extracted, the control unit 121 issues a guidance instruction to the guidance unit 113 of the authentication device 11.

誘導部１１３は、制御部１２１の指示に従って、誘導手段として機能する。即ち、誘導部１１３は、認証対象者が顔を撮像部１１２の方へ向けるように、表示及び／又は音声により誘導する。その際、認証を確実に行えるように、所定時間以上、認証対象者の顔が撮像部１１２に向けられるように誘導する。例えば、「“終了しました。”の合図があるまでカメラを見続けて下さい。」等のメッセージを流す。なお、所定時間は、少なくともと１回の特徴抽出を試みることができる時間（所定数の画像フレームを得て、特徴抽出動作を実行するのに要する時間）とする。所定時間は、できれば複数回の特徴抽出を試みることができる時間とする。   The guide unit 113 functions as a guide unit in accordance with instructions from the control unit 121. That is, the guide unit 113 guides the person to be authenticated by display and / or voice so that the face of the person to be authenticated faces the image pickup unit 112. At this time, the face of the person to be authenticated is guided to the imaging unit 112 for a predetermined time or longer so that the authentication can be surely performed. For example, ““ Finished. Please keep on watching the camera until you hear the signal "". Note that the predetermined time is a time during which at least one feature extraction can be attempted (a time required to obtain a predetermined number of image frames and execute the feature extraction operation). The predetermined time is a time during which feature extraction can be attempted a plurality of times if possible.

特徴抽出部１２２は、制御部１２１へ特徴抽出不可の通知を行った後も、特徴抽出動作を繰り返す。これにより、認証対象者が誘導部１１３による誘導に応じてカメラに顔を向ける以前に、顔の特徴を抽出できる可能性がある。   The feature extraction unit 122 repeats the feature extraction operation even after notifying the control unit 121 that the feature cannot be extracted. Accordingly, there is a possibility that facial features can be extracted before the person to be authenticated turns his face to the camera in response to guidance by the guidance unit 113.

誘導部１１３による誘導の結果、あるいはそれ以前に特徴抽出部１２２が特徴抽出に成功すると、その旨が制御部１２１に通知され、特徴情報が認証部１２３へ送られる。認証部１２３は、上述したように特徴情報に基づいて認証処理を行う。   If the feature extraction unit 122 succeeds in feature extraction as a result of guidance by the guidance unit 113 or before that, the control unit 121 is notified of this and feature information is sent to the authentication unit 123. As described above, the authentication unit 123 performs an authentication process based on the feature information.

制御部１２１は、特徴抽出部１２２からの特徴抽出成功の通知を受けて、誘導部１１３に対し、誘導終了の指示を出す。誘導終了の指示を受けて誘導部１１３は、完了通知手段として機能する。例えば、誘導部１１３は、「終了しました。」等のメッセージを流す。その後、認証結果に応じて、認証対象機器の操作等が可又は不可となる。   In response to the notification of the successful feature extraction from the feature extraction unit 122, the control unit 121 instructs the guidance unit 113 to end guidance. In response to the instruction to terminate the guidance, the guidance unit 113 functions as a completion notification unit. For example, the guiding unit 113 sends a message such as “finished”. Thereafter, depending on the authentication result, the operation of the device to be authenticated is enabled or disabled.

以上のように、本実施の形態によれば、通常は認証対象者に対して特別な姿勢を取らせることなく認証を行うので、動画を用いた認証システムの利便性を殆ど損なうことがない。その一方で、所定時間内に顔の特徴抽出を行えなかった場合には、特徴抽出に必要な所定時間以上（たとえば、終了時点を明示して）撮像部１１２に顔を向けるように誘導するので、確実に認証を行うことができる。   As described above, according to the present embodiment, authentication is normally performed without causing the person to be authenticated to take a special attitude, so that the convenience of the authentication system using moving images is hardly impaired. On the other hand, if facial feature extraction cannot be performed within a predetermined time, the face is directed to the imaging unit 112 for a predetermined time or longer (for example, by specifying the end time) required for feature extraction. Authentication can be performed reliably.

なお、上記実施の形態では、認証装置１１において認証対象者を検出したことを認証サーバ１２に通知するようにしたが、認証装置１１は、認証対象者を検出したなら、撮像データを認証サーバ２１へ送るようにしてもよい。   In the above embodiment, the authentication server 11 notifies the authentication server 12 that the authentication target person has been detected. However, if the authentication apparatus 11 detects the authentication target person, the authentication server 21 captures the captured image data. You may make it send to.

また、上記実施の形態では、認証サーバ１２が制御部１２１、特徴抽出部１２２及び認証部１２３を有すると説明したが、コンピュータが制御プログラムを実行することにより、これら制御部１２１、特徴抽出部１２２及び認証部１２３として動作するようにしてもよい。   In the above embodiment, it has been described that the authentication server 12 includes the control unit 121, the feature extraction unit 122, and the authentication unit 123. However, when the computer executes the control program, the control unit 121 and the feature extraction unit 122 are executed. The authentication unit 123 may be operated.

次に、図２を参照して本発明の第２の実施の形態に係る認証システムについて説明する。   Next, an authentication system according to the second embodiment of the present invention will be described with reference to FIG.

図２の認証システムは、プログラム制御により動作する認証サーバ２１と、認証サーバ２１の動作に必要なプログラムや情報を記憶する記憶装置２２と、認証装置２３と、操作を行う人物の認証情報を必要とする電子機器や入退場管理装置などの認証対象機器２４とを含む。認証サーバ２１、認証装置２３及び認証対象機器２４の間は、無線若しくは有線のネットワーク２５を介して接続される。   The authentication system in FIG. 2 requires an authentication server 21 that operates under program control, a storage device 22 that stores programs and information necessary for the operation of the authentication server 21, an authentication device 23, and authentication information of the person performing the operation. And an authentication target device 24 such as an entrance / exit management device. The authentication server 21, the authentication device 23, and the authentication target device 24 are connected via a wireless or wired network 25.

図２では、認証装置２３及び認証対象機器２４を一つずつ示したが、これらはそれぞれ複数存在し得る。通常、認証装置２３と認証対象機器２４とは一対一で対応するが、一つの認証対象機器２４に対して複数の認証装置２３（複数のカメラ２３４）を設けるようにしてもよい。いずれにしても、認証対象機器２４の各々は、少なくとも一つの認証装置２３に関連付けられ、各認証装置２３は、関連付けられた認証対象機器２４及びそれを操作する人物の顔がカメラに写るように配置される。   In FIG. 2, one authentication device 23 and one authentication target device 24 are shown, but a plurality of these devices may exist. Usually, the authentication device 23 and the authentication target device 24 correspond one-to-one, but a plurality of authentication devices 23 (a plurality of cameras 234) may be provided for one authentication target device 24. In any case, each of the authentication target devices 24 is associated with at least one authentication device 23, and each authentication device 23 is configured so that the associated authentication target device 24 and the face of the person who operates the device are reflected on the camera. Be placed.

認証サーバ２１は、通信制御部２１１と、映像解析部２１２と、顔認識実行部２１３と、認証管理部２１４と、認証誘導制御部２１５とを備えている。   The authentication server 21 includes a communication control unit 211, a video analysis unit 212, a face recognition execution unit 213, an authentication management unit 214, and an authentication guidance control unit 215.

通信制御部２１１は、認証装置２３からの映像データ（撮像データ）の受信と、認証装置２３への認証誘導指示及び認証完了通知の送信と、認証対象機器２４からの認証要求の受信と、認証対象機器２４への認証誘導指示及び認証完了通知の送信とを実現する。   The communication control unit 211 receives video data (imaging data) from the authentication device 23, transmits an authentication guidance instruction and authentication completion notification to the authentication device 23, receives an authentication request from the authentication target device 24, and authenticates. An authentication guidance instruction to the target device 24 and transmission of an authentication completion notification are realized.

映像解析部２１２は、特徴抽出手段として機能する。即ち、映像解析部２１２は、認証装置２３からの映像データを解析し、認証要求を出した認証対象機器２４を一番操作しやすい場所に位置する人物を認証対象者として識別し、顔が見えていれば顔の特徴を抽出して特徴情報を認証管理部２１４に通知する。一方、送られてきた映像データでは識別対象者の顔が見えておらず、顔の特徴を抽出できない場合、映像解析部２１２は、認証不可能であることを認証管理部２１４に通知し、その後、映像データを監視して、認証対象者の顔が見えたら顔の特徴を抽出して特徴情報を認証管理部２１４に通知する。複数の認証装置２３からの映像データが存在する場合、映像解析部２１２は、認証対象者の顔が最もよく映っている映像データを選択する。また、この場合は、選択した映像データの送信元である認証装置２３を識別する情報（選択認証装置識別情報）も認証管理部２１４へ通知する。   The video analysis unit 212 functions as a feature extraction unit. That is, the video analysis unit 212 analyzes the video data from the authentication device 23, identifies the person located in the place where the authentication target device 24 that has issued the authentication request is most easily operated as the authentication target person, and sees the face. If so, the feature of the face is extracted and the feature information is notified to the authentication management unit 214. On the other hand, if the face of the person to be identified is not visible in the transmitted video data and the facial features cannot be extracted, the video analysis unit 212 notifies the authentication management unit 214 that authentication is impossible, and then The video data is monitored, and when the face of the person to be authenticated is seen, the facial feature is extracted and the feature information is notified to the authentication management unit 214. When video data from a plurality of authentication devices 23 exists, the video analysis unit 212 selects video data that best reflects the face of the person to be authenticated. In this case, the authentication management unit 214 is also notified of information for identifying the authentication device 23 that is the transmission source of the selected video data (selected authentication device identification information).

顔認識実行部２１３は、認証手段として機能する。即ち、顔認識実行部２１３は、認証管理部２１４を介して受け取った映像解析部２１２からの特徴情報と、記憶部２２に記憶されている顔認識データとを用いて、顔認識を行い、認証対象者が登録された人物であるか否か判定する。   The face recognition execution unit 213 functions as an authentication unit. That is, the face recognition execution unit 213 performs face recognition using the feature information from the video analysis unit 212 received via the authentication management unit 214 and the face recognition data stored in the storage unit 22, and performs authentication. It is determined whether or not the target person is a registered person.

認証管理部２１４は、認証対象機器２４からの認証要求を、通信制御部２１１を介して受け付ける。認証管理部２１４は、認証要求を受けると、映像解析部２１２に認証要求を出した認証対象機器２４を識別する情報を通知し、その認証対象機器２４に対応する一又は二以上の認証装置２３からの映像データを解析させる。その後、映像解析部２１２から認証不可能の通知があったならば、認証管理部２１４は、認証誘導制御部２１５に認証誘導の実行を指示する。映像解析部２１２から選択認証装置識別情報が送られてきている場合、認証管理部２１４は、その情報も認証誘導制御部２１５へ送る。また、映像解析部２１２から特徴情報が送られてくると、認証管理部２１４は、特徴情報を顔認識実行部２１３へ送り、顔認識の実行を指示する。   The authentication management unit 214 receives an authentication request from the authentication target device 24 via the communication control unit 211. Upon receiving the authentication request, the authentication management unit 214 notifies the video analysis unit 212 of information for identifying the authentication target device 24 that has issued the authentication request, and one or more authentication devices 23 corresponding to the authentication target device 24. Analyzing video data from. Thereafter, if there is a notification that authentication is impossible from the video analysis unit 212, the authentication management unit 214 instructs the authentication guidance control unit 215 to execute authentication guidance. When the selective authentication device identification information is sent from the video analysis unit 212, the authentication management unit 214 also sends the information to the authentication guidance control unit 215. Also, when feature information is sent from the video analysis unit 212, the authentication management unit 214 sends the feature information to the face recognition execution unit 213 and instructs execution of face recognition.

認証誘導制御部２１５は、認証装置２３及び認証対象機器２４にそれぞれ対応する認証誘導指示及び認証完了通知を作成し、認証管理部２１４及び通信制御部２１１を介して送信する。認証誘導指示及び認証完了通知は、記憶装置２２に記憶されている認証誘導データに基づいて作成される。認証要求を出した認証対象機器２４に対応する認証装置２３が複数存在する場合には、これら複数の認証装置２３に対して認証誘導指示及び認証完了通知を送信する。   The authentication guidance control unit 215 creates authentication guidance instructions and authentication completion notifications corresponding to the authentication device 23 and the authentication target device 24, respectively, and transmits them through the authentication management unit 214 and the communication control unit 211. The authentication guidance instruction and the authentication completion notification are created based on the authentication guidance data stored in the storage device 22. When there are a plurality of authentication devices 23 corresponding to the authentication target device 24 that has issued the authentication request, an authentication guidance instruction and an authentication completion notification are transmitted to the plurality of authentication devices 23.

記憶装置２２は、顔認識データ記憶部２２１と認証誘導データ記憶部２２２とを備えている。   The storage device 22 includes a face recognition data storage unit 221 and an authentication guidance data storage unit 222.

顔認識データ記憶部２２１は、認証する必要のある人物の顔の特徴情報を予め記憶している。   The face recognition data storage unit 221 stores in advance feature information of a person's face that needs to be authenticated.

認証誘導データ記憶部２２２は、認証装置２３のスピーカ２３５や表示器２３６で実行する認証誘導のための音声情報や表示情報、認証対象機器２４のユーザインターフェース部２４３の機能などに応じた認証誘導方法のための情報を予め記憶している。   The authentication guidance data storage unit 222 is an authentication guidance method according to voice information and display information for authentication guidance executed by the speaker 235 and the display device 236 of the authentication device 23, functions of the user interface unit 243 of the authentication target device 24, and the like. Information for is stored in advance.

認証装置２３は、通信制御部２３１と、映像送信制御部２３２と、誘導実行部２３３と、カメラ２３４と、スピーカ２３５と、表示器２３６とを備えている。   The authentication device 23 includes a communication control unit 231, a video transmission control unit 232, a guidance execution unit 233, a camera 234, a speaker 235, and a display 236.

通信制御部２３１は、認証サーバ２１に映像データを送信し、認証サーバ２１からの認証誘導指示と認証完了通知を受信する。   The communication control unit 231 transmits video data to the authentication server 21 and receives an authentication guidance instruction and an authentication completion notification from the authentication server 21.

映像送信制御部２３２は、カメラ２３４を制御して認証対象機器２４と認証対象者を撮像し、その映像データを通信制御部２３１を介して認証サーバ２１に送る。   The video transmission control unit 232 controls the camera 234 to image the authentication target device 24 and the authentication target person, and sends the video data to the authentication server 21 via the communication control unit 231.

誘導実行部２３３は、スピーカ２３５及び表示器２３６とともに誘導手段及び完了通知手段として機能する。誘導実行部２３３は、認証サーバ２１からの認証誘導指示と認証完了通知に従って、スピーカ２３５から音声を出力させ、表示器２３６にメッセージ等を表示させる。   The guidance execution unit 233 functions as a guidance unit and a completion notification unit together with the speaker 235 and the display 236. The guidance execution unit 233 causes the speaker 235 to output sound in accordance with the authentication guidance instruction from the authentication server 21 and the authentication completion notification, and displays a message or the like on the display 236.

カメラ２３４は、撮像手段として機能する。即ち、カメラ２３４は、認証対象機器２４と認証対象者を撮像し、映像データを出力する。   The camera 234 functions as an imaging unit. That is, the camera 234 images the authentication target device 24 and the authentication target person, and outputs video data.

スピーカ２３５は、誘導実行部２３３の制御の下、認証誘導指示と認証完了通知に応じた音声を出力する。   The speaker 235 outputs a sound corresponding to the authentication guidance instruction and the authentication completion notification under the control of the guidance execution unit 233.

表示器２３６は、誘導実行部２３３の制御の下、認証誘導指示と認証完了通知に応じた表示を行う。   The display device 236 performs display according to the authentication guidance instruction and the authentication completion notification under the control of the guidance execution unit 233.

認証対象機器２４は、通信制御部２４１と、認証情報制御部２４２と、ユーザインターフェース部２４３と、機器制御部２４４とを備えている。   The authentication target device 24 includes a communication control unit 241, an authentication information control unit 242, a user interface unit 243, and a device control unit 244.

通信制御部２４１は、認証サーバ２１に認証要求を送信し、認証サーバ２１からの認証誘導指示と認証完了通知を受信する。   The communication control unit 241 transmits an authentication request to the authentication server 21 and receives an authentication guidance instruction and an authentication completion notification from the authentication server 21.

認証情報制御部２４２は、単独で、あるいはユーザインターフェース部２４３とともに、検出手段として機能する。認証情報制御部２４２は、ユーザインターフェース部２４３が操作されたか、操作可能領域に人が侵入したことを検出し、認証要求を作成して通信制御部２４１を介して認証サーバ２１に送る。また、認証情報制御部２４２は、認証サーバ２１からの認証完了通知を通信制御部２４１を介して受け取り、これにより操作者あるいは操作可能領域侵入者の認証情報を受け取る。さらに、認証情報制御部２４２は、通信制御部２４１を介して、認証サーバ２１からの認証誘導指示を受ける。この場合、認証情報制御部２４２は、ユーザインターフェース部２４３に対して認証誘導指示に応じた指示を行う。   The authentication information control unit 242 functions as a detection unit alone or together with the user interface unit 243. The authentication information control unit 242 detects that the user interface unit 243 has been operated or that a person has entered the operable area, creates an authentication request, and sends it to the authentication server 21 via the communication control unit 241. Further, the authentication information control unit 242 receives an authentication completion notification from the authentication server 21 via the communication control unit 241, thereby receiving authentication information of the operator or the operable area intruder. Further, the authentication information control unit 242 receives an authentication guidance instruction from the authentication server 21 via the communication control unit 241. In this case, the authentication information control unit 242 instructs the user interface unit 243 according to the authentication guidance instruction.

ユーザインターフェース部２４３は、認証対象機器２４を操作するための操作パネル、操作可能領域への侵入を検知するセンサなどの入力機能と、機器状態やメッセージを通知するディスプレイやランプ、スピーカなどの出力機能を持つ。認証対象機器２４の種別に応じて、備える機能は異なる。   The user interface unit 243 includes an input panel such as an operation panel for operating the authentication target device 24, a sensor that detects intrusion into the operable area, and an output function such as a display, a lamp, and a speaker that notify the device status and message. have. The functions provided differ depending on the type of the authentication target device 24.

機器制御部２４４は、認証情報制御部２４２が得た認証情報に基づいて、ユーザインターフェース部２４３の操作により実現される機能の範囲を制御する。   The device control unit 244 controls the range of functions realized by the operation of the user interface unit 243 based on the authentication information obtained by the authentication information control unit 242.

次に、図１に加えて図２をも参照して、図１の認証システムの動作について詳細に説明する。   Next, the operation of the authentication system of FIG. 1 will be described in detail with reference to FIG. 2 in addition to FIG.

認証対象機器２４のユーザインターフェース部２４３は、入力操作があると（ステップＳ３０１）、それを検出し、認証要求を行う（ステップＳ３０２）。認証要求は、通信制御部２４１を介して認証サーバ２１に対して行われる。   When there is an input operation (step S301), the user interface unit 243 of the authentication target device 24 detects it and makes an authentication request (step S302). The authentication request is made to the authentication server 21 via the communication control unit 241.

ユーザインターフェース部２４３は、入力操作を検出する代わりに、所定領域内に人が進入したことを検出するようにしてもよい。この場合、所定領域は、認証対象機器２４を操作しようとする人物が存在する確率の高い領域を含むように定めておく。   The user interface unit 243 may detect that a person has entered the predetermined area instead of detecting the input operation. In this case, the predetermined area is determined so as to include an area having a high probability that a person who intends to operate the authentication target device 24 exists.

ユーザインターフェース部２４３は、認証要求を行った後、認証が完了するまで入力操作の実行を保留する。   After making the authentication request, the user interface unit 243 suspends execution of the input operation until the authentication is completed.

認証サーバ２１では、認証管理部２１４が、通信制御部２１１を介して認証対象機器２４からの認証要求を受け付け、映像解析部２１２に対して、認証要求を出した認証対象機器２４を識別する情報を与える。   In the authentication server 21, the authentication management unit 214 receives an authentication request from the authentication target device 24 via the communication control unit 211, and information for identifying the authentication target device 24 that has issued the authentication request to the video analysis unit 212. give.

映像解析部２１２は、認証管理部２１４から与えられた認証対象機器２４を識別する情報に基づいて、認証要求を送信した認証対象機器２４に関連付けられた一又は二以上の認証装置２３に対し、通信制御部２１１を介して映像データを送信するよう要求する（ステップＳ３０３）。   Based on the information for identifying the authentication target device 24 given from the authentication management unit 214, the video analysis unit 212 sends one or more authentication devices 23 associated with the authentication target device 24 that transmitted the authentication request to the authentication device 23. A request is made to transmit video data via the communication control unit 211 (step S303).

認証装置２３では、映像送信制御部２３２が通信制御部２３１介して、認証サーバ２１からの映像データ要求を受け取ると、カメラ２３４を制御して認証対象機器２４及びその周辺を撮像し映像データを作成する。そして、映像送信制御部２３２は、作成した映像データを通信制御部２３１を介して認証サーバ２１へ送る（ステップＳ３０４）。映像データはリアルタイムで送られる。   In the authentication device 23, when the video transmission control unit 232 receives a video data request from the authentication server 21 via the communication control unit 231, the video transmission control unit 232 controls the camera 234 to capture the authentication target device 24 and its surroundings and create video data. To do. Then, the video transmission control unit 232 sends the created video data to the authentication server 21 via the communication control unit 231 (step S304). Video data is sent in real time.

なお、認証装置２３からの映像データは、上述の様に、認証サーバ２１からの要求に応じて必要なときだけ送るのではなく、常時認証サーバ２１へ送る用にしてもよい。この場合、認証サーバ２１側で認証要求を出した認証対象機器２４に関連付けされた認証装置２３からの映像データを選択する。   Note that the video data from the authentication device 23 may be sent to the authentication server 21 at all times instead of being sent only when necessary in response to a request from the authentication server 21 as described above. In this case, video data from the authentication device 23 associated with the authentication target device 24 that has issued the authentication request on the authentication server 21 side is selected.

映像解析部２１２は、認証装置２３から送られてきた映像データを通信制御部２１１を介して受け取ると、映像解析を行う。そして、認証要求を出した認証対象機器２４を一番操作しやすい場所に位置している人物を認証対象者として検出する（ステップＳ３０５）。さらに、映像解析部２１２は、検出した認証対象者の顔の特徴抽出を試みる（ステップＳ３０６）。このとき、二以上の認証装置２３からの映像データを利用する場合には、認証対象者の顔が最もよく映っていると思われる映像を選択する。   When the video analysis unit 212 receives the video data transmitted from the authentication device 23 via the communication control unit 211, the video analysis unit 212 performs video analysis. Then, a person who is located in a place where the authentication target device 24 that has issued the authentication request is most easily operated is detected as an authentication target person (step S305). Furthermore, the video analysis unit 212 attempts to extract the feature of the detected face of the person to be authenticated (step S306). At this time, when using video data from two or more authentication devices 23, the video that is most likely to show the face of the person to be authenticated is selected.

認証対象者が認証対象機器２４の前に屈みこむなどして顔をカメラ２３４で撮像できない場合など、顔の特徴が抽出できない場合（ステップＳ３０６でＮＯ）には、映像解析部２１２は、認証不可能であることを、その映像データの送信元である認証装置２３を識別する情報とともに認証管理部２１４に通知する。その後、映像解析部２１２は、映像データを監視する（顔の特徴抽出を繰り返し試みる）。   In the case where the facial features cannot be extracted (NO in step S306), such as when the authentication target person bends in front of the authentication target device 24 and the face cannot be captured by the camera 234 (NO in step S306), the video analysis unit 212 does not authenticate. The authentication management unit 214 is notified of the possibility together with information for identifying the authentication device 23 that is the transmission source of the video data. Thereafter, the video analysis unit 212 monitors the video data (it repeatedly tries to extract facial features).

認証管理部２１４は、映像解析部２１２からの認証不可能通知を受けて、認証誘導制御部２１５に認証誘導の実行を指示する。   Upon receiving the authentication impossible notification from the video analysis unit 212, the authentication management unit 214 instructs the authentication guidance control unit 215 to execute authentication guidance.

認証誘導制御部２１５は、認証管理部２１４からの認証誘導実行指示を受けて、認証要求を出した認証対象機器２４及び選択された映像データの送信元である認証装置２３に対して、認証誘導指示を作成する。認証誘導指示の作成は、その指示の対象である認証対象機器２４及び認証装置２３にそれぞれ適合するように、記憶装置２２に記憶されている認証誘導データに基づいて行われる。作成された認証誘導指示は、認証管理部２１４及び通信制御部２１１を介して、認証対象機器２４及び認証装置２３へそれぞれ送信される（ステップＳ３０７）。   Upon receiving the authentication guidance execution instruction from the authentication management unit 214, the authentication guidance control unit 215 authenticates the authentication target device 24 that has issued the authentication request and the authentication device 23 that is the transmission source of the selected video data. Create instructions. The creation of the authentication guidance instruction is performed based on the authentication guidance data stored in the storage device 22 so as to be compatible with the authentication target device 24 and the authentication device 23 that are the targets of the instruction. The created authentication guidance instruction is transmitted to the authentication target device 24 and the authentication device 23 via the authentication management unit 214 and the communication control unit 211 (step S307).

認証装置２３では、認証サーバ２１から認証誘導指示が送られてくると、通信制御部２３１が受信した認証誘導指示を誘導実行部２３３に引き渡す。誘導実行部２３３は、受け取った認証誘導指示に従い、スピーカ２３５から音声を発し、表示器２３６にメッセージ等を表示する（ステップＳ３０８Ａ）。   In the authentication device 23, when an authentication guidance instruction is sent from the authentication server 21, the authentication guidance instruction received by the communication control unit 231 is delivered to the guidance execution unit 233. In accordance with the received authentication guidance instruction, the guidance execution unit 233 emits sound from the speaker 235 and displays a message or the like on the display 236 (step S308A).

認証対象機器２４では、認証サーバ２１から認証誘導指示が送られてくると、通信制御部２４１が受信した認証誘導指示を認証情報制御部２４２に引き渡す。認証情報制御部２４２は、受け取った認証誘導指示に従い、ユーザインターフェース部２４３からの音声出力やメッセージ表示を行う（ステップＳ３０８Ｂ）。   In the authentication target device 24, when an authentication guidance instruction is sent from the authentication server 21, the authentication guidance instruction received by the communication control unit 241 is delivered to the authentication information control unit 242. The authentication information control unit 242 performs voice output and message display from the user interface unit 243 in accordance with the received authentication guidance instruction (step S308B).

認証誘導は、例えば、時計の上に認証装置２３を設置しておき「時計の上に出てくる絵は何でしょう？」という表示や、「チャイムが鳴るまでこっちを見ていて！」という音声などである。いずれにしても、認証対象者に顔をカメラ２３４の方へ向けさせ、次に合図があるまで顔の向きがある程度維持されるようにする。認証対象者が次に何か出力されるのを待ちながら時計や音の方向を見ているとカメラ２３４に顔が映る（ステップＳ３０９）。   For authentication guidance, for example, the authentication device 23 is installed on the clock, and the message “What is the picture coming out on the clock?” Or “Look here until the chime rings!” Etc. In any case, the face of the person to be authenticated is directed toward the camera 234, and the face orientation is maintained to some extent until a next signal is given. If the person to be authenticated is looking at the direction of the clock or sound while waiting for the next output, a face appears on the camera 234 (step S309).

認証装置２３は、ステップＳ３０４から映像データの送信を継続しており、認証誘導動作により、認証対象者の顔が撮像された映像データが認証サーバ２１に送られる（ステップＳ３１０）。   The authentication device 23 continues to transmit the video data from step S304, and the video data obtained by capturing the face of the person to be authenticated is sent to the authentication server 21 by the authentication guidance operation (step S310).

認証サーバ２１では、映像解析部２１２が、監視していた映像データに認証対象者の顔の情報が含まれることになるので、認証対象者の顔の特徴抽出に成功する（ステップＳ３０６でＹＥＳ）。映像解析部２１２は、顔の特徴情報を認証管理部２１４へ通知する。   In the authentication server 21, since the video analysis unit 212 includes the information of the face of the person to be authenticated in the monitored video data, the face feature of the person to be authenticated is successfully extracted (YES in step S306). . The video analysis unit 212 notifies the facial feature information to the authentication management unit 214.

認証管理部２１４は、顔の特徴情報を得ると、顔認識実行部２１３に顔認識の実行を指示する。顔認識実行部２１３は、認証管理部２１４から渡された顔の特徴情報と、記憶装置２２の顔認証データ記憶部２２１に記憶された顔認識データとに基づいて顔認識を実行し、認証対象者が登録された人物に該当するか否かの判定（認証）を行う（ステップＳ３１１）。   Upon obtaining the facial feature information, the authentication management unit 214 instructs the face recognition execution unit 213 to execute face recognition. The face recognition execution unit 213 executes face recognition based on the facial feature information passed from the authentication management unit 214 and the face recognition data stored in the face authentication data storage unit 221 of the storage device 22, and performs authentication. It is determined (authenticated) whether the person corresponds to the registered person (step S311).

認証管理部２１４は、認証結果を認証誘導制御部２１５に渡す。この際、顔認証データに含まれる登録された人物に関する所定の情報を付加するようにしてもよい。そうすることにより、登録者ごとに認証対象機器２４の操作制限（機能制限）を行うことができる。   The authentication management unit 214 passes the authentication result to the authentication guidance control unit 215. At this time, predetermined information regarding a registered person included in the face authentication data may be added. By doing so, the operation restriction (function restriction) of the authentication target device 24 can be performed for each registrant.

認証誘導制御部２１５は、認証結果に基づいて認証完了通知を作成する。認証誘導制御部２１５は、認証誘導データ記憶部２２２に記憶されている認証誘導データに基づいて、認証要求を出した認証対象機器２４及び選択された映像データを送信した認証装置２３とにそれぞれ適合する認証完了通知を作成する。作成された認証完了通知は、認証管理部２１４及び通信制御部２１１を介して、認証対象機器２４及び認証装置２３にそれぞれ送信される（ステップＳ３１２）。   The authentication guidance control unit 215 creates an authentication completion notification based on the authentication result. Based on the authentication guidance data stored in the authentication guidance data storage unit 222, the authentication guidance control unit 215 is adapted to the authentication target device 24 that has issued the authentication request and the authentication device 23 that has transmitted the selected video data. Create an authentication completion notification. The created authentication completion notification is transmitted to the authentication target device 24 and the authentication device 23 via the authentication management unit 214 and the communication control unit 211 (step S312).

認証装置２３の誘導実行部２３３は、認証サーバ２１からの認証完了通知を通信制御部２３１を介して受け取ると、受け取った認証完了通知に従い、スピーカ２３５や表示器２３６に認証完了を報知する音声や表示を出力させる（ステップＳ３１３）。認証完了通知は、例えば、時計の上にある認証装置２３の表示器２３６に、認証対象者別に決められたマークや認証対象者の顔の映像を表示したり、完了のチャイムを鳴らす、などして行われる。認証誘導が行われていた場合は、その認証誘導に対応する音声や表示とする。これにより、ステップＳ３０９から、何か出てくるのを待っていた認証対象者は、表示や音声を聞いて自分の認証が完了したことを知ることができる。認証対象者が、認証の意図を理解していなくても、ただ認証誘導の表示や音声に従って、何かが出力されるのを待つことで、認証を完了できる（ステップＳ３１４）。   When the guidance execution unit 233 of the authentication device 23 receives the authentication completion notification from the authentication server 21 via the communication control unit 231, in accordance with the received authentication completion notification, the guidance execution unit 233 notifies the speaker 235 or the display 236 of the authentication completion, The display is output (step S313). For example, the authentication completion notification may be displayed on the display 236 of the authentication device 23 on the clock by displaying a mark determined for each person to be authenticated or an image of the face of the person to be authenticated, or sounding a completion chime. Done. If authentication guidance has been performed, the voice or display corresponding to the authentication guidance is used. Thereby, from step S309, the person to be authenticated who has been waiting for something to come out can know that his / her authentication has been completed by listening to the display and voice. Even if the person to be authenticated does not understand the intention of the authentication, the authentication can be completed simply by waiting for something to be output in accordance with the display or voice of the authentication guide (step S314).

認証対象機器２４の認証情報制御部２４２は、認証サーバ２１からの認証完了通知を受けて、機器制御部２４４に対して、認証対象機器２４の入力操作を有効又は無効にするように指示する。認証情報制御部２４２は、認証完了通知に登録人物に関する所定の情報が含まれる場合、それに応じて認証対象機器２４の機能制限を行うよう機器制御部２４４に指示する。   Upon receiving the authentication completion notification from the authentication server 21, the authentication information control unit 242 of the authentication target device 24 instructs the device control unit 244 to validate or invalidate the input operation of the authentication target device 24. When the authentication completion notification includes predetermined information related to the registered person, the authentication information control unit 242 instructs the device control unit 244 to limit the function of the authentication target device 24 accordingly.

機器制御部２４４は、認証情報制御部２４２からの指示に応じて、ステップＳ３０１及びＳ３０２で保留していた操作を有効にし、あるいは無効にする。認証対象者は、認証サーバ２１により、登録者であると認証された場合、許可された機能範囲内で認証対象機器２４の利用が認められる（ステップＳ３１６）。   In response to an instruction from the authentication information control unit 242, the device control unit 244 enables or disables the operation that has been suspended in steps S301 and S302. If the authentication target person is authenticated by the authentication server 21 as a registrant, the use of the authentication target device 24 is permitted within the permitted function range (step S316).

以上、本発明についていくつかの実施の形態に即して説明したが、本発明は上記実施の形態に限定されるものではなく、本発明の範囲と逸脱することなく種々の変更、変形が可能である。例えば、第２の実施の形態では、認証装置２３と認証対象機器２４とが別体であるが、認証装置２３を認証対象機器２４に組み込むように構成してもよい。   As mentioned above, although this invention was demonstrated according to some embodiment, this invention is not limited to the said embodiment, A various change and deformation | transformation are possible without deviating from the scope of the present invention. It is. For example, in the second embodiment, the authentication device 23 and the authentication target device 24 are separate, but the authentication device 23 may be incorporated in the authentication target device 24.

１１ 認証装置
１２ 認証サーバ
１３ 記憶装置
２１ 認証サーバ
２２ 記憶装置
２３ 認証装置
２４ 認証対象機器
２５ ネットワーク
１１１ 検出部
１１２ 撮像部
１１３ 誘導部
１２１ 制御部
１２２ 特徴抽出部
１２３ 認証部
１３１ 認証データ記憶部
２１１ 通信制御部
２１２ 映像解析部
２１３ 顔認識実行部
２１４ 認証管理部
２１５ 認証誘導制御部
２２１ 顔認識データ記憶部
２２２ 認証誘導データ記憶部
２３１ 通信制御部
２３２ 映像送信制御部
２３３ 誘導実行部
２３４ カメラ
２３５ スピーカ
２３６ 表示器
２４１ 通信制御部
２４２ 認証情報制御部
２４３ ユーザインターフェース部
２４４ 機器制御部 DESCRIPTION OF SYMBOLS 11 Authentication apparatus 12 Authentication server 13 Storage apparatus 21 Authentication server 22 Storage apparatus 23 Authentication apparatus 24 Authentication object apparatus 25 Network 111 Detection part 112 Imaging part 113 Guidance part 121 Control part 122 Feature extraction part 123 Authentication part 131 Authentication data storage part 211 Communication Control unit 212 Video analysis unit 213 Face recognition execution unit 214 Authentication management unit 215 Authentication guidance control unit 221 Face recognition data storage unit 222 Authentication guidance data storage unit 231 Communication control unit 232 Video transmission control unit 233 Guidance execution unit 234 Camera 235 Speaker 236 Display 241 Communication control unit 242 Authentication information control unit 243 User interface unit 244 Device control unit

Claims (8)

認証対象者を検出する検出手段と、
該検出手段によって検出された前記認証対象者を撮像し動画像データを生成する撮像手段と、
前記動画像データに基づいて前記認証対象者の顔の特徴を抽出し特徴情報を生成する特徴抽出手段と、
前記特徴情報に基づき認証を行う認証手段と、
前記特徴抽出手段によって前記認証対象者の顔の特徴が抽出できなかったときに、前記認証対象者に対して、顔を前記撮像手段の方向へ所定時間以上向かせるように誘導する誘導手段と、
を備えていることを特徴とする顔認証システム。 A detecting means for detecting a person to be authenticated;
Imaging means for imaging the authentication subject detected by the detection means and generating moving image data;
Feature extraction means for extracting features of the face of the person to be authenticated based on the moving image data and generating feature information;
Authentication means for performing authentication based on the feature information;
Guidance means for guiding the authentication target person to turn the face toward the imaging means for a predetermined time or more when the feature extraction means cannot extract the facial feature of the authentication target person;
A face authentication system characterized by comprising: 前記誘導手段は、前記特徴抽出手段による前記認証対象者の顔の特徴抽出完了又は前記認証手段による認証完了を通知する完了通知手段を含むことを特徴とする請求項１に記載の顔認証システム。   2. The face authentication system according to claim 1, wherein the guidance unit includes a completion notification unit that notifies completion of feature extraction of the face of the person to be authenticated by the feature extraction unit or completion of authentication by the authentication unit. 前記認証手段による認証結果に基づいて動作する認証対象機器と、
前記撮像手段及び前記誘導手段を含む認証装置と、
前記特徴抽出手段、前記認証手段及び前記制御手段を含む認証サーバと、
がネットワークを介して相互接続されていることを特徴とする請求項１又は２に記載の顔認証システム。 An authentication target device that operates based on an authentication result by the authentication unit;
An authentication device including the imaging means and the guidance means;
An authentication server including the feature extraction unit, the authentication unit, and the control unit;
The face authentication system according to claim 1, wherein the face recognition systems are interconnected via a network. 前記認証手段による認証に用いられる認証データを記憶する記憶手段を備えていることを特徴とする請求項１、２又は３に記載の顔認証システム。   The face authentication system according to claim 1, further comprising a storage unit that stores authentication data used for authentication by the authentication unit. 認証対象者を検出するステップと、
検出された前記認証対象者を撮像し動画像データを生成するステップと、
前記動画像データに基づいて前記認証対象者の顔の特徴を抽出し特徴情報を生成するステップと、
前記特徴情報に基づき認証を行うステップと、
前記特徴抽出手段による前記認証対象者の顔の特徴が抽出できなかったときに、前記認証対象者に対して、顔を前記撮像手段の方向へ所定時間以上向かせるように誘導するステップと、
を含むことを特徴とする顔認証方法。 Detecting a person to be authenticated;
Imaging the detected person to be detected and generating moving image data;
Extracting facial features of the person to be authenticated based on the moving image data and generating feature information;
Authenticating based on the feature information;
Guiding the authentication target person to turn the face toward the imaging unit for a predetermined time or more when the feature extraction unit cannot extract the feature of the face of the authentication target person;
A face authentication method comprising: 前記認証対象者に対して、顔を前記撮像手段の方向へ所定時間以上向かせるように誘導した後、前記認証対象者の顔の特徴抽出完了又は認証完了を通知するステップを含むことを特徴とする請求項５に記載の顔認証方法。   Including notifying the authentication target person that the face is directed toward the imaging means for a predetermined time or more, and then notifying completion of facial feature extraction or authentication completion of the authentication target person, The face authentication method according to claim 5. 認証対象者を検出したとの通知を受け、前記認証対象者を撮像した動画像データを取得するステップと、
前記動画像データに基づいて前記認証対象者の顔の特徴を抽出し特徴情報を生成するステップと、
前記特徴情報に基づき認証を行うステップと、
前記特徴抽出手段による前記認証対象者の顔の特徴が抽出できなかったときに、前記認証対象者に対して、顔を前記撮像手段の方向へ所定時間以上向かせるよう、誘導部に指示するステップと、
をコンピュータに実行させることを特徴とするプログラム。 Receiving a notification that the person to be authenticated has been detected, and obtaining moving image data obtained by imaging the person to be authenticated;
Extracting facial features of the person to be authenticated based on the moving image data and generating feature information;
Authenticating based on the feature information;
Instructing the guidance unit to direct the face of the person to be authenticated toward the image pickup means for a predetermined time or more when the feature extraction means cannot extract the feature of the face of the person to be authenticated. When,
A program that causes a computer to execute. 前記認証対象者に対して、顔を前記撮像手段の方向へ所定時間以上向かせるように誘導した後、前記認証対象者の顔の特徴抽出完了又は認証完了を通知するよう前記誘導部に指示するステップをコンピュータに実行させることを特徴とする請求項７に記載のプログラム。   The guidance unit is instructed to notify the person to be authenticated that the face is directed toward the imaging unit for a predetermined time or more, and then notify the completion of feature extraction or authentication completion of the person to be authenticated. 8. The program according to claim 7, which causes a computer to execute the steps.
JP2009061694A 2009-03-13 2009-03-13 System and method for authenticating face Withdrawn JP2010218039A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009061694A JP2010218039A (en) 2009-03-13 2009-03-13 System and method for authenticating face

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009061694A JP2010218039A (en) 2009-03-13 2009-03-13 System and method for authenticating face

Publications (1)

Publication Number Publication Date
JP2010218039A true JP2010218039A (en) 2010-09-30

Family

ID=42976858

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009061694A Withdrawn JP2010218039A (en) 2009-03-13 2009-03-13 System and method for authenticating face

Country Status (1)

Country Link
JP (1) JP2010218039A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150220772A1 (en) * 2014-02-06 2015-08-06 University Of Massachusetts System and methods for contactless biometrics-based identification
JP2020126337A (en) * 2019-02-01 2020-08-20 パナソニックＩｐマネジメント株式会社 Face authentication system, face recognition unit, face authentication method, and face authentication program
JP2020126345A (en) * 2019-02-01 2020-08-20 パナソニックＩｐマネジメント株式会社 Face authentication server apparatus, face authentication method and face authentication program
JP2021060691A (en) * 2019-10-03 2021-04-15 株式会社クリューシステムズ Program, video processing apparatus, and authentication method
WO2021181519A1 (en) * 2020-03-10 2021-09-16 日本電気株式会社 Photographing control device, system, method, and non-transitory computer readable medium storing program thereon
JP2022079481A (en) * 2014-06-19 2022-05-26 日本電気株式会社 Authentication device, authentication method, and computer program
WO2022208642A1 (en) * 2021-03-30 2022-10-06 日本電気株式会社 Authentication device, processing method, and program

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9773151B2 (en) * 2014-02-06 2017-09-26 University Of Massachusetts System and methods for contactless biometrics-based identification
US20150220772A1 (en) * 2014-02-06 2015-08-06 University Of Massachusetts System and methods for contactless biometrics-based identification
JP2022079481A (en) * 2014-06-19 2022-05-26 日本電気株式会社 Authentication device, authentication method, and computer program
US11797659B2 (en) 2014-06-19 2023-10-24 Nec Corporation Authentication device, authentication system, and authentication method
JP7294477B2 (en) 2014-06-19 2023-06-20 日本電気株式会社 Authentication device, authentication method and computer program
JP2022132322A (en) * 2019-02-01 2022-09-08 パナソニックＩｐマネジメント株式会社 Face authentication system, face recognition unit, face authentication method, and face authentication program
JP7108884B2 (en) 2019-02-01 2022-07-29 パナソニックＩｐマネジメント株式会社 Face authentication server device, registration processing method and registration processing program
JP2020126345A (en) * 2019-02-01 2020-08-20 パナソニックＩｐマネジメント株式会社 Face authentication server apparatus, face authentication method and face authentication program
JP2020126337A (en) * 2019-02-01 2020-08-20 パナソニックＩｐマネジメント株式会社 Face authentication system, face recognition unit, face authentication method, and face authentication program
JP7378034B2 (en) 2019-02-01 2023-11-13 パナソニックＩｐマネジメント株式会社 Face recognition system, face recognition machine, face recognition method and face recognition program
JP2021060691A (en) * 2019-10-03 2021-04-15 株式会社クリューシステムズ Program, video processing apparatus, and authentication method
JPWO2021181519A1 (en) * 2020-03-10 2021-09-16
WO2021181519A1 (en) * 2020-03-10 2021-09-16 日本電気株式会社 Photographing control device, system, method, and non-transitory computer readable medium storing program thereon
JP7494899B2 (en) 2020-03-10 2024-06-04 日本電気株式会社 Imaging control device, system, method and program
WO2022208642A1 (en) * 2021-03-30 2022-10-06 日本電気株式会社 Authentication device, processing method, and program

Similar Documents

Publication Publication Date Title
JP2010218039A (en) System and method for authenticating face
JP6451861B2 (en) Face authentication device, face authentication method and program
JP5541407B1 (en) Image processing apparatus and program
KR101688168B1 (en) Mobile terminal and method for controlling the same
JP2006259931A (en) Face authentication apparatus and its control method, electronic device equipped with face authentication apparatus, face authentication apparatus control program and recording medium recorded with the program
CN102414698A (en) Controlled access to functionality of a wireless device
CN110070054A (en) Subscriber terminal equipment and its iris identification method
JP2008070926A (en) Biometric authentication apparatus and operational guidance notification method
US11245707B2 (en) Communication terminal, communication system, communication control method, and recording medium
JP6458564B2 (en) Display device and display device control method
WO2018125563A1 (en) Identification, authentication, and/or guiding of a user using gaze information
JP2020505705A (en) Method and device for learning feature image and user authentication method
KR101400168B1 (en) Three-dimensional virtual security control system using 360 degree stereoscopic camera, and method thereof
WO2020095350A1 (en) Information processing device, information processing method, and recording medium
KR20200086407A (en) Method for authenticating a user and electronic device thereof
JP2009206924A (en) Information processing apparatus, information processing system and information processing program
JP4964833B2 (en) Information presentation control apparatus and information presentation control method
JP2018092293A (en) Entrance/exit management system
JP2008211412A (en) Network system
US10095911B2 (en) Methods, devices, and computer-readable mediums for verifying a fingerprint
JP2007162369A (en) Security system
JP2016081428A (en) Information terminal, information processing device, and program
Vimal et al. Development of cloud integrated internet of things based intruder detection system
JP2020091689A (en) Voting device, voting method, and voting program
JP6684009B1 (en) Program, video processing device, and authentication method

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20120605