JP6438693B2 - Authentication apparatus, authentication method, and program - Google Patents

Authentication apparatus, authentication method, and program Download PDF

Info

Publication number
JP6438693B2
JP6438693B2 JP2014141064A JP2014141064A JP6438693B2 JP 6438693 B2 JP6438693 B2 JP 6438693B2 JP 2014141064 A JP2014141064 A JP 2014141064A JP 2014141064 A JP2014141064 A JP 2014141064A JP 6438693 B2 JP6438693 B2 JP 6438693B2
Authority
JP
Japan
Prior art keywords
authentication
person
code
unit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014141064A
Other languages
Japanese (ja)
Other versions
JP2016018406A (en
Inventor
潔 上野
潔 上野
Original Assignee
ワム・システム・デザイン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ワム・システム・デザイン株式会社 filed Critical ワム・システム・デザイン株式会社
Priority to JP2014141064A priority Critical patent/JP6438693B2/en
Publication of JP2016018406A publication Critical patent/JP2016018406A/en
Application granted granted Critical
Publication of JP6438693B2 publication Critical patent/JP6438693B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、認証を行う認証装置等に関するものである。   The present invention relates to an authentication device that performs authentication.

従来、入退室システムに利用される顔認証技術があった(例えば、非特許文献1参照)。本技術は、事前に人物を登録しておき、その人物をカメラが検知した際に、通知するシステムである。   Conventionally, there has been a face authentication technique used in an entrance / exit system (see, for example, Non-Patent Document 1). The present technology is a system that registers a person in advance and notifies when the camera detects the person.

株式会社オーピーエヌ、"特定人物検知システム"、[online]、平成26年7月1日、[平成26年7月1日検索]、インターネット[URL:http://www.opn-web.com/face/tokutei.htm]OPN Corporation, "Specific Person Detection System", [online], July 1, 2014, [Search July 1, 2014], Internet [URL: http://www.opn-web.com /face/tokutei.htm]

しかしながら、従来の技術においては、簡易な認証と高度な認証とを組み合わせた認証ができなかった。そのため、従来の技術においては、高速で精度の高い認証が困難であった。   However, in the conventional technology, authentication combining simple authentication and advanced authentication cannot be performed. Therefore, in the conventional technique, it is difficult to perform high-speed and high-accuracy authentication.

本第一の発明の認証装置は、コードと人物とを撮影した画像を格納し得る画像格納部と、画像の中のコードを認証するコード認証部と、画像の中の人物を認証する人物認証部と、コード認証部の認証結果が認証許可を示す情報であり、かつ人物認証部の認証結果が認証許可を示す場合に、認証許可を示す情報である認証結果を出力する出力部とを具備する認証装置である。   The authentication device according to the first aspect includes an image storage unit that can store an image of a code and a person, a code authentication unit that authenticates a code in the image, and a person authentication that authenticates a person in the image. And an output unit that outputs an authentication result that is information indicating authentication permission when the authentication result of the code authentication unit indicates information indicating authentication permission and the authentication result of the person authentication unit indicates authentication permission. It is an authentication device.

かかる構成により、簡易なコードによる認証と高度な人物認証とを組み合わせた認証が可能となる。   With such a configuration, authentication combining simple code authentication and advanced person authentication is possible.

また、本第二の発明の認証装置は、第一の発明に対して、人物認証部は、画像の中の人物の個体認識を行う認証装置である。   The authentication device according to the second aspect of the invention is an authentication device in which the person authentication unit performs individual recognition of a person in the image.

かかる構成により、簡易なコードによる認証と高度な人物の個体認証とを組み合わせた認証ができる。   With this configuration, authentication that combines authentication with a simple code and advanced individual authentication of a person can be performed.

また、本第三の発明の認証装置は、第二の発明に対して、人物認証部は、コード認証部の認証の後に、画像の中の人物を認証する認証装置である。   Further, in the authentication device of the third invention, in contrast to the second invention, the person authentication unit is an authentication device for authenticating a person in the image after authentication by the code authentication unit.

かかる構成により、簡易なコードによる認証と高度な人物の個体認証とを組み合わせた認証ができる。   With this configuration, authentication that combines authentication with a simple code and advanced individual authentication of a person can be performed.

また、本第四の発明の認証装置は、第三の発明に対して、コードに関するコード情報、および人物を特定するための情報である人物認証情報を有する1以上の認証情報を格納し得る認証情報格納部をさらに具備し、コード認証部は、画像の中のコードと認証情報格納部の1以上のコード情報とを用いて、コードを認証し、人物認証部は、コード認証部が認証許可の認証結果を得た際のコード情報に対応する人物情報を認証情報格納部から取得し、人物情報を用いて、画像の中の人物を認証する認証装置である。   In addition, the authentication device of the fourth aspect of the invention is an authentication that can store code information relating to a code and one or more pieces of authentication information having person authentication information that is information for specifying a person, as compared to the third aspect of the invention. An information storage unit, wherein the code authentication unit authenticates the code using the code in the image and one or more pieces of code information in the authentication information storage unit, and the person authentication unit is authenticated by the code authentication unit. This is an authentication apparatus that acquires person information corresponding to code information when the authentication result is obtained from the authentication information storage unit and authenticates the person in the image using the person information.

かかる構成により、簡易なコードによる認証と高度な人物の個体認証とを組み合わせて、高速に認証ができる。   With this configuration, authentication can be performed at high speed by combining authentication with a simple code and advanced individual authentication of a person.

また、本第五の発明の認証装置は、第二から第四いずれかの発明に対して、人物認証部は、人物の顔の1以上の特徴量を有する人物情報を用いて、画像の中の人物を認証する認証装置である。   In the authentication device according to the fifth aspect of the present invention, in contrast to any of the second through fourth aspects, the person authentication unit uses person information having one or more feature quantities of a person's face to Is an authentication device for authenticating a person.

かかる構成により、簡易なコードによる認証と高度な人物の顔認証とを組み合わせた認証ができる。   With this configuration, authentication combining simple code authentication and advanced human face authentication can be performed.

また、本第六の発明の認証装置は、第一の発明に対して、人物認証部は、画像の中に人物が存在することを認識し、人物が存在する場合に、認証許可を示す認証結果を取得する認証装置である。   Further, in the authentication device of the sixth invention, in contrast to the first invention, the person authentication unit recognizes that a person is present in the image and, when there is a person, an authentication indicating authentication permission. It is an authentication device that acquires the result.

かかる構成により、簡易なコードによる認証と高度な人物の存在の認証とを組み合わせた認証ができる。   With this configuration, authentication combining simple code authentication and advanced human presence authentication can be performed.

また、本第七の発明の認証装置は、第一から第六いずれかの発明に対して、画像は、コードと人物との組を2組以上含み、コード認証部は、画像の中の2以上のコードを認証し、人物認証部は、画像の中の2以上の人物を認証し、出力部は、2以上の人物に対する認証結果を出力する認証装置である。   In the authentication device according to the seventh aspect of the present invention, in contrast to any of the first to sixth aspects, the image includes two or more pairs of a code and a person. The person authentication unit authenticates the two or more persons in the image, and the output unit outputs an authentication result for the two or more persons.

かかる構成により、一つの画像から、簡易なコードによる認証と高度な人物認証とを組み合わせた、複数人の認証ができる。   With this configuration, it is possible to authenticate a plurality of persons from a single image by combining simple code authentication and advanced person authentication.

また、本第八の発明の認証装置は、第一から第七いずれかの発明に対して、出力部は、コード認証部が認証許可の認証結果を取得し、かつ人物認証部が認証不許可の認証結果を取得した場合、人物認証できないことを示す認証結果を出力する認証装置である。   In the authentication device of the eighth invention, the output unit obtains the authentication result of the authentication permission by the code authentication unit and the person authentication unit does not permit the authentication in any one of the first to seventh inventions. When the authentication result is acquired, the authentication apparatus outputs an authentication result indicating that person authentication cannot be performed.

かかる構成により、簡易なコードによる認証と高度な人物認証とを組み合わせた認証ができる。   With this configuration, authentication combining simple code authentication and advanced person authentication can be performed.

また、本第九の発明の認証装置は、第一から第八いずれかの発明に対して、出力部は、コード認証部が認証許可の認証結果を取得した場合、画像を出力する認証装置である。   Further, in the authentication device of the ninth invention, the output unit is an authentication device that outputs an image when the code authentication unit acquires an authentication permission authentication result, in relation to any of the first to eighth inventions. is there.

かかる構成により、コードによる認証が完了した後、画像を記録できる。   With this configuration, an image can be recorded after the authentication by the code is completed.

本発明による認証装置によれば、簡易な認証と高度な認証とを組み合わせた認証が可能となる。   According to the authentication device of the present invention, authentication combining simple authentication and advanced authentication is possible.

実施の形態1における認証システムの概念図Conceptual diagram of authentication system in embodiment 1 同認証システムのブロック図Block diagram of the authentication system 同認証装置2の動作の第一の例について説明するフローチャートThe flowchart explaining the 1st example of operation | movement of the authentication apparatus 2 同認証装置2の動作の第二の例について説明するフローチャートThe flowchart explaining the 2nd example of operation | movement of the authentication apparatus 2 同認証情報管理表を示す図Figure showing the authentication information management table 同認証対象の画像の例を示す図Diagram showing an example of the image to be authenticated 同認証対象の画像の例を示す図Diagram showing an example of the image to be authenticated 同認証対象の画像の例を示す図Diagram showing an example of the image to be authenticated 同認証対象の画像の例を示す図Diagram showing an example of the image to be authenticated 同コンピュータシステムの概観図Overview of the computer system 同コンピュータシステムのブロック図Block diagram of the computer system

以下、認証装置等の実施形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。   Hereinafter, embodiments of an authentication device and the like will be described with reference to the drawings. In addition, since the component which attached | subjected the same code | symbol in embodiment performs the same operation | movement, description may be abbreviate | omitted again.

(実施の形態1)   (Embodiment 1)

本実施の形態において、コードと人物とを撮影した画像から、コードを認証するコード認証と、人物に関する条件を満たしたことを認識する人物認証とを行い、両方の認証許可を得られた場合に、認証許可を示す情報を出力する認証装置を具備する認証システムについて説明する。なお、人物認証は、人物の個体認識、または人物が存在することの認識等である。   In the present embodiment, when code authentication for authenticating a code and person authentication for recognizing that a condition related to a person is satisfied are obtained from an image obtained by photographing a code and a person, and both authentication permission is obtained. An authentication system including an authentication device that outputs information indicating authentication permission will be described. Note that person authentication is individual recognition of a person, recognition of the presence of a person, or the like.

また、本実施の形態において、コード認証を用いて、人物を絞り込み、当該絞り込んだ人物に対応する人物情報と、画像から取得した人物情報とを対比して、人物認証を行うため、高速に精度の高い認証処理が行える認証装置を具備する認証システムについて説明する。   Also, in this embodiment, code authentication is used to narrow down the person, and the person authentication is performed by comparing the person information corresponding to the narrowed-down person with the person information acquired from the image. An authentication system including an authentication device capable of performing high authentication processing will be described.

また、本実施の形態において、一の画像に撮影されている複数の人物の認証を行える認証装置を具備する認証システムについて説明する。   In the present embodiment, an authentication system including an authentication device that can authenticate a plurality of persons photographed in one image will be described.

また、本実施の形態において、コード認証ができたが人物認証ができない場合に、人物認証ができないことの警告を出力する認証装置を具備する認証システムについて説明する。   Also, in the present embodiment, an authentication system including an authentication device that outputs a warning that person authentication cannot be performed when code authentication can be performed but person authentication cannot be performed will be described.

さらに、本実施の形態において、コード認証ができた場合に、例えば、画像を蓄積したり、画像を送信したり、画像を表示したりする認証システムについて説明する。   Furthermore, in the present embodiment, an explanation will be given of an authentication system for accumulating images, transmitting images, and displaying images when code authentication is successful.

図1は、本実施の形態における認証システムの概念図である。認証システムは、カメラ1、認証装置2、および処理装置3を備える。   FIG. 1 is a conceptual diagram of an authentication system in the present embodiment. The authentication system includes a camera 1, an authentication device 2, and a processing device 3.

処理装置3は、認証許可の情報を受け付け、認証許可に応じた処理を行う。処理装置3は、例えば、認証許可の情報を受け付け、オープンされるドアとその制御装置である。また、処理装置3は、例えば、認証許可の情報を受け付け、当該認証結果を出力するディスプレイ、スピーカー等の出力装置等である。処理装置3は、認証結果を受け付け、当該認証結果を用いて処理を行う装置であれば何でも良い。処理装置3は、ドアと出力装置等の2種類以上の装置を含んでいても良い。   The processing device 3 receives authentication permission information and performs processing according to the authentication permission. The processing device 3 is, for example, a door that receives authentication permission information and is opened and its control device. The processing device 3 is, for example, an output device such as a display or a speaker that receives authentication permission information and outputs the authentication result. The processing device 3 may be anything as long as it accepts the authentication result and performs processing using the authentication result. The processing device 3 may include two or more types of devices such as a door and an output device.

図2は、本実施の形態における認証システムのブロック図である。   FIG. 2 is a block diagram of the authentication system in the present embodiment.

認証装置2は、認証情報格納部21、画像格納部22、画像受信部23、コード認証部24、人物認証部25、および出力部26を備える。   The authentication device 2 includes an authentication information storage unit 21, an image storage unit 22, an image reception unit 23, a code authentication unit 24, a person authentication unit 25, and an output unit 26.

処理装置3は、認証結果受信部31、および処理部32を備える。   The processing device 3 includes an authentication result receiving unit 31 and a processing unit 32.

カメラ1は、画像を撮影する。カメラ1は、撮影して取得した画像を、通常、送信する。画像の送信先は、通常、認証装置2である。なお、カメラ1は、取得した画像を、図示しない記録媒体に蓄積しても良い。   The camera 1 takes an image. The camera 1 usually transmits an image acquired by photographing. The image transmission destination is usually the authentication device 2. The camera 1 may store the acquired image in a recording medium (not shown).

また、カメラ1は、例えば、入口、玄関等に配置されている。カメラ1は、例えば、入口、玄関等に居る人物を撮影する。カメラ1は、例えば、入口、玄関等に居て、建物内に入ろうとする人物を撮影する。   Moreover, the camera 1 is arrange | positioned at the entrance, the entrance, etc., for example. The camera 1 shoots a person at an entrance, a front door, or the like, for example. The camera 1 is, for example, at an entrance, an entrance, or the like and photographs a person who is about to enter a building.

認証装置2を構成する認証情報格納部21は、1または2以上の認証情報を格納し得る。認証情報は、コードに関するコード情報と人物認証情報とを有する。   The authentication information storage unit 21 constituting the authentication device 2 can store one or more authentication information. The authentication information includes code information related to the code and person authentication information.

コード情報とは、コードに関する情報である。コード情報は、例えば、コードから取得された情報(例えば、ID)、コードの画像等である。コードとは、バーコード、二次元バーコード、QRコード(登録商標)、カメレオンコード、文字列、数字列等、識別できるものであれば何でも良い。コードは、カメレオンコード等、色の配列を識別情報として有する二次元コードであることは好適である。コードは、例えば、人物が胸に付けている札に印刷されていたり、人物がぶら下げているストラップにぶら下げている札に印刷されていたりする。   The code information is information regarding the code. The code information is, for example, information (for example, ID) acquired from the code, a code image, or the like. The code may be anything that can be identified, such as a barcode, a two-dimensional barcode, a QR code (registered trademark), a chameleon code, a character string, and a numeric string. The code is preferably a two-dimensional code having a color array as identification information, such as a chameleon code. For example, the code is printed on a tag attached to the chest of the person, or printed on a tag hanging on a strap on which the person is hanging.

人物認証情報とは、人物を特定するための情報である。人物認証情報は、人物の顔の1以上の特徴量、人物の1以上の属性値、生体認証で利用する情報(虹彩の情報、指紋の情報、静脈の情報など)等、人物を認証できる情報であれば何でも良い。   The person authentication information is information for specifying a person. The person authentication information is information that can authenticate a person, such as one or more feature quantities of a person's face, one or more attribute values of the person, information used for biometric authentication (iris information, fingerprint information, vein information, etc.) Anything is fine.

画像格納部22は、コードと人物とを撮影した画像を格納し得る。ここで、画像とは、通常、動画であるが、静止画でも良い。また、画像は、通常、外部のカメラ1から受信された画像である。ただし、画像は、DVD等の記録媒体に格納されている画像でも良い。   The image storage unit 22 can store an image obtained by photographing a code and a person. Here, the image is usually a moving image, but may be a still image. The image is usually an image received from the external camera 1. However, the image may be an image stored in a recording medium such as a DVD.

画像は、コードと人物との組を2組以上含むこともあり得る。つまり、画像は、二人以上の人物が撮影された画像でも良い。画像は、例えば、コードが印刷された札やストラップを付けている二人以上の人物が撮影された画像でも良い。     An image may include two or more pairs of a code and a person. That is, the image may be an image in which two or more persons are photographed. The image may be, for example, an image in which two or more persons wearing a tag printed with a code or a strap are photographed.

画像受信部23は、カメラ1から画像を受信する。そして、画像受信部23は、通常、受信した画像を画像格納部22に少なくとも一時蓄積する。   The image receiving unit 23 receives an image from the camera 1. The image receiving unit 23 normally at least temporarily accumulates the received image in the image storage unit 22.

コード認証部24は、画像の中のコードを認証する。   The code authentication unit 24 authenticates the code in the image.

コード認証部24は、例えば、画像の中のコードと認証情報格納部21の1以上のコード情報とを用いて、コードを認証する。   The code authenticating unit 24 authenticates the code using, for example, the code in the image and one or more pieces of code information in the authentication information storage unit 21.

コード認証部24は、画像の中の2以上のコードを認証することは好適である。   It is preferable that the code authentication unit 24 authenticates two or more codes in the image.

さらに具体的には、コード認証部24は、例えば、画像の中からコードの領域を切り出し、コードを有する部分画像を取得する。そして、コード認証部24は、コードの領域の部分画像からコード情報を取得する。次に、コード認証部24は、当該コード情報が、認証情報格納部21に存在するか否かを判断する。そして、コード情報が認証情報格納部21に存在する場合は認証許可の認証結果を取得し、存在しない場合は認証不許可の認証結果を取得する。   More specifically, for example, the code authenticating unit 24 cuts out a code area from the image, and acquires a partial image having the code. Then, the code authentication unit 24 acquires code information from the partial image of the code area. Next, the code authentication unit 24 determines whether the code information exists in the authentication information storage unit 21. When the code information exists in the authentication information storage unit 21, an authentication permission authentication result is acquired, and when the code information does not exist, an authentication disapproval authentication result is acquired.

人物認証部25は、画像の中の人物を認証する。人物認証部25は、通常、画像の中の人物の個体認識を行う。だたし、人物認証部25は、画像の中に人物が存在することを検知するだけでも良い。また、人物認証部25は、人の属性(例えば、性別、年齢層)を認識しても良い。なお、人物の認証とは、顔認証であることは好適である。   The person authentication unit 25 authenticates a person in the image. The person authentication unit 25 normally performs individual recognition of a person in an image. However, the person authentication unit 25 may only detect that a person is present in the image. The person authentication unit 25 may recognize a person's attributes (for example, gender, age group). It is preferable that the person authentication is face authentication.

人物認証部25は、コード認証部24の認証の後に、画像の中の人物を認証することは好適である。ここで、コード認証部24の認証の後とは、通常、コード認証部24における認証結果が認証許可を示す場合のみ、人物認証部25が、画像の中の人物を認証することである。   It is preferable that the person authentication unit 25 authenticates the person in the image after the code authentication unit 24 authenticates. Here, after the authentication of the code authenticating unit 24, normally, the person authenticating unit 25 authenticates the person in the image only when the authentication result in the code authenticating unit 24 indicates that the authentication is permitted.

人物認証部25は、コード認証部24が認証許可の認証結果を得た際のコード情報と対になる人物情報を認証情報格納部21から取得し、当該人物情報を用いて、画像の中の人物を認証することは好適である。   The person authentication unit 25 acquires the person information paired with the code information when the code authentication unit 24 obtains the authentication permission authentication result from the authentication information storage unit 21, and uses the person information to store the person information in the image. It is preferable to authenticate a person.

人物認証部25は、例えば、人物の顔の1以上の特徴量を有する人物情報を用いて、画像の中の人物を認証する。   The person authentication unit 25 authenticates a person in the image using, for example, person information having one or more feature amounts of the person's face.

また、人物認証部25は、例えば、画像の中に人物が存在することを認識し、人物が存在する場合に、認証許可を示す認証結果を取得する。   For example, the person authentication unit 25 recognizes that a person exists in the image, and acquires an authentication result indicating authentication permission when the person exists.

人物認証部25は、画像の中の2以上の人物を認証することは好適である。   It is preferable that the person authentication unit 25 authenticates two or more persons in the image.

具体的には、人物認証部25は、例えば、画像格納部22の画像の中の人物の画像を取得し、当該人物の画像から人物に関する人物情報を取得し、当該人物情報と、予め格納されている人物認証情報とを用いて、認証を行う。なお、上記の人物とは、人物の一部でも良く、例えば、顔でも良い。   Specifically, the person authentication unit 25 acquires, for example, an image of a person in the image stored in the image storage unit 22, acquires person information about the person from the image of the person, and stores the person information and the person information in advance. Authentication is performed using the personal authentication information. The person may be a part of the person, for example, a face.

さらに具体的には、人物認証部25は、例えば、画像格納部22の画像の中の人物の画像を抽出する。そして、人物認証部25は、当該人物の画像から1以上の特徴量を有する人物情報を取得する。次に、人物認証部25は、取得した人物情報と、認証情報格納部21に格納されている1以上の各人物認証情報とを比較し、取得した人物情報に予め決められた条件を満たすほど近い人物認証情報が存在するか否かを判断する。人物認証部25は、取得した人物情報に予め決められた条件を満たすほど近い人物認証情報が存在する場合は認証許可の認証結果を取得し、存在しない場合は認証不許可の認証結果を取得する。   More specifically, the person authentication unit 25 extracts, for example, a person image from the images stored in the image storage unit 22. The person authentication unit 25 acquires person information having one or more feature amounts from the person image. Next, the person authentication unit 25 compares the acquired person information with one or more pieces of person authentication information stored in the authentication information storage unit 21, and the acquired person information is closer enough to satisfy a predetermined condition. It is determined whether or not person authentication information exists. The person authentication unit 25 acquires an authentication permission authentication result if there is person authentication information that is close enough to satisfy the predetermined condition in the acquired person information, and acquires an authentication disapproval authentication result if it does not exist.

また、人物認証部25は、コード認証部24が認証許可の認証結果を得た際のコード情報と対になる人物情報(第一の人物情報とする)を認証情報格納部21から取得する。そして、人物認証部25は、例えば、画像格納部22の画像の中の、前記コードに対応する人物の画像を抽出する。そして、人物認証部25は、当該人物の画像から人物情報(第二の人物情報とする)を取得する。次に、人物認証部25は、第一の人物情報と第二の人物情報とを比較し、予め決められた条件を満たすほど、2つの人物情報が近似するか否かを判断する。そして、人物認証部25は予め決められた条件を満たすほど2つの人物情報が近似する場合は認証許可の認証結果を取得し、近似しない場合は認証不許可の認証結果を取得する。   In addition, the person authentication unit 25 acquires, from the authentication information storage unit 21, person information (referred to as first person information) that is paired with code information when the code authentication unit 24 obtains an authentication permission authentication result. Then, the person authentication unit 25 extracts, for example, an image of a person corresponding to the code from the image stored in the image storage unit 22. Then, the person authentication unit 25 acquires person information (referred to as second person information) from the image of the person. Next, the person authentication unit 25 compares the first person information and the second person information, and determines whether or not the two pieces of person information are closer to each other as a predetermined condition is satisfied. The person authentication unit 25 acquires an authentication permission authentication result when the two pieces of person information approximate to meet a predetermined condition, and acquires an authentication disapproval authentication result when the information does not approximate.

出力部26は、認証結果を出力する。出力部26は、通常、コード認証部24、および人物認証部25における認証結果を出力する。なお、出力とは、外部の装置への送信、ディスプレイへの表示、プロジェクターを用いた投影、プリンタでの印字、音出力、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。ここで、出力は、処理部32への送信であることが好適である。   The output unit 26 outputs the authentication result. The output unit 26 normally outputs the authentication results in the code authentication unit 24 and the person authentication unit 25. Note that output refers to transmission to an external device, display on a display, projection using a projector, printing with a printer, sound output, accumulation in a recording medium, processing to other processing devices or other programs, etc. It is a concept that includes delivery of results. Here, the output is preferably transmission to the processing unit 32.

出力部26は、例えば、コード認証部24の認証結果が認証許可を示す情報であり、かつ人物認証部25の認証結果が認証許可を示す場合のみ、認証許可を示す情報である認証結果を出力する。   The output unit 26 outputs, for example, an authentication result that is information indicating authentication permission only when the authentication result of the code authentication unit 24 indicates authentication permission and the authentication result of the person authentication unit 25 indicates authentication permission. To do.

出力部26は、例えば、コード認証部24の認証結果、および人物認証部25の認証結果を、別々に出力しても良い。   For example, the output unit 26 may separately output the authentication result of the code authentication unit 24 and the authentication result of the person authentication unit 25.

出力部26は、2以上の人物に対する認証結果を出力することは好適である。2以上の人物に対する認証結果とは、2以上の認証結果でも良いし、集約した一の認証結果でも良い。例えば、全員の認証結果が認証許可の場合のみ、集約した一の認証結果が認証許可となる。   It is preferable that the output unit 26 outputs authentication results for two or more persons. The authentication result for two or more persons may be two or more authentication results, or may be an integrated authentication result. For example, only when the authentication result of all members is the authentication permission, the aggregated one authentication result is the authentication permission.

つまり、出力部26は、2以上の各人物に対する2以上の認証結果を出力しても良いし、2以上の人物に対する2以上の認証結果を集約した認証結果を出力しても良い。   That is, the output unit 26 may output two or more authentication results for two or more persons, or may output an authentication result obtained by collecting two or more authentication results for two or more persons.

出力部26は、コード認証部24が認証許可の認証結果を取得し、かつ人物認証部25が認証不許可の認証結果を取得した場合、人物認証できないことを示す認証結果を出力することは好適である。   The output unit 26 preferably outputs an authentication result indicating that person authentication cannot be performed when the code authentication unit 24 acquires an authentication permission authentication result and the person authentication unit 25 acquires an authentication disapproval authentication result. It is.

出力部26は、コード認証部24が認証許可の認証結果を取得した場合、画像を出力する。ここでの出力とは、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどであることが好適である。   The output unit 26 outputs an image when the code authentication unit 24 acquires the authentication permission authentication result. The output here is preferably transmission to an external device, accumulation in a recording medium, delivery of a processing result to another processing device or another program, or the like.

処理装置3を構成する認証結果受信部31は、認証装置2から認証結果を受信する。認証結果受信部31は、認証装置2の出力部26から送信された認証結果を受信することは好適である。   The authentication result receiving unit 31 configuring the processing device 3 receives the authentication result from the authentication device 2. The authentication result receiving unit 31 preferably receives the authentication result transmitted from the output unit 26 of the authentication device 2.

処理部32は、認証結果受信部31が受信した認証結果を用いて、処理を行う。処理部32は、通常、認証結果が認証許可である場合と認証不許可である場合とで、異なる処理を行う。処理部32は、例えば、認証結果が認証許可である場合のみ、ドアを開く。また、処理部32は、例えば、認証結果が認証不許可である場合のみ、警告を出力する。また、処理部32は、例えば、認証結果が認証不許可である場合のみ、画像の蓄積または外部装置への画像の送信を行う。   The processing unit 32 performs processing using the authentication result received by the authentication result receiving unit 31. The processing unit 32 normally performs different processing depending on whether the authentication result is authentication permission or not. For example, the processing unit 32 opens the door only when the authentication result is authentication permission. Further, the processing unit 32 outputs a warning only when, for example, the authentication result is that authentication is not permitted. Further, the processing unit 32 accumulates an image or transmits an image to an external device only when, for example, the authentication result does not permit authentication.

認証情報格納部21、画像格納部22は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。   The authentication information storage unit 21 and the image storage unit 22 are preferably non-volatile recording media, but can also be realized by volatile recording media.

認証情報格納部21等に認証情報等が記憶される過程は問わない。例えば、記録媒体を介して認証情報等が認証情報格納部21等で記憶されるようになってもよく、通信回線等を介して送信された認証情報等が認証情報格納部21等で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された認証情報等が認証情報格納部21等で記憶されるようになってもよい。   The process in which authentication information etc. are memorize | stored in the authentication information storage part 21 grade | etc., Is not ask | required. For example, the authentication information or the like may be stored in the authentication information storage unit 21 or the like via a recording medium, and the authentication information or the like transmitted via a communication line or the like is stored in the authentication information storage unit 21 or the like. Alternatively, authentication information or the like input via the input device may be stored in the authentication information storage unit 21 or the like.

画像受信部23は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。   The image receiving unit 23 is usually realized by a wireless or wired communication means, but may be realized by a means for receiving a broadcast.

コード認証部24、人物認証部25、処理部32は、通常、MPUやメモリ等から実現され得る。コード認証部24等の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはROM等の記録媒体に記録されている。但し、ハードウェア(専用回路)で実現しても良い。   The code authentication unit 24, the person authentication unit 25, and the processing unit 32 can usually be realized by an MPU, a memory, or the like. The processing procedure of the code authentication unit 24 or the like is usually realized by software, and the software is recorded on a recording medium such as a ROM. However, it may be realized by hardware (dedicated circuit).

出力部26は、通常、無線または有線の送信手段により実現され得る。ただし、出力部26は、ディスプレイやスピーカー等の出力デバイスにより実現されても良い。また、出力部26は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現されても良い。   The output unit 26 can be usually realized by wireless or wired transmission means. However, the output unit 26 may be realized by an output device such as a display or a speaker. The output unit 26 may be realized by driver software for an output device or driver software for an output device and an output device.

認証結果受信部31は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。   The authentication result receiving unit 31 is usually realized by a wireless or wired communication means, but may be realized by a means for receiving a broadcast.

次に、認証システムの動作について説明する。まず、カメラ1の動作について説明する。カメラ1は、通常、ユーザの開始指示を受け付け、撮影を開始する。そして、撮影中、カメラ1は、取得した画像を認証装置2に送信する。また、カメラ1は、通常、ユーザの終了指示を受け付け、撮影を終了する。   Next, the operation of the authentication system will be described. First, the operation of the camera 1 will be described. The camera 1 usually accepts a user start instruction and starts shooting. Then, during shooting, the camera 1 transmits the acquired image to the authentication device 2. Further, the camera 1 normally accepts a user's end instruction and ends the shooting.

次に、認証装置2の動作の第一の例について、図3のフローチャートを用いて説明する。   Next, a first example of the operation of the authentication device 2 will be described using the flowchart of FIG.

(ステップS301)画像受信部23は、カメラ1で撮影された画像を受信したか否かを判断する。画像を受信すればステップS302に行き、画像を受信しなければステップS301に戻る。   (Step S301) The image receiving unit 23 determines whether an image captured by the camera 1 is received. If an image is received, the process proceeds to step S302. If no image is received, the process returns to step S301.

(ステップS302)人物認証部25は、図示しない記録媒体に格納されている画像であって、先に認証した対象の画像と、ステップS301で受信された画像とを比較し、予め決められた条件を満たすほど近似するか否かを判断する。予め決められた条件を満たすほど近似する場合はステップS303に行き、近似しない場合はステップS301に戻る。なお、2つの画像を比較し、類似度を算出したり、予め決められた条件を満たすほど近似するか否かを判断したりする処理は公知の処理であるので、詳細な説明を省略する。   (Step S302) The person authenticating unit 25 compares an image stored in a recording medium (not shown), which has been previously authenticated, with the image received in Step S301, and determines a predetermined condition. It is determined whether or not the approximation is made so as to satisfy. When approximating to meet a predetermined condition, the process goes to step S303, and when not approximating, the process returns to step S301. Note that the process of comparing two images and calculating the similarity or determining whether or not they are approximated so as to satisfy a predetermined condition is a known process, and thus detailed description thereof is omitted.

(ステップS303)人物認証部25は、ステップS301で受信された画像の中で、認証対象の画像を取得する。認証対象の画像とは、通常、認証対象の静止画である。なお、人物認証部25は、例えば、動画である画像の中から、最初の静止画を取得する。また、人物認証部25は、例えば、動画である画像を構成する各静止画の中から顔を認識できる静止画を取得する。また、人物認証部25は、例えば、動画である画像を構成する各静止画の中から、最も大きく顔を認識できる静止画を取得する。なお、人物認証部25は、例えば、動画を構成する各静止画について、顔認識の技術を用いて顔の領域を取得し、当該顔の領域が最も大きい静止画を取得する。   (Step S303) The person authentication unit 25 acquires an image to be authenticated among the images received in step S301. The image to be authenticated is usually a still image to be authenticated. For example, the person authentication unit 25 acquires the first still image from among images that are moving images. In addition, the person authentication unit 25 acquires, for example, a still image from which a face can be recognized from among the still images constituting an image that is a moving image. In addition, the person authentication unit 25 acquires, for example, a still image that can recognize the face most greatly from among the still images constituting the image that is a moving image. Note that the person authentication unit 25 acquires, for example, a face region for each still image constituting the moving image using a face recognition technique, and acquires a still image having the largest face region.

(ステップS304)人物認証部25は、ステップS303で取得した認証対象の画像から、1または2以上の人物の領域の画像を切り出す。なお、人物認証部25は、例えば、認証対象の画像から顔の領域を認識し、当該顔の領域と、その周りの閾値以内の領域を切り出しても良い。また、人物認証部25は、例えば、認証対象の画像から、人物の枠を検知し、当該枠内の領域を、人物の領域の画像として切り出しても良い。   (Step S304) The person authentication unit 25 cuts out one or more person area images from the authentication target image acquired in step S303. For example, the person authentication unit 25 may recognize a face area from an image to be authenticated, and cut out the face area and a surrounding area within a threshold. For example, the person authentication unit 25 may detect a person frame from an image to be authenticated and cut out an area in the frame as an image of the person area.

(ステップS305)コード認証部24は、カウンタiに1を代入する。   (Step S305) The code authenticating unit 24 substitutes 1 for the counter i.

(ステップS306)コード認証部24は、i番目の人物の領域が存在するか否かを判断する。i番目の人物の領域が存在すればステップS307に行き、i番目の人物の領域が存在しなければステップS320に行く。   (Step S306) The code authenticating unit 24 determines whether or not an i-th person area exists. If the i-th person area exists, the process goes to step S307, and if the i-th person area does not exist, the process goes to step S320.

(ステップS307)コード認証部24は、i番目の人物の領域から、コードの領域を切り出す。なお、画像から、バーコード、二次元バーコード、QRコード、カメレオンコード等のコードの領域を切り出す技術は公知技術であるので、詳細な説明は省略する。   (Step S307) The code authenticating unit 24 cuts out a code area from the i-th person area. Since a technique for cutting out a code area such as a barcode, a two-dimensional barcode, a QR code, and a chameleon code from an image is a known technique, detailed description thereof is omitted.

(ステップS308)コード認証部24は、ステップS307で切り出したコードの領域の画像から、コード情報を取得する。かかる処理は、例えば、バーコードリーダー等の公知技術である。   (Step S308) The code authenticating unit 24 acquires code information from the image of the code area cut out in step S307. Such processing is, for example, a known technique such as a barcode reader.

(ステップS309)コード認証部24は、ステップS308で取得したコード情報をキーとして、認証情報格納部21を検索する。   (Step S309) The code authentication unit 24 searches the authentication information storage unit 21 using the code information acquired in step S308 as a key.

(ステップS310)コード認証部24は、ステップS309における検索の結果、ステップS308で取得したコード情報が認証情報格納部21に存在する場合はステップS311に行き、存在しない場合はステップS318に行く。   (Step S310) As a result of the search in step S309, the code authentication unit 24 goes to step S311 if the code information acquired in step S308 exists in the authentication information storage unit 21, and goes to step S318 if it does not exist.

(ステップS311)コード認証部24は、変数「コードの認証結果」に値「認証許可(例えば、「1」)」を代入する。   (Step S311) The code authenticating unit 24 substitutes the value “authentication permission (for example,“ 1 ”)” into the variable “code authentication result”.

(ステップS312)人物認証部25は、ステップS309で検索されたコード情報と対になる人物認証情報を、認証情報格納部21から取得する。ここで、人物認証部25は、通常、一の人物認証情報を取得するが、2以上の人物認証情報を取得しても良い。2以上の人物認証情報を取得する場合とは、例えば、複数人に同じコードが割り振られている場合である。なお、かかる複数人は、例えば、同じ組織に属する者など、グループを構成する。   (Step S <b> 312) The person authentication unit 25 acquires person authentication information that is paired with the code information searched in step S <b> 309 from the authentication information storage unit 21. Here, the person authentication unit 25 normally acquires one person authentication information, but may acquire two or more person authentication information. The case of acquiring two or more person authentication information is, for example, a case where the same code is allocated to a plurality of persons. Note that such a plurality of people form a group such as those belonging to the same organization.

(ステップS313)人物認証部25は、i番目の人物の領域から、人物情報を取得する。なお、人物を含む画像から、人物情報を取得する技術は公知技術であるので、詳細な説明は省略する。   (Step S313) The person authentication unit 25 acquires person information from the area of the i-th person. In addition, since the technique which acquires person information from the image containing a person is a well-known technique, detailed description is abbreviate | omitted.

(ステップS314)人物認証部25は、ステップS312で取得した人物認証情報と、ステップS313で取得した人物情報とを比較し、人物認証情報と人物情報とが、予め決められた条件を満たすほど近似するか否かを判断する。条件を満たすほど近似する場合はステップS315に行き、近似しない場合はステップS316に行く。   (Step S314) The person authentication unit 25 compares the person authentication information acquired in step S312 with the person information acquired in step S313, and approximates so that the person authentication information and the person information satisfy a predetermined condition. Judge whether to do. When approximating to satisfy the condition, the process goes to step S315, and when not approximating, goes to step S316.

(ステップS315)人物認証部25は、変数「i番目の人物の認証結果」に値「認証許可(例えば、「1」)」を代入する。ステップS317に行く。   (Step S315) The person authentication unit 25 substitutes the value “authentication permission (for example,“ 1 ”)” into the variable “authentication result of the i-th person”. Go to step S317.

(ステップS316)人物認証部25は、変数「i番目の人物の認証結果」に値「認証不許可(例えば、「−1」)」を代入する。なお、ここで、出力部26は、画像を出力することは好適である。また、ここで出力とは、画像の蓄積、外部装置への送信等である。   (Step S316) The person authentication unit 25 substitutes the value “authentication not permitted (for example,“ −1 ”)” into the variable “authentication result of the i-th person”. Here, it is preferable that the output unit 26 outputs an image. The output here refers to accumulation of images, transmission to an external device, and the like.

(ステップS317)人物認証部25は、カウンタiを1、インクリメントする。ステップS306に戻る。   (Step S317) The person authentication unit 25 increments the counter i by one. The process returns to step S306.

(ステップS318)コード認証部24は、変数「コードの認証結果」に値「認証不許可(例えば、「−1」)」を代入する。   (Step S318) The code authenticating unit 24 substitutes the value “authentication not permitted (for example,“ −1 ”)” into the variable “code authentication result”.

(ステップS319)出力部26は、画像を出力する。この画像とは、ステップS301で受信された画像、またはステップS303で取得された認証対象の画像である。また、ここで出力とは、画像の蓄積、外部装置への送信等である。   (Step S319) The output unit 26 outputs an image. This image is the image received in step S301 or the authentication target image acquired in step S303. The output here refers to accumulation of images, transmission to an external device, and the like.

(ステップS320)出力部26は、変数「コードの認証結果」の値、変数「i番目の人物の認証結果」の値を用いて、出力する認証結果を構成する。出力する認証結果は、変数「コードの認証結果」の値、変数「i番目の人物の認証結果」の値を集約した情報でも良いし、変数「コードの認証結果」の値と変数「i番目の人物の認証結果」の値を含む情報でも良い。なお、「i番目の人物の認証結果とは、1または2以上の人物の認証結果である。   (Step S320) The output unit 26 configures an authentication result to be output using the value of the variable “code authentication result” and the value of the variable “authentication result of the i-th person”. The authentication result to be output may be information in which the value of the variable “code authentication result” and the value of the variable “authentication result of the i th person” are aggregated, or the value of the variable “code authentication result” and the variable “i th Information including the value of “person authentication result” may be used. The “authentication result of the i-th person” is an authentication result of one or more persons.

(ステップS321)出力部26は、ステップS320で構成した認証結果を出力する。   (Step S321) The output unit 26 outputs the authentication result configured in step S320.

(ステップS322)出力部26は、ステップS303で取得された認証対象の画像を、図示しない記録媒体に蓄積する。ステップS301に戻る。   (Step S322) The output unit 26 accumulates the authentication target image acquired in Step S303 on a recording medium (not shown). The process returns to step S301.

なお、図3のフローチャートにおいて、認証装置2は、まず、認証対象の画像から人物の領域を切り出し、当該人物の領域からコードの領域を切り出した。しかし、他の方法でも良い。つまり、コードの領域と人物の領域の取得方法、取得手順等は問わない。   In the flowchart of FIG. 3, the authentication apparatus 2 first cuts out a person area from the authentication target image, and cuts out a code area from the person area. However, other methods may be used. That is, the acquisition method and acquisition procedure of the code area and the person area are not limited.

また、図3のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。   Further, in the flowchart of FIG. 3, the process is ended by powering off or interruption for aborting the process.

次に、認証装置2の動作の第二の例について、図4のフローチャートを用いて説明する。なお、図4のフローチャートにおいて、図3のフローチャートと同一のステップについて説明を省略する。   Next, a second example of the operation of the authentication device 2 will be described using the flowchart of FIG. In the flowchart of FIG. 4, the description of the same steps as those in the flowchart of FIG. 3 is omitted.

(ステップS401)コード認証部24は、ステップS303で取得された認証対象の画像から、1または2以上のコードの領域を取得する。コードの領域とは、コードの画像である。   (Step S401) The code authentication unit 24 acquires one or more code areas from the authentication target image acquired in step S303. A code area is an image of a code.

(ステップS402)コード認証部24は、カウンタiに1を代入する。   (Step S402) The code authenticating unit 24 substitutes 1 for the counter i.

(ステップS403)コード認証部24は、ステップS401で取得した1以上のコードの領域のうち、i番目のコードの領域が存在するか否かを判断する。i番目のコードの領域が存在すればステップS308に行き、i番目のコードの領域が存在しなければステップS320に行く。   (Step S403) The code authenticating unit 24 determines whether or not there is an i-th code area among the one or more code areas acquired in step S401. If the i-th code area exists, the process proceeds to step S308. If the i-th code area does not exist, the process proceeds to step S320.

(ステップS404)人物認証部25は、i番目のコードの領域に対応するi番目の人物の領域を取得する。なお、人物認証部25は、1以上の人物の領域のうち、i番目のコードの領域に最も近い領域を、対応するi番目の人物の領域であると判断しても良い。また、人物認証部25は、i番目のコードの領域を含む人物の領域を、対応するi番目の人物の領域であると判断しても良い。対応するi番目の人物の領域を取得するアルゴリズムは問わない。   (Step S404) The person authentication unit 25 acquires an i-th person area corresponding to the i-th code area. The person authentication unit 25 may determine that the area closest to the i-th code area among the one or more person areas is the corresponding i-th person area. Further, the person authentication unit 25 may determine that the person area including the i-th code area is the corresponding i-th person area. There is no limitation on the algorithm for acquiring the corresponding i-th person area.

(ステップS405)人物認証部25は、ステップS404で取得したi番目の人物の領域の画像から、i番目の人物情報を取得する。ステップS314に行く。   (Step S405) The person authentication unit 25 acquires the i-th person information from the image of the i-th person area acquired in Step S404. Go to step S314.

なお、図4のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。   In the flowchart of FIG. 4, the process ends when the power is turned off or the process ends.

以下、本実施の形態における認証システムの具体的な動作について説明する。認証システムの概念図は図1である。   Hereinafter, a specific operation of the authentication system in the present embodiment will be described. FIG. 1 is a conceptual diagram of the authentication system.

今、処理装置3は、認証結果に応じて、ドアを開ける装置であるドア制御装置およびドアである、とする。   Now, it is assumed that the processing device 3 is a door control device and a door that are devices for opening the door according to the authentication result.

また、認証装置2の認証情報格納部21は、図5に示す認証情報管理表を格納している、とする。認証情報管理表は、「ID」「コード」「コード情報」「人物写真」「人物認証情報」を有するレコードを1以上、格納している。「ID」は、レコードを識別する情報である。「コード」は、ここでは、色の配列を識別情報として有する二次元コードである。さらに具体的には、カメレオンコードである。また、「コード情報」はコードから抽出されるユニークな情報である。「人物写真」は事前に登録された人物の静止画である。「人物認証情報」は、人物写真から抽出した特徴量ベクトルである。特徴量ベクトルは、1以上の特徴量を有する。特徴量は、人物写真から抽出できる特徴的な値であり、例えば、目と目との間隔、性別、年齢層、鼻の形のタイプ、口の形のタイプ、顔の形のタイプ等である。   Further, it is assumed that the authentication information storage unit 21 of the authentication device 2 stores the authentication information management table shown in FIG. The authentication information management table stores one or more records having “ID”, “code”, “code information”, “person photograph”, and “person authentication information”. “ID” is information for identifying a record. Here, the “code” is a two-dimensional code having a color array as identification information. More specifically, it is a chameleon code. “Code information” is unique information extracted from the code. “Portrait photo” is a still image of a person registered in advance. “Person authentication information” is a feature vector extracted from a person photo. The feature quantity vector has one or more feature quantities. The feature value is a characteristic value that can be extracted from a human photograph, such as the distance between eyes, gender, age group, nose shape type, mouth shape type, face shape type, etc. .

かかる状況において、以下の4つの具体例について説明する。具体例1は、認証対象の人物が一人の場合である。つまり、具体例1は、一人だけ撮影された画像から認証を行う場合である。また、具体例2は、認証対象の人物が二人以上の場合(ここでは、二人とする)である。つまり、具体例2は、二人以上が撮影された画像から認証を行う場合である。また、具体例3は、認証対象の人物が一人で、認証不許可の場合である。さらに、具体例4は、認証対象の人物が二人以上の場合(ここでは、二人とする)で、認証不許可の場合である。
(具体例1)
In this situation, the following four specific examples will be described. Specific example 1 is a case where there is only one person to be authenticated. That is, Example 1 is a case where authentication is performed from an image taken by only one person. Specific example 2 is a case where there are two or more persons to be authenticated (here, two persons). That is, the specific example 2 is a case where authentication is performed from an image in which two or more people are photographed. Specific example 3 is a case where there is one person to be authenticated and authentication is not permitted. Further, specific example 4 is a case where there are two or more persons to be authenticated (here, two persons) and authentication is not permitted.
(Specific example 1)

Aさんがドアの前に来た、とする。また、Aさんの胸には、コードが印刷された名札601が付いている、とする。   Suppose that Mr. A came in front of the door. Further, it is assumed that a name tag 601 printed with a code is attached to Mr. A's chest.

そして、カメラ1は、Aさんを撮影した画像を取得し、認証装置2に送信する。   And the camera 1 acquires the image which image | photographed Mr. A, and transmits to the authentication apparatus 2. FIG.

次に、認証装置2の画像受信部23は、カメラ1で撮影された画像(図6参照)を受信する。   Next, the image receiving unit 23 of the authentication device 2 receives an image (see FIG. 6) captured by the camera 1.

次に、人物認証部25は、図示しない記録媒体に格納されている画像であって、先に認証した対象の画像と、受信された画像とを比較し、予め決められた条件を満たすほど近似しない、と判断する。ここでは、図示しない記録媒体に格納されている画像が格納されていないからである。   Next, the person authentication unit 25 compares the received image with the target image that has been stored in a recording medium (not shown) and has been approximated so as to satisfy a predetermined condition. Judged not to. This is because an image stored in a recording medium (not shown) is not stored here.

次に、人物認証部25は、受信された画像の中で、認証対象の画像(Aさんの画像(602))を取得する。   Next, the person authentication unit 25 acquires an image to be authenticated (an image of Mr. A (602)) among the received images.

次に、人物認証部25は、取得した認証対象の画像から、Aさんの領域の画像を切り出す。   Next, the person authentication unit 25 cuts out an image of the area of Mr. A from the acquired authentication target image.

次に、コード認証部24は、Aさんの領域の画像から、コードの領域(601)を切り出す。   Next, the code authenticating unit 24 cuts out a code area (601) from the image of the area of Mr. A.

次に、コード認証部24は、切り出したコードの領域の画像から、コード情報「1111115・・・」を取得する。   Next, the code authenticating unit 24 acquires code information “11111115...” From the image of the extracted code area.

次に、コード認証部24は、取得したコード情報をキーとして、認証情報管理表を検索し、「ID=3」のレコードにマッチすることを検知する。そして、コード認証部24は、変数「コードの認証結果」に値「認証許可「1」」を代入する。   Next, the code authentication unit 24 searches the authentication information management table using the acquired code information as a key, and detects that it matches the record of “ID = 3”. Then, the code authenticating unit 24 substitutes the value “authentication permission“ 1 ”” into the variable “code authentication result”.

次に、人物認証部25は、検索されたコード情報と対になる人物認証情報(8,8,7,6,3,・・・)を、認証情報管理表から取得する。   Next, the person authentication unit 25 acquires person authentication information (8, 8, 7, 6, 3,...) That is paired with the searched code information from the authentication information management table.

また、人物認証部25は、Aさんの領域の画像から、人物情報を取得する。なお、ここで、人物認証部25は、Aさんの領域の画像から、コードの領域の画像を除いた領域から、人物情報を取得することは好適である。また、ここで取得された人物情報は、(8,8,8,6,3,・・・)であった、とする。   In addition, the person authentication unit 25 acquires person information from the image of Mr. A's area. Here, it is preferable that the person authentication unit 25 obtains the person information from the area obtained by removing the image of the code area from the image of the area of Mr. A. Further, it is assumed that the personal information acquired here is (8, 8, 8, 6, 3,...).

次に、人物認証部25は、取得した人物認証情報(8,8,7,6,3,・・・)と、取得した人物情報(8,8,8,6,3,・・・)とを比較し、人物認証情報と人物情報とが、予め決められた条件を満たすほど近似すると判断した、とする。なお、人物認証部25は、例えば、2つのベクトルのコサイン値を算出し、コサイン値を用いて、人物認証情報と人物情報とが、予め決められた条件を満たすほど近似するか否かを判断する。   Next, the person authentication unit 25 acquires the acquired person authentication information (8, 8, 7, 6, 3,...) And the acquired person information (8, 8, 8, 6, 3,...). , And it is determined that the person authentication information and the person information are approximated so as to satisfy a predetermined condition. Note that the person authentication unit 25 calculates, for example, cosine values of two vectors, and uses the cosine value to determine whether the person authentication information and the person information are approximated so as to satisfy a predetermined condition. To do.

次に、人物認証部25は、変数「人物の認証結果」に値「認証許可「1」」を代入する。   Next, the person authentication unit 25 assigns the value “authentication permission“ 1 ”” to the variable “person authentication result”.

次に、出力部26は、変数「コードの認証結果」の値「1」、変数「人物の認証結果」の値「1」を用いて、出力する認証結果「1」を構成する。   Next, the output unit 26 uses the value “1” of the variable “code authentication result” and the value “1” of the variable “person authentication result” to configure an authentication result “1” to be output.

次に、出力部26は、認証結果「1」をドア制御装置に送付する。   Next, the output unit 26 sends the authentication result “1” to the door control device.

ドア制御装置は、認証結果「1」を受け付け、ドアをオープンする。その結果、Aさんはドアの向こう側に移動できる。
(具体例2)
The door control device accepts the authentication result “1” and opens the door. As a result, Mr. A can move beyond the door.
(Specific example 2)

AさんとBさんとがドアの前に一緒に来た、とする。また、図7に示すように、Aさんの胸には、コードが印刷された名札601が付いている、とする。また、図7に示すように、Bさんは、コードが印刷された名札701を、ストラップで首からかけている、とする。   Suppose that Mr. A and Mr. B came together in front of the door. Further, as shown in FIG. 7, it is assumed that a name tag 601 on which a code is printed is attached to Mr. A's chest. Further, as shown in FIG. 7, it is assumed that Mr. B wears a name tag 701 printed with a code from his neck with a strap.

そして、カメラ1は、AさんとBさんとを撮影した画像を取得し、認証装置2に送信する。   Then, the camera 1 acquires images obtained by photographing A and B and transmits them to the authentication device 2.

次に、認証装置2の画像受信部23は、カメラ1で撮影された画像を受信する。   Next, the image receiving unit 23 of the authentication device 2 receives an image captured by the camera 1.

次に、人物認証部25は、図示しない記録媒体に格納されている画像であって、先に認証した対象の画像と、受信された画像とを比較し、予め決められた条件を満たすほど近似しない、と判断する。   Next, the person authentication unit 25 compares the received image with the target image that has been stored in a recording medium (not shown) and has been approximated so as to satisfy a predetermined condition. Judged not to.

次に、人物認証部25は、受信された画像の中で、認証対象の画像(AさんとBさんが映っている画像)を取得する。   Next, the person authentication unit 25 acquires an image to be authenticated (an image in which A and B are reflected) among the received images.

次に、コード認証部24は、認証対象の画像から、1または2以上のコードの領域を取得する。   Next, the code authenticating unit 24 acquires one or more code areas from the authentication target image.

次に、人物認証部25は、1番目のコードの領域の画像(例えば、Bさんのコードの画像)から、コード情報「1111547・・・」を取得する。   Next, the person authentication unit 25 acquires code information “1111547...” From the image of the first code area (for example, the image of Mr. B's code).

次に、コード認証部24は、取得したコード情報をキーとして、認証情報管理表を検索する。   Next, the code authentication unit 24 searches the authentication information management table using the acquired code information as a key.

次に、コード認証部24の検索の結果、取得したコード情報が認証情報管理表に存在するので、コード認証部24は、変数「1番目のコードの認証結果」に値「認証許可「1」」を代入する。   Next, since the acquired code information exists in the authentication information management table as a result of the search by the code authentication unit 24, the code authentication unit 24 sets the value “authentication permission“ 1 ”to the variable“ authentication result of the first code ”. Is substituted.

次に、人物認証部25は、検索されたコード情報「1111547・・・」と対になる人物認証情報(12,6,7,3,2,・・・)を、認証情報管理表から取得する。   Next, the person authentication unit 25 acquires person authentication information (12, 6, 7, 3, 2,...) That is paired with the retrieved code information “1111547...” From the authentication information management table. To do.

次に、人物認証部25は、1番目のコードの領域に対応する1番目の人物の領域を取得する。ここでは、1番目のコードの領域を含む人物の領域の画像を取得する。   Next, the person authentication unit 25 acquires a first person area corresponding to the first code area. Here, an image of the person area including the first code area is acquired.

次に、人物認証部25は、1番目の人物の領域の画像から、人物情報(11,5,7,3,3,・・・)を取得する。   Next, the person authentication unit 25 acquires person information (11, 5, 7, 3, 3,...) From the image of the first person area.

次に、人物認証部25は、取得した人物認証情報(12,6,7,3,2,・・・)と、取得した人物情報(11,5,7,3,3,・・・)とを比較し、人物認証情報と人物情報とが、予め決められた条件を満たすほど近似している、と判断する。   Next, the person authentication unit 25 acquires the acquired person authentication information (12, 6, 7, 3, 2,...) And the acquired person information (11, 5, 7, 3, 3,...). , And it is determined that the person authentication information and the person information are close enough to satisfy a predetermined condition.

次に、人物認証部25は、変数「1番目の人物の認証結果」に値「認証許可「1」」を代入する。   Next, the person authentication unit 25 assigns the value “authentication permission“ 1 ”” to the variable “authentication result of the first person”.

次に、人物認証部25は、2番目のコードの領域の画像(例えば、Bさんのコードの画像)から、コード情報「1111115・・・」を取得する。   Next, the person authentication unit 25 acquires code information “11111115...” From the image of the second code area (for example, the image of Mr. B's code).

次に、コード認証部24は、取得したコード情報をキーとして、認証情報管理表を検索する。   Next, the code authentication unit 24 searches the authentication information management table using the acquired code information as a key.

次に、コード認証部24の検索の結果、取得したコード情報が認証情報管理表に存在するので、コード認証部24は、変数「2番目のコードの認証結果」に値「認証許可「1」」を代入する。   Next, as a result of the search by the code authentication unit 24, the acquired code information exists in the authentication information management table. Therefore, the code authentication unit 24 sets the value “authentication permission“ 1 ”to the variable“ authentication result of the second code ”. Is substituted.

次に、人物認証部25は、検索されたコード情報「1111115・・・」と対になる人物認証情報(8,8,7,6,3,・・・)を、認証情報管理表から取得する。   Next, the person authentication unit 25 acquires person authentication information (8, 8, 7, 6, 3,...) That is paired with the retrieved code information “11111115...” From the authentication information management table. To do.

次に、人物認証部25は、2番目のコードの領域に対応する2番目の人物の領域を取得する。ここでは、2番目のコードの領域を含む人物の領域の画像を取得する。   Next, the person authentication unit 25 acquires a second person area corresponding to the second code area. Here, an image of the person area including the second code area is acquired.

次に、人物認証部25は、2番目の人物の領域の画像から、人物情報(8,7,7,7,3,・・・)を取得する。   Next, the person authentication unit 25 acquires person information (8, 7, 7, 7, 3,...) From the image of the second person area.

次に、人物認証部25は、取得した人物認証情報(8,8,7,6,3,・・・)と、取得した人物情報(8,7,7,7,3,・・・)とを比較し、人物認証情報と人物情報とが、予め決められた条件を満たすほど近似している、と判断する。   Next, the person authentication unit 25 acquires the acquired person authentication information (8, 8, 7, 6, 3,...) And the acquired person information (8, 7, 7, 7, 3,...). , And it is determined that the person authentication information and the person information are close enough to satisfy a predetermined condition.

次に、人物認証部25は、変数「2番目の人物の認証結果」に値「認証許可「1」」を代入する。   Next, the person authentication unit 25 assigns the value “authentication permission“ 1 ”” to the variable “authentication result of the second person”.

次に、出力部26は、変数「1番目と2番目のコードの認証結果」の値、変数「1番目と2番目の人物の認証結果」の値を集計した内容の値であり、出力する認証結果を構成する。出力する認証結果は、「認証許可「1」」である。   Next, the output unit 26 outputs the value of the variable “first and second code authentication results” and the value of the variable “first and second person authentication results”, and outputs the values. Configure the authentication result. The authentication result to be output is “authentication permission“ 1 ””.

次に、出力部26は、構成した認証結果「認証許可「1」」を、ドア制御装置に送信する。また、出力部26は、取得された認証対象の画像を、図示しない記録媒体に蓄積する。   Next, the output unit 26 transmits the configured authentication result “authentication permission“ 1 ”” to the door control device. The output unit 26 accumulates the acquired authentication target image in a recording medium (not shown).

次に、ドア制御装置は、認証結果「1」を受け付け、ドアをオープンする。その結果、Aさんはドアの向こう側に移動できる。
(具体例3)
Next, the door control device accepts the authentication result “1” and opens the door. As a result, Mr. A can move beyond the door.
(Specific example 3)

Aさんがコードを持参していない状態で、ドアの前に来た、とする(図8参照)。図8において、Aさんはコードが印刷された名札等を保持していない。   Assume that Mr. A has come in front of the door with no code (see FIG. 8). In FIG. 8, Mr. A does not hold a name tag on which a code is printed.

そして、カメラ1は、Aさんを撮影した画像を取得し、認証装置2に送信する。   And the camera 1 acquires the image which image | photographed Mr. A, and transmits to the authentication apparatus 2. FIG.

次に、認証装置2の画像受信部23は、カメラ1で撮影された画像を受信する。   Next, the image receiving unit 23 of the authentication device 2 receives an image captured by the camera 1.

次に、人物認証部25は、図示しない記録媒体に格納されている画像であって、先に認証した対象の画像と、受信された画像とを比較し、予め決められた条件を満たすほど近似しない、と判断する。   Next, the person authentication unit 25 compares the received image with the target image that has been stored in a recording medium (not shown) and has been approximated so as to satisfy a predetermined condition. Judged not to.

次に、人物認証部25は、受信された画像の中で、認証対象の画像(Aさんの画像)を取得する。   Next, the person authentication unit 25 acquires an image to be authenticated (Mr. A's image) from the received images.

次に、人物認証部25は、取得した認証対象の画像から、Aさんの領域の画像を切り出す。   Next, the person authentication unit 25 cuts out an image of the area of Mr. A from the acquired authentication target image.

次に、コード認証部24は、Aさんの領域の画像から、コードの領域を切り出そうとする。しかし、コード認証部24は、コードの領域を切り出せない。   Next, the code authentication unit 24 tries to cut out the code area from the image of Mr. A's area. However, the code authenticating unit 24 cannot cut out the code area.

そして、コード認証部24は、コード情報を取得できない。   And the code | cord | chord authentication part 24 cannot acquire code | cord | chord information.

次に、コード認証部24は、変数「コードの認証結果」に値「認証不許可(例えば、「−1」)」を代入する。   Next, the code authenticating unit 24 substitutes the value “authentication not permitted (for example,“ −1 ”)” into the variable “code authentication result”.

そして、出力部26は、画像を図示しない記録媒体に蓄積する。   And the output part 26 accumulate | stores an image in the recording medium which is not shown in figure.

次に、出力部26は、出力する認証結果「−1」を構成する。   Next, the output unit 26 configures the authentication result “−1” to be output.

次に、出力部26は、認証結果「−1」を用いて、認証結果である警告のブザーを出力する。なお、出力部26は、「コードが認識できません」といった警告をディスプレイに出力したり、音声出力する等しても良い。
(具体例4)
Next, the output unit 26 outputs a warning buzzer as an authentication result using the authentication result “−1”. Note that the output unit 26 may output a warning such as “code cannot be recognized” to the display, or output the sound.
(Specific example 4)

AさんとCさんとがドアの前に一緒に来た、とする。また、図9に示すように、Aさんの胸には、コードが印刷された名札601が付いている、とする。また、図9に示すように、Cさんは、Bさんのコードが印刷された名札901を、ストラップで首からかけている、とする。なお、名札901は、本来、Bさんが保持しているべきであるが、Cさんが名札901を拾って、首に当該ストラップをかけ、例えば、Aさんの陰に隠れるように、不正に入室しようとしている、とする。   Suppose that Mr. A and Mr. C came together in front of the door. Also, as shown in FIG. 9, it is assumed that a name tag 601 printed with a code is attached to Mr. A's chest. Further, as shown in FIG. 9, it is assumed that Mr. C wears a name tag 901 printed with Mr. B's code from his neck with a strap. The name tag 901 should originally be held by Mr. B, but Mr. C picked up the name tag 901 and put the strap around his neck, for example, illegally entering the room so as to be hidden behind Mr. A. Suppose you are trying.

そして、カメラ1は、AさんとCさんとを撮影した画像を取得し、認証装置2に送信する。   Then, the camera 1 acquires an image obtained by photographing A and C and transmits it to the authentication device 2.

次に、認証装置2の画像受信部23は、カメラ1で撮影された画像を受信する。   Next, the image receiving unit 23 of the authentication device 2 receives an image captured by the camera 1.

次に、人物認証部25は、図示しない記録媒体に格納されている画像であって、先に認証した対象の画像と、受信された画像とを比較し、予め決められた条件を満たすほど近似しない、と判断する。   Next, the person authentication unit 25 compares the received image with the target image that has been stored in a recording medium (not shown) and has been approximated so as to satisfy a predetermined condition. Judged not to.

次に、人物認証部25は、受信された画像の中で、認証対象の画像(AさんとCさんが映っている画像)を取得する。   Next, the person authentication unit 25 acquires an image to be authenticated (an image in which Mr. A and Mr. C are reflected) among the received images.

次に、コード認証部24は、認証対象の画像から、1または2以上のコードの領域を取得する。   Next, the code authenticating unit 24 acquires one or more code areas from the authentication target image.

次に、人物認証部25は、1番目のコードの領域の画像(例えば、Aさんのコードの画像)から、コード情報「1111115・・・」を取得する。   Next, the person authentication unit 25 acquires code information “11111115...” From the image of the first code area (for example, the image of Mr. A's code).

次に、コード認証部24は、取得したコード情報をキーとして、認証情報管理表を検索する。   Next, the code authentication unit 24 searches the authentication information management table using the acquired code information as a key.

次に、コード認証部24の検索の結果、取得したコード情報が認証情報管理表に存在するので、コード認証部24は、変数「1番目のコードの認証結果」に値「認証許可「1」」を代入する。   Next, since the acquired code information exists in the authentication information management table as a result of the search by the code authentication unit 24, the code authentication unit 24 sets the value “authentication permission“ 1 ”to the variable“ authentication result of the first code ”. Is substituted.

次に、人物認証部25は、検索されたコード情報「1111115・・・」と対になる人物認証情報(8,8,7,6,3,・・・)を、認証情報管理表から取得する。   Next, the person authentication unit 25 acquires person authentication information (8, 8, 7, 6, 3,...) That is paired with the retrieved code information “11111115...” From the authentication information management table. To do.

次に、人物認証部25は、1番目のコードの領域に対応する1番目の人物の領域を取得する。ここでは、1番目のコードの領域を含む人物の領域の画像を取得する。   Next, the person authentication unit 25 acquires a first person area corresponding to the first code area. Here, an image of the person area including the first code area is acquired.

次に、人物認証部25は、1番目の人物の領域の画像から、人物情報(8,8,6,7,3,・・・)を取得する。   Next, the person authentication unit 25 acquires person information (8, 8, 6, 7, 3,...) From the image of the first person area.

次に、人物認証部25は、取得した人物認証情報(8,8,7,6,3,・・・)と、取得した人物情報(8,8,6,7,3,・・・)とを比較し、人物認証情報と人物情報とが、予め決められた条件を満たすほど近似している、と判断する。   Next, the person authentication unit 25 acquires the acquired person authentication information (8, 8, 7, 6, 3,...) And the acquired person information (8, 8, 6, 7, 3,...). , And it is determined that the person authentication information and the person information are close enough to satisfy a predetermined condition.

次に、人物認証部25は、変数「1番目の人物の認証結果」に値「認証許可「1」」を代入する。   Next, the person authentication unit 25 assigns the value “authentication permission“ 1 ”” to the variable “authentication result of the first person”.

次に、人物認証部25は、2番目のコードの領域の画像(例えば、Bさんのコードの画像)から、コード情報「1111547・・・」を取得する。   Next, the person authentication unit 25 acquires code information “1111547...” From the image of the second code area (for example, the image of Mr. B's code).

次に、コード認証部24は、取得したコード情報をキーとして、認証情報管理表を検索する。   Next, the code authentication unit 24 searches the authentication information management table using the acquired code information as a key.

次に、コード認証部24の検索の結果、取得したコード情報が認証情報管理表に存在するので、コード認証部24は、変数「2番目のコードの認証結果」に値「認証許可「1」」を代入する。   Next, as a result of the search by the code authentication unit 24, the acquired code information exists in the authentication information management table. Therefore, the code authentication unit 24 sets the value “authentication permission“ 1 ”to the variable“ authentication result of the second code ”. Is substituted.

次に、人物認証部25は、検索されたコード情報「1111547・・・」と対になる人物認証情報(12,6,7,3,2,・・・)を、認証情報管理表から取得する。   Next, the person authentication unit 25 acquires person authentication information (12, 6, 7, 3, 2,...) That is paired with the retrieved code information “1111547...” From the authentication information management table. To do.

次に、人物認証部25は、2番目のコードの領域に対応する2番目の人物の領域を取得する。ここでは、2番目のコードの領域を含む人物の領域の画像を取得する。   Next, the person authentication unit 25 acquires a second person area corresponding to the second code area. Here, an image of the person area including the second code area is acquired.

次に、人物認証部25は、2番目の人物の領域の画像から、人物情報(5,3,15,10,15,・・・)を取得する。   Next, the person authentication unit 25 acquires person information (5, 3, 15, 10, 15,...) From the image of the second person area.

次に、人物認証部25は、取得した人物認証情報(12,6,7,3,2,・・・)と、取得した人物情報(5,3,15,10,15,・・・)とを比較し、人物認証情報と人物情報とが、予め決められた条件を満たすほど近似していない、と判断する。   Next, the person authentication unit 25 acquires the acquired person authentication information (12, 6, 7, 3, 2,...) And the acquired person information (5, 3, 15, 10, 15,...). , And it is determined that the person authentication information and the person information are not close enough to satisfy a predetermined condition.

次に、人物認証部25は、変数「2番目の人物の認証結果」に値「認証不許可「−1」」を代入する。   Next, the person authentication unit 25 substitutes the value “authentication not permitted“ −1 ”” into the variable “authentication result of the second person”.

次に、出力部26は、変数「1番目のコードの認証結果」の値「1」、変数「1番目の人物の認証結果」の値「1」、変数「2番目のコードの認証結果」の値「1」、変数「2番目の人物の認証結果」の値「−1」を用いて、出力する認証結果「−1」を構成する。   Next, the output unit 26 sets the value “1” of the variable “authentication result of the first code”, the value “1” of the variable “authentication result of the first person”, and the variable “authentication result of the second code”. The authentication result “−1” to be output is configured using the value “1” of “1” and the value “−1” of the variable “authentication result of the second person”.

次に、出力部26は、認証結果「−1」を用いて、認証結果である警告のブザーを出力する。なお、出力部26は、「Aさんは認証されましたが、他の方が認証できません。」といった警告をディスプレイに出力したり、音声出力する等しても良い。   Next, the output unit 26 outputs a warning buzzer as an authentication result using the authentication result “−1”. Note that the output unit 26 may output a warning such as “Mr. A has been authenticated but the other cannot be authenticated” to the display, or may be output as a voice.

また、出力部26は、認証対象の画像、または認証対象の画像の前または後の一定時間の画像を図示しない記録媒体に蓄積したり、外部装置に送信したりしても良い。   Further, the output unit 26 may accumulate an image to be authenticated or an image for a certain period of time before or after the image to be authenticated in a recording medium (not shown) or transmit the image to an external device.

以上、本実施の形態によれば、簡易な認証と高度な認証とを組み合わせた認証が可能となる。その結果、本実施の形態によれば、精度の高い認証が可能となる。   As described above, according to the present embodiment, authentication combining simple authentication and advanced authentication is possible. As a result, according to the present embodiment, highly accurate authentication is possible.

また、本実施の形態によれば、簡易なコードによる認証と高度な人物の個体認証とを組み合わせた認証ができることにより、精度の高い認証が可能となる。   In addition, according to the present embodiment, authentication that combines simple code authentication and advanced individual authentication is possible, thereby enabling highly accurate authentication.

また、本実施の形態によれば、コード認証部の認証の後に、画像の中の人物を認証する処理を行うことにより、高速で精度の高い認証が可能となる。   Further, according to the present embodiment, it is possible to perform high-speed and high-accuracy authentication by performing processing for authenticating a person in an image after authentication by the code authenticating unit.

なお、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをCD−ROMなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。なお、本実施の形態における認証装置2を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータがアクセス可能な記録媒体は、コードと人物とを撮影した画像を格納し得る画像格納部を有し、コンピュータを、前記画像の中の前記コードを認証するコード認証部と、前記画像の中の前記人物を認証する人物認証部と、前記コード認証部の認証結果が認証許可を示す情報であり、かつ前記人物認証部の認証結果が認証許可を示す場合に、認証許可を示す情報である認証結果を出力する出力部として機能させるためのプログラムである。   Note that the processing in the present embodiment may be realized by software. Then, this software may be distributed by software download or the like. Further, this software may be recorded and distributed on a recording medium such as a CD-ROM. This also applies to other embodiments in this specification. In addition, the software which implement | achieves the authentication apparatus 2 in this Embodiment is the following programs. That is, this program has an image storage unit capable of storing an image obtained by photographing a code and a person on a computer-accessible recording medium, and the computer authenticates the code in the image. And a person authentication unit that authenticates the person in the image, and an authentication result of the code authentication unit is information indicating authentication permission, and authentication is performed when the authentication result of the person authentication unit indicates authentication permission. It is a program for functioning as an output unit that outputs an authentication result that is information indicating permission.

また、上記プログラムにおいて、前記人物認証部は、前記画像の中の前記人物の個体認識を行うものとして、コンピュータを機能させることは好適である。   In the above program, it is preferable that the person authentication unit causes the computer to function as performing individual recognition of the person in the image.

また、上記プログラムにおいて、前記人物認証部は、前記コード認証部の認証の後に、前記画像の中の前記人物を認証するものとして、コンピュータを機能させることは好適である。   In the above program, it is preferable that the person authenticating unit causes the computer to function as authenticating the person in the image after the code authenticating unit authenticates.

また、上記記録媒体は、コードに関するコード情報、および人物を特定するための情報である人物認証情報を有する1以上の認証情報を格納し得る認証情報格納部をさらに具備し、上記プログラムにおいて、前記コード認証部は、前記画像の中の前記コードと前記認証情報格納部の1以上のコード情報とを用いて、前記コードを認証し、前記人物認証部は、前記コード認証部が認証許可の認証結果を得た際のコード情報に対応する人物情報を前記認証情報格納部から取得し、当該人物情報を用いて、前記画像の中の前記人物を認証する
ものとして、コンピュータを機能させることは好適である。
The recording medium further includes an authentication information storage unit capable of storing code information regarding the code and one or more authentication information having person authentication information that is information for specifying a person. The code authenticating unit authenticates the code using the code in the image and one or more code information in the authentication information storing unit, and the person authenticating unit is authenticated by the code authenticating unit. It is preferable to cause the computer to function as the person information corresponding to the code information obtained when the result is obtained from the authentication information storage unit, and using the person information to authenticate the person in the image. It is.

また、上記プログラムにおいて、前記人物認証部は、人物の顔の1以上の特徴量を有する人物情報を用いて、前記画像の中の前記人物を認証するものとして、コンピュータを機能させることは好適である。   In the above program, it is preferable that the person authentication unit causes the computer to function as authenticating the person in the image using person information having one or more feature amounts of the face of the person. is there.

また、上記プログラムにおいて、前記人物認証部は、前記画像の中に人物が存在することを認識し、人物が存在する場合に、認証許可を示す認証結果を取得するものとして、コンピュータを機能させることは好適である。   In the above program, the person authentication unit recognizes that a person is present in the image and, when there is a person, causes the computer to function as an authentication result indicating authentication permission. Is preferred.

また、上記プログラムにおいて、前記画像は、コードと人物との組を2組以上含み、前記コード認証部は、
前記画像の中の2以上のコードを認証し、前記人物認証部は、前記画像の中の2以上の人物を認証し、
前記出力部は、2以上の人物に対する認証結果を出力するものとして、コンピュータを機能させることは好適である。
In the above program, the image includes two or more pairs of a code and a person, and the code authentication unit includes:
Authenticating two or more codes in the image, the person authenticating unit authenticating two or more persons in the image;
It is preferable that the output unit outputs a result of authentication for two or more persons and causes the computer to function.

また、上記プログラムにおいて、前記出力部は、前記コード認証部が認証許可の認証結果を取得し、かつ前記人物認証部が認証不許可の認証結果を取得した場合、人物認証できないことを示す認証結果を出力するものとして、コンピュータを機能させることは好適である。   In the above program, the output unit is an authentication result indicating that person authentication cannot be performed when the code authentication unit acquires an authentication permission authentication result and the person authentication unit acquires an authentication disapproval authentication result. It is preferable to cause the computer to function as an output.

また、上記プログラムにおいて、前記出力部は、前記コード認証部が認証許可の認証結果を取得した場合、前記画像を出力するものとして、コンピュータを機能させることは好適である。   In the above program, it is preferable that the output unit causes the computer to function as outputting the image when the code authentication unit acquires an authentication permission authentication result.

また、上記プログラムにおいて、前記コードは、色の配列を識別情報として有する二次元コードであるものとして、コンピュータを機能させることは好適である。   In the above program, it is preferable that the computer function as the code is a two-dimensional code having a color arrangement as identification information.

また、図10は、本明細書で述べたプログラムを実行して、上述した種々の実施の形態の認証装置2等を実現するコンピュータの外観を示す。上述の実施の形態は、コンピュータハードウェア及びその上で実行されるコンピュータプログラムで実現され得る。図10は、このコンピュータシステム300の概観図であり、図11は、システム300のブロック図である。   FIG. 10 shows the external appearance of a computer that executes the program described in this specification to realize the authentication device 2 and the like of the various embodiments described above. The above-described embodiments can be realized by computer hardware and a computer program executed thereon. FIG. 10 is an overview diagram of the computer system 300, and FIG. 11 is a block diagram of the system 300.

図10において、コンピュータシステム300は、CD−ROMドライブを含むコンピュータ301と、キーボード302と、マウス303と、モニタ304とを含む。   In FIG. 10, a computer system 300 includes a computer 301 including a CD-ROM drive, a keyboard 302, a mouse 303, and a monitor 304.

図11において、コンピュータ301は、CD−ROMドライブ3012に加えて、MPU3013と、MPU3013、CD−ROMドライブ3012に接続されたバス3014と、ブートアッププログラム等のプログラムを記憶するためのROM3015と、MPU3013に接続され、アプリケーションプログラムの命令を一時的に記憶するとともに一時記憶空間を提供するためのRAM3016と、アプリケーションプログラム、システムプログラム、及びデータを記憶するためのハードディスク3017とを含む。ここでは、図示しないが、コンピュータ301は、さらに、LANへの接続を提供するネットワークカードを含んでも良い。   11, in addition to the CD-ROM drive 3012, the computer 301 includes an MPU 3013, a bus 3014 connected to the MPU 3013 and the CD-ROM drive 3012, a ROM 3015 for storing a program such as a bootup program, and an MPU 3013. And a RAM 3016 for temporarily storing instructions of the application program and providing a temporary storage space, and a hard disk 3017 for storing the application program, the system program, and data. Although not shown here, the computer 301 may further include a network card that provides connection to a LAN.

コンピュータシステム300に、上述した実施の形態の認証装置2等の機能を実行させるプログラムは、CD−ROM3101に記憶されて、CD−ROMドライブ3012に挿入され、さらにハードディスク3017に転送されても良い。これに代えて、プログラムは、図示しないネットワークを介してコンピュータ301に送信され、ハードディスク3017に記憶されても良い。プログラムは実行の際にRAM3016にロードされる。プログラムは、CD−ROM3101またはネットワークから直接、ロードされても良い。   A program that causes the computer system 300 to execute the functions of the authentication device 2 and the like of the above-described embodiment may be stored in the CD-ROM 3101, inserted into the CD-ROM drive 3012, and further transferred to the hard disk 3017. Alternatively, the program may be transmitted to the computer 301 via a network (not shown) and stored in the hard disk 3017. The program is loaded into the RAM 3016 at the time of execution. The program may be loaded directly from the CD-ROM 3101 or the network.

プログラムは、コンピュータ301に、上述した実施の形態の認証装置2等の機能を実行させるオペレーティングシステム(OS)、またはサードパーティープログラム等は、必ずしも含まなくても良い。プログラムは、制御された態様で適切な機能(モジュール)を呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいれば良い。コンピュータシステム300がどのように動作するかは周知であり、詳細な説明は省略する。   The program does not necessarily include an operating system (OS), a third-party program, or the like that causes the computer 301 to execute the functions of the authentication device 2 according to the above-described embodiment. The program only needs to include an instruction portion that calls an appropriate function (module) in a controlled manner and obtains a desired result. How the computer system 300 operates is well known and will not be described in detail.

なお、上記プログラムにおいて、情報を送信するステップや、情報を受信するステップなどでは、ハードウェアによって行われる処理、例えば、送信するステップにおけるモデムやインターフェースカードなどで行われる処理(ハードウェアでしか行われない処理)は含まれない。   In the above program, in the step of transmitting information, the step of receiving information, etc., processing performed by hardware, for example, processing performed by a modem or an interface card in the transmitting step (only performed by hardware). Not included).

また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。   Further, the computer that executes the program may be singular or plural. That is, centralized processing may be performed, or distributed processing may be performed.

また、上記各実施の形態において、一の装置に存在する2以上の通信手段は、物理的に一の媒体で実現されても良いことは言うまでもない。   Further, in each of the above embodiments, it goes without saying that two or more communication units existing in one apparatus may be physically realized by one medium.

また、上記各実施の形態において、各処理は、単一の装置によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。   In each of the above embodiments, each process may be realized by centralized processing by a single device, or may be realized by distributed processing by a plurality of devices.

本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。   The present invention is not limited to the above-described embodiments, and various modifications are possible, and it goes without saying that these are also included in the scope of the present invention.

以上のように、本発明にかかる認証装置は、簡易な認証と高度な認証とを組み合わせた認証により、高速かつ精度の高い認証ができる、という効果を有し、入出門システム等として有用である。   As described above, the authentication device according to the present invention has an effect that high-speed and high-accuracy authentication can be performed by authentication combining simple authentication and advanced authentication, and is useful as an entry / exit system or the like. .

1 カメラ
2 認証装置
3 処理装置
21 認証情報格納部
22 画像格納部
23 画像受信部
24 コード認証部
25 人物認証部
26 出力部
31 認証結果受信部
32 処理部
DESCRIPTION OF SYMBOLS 1 Camera 2 Authentication apparatus 3 Processing apparatus 21 Authentication information storage part 22 Image storage part 23 Image receiving part 24 Code authentication part 25 Person authentication part 26 Output part 31 Authentication result receiving part 32 Processing part

Claims (12)

コードと人物との組を2組以上含む画像であり、撮影した画像を格納し得る画像格納部と、
前記画像の中の2以上のコードの領域を取得し、当該2以上のコードを認証するコード認証部と、
前記画像の中の2以上の人物の領域を取得し、当該2以上の各人物を認証する人物認証部と、
前記コード認証部の認証結果が認証許可を示、かつ前記人物認証部の認証結果が認証許可を示す場合に、認証許可を示す情報である認証結果を出力する出力部とを具備し、
前記人物認証部は前記2以上の各コードの領域に対応する人物の領域を取得し、または前記コード認証部は前記2以上の人物の領域に対応するコードの領域を取得し、
前記コード認証部および前記人物認証部は、それぞれ対応するコードの領域のコードと人物の領域の人物を認証し、
2以上の各人物に対して、それぞれ対応するコードの領域のコードの認証結果と人物の領域の人物の認証結果とが共に認証許可である場合に、認証許可を示す認証結果が取得され、
前記出力部は2以上の人物に対する認証結果を出力する認証装置。
An image storage unit that is an image including two or more pairs of a code and a person, and that can store a captured image;
A code authenticating unit for acquiring an area of two or more codes in the image and authenticating each of the two or more codes;
Acquiring a region of two or more persons in the image, and authenticating each of the two or more persons ;
Wherein indicates the authentication result is authentication permission code authentication unit, and to indicate the authentication result is authentication permission of the person authentication unit, and an output unit for outputting the authentication result is information indicating the authentication authorization,
The person authentication unit obtains a person area corresponding to each of the two or more code areas; or the code authentication part obtains a code area corresponding to the two or more person areas;
The code authenticating unit and the person authenticating unit authenticate the code in the corresponding code area and the person in the person area,
For each of two or more persons, if the authentication result of the code in the corresponding code area and the authentication result of the person in the person area are both authentication permission, an authentication result indicating authentication permission is acquired,
The output unit, the authentication device which outputs an authentication result for more than one person.
前記2以上の各人物ごとに、
前記コード認証部は、前記画像からコードの領域を取得し、当該コードを認証し、
前記人物認証部は、前記画像から当該コードの領域に対応する人物の領域を取得し、当該人物を認証する請求項1記載の認証装置。
For each of the two or more persons,
The code authentication unit acquires a code area from the image, authenticates the code,
The authentication apparatus according to claim 1, wherein the person authentication unit acquires a person area corresponding to the code area from the image and authenticates the person.
前記人物認証部は、
前記画像の中の前記人物の個体認識を行う請求項1または請求項2記載の認証装置。
The person authentication unit
The authentication apparatus according to claim 1, wherein individual recognition of the person in the image is performed.
前記人物認証部は、
前記コード認証部の認証の後に、前記画像の中の前記人物を認証する請求項3記載の認証装置。
The person authentication unit
The authentication apparatus according to claim 3, wherein the person in the image is authenticated after authentication by the code authentication unit.
コードに関するコード情報、および人物を特定するための情報である人物認証情報を有する1以上の認証情報を格納し得る認証情報格納部をさらに具備し、
前記コード認証部は、
前記画像の中の前記コードと前記認証情報格納部の1以上のコード情報とを用いて、前記コードを認証し、
前記人物認証部は、
前記コード認証部が認証許可の認証結果を得た際のコード情報に対応する人物情報を前記認証情報格納部から取得し、当該人物情報を用いて、前記画像の中の前記人物を認証する請求項4記載の認証装置。
An authentication information storage unit capable of storing one or more pieces of authentication information including code information about the code and person authentication information that is information for specifying a person;
The code authentication unit
Using the code in the image and one or more pieces of code information in the authentication information storage unit, the code is authenticated,
The person authentication unit
Claims: Person information corresponding to code information obtained when the code authentication unit obtains an authentication permission authentication result is acquired from the authentication information storage unit, and the person in the image is authenticated using the person information. Item 5. The authentication device according to Item 4.
前記人物認証部は、
人物の顔の1以上の特徴量を有する人物情報を用いて、前記画像の中の前記人物を認証する請求項1から請求項5いずれか一項に記載の認証装置。
The person authentication unit
The authentication apparatus according to any one of claims 1 to 5, wherein the person in the image is authenticated using person information having one or more feature amounts of a person's face.
前記人物認証部は、
前記画像の中に人物が存在することを認識し、人物が存在する場合に、認証許可を示す認証結果を取得する請求項1記載の認証装置。
The person authentication unit
The authentication apparatus according to claim 1, wherein the authentication apparatus recognizes that a person exists in the image and acquires an authentication result indicating authentication permission when the person exists.
前記出力部は、
前記コード認証部が認証許可の認証結果を取得し、かつ前記人物認証部が認証不許可の認証結果を取得した場合、人物認証できないことを示す認証結果を出力する請求項1から請求項7いずれか一項に記載の認証装置。
The output unit is
8. Any one of claims 1 to 7, wherein when the code authentication unit acquires an authentication permission authentication result and the person authentication unit acquires an authentication disapproval authentication result, an authentication result indicating that person authentication cannot be performed is output. The authentication device according to claim 1.
前記出力部は、
前記コード認証部が認証不許可の認証結果を取得した場合、前記画像を出力する請求項1から請求項8いずれか一項に記載の認証装置。
The output unit is
The authentication apparatus according to any one of claims 1 to 8, wherein the image is output when the code authentication unit acquires an authentication non-permitted authentication result.
前記コードは、
色の配列を識別情報として有する二次元コードである請求項1から請求項9いずれか一項に記載の認証装置。
The code is
The authentication apparatus according to any one of claims 1 to 9, which is a two-dimensional code having a color array as identification information.
コードと人物との組を2組以上含む画像であり、撮影した画像を格納し得る画像格納部、コード認証部、人物認証部、および出力部により実現され得る認証方法であって、
前記コード認証部が、前記画像の中の2以上のコードの領域を取得し、当該2以上のコードを認証するコード認証ステップと、
前記人物認証部が、前記画像の中の2以上の人物の領域を取得し、当該2以上の各人物を認証する人物認証ステップと、
前記出力部が、前記コード認証ステップにおける認証結果が認証許可を示、かつ前記人物認証ステップにおける認証結果が認証許可を示す場合に、認証許可を示す情報である認証結果を出力する出力ステップとを具備し、
前記人物認証部は前記2以上の各コードの領域に対応する人物の領域を取得し、または前記コード認証部は前記2以上の人物の領域に対応するコードの領域を取得し、
前記コード認証部および前記人物認証部は、それぞれ対応するコードの領域のコードと人物の領域の人物を認証し、
2以上の各人物に対して、それぞれ対応するコードの領域のコードの認証結果と人物の領域の人物の認証結果とが共に認証許可である場合に、認証許可を示す認証結果が取得され、
前記出力ステップにおいて、2以上の人物に対する認証結果を出力する認証方法。
An image including two or more pairs of a code and a person, and an authentication method that can be realized by an image storage unit that can store a captured image, a code authentication unit, a person authentication unit, and an output unit,
A code authenticating step in which the code authenticating unit acquires a region of two or more codes in the image and authenticates each of the two or more codes;
A person authentication step in which the person authentication unit acquires areas of two or more persons in the image and authenticates each of the two or more persons ;
Said output section, and an output step of an authentication result in the code authentication step indicates authentication permission, and when the authentication result of the person authentication step indicates authentication permission, and outputs the a is the authentication result information indicating the authentication permission Comprising
The person authentication unit obtains a person area corresponding to each of the two or more code areas; or the code authentication part obtains a code area corresponding to the two or more person areas;
The code authenticating unit and the person authenticating unit authenticate the code in the corresponding code area and the person in the person area,
For each of two or more persons, if the authentication result of the code in the corresponding code area and the authentication result of the person in the person area are both authentication permission, an authentication result indicating authentication permission is acquired,
An authentication method for outputting authentication results for two or more persons in the output step.
コードと人物との組を2組以上含む画像であり、撮影した画像を格納し得る画像格納部にアクセス可能なコンピュータを、
前記画像の中の2以上のコードの領域を取得し、当該2以上のコードを認証するコード認証部と、
前記画像の中の2以上の人物の領域を取得し、当該2以上の各人物を認証する人物認証部と、
前記コード認証部の認証結果が認証許可を示、かつ前記人物認証部の認証結果が認証許可を示す場合に、認証許可を示す情報である認証結果を出力する出力部として機能させるためのプログラムであって、
前記人物認証部は前記2以上の各コードの領域に対応する人物の領域を取得し、または前記コード認証部は前記2以上の人物の領域に対応するコードの領域を取得し、
前記コード認証部および前記人物認証部は、それぞれ対応するコードの領域のコードと人物の領域の人物を認証し、
2以上の各人物に対して、それぞれ対応するコードの領域のコードの認証結果と人物の領域の人物の認証結果とが共に認証許可である場合に、認証許可を示す認証結果が取得され、
前記出力部を、2以上の人物に対する認証結果を出力するものとしてコンピュータを機能させるためのプログラム。
A computer that is an image including two or more pairs of a code and a person, and that can access an image storage unit that can store a captured image.
A code authenticating unit for acquiring an area of two or more codes in the image and authenticating each of the two or more codes;
Acquiring a region of two or more persons in the image, and authenticating each of the two or more persons ;
Shows the authentication result is authentication permission of the code authenticating unit, and when said authentication result of the person authentication unit indicates authentication permission, program for functioning as an output unit for outputting the authentication result is information indicating the authentication permission Because
The person authentication unit obtains a person area corresponding to each of the two or more code areas; or the code authentication part obtains a code area corresponding to the two or more person areas;
The code authenticating unit and the person authenticating unit authenticate the code in the corresponding code area and the person in the person area,
For each of two or more persons, if the authentication result of the code in the corresponding code area and the authentication result of the person in the person area are both authentication permission, an authentication result indicating authentication permission is acquired,
A program for causing a computer to function as the output unit outputting authentication results for two or more persons.
JP2014141064A 2014-07-09 2014-07-09 Authentication apparatus, authentication method, and program Active JP6438693B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014141064A JP6438693B2 (en) 2014-07-09 2014-07-09 Authentication apparatus, authentication method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014141064A JP6438693B2 (en) 2014-07-09 2014-07-09 Authentication apparatus, authentication method, and program

Publications (2)

Publication Number Publication Date
JP2016018406A JP2016018406A (en) 2016-02-01
JP6438693B2 true JP6438693B2 (en) 2018-12-19

Family

ID=55233583

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014141064A Active JP6438693B2 (en) 2014-07-09 2014-07-09 Authentication apparatus, authentication method, and program

Country Status (1)

Country Link
JP (1) JP6438693B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113656843B (en) * 2021-08-18 2022-08-12 北京百度网讯科技有限公司 Information verification method, device, equipment and medium
WO2024053045A1 (en) * 2022-09-08 2024-03-14 日本電気株式会社 Information processing system, information processing method, and recording medium

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3803984B2 (en) * 1996-12-10 2006-08-02 沖電気工業株式会社 Personal identification method and contact lens
JP2002063142A (en) * 2000-08-18 2002-02-28 Jgs:Kk Authentication system, authentication terminal, authentication server and authentication method
JP4553526B2 (en) * 2001-08-15 2010-09-29 セコム株式会社 Personal verification device
JP2006054510A (en) * 2004-08-09 2006-02-23 Brother Ind Ltd System and program for supporting object search
JP5001195B2 (en) * 2008-02-20 2012-08-15 アズビル株式会社 Entrance management system
JP5606382B2 (en) * 2011-04-20 2014-10-15 株式会社トーショー Personal authentication system

Also Published As

Publication number Publication date
JP2016018406A (en) 2016-02-01

Similar Documents

Publication Publication Date Title
JP7040952B2 (en) Face recognition method and equipment
JP7040457B2 (en) Image processing device, image processing method, face recognition system and program
CN105612533B (en) Living body detection method, living body detection system, and computer program product
JP6483485B2 (en) Person authentication method
US9245172B2 (en) Authentication apparatus, authentication method, and non-transitory computer readable medium
WO2016172923A1 (en) Video detection method, video detection system, and computer program product
JP6969663B2 (en) Devices and methods for identifying the user&#39;s imaging device
KR102458241B1 (en) Method and device to recognize user
KR101724971B1 (en) System for recognizing face using wide angle camera and method for recognizing face thereof
US11756338B2 (en) Authentication device, authentication method, and recording medium
CN108959884B (en) Human authentication verification device and method
CA3166863A1 (en) System and method for disentangling features specific to users, actions and devices recorded in motion sensor data
JP5423740B2 (en) Video providing apparatus, video using apparatus, video providing system, video providing method, and computer program
CN110633677B (en) Face recognition method and device
JP6438693B2 (en) Authentication apparatus, authentication method, and program
JP2006293720A (en) Face detection apparatus, face detection method, and face detection program
JP7020567B2 (en) Information processing systems, information processing equipment, information processing methods, and programs
JP7298729B2 (en) Information processing system, information processing device, information processing method, and program
Grabovskyi et al. Facial recognition with using of the microsoft face API Service
JP2002251614A (en) Device, system, method, and program for collating organism
JP7248348B2 (en) Face authentication device, face authentication method, and program
JP2009110447A (en) Data access control unit
JP2013069187A (en) Image processing system, image processing method, server and program
US20230222193A1 (en) Information processing device, permission determination method, and program
KR102530141B1 (en) Method and apparatus for face authentication using face matching rate calculation based on artificial intelligence

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170213

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180205

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180927

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20181005

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181030

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181119

R150 Certificate of patent or registration of utility model

Ref document number: 6438693

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250