JP2019194875A - Collation system - Google Patents
Collation system Download PDFInfo
- Publication number
- JP2019194875A JP2019194875A JP2019108783A JP2019108783A JP2019194875A JP 2019194875 A JP2019194875 A JP 2019194875A JP 2019108783 A JP2019108783 A JP 2019108783A JP 2019108783 A JP2019108783 A JP 2019108783A JP 2019194875 A JP2019194875 A JP 2019194875A
- Authority
- JP
- Japan
- Prior art keywords
- person
- collation
- gate
- captured image
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 claims abstract description 33
- 238000000034 method Methods 0.000 claims description 92
- 238000012795 verification Methods 0.000 claims description 31
- 239000000284 extract Substances 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 52
- 238000003384 imaging method Methods 0.000 description 57
- 238000000605 extraction Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 5
- 238000013500 data storage Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Lock And Its Accessories (AREA)
- Devices For Checking Fares Or Tickets At Control Points (AREA)
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Collating Specific Patterns (AREA)
- Image Analysis (AREA)
Abstract
Description
本発明は、照合システムにかかり、特に、ゲートを通過しようとする対象を照合する照合システムに関する。 The present invention relates to a collation system, and more particularly to a collation system that collates an object about to pass through a gate.
オフィスやイベント会場などの特定場所に入退場する人物を制限したり管理する手段として、通過しようとする人物が予め登録された人物か否かを照合する照合システムが用いられる。特に、近年では、人物の顔認証技術の発達により、ゲートに設置したカメラで撮影した人物の顔画像から顔認証を行うウォークスルー顔認証システムが利用されている。 As a means for restricting and managing the persons who enter and leave a specific place such as an office or an event venue, a collation system that collates whether or not the person to be passed is a person registered in advance is used. In particular, in recent years, with the development of human face authentication technology, a walk-through face authentication system that performs face authentication from a human face image taken by a camera installed at a gate is used.
ここで、ウォークスルー顔認証システムにおいては、複数のゲートが隣接し、各ゲートにそれぞれ向かう人物が通行するレーンが隣接している場合がある。この場合、あるゲートのレーンを通行する人物を撮影した画像に、隣接するレーンで隣接するゲートに向かう人物も映ってしまう場合がある。すると、隣接するレーンを通行する人物を、自レーンを通行する人物と誤認識してしまい、自レーンの先にある自ゲートを通行する人物の照合の妨げとなる場合がある。このため、複数のゲートが設置された状況においては、各ゲートに向かう人物の誤認識を抑制することが求められる。 Here, in the walk-through face authentication system, there are cases where a plurality of gates are adjacent to each other and lanes through which a person heading to each gate passes are adjacent. In this case, a person heading for an adjacent gate in an adjacent lane may be reflected in an image of a person passing through a lane of a certain gate. Then, a person passing through an adjacent lane may be misrecognized as a person passing through the own lane, which may hinder verification of a person passing through the own gate ahead of the own lane. For this reason, in the situation where a plurality of gates are installed, it is required to suppress erroneous recognition of a person heading to each gate.
また、ウォークスルー顔認証システムに関連する技術として、特許文献1に記載の技術がある。特許文献1では、人物がゲートから遠くにいる時点で認証が済んでしまい、かかる人物がゲートに到達する前にゲートが開放されてしまう、という問題を掲げている。そして、かかる問題を解決するために、特許文献1では、撮影した人物の顔画像と登録顔画像との照合を行い、照合した人物の入力画像上の大きさに基づいて、かかる人物のゲートへの接近を検出している。 Moreover, there exists a technique of patent document 1 as a technique relevant to a walk-through face authentication system. Japanese Patent Application Laid-Open No. 2004-151867 raises a problem that authentication is completed when a person is far from the gate, and the gate is opened before the person reaches the gate. And in order to solve such a problem, in Patent Document 1, the face image of the photographed person and the registered face image are collated, and based on the size of the collated person on the input image, to the person's gate. The approach of is detected.
しかしながら、特許文献1では、入力画像に映し出されている全ての人物に対して照合処理を行っており、その後、照合に成功した人物のゲートへの接近を検出している。従って、情報処理装置に常に照合処理の処理負荷がかかる、という問題が生じる。 However, in Patent Document 1, collation processing is performed on all the persons displayed in the input image, and then the approach of the person who succeeds in collation is detected. Therefore, there arises a problem that the processing load of the collation process is always applied to the information processing apparatus.
また、上述した各ゲートにそれぞれ向かう人物の誤認識という問題や、情報処理装置に常に照合処理の処理負荷がかかるという問題は、ゲートを通過する対象が人物である場合に限らず、いかなる対象の照合を行う場合にも生じうる。 In addition, the above-described problem of misrecognition of a person heading to each gate and the problem that the information processing device is constantly subjected to the processing load of the collation process are not limited to the case where the object passing through the gate is a person, It can also occur when collating.
このため、本発明の目的は、上述した課題である、ゲートを通過しようとする対象を誤認識してしまうという問題と、情報処理装置に常に処理負荷がかかるという問題と、を解決することができる照合システムを提供することにある。 For this reason, the object of the present invention is to solve the above-mentioned problems of misrecognizing an object to be passed through a gate and the problem that a processing load is always applied to the information processing apparatus. It is to provide a collation system that can.
本発明の一形態である照合システムは、
ゲートに対する通過前側領域の撮影画像を取得する撮像手段と、
予め登録された対象と、前記撮影画像内の対象と、の照合処理を行う照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する判定手段と、
を備え、
前記照合手段は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
という構成をとる。
The collation system which is one form of the present invention,
Imaging means for acquiring a photographed image of the pre-passage area with respect to the gate;
Collating means for performing collation processing between the pre-registered object and the object in the captured image;
Based on the result of the collation process, a determination unit that determines whether the object can pass through the gate;
With
The collation means starts the collation process based on a condition for the target located in the region set for each region of the captured image.
The configuration is as follows.
また、本発明の一形態である情報処理装置は、
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行う照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する判定手段と、
を備え、
前記照合手段は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
という構成をとる。
In addition, an information processing apparatus which is one embodiment of the present invention
Collating means for performing collation processing between the target in the captured image of the pre-passage area with respect to the gate and the target registered in advance;
Based on the result of the collation process, a determination unit that determines whether the object can pass through the gate;
With
The collation means starts the collation process based on a condition for the target located in the region set for each region of the captured image.
The configuration is as follows.
また、本発明の一形態であるプログラムは、
情報処理装置に、
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行う照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する判定手段と、
を実現させるためのプログラムであり、
前記照合手段は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
という構成をとる。
In addition, a program which is one embodiment of the present invention is
In the information processing device,
Collating means for performing collation processing between the target in the captured image of the pre-passage area with respect to the gate and the target registered in advance;
Based on the result of the collation process, a determination unit that determines whether the object can pass through the gate;
Is a program for realizing
The collation means starts the collation process based on a condition for the target located in the region set for each region of the captured image.
The configuration is as follows.
また、本発明の一形態である照合方法は、
情報処理装置が、
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行い、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する方法であり、
前記情報処理装置は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
という構成をとる。
Moreover, the collation method which is one form of this invention is the following.
Information processing device
Perform a collation process between the target in the captured image of the pre-passage area with respect to the gate and the target registered in advance.
It is a method for determining whether or not the object can pass through the gate based on the result of the matching process,
The information processing apparatus starts the matching process based on a condition for the target located in the region set for each region of the captured image.
The configuration is as follows.
本発明は、以上のように構成されることにより、ゲートを通過しようとする対象の誤認識を抑制することができると共に、不要な照合処理を抑制して情報処理装置の処理負荷を低減することができる。 By being configured as described above, the present invention can suppress misrecognition of an object that attempts to pass through a gate, and suppress unnecessary verification processing to reduce the processing load on the information processing apparatus. Can do.
<実施形態1>
本発明の第1の実施形態を、図1乃至図7を参照して説明する。図1は、顔認証システムの使用状況を示す図である。図2は、顔認証システムの構成を示す図である。図3乃至図7は、顔認証システムの処理動作を説明するための図である。
<Embodiment 1>
A first embodiment of the present invention will be described with reference to FIGS. FIG. 1 is a diagram illustrating a usage state of the face authentication system. FIG. 2 is a diagram illustrating the configuration of the face authentication system. 3 to 7 are diagrams for explaining the processing operation of the face authentication system.
[全体構成]
本発明における顔認証システム10(照合システム)は、オフィスやイベント会場などの特定場所において、人物(対象)の入退場を制限したり管理するために用いられるシステムである。例えば、顔認証システム10を構成する撮像装置は、人物の入退場の際に開閉されるゲート毎に、当該ゲートの配置箇所付近にそれぞれ設置されるものである。
[overall structure]
The face authentication system 10 (collation system) according to the present invention is a system used to limit or manage entry / exit of a person (target) in a specific place such as an office or an event venue. For example, the imaging device constituting the
図1に示す例では、3つのゲートG1,G2,G3が並列に隣接して配置されており、図1の右側から各ゲートG1,G2,G3に向かって、矢印に示す方向に人物が通行するよう構成されている。このため、各ゲートG1,G2,G3に対する図1の右側領域は、人物がゲートを通過する前側の領域(通過前側領域)となっている。そして、各ゲートG1,G2,G3の通過前側領域には、当該各ゲートG1,G2,G3を通過しようとする人物が並んで通行する各レーンR1,R2,R3が、各ゲートG1,G2,G3にそれぞれ対応して並列に位置している。なお、各レーンR1,R2,R3は、何らかの部材で仕切られていてもよく、仕切られていなくてもよい。 In the example shown in FIG. 1, three gates G1, G2, G3 are arranged adjacent to each other in parallel, and a person passes in the direction indicated by the arrow from the right side of FIG. 1 toward each gate G1, G2, G3. It is configured to For this reason, the right area of FIG. 1 with respect to each gate G1, G2, G3 is a front area (pre-passage area) where a person passes through the gate. In the pre-passage region of each gate G1, G2, G3, each lane R1, R2, R3 through which a person who wants to pass through each gate G1, G2, G3 passes side by side has each gate G1, G2, Corresponding to G3, they are located in parallel. Each lane R1, R2, R3 may be partitioned by some member or may not be partitioned.
図1に示す状況において、本実施形態における顔認証システム10を構成する撮像装置C1,C2,C3は、対応する各ゲートG1,G2,G3付近であり、各ゲートG1,G2,G3に向かう人物から見て右側に設置されている。但し、撮像装置の設置位置は、図1に示す位置に限定されず、ゲートに向かって左側やゲートの上方など、いかなる位置に設置されていてもよい。なお、顔認証システム10は、各撮像装置C1,C2,C3の近辺に、表示装置も備えている。
In the situation shown in FIG. 1, the imaging devices C1, C2, and C3 constituting the
そして、顔認証システム10は、例えば、ゲートG1においては、装備している撮像装置C1にてゲートG1に向かう人物の画像を撮影する。そして、撮影画像に映る人物の顔画像から、かかる人物が予め登録された人物であるか否かを照合し、照合が成功すると、人物が通過可能なようゲートG1を開く、という処理を行う。以下、顔認証システム10の構成について詳述する。なお、以下では、ゲートG1に対応して設置された顔認証システム10について説明するが、他のゲートG2,G3に対応して設置された顔認証システムも同様の構成である。
Then, for example, in the gate G1, the
[顔認証システムの構成]
本実施形態における顔認証システム10は、撮像装置C1(カメラ)及び表示装置D1(ディスプレイ)と一体的に構成された演算装置及び記憶装置を有する情報処理装置である。逆に言うと、撮像装置C1に、顔認証処理を行う演算装置及び記憶装置を有する情報処理装置と表示装置D1が搭載されている。但し、顔認証システム10は、必ずしも撮像装置C1や表示装置D1と一体的に構成されていることに限定されない。例えば、撮像装置C1と表示装置D1と撮影画像を処理する情報処理装置とが別々の装置にて構成されており、別々の場所に設置されていてもよい。
[Face recognition system configuration]
The
具体的に、顔認証システム10は、図2に示すように、撮像装置C1及び表示装置D1を備えると共に、演算装置がプログラムを実行することで構築された対象抽出部11と、条件判定部12と、照合部13と、ゲート制御部14と、を備えている。また、顔認証システム10は、記憶装置に構築された、照合条件記憶部15と、照合データ記憶部16と、を備えている。
Specifically, as shown in FIG. 2, the
上記撮像装置C1(撮像手段)は、ゲートG1に対する通過前側領域、つまり、対応するレーンR1のゲートG1前領域の撮影画像を、所定のフレームレートで取得するカメラ及びカメラ制御部を備えたものである。そして、撮像装置C1は、例えば図3に示すように、符号C1a線で挟まれた範囲が撮影領域となっている。このとき、撮影領域のうち符号C1b線で挟まれた水平方向における中央領域に、撮像装置C1が設置されたゲートG1に対応するレーンR1(自レーン)を通行する人物P10が位置するよう、撮像装置C1の撮影領域が設定されている。なお、撮影画像は、撮像装置C1に対する遠近方向の予め設定された距離の範囲、例えば、図3に示す符号L1線から符号L2線の間の距離で、概ね焦点が合うよう設定されている。 The imaging device C1 (imaging means) includes a camera and a camera control unit that acquire a photographed image of a pre-passage area with respect to the gate G1, that is, a captured image of the corresponding area in front of the gate G1 of the lane R1 at a predetermined frame rate. is there. For example, as illustrated in FIG. 3, the imaging device C <b> 1 has a shooting area in a range sandwiched by the C <b> 1 a line. At this time, the imaging is performed so that the person P10 who passes through the lane R1 (own lane) corresponding to the gate G1 where the imaging device C1 is located is located in the central area in the horizontal direction sandwiched by the line C1b in the imaging area. The imaging area of the device C1 is set. Note that the captured image is set so as to be substantially in focus within a predetermined distance range in the perspective direction with respect to the imaging device C1, for example, a distance between the line L1 and the line L2 shown in FIG.
上述したように撮像装置C1の撮影領域が設定されていることにより、撮影領域のうち、符号C1a線と符号C1b線とに挟まれた領域である上記中央領域に対して水平方向における端領域には、図3及び図4に示す状況では、隣接するゲートG2に対応するレーンR2を通行する人物P20が映る場合が生じる。また、端領域には、図5及び図6に示す状況では、撮像装置C1が設置された自ゲートG1に対応する自レーンR1に位置する人物P12が映る場合もある。本発明の顔認証システム10は、このような状況が生じた場合であっても、以下に説明するように、自ゲートG1を通過しようとする人物P12を適切に認識してゲート通過の可否を判定可能とし、さらに、処理負荷を低減するよう構成されている。
As described above, the imaging region of the imaging device C1 is set, so that, in the imaging region, in the end region in the horizontal direction with respect to the central region that is sandwiched between the code C1a line and the code C1b line. In the situation shown in FIG. 3 and FIG. 4, a person P20 who passes through the lane R2 corresponding to the adjacent gate G2 may appear. Further, in the situation shown in FIGS. 5 and 6, the person P12 located in the own lane R1 corresponding to the own gate G1 where the imaging device C1 is installed may be displayed in the end region. Even when such a situation occurs, the
上記対象抽出部11(対象情報検出手段)は、撮像装置C1から撮影画像を取得し、照合処理を開始するか否かを判定するために用いる判定情報(対象情報)を、例えば以下のようにして検出する。まず、撮影画像内から処理対象となる人物の顔領域を抽出する。人物の顔領域の抽出は、例えば、動く人物の全体像に対する位置や色などから判定して行う。そして、対象抽出部11は、判定情報としての人物の特徴を、顔領域から検出する。本実施形態では、判定情報としての特徴は、人物の両目の間の距離(目間距離)であり、図4や図6に示すように、符号d10,d20,d12のように検出する。但し、目間距離の検出方法は上述した方法に限定されず、いかなる方法で検出してもよい。また、後述するように、判定情報は人物の特徴を表す他の情報であってもよく、いかなる方法で検出してもよい。
The target extraction unit 11 (target information detection means) obtains a captured image from the imaging device C1 and uses determination information (target information) used to determine whether or not to start collation processing as follows, for example. To detect. First, the face area of a person to be processed is extracted from the captured image. The extraction of the person's face area is performed, for example, by determining the position or color of the moving person relative to the whole image. Then, the
上記条件判定部12(照合手段)は、対象抽出部11で検出した判定情報としての人物の特徴である目間距離d10,d20,d12が、照合処理を開始するための条件を満たすか否かを判定する。ここで、本実施形態では、照合処理を開始するための条件が、撮影画像内における人物が位置する領域毎に異なる値、つまり、撮影画像内の中央領域と端領域とで異なる値が設定されており、かかる値は照合条件記憶部15に予め記憶されている。例えば、撮影画像の中央領域に対応する条件の値Tcとしては、人物が自ゲートG1のレーンR1に位置する場合に、当該人物の目間距離が必ず超えるような値を設定する。一方で、撮影画像の端領域に対応する条件の値Teとしては、中央領域に設定した条件の値Tcよりも大きい値を設定する(Te>Tc)。一例として、端領域に対応する条件の値Teとしては、図5及び図6に示すように自ゲートG1のレーンR1に位置して撮像装置1により近く位置する人物P12の目間距離d12よりも小さく、図3及び図4に示すように隣のレーンR2に位置する人物P20の目間距離d20よりも大きくなるような値を設定する。
The condition determination unit 12 (collation unit) determines whether or not the distances between eyes d10, d20, and d12, which are the characteristics of the person as the determination information detected by the
上記の状況において、条件判定部12は、判定情報としての人物の特徴である目間距離d10,d20,d12が、当該人物が位置する撮影画像内の領域に設定された条件の値(Tc又はTe)を超えているか否かを判定する。例えば、図3及び図4の場合には、撮影画像の中央領域に位置する人物P10については、その目間距離d10が中央領域に設定された条件の値Tcを超えているかを判定する。また、撮影画像の端領域に位置する人物P20については、その目間距離d20が端領域に設定された条件の値Teを超えているかを判定する。同様に、図5及び図6の場合には、撮影画像の中央領域に位置する人物P10については、その目間距離d10が中央領域に設定された条件の値Tcを超えているかを判定する。また、撮影画像の端領域に位置する人物P12については、その目間距離d12が端領域に設定された条件の値Teを超えているかを判定する。図3及び図4の例では、中央領域の人物P10が条件を満たし、端領域の人物P20は条件を満たさないこととなる。図5及び図6の例では、中央領域の人物P10が条件を満たし、端領域の人物P12も条件を満たすこととなる。
In the above situation, the
上記照合部13(照合手段)は、条件判定部12により人物の目間距離が当該人物が位置する領域に設定された条件の値を超えている、つまり、条件を満たす、と判定された場合に、かかる人物に対する照合処理を開始する。換言すると、照合部13は、条件判定部12にて条件を満たさなかった人物については、照合処理を行わない。ここで、照合処理は、例えば以下のようにして行う。まず、照合処理の対象となる人物の顔領域から、照合に必要な特徴量を生成する。そして、生成した特徴量と、予め照合データ記憶部16に登録された人物の特徴量と、の類似度といった照合スコアを算出し、照合スコアがしきい値よりも高いか否か判定する。照合スコアがしきい値より高い場合には、照合成功とし、ゲートG1を通過しようとしている人物が、予め登録されている人物であると判断する。このとき、照合するために検出する人物の特徴量は、既存の顔照合技術で用いられる特徴量であってもよく、いかなる方法によって算出される特徴量であってもよい。また、照合方法はいかなる方法であってもよい。
When the collation unit 13 (collation unit) determines that the distance between the eyes of the person exceeds the condition value set in the area where the person is located, that is, the condition is satisfied, by the
上記ゲート制御部14(判定手段)は、まず、照合部13による照合結果に基づいて、ゲートG1に対する人物の通過可否を判定する。具体的には、照合部13による照合が成功した人物に対しては通過可能と判定する。また、ゲート制御部14は、照合結果つまり照合の成否を表示装置D1に表示する機能を有する。さらに、ゲート制御部14は、ゲートG1の開閉を行うゲート制御機能も有しており、通過可能と判断した人物に対してはゲートG1を開くよう制御する。
The gate control unit 14 (determination means) first determines whether or not a person can pass through the gate G1 based on the collation result by the
なお、上記表示装置D1は、ゲートG1を通過しようとする人物が視認可能なよう、当該ゲートG1の通過前側領域に表示面を向けて配置されている。但し、表示装置D1は、必ずしも装備されていなくてもよい。 In addition, the display device D1 is disposed with a display surface facing a pre-passage region of the gate G1 so that a person who wants to pass through the gate G1 is visible. However, the display device D1 is not necessarily equipped.
[動作]
次に、上述した顔認証システム10の動作を、図7のフローチャートを参照して説明する。ここでは、ゲートG1に対応する顔認証システム10の動作について説明し、撮像装置C1による撮影状況が図3乃至図6に示す状況である場合を一例に説明する。
[Operation]
Next, the operation of the
ゲートG1に対応する撮像装置C1は、ゲートG1の通過前側領域の画像を撮影し続ける。そして、顔認証システム10は、撮影した撮影画像に対して、常に以下の処理を行う。
The imaging device C1 corresponding to the gate G1 continues to capture an image of the region before passing through the gate G1. Then, the
まず、対象抽出部11が、撮影画像内から処理対象となる人物(対象)を抽出する(ステップS1)。そして、抽出した人物から、照合処理を開始するための条件判定を行うために必要な判定情報としての人物の特徴、ここでは、人物の目間距離を検出する(ステップS2)。例えば、図4の符号d10,d20や、図6の符号d10,d12のように検出する。
First, the
続いて、条件判定部12が、検出した判定情報である目間距離が、照合処理を開始するための条件を満たすか否かを判定する。このとき、人物が位置している領域毎に条件の値が設定されているため、人物の位置に対応した条件の値を照合条件記憶部15から読み出し、検出した目間距離が条件の値を超えているか否かを判定する(ステップS3)。図3及び図4の例では、撮影画像の中央領域に位置する人物P10の目間距離d10は、中央領域に設定された条件の値Tcを超えていると判定される。そして、撮影画像の端領域に位置する人物P20の目間距離d20は、上記値Tcよりも大きい値である端領域に設定された条件の値Teを超えていないと判定される。このため、人物P10のみが照合処理を開始する条件を満たすと判定される(ステップS3でYes)。また、図5及び図6の例では、撮影画像の中央領域に位置する人物P10の目間距離d10が、中央領域に設定された条件の値Tcを超えていると判定される。そして、撮影画像の端領域に位置する人物P12の目間距離d12が、端領域に設定された条件の値Teを超えていると判定される。このため、図5及び図6の例では、人物P10と人物P12が照合処理を開始する条件を満たすと判定される(ステップS3でYes)。
Subsequently, the
続いて、照合部13が、条件判定部12により目間距離が領域毎に設定された条件の値を超えていると判定された人物に対する照合処理を開始する(ステップS4)。図3及び図4の例では、人物P10のみの照合処理を開始し、図5及び図6の例では、人物P10と人物P12の照合処理を開始する。照合処理は、まず、照合処理の対象となる人物の顔領域から照合に必要な特徴量を検出し、予め照合データ記憶部16に登録された人物の特徴量と照合を行い、照合スコアを取得する。そして、照合スコアがしきい値以上であるか否かを判定する。なお、図5及び図6の例では、人物P10と人物P12が照合対象となるが、判定情報である目間距離が大きい人物P12の方を優先して照合処理を開始して、後述するように通過可否の判定及びゲート開閉を行ってもよい。
Subsequently, the
照合部13による照合処理の結果、通行しようとしている人物の照合に成功すると(ステップS5でYes)、ゲート制御部14(判定手段)がゲートG1に対する人物の通過を許可し、ゲートG1を開くよう制御する(ステップS6)。このとき、ゲート制御装置14は、通過可否を表示装置D1に表示する。
As a result of the verification process by the
以上のように、本実施形態の顔認証システム10によると、隣接ゲートG2を通過しようとしている人物P20に対する照合処理を抑制でき、自ゲートG1を通過しようとする人物P10,P12を適切に照合処理することができる。例えば、図3及び図4の例では、自ゲートG1を通過しようとしている人物P10を照合処理するが、隣接ゲートG2を通過しようとしている人物P20の照合処理は行われない。また、図5及び図6の例では、撮影画像の端領域に映っている人物P12であっても、自ゲートG1を通過しようとしているため、適切に照合処理が行われることとなる。その結果、他のゲートを通過しようとする人物の誤認識を抑制することができると共に、不要な照合処理を抑制して情報処理装置の処理負荷を低減することができる。
As described above, according to the
なお、上記では、撮影画像内の領域を、水平方向に中央領域と端領域とに区分けする場合を例示したが、他の領域に区分けしてもよい。その場合にも、領域毎に、照合処理を開始する条件が設定される。 In the above, the case where the region in the captured image is divided into the central region and the end region in the horizontal direction is illustrated, but may be divided into other regions. Even in this case, a condition for starting the collation process is set for each region.
また、上記では、照合処理を開始する条件の値と比較する人物の特徴である判定情報が目間距離である場合を例示したが、判定情報は、人物の顔を構成する他の部位間の距離であってもよく、人物の他の部位の大きさを表す値であってもよい。これに応じて、照合処理を開始する条件の値も、撮影画像内の領域毎に設定される。 Moreover, although the case where the determination information that is a feature of the person to be compared with the value of the condition for starting the matching process is the distance between the eyes has been exemplified above, the determination information is between the other parts constituting the person's face. It may be a distance or a value representing the size of another part of the person. In response to this, the value of the condition for starting the collation process is also set for each region in the captured image.
また、上記では、ゲートG1を通過しようとしている対象が人物である場合を例示したが、人物に限らずいかなる物体でもよい。例えば、荷物といった物体であってもよい。これに応じて、照合処理を開始する条件の値と比較する対象の特徴を表す判定情報は、物体から検出できるいかなる特徴を表す情報であってもよい。また、照合処理を行う際には、物体から検出できるいかなる特徴量を利用してもよい。 Moreover, although the case where the object which is going to pass through the gate G1 was a person was illustrated above, it is not limited to a person and may be any object. For example, it may be an object such as luggage. Accordingly, the determination information indicating the feature to be compared with the value of the condition for starting the collation process may be information indicating any feature that can be detected from the object. In addition, when performing the matching process, any feature amount that can be detected from the object may be used.
<実施形態2>
次に、本発明の第2の実施形態を、図8乃至図11を参照して説明する。図8乃至図11は、顔認証システムの処理動作を説明するための図である。
<
Next, a second embodiment of the present invention will be described with reference to FIGS. 8 to 11 are diagrams for explaining the processing operation of the face authentication system.
本実施形態における顔認証システム10は、上述した実施形態1におけるものと同様の構成であるが、照合処理を開始する条件を満たすか否かを判定する基準が異なる。つまり、本実施形態では、撮影画像からゲートG1に対する人物の向きを判定情報として検出し、この判定情報が撮影画像の領域毎に設定された条件を満たす場合に、照合処理を開始することとしている。以下、主に実施形態1とは異なる構成について詳述する。
The
本実施形態における対象抽出部11(対象情報検出手段)は、まず、撮影画像内から処理対象となる人物の顔領域を抽出する。そして、対象抽出部11は、照合処理を開始するか否かを判定するために用いる判定情報である人物の特徴として、自ゲートG1に対する人物の顔の向きを検出する。具体的には、判定情報として、撮像装置C1の光軸A1に対する顔の正面が向いている角度を検出する。例えば、人間の顔を構成する目や鼻、口といった部位を抽出し、それらの位置関係から顔の正面の絶対的な向きを検出し、さらに撮像装置C1の設置角度などから、当該撮像装置C1に対する顔の向いている角度を検出することが可能である。なお、顔の向きはいかなる方法で検出してもよい。
The target extraction unit 11 (target information detection unit) in the present embodiment first extracts a face area of a person to be processed from the captured image. Then, the
そして、本実施形態における条件判定部12(照合手段)は、対象抽出部11で検出した判定情報である撮像装置C1に対する顔の向いている角度が、撮影画像の領域毎に設定された照合処理を開始するための条件を満たすか否かを判定する。なお、本実施形態では、照合処理を開始するための条件が、撮影画像内の水平方向における中央領域と端領域とで異なる値が設定されており、かかる値は照合条件記憶部15に予め記憶されている。
Then, the condition determination unit 12 (collation unit) in the present embodiment is a collation process in which the angle of the face facing the imaging device C1, which is the determination information detected by the
ここで、撮影画像の中央領域と端領域とにそれぞれ対応して設定される条件の値について説明する。図8及び図9に示すように、撮影画像の中央領域に位置し、自ゲートG1に向かう人物P10は、撮像装置C1の撮影方向を向いている可能性が高い。このため、かかる人物P10の撮像装置C1の光軸A1の方向と顔の正面が向いている方向とのなす角度は、極めて小さい可能性が高い。一方で、撮影画像の端領域に位置し、隣接するゲートG2に向かう人物P20は、当該ゲートG2に設置された撮像装置C2の撮影方向を向いている可能性が高いため、撮像装置C1の撮影方向を向いていない可能性が高い。このため、かかる人物P20の撮像装置C1の光軸A1の方向と顔の向いている方向とのなす角度は、極めて大きい可能性が高い。 Here, a description will be given of the condition values set in correspondence with the center area and the edge area of the captured image. As shown in FIGS. 8 and 9, the person P10 located in the center area of the captured image and heading toward the own gate G1 is highly likely to face the shooting direction of the imaging device C1. For this reason, the angle formed by the direction of the optical axis A1 of the imaging device C1 of the person P10 and the direction in which the front of the face faces is highly likely to be extremely small. On the other hand, since the person P20 that is located in the edge region of the captured image and heads for the adjacent gate G2 is likely to face the shooting direction of the imaging device C2 installed in the gate G2, the shooting of the imaging device C1 is performed. It is likely that you are not facing the direction. For this reason, there is a high possibility that the angle between the direction of the optical axis A1 of the imaging device C1 of the person P20 and the direction of the face is extremely large.
上記に加えて、図10及び図11に示すように、撮影画像の端領域に位置していても、自ゲートG1に向かう人物P12の場合は、撮像装置C1の撮影方向を向いている可能性が高い。このため、かかる人物P12の撮像装置C1の光軸A1の方向と顔の向いている方向とのなす角度は、隣接ゲートG2のレーンR2に位置する人物P20の角度よりも小さい可能性が高い。 In addition to the above, as shown in FIG. 10 and FIG. 11, in the case of the person P12 heading to the own gate G1 even if it is located in the end region of the captured image, there is a possibility that it is facing the imaging direction of the imaging device C1. Is expensive. For this reason, the angle formed by the direction of the optical axis A1 of the imaging device C1 of the person P12 and the direction of the face is likely to be smaller than the angle of the person P20 located in the lane R2 of the adjacent gate G2.
以上のことを考慮して、まず撮影画像の中央領域に対応する条件の値は、当該中央領域に位置する自ゲートG1に向かう人物P10の特徴である角度が極めて小さい値となることが想定されるため、かかる角度が含まれるような小さい値に設定される。このため、例えば、中央領域に対応する条件の値は、10°などと設定される。一方で、撮影画像の端領域に対応する条件の値は、上記中央領域に対応する条件の値よりも大きく設定される。これは、端領域に位置する自ゲートGに向かう人物P12の判定情報である角度が、中央領域の人物P10よりも大きくなることが予想されるためである。但し、端領域に対応する条件の値は、隣接ゲートG2の人物P20によって想定される角度よりも小さい値に設定される。このため、例えば、端領域に対応する条件の値は、60°などと設定される。但し、条件の値は、上述した値に限定されず、ゲートの配置などの状況に応じて適宜設定される。 In consideration of the above, first, it is assumed that the value of the condition corresponding to the central region of the photographed image has a very small angle that is a characteristic of the person P10 heading to the own gate G1 located in the central region. Therefore, it is set to a small value that includes such an angle. For this reason, for example, the value of the condition corresponding to the central region is set to 10 ° or the like. On the other hand, the value of the condition corresponding to the edge area of the captured image is set larger than the value of the condition corresponding to the central area. This is because the angle, which is the determination information of the person P12 heading to the own gate G located in the end area, is expected to be larger than the person P10 in the central area. However, the value of the condition corresponding to the end region is set to a value smaller than the angle assumed by the person P20 of the adjacent gate G2. For this reason, for example, the value of the condition corresponding to the end region is set to 60 ° or the like. However, the value of the condition is not limited to the value described above, and is set as appropriate according to the situation such as the arrangement of the gates.
上記の状況において、条件判定部12は、判定情報としての人物の特徴である撮像装置C1に対する顔の角度が、当該人物が位置する撮影画像内の領域に設定された条件の値以下であるか否かを判定する。例えば、図8及び図9の場合には、撮影画像の中央領域に位置する人物P10については、その角度が中央領域に設定された条件の値以下であるかを判定し、撮影画像の端領域に位置する人物P20については、その角度が端領域に設定された条件の値以下であるかを判定する。同様に、図10及び図11の場合には、撮影画像の中央領域に位置する人物P10については、その角度が中央領域に設定された条件の値以下であるかを判定し、撮影画像の端領域に位置する人物P12については、その角度が端領域に設定された条件の値以下であるかを判定する。図8及び図9の例では、中央領域の人物P10が条件を満たし、端領域の人物P20は条件を満たさないこととなる。図10及び図11の例では、中央領域の人物P10が条件を満たし、端領域の人物P12も条件を満たすこととなる。
In the above situation, the
そして、照合部13は、条件判定部12により撮像装置C1に対する人物の角度が当該人物が位置する領域に設定された条件の値以下である、つまり、条件を満たす、と判定された場合に、かかる人物に対する照合処理を開始する。換言すると、照合部13は、条件判定部12にて条件を満たさなかった人物については、照合処理を行わない。
When the
以上のように、本実施形態の顔認証システム10によると、隣接ゲートG2を通過しようとしている人物に対する照合処理を抑制でき、自ゲートG1を通過しようとする人物を適切に照合処理することができる。その結果、他のゲートを通過しようとする人物の誤認識を抑制することができると共に、不要な照合処理を抑制して情報処理装置の処理負荷を抑制することができる。
As described above, according to the
なお、上述した判定情報としての人物の特徴である顔の向きは、撮像装置C1に対する顔の向きに限らず、いかなる基準による値であってもよい。また、照合処理を開始する条件の値も、上述した値に限定されず、いかなる値であってもよい。 Note that the face orientation, which is the feature of the person as the determination information, is not limited to the face orientation relative to the imaging device C1, and may be a value based on any reference. Further, the value of the condition for starting the collation process is not limited to the value described above, and may be any value.
<実施形態3>
次に、本発明の第3の実施形態を、図12及び図13を参照して説明する。図12は、実施形態3における照合システムの構成を示すブロック図である。図13は、実施形態3における情報処理装置の構成を示すブロック図である。なお、本実施形態では、実施形態1及び実施形態2で説明した顔認証システムの構成の概略を示している。
<Embodiment 3>
Next, a third embodiment of the present invention will be described with reference to FIGS. FIG. 12 is a block diagram illustrating a configuration of a verification system according to the third embodiment. FIG. 13 is a block diagram illustrating a configuration of the information processing apparatus according to the third embodiment. In the present embodiment, an outline of the configuration of the face authentication system described in the first and second embodiments is shown.
図12に示すように、本実施形態おける照合システム100は、
ゲートに対する通過前側領域の撮影画像を取得する撮像手段110と、
予め登録された対象と、撮影画像内の対象と、の照合処理を行う照合手段120と、
照合処理の結果に基づいて、ゲートに対する対象の通過可否を判定する判定手段130と、
を備える。
そして、上記照合手段120は、撮影画像の領域毎に設定された、当該領域に位置する対象についての条件に基づいて、照合処理を開始する、
という構成をとる。
As shown in FIG. 12, the
Imaging means 110 for acquiring a photographed image of a pre-passage region with respect to the gate;
Collation means 120 for performing collation processing between a pre-registered target and a target in a captured image;
Determination means 130 for determining whether or not the object can pass through the gate based on the result of the collation processing;
Is provided.
And the said collation means 120 starts a collation process based on the conditions about the object located in the said area | region set for every area | region of the picked-up image,
The configuration is as follows.
また、本実施形態では、図12に示す照合システム100から撮像手段110を取り除いてもよい。
つまり、本実施形態における情報処理装置200は、
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行う照合手段210と、
照合処理の結果に基づいて、ゲートに対する対象の通過可否を判定する判定手段220と、
を備える。
そして、上記照合手段210は、撮影画像の領域毎に設定された、当該領域に位置する対象についての条件に基づいて、照合処理を開始する、
という構成をとる。
Moreover, in this embodiment, you may remove the imaging means 110 from the
That is, the
Collation means 210 for performing collation processing between the object in the captured image of the pre-passage area with respect to the gate and the object registered in advance;
A
Is provided.
And the said collation means 210 starts a collation process based on the conditions about the object located in the said area | region set for every area | region of the picked-up image,
The configuration is as follows.
なお、上述した照合手段120,210と判定手段130,220とは、演算装置がプログラムを実行することで構築されるものであってもよく、電子回路で構築されるものであってもよい。 Note that the collation means 120 and 210 and the determination means 130 and 220 described above may be constructed by an arithmetic device executing a program, or may be constructed by an electronic circuit.
そして、上記構成の照合システム100あるいは情報処理装置200によると、
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行い、
照合処理の結果に基づいて、ゲートに対する前記対象の通過可否を判定する、
という照合方法が提供される。
そして、かかる照合方法において、さらに、撮影画像の領域毎に設定された、当該領域に位置する対象についての条件に基づいて、照合処理を開始する、
という構成をとる。
Then, according to the
Perform a collation process between the target in the captured image of the pre-passage area with respect to the gate and the target registered in advance.
Based on the result of the collation process, it is determined whether the object can pass through the gate.
Is provided.
And in such a collation method, further, collation processing is started based on the condition for the object located in the region set for each region of the captured image.
The configuration is as follows.
上述した照合システム100あるいは情報処理装置200によると、撮影画像の所定の領域に位置する対象については、当該対象が当該領域に設定された条件を満たした場合に照合処理を開始される。このため、撮影画像に他のゲートを通過しようとする対象が映っていたとしても、かかる対象が映っていた領域に設定された条件によって、その対象に対する照合処理の開始を抑制することができる。その結果、ゲートを通過しようとする対象の誤認識を抑制することができると共に、不要な照合処理を抑制して情報処理装置の処理負荷を軽減することができる。
According to the
<付記>
上記実施形態の一部又は全部は、以下の付記のようにも記載されうる。以下、本発明における照合システム、情報処理装置、プログラム、照合方法の構成の概略を説明する。但し、本発明は、以下の構成に限定されない。
<Appendix>
Part or all of the above-described embodiment can be described as in the following supplementary notes. The outline of the configuration of the collation system, information processing apparatus, program, and collation method in the present invention will be described below. However, the present invention is not limited to the following configuration.
(付記1)
ゲートに対する通過前側領域の撮影画像を取得する撮像手段と、
予め登録された対象と、前記撮影画像内の対象と、の照合処理を行う照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する判定手段と、
を備え、
前記照合手段は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
照合システム。
(Appendix 1)
Imaging means for acquiring a photographed image of the pre-passage area with respect to the gate;
Collating means for performing collation processing between the pre-registered object and the object in the captured image;
Based on the result of the collation process, a determination unit that determines whether the object can pass through the gate;
With
The collation means starts the collation process based on a condition for the target located in the region set for each region of the captured image.
Matching system.
上記構成によると、照合システムは、撮影画像の所定の領域に位置する対象については、当該対象が当該領域に設定された条件を満たした場合に照合処理を開始される。このため、撮影画像に他のゲートを通過しようとする対象が映っていたとしても、かかる対象が映っていた領域に設定された条件によって、その対象に対する照合処理の開始を抑制することができる。その結果、ゲートを通過しようとする対象の誤認識を抑制することができると共に、不要な照合処理を抑制して情報処理装置の処理負荷を軽減することができる。 According to the above configuration, the collation system starts collation processing for a target located in a predetermined area of the captured image when the target satisfies a condition set in the area. For this reason, even if a target to be passed through another gate appears in the captured image, it is possible to suppress the start of collation processing for the target depending on the condition set in the region where the target is shown. As a result, it is possible to suppress erroneous recognition of an object that attempts to pass through the gate, and it is possible to reduce unnecessary processing for collation and reduce the processing load on the information processing apparatus.
(付記2)
付記1に記載の照合システムであって、
前記撮影画像内の前記対象の特徴を表す対象情報を検出する対象情報検出手段を備え、
前記照合手段は、前記撮影画像内の前記対象の前記対象情報が、当該対象が位置する前記撮影画像の領域に設定された条件を満たす場合に、当該対象に対する前記照合処理を開始する、
照合システム。
(Appendix 2)
A verification system according to attachment 1, wherein
Comprising target information detection means for detecting target information representing characteristics of the target in the captured image;
The collation means starts the collation processing for the target when the target information of the target in the captured image satisfies a condition set in an area of the captured image where the target is located.
Matching system.
上記構成によると、撮影画像内の対象の特徴を表す対象情報を検出し、当該対象情報が、撮影画像の領域毎に設定された条件を満たす場合に、対象に対する照合処理を開始する。このため、異なるゲートを通過しようとする対象が映る領域において、当該対象の対象情報を照合処理を開始しない条件に設定することで、対象の誤認識を抑制し、不要な照合処理を抑制することができる。 According to the above configuration, the target information representing the feature of the target in the captured image is detected, and when the target information satisfies the conditions set for each region of the captured image, the matching process for the target is started. For this reason, by setting the target information of the target to a condition that does not start the verification process in an area where the target to pass through different gates is shown, it suppresses erroneous recognition of the target and suppresses unnecessary verification process. Can do.
(付記3)
付記2に記載の照合システムであって、
前記照合手段は、前記撮影画像内の前記対象の前記対象情報が、当該対象が位置する前記撮影画像の水平方向に区分けされた領域毎に設定された条件を満たす場合に、当該対象に対する前記照合処理を開始する、
照合システム。
(Appendix 3)
A verification system according to
The collation means, when the target information of the target in the captured image satisfies a condition set for each of the horizontally segmented regions of the captured image where the target is located, Start processing,
Matching system.
このように、水平方向に区分けされた領域毎に条件を設定することで、隣接するゲートを通過しようとする対象の誤認識と不要な照合処理を抑制することができる。 As described above, by setting the conditions for each region divided in the horizontal direction, it is possible to suppress erroneous recognition of an object to be passed through an adjacent gate and unnecessary verification processing.
(付記4)
付記3に記載の照合システムであって、
前記対象情報検出手段は、前記対象情報として前記対象の大きさを検出し、
前記照合手段は、前記撮影画像内の前記対象の前記対象情報が、当該対象が位置する前記撮影画像の領域毎に設定された条件である値よりも大きい場合に、当該対象に対する前記照合処理を開始し、
前記撮影画像の水平方向における中央領域に対する端領域に設定された前記対象の前記対象情報に対する条件である値は、前記中央領域に設定された前記対象の前記対象情報に対する条件である値よりも大きく設定されている、
照合システム。
(Appendix 4)
A verification system according to attachment 3, wherein
The target information detecting means detects the size of the target as the target information,
When the target information of the target in the captured image is larger than a value that is a condition set for each region of the captured image in which the target is located, the verification unit performs the verification process on the target. Start,
A value that is a condition for the target information of the target set in an end region with respect to a central region in the horizontal direction of the captured image is greater than a value that is a condition for the target information of the target set in the central region. Set,
Matching system.
(付記5)
付記4に記載の照合システムであって、
前記対象情報検出手段は、前記対象の大きさを表す前記対象情報として、当該対象である人物の顔を構成する所定部位間の距離を検出する、
照合システム。
(Appendix 5)
A verification system according to
The target information detecting means detects a distance between predetermined parts constituting a face of a person who is the target, as the target information representing the size of the target.
Matching system.
上記構成によると、端領域に映る対象の大きさに関する条件が、中央領域に移る対象の大きさよりも大きく設定されている。例えば、対象が人物である場合には、人物の顔を構成する所定部位間の距離の条件が、中央領域よりも端領域の方が大きく設定されている。これにより、隣接するゲートを通過しようとする対象が端領域に映った場合には、かかる対象の大きさが条件を満たさないため、対象の誤認識と不要な照合処理を抑制することができる。一方で、該当するゲートを通過しようとする対象が端領域に映った場合には、かかる対象の大きさが条件を満たすこととなり、適切に照合処理を開始することができる。 According to the above configuration, the condition relating to the size of the object shown in the end region is set larger than the size of the object moving to the central region. For example, when the target is a person, the condition for the distance between predetermined parts constituting the person's face is set to be larger in the end region than in the central region. As a result, when an object that is going to pass through an adjacent gate appears in the end region, the size of the object does not satisfy the condition, so that erroneous recognition of the object and unnecessary verification processing can be suppressed. On the other hand, when a target to pass through the corresponding gate appears in the end region, the size of the target satisfies the condition, and the matching process can be appropriately started.
(付記6)
付記3に記載の照合システムであって、
前記対象情報検出手段は、前記対象情報として前記ゲートに対する前記対象の向きを検出し、
前記照合手段は、前記撮影画像内の前記対象の前記対象情報が、当該対象が位置する前記撮影画像の領域毎に設定された条件を満たす場合に、当該対象に対する前記照合処理を開始し、
前記撮影画像の水平方向における中央領域に対する端領域に設定された前記対象の前記対象情報に対する条件と、前記中央領域に設定された前記対象の前記対象情報に対する条件と、が異なって設定されている、
照合システム。
(Appendix 6)
A verification system according to attachment 3, wherein
The target information detection means detects the direction of the target with respect to the gate as the target information,
When the target information of the target in the captured image satisfies a condition set for each region of the captured image in which the target is located, the verification unit starts the verification process for the target,
The condition for the target information of the target set in the end area with respect to the central area in the horizontal direction of the captured image and the condition for the target information of the target set in the central area are set differently. ,
Matching system.
(付記7)
付記6に記載の照合システムであって、
前記対象情報検出手段は、前記対象の向きを表す前記対象情報として、当該対象である人物の顔を構成する所定部位の位置に基づいて、前記撮像手段に対する前記人物の顔が向いている角度を検出し、
前記照合手段は、前記撮影画像内の前記対象の前記対象情報である角度が、当該対象が位置する前記撮影画像の領域毎に設定された条件である値以下である場合に、当該対象に対する前記照合処理を開始し、
前記撮影画像の水平方向における中央領域に対する端領域に設定された前記対象の前記対象情報に対する条件である値が、前記中央領域に設定された前記対象の前記対象情報に対する条件である角度の値よりも大きく設定されている、
照合システム。
(Appendix 7)
The verification system according to appendix 6,
The target information detection unit is configured to determine, as the target information indicating the direction of the target, an angle at which the person's face is facing the imaging unit based on a position of a predetermined part constituting the target person's face. Detect
The collation means, when the angle that is the target information of the target in the captured image is equal to or less than a value that is a condition set for each region of the captured image in which the target is located, Start the verification process
A value that is a condition for the target information of the target set in an end region with respect to a central region in the horizontal direction of the captured image is a value of an angle that is a condition for the target information of the target set in the central region. Is also set larger,
Matching system.
上記構成によると、端領域に映る対象の向きに関する条件が、中央領域と端領域とで異なって設定されている。例えば、対象が人物である場合には、撮像装置に対する人物の顔が向いている角度の条件が、中央領域よりも端領域の方が大きく設定されている。これにより、該当するゲートを通過しようとする対象が端領域に映った場合には、かかる対象の角度が条件を満たすこととなり、適切に照合処理を開始することができる。一方で、隣接するゲートを通過しようとする対象が端領域に映った場合には、かかる対象の角度が条件を満たさないため、対象の誤認識と不要な照合処理を抑制することができる。 According to the above configuration, the conditions regarding the orientation of the object reflected in the end region are set differently for the central region and the end region. For example, when the target is a person, the condition of the angle at which the person's face is facing the imaging device is set larger in the end region than in the central region. As a result, when an object to pass through the corresponding gate appears in the end region, the angle of the object satisfies the condition, and the matching process can be appropriately started. On the other hand, when an object that attempts to pass through an adjacent gate appears in the end region, the angle of the object does not satisfy the condition, and thus erroneous recognition of the object and unnecessary verification processing can be suppressed.
(付記8)
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行う照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する判定手段と、
を備え、
前記照合手段は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
情報処理装置。
(Appendix 8)
Collating means for performing collation processing between the target in the captured image of the pre-passage area with respect to the gate and the target registered in advance;
Based on the result of the collation process, a determination unit that determines whether the object can pass through the gate;
With
The collation means starts the collation process based on a condition for the target located in the region set for each region of the captured image.
Information processing device.
(付記9)
付記8に記載の情報処理装置であって、
前記撮影画像内の前記対象の特徴を表す対象情報を検出する対象情報検出手段を備え、
前記照合手段は、前記撮影画像内の前記対象の前記対象情報が、当該対象が位置する前記撮影画像の領域に設定された条件を満たす場合に、当該対象に対する前記照合処理を開始する、
情報処理装置。
(Appendix 9)
An information processing apparatus according to appendix 8, wherein
Comprising target information detection means for detecting target information representing characteristics of the target in the captured image;
The collation means starts the collation processing for the target when the target information of the target in the captured image satisfies a condition set in an area of the captured image where the target is located.
Information processing device.
(付記10)
情報処理装置に、
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行う照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する判定手段と、
を実現させるためのプログラムであり、
前記照合手段は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
プログラム。
(Appendix 10)
In the information processing device,
Collating means for performing collation processing between the target in the captured image of the pre-passage area with respect to the gate and the target registered in advance;
Based on the result of the collation process, a determination unit that determines whether the object can pass through the gate;
Is a program for realizing
The collation means starts the collation process based on a condition for the target located in the region set for each region of the captured image.
program.
(付記11)
付記10に記載のプログラムであって、
前記情報処理装置に、さらに前記撮影画像内の前記対象の特徴を表す対象情報を検出する対象情報検出手段を実現させると共に、
前記照合手段は、前記撮影画像内の前記対象の前記対象情報が、当該対象が位置する前記撮影画像の領域に設定された条件を満たす場合に、当該対象に対する前記照合処理を開始する、
プログラム。
(Appendix 11)
The program according to
The information processing apparatus further realizes target information detection means for detecting target information representing the characteristics of the target in the captured image,
The collation means starts the collation processing for the target when the target information of the target in the captured image satisfies a condition set in an area of the captured image where the target is located.
program.
(付記12)
情報処理装置が、
ゲートに対する通過前側領域の撮影画像内の対象と、予め登録された対象と、の照合処理を行い、
前記照合処理の結果に基づいて、前記ゲートに対する前記対象の通過可否を判定する方法であり、
前記情報処理装置は、前記撮影画像の領域毎に設定された、当該領域に位置する前記対象についての条件に基づいて、前記照合処理を開始する、
照合方法。
(Appendix 12)
Information processing device
Perform a collation process between the target in the captured image of the pre-passage area with respect to the gate and the target registered in advance.
It is a method for determining whether or not the object can pass through the gate based on the result of the matching process,
The information processing apparatus starts the matching process based on a condition for the target located in the region set for each region of the captured image.
Matching method.
(付記13)
付記12に記載の照合方法であって、
前記情報処理装置が、前記撮影画像内の前記対象の特徴を表す前対象情報を検出し、
前記情報処理装置は、前記撮影画像内の前記対象の前記対象情報が、当該対象が位置する前記撮影画像の領域に設定された条件を満たす場合に、当該対象に対する前記照合処理を開始する、
照合方法。
(Appendix 13)
The verification method according to
The information processing apparatus detects pre-target information representing the characteristics of the target in the captured image;
The information processing apparatus starts the matching process for the target when the target information of the target in the captured image satisfies a condition set in an area of the captured image where the target is located.
Matching method.
なお、上述したプログラムは、記憶装置に記憶されていたり、コンピュータが読み取り可能な記録媒体に記録されている。例えば、記録媒体は、フレキシブルディスク、光ディスク、光磁気ディスク、及び、半導体メモリ等の可搬性を有する媒体である。 Note that the above-described program is stored in a storage device or recorded on a computer-readable recording medium. For example, the recording medium is a portable medium such as a flexible disk, an optical disk, a magneto-optical disk, and a semiconductor memory.
以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。 Although the present invention has been described with reference to the above-described embodiment and the like, the present invention is not limited to the above-described embodiment. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
10 顔認証システム
11 対象抽出部
12 条件判定部
13 照合部
14 ゲート制御部
15 照合条件記憶部
16 照合データ記憶部
100 照合システム
110 撮像手段
120 照合手段
130 判定手段
200 情報処理装置
210 照合手段
220 判定手段
C1,C2,C3 撮像装置
D1 表示装置
G1,G2,G3 ゲート
DESCRIPTION OF
Claims (6)
処理対象となる人物の顔領域を前記撮影画像内から抽出する抽出手段と、
前記人物の目間距離を、抽出された前記顔領域から検出する検出手段と、
前記目間距離が所定の条件を満たす場合に、予め登録された人物と、前記撮影画像内の前記人物と、の照合処理を開始する照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記人物の通過可否を判定する判定手段と、
を備える照合システム。 Acquisition means for acquiring a photographed image of the pre-passage area with respect to the gate;
Extracting means for extracting a face area of a person to be processed from the captured image;
Detecting means for detecting the distance between eyes of the person from the extracted face area;
Collation means for starting a collation process between a person registered in advance and the person in the captured image when the distance between the eyes satisfies a predetermined condition;
Determination means for determining whether or not the person can pass through the gate based on the result of the matching process;
A collation system comprising:
前記照合手段は、前記目間距離が前記所定の条件を満たす前記人物が複数存在する場合に、前記目間距離が最大の前記人物に対する前記照合処理を優先して開始する、
照合システム。 The verification system according to claim 1,
The collation means preferentially starts the collation process for the person with the largest distance between eyes when there are a plurality of the persons whose distance between the eyes satisfies the predetermined condition.
Matching system.
処理対象となる人物の顔領域を前記撮影画像内から抽出し、
前記人物の目間距離を、抽出された前記顔領域から検出し、
前記目間距離が所定の条件を満たす場合に、予め登録された人物と、前記撮影画像内の前記人物と、の照合処理を開始し、
前記照合処理の結果に基づいて、前記ゲートに対する前記人物の通過可否を判定する、
照合方法。 Obtain a captured image of the pre-passage area for the gate,
Extract the face area of the person to be processed from the captured image,
Detecting the distance between the eyes of the person from the extracted face area;
When the distance between the eyes satisfies a predetermined condition, a matching process between a person registered in advance and the person in the captured image is started,
Based on the result of the verification process, it is determined whether or not the person can pass through the gate.
Matching method.
前記目間距離が前記所定の条件を満たす前記人物が複数存在する場合に、前記目間距離が最大の前記人物に対する前記照合処理を優先して開始する、
照合方法。 The collation method according to claim 3,
When there are a plurality of the persons whose distance between the eyes satisfies the predetermined condition, the collation process for the person with the largest distance between the eyes is preferentially started.
Matching method.
ゲートに対する通過前側領域の撮影画像を取得する取得手段と、
処理対象となる人物の顔領域を前記撮影画像内から抽出する抽出手段と、
前記人物の目間距離を、抽出された前記顔領域から検出する検出手段と、
前記目間距離が所定の条件を満たす場合に、予め登録された人物と、前記撮影画像内の前記人物と、の照合処理を開始する照合手段と、
前記照合処理の結果に基づいて、前記ゲートに対する前記人物の通過可否を判定する判定手段と、
を実現させるためのプログラム。 In the information processing device,
Acquisition means for acquiring a photographed image of the pre-passage area with respect to the gate;
Extracting means for extracting a face area of a person to be processed from the captured image;
Detecting means for detecting the distance between eyes of the person from the extracted face area;
Collation means for starting a collation process between a person registered in advance and the person in the captured image when the distance between the eyes satisfies a predetermined condition;
Determination means for determining whether or not the person can pass through the gate based on the result of the matching process;
A program to realize
前記照合手段は、前記目間距離が前記所定の条件を満たす前記人物が複数存在する場合に、前記目間距離が最大の前記人物に対する前記照合処理を優先して開始する、
プログラム。
The program according to claim 5,
The collation means preferentially starts the collation process for the person having the largest distance between eyes when there are a plurality of the persons whose distance between the eyes satisfies the predetermined condition.
program.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019108783A JP6947202B2 (en) | 2017-09-19 | 2019-06-11 | Matching system |
JP2021145516A JP7298658B2 (en) | 2017-09-19 | 2021-09-07 | Matching system |
JP2023096173A JP2023120264A (en) | 2019-06-11 | 2023-06-12 | Collation system |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017179063A JP6544404B2 (en) | 2017-09-19 | 2017-09-19 | Matching system |
JP2019108783A JP6947202B2 (en) | 2017-09-19 | 2019-06-11 | Matching system |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017179063A Division JP6544404B2 (en) | 2017-09-19 | 2017-09-19 | Matching system |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021145516A Division JP7298658B2 (en) | 2017-09-19 | 2021-09-07 | Matching system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019194875A true JP2019194875A (en) | 2019-11-07 |
JP6947202B2 JP6947202B2 (en) | 2021-10-13 |
Family
ID=68469667
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019108783A Active JP6947202B2 (en) | 2017-09-19 | 2019-06-11 | Matching system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6947202B2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111667608A (en) * | 2020-02-19 | 2020-09-15 | 中国银联股份有限公司 | Control method, system and device for gate passage and gate |
WO2021186627A1 (en) * | 2020-03-18 | 2021-09-23 | 日本電気株式会社 | Gate device, authentication system, gate device control method, and storage medium |
JP7548417B2 (en) | 2021-03-24 | 2024-09-10 | 日本電気株式会社 | Information processing system, information processing device, information processing method, and recording medium |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008310775A (en) * | 2007-06-18 | 2008-12-25 | Canon Inc | Expression recognition device and method and imaging apparatus |
JP2011176386A (en) * | 2010-01-28 | 2011-09-08 | Panasonic Corp | Imaging apparatus, image display device and image display program |
US20140015930A1 (en) * | 2012-06-20 | 2014-01-16 | Kuntal Sengupta | Active presence detection with depth sensing |
JP2014219703A (en) * | 2013-04-30 | 2014-11-20 | セコム株式会社 | Face authentication system |
JP2015001790A (en) * | 2013-06-14 | 2015-01-05 | セコム株式会社 | Face authentication system |
JP2015122062A (en) * | 2013-11-25 | 2015-07-02 | キヤノンマーケティングジャパン株式会社 | Information processing device, information processing system, control method, and program |
JP2016167164A (en) * | 2015-03-09 | 2016-09-15 | キヤノン株式会社 | Image recognition device, image recognition method and image recognition program |
-
2019
- 2019-06-11 JP JP2019108783A patent/JP6947202B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008310775A (en) * | 2007-06-18 | 2008-12-25 | Canon Inc | Expression recognition device and method and imaging apparatus |
JP2011176386A (en) * | 2010-01-28 | 2011-09-08 | Panasonic Corp | Imaging apparatus, image display device and image display program |
US20140015930A1 (en) * | 2012-06-20 | 2014-01-16 | Kuntal Sengupta | Active presence detection with depth sensing |
JP2014219703A (en) * | 2013-04-30 | 2014-11-20 | セコム株式会社 | Face authentication system |
JP2015001790A (en) * | 2013-06-14 | 2015-01-05 | セコム株式会社 | Face authentication system |
JP2015122062A (en) * | 2013-11-25 | 2015-07-02 | キヤノンマーケティングジャパン株式会社 | Information processing device, information processing system, control method, and program |
JP2016167164A (en) * | 2015-03-09 | 2016-09-15 | キヤノン株式会社 | Image recognition device, image recognition method and image recognition program |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111667608A (en) * | 2020-02-19 | 2020-09-15 | 中国银联股份有限公司 | Control method, system and device for gate passage and gate |
CN111667608B (en) * | 2020-02-19 | 2022-09-13 | 中国银联股份有限公司 | Control method, system and device for gate passage and gate |
WO2021186627A1 (en) * | 2020-03-18 | 2021-09-23 | 日本電気株式会社 | Gate device, authentication system, gate device control method, and storage medium |
JPWO2021186627A1 (en) * | 2020-03-18 | 2021-09-23 | ||
JP7318801B2 (en) | 2020-03-18 | 2023-08-01 | 日本電気株式会社 | GATE DEVICE, AUTHENTICATION SYSTEM, GATE DEVICE CONTROL METHOD AND PROGRAM |
US12067822B2 (en) | 2020-03-18 | 2024-08-20 | Nec Corporation | Gate device, authentication system, gate device control method, and storage medium |
JP7548417B2 (en) | 2021-03-24 | 2024-09-10 | 日本電気株式会社 | Information processing system, information processing device, information processing method, and recording medium |
Also Published As
Publication number | Publication date |
---|---|
JP6947202B2 (en) | 2021-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6409929B1 (en) | Verification system | |
JP6151582B2 (en) | Face recognition system | |
JP6601513B2 (en) | Information processing device | |
JP6544404B2 (en) | Matching system | |
JP6947202B2 (en) | Matching system | |
JP4899552B2 (en) | Authentication device, authentication method, authentication program, and computer-readable recording medium recording the same | |
WO2022034921A1 (en) | Information processing apparatus, information processing method, and storage medium | |
JP6915673B2 (en) | Information processing system | |
JP7327923B2 (en) | Information processing device, information processing method, system and program | |
JP7040578B2 (en) | Collation system | |
JP7298658B2 (en) | Matching system | |
JP6774036B2 (en) | Collation system | |
JP2023120264A (en) | Collation system | |
WO2019151116A1 (en) | Information processing device | |
JP7279774B2 (en) | Information processing equipment | |
WO2023145059A1 (en) | Entry management device, entry management method, and program recording medium | |
JP2021193268A (en) | Information processing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190611 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200709 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200819 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201002 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210817 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210830 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6947202 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |