JP2021047929A - Information processor - Google Patents

Information processor Download PDF

Info

Publication number
JP2021047929A
JP2021047929A JP2020219338A JP2020219338A JP2021047929A JP 2021047929 A JP2021047929 A JP 2021047929A JP 2020219338 A JP2020219338 A JP 2020219338A JP 2020219338 A JP2020219338 A JP 2020219338A JP 2021047929 A JP2021047929 A JP 2021047929A
Authority
JP
Japan
Prior art keywords
person
face
image
region
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020219338A
Other languages
Japanese (ja)
Inventor
雷明 蘇
Raimei So
雷明 蘇
護 井上
Mamoru Inoue
護 井上
健太 藍野
Kenta AINO
健太 藍野
浩章 森田
Hiroaki Morita
浩章 森田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2020219338A priority Critical patent/JP2021047929A/en
Publication of JP2021047929A publication Critical patent/JP2021047929A/en
Priority to JP2022146273A priority patent/JP7343020B2/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)
  • Image Input (AREA)
  • Image Analysis (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

To provide a detection device for detecting whether an object is a living body.SOLUTION: An information processor includes face detection means that detects facial regions of a person from images obtained by shooting the person, and determination means that compares the facial regions of the person in the images taken with light in a wavelength range in an infrared band to determine whether it is a living body or a non-living body.SELECTED DRAWING: Figure 2

Description

本発明は、情報処理装置に関する。 The present invention relates to an information processing device.

カメラで撮像した顔画像を解析して、本人かどうかを認証する顔認証技術(以下、単に顔認証とする)が知られている。このような顔認証では、本人以外の人物が本人の写真などを用いて本人に成りすます不正認証の問題がある。また、このような成りすましによる不正認証を防ぐための様々な技術も知られている。 A face recognition technology (hereinafter, simply referred to as face recognition) that authenticates the identity of a person by analyzing a face image captured by a camera is known. In such face recognition, there is a problem of fraudulent authentication in which a person other than the person impersonates the person by using a photograph of the person or the like. In addition, various techniques for preventing fraudulent authentication due to such spoofing are also known.

例えば、特許文献1には、姿勢の異なる複数の顔画像を用いて立体検知を行うことにより、写真などを用いた成りすましによる不正認証を防止する技術について記載されている。 For example, Patent Document 1 describes a technique for preventing fraudulent authentication by spoofing using a photograph or the like by performing stereoscopic detection using a plurality of facial images having different postures.

特開2012−069133号公報Japanese Unexamined Patent Publication No. 2012-069133

しかしながら、ある人物が精巧な変装マスクを被って他人に変装したような場合、この人物の顔は立体的なので上記立体検知の技術では不正認証を防止することができない。
また、近年の精巧な変装マスクでは人間の目視でも素顔であるか変装マスクを被っているか否か判別が困難な場合がある。例えば、空港の入国審査などでは、変装マスクを被った者がその変装マスクと同一写真の偽造パスポートを使って入国審査官の目視による照合を通過するケースがある。
この変装マスクの例に限らず、目視で肌と判別することが困難な変装用の物体(例えば、見た目が肌に似ているシート状の物体など)を用いても、同様に変装が可能である。このような事情から、人物の顔の表面が肌などの生体であるか否かを高い精度で検知する技術が望まれている。
However, when a person wears an elaborate disguise mask and disguises himself as another person, the face of this person is three-dimensional, so that the above-mentioned three-dimensional detection technology cannot prevent fraudulent authentication.
In addition, with recent elaborate disguise masks, it may be difficult for humans to visually determine whether or not they have a real face or are wearing a disguise mask. For example, in immigration at an airport, a person wearing a disguise mask may pass a visual verification by an immigration inspector using a forged passport with the same photo as the disguise mask.
Not limited to this example of a disguise mask, it is possible to disguise in the same way by using a disguise object (for example, a sheet-like object that looks like the skin) that is difficult to visually distinguish from the skin. is there. Under these circumstances, a technique for detecting with high accuracy whether or not the surface of a person's face is a living body such as skin is desired.

本発明は、このような実情に鑑みてなされたものであり、生体であるかどうかを高い精度で検知する情報処理装置を提供することを目的とする。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide an information processing device that detects whether or not a living body is a living body with high accuracy.

上記目的を達成するため、本発明の第1の観点に係る情報処理装置は、
人物を撮像した画像から前記人物の顔領域を検出する顔検出手段と、
赤外線帯域における波長域の光を用いて撮像した画像の、前記人物の顔領域に基づいて、前記人物の顔の表面が肌であるかを判定する判定手段と、
を備える。
In order to achieve the above object, the information processing device according to the first aspect of the present invention is
A face detection means for detecting the face area of the person from an image of the person, and
A determination means for determining whether the surface of the person's face is skin based on the person's face region in an image captured using light in the wavelength range in the infrared band.
To be equipped.

上記目的を達成するため、本発明の第2の観点に係る検知方法は、
人物を撮像した画像から前記人物の顔領域を検出するステップと、
赤外線帯域における波長域の光を用いて撮像した画像の、前記人物の顔領域に基づいて、前記人物の顔の表面が肌であるかを判定するステップと、
を備える。
In order to achieve the above object, the detection method according to the second aspect of the present invention is
The step of detecting the face area of the person from the image of the person, and
A step of determining whether the surface of the person's face is skin based on the person's face region in an image captured using light in the wavelength range in the infrared band.
To be equipped.

上記目的を達成するため、本発明の第3の観点に係るプログラムは、
コンピュータに、
人物を撮像した画像から前記人物の顔領域を検出するステップと、
赤外線帯域における波長域の光を用いて撮像した画像の、前記人物の顔領域に基づいて、前記人物の顔の表面が肌であるかを判定するステップと、
を実行させるためのプログラムである。
In order to achieve the above object, the program according to the third aspect of the present invention is
On the computer
The step of detecting the face area of the person from the image of the person, and
A step of determining whether the surface of the person's face is skin based on the person's face region in an image captured using light in the wavelength range in the infrared band.
It is a program to execute.

本発明によれば、肌などの生体であるかどうかを高い精度で検知することが可能となる。 According to the present invention, it is possible to detect with high accuracy whether or not it is a living body such as skin.

人の肌とシリコン樹脂とに光を照射した際の、それぞれの反射光の輝度のスペクトルを示した図である。It is a figure which showed the spectrum of the luminance of each reflected light when the human skin and the silicon resin were irradiated with light. 各実施形態における生体検知装置の構成を示すブロック図である。It is a block diagram which shows the structure of the biological detection apparatus in each embodiment. 各実施形態における照明部の構造を示す図である。It is a figure which shows the structure of the lighting part in each embodiment. 各実施形態における撮像部の構造を示す図である。It is a figure which shows the structure of the imaging part in each embodiment. 赤外線画像の一例を示す図である。It is a figure which shows an example of an infrared image. 図4Aに示す赤外線画像の各領域を示す図である。It is a figure which shows each region of the infrared image shown in FIG. 4A. 生体検知処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the biological detection processing. 生体検知処理の画像取得処理を示すフローチャートである。It is a flowchart which shows the image acquisition process of a living body detection process. 実施形態1の生体判定処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the biological determination process of Embodiment 1. 実施形態2の生体判定処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the biological determination process of Embodiment 2. 実施形態3の生体判定処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the biological determination process of Embodiment 3. 実施形態4の生体検知処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the biological detection processing of Embodiment 4. 赤外線画像の一例を示す図である。It is a figure which shows an example of an infrared image. 図11Aに示す赤外線画像の各領域を示す図である。It is a figure which shows each region of the infrared image shown in FIG. 11A. 実施形態4の生体判定処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the biological determination process of Embodiment 4.

以下、本発明の各実施形態について、図面を参照しながら詳細に説明する。 Hereinafter, each embodiment of the present invention will be described in detail with reference to the drawings.

(実施形態1)
本発明の実施形態1に係る生体検知装置1は、例えば、空港の入国審査場の入国ゲート近辺に設置される。生体検知装置1は、入国ゲートを通過しようとする人物の顔の表面が肌(生体)であるか、変装マスク等を被って顔の表面が覆われているかを判別し、顔の表面が肌でない場合にその旨を報知する機能を有する。
(Embodiment 1)
The biological detection device 1 according to the first embodiment of the present invention is installed, for example, near the immigration gate of the immigration checkpoint at an airport. The biological detection device 1 determines whether the surface of the face of a person who is going to pass through the immigration gate is skin (living body) or is covered with a disguise mask or the like, and the surface of the face is skin. If not, it has a function to notify that fact.

なお、生体検知装置1が、肌と特に区別したい変装マスクは、例えば、映画等で年齢の若い俳優が老人役を演じる特殊メイクで使用されるような精巧なマスクであり、目視では生体(例えば、人の肌)と判別することが困難である偽生体(例えば、シリコン樹脂)を用いて作製されたマスクである。そのため、人が目視により顔の表面が肌であるか、このような変装マスクを被っているか判断するのは困難である。 The disguise mask that the biological detection device 1 wants to distinguish from the skin is, for example, an elaborate mask used in a special make-up in which a young actor plays the role of an old man in a movie or the like, and is visually visible (for example, a living body (for example). , Human skin) is a mask made using a pseudo-living body (for example, silicon resin) that is difficult to distinguish. Therefore, it is difficult for a person to visually determine whether the surface of the face is skin or whether he / she is wearing such a disguise mask.

まず、生体検知装置1による生体検知の原理について説明する。図1は光を物体に照射した際の反射光の輝度のスペクトルを示した図である。この図において、実線は、人の肌に照射した光の反射光のスペクトルである。また、点線は、シリコン樹脂に照射した光の反射光のスペクトルである。なお、輝度は、測定された反射光の強さを示す(明るさの度合いを示す)。 First, the principle of biological detection by the biological detection device 1 will be described. FIG. 1 is a diagram showing a spectrum of brightness of reflected light when an object is irradiated with light. In this figure, the solid line is the spectrum of the reflected light of the light irradiating the human skin. The dotted line is the spectrum of the reflected light of the light irradiated to the silicon resin. The brightness indicates the intensity of the measured reflected light (indicates the degree of brightness).

この図において、1280nm近傍の波長域の光を肌に照射したときの反射光の輝度は、1180nm近傍および1500nm近傍の波長域の光を肌に照射したときの反射光の輝度より所定割合大きい。また、1180nm近傍の波長域の光を肌に照射したときの反射光の輝度は、1500nm近傍の波長域の光を肌に照射したときの反射光の輝度より所定割合大きい。生体検知装置1は、このような肌に特有の輝度スペクトルを利用して、1180nm近傍、1280nm近傍及び1500nm近傍の波長域の反射光のスペクトルの輝度を比較して顔の表面が肌である否かを検知する。 In this figure, the brightness of the reflected light when the skin is irradiated with light in the wavelength range near 1280 nm is a predetermined ratio higher than the brightness of the reflected light when the skin is irradiated with light in the wavelength ranges near 1180 nm and 1500 nm. Further, the brightness of the reflected light when the skin is irradiated with light in the wavelength range near 1180 nm is a predetermined ratio higher than the brightness of the reflected light when the light in the wavelength range near 1500 nm is irradiated on the skin. The biological detection device 1 uses such a brightness spectrum peculiar to the skin to compare the brightness of the spectrum of the reflected light in the wavelength regions of around 1180 nm, 1280 nm, and 1500 nm, and whether or not the surface of the face is skin. Is detected.

さらに、目視で肌と判別することが困難であるシリコン樹脂に対して、顔の表面が肌であることをより正確に検知できるように、肌とシリコン樹脂とでの反射光の輝度のスペクトルの相違を利用し、顔の表面が肌であるか否かを検知する。1180nm近傍の波長域の光をシリコン樹脂に照射したときの反射光の輝度は、1500nm近傍の波長域の光をシリコン樹脂に照射したときの反射光の輝度より小さい。これは、1180nm近傍の波長域でシリコン樹脂が光をよく吸収するため、反射光が弱まるからである。このため、シリコン樹脂の1180nm近傍と1500nm近傍との反射光の輝度の関係は、肌が示す関係とは異なる。従って、生体検知装置1は、1180nm近傍および1500nm近傍の肌とシリコン樹脂との反射光の輝度の関係の相違を利用して、顔の表面が肌であるかシリコン樹脂製のマスクで覆われているかを検知する。 Furthermore, for silicone resin, which is difficult to visually distinguish from skin, the luminance spectrum of the reflected light between the skin and the silicone resin can be detected more accurately so that the surface of the face is the skin. The difference is used to detect whether or not the surface of the face is skin. The brightness of the reflected light when the silicon resin is irradiated with light in the wavelength range near 1180 nm is smaller than the brightness of the reflected light when the light in the wavelength range near 1500 nm is irradiated on the silicon resin. This is because the silicon resin absorbs light well in the wavelength range near 1180 nm, so that the reflected light is weakened. Therefore, the relationship of the brightness of the reflected light between the vicinity of 1180 nm and the vicinity of 1500 nm of the silicone resin is different from the relationship shown by the skin. Therefore, in the biometric detection device 1, the surface of the face is covered with skin or a mask made of silicone resin by utilizing the difference in the brightness of the reflected light between the skin near 1180 nm and 1500 nm and the silicone resin. Is detected.

続いて、生体検知装置1の構成について説明する。生体検知装置1は、図2に示すように、照明部11と、撮像部12と、スピーカ13と、ディスプレイ14と、操作部15と、外部記憶装置16と、制御部17と、を備える。 Subsequently, the configuration of the biological detection device 1 will be described. As shown in FIG. 2, the biological detection device 1 includes an illumination unit 11, an imaging unit 12, a speaker 13, a display 14, an operation unit 15, an external storage device 16, and a control unit 17.

照明部11は、図3Aに示すように、各波長域の光源111(111A〜111C)と、光源111ごとのリレー112(112A〜112C)とを備え、制御部17からの指示に基づいて点灯、消灯が制御され、被写体である人物に光を照射する。光源111は、各波長域の赤外線LED(Light Emitting Diode)で構成される。光源111Aは1180nm近傍の赤外線を照射し、光源111Bは1280nm近傍の赤外線を照射し、光源111Cは1500nm近傍の赤外線を照射する。光源111(111A〜111C)が照射する光のスペクトルはそれぞれ、1180nm、1280nm、1500nmのピークを有し、半値幅が90nm程度の略正規分布である。なお、光源111として、赤外線LEDの代わりにハロゲン光源と各波長域の赤外線を透過するフィルタとを用いて、各波長域の赤外線を照射するようにしてもよい。リレー112は、制御部17からの指示に基づいて光源111への電力供給のオン・オフを制御する。 As shown in FIG. 3A, the illumination unit 11 includes a light source 111 (111A to 111C) in each wavelength range and a relay 112 (112A to 112C) for each light source 111, and lights up based on an instruction from the control unit 17. , The extinguishing is controlled, and the person who is the subject is irradiated with light. The light source 111 is composed of infrared LEDs (Light Emitting Diodes) in each wavelength range. The light source 111A irradiates infrared rays near 1180 nm, the light source 111B irradiates infrared rays near 1280 nm, and the light source 111C irradiates infrared rays near 1500 nm. The spectra of the light emitted by the light sources 111 (111A to 111C) have peaks of 1180 nm, 1280 nm, and 1500 nm, respectively, and have a substantially normal distribution with a half width of about 90 nm. As the light source 111, a halogen light source and a filter that transmits infrared rays in each wavelength range may be used instead of the infrared LED to irradiate infrared rays in each wavelength range. The relay 112 controls the on / off of the power supply to the light source 111 based on the instruction from the control unit 17.

撮像部12は、赤外線領域(1000nm〜1700nm)の波長域の画像を撮像するカメラであり、照明部11が照射した人物などの被写体を撮像する。撮像部12は、制御部17の制御の下、照明部11が1180nm近傍の赤外線を被写体に照射したタイミングで赤外線画像Aを撮像し、照明部11が1280nm近傍の赤外線を被写体に照射したタイミングで赤外線画像Bを撮像し、照明部11が1500nm近傍の赤外線を被写体に照射したタイミングで赤外線画像Cを撮像する。 The image pickup unit 12 is a camera that captures an image in a wavelength range of an infrared region (1000 nm to 1700 nm), and captures a subject such as a person illuminated by the illumination unit 11. Under the control of the control unit 17, the imaging unit 12 captures the infrared image A at the timing when the illumination unit 11 irradiates the subject with infrared rays near 1180 nm, and at the timing when the illumination unit 11 irradiates the subject with infrared rays near 1280 nm. The infrared image B is imaged, and the infrared image C is imaged at the timing when the illumination unit 11 irradiates the subject with infrared rays in the vicinity of 1500 nm.

ここで、撮像部12の構造について説明する。撮像部12は、図3Bに示すように、レンズ121と、シャッタ122と、CMOS(Complementary Metal-Oxide Semiconductor device)イメージセンサ123と、を備える。 Here, the structure of the imaging unit 12 will be described. As shown in FIG. 3B, the imaging unit 12 includes a lens 121, a shutter 122, and a CMOS (Complementary Metal-Oxide Semiconductor device) image sensor 123.

レンズ121は、入射された光を集光する。シャッタ122は、レンズ121に入射された光を撮影露光時間中のみ通過させ、それ以外の時間は光を遮る。また、CMOSイメージセンサ123は、レンズ121から入射した光を電気信号に変換することにより、対応する波長域の画像を作成する。具体的には、CMOSイメージセンサ123は、赤外線画像A〜Cを作成する。なお、CMOSイメージセンサ123の代わりにCCD(charge-coupled device)イメージセンサ等のイメージセンサを用いてもよい。 The lens 121 collects the incident light. The shutter 122 allows the light incident on the lens 121 to pass only during the shooting exposure time, and blocks the light at other times. Further, the CMOS image sensor 123 creates an image in the corresponding wavelength range by converting the light incident from the lens 121 into an electric signal. Specifically, the CMOS image sensor 123 creates infrared images A to C. An image sensor such as a CCD (charge-coupled device) image sensor may be used instead of the CMOS image sensor 123.

図2に戻り、スピーカ13は、制御部17の制御に基づいて、音声を出力する。ディスプレイ14は、制御部17の制御に基づいて、各種の情報を表示する。例えば、人物の顔の表面が肌でないことが検知された場合、制御部17の制御により、スピーカ13からはその旨を報知する警告音が出力され、ディスプレイ14には警告メッセージが表示される。 Returning to FIG. 2, the speaker 13 outputs sound based on the control of the control unit 17. The display 14 displays various information based on the control of the control unit 17. For example, when it is detected that the surface of a person's face is not skin, a warning sound for notifying the fact is output from the speaker 13 under the control of the control unit 17, and a warning message is displayed on the display 14.

操作部15は、各種のボタン等を備え、ユーザが操作した際に、その操作に対応した信号を制御部17に出力する。 The operation unit 15 includes various buttons and the like, and when the user operates the operation unit 15, outputs a signal corresponding to the operation to the control unit 17.

外部記憶装置16は、例えば、ハードディスクドライブ等であり、撮像部12が撮像した画像の一時的な記憶場所となったり、後述する生体検知処理で必要な各種のデータが記憶される。 The external storage device 16 is, for example, a hard disk drive or the like, and serves as a temporary storage place for images captured by the imaging unit 12, or stores various data required for biometric detection processing described later.

制御部17は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)などから構成され、生体検知装置1全体を制御する。制御部17における制御処理は、具体的には、CPUが、RAMを作業領域として使用して各種データを一時的に記憶させながら、ROMに記憶されている制御プログラムを実行することにより行われる。制御部17は、機能的には、撮像制御部170と、画像取得部171と、顔検出部172と、判定部173と、検知部174と、報知部175を備える。 The control unit 17 is composed of a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and controls the entire biological detection device 1. Specifically, the control process in the control unit 17 is performed by the CPU executing a control program stored in the ROM while temporarily storing various data using the RAM as a work area. The control unit 17 functionally includes an image pickup control unit 170, an image acquisition unit 171, a face detection unit 172, a determination unit 173, a detection unit 174, and a notification unit 175.

撮像制御部170は、照明部11の点灯・消灯や撮像部12の撮像動作を制御する。画像取得部171は、被写体の各波長域の画像(赤外線画像A〜C)を取得する。 The image pickup control unit 170 controls the lighting / extinguishing of the illumination unit 11 and the image pickup operation of the image pickup unit 12. The image acquisition unit 171 acquires images (infrared images A to C) of each wavelength range of the subject.

顔検出部172は、撮像部12が撮像した画像を解析して、人物の顔領域を検出する。そして、顔検出部172は、顔領域から、顔特徴量(目、鼻、口等)の近傍に有り、肌の露出面積が比較的広い部分として、額領域と右頬領域と左頬領域とを検出する。
なお、撮像部12は、同一地点から異なるタイミングで人物の赤外線画像A〜Cを撮像する。このため、撮像部12が、静止した被写体(例えば、人物の顔)を撮影した場合、各赤外線画像A〜Cの画素位置のずれは生じない。しかし、撮像部12が、動いている被写体(例えば、人物の顔)を撮影した場合、顔検出部172が赤外線画像Aから検出した各領域と、異なるタイミングで撮像された他の画像(赤外線画像BおよびC)の各領域とは、画素位置のずれが生じる。この場合は、赤外線画像BおよびCの画像のずれを補正する必要がある。赤外線画像BおよびCの画像のずれを補正する方法は、時間差による画像のずれを適切に補正できる方法であれば特に限定されない。例えば、赤外線画像BおよびCに撮像された顔領域の顔特徴領域が赤外線画像Aに撮像された顔領域の顔特徴領域とずれている方向と長さをそれぞれ計測し、赤外線画像BおよびCに撮像された顔領域を、ずれた長さをずれている方向と逆向きにずらして補正する。
The face detection unit 172 analyzes the image captured by the image pickup unit 12 to detect the face region of the person. The face detection unit 172 is located in the vicinity of the facial features (eyes, nose, mouth, etc.) from the face region, and has a relatively wide exposed area of the skin, such as a forehead region, a right cheek region, and a left cheek region. Is detected.
The imaging unit 12 captures infrared images A to C of a person from the same point at different timings. Therefore, when the imaging unit 12 captures a stationary subject (for example, the face of a person), the pixel positions of the infrared images A to C do not shift. However, when the imaging unit 12 captures a moving subject (for example, the face of a person), each region detected by the face detection unit 172 from the infrared image A and another image (infrared image) captured at different timings. The pixel position deviates from each region of B and C). In this case, it is necessary to correct the deviation of the infrared images B and C. The method for correcting the image shift of the infrared images B and C is not particularly limited as long as the method can appropriately correct the image shift due to the time difference. For example, the direction and length in which the facial feature region of the face region captured by the infrared images B and C deviates from the facial feature region of the face region captured by the infrared image A are measured, and the infrared images B and C are used. The imaged face area is corrected by shifting the shifted length in the direction opposite to the shifted direction.

なお、顔検出部172による各領域の検知は、公知の検知手法が採用可能である。
例えば、顔検出部172は、赤外線画像Aにソーベルフィルタ処理を施して輪郭線を検出し、顔輪郭のパターンマッチングによって顔輪郭を抽出する。そして、顔検出部172は、抽出した顔輪郭の範囲で、上から眉の輪郭線、下から口下の輪郭線を検出し、顔の左右端、および、眉上、口下位置とで囲まれる領域を顔領域として検出する。そして、顔検出部172は、検出した顔領域のうちから、眼球に相当する黒点を目の位置として検出し、顔領域と目の位置から、一般的な顔の統計的データに基づいて、額領域、右頬領域、左頬領域を特定すればよい。なお、顔検出部172は、目、鼻、口等の顔の特徴量を公知の手法により検知し、これらの特徴量が検知された際に、その近傍の領域を額領域、右頬領域、左頬領域として特定してもよい。
A known detection method can be adopted for the detection of each region by the face detection unit 172.
For example, the face detection unit 172 applies a Sobel filter process to the infrared image A to detect a contour line, and extracts the face contour by pattern matching of the face contour. Then, the face detection unit 172 detects the contour line of the eyebrows from the top and the contour line of the mouth from the bottom within the range of the extracted face contour, and surrounds the left and right edges of the face, and the positions above and below the eyebrows. The area to be detected is detected as a face area. Then, the face detection unit 172 detects the black spot corresponding to the eyeball as the eye position from the detected face area, and from the face area and the eye position, the forehead is based on general facial statistical data. The region, the right cheek region, and the left cheek region may be specified. The face detection unit 172 detects facial features such as eyes, nose, and mouth by a known method, and when these features are detected, the areas in the vicinity thereof are the forehead area, the right cheek area, and the like. It may be specified as the left cheek area.

ここで、上述した顔検出部172の処理について、具体例を挙げて説明する。例えば、顔検出部172の処理対象として、図4Aに示すような赤外線画像Aが与えられた場合を考える。この場合、顔検出部172は、図4Bに示すように、顔領域R1を検出する。また、顔検出部172は、顔領域R1から、額領域R2と右頬領域R3と左頬領域R4とを検出する。 Here, the processing of the face detection unit 172 described above will be described with reference to specific examples. For example, consider a case where an infrared image A as shown in FIG. 4A is given as a processing target of the face detection unit 172. In this case, the face detection unit 172 detects the face region R1 as shown in FIG. 4B. Further, the face detection unit 172 detects the forehead region R2, the right cheek region R3, and the left cheek region R4 from the face region R1.

図2に戻り、判定部173は、赤外線画像A〜Cの間で、顔検出部172が特定した各領域(額領域、右頬領域、左頬領域)の輝度が、図1の斜線で示した各波長域の肌が示す関係を満たすか否かを判別する。 Returning to FIG. 2, in the determination unit 173, the brightness of each region (forehead region, right cheek region, left cheek region) specified by the face detection unit 172 between the infrared images A to C is indicated by the diagonal line in FIG. It is determined whether or not the relationship indicated by the skin in each wavelength range is satisfied.

検知部174は、判定部173の判定結果から、人物の顔の表面が肌であるか否かを検知する。報知部175は、検知部174が顔の表面が肌でないと判定した場合に、スピーカ13やディスプレイ14を制御して、その旨を報知する。 The detection unit 174 detects whether or not the surface of the person's face is skin from the determination result of the determination unit 173. When the detection unit 174 determines that the surface of the face is not skin, the notification unit 175 controls the speaker 13 and the display 14 to notify the fact.

続いて、生体検知装置1によって実行される生体検知処理について説明する。入国審査場の係員は、入国者である人物を入国ゲート近辺に設置してある生体検知装置1の撮像部12の画角内に誘導する。この際、係員は、生体検知装置1の操作部15を介して、処理の開始を指示する操作を行う。この操作に応答して、生体検知装置1の制御部17は、図5のフローチャートに示す生体検知処理を実行する。 Subsequently, the biological detection process executed by the biological detection device 1 will be described. The immigration officer guides the immigrant person into the angle of view of the imaging unit 12 of the biological detection device 1 installed near the immigration gate. At this time, the clerk performs an operation of instructing the start of the process via the operation unit 15 of the biological detection device 1. In response to this operation, the control unit 17 of the biological detection device 1 executes the biological detection process shown in the flowchart of FIG.

なお、生体検知装置1に人感センサを備えさせ、人感センサが入国者を検知した際に、生体検知処理を実行してもよい。あるいは、撮像部12をライブビュー状態にしておき、制御部17が、人物が写ったと判定すると自動的に生体検知処理を実行してもよい。
また、変装マスクを被っているような人物の場合、撮像部12のレンズ等を見ると警戒する虞もあるため、例えば、撮像部12の前にマジックミラーなどを設置しておき、気付かれないように撮像して生体検知処理を開始してもよい。
The biodetection device 1 may be provided with a motion sensor, and when the motion sensor detects an immigrant, the biodetection process may be executed. Alternatively, the imaging unit 12 may be set to the live view state, and when the control unit 17 determines that a person has been photographed, the biological detection process may be automatically executed.
Further, in the case of a person wearing a disguise mask, there is a risk of being wary when looking at the lens or the like of the imaging unit 12, so for example, a magic mirror or the like is installed in front of the imaging unit 12 so that the person is not noticed. The biometric detection process may be started by taking an image as described above.

図5の生体検知処理において、まず、撮像制御部170は、照明部11の光源111(111A〜111C)を点灯させるとともに、撮像部12を制御する。画像取得部171は、人物の各波長域の画像(赤外線画像A〜C)を取得する(ステップS11)。 In the biological detection process of FIG. 5, first, the image pickup control unit 170 turns on the light sources 111 (111A to 111C) of the illumination unit 11 and controls the image pickup unit 12. The image acquisition unit 171 acquires images (infrared images A to C) of each wavelength range of the person (step S11).

ここで、画像取得処理の詳細について図6のフローチャートを参照して説明する。 Here, the details of the image acquisition process will be described with reference to the flowchart of FIG.

まず、撮像制御部170は、今回の画像取得処理で未選択の光源111A〜111Cのうちから1つを選択する(ステップS111)。以下、ステップS111で選択した光源111を選択した光源111とも表記する。 First, the image pickup control unit 170 selects one of the light sources 111A to 111C that have not been selected in the image acquisition process this time (step S111). Hereinafter, the light source 111 selected in step S111 is also referred to as the selected light source 111.

続いて、撮像制御部170は、選択した光源111に対応するリレー112に対して電力供給するように指示をし、選択した光源111を点灯させる(ステップS112)。これにより、選択した光源111の波長域の光は、被写体に照射される。 Subsequently, the image pickup control unit 170 instructs the relay 112 corresponding to the selected light source 111 to supply electric power, and turns on the selected light source 111 (step S112). As a result, the light in the wavelength range of the selected light source 111 is applied to the subject.

続いて、画像取得部171は、選択した光源111から光が照射された被写体の赤外線画像を撮像する(ステップS113)。詳細には、シャッタ122を露光時間だけ開放し、レンズ121から入射した光をCMOSイメージセンサ123に通過させる。CMOSイメージセンサ123は、入射した光を電気信号に変換することにより、対応する波長域の画像を作成する。この撮像処理では、具体的には、選択された光源111からの光が照射された被写体の赤外線画像が得られる。赤外線画像の撮像が終了したら、撮像制御部170は、選択した光源111に対応するリレー112に対して電力供給を止めるよう指示をし、選択した光源111を消灯させる(ステップS114)。 Subsequently, the image acquisition unit 171 acquires an infrared image of the subject irradiated with light from the selected light source 111 (step S113). Specifically, the shutter 122 is opened for the exposure time, and the light incident from the lens 121 is passed through the CMOS image sensor 123. The CMOS image sensor 123 creates an image in the corresponding wavelength range by converting the incident light into an electric signal. Specifically, in this imaging process, an infrared image of the subject irradiated with the light from the selected light source 111 is obtained. When the imaging of the infrared image is completed, the imaging control unit 170 instructs the relay 112 corresponding to the selected light source 111 to stop the power supply, and turns off the selected light source 111 (step S114).

続いて、撮像制御部170は、画像取得処理で、光源111A〜111Cの全てを選択したか否かを判別する(ステップS115)。 Subsequently, the image pickup control unit 170 determines whether or not all of the light sources 111A to 111C are selected in the image acquisition process (step S115).

光源111A〜111Cの全てを選択していない場合(ステップS115;No)、ステップS111に処理は戻り、撮像制御部170は、未選択の光源111A〜111Cを選択して、選択された光源111からの光が照射された被写体を撮像する一連の処理を繰り返す。 If all of the light sources 111A to 111C are not selected (step S115; No), the process returns to step S111, and the imaging control unit 170 selects the unselected light sources 111A to 111C from the selected light sources 111. A series of processes for photographing the subject irradiated with the light of the above are repeated.

一方、光源111A〜111Cの全てを選択した場合(ステップS115;Yes)、撮像制御部170は、ステップS11を終了する。 On the other hand, when all of the light sources 111A to 111C are selected (step S115; Yes), the image pickup control unit 170 ends step S11.

撮像制御部170がステップS11を行うことにより、1180nm近傍の波長域の光が照射された被写体が写る赤外線画像Aと、1280nm近傍の波長域の光が照射された被写体が写る赤外線画像Bと、1500nm近傍の波長域の光が照射された被写体が写る赤外線画像Cとが得られる。 When the image pickup control unit 170 performs step S11, an infrared image A in which a subject irradiated with light in a wavelength range near 1180 nm is captured, and an infrared image B in which a subject irradiated with light in a wavelength range near 1280 nm is captured. An infrared image C in which a subject irradiated with light in a wavelength range near 1500 nm is captured can be obtained.

図5に戻り、続いて、顔検出部172は、取得した赤外線画像A〜Cから、顔領域を検出するとともに、顔領域から額領域、右頬領域、左頬領域を検出する(ステップS12)。また、赤外線画像A〜Cは、異なるタイミングで撮像されているため、赤外線画像A〜C間で被写体(人物)がずれて写ることがある。赤外線画像A〜B間で被写体がずれて写っている場合は、時間差による画像のずれを適切に補正できる方法で、被写体のずれを修正する。 Returning to FIG. 5, the face detection unit 172 subsequently detects the face region from the acquired infrared images A to C, and also detects the forehead region, the right cheek region, and the left cheek region from the face region (step S12). .. Further, since the infrared images A to C are captured at different timings, the subject (person) may be displaced between the infrared images A to C. When the subject is misaligned between the infrared images A and B, the misalignment of the subject is corrected by a method capable of appropriately correcting the misalignment of the image due to the time difference.

続いて、判定部173は、ステップS11で取得した赤外線画像A〜Cの間で各領域(額領域、右頬領域、左頬領域)の輝度を比較することにより、人物の顔の表面が肌であるか否かを判定する生体判定処理を実行する(ステップS13)。 Subsequently, the determination unit 173 compares the brightness of each region (forehead region, right cheek region, left cheek region) between the infrared images A to C acquired in step S11, so that the surface of the person's face is skinned. A biological determination process for determining whether or not the above is performed (step S13).

ここで、生体判定処理の詳細について、図7のフローチャートを参照して説明する。 Here, the details of the biological determination process will be described with reference to the flowchart of FIG. 7.

まず、判定部173は、検出した額領域、右頬領域、左頬領域のうちから今回の生体判定処理で未選択の領域を1つ選択する(ステップS131)。以下、ステップS131で選択した領域を選択領域とも表記する。 First, the determination unit 173 selects one unselected region in the current biological determination process from the detected forehead region, right cheek region, and left cheek region (step S131). Hereinafter, the area selected in step S131 is also referred to as a selection area.

続いて、判定部173は、赤外線画像A〜Cのそれぞれについて、選択領域から1つの画素(例えば、選択領域の中心の画素)を選択し、その画素の輝度を測定する(ステップS132)。 Subsequently, the determination unit 173 selects one pixel (for example, the pixel at the center of the selection region) from the selection region for each of the infrared images A to C, and measures the brightness of that pixel (step S132).

続いて、判定部173は、赤外線画像A〜C間で、測定した輝度が、肌が示す関係を満たすか否かを判別する(ステップS133)。具体的には、判定部173は、赤外線画像Cから測定した輝度が、赤外線画像Aおよび赤外線画像Bから測定した輝度よりも所定割合低いか否かを判別する。これにより、人の肌と、図1に示す1180nm近傍の輝度が1500nm近傍の輝度より小さいシリコン樹脂と、を判別することが可能となる。 Subsequently, the determination unit 173 determines whether or not the measured luminance satisfies the relationship indicated by the skin between the infrared images A to C (step S133). Specifically, the determination unit 173 determines whether or not the brightness measured from the infrared image C is a predetermined ratio lower than the brightness measured from the infrared image A and the infrared image B. This makes it possible to distinguish between human skin and the silicone resin whose brightness near 1180 nm shown in FIG. 1 is smaller than the brightness near 1500 nm.

なお、より具体的には、ステップS133で判定部173は、以下の関係式(1)〜(3)を全て満たすか否かを判別すればよい。なお、関係式(1)〜(3)において、IAは赤外線画像Aから測定した輝度、IBは赤外線画像Bから測定した輝度、ICは赤外線画像Cから測定した輝度を示す。また、T1〜T3は係数であり、撮像条件等から生体検知に最適な数値が予め設定されている。
(1)IA>IC×T1
(2)IB>IC×T2
(3)IB>IA×T3
上記関係式(1)および(2)を満たせば、赤外線画像Cから測定した輝度が、赤外線画像Aおよび赤外線画像Bから測定した輝度よりも所定割合低いことになる。また、上記関係式(3)を満たせば、赤外線画像Aから測定した輝度が、赤外線画像Bから測定した輝度よりも所定割合低いことになる。
More specifically, in step S133, the determination unit 173 may determine whether or not all of the following relational expressions (1) to (3) are satisfied. In the relational expressions (1) to (3), IA indicates the brightness measured from the infrared image A, IB indicates the brightness measured from the infrared image B, and IC indicates the brightness measured from the infrared image C. Further, T1 to T3 are coefficients, and the optimum numerical values for biological detection are set in advance from the imaging conditions and the like.
(1) IA> IC × T1
(2) IB> IC × T2
(3) IB> IA × T3
If the above relational expressions (1) and (2) are satisfied, the brightness measured from the infrared image C is a predetermined ratio lower than the brightness measured from the infrared image A and the infrared image B. Further, if the above relational expression (3) is satisfied, the brightness measured from the infrared image A is lower than the brightness measured from the infrared image B by a predetermined ratio.

測定した輝度が、肌が示す関係を満たすと判別した場合(ステップS133;Yes)、判定部173は、赤外線画像A〜Cのそれぞれについて、ステップS132で測定した画素の周囲の8つの各画素の輝度を測定する(ステップS134)。 When it is determined that the measured luminance satisfies the relationship indicated by the skin (step S133; Yes), the determination unit 173 determines that each of the eight pixels around the pixel measured in step S132 for each of the infrared images A to C. The brightness is measured (step S134).

続いて、判定部173は、周囲の画素の全てにおいても、赤外線画像A〜C間で、測定した輝度が、肌が示す関係を満たすか否かを判別する(ステップS135)。 Subsequently, the determination unit 173 determines whether or not the measured luminance satisfies the relationship indicated by the skin between the infrared images A to C in all the surrounding pixels (step S135).

周囲の画素においても輝度が、肌が示す関係を満たすと判別した場合(ステップS135;Yes)、判定部173は、人物の顔の表面が肌であると判定し(ステップS136)、生体判定処理は終了する。なお、上述した生体判定処理では、選択領域(額、右頬、左頬)の何れか一つの領域で1つの画素およびその周囲の8画素全てが、肌が示す関係を満たせば顔の表面が肌であると判定した。その理由は、通常変装マスクは顔全部を覆い隠すように被ることから、選択領域のうち何れか一つでも顔の表面が肌であることが分かれば、他の選択領域について生体判定処理を行わずとも変装マスクを被っていると判定できるからである。 When it is determined that the brightness of the surrounding pixels also satisfies the relationship indicated by the skin (step S135; Yes), the determination unit 173 determines that the surface of the person's face is the skin (step S136), and the biological determination process is performed. Is finished. In the biometric determination process described above, if one pixel in any one of the selected areas (forehead, right cheek, left cheek) and all eight pixels around it satisfy the relationship indicated by the skin, the surface of the face will be affected. It was judged to be skin. The reason is that the disguise mask is usually worn so as to cover the entire face, so if it is found that the surface of the face is skin in any one of the selected areas, the biometric judgment process is performed on the other selected areas. This is because it can be determined that the person is wearing a disguise mask.

一方、選択領域の1つの画素で輝度が、肌が示す関係を満たしていないと判別した場合(ステップS133;No)、又は、その周囲の画素で輝度が、肌が示す関係を満たしていないと判別した場合(ステップS135;No)、判定部173は、生体判定処理で、額領域、右頬領域、左頬領域の全てを選択したか否かを判別する(ステップS137)。 On the other hand, when it is determined that the brightness of one pixel in the selected area does not satisfy the relationship indicated by the skin (step S133; No), or the brightness of the surrounding pixels does not satisfy the relationship indicated by the skin. When the determination is made (step S135; No), the determination unit 173 determines whether or not all of the forehead region, the right cheek region, and the left cheek region are selected in the biological determination process (step S137).

額領域、右頬領域、左頬領域の全てを選択していない場合(ステップS137;No)、ステップS131に処理は戻り、判定部173は、未選択の領域を選択して、その領域の画素の輝度が、肌が示す関係を満たすか否かを判別して顔の表面が肌であるか否かを判定する一連の処理を繰り返す。 When all of the forehead area, the right cheek area, and the left cheek area are not selected (step S137; No), the process returns to step S131, and the determination unit 173 selects an unselected area and pixels in that area. A series of processes for determining whether or not the brightness of the skin satisfies the relationship indicated by the skin and determining whether or not the surface of the face is the skin are repeated.

一方、額領域、右頬領域、左頬領域の全てを選択した場合(ステップS137;Yes)、検知部174は、人物の顔の表面が肌でないと検知し(ステップS138)、生体判定処理は終了する。 On the other hand, when all of the forehead area, the right cheek area, and the left cheek area are selected (step S137; Yes), the detection unit 174 detects that the surface of the person's face is not skin (step S138), and the biological determination process is performed. finish.

図5に戻り、生体判定処理(ステップS13)が終了すると、検知部174は、生体判定処理で顔の表面が肌であると判定されたか否かを検知する(ステップS14)。顔の表面が肌である場合(ステップS14;Yes)、生体検知処理は終了する。 Returning to FIG. 5, when the biological determination process (step S13) is completed, the detection unit 174 detects whether or not the surface of the face is determined to be skin by the biological determination process (step S14). When the surface of the face is skin (step S14; Yes), the biological detection process ends.

一方、顔の表面が肌でない場合(ステップS14;No)、報知部175は、スピーカ13およびディスプレイ14を制御して、その旨を報知する(ステップS15)。これにより、係員は、入国ゲートを通過しようとする人物の変装を見破ることができ、不法入国を防ぐことが可能となる。以上で生体検知処理は終了する。 On the other hand, when the surface of the face is not skin (step S14; No), the notification unit 175 controls the speaker 13 and the display 14 to notify the fact (step S15). This allows the staff to detect the disguise of a person trying to pass through the immigration gate and prevent illegal immigration. This completes the biometric detection process.

このように、実施形態1に係る生体検知装置1は、複数の異なる波長域を照射した人物の画像を取得(撮像)し、取得した画像間での顔領域の輝度が、肌が示す関係を満たす場合に、人物の顔の表面が肌であると判別する。これにより、人の肌と、人の肌以外のもの(例えば、シリコン樹脂)とでの反射光の輝度のスペクトルの相違を利用し、高い精度で人の顔の表面が肌であるか否かの検知が可能となる。 As described above, the biological detection device 1 according to the first embodiment acquires (imaging) an image of a person irradiated with a plurality of different wavelength ranges, and the relationship between the acquired images and the brightness of the face region indicated by the skin. When it is satisfied, it is determined that the surface of the person's face is skin. This makes use of the difference in the brightness spectrum of the reflected light between human skin and something other than human skin (for example, silicone resin), and whether or not the surface of the human face is skin with high accuracy. Can be detected.

また、実施形態1に係る生体検知装置1によれば、取得した画像の顔領域から肌の露出面積が比較的広い特徴領域(額領域、右頬領域、左頬領域)を検出し、特徴領域の輝度を用いて人の顔の表面が肌であるかの検知を行う。そのため、全ての顔領域について生体判定処理を行わなくて済むので生体検知の処理にかかる負荷が小さくなる。 Further, according to the biological detection device 1 according to the first embodiment, a characteristic region (forehead region, right cheek region, left cheek region) having a relatively wide exposed skin area is detected from the face region of the acquired image, and the characteristic region is detected. The brightness of is used to detect whether the surface of a person's face is skin. Therefore, it is not necessary to perform the biological determination process on all the face regions, so that the load on the biological detection process is reduced.

また、実施形態1に係る生体検知装置1によれば、1つの画素の輝度だけでなく、その画素の周囲の画素の輝度も用いて、顔の表面が肌であるか否かを判別する。そのため、より高い精度で顔の表面が肌であるかの検知が可能となる。 Further, according to the biological detection device 1 according to the first embodiment, it is determined whether or not the surface of the face is skin by using not only the brightness of one pixel but also the brightness of the pixels around the pixel. Therefore, it is possible to detect whether the surface of the face is skin with higher accuracy.

また、実施形態1に係る生体検知装置1によれば、赤外線画像A〜Cのみを用いて顔の表面が肌であるか検知するため、比較的小さい負荷での顔の表面が肌であるかの検知が可能となる。 Further, according to the biological detection device 1 according to the first embodiment, since it is detected whether the surface of the face is the skin using only the infrared images A to C, whether the surface of the face is the skin with a relatively small load. Can be detected.

また、実施形態1に係る生体検知装置1の備える照明部11は、赤外線LEDの光源を用いているため、それぞれの波長域の中心波長にピークを有する赤外線を十分な光量で照射することができる。このため、高い精度で顔の表面が肌であるか否かの検知が可能となる。また、遠赤外線の放出が抑えられるため、被写体に放射熱が伝達されにくい。このため、変装して入国ゲートを通過しようとしている人が、放射熱により生体検知装置1の存在を察知することを防ぐことができる。 Further, since the illumination unit 11 included in the biological detection device 1 according to the first embodiment uses an infrared LED light source, it is possible to irradiate infrared rays having a peak at the center wavelength of each wavelength range with a sufficient amount of light. .. Therefore, it is possible to detect whether or not the surface of the face is skin with high accuracy. In addition, since the emission of far infrared rays is suppressed, it is difficult for radiant heat to be transmitted to the subject. Therefore, it is possible to prevent a person who is disguised and trying to pass through the immigration gate from detecting the existence of the biological detection device 1 by radiant heat.

また、実施形態1に係る生体検知装置1の備える撮像部12は、赤外線領域(1000nm〜1700nm)の画像を撮像する赤外線カメラを用いることができる。このため、撮像部12は、一組のレンズ121と、シャッタ122と、CMOSイメージセンサ123と、から構成されるカメラを用いることができ、分光ミラーや波長域ごとのCMOSイメージセンサやフィルタを省くことができる。従って、撮像部12のサイズを小さくすることが可能であり、また、撮像部12のコストを抑えることができる。 Further, as the imaging unit 12 included in the biological detection device 1 according to the first embodiment, an infrared camera that captures an image in an infrared region (1000 nm to 1700 nm) can be used. Therefore, the imaging unit 12 can use a camera including a set of lenses 121, a shutter 122, and a CMOS image sensor 123, omitting a spectroscopic mirror, a CMOS image sensor for each wavelength range, and a filter. be able to. Therefore, the size of the imaging unit 12 can be reduced, and the cost of the imaging unit 12 can be suppressed.

また、実施形態1に係る生体検知装置1は、照明部11が照射した波長域ごとに撮像部12が赤外線画像A〜Cを撮像する。このため、3枚の赤外線画像を撮像する時間で赤外線画像A〜Cを得ることがでる。従って、短時間で赤外線画像A〜Cを得ることができる。具体的には、1枚の撮像時間を約0.15秒とすると、赤外線画像A〜Cは約0.5秒以内に得ることができる。 Further, in the biological detection device 1 according to the first embodiment, the imaging unit 12 captures infrared images A to C for each wavelength range irradiated by the illumination unit 11. Therefore, infrared images A to C can be obtained in the time required to capture three infrared images. Therefore, infrared images A to C can be obtained in a short time. Specifically, assuming that the imaging time of one image is about 0.15 seconds, infrared images A to C can be obtained within about 0.5 seconds.

一方、赤外線画像A〜Cと同様の赤外線画像は、ハロゲンランプなどの赤外線波長域の光を被写体に照射し、ハイパースペクトルカメラ等を用いても撮像することができる。しかし、ハイパースペクトルカメラで赤外線画像を撮像するためには、撮像時間が長いため、入国ゲートでの審査の効率が低下する虞がある。また、ハイパースペクトルカメラは、分光ミラーや波長域ごとのCMOSイメージセンサやフィルタ必要であるため、高価であり、また、カメラのサイズの小型化も困難である。また、光源にハロゲンランプを用いるため、ハロゲンランプから放出される放射熱により、変装して入国ゲートを通過しようとしている人が、放射熱により生体検知装置の存在を察知する虞がある。 On the other hand, the infrared images similar to the infrared images A to C can be captured by irradiating the subject with light in the infrared wavelength range such as a halogen lamp and using a hyperspectral camera or the like. However, in order to capture an infrared image with a hyperspectral camera, the imaging time is long, so there is a risk that the efficiency of examination at the immigration gate will decrease. Further, the hyperspectral camera is expensive because it requires a spectroscopic mirror and a CMOS image sensor and a filter for each wavelength range, and it is difficult to reduce the size of the camera. Further, since a halogen lamp is used as a light source, a person who is trying to pass through the immigration gate in disguise due to the radiant heat emitted from the halogen lamp may detect the existence of the biological detection device by the radiant heat.

(実施形態2)
続いて、実施形態2に係る生体検知装置2について説明する。なお、図3に示すように、生体検知装置2の各部の構成は、実施形態1に係る生体検知装置1と実施的に同じであり、生体判定処理の内容のみが異なる。
(Embodiment 2)
Subsequently, the biological detection device 2 according to the second embodiment will be described. As shown in FIG. 3, the configuration of each part of the biological detection device 2 is practically the same as that of the biological detection device 1 according to the first embodiment, and only the content of the biological determination process is different.

生体検知装置2が実行する生体判定処理について、図8のフローチャートを用いて説明する。なお、図7に示した生体判定処理と実質的に同内容のステップについては、適宜説明を簡略化する。また、図8の生体判定処理の開始タイミングは、図7と同じである。 The biological determination process executed by the biological detection device 2 will be described with reference to the flowchart of FIG. The description of the steps having substantially the same contents as the biological determination process shown in FIG. 7 will be simplified as appropriate. The start timing of the biological determination process in FIG. 8 is the same as that in FIG.

生体判定処理が開始されると、まず、判定部173は、検出した額領域、右頬領域、左頬領域のうちから未選択の領域を選択し(ステップS201)、赤外線画像A〜Cのそれぞれについて、選択領域から1つの画素を選択し、その画素の輝度を測定し(ステップS202)、赤外線画像A〜C間で、測定した輝度が、肌が示す関係を満たすか否かを判別する(ステップS203)。 When the biometric determination process is started, the determination unit 173 first selects an unselected area from the detected forehead area, right cheek area, and left cheek area (step S201), and each of the infrared images A to C. One pixel is selected from the selected area, the brightness of the pixel is measured (step S202), and it is determined whether or not the measured brightness satisfies the relationship indicated by the skin between the infrared images A to C (step S202). Step S203).

赤外線画像A〜C間で、輝度が、肌が示す関係を満たしていると判別した場合(ステップS203;Yes)、判定部173は、その選択領域の生体判定用のスコアを0と算出し(ステップS204)、ステップS206に処理は移る。 When it is determined that the brightness satisfies the relationship indicated by the skin between the infrared images A to C (step S203; Yes), the determination unit 173 calculates the score for biological determination in the selected region as 0 (step S203; Yes). Step S204), the process proceeds to step S206.

一方、赤外線画像A〜C間で、輝度が、肌が示す関係を満たしていないと判別した場合(ステップS203;No)、判定部173は、赤外線画像A〜Cのそれぞれについて、ステップS202で測定した画素の周囲の各画素(例えば、測定した画素に隣接する8つの画素)の輝度を測定する。そして、判定部173は、周囲の各画素のうち、赤外線画像A〜C間の輝度が、肌が示す関係を満たさない割合を、その選択領域のスコアとして算出し(ステップS205)、ステップS206に処理は移る。例えば、周囲の8つの画素全てで赤外線画像A〜C間の輝度が、肌が示す関係を満たさない場合、スコアは1(8/8)と算出される。また、周囲の8つの画素のうち2つの画素で赤外線画像A〜C間の輝度が、肌が示す関係を満たさない場合、スコアは0.25(2/8)と算出される。 On the other hand, when it is determined that the brightness does not satisfy the relationship indicated by the skin between the infrared images A to C (step S203; No), the determination unit 173 measures each of the infrared images A to C in step S202. The brightness of each pixel (for example, eight pixels adjacent to the measured pixel) around the pixel is measured. Then, the determination unit 173 calculates the ratio of the brightness between the infrared images A to C that does not satisfy the relationship indicated by the skin among the surrounding pixels as the score of the selected region (step S205), and in step S206. Processing moves. For example, if the brightness between the infrared images A to C in all eight surrounding pixels does not satisfy the relationship indicated by the skin, the score is calculated as 1 (8/8). Further, when the brightness between the infrared images A to C in two of the eight surrounding pixels does not satisfy the relationship indicated by the skin, the score is calculated to be 0.25 (2/8).

ステップS206で、判定部173は、額領域、右頬領域、左頬領域の全てを選択したか否かを判別する。額領域、右頬領域、左頬領域の全てを選択していない場合(ステップS206;No)、ステップS201に処理は戻る。 In step S206, the determination unit 173 determines whether or not all of the forehead region, the right cheek region, and the left cheek region have been selected. If all of the forehead area, the right cheek area, and the left cheek area are not selected (step S206; No), the process returns to step S201.

額領域、右頬領域、左頬領域の全てを選択した場合(ステップS206;Yes)、判定部173は、これらの各領域で算出したスコアの平均を最終スコアとして算出する(ステップS207)。そして、判定部173は、最終スコアが所定の閾値(例えば、0.5)以上であるか否かを判別する(ステップS208)。 When all of the forehead region, the right cheek region, and the left cheek region are selected (step S206; Yes), the determination unit 173 calculates the average of the scores calculated in each of these regions as the final score (step S207). Then, the determination unit 173 determines whether or not the final score is equal to or higher than a predetermined threshold value (for example, 0.5) (step S208).

最終スコアが閾値以上である場合(ステップS208;Yes)、検知部174は、人物の顔の表面が肌でないと検知する(ステップS209)。一方、最終スコアが閾値未満である場合(ステップS208;No)、判定部は、人物の顔の表面が肌であると判定する(ステップS210)。以上で生体判定処理は終了する。 When the final score is equal to or higher than the threshold value (step S208; Yes), the detection unit 174 detects that the surface of the person's face is not skin (step S209). On the other hand, when the final score is less than the threshold value (step S208; No), the determination unit determines that the surface of the person's face is skin (step S210). This completes the biological determination process.

このように、実施形態2の生体判定処理では、額領域、右頬領域、左頬領域のそれぞれから生体判定用のスコアを算出して、顔の表面が肌であるか否かを判定する。そのため、各領域(頬領域、右頬領域、左頬領域)の何れか1つで輝度が、生体が関係を満たさない場合に、顔の表面が肌でないと即時に判定する実施形態1の生体判定処理よりも、精度よく顔の表面が肌であるかを検知することが可能となる。 As described above, in the biological determination process of the second embodiment, the score for biological determination is calculated from each of the forehead region, the right cheek region, and the left cheek region, and it is determined whether or not the surface of the face is skin. Therefore, when the brightness in any one of the regions (cheek region, right cheek region, left cheek region) does not satisfy the relationship with the living body, the living body of the first embodiment immediately determines that the surface of the face is not skin. It is possible to detect whether the surface of the face is skin more accurately than the determination process.

(実施形態3)
続いて、実施形態3に係る生体検知装置3について説明する。なお、図2に示すように、生体検知装置3の各部の構成は、実施形態1、2に係る生体検知装置1、2と実質的に同じであり、生体判定処理の内容のみが異なる。
(Embodiment 3)
Subsequently, the biological detection device 3 according to the third embodiment will be described. As shown in FIG. 2, the configuration of each part of the biological detection device 3 is substantially the same as that of the biological detection devices 1 and 2 according to the first and second embodiments, and only the content of the biological determination process is different.

生体検知装置3が実行する生体判定処理について、図9のフローチャートを用いて説明する。なお、図7に示した生体判定処理と実質的に同内容のステップについては、適宜説明を簡略化する。また、図9の生体判定処理の開始タイミングは、図7と同じである。 The biological determination process executed by the biological detection device 3 will be described with reference to the flowchart of FIG. The description of the steps having substantially the same contents as the biological determination process shown in FIG. 7 will be simplified as appropriate. Further, the start timing of the biological determination process in FIG. 9 is the same as that in FIG.

生体判定処理が開始されると、まず、判定部173は、生体の判定用に利用する生体候補カウンタと非生体候補カウンタとを0に初期化する(ステップS301)。 When the biological determination process is started, the determination unit 173 first initializes the biological candidate counter and the non-biological candidate counter used for determining the biological body to 0 (step S301).

続いて、判定部173は、額領域、右頬領域、左頬領域のうちから1つ選択する(ステップS302)。そして、判定部173は、選択領域から、未選択の画素を1つ選択する(ステップS303)。以下、ステップS303で選択した画素を選択画素とも表記する。 Subsequently, the determination unit 173 selects one from the forehead region, the right cheek region, and the left cheek region (step S302). Then, the determination unit 173 selects one unselected pixel from the selection area (step S303). Hereinafter, the pixel selected in step S303 is also referred to as a selected pixel.

続いて、判定部173は、赤外線画像A〜Cのそれぞれについて、選択画素の輝度を測定する(ステップS304)。そして、判定部173は、赤外線画像A〜C間で、測定した輝度が、肌が示す関係を満たすか否かを判別する(ステップS305)。 Subsequently, the determination unit 173 measures the brightness of the selected pixel for each of the infrared images A to C (step S304). Then, the determination unit 173 determines whether or not the measured brightness satisfies the relationship indicated by the skin between the infrared images A to C (step S305).

測定した輝度が、肌が示す関係を満たすと判別した場合(ステップS305;Yes)、判定部173は、生体候補カウンタに1を加算する(ステップS306)。また、測定した輝度が、肌が示す関係を満たさないと判別した場合(ステップS305;No)、判定部173は、非生体候補カウンタに1を加算する(ステップS307)。 When it is determined that the measured luminance satisfies the relationship indicated by the skin (step S305; Yes), the determination unit 173 adds 1 to the biological candidate counter (step S306). When it is determined that the measured luminance does not satisfy the relationship indicated by the skin (step S305; No), the determination unit 173 adds 1 to the non-biological candidate counter (step S307).

続いて、判定部173は、選択領域の全ての画素を選択したか否かを判別する(ステップS308)。 Subsequently, the determination unit 173 determines whether or not all the pixels in the selection region have been selected (step S308).

全ての画素を選択していない場合(ステップS308;No)、ステップS303に処理は戻り、判定部173は、選択領域から1つの画素を選択し、その輝度に基づいて生体候補カウンタ又は非生体候補カウンタに1を加算する処理を繰り返す。 When not all pixels have been selected (step S308; No), the process returns to step S303, the determination unit 173 selects one pixel from the selection area, and the biological candidate counter or non-biological candidate is based on the brightness thereof. The process of adding 1 to the counter is repeated.

一方、全ての画素を選択した場合(ステップS308;Yes)、判定部173は、額領域、右頬領域、左頬領域の全てを選択したか否かを判別する(ステップS309)。額領域、右頬領域、左頬領域の全てを選択していない場合(ステップS309;No)、ステップS302に処理は戻る。 On the other hand, when all the pixels are selected (step S308; Yes), the determination unit 173 determines whether or not all of the forehead region, the right cheek region, and the left cheek region are selected (step S309). If all of the forehead area, the right cheek area, and the left cheek area are not selected (step S309; No), the process returns to step S302.

額領域、右頬領域、左頬領域の全てを選択した場合(ステップS309;Yes)、すなわち、額領域、右頬領域および左頬領域の全画素についてそれぞれ生体候補カウンタ又は非生体候補カウンタを加算し終えた後、判定部173は、生体候補カウンタが非生体候補カウンタの値よりも大きいか否かを判別する(ステップS310)。 When all of the forehead region, the right cheek region, and the left cheek region are selected (step S309; Yes), that is, the biological candidate counter or the non-biological candidate counter is added for all the pixels of the forehead region, the right cheek region, and the left cheek region, respectively. After finishing, the determination unit 173 determines whether or not the biological candidate counter is larger than the value of the non-biological candidate counter (step S310).

生体候補カウンタの値の方が非生体候補カウンタの値よりも大きい場合(ステップS310;Yes)、検知部174は、顔の表面が肌であると検知する(ステップS311)。 When the value of the biological candidate counter is larger than the value of the non-biological candidate counter (step S310; Yes), the detection unit 174 detects that the surface of the face is skin (step S311).

一方、生体候補カウンタの値が非生体候補カウンタの値よりも大きくない場合(ステップS310;No)、検知部174は、顔の表面が肌でないと検知する(ステップS312)。以上で生体判定処理は終了する。 On the other hand, when the value of the biological candidate counter is not larger than the value of the non-biological candidate counter (step S310; No), the detection unit 174 detects that the surface of the face is not skin (step S312). This completes the biological determination process.

このように、実施形態3の生体判定処理では、額領域、右頬領域、左頬領域の全ての画素の輝度を用いて顔の表面が肌であるかを判定するため、より精度よく生体であるかを検知することが可能となる。 As described above, in the biological determination process of the third embodiment, since it is determined whether the surface of the face is skin by using the brightness of all the pixels of the forehead region, the right cheek region, and the left cheek region, it is more accurate in the living body. It becomes possible to detect the existence.

なお、図9の生体検知処理において、生体候補カウンタのみを用い、ステップS310において生体候補カウンタの値が所定値以上か否かにより生体検知を行ってもよい。例えば、所定値を額領域、右頬領域および左頬領域の全画素の8割の画素数の値に設定しておくことで、その全画素の80%以上が生体候補だった場合に顔の表面が肌であると判断することができる。 In the biological detection process of FIG. 9, only the biological candidate counter may be used, and biological detection may be performed depending on whether or not the value of the biological candidate counter is equal to or higher than a predetermined value in step S310. For example, by setting a predetermined value to a value of 80% of the total pixels of the forehead area, the right cheek area, and the left cheek area, when 80% or more of the total pixels are biological candidates, the face It can be determined that the surface is skin.

また、図9の生体検知処理では、選択画素の輝度が、肌が示す関係を満たす場合に(ステップS305;Yes)、ステップS306において生体候補カウンタに1を加算した。しかしながら、選択画素の輝度が、肌が示す関係を満たす場合に、実施形態1と同様にその周囲の画素についても肌が示す関係を満たすか否かを判定し、満たす場合のみ生体候補カウンタに1を加算してもよい。 Further, in the biological detection process of FIG. 9, when the brightness of the selected pixels satisfies the relationship indicated by the skin (step S305; Yes), 1 was added to the biological candidate counter in step S306. However, when the brightness of the selected pixel satisfies the relationship indicated by the skin, it is determined whether or not the relationship indicated by the skin is satisfied for the pixels around the selected pixel as in the first embodiment, and only when the relationship is satisfied, the biological candidate counter is set to 1. May be added.

(実施形態4)
続いて、実施形態4に係る生体検知装置4について説明する。なお、図2に示すように、生体検知装置4の各部の構成は、実施形態1に係る生体検知装置1と実質的に同じであり、生体検知処理および生体判定処理の内容のみが異なる。
(Embodiment 4)
Subsequently, the biological detection device 4 according to the fourth embodiment will be described. As shown in FIG. 2, the configuration of each part of the biological detection device 4 is substantially the same as that of the biological detection device 1 according to the first embodiment, and only the contents of the biological detection process and the biological determination process are different.

生体検知装置4が実行する生体検知処理について、図10のフローチャートを用いて説明する。なお、図5に示した生体検知処理と実質的に同内容のステップについては、適宜説明を省略する。 The biological detection process executed by the biological detection device 4 will be described with reference to the flowchart of FIG. The steps having substantially the same contents as the biological detection process shown in FIG. 5 will be omitted as appropriate.

図10の生体検知処理において、まず、撮像制御部170は、照明部11の光源111(111A〜111C)を点灯させるとともに、撮像部12を制御する。画像取得部171は、人物の各波長域の画像(赤外線画像A〜C)を取得する(ステップS21)。 In the biological detection process of FIG. 10, first, the image pickup control unit 170 turns on the light sources 111 (111A to 111C) of the illumination unit 11 and controls the image pickup unit 12. The image acquisition unit 171 acquires images (infrared images A to C) of each wavelength range of the person (step S21).

ここで、画像取得処理の詳細については、実施形態1で図6のフローチャートを参照して説明した処理と同様である。 Here, the details of the image acquisition process are the same as the process described with reference to the flowchart of FIG. 6 in the first embodiment.

撮像制御部170がステップS21を行うことにより、1180nm近傍の波長域の光が照射された被写体が写る赤外線画像Aと、1280nm近傍の波長域の光が照射された被写体が写る赤外線画像Bと、1500nm近傍の波長域の光が照射された被写体が写る赤外線画像Cとが得られる。 When the image pickup control unit 170 performs step S21, an infrared image A in which a subject irradiated with light in a wavelength range near 1180 nm is captured, and an infrared image B in which a subject irradiated with light in a wavelength range near 1280 nm is captured. An infrared image C in which a subject irradiated with light in a wavelength range near 1500 nm is captured can be obtained.

続いて、顔検出部172は、取得した赤外線画像A〜Cから、顔領域を検出する(ステップS22)。 Subsequently, the face detection unit 172 detects the face region from the acquired infrared images A to C (step S22).

ここで、顔検出部172の処理について、具体例を挙げて説明する。例えば、顔検出部172の処理対象として、図11Aに示すような赤外線画像A〜Cが与えられた場合を考える。この場合、顔検出部172は、図11Bに示すように、顔を含む領域Z1を検出する。 Here, the processing of the face detection unit 172 will be described with reference to specific examples. For example, consider a case where infrared images A to C as shown in FIG. 11A are given as processing targets of the face detection unit 172. In this case, the face detection unit 172 detects the region Z1 including the face, as shown in FIG. 11B.

続いて、判定部173は、ステップS21で取得した赤外線画像A〜Cの間で顔領域の輝度を比較することにより、人物の顔の表面が肌であるか否かを判定する生体判定処理を実行する(ステップS23)。 Subsequently, the determination unit 173 performs a biological determination process for determining whether or not the surface of the person's face is skin by comparing the brightness of the face region between the infrared images A to C acquired in step S21. Execute (step S23).

続いて、生体判定処理について、図12のフローチャートを用いて説明する。なお、図7に示した生体判定処理と実質的に同内容のステップについては、適宜説明を簡略化する。 Subsequently, the biological determination process will be described with reference to the flowchart of FIG. The description of the steps having substantially the same contents as the biological determination process shown in FIG. 7 will be simplified as appropriate.

生体判定処理が開始されると、まず、判定部173は、生体候補カウンタ、顔領域カウンタを初期化する(ステップS401)。つぎに、顔を含む領域Z1を図11Bに示すように、n×mの格子の領域(Z11〜Znm)に分割する(ステップS402)。nおよびmは任意の値であり、例えば、n=256、m=256である。つぎに、分割した領域(Z11〜Znm)のうちから、選択していない領域を選択する(ステップS403)。つぎに、この選択領域が顔領域であるか否かを判定する(ステップS404)。この判定は、公知の方法で顔の輪郭を特定し、選択領域が顔の輪郭の内側であるか外側であるか判定することにより行う。選択領域が顔の輪郭の内側である場合は、顔領域であると特定する。選択領域が顔の輪郭の外側である場合は、顔領域でないと特定する。 When the biological determination process is started, the determination unit 173 first initializes the biological candidate counter and the face area counter (step S401). Next, as shown in FIG. 11B, the region Z1 including the face is divided into n × m grid regions (Z11 to Znm) (step S402). n and m are arbitrary values, for example, n = 256 and m = 256. Next, an unselected region is selected from the divided regions (Z11 to Znm) (step S403). Next, it is determined whether or not this selected area is a face area (step S404). This determination is performed by identifying the contour of the face by a known method and determining whether the selected area is inside or outside the contour of the face. If the selected area is inside the contour of the face, it is identified as the face area. If the selected area is outside the contour of the face, it is identified as not the face area.

つぎに、選択領域が顔領域でない場合(ステップS404:No)、ステップS403に戻る。選択領域が顔領域である場合(ステップS404:Yes)、顔領域カウンタに1を加算する(ステップS405)。 Next, if the selected area is not the face area (step S404: No), the process returns to step S403. When the selected area is a face area (step S404: Yes), 1 is added to the face area counter (step S405).

つぎに、赤外線画像A〜Cのそれぞれについて、選択領域の輝度を測定し(ステップS406)、赤外線画像A〜C間で、測定した輝度が、肌が示す関係を満たすか否かを判別する(ステップS407)。 Next, the brightness of the selected region is measured for each of the infrared images A to C (step S406), and it is determined whether or not the measured brightness satisfies the relationship indicated by the skin between the infrared images A to C (step S406). Step S407).

なお、より具体的には、ステップS407で判定部173は、以下の関係式(4)を満たすか否かを判別すればよい。なお、関係式(4)において、IAは赤外線画像Aから測定した輝度、IBは赤外線画像Bから測定した輝度、ICは赤外線画像Cから測定した輝度を示す。また、α、β、γ、Yは係数であり、撮像条件等から生体検知に最適な数値が予め設定されている。
(4)Y≦α×IA+β×IB+γ×IC
More specifically, in step S407, the determination unit 173 may determine whether or not the following relational expression (4) is satisfied. In the relational expression (4), IA indicates the brightness measured from the infrared image A, IB indicates the brightness measured from the infrared image B, and IC indicates the brightness measured from the infrared image C. Further, α, β, γ, and Y are coefficients, and the optimum numerical values for biological detection are set in advance from the imaging conditions and the like.
(4) Y ≦ α × IA + β × IB + γ × IC

赤外線画像A〜C間で、輝度が、肌が示す関係を満たしていると判別した場合(ステップS407;Yes)、判定部173は、その選択領域の生体候補カウンタに1を加算する(ステップS408)。 When it is determined that the brightness satisfies the relationship indicated by the skin between the infrared images A to C (step S407; Yes), the determination unit 173 adds 1 to the biological candidate counter in the selected region (step S408). ).

一方、赤外線画像A〜C間で、輝度が、肌が示す関係を満たしていないと判別した場合(ステップS407;No)、ステップS409に処理は移る。 On the other hand, when it is determined between the infrared images A to C that the brightness does not satisfy the relationship indicated by the skin (step S407; No), the process proceeds to step S409.

つぎに、判定部173は、ステップS402で分割した領域を全て選択したか否かを判定する(ステップS409)。分割した領域の全てを選択していない場合(ステップS409;No)、ステップS403に処理は戻る。 Next, the determination unit 173 determines whether or not all the regions divided in step S402 have been selected (step S409). If not all of the divided regions are selected (step S409; No), the process returns to step S403.

ステップS402で分割した領域の全てを選択した場合(ステップS409;Yes)、判定部173は、生体候補カウンタの値を顔領域カウンタの値で除した値PAが閾値以上であるか判定する(ステップS410)。なお、この閾値は、1以下の値であれば特に限定されないが、例えば、0.8である。 When all of the regions divided in step S402 are selected (step S409; Yes), the determination unit 173 determines whether the value PA obtained by dividing the value of the biological candidate counter by the value of the face region counter is equal to or greater than the threshold value (step). S410). The threshold value is not particularly limited as long as it is a value of 1 or less, but is, for example, 0.8.

値PAが閾値以上である場合(ステップS410;Yes)、検知部174は、人物の顔の表面が肌であると判定する(ステップS411)。一方、値PAが閾値未満である場合(ステップS410;No)、判定部は、人物の顔の表面が肌でないと判定する(ステップS412)。以上で生体判定処理は終了する。 When the value PA is equal to or greater than the threshold value (step S410; Yes), the detection unit 174 determines that the surface of the person's face is skin (step S411). On the other hand, when the value PA is less than the threshold value (step S410; No), the determination unit determines that the surface of the person's face is not skin (step S412). This completes the biological determination process.

このように、実施形態4の生体判定処理は、顔領域を格子の領域に分割し、分割したそれぞれの領域が、肌が満たす関係を示すか否かを判定する。そして、顔領域全体のうち、生体であると判定された領域の割合が閾値以上であるか否かで、顔の表面が肌であるか否かを判定する。そのため、各領域(頬領域、右頬領域、左頬領域)の何れか1つで輝度が、生体が関係を満たさない場合に、顔の表面が肌でないと即時に判定する実施形態1の生体判定処理などよりも、精度よく顔の表面が肌であるかを検知することが可能となる。 As described above, the biological determination process of the fourth embodiment divides the face region into grid regions, and determines whether or not each of the divided regions shows a relationship that the skin satisfies. Then, it is determined whether or not the surface of the face is skin based on whether or not the ratio of the region determined to be a living body is equal to or greater than the threshold value in the entire face region. Therefore, when the brightness in any one of the regions (cheek region, right cheek region, left cheek region) does not satisfy the relationship with the living body, the living body of the first embodiment immediately determines that the surface of the face is not skin. It is possible to detect whether the surface of the face is skin more accurately than the judgment process.

(変形例)
なお、本発明は、上記各実施形態に限定されず、本発明の要旨を逸脱しない部分での種々の変更は可能である。
(Modification example)
The present invention is not limited to the above embodiments, and various modifications can be made without departing from the gist of the present invention.

また、図2に示した生体検知装置1〜4においては、照明部11や撮像部12などが全て一体であることを前提に説明したが、適宜別体にしてもよいことはもちろんである。例えば、照明部11、撮像部12、スピーカ13などをそれぞれ別にしておき、制御部17の機能を持つ装置(例えば、PCなど)と組み合わせることで生体検知装置1〜4を構成してもよい。あるいは、制御部17の機能を撮像部12に内蔵して、撮像部12の制御部が適宜照明部11やスピーカ13などと連携して生体検知装置1を構成してもよい。 Further, in the biological detection devices 1 to 4 shown in FIG. 2, the description has been made on the premise that the lighting unit 11, the imaging unit 12, and the like are all integrated, but it goes without saying that they may be separated as appropriate. For example, the lighting unit 11, the imaging unit 12, the speaker 13, and the like may be separated from each other and combined with a device having the function of the control unit 17 (for example, a PC or the like) to configure the biological detection devices 1 to 4. .. Alternatively, the function of the control unit 17 may be built into the image pickup unit 12, and the control unit of the image pickup unit 12 may appropriately cooperate with the illumination unit 11, the speaker 13, and the like to form the biometric detection device 1.

また、上記各実施形態では、照明部11と撮像部12とを同期させて、赤外線画像A〜Cを撮像した。しかし、照明部11と撮像部12とを同期させずに、照明部11が任意の波長域の赤外線を被写体に照射し、撮像部12が撮像した赤外線画像を、いずれの波長域の赤外線が照射された被写体の赤外線画像であるか選別してもよい。具体的には、波長域ごとに反射率が異なるインジケータを赤外線画像の周辺部に写る場所(例えば、被写体の後ろの壁)に配置して赤外線画像を撮像する。照明部11から任意の波長域の赤外線を被写体とインジケータとに照射し、撮像部12は、被写体の赤外線画像を撮像する。制御部17は、撮像された赤外線画像の周辺部に写るインジケータの輝度から何れの波長域の赤外線が照射された赤外線画像であるか選別する。 Further, in each of the above embodiments, the illumination unit 11 and the image pickup unit 12 are synchronized to image the infrared images A to C. However, without synchronizing the illumination unit 11 and the imaging unit 12, the illumination unit 11 irradiates the subject with infrared rays in an arbitrary wavelength range, and the infrared image captured by the imaging unit 12 is irradiated with infrared rays in any wavelength range. It may be selected whether it is an infrared image of the subject. Specifically, an indicator having a different reflectance for each wavelength range is placed in a place (for example, a wall behind the subject) in the peripheral portion of the infrared image to capture an infrared image. The subject and the indicator are irradiated with infrared rays in an arbitrary wavelength range from the illumination unit 11, and the image pickup unit 12 captures an infrared image of the subject. The control unit 17 selects which wavelength range the infrared image is irradiated with from the brightness of the indicator reflected in the peripheral portion of the captured infrared image.

また、上記各実施形態では、1180nm近傍の波長域の光を照射した被写体が写る画像(赤外線画像A)、1280nm近傍の波長域の光を照射した被写体が写る画像(赤外線画像B)、および、1500nm近傍の波長域の光を照射した被写体が写る画像(赤外線画像C)の輝度が、肌が示す関係を満たす場合に、顔の表面が肌であると判定した。しかし、他の波長域の画像を用いて顔の表面が肌であるかを判定してもよい。 Further, in each of the above embodiments, an image showing a subject irradiated with light in a wavelength range near 1180 nm (infrared image A), an image showing a subject irradiated with light in a wavelength range near 1280 nm (infrared image B), and When the brightness of the image (infrared image C) showing the subject irradiated with the light in the wavelength range near 1500 nm satisfies the relationship indicated by the skin, it was determined that the surface of the face is the skin. However, images in other wavelength ranges may be used to determine if the surface of the face is skin.

また、上記各実施形態では、3つの各波長域の画像(赤外線画像A〜C)の輝度を用いて顔の表面が肌であるかを判定したが、2つの波長域の画像から顔の表面が肌であるか判定してもよく、4以上の波長域の画像から顔の表面が肌であるかを判定してもよい。 Further, in each of the above embodiments, it is determined whether the surface of the face is skin by using the brightness of the images in each of the three wavelength ranges (infrared images A to C), but the surface of the face is determined from the images in the two wavelength ranges. It may be determined whether or not is skin, and it may be determined whether or not the surface of the face is skin from images in the wavelength range of 4 or more.

また、上記各実施形態では、顔検出部172が顔領域から額領域、右頬領域、左頬領域を検出し、判定部173が各領域の輝度を画像間で比較して顔の表面が肌であるかを判定した。しかしながら、顔検出部172は、額領域、右頬領域、左頬領域の全てを検出する必要は無く、少なくとも1つの領域を検出すればよい。例えば、顔検出部172が額領域のみを検出し、判定部173が額領域の輝度のみを比較して顔の表面が肌であるかを判定してもよい。また、顔検出部172が額領域、右頬領域、左頬領域以外の特徴領域を検出して、その領域の輝度を用いて顔の表面が肌であるかを判定してもよい。また、顔検出部172が顔領域のみを検出し、判定部173が顔領域全体又はその一部の輝度を比較して顔の表面が肌であるかを判定してもよい。 Further, in each of the above embodiments, the face detection unit 172 detects the forehead region, the right cheek region, and the left cheek region from the face region, and the determination unit 173 compares the brightness of each region between the images, and the surface of the face is skin. It was judged whether it was. However, the face detection unit 172 does not have to detect all of the forehead region, the right cheek region, and the left cheek region, and may detect at least one region. For example, the face detection unit 172 may detect only the forehead region, and the determination unit 173 may compare only the brightness of the forehead region to determine whether the surface of the face is skin. Further, the face detection unit 172 may detect a feature region other than the forehead region, the right cheek region, and the left cheek region, and use the brightness of the region to determine whether the surface of the face is skin. Further, the face detection unit 172 may detect only the face region, and the determination unit 173 may compare the brightness of the entire face region or a part thereof to determine whether the surface of the face is skin.

また、撮像部12の位置や人物の撮像地点を固定し、画像内の特定範囲に必ず人物の顔が撮像されるようにした場合、判定部173がその特定範囲の輝度を比較して顔の表面が肌であるかを判定してもよい。この場合は、生体検知装置1〜4は、顔検出部172を備えなくともよい。 Further, when the position of the imaging unit 12 and the imaging point of the person are fixed so that the face of the person is always imaged in a specific range in the image, the determination unit 173 compares the brightness of the specific range of the face. It may be determined whether the surface is skin. In this case, the biological detection devices 1 to 4 do not have to include the face detection unit 172.

また、上記各実施形態では、顔の表面が肌であるかどうかを検知する場合について説明したが、肌であるかどうかの検知とともにシリコン樹脂等の偽生体であるかの検知をあわせて行ってもよい。この場合、例えば、偽生体の検知も行うための関係式を予め求めておき、生体判定処理において、各赤外線画像A〜Cの選択画素の輝度が、肌が示す関係を満たすか判定する際にあわせて上記求めておいた関係式により偽生体か否かも判定することにより、その画素が肌か偽生体かを検知することができる。このため、より精度よく顔の表面が肌であるか偽生体の変装マスクを被っているかを判定することができる。 Further, in each of the above embodiments, the case of detecting whether or not the surface of the face is skin has been described, but the detection of whether or not the face is skin and the detection of whether or not it is a pseudo-living body such as silicone resin are also performed. May be good. In this case, for example, when a relational expression for detecting a pseudo-living body is obtained in advance and it is determined in the living body determination processing whether the brightness of the selected pixels of the infrared images A to C satisfies the relationship indicated by the skin. At the same time, it is possible to detect whether the pixel is skin or a pseudo-living body by determining whether or not the pixel is a pseudo-living body by the relational expression obtained above. Therefore, it is possible to more accurately determine whether the surface of the face is skin or is covered with a disguise mask of a pseudo-living body.

また、上記各実施形態における生体検知装置1〜4においては、光源は、1180nm、1280nm、1500nmの波長域の赤外線LEDを用いたが、これらの赤外線LEDを、入手が容易な1200nm、1300nm、1450(1550)nmの波長域の赤外線LEDに変更してもよい。また、所望の波長域の光を照射できるものであれば特に限定されず、LED以外の光源を用いてもよい。例えば、ハロゲン光源と、複数のカットフィルタとを組み合わせて(例えば、1180±50nmの波長域の画像を得るには、1130nm以下の光をカットするカットフィルタと、1230nm以上の光をカットするカットフィルタと、を組み合わせ)て、各波長域の照明を得るようにしてもよい。 Further, in the biological detection devices 1 to 4 in each of the above embodiments, infrared LEDs having a wavelength range of 1180 nm, 1280 nm, and 1500 nm were used as the light source, and these infrared LEDs are easily available at 1200 nm, 1300 nm, and 1450. It may be changed to an infrared LED having a wavelength range of (1550) nm. Further, it is not particularly limited as long as it can irradiate light in a desired wavelength range, and a light source other than the LED may be used. For example, in order to obtain an image in the wavelength range of 1180 ± 50 nm by combining a halogen light source and a plurality of cut filters (for example, a cut filter that cuts light of 1130 nm or less and a cut filter that cuts light of 1230 nm or more). And) may be combined to obtain illumination in each wavelength range.

また、上記各実施形態においては、入国審査場に生体検知装置1〜4を設置する場合を例にとって説明したが、生体検知装置1〜4を設置する場所はこれに限るものではない。要は、顔の表面が肌であるか否かの検知を行う必要がある場合に、この生体検知装置1〜4を設置して顔の表面が肌であるかの検知を行うことができる。例えば、出国審査場の出国ゲート近辺はもちろんのこと、企業や大規模レジャー施設などの入場ゲートなどにも生体検知装置1〜4を設置して使用してもよい。 Further, in each of the above embodiments, the case where the biometric detection devices 1 to 4 are installed at the immigration checkpoint has been described as an example, but the place where the biometric detection devices 1 to 4 are installed is not limited to this. In short, when it is necessary to detect whether or not the surface of the face is skin, the biological detection devices 1 to 4 can be installed to detect whether or not the surface of the face is skin. For example, the biological detection devices 1 to 4 may be installed and used not only in the vicinity of the departure gate of the departure examination hall but also in the entrance gate of a company or a large-scale leisure facility.

また、上記各実施形態では、生体検知装置1〜4は、特にシリコン樹脂製の変装マスクに対して顔の表面が肌であるかを検知したが、本発明は、他の材質の変装マスクで肌を覆った場合に対して顔の表面が肌であるかの検知にも利用可能である。
例えば、樹脂製のマスクは1480〜1580nmの波長域の輝度が高いのに対し、人の肌ではこの波長域の輝度は低い。また、合成ゴム製のマスクは1480〜1580nmの波長域の輝度が、人の肌と比べて極めて低い。従って、このような肌と他の材質との差分を見ることによって、樹脂製や合成ゴム製のマスクに対して顔の表面が肌であるかをより高い精度で検知することも可能となる。
Further, in each of the above embodiments, the biological detection devices 1 to 4 detect whether the surface of the face is skin, particularly with respect to the disguise mask made of silicon resin, but the present invention uses a disguise mask made of another material. It can also be used to detect whether the surface of the face is skin when the skin is covered.
For example, a resin mask has high brightness in the wavelength range of 1480 to 1580 nm, whereas human skin has low brightness in this wavelength range. Further, the synthetic rubber mask has extremely low brightness in the wavelength range of 1480 to 1580 nm as compared with human skin. Therefore, by observing the difference between the skin and other materials, it is possible to detect with higher accuracy whether the surface of the face is the skin with respect to the mask made of resin or synthetic rubber.

また、例えば、上記各実施形態に係る生体検知装置1〜4の動作を規定する動作プログラムを既存のパーソナルコンピュータや情報端末機器等に適用することで、当該パーソナルコンピュータ等を本発明に係る生体検知装置1〜4として機能させることも可能である。 Further, for example, by applying an operation program that defines the operation of the biometric detection devices 1 to 4 according to each of the above embodiments to an existing personal computer, information terminal device, or the like, the personal computer or the like can be applied to the biometric detection according to the present invention. It is also possible to function as devices 1 to 4.

また、このようなプログラムの配布方法は任意であり、例えば、CD−ROM(Compact Disk Read-Only Memory)、DVD(Digital Versatile Disk)、MO(Magneto Optical Disk)、メモリカードなどのコンピュータ読み取り可能な記録媒体に格納して配布してもよいし、インターネットなどの通信ネットワークを介して配布してもよい。 The distribution method of such a program is arbitrary, and can be read by a computer such as a CD-ROM (Compact Disk Read-Only Memory), a DVD (Digital Versatile Disk), an MO (Magneto Optical Disk), or a memory card. It may be stored in a recording medium and distributed, or may be distributed via a communication network such as the Internet.

本発明は、本発明の広義の精神と範囲を逸脱することなく、様々な実施の形態及び変形が可能とされるものである。また、上述した実施の形態は、この発明を説明するためのものであり、本発明の範囲を限定するものではない。すなわち、本発明の範囲は、実施の形態ではなく、特許請求の範囲によって示される。そして、特許請求の範囲内及びそれと同等の発明の意義の範囲内で施される様々な変形が、この発明の範囲内とみなされる。 The present invention allows for various embodiments and modifications without departing from the broad spirit and scope of the present invention. Moreover, the above-described embodiment is for explaining the present invention, and does not limit the scope of the present invention. That is, the scope of the present invention is indicated not by the embodiment but by the claims. Then, various modifications made within the scope of the claims and the equivalent meaning of the invention are considered to be within the scope of the present invention.

上記の実施の形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。 Some or all of the above embodiments may also be described, but not limited to:

(付記1)
第1の波長域の光が照射された被写体が写る第1の画像と、前記第1の波長域とは異なる第2の波長域の光が照射された前記被写体が写る第2の画像と、を取得する画像取得部と、
前記第1の画像に写る被写体の輝度と前記第2の画像に写る被写体の輝度とが示す関係が、生体が示す関係か否か判定する判定部と、
前記判定部が、前記生体が示す関係であると判定した場合、前記被写体が生体であると検知する検知部と、
を備える生体検知装置。
(Appendix 1)
A first image showing a subject irradiated with light in the first wavelength range, and a second image showing the subject irradiated with light in a second wavelength range different from the first wavelength range. Image acquisition unit to acquire
A determination unit for determining whether or not the relationship between the brightness of the subject in the first image and the brightness of the subject in the second image is the relationship shown by the living body.
When the determination unit determines that the relationship is indicated by the living body, the detection unit that detects that the subject is a living body and the detection unit.
A biological detection device equipped with.

(付記2)
前記第1の波長域の光と前記第2の波長域の光とを前記被写体に照射する照明部と、
前記第1の画像と前記第2の画像とを撮像する撮像部と、
前記照明部の前記第1の波長域の光の照射と前記撮像部の前記第1の画像の撮像とを同期させ、前記照明部の前記第2の波長域の光の照射と前記撮像部の前記第2の画像の撮像とを同期させる撮像制御部と、
を備える付記1に記載の生体検知装置。
(Appendix 2)
An illumination unit that irradiates the subject with light in the first wavelength region and light in the second wavelength region.
An imaging unit that captures the first image and the second image,
The irradiation of the light in the first wavelength region of the lighting unit and the imaging of the first image of the imaging unit are synchronized, and the irradiation of the light of the second wavelength region of the lighting unit and the imaging unit An imaging control unit that synchronizes with the imaging of the second image,
The biological detection device according to Appendix 1.

(付記3)
前記照明部は、前記第1の波長域の光を発光する赤外線LEDの光源と前記第2の波長域の光を発光する赤外線LEDの光源とを含み、
前記撮像部は、前記第1の画像と前記第2の画像とを撮像する1つの赤外線カメラで構成される、
付記2に記載の生体検知装置。
(Appendix 3)
The illumination unit includes an infrared LED light source that emits light in the first wavelength region and an infrared LED light source that emits light in the second wavelength region.
The imaging unit includes one infrared camera that captures the first image and the second image.
The biological detection device according to Appendix 2.

(付記4)
前記第1の波長域の光は、該光を照射した生体の画像中の輝度が、該光を照射した偽生体の画像中の輝度と同程度になる、波長域の光であり、
前記第2の波長域の光は、該光を照射した生体の画像中の輝度が、該光を照射した偽生体の画像中の輝度と20%以上異なる、波長域の光である、
付記1乃至3の何れかに記載の生体検知装置。
(Appendix 4)
The light in the first wavelength range is light in a wavelength range in which the brightness in the image of the living body irradiated with the light is comparable to the brightness in the image of the pseudo-living body irradiated with the light.
The light in the second wavelength region is light in a wavelength region in which the brightness in the image of the living body irradiated with the light differs from the brightness in the image of the pseudo-living body irradiated with the light by 20% or more.
The biological detection device according to any one of Supplementary note 1 to 3.

(付記5)
前記画像取得部は、前記第1の波長域および前記第2の波長域とは異なる第3の波長域の光が照射された被写体が写る第3の画像をさらに取得し、
前記判定部は、前記第1の画像に写る被写体の輝度と前記第2の画像に写る被写体の輝度と前記第3の画像に写る被写体の輝度とが示す関係が、生体が示す関係か否か判定する、
付記1乃至4の何れかに記載の生体検知装置。
(Appendix 5)
The image acquisition unit further acquires a third image in which a subject irradiated with light in the first wavelength region and a third wavelength region different from the second wavelength region is captured.
In the determination unit, whether or not the relationship between the brightness of the subject in the first image, the brightness of the subject in the second image, and the brightness of the subject in the third image is the relationship shown by the living body. judge,
The biological detection device according to any one of Supplementary note 1 to 4.

(付記6)
前記第1の波長域は1180nm近傍、前記第2の波長域は1280nm近傍、および、前記第3の波長域は1500nm近傍であり、
前記判定部は、前記第2の画像に写る被写体の輝度が、前記第1の画像に写る被写体の輝度および前記第3の画像に写る被写体の輝度より所定割合大きい関係の場合、前記生体が示す関係であると判定する、
付記5に記載の生体検知装置。
(Appendix 6)
The first wavelength region is in the vicinity of 1180 nm, the second wavelength region is in the vicinity of 1280 nm, and the third wavelength region is in the vicinity of 1500 nm.
The determination unit indicates that the living body indicates a relationship in which the brightness of the subject captured in the second image is a predetermined ratio larger than the brightness of the subject captured in the first image and the brightness of the subject captured in the third image. Judge as a relationship,
The biological detection device according to Appendix 5.

(付記7)
前記画像取得部が取得した各画像から人物の顔領域を検出する顔検出部を備え、
前記判定部は、前記第2の画像に写る前記顔領域の輝度が、前記第1の画像に写る前記顔領域の輝度および前記第3の画像に写る前記顔領域の輝度より所定割合大きい関係の場合、前記生体が示す関係であると判定する、
付記6に記載の生体検知装置。
(Appendix 7)
A face detection unit that detects a person's face area from each image acquired by the image acquisition unit is provided.
The determination unit has a relationship in which the brightness of the face region captured in the second image is a predetermined percentage larger than the brightness of the face region captured in the first image and the brightness of the face region captured in the third image. In the case, it is determined that the relationship is shown by the living body.
The biological detection device according to Appendix 6.

(付記8)
前記顔検出部は、前記顔領域から特徴領域を検出し、
前記判定部は、前記第2の画像に写る前記特徴領域の輝度が、前記第1の画像に写る前記特徴領域の輝度および前記第3の画像に写る前記特徴領域の輝度より所定割合大きい関係の場合、前記生体が示す関係であると判定する、
付記7に記載の生体検知装置。
(Appendix 8)
The face detection unit detects a feature region from the face region and
The determination unit has a relationship in which the brightness of the feature region captured in the second image is a predetermined percentage larger than the brightness of the feature region captured in the first image and the brightness of the feature region captured in the third image. In the case, it is determined that the relationship is shown by the living body.
The biological detection device according to Appendix 7.

(付記9)
前記検知部が前記被写体を生体でないと検知した際に、該被写体が生体でない旨を報知する報知部をさらに備える、
付記1乃至8の何れかに記載の生体検知装置。
(Appendix 9)
When the detection unit detects that the subject is not a living body, the detection unit further includes a notification unit that notifies that the subject is not a living body.
The biological detection device according to any one of Appendix 1 to 8.

(付記10)
前記生体は、肌である、
付記1乃至9の何れかに記載の生体検知装置。
(Appendix 10)
The living body is skin,
The biological detection device according to any one of Supplementary Notes 1 to 9.

(付記11)
前記偽生体は、シリコン樹脂で構成される、
付記4に記載の生体検知装置。
(Appendix 11)
The pseudo-living body is made of a silicone resin.
The biological detection device according to Appendix 4.

(付記12)
第1の波長域の光が照射された被写体が写る第1の画像と、前記第1の波長域とは異なる第2の波長域の光が照射された前記被写体が写る第2の画像と、を取得する画像取得ステップと、
前記第1の画像に写る被写体の輝度と前記第2の画像に写る被写体の輝度とが示す関係が、生体が示す関係か否か判定する判定ステップと、
前記判定ステップにおいて、生体が示す関係であると判定した場合、前記被写体が生体であると検知する検知ステップと、
を備える生体検知方法。
(Appendix 12)
A first image showing a subject irradiated with light in the first wavelength range, and a second image showing the subject irradiated with light in a second wavelength range different from the first wavelength range. To get the image acquisition step and
A determination step for determining whether or not the relationship between the brightness of the subject in the first image and the brightness of the subject in the second image is the relationship shown by the living body.
In the determination step, when it is determined that the relationship is shown by the living body, the detection step of detecting that the subject is a living body and the detection step.
A biological detection method comprising.

(付記13)
コンピュータを、
第1の波長域の光が照射された被写体が写る第1の画像と、前記第1の波長域とは異なる第2の波長域の光が照射された前記被写体が写る第2の画像と、を取得する画像取得部、
前記第1の画像に写る被写体の輝度と前記第2の画像に写る被写体の輝度とが示す関係が、生体が示す関係か否か判定する判定部、
前記判定部が、前記生体が示す関係であると判定した場合、前記被写体が生体であると検知する検知部、
として機能させるためのプログラムを格納する記録媒体。
(Appendix 13)
Computer,
A first image showing a subject irradiated with light in the first wavelength range, and a second image showing the subject irradiated with light in a second wavelength range different from the first wavelength range. Image acquisition unit,
A determination unit for determining whether or not the relationship between the brightness of the subject shown in the first image and the brightness of the subject shown in the second image is the relationship shown by the living body.
When the determination unit determines that the relationship is indicated by the living body, the detection unit that detects that the subject is a living body,
A recording medium that stores a program for functioning as.

1、2、3、4 生体検知装置
11 照明部
111(111A〜111C) 光源
112(112A〜112C) リレー
12 撮像部
121 レンズ
122 シャッタ
123 CMOSイメージセンサ
13 スピーカ
14 ディスプレイ
15 操作部
16 外部記憶装置
17 制御部
170 撮像制御部
171 画像取得部
172 顔検出部
173 判定部
174 検知部
175 報知部


1, 2, 3, 4 Biometric detection device 11 Lighting unit 111 (111A to 111C) Light source 112 (112A to 112C) Relay 12 Imaging unit 121 Lens 122 Shutter 123 CMOS image sensor 13 Speaker 14 Display 15 Operation unit 16 External storage device 17 Control unit 170 Imaging control unit 171 Image acquisition unit 172 Face detection unit 173 Judgment unit 174 Detection unit 175 Notification unit


Claims (20)

人物を撮像した画像から前記人物の顔領域を検出する顔検出手段と、
赤外線帯域における波長域の光を用いてそれぞれ撮像した画像の、前記人物の顔領域同士を比較することで、偽生体であるかを判定する判定手段と、
を備える情報処理装置。
A face detection means for detecting the face area of the person from an image of the person, and
A determination means for determining whether or not a person is a pseudo-living body by comparing the face regions of the person in the images captured by using light in the wavelength range in the infrared band.
Information processing device equipped with.
前記光は、1000nm以上1700nm以下の波長域の光である
請求項1に記載の情報処理装置。
The information processing apparatus according to claim 1, wherein the light is light in a wavelength range of 1000 nm or more and 1700 nm or less.
赤外線の光を前記人物に照射する照明部と、
前記判定手段は、前記人物の顔領域同士の輝度に基づいて、前記人物の顔の表面が偽生体であるかを判定する請求項1または2に記載の情報処理装置。
A lighting unit that irradiates the person with infrared light,
The information processing device according to claim 1 or 2, wherein the determination means determines whether the surface of the person's face is a false organism based on the brightness between the face regions of the person.
前記顔検出手段は前記顔領域から額領域および頬領域の少なくとも何れか一方を検出し、
前記判定手段は前記額領域同士および前記頬領域同士の少なくとも何れか一方を比較することを特徴とする請求項1から3のいずれか1項に記載の情報処理装置。
The face detecting means detects at least one of a forehead region and a cheek region from the face region, and
The information processing apparatus according to any one of claims 1 to 3, wherein the determination means compares at least one of the forehead regions and the cheek regions.
赤外線帯域における波長域の光を用いて人物を撮像する画像取得手段をさらに備え、
前記顔検出手段は、赤外線帯域における波長域の光を用いて撮像された前記人物の画像から前記人物の顔領域を検出する請求項1から4のいずれか1項に記載の情報処理装置。
Further equipped with an image acquisition means for capturing a person using light in the wavelength range in the infrared band,
The information processing device according to any one of claims 1 to 4, wherein the face detecting means detects a face region of the person from an image of the person captured by using light in a wavelength range in the infrared band.
赤外線帯域における少なくとも3つの異なる波長域で撮像された人物の画像を取得する画像取得手段をさらに備え、
前記判定手段は、前記画像取得手段が取得した画像のうち3つの画像の顔領域同士を比較することで、前記人物の顔領域が偽生体であるかを判定することを特徴とする請求項1から4のいずれか1項に記載の情報処理装置。
Further provided with an image acquisition means for acquiring an image of a person captured in at least three different wavelength ranges in the infrared band.
The determination means is characterized in that it determines whether or not the face region of the person is a false body by comparing the face regions of three images among the images acquired by the image acquisition means. The information processing apparatus according to any one of 4 to 4.
前記画像取得手段は、互いに異なる波長域における複数の人物の画像を撮像する複数の撮像手段と、
同一地点から前記人物を撮像したように、前記複数の撮像手段が撮像した各画像を補正した画像を取得する画像補正手段と、を備えることを特徴とする請求項5または6に記載の情報処理装置。
The image acquisition means includes a plurality of imaging means for capturing images of a plurality of people in different wavelength ranges from each other.
The information processing according to claim 5 or 6, further comprising an image correction means for acquiring a corrected image of each image captured by the plurality of imaging means as if the person was imaged from the same point. apparatus.
前記判定手段は、互いに異なる波長域において撮像された複数の画像の各顔領域の輝度の分布が特定パターンの波形を示す場合、前記人物の顔領域が偽生体でないと判定することを特徴とする請求項1から7のいずれか1項に記載の情報処理装置。 The determination means is characterized in that when the brightness distribution of each face region of a plurality of images captured in different wavelength regions shows a waveform of a specific pattern, it is determined that the face region of the person is not a pseudo-living body. The information processing apparatus according to any one of claims 1 to 7. 前記人物と前記画像取得手段との間に設置されたマジックミラーをさらに備えたことを特徴とする請求項5から7のいずれか1項に記載の情報処理装置。 The information processing apparatus according to any one of claims 5 to 7, further comprising a magic mirror installed between the person and the image acquisition means. 赤外線の光を人物に照射する照明部と、
前記人物の顔領域に反射した赤外線の光を用いて前記人物を撮像する画像取得手段と、
異なる2つの波長域の赤外線帯域における前記人物の顔領域の画像同士を比較することで、偽生体であるかを判定する判定手段と、
前記人物と前記画像取得手段との間に設置されたマジックミラーとを備える情報処理装置。
A lighting unit that irradiates a person with infrared light,
An image acquisition means for photographing the person using infrared light reflected on the face area of the person, and
A determination means for determining whether or not a person is a pseudo-living body by comparing images in the face region of the person in two different wavelength ranges of infrared rays.
An information processing device including a magic mirror installed between the person and the image acquisition means.
前記画像取得手段が取得した前記人物の画像から前記人物の顔領域を検出する顔検出手段をさらに備えたことを特徴とする請求項10に記載の情報処理装置。 The information processing apparatus according to claim 10, further comprising a face detecting means for detecting a face region of the person from the image of the person acquired by the image acquiring means. 検出された前記人物の顔領域における赤外線帯域の画像に基づいて、前記人物の顔領域が偽生体であると判定された場合に報知する報知手段とを備える請求項11に記載の情報処理装置。 The information processing apparatus according to claim 11, further comprising a notification means for notifying when the face region of the person is determined to be a false body based on the detected image of the infrared band in the face region of the person. 前記報知手段は、前記人物の顔領域が偽生体であると判定されると、警告メッセージを表示する請求項12に記載の情報処理装置。 The information processing device according to claim 12, wherein the notification means displays a warning message when it is determined that the face region of the person is a false organism. 前記報知手段は、前記人物の顔領域が偽生体であると判定されると、警告音を出力する請求項12に記載の情報処理装置。 The information processing device according to claim 12, wherein the notification means outputs a warning sound when it is determined that the face region of the person is a false living body. 前記報知手段は、人物の顔領域が偽生体であるという旨を報知する請求項12から14のいずれか1項に記載の情報処理装置。 The information processing device according to any one of claims 12 to 14, wherein the notification means notifies that the face region of a person is a false living body. 赤外線の光を人物に照射する照明部と、
前記人物の顔領域に反射した赤外線の光を用いて前記人物を撮像する画像取得手段と、
検出された前記人物の顔領域における赤外線帯域の画像同士を比較することで、前記人物の顔領域が偽生体であると判定された場合に報知する報知手段を備える情報処理装置。
A lighting unit that irradiates a person with infrared light,
An image acquisition means for photographing the person using infrared light reflected on the face area of the person, and
An information processing device including a notification means for notifying when it is determined that the face area of the person is a false body by comparing the detected images in the infrared band in the face area of the person.
前記画像取得手段が取得した前記人物の画像から前記人物の顔領域を検出する顔検出手段をさらに備えたことを特徴とする請求項16に記載の情報処理装置。 The information processing apparatus according to claim 16, further comprising a face detecting means for detecting a face region of the person from the image of the person acquired by the image acquiring means. 前記報知手段は、前記人物の顔領域が偽生体であると判定されると、警告メッセージを表示する請求項16または17に記載の情報処理装置。 The information processing device according to claim 16 or 17, wherein the notification means displays a warning message when it is determined that the face region of the person is a false organism. 前記報知手段は、前記人物の顔領域が偽生体であると判定されると、警告音を出力する請求項16または17に記載の情報処理装置。 The information processing device according to claim 16 or 17, wherein the notification means outputs a warning sound when it is determined that the face region of the person is a false organism. 前記報知手段は人物の顔領域が偽生体であるという旨を報知する請求項17から19のいずれか1項に記載の情報処理装置。 The information processing device according to any one of claims 17 to 19, wherein the notification means notifies that the face region of a person is a pseudo-living body.
JP2020219338A 2020-12-28 2020-12-28 Information processor Pending JP2021047929A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020219338A JP2021047929A (en) 2020-12-28 2020-12-28 Information processor
JP2022146273A JP7343020B2 (en) 2020-12-28 2022-09-14 information processing equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020219338A JP2021047929A (en) 2020-12-28 2020-12-28 Information processor

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018130300A Division JP6819653B2 (en) 2018-07-09 2018-07-09 Detection device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022146273A Division JP7343020B2 (en) 2020-12-28 2022-09-14 information processing equipment

Publications (1)

Publication Number Publication Date
JP2021047929A true JP2021047929A (en) 2021-03-25

Family

ID=74876482

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020219338A Pending JP2021047929A (en) 2020-12-28 2020-12-28 Information processor
JP2022146273A Active JP7343020B2 (en) 2020-12-28 2022-09-14 information processing equipment

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022146273A Active JP7343020B2 (en) 2020-12-28 2022-09-14 information processing equipment

Country Status (1)

Country Link
JP (2) JP2021047929A (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01299488A (en) * 1988-05-27 1989-12-04 Nippon Telegr & Teleph Corp <Ntt> Apparatus for detecting organism
JPH06111083A (en) * 1992-09-29 1994-04-22 Olympus Optical Co Ltd Video id photosystem
JP2003536303A (en) * 2000-06-08 2003-12-02 ハネウェル・インターナショナル・インコーポレーテッド Near infrared camouflage detection
JP2004185262A (en) * 2002-12-03 2004-07-02 Yokogawa Electric Corp Personal authentication device
JP2006047067A (en) * 2004-08-03 2006-02-16 Funai Electric Co Ltd Human body detecting device and human body detecting method
WO2014004179A1 (en) * 2012-06-26 2014-01-03 Qualcomm Incorporated Systems and method for facial verification
JP2014174794A (en) * 2013-03-11 2014-09-22 Denso Corp Feature point extraction algorithm evaluation device, and feature point extraction algorithm evaluation method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112015022112A2 (en) * 2013-03-14 2017-07-18 Koninklijke Philips Nv device for determining an individual's vital signs, method for determining an individual's vital signs, computer program, and system for determining an individual's vital signs

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01299488A (en) * 1988-05-27 1989-12-04 Nippon Telegr & Teleph Corp <Ntt> Apparatus for detecting organism
JPH06111083A (en) * 1992-09-29 1994-04-22 Olympus Optical Co Ltd Video id photosystem
JP2003536303A (en) * 2000-06-08 2003-12-02 ハネウェル・インターナショナル・インコーポレーテッド Near infrared camouflage detection
JP2004185262A (en) * 2002-12-03 2004-07-02 Yokogawa Electric Corp Personal authentication device
JP2006047067A (en) * 2004-08-03 2006-02-16 Funai Electric Co Ltd Human body detecting device and human body detecting method
WO2014004179A1 (en) * 2012-06-26 2014-01-03 Qualcomm Incorporated Systems and method for facial verification
JP2014174794A (en) * 2013-03-11 2014-09-22 Denso Corp Feature point extraction algorithm evaluation device, and feature point extraction algorithm evaluation method

Also Published As

Publication number Publication date
JP7343020B2 (en) 2023-09-12
JP2022168280A (en) 2022-11-04

Similar Documents

Publication Publication Date Title
JP6428914B2 (en) Biological detection device, biological detection method, and program
US11727709B2 (en) Detecting device, detecting method, and recording medium
KR20120031309A (en) Information processing apparatus and information processing method
JP6315144B2 (en) Detection device, detection method, and program
JP6819653B2 (en) Detection device
JP6292341B2 (en) Detection device, detection method, and program
JP7343020B2 (en) information processing equipment
JP2018152079A (en) Detector
JP7444204B2 (en) Control device, detection device, control method, and program
KR20110046510A (en) Information processing device and information processing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220221

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220614