JP2023128557A - 撮影装置および認証装置 - Google Patents

撮影装置および認証装置 Download PDF

Info

Publication number
JP2023128557A
JP2023128557A JP2022032968A JP2022032968A JP2023128557A JP 2023128557 A JP2023128557 A JP 2023128557A JP 2022032968 A JP2022032968 A JP 2022032968A JP 2022032968 A JP2022032968 A JP 2022032968A JP 2023128557 A JP2023128557 A JP 2023128557A
Authority
JP
Japan
Prior art keywords
image data
light
brightness
wavelength
separated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022032968A
Other languages
English (en)
Other versions
JP2023128557A5 (ja
Inventor
友輔 松田
Yusuke Matsuda
直人 三浦
Naoto Miura
晃朗 長坂
Akio Nagasaka
洋 野々村
Hiroshi Nonomura
渓一郎 中崎
Keiichiro NAKAZAKI
雅弘 加藤
Masahiro Kato
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2022032968A priority Critical patent/JP2023128557A/ja
Priority to CN202211069405.1A priority patent/CN116761053A/zh
Priority to US17/944,048 priority patent/US20230281284A1/en
Priority to EP22195586.7A priority patent/EP4239586A1/en
Publication of JP2023128557A publication Critical patent/JP2023128557A/ja
Publication of JP2023128557A5 publication Critical patent/JP2023128557A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143Sensing or illuminating at different wavelengths
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231Biological data, e.g. fingerprint, voice or retina
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1318Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141Control of illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/60Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/776Validation; Performance evaluation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/80Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
    • G06V10/809Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of classification results, e.g. where the classifiers operate on the same input data
    • G06V10/811Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of classification results, e.g. where the classifiers operate on the same input data the classifiers operating on different input data, e.g. multi-modal recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm
    • G06V40/117Biometrics derived from hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1312Sensors therefor direct reading, e.g. contactless acquisition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1341Sensing with light passing through the finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/14Vascular patterns
    • G06V40/145Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition
    • G06T2207/10152Varying illumination

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Vascular Medicine (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Input (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)

Abstract

【課題】鮮明な波長分離画像データを取得すること。【解決手段】撮影装置は、波長が異なる複数の波長の光を生体へ照射する照射部と、前記照射部によって照射された前記生体を撮影して、前記生体の画像データを生成する撮影部と、前記撮影部によって生成された画像データに基づいて、前記複数の波長を分離した複数の波長分離画像データを生成する画像処理部と、前記画像データと、前記画像処理部によって生成された複数の波長分離画像データと、に基づいて、前記複数の波長の光の照射光量を制御する制御部と、を有する。【選択図】図1

Description

本発明は、生体を撮影する撮影装置および生体を撮影して認証する認証装置に関する。
光源からの光を生体に照射し、その反射光を撮影した生体画像により生体認証をおこなう生体認証技術がある。近赤外光を照射光として選択されると、血管中のヘモグロビンとその他の生体組織の近赤外光の吸収特性との違いを利用して撮影した血管画像による生体認証が実現できる。また、可視光である緑や青の波長帯の光を照射光として選択することで、個人の識別が可能な指紋や関節のしわなどの皮膚の表面に存在する凹凸を撮影した表皮画像による生体認証が実現できる。
指の血管画像や表皮画像といった生体画像を用いた認証技術を同一の装置構成で実現するための生体撮影方法として反射型方式がある。反射型方式は、光源と撮像部とを近接して配置し、光源からの照射光を生体に照射して反射する光を撮像して生体画像を取得する方法である。
特許文献1は、光音響イメージング(Photoacoustic Imaging:PAI)で得られる情報中における、測定対象外の成分の影響を低減する被検体情報取得装置を開示する。この被検体情報取得装置は、第1の波長λ1である第1の光と、第2の波長λ2である第2の光を照射する光源と、被検体から発生する光音響波を検出信号に変換する検出手段と、検出信号から特性情報を取得する信号処理手段と、被検体に照射される入射光強度を取得する光強度取得手段を有し、信号処理手段は、第1の光がヘモグロビンに吸収されて発生する信号と、第2の光がヘモグロビンに吸収されて発生する信号との差し引き処理により特性情報を取得し、第1と第2の波長はそれぞれ780~810nm、840~920nmであり、第1と第2の光の入射光強度をそれぞれΦ(λ1)、Φ(λ2)とするとき、Φ(λ1)≦Φ(λ2)を満たし、かつ、Φ(λ1)とΦ(λ2)との差が所定範囲内になるように調整される。
特開2017-23705号公報
複数の波長の光を同時に生体に照射して鮮明な生体画像を撮影しようとする場合、RGB画像データのいずれかの成分の画像データの生体部位において輝度が飽和したり、小さすぎると、その生体部位では生体情報が失われる。したがって、RGB画像データの分光処理により生成される波長分離画像データにおいても生体部位の生体情報が失われてしまう可能性がある。また、RGB画像データが適切な明るさ(輝度)となるように複数の波長の光の光量を調整したとしても、生成される波長分離画像データが適切な明るさ(輝度)になるとは限らない。
本発明は、鮮明な波長分離画像データを取得することを目的とする。
本願において開示される発明の一側面となる撮影装置は、波長が異なる複数の波長の光を生体へ照射する照射部と、前記照射部によって照射された前記生体を撮影して、前記生体の画像データを生成する撮影部と、前記撮影部によって生成された画像データに基づいて、前記複数の波長を分離した複数の波長分離画像データを生成する画像処理部と、前記画像データと、前記画像処理部によって生成された複数の波長分離画像データと、に基づいて、前記複数の波長の光の照射光量を制御する制御部と、を有する。
本発明の代表的な実施の形態によれば、鮮明な波長分離画像データを取得することができる。前述した以外の課題、構成及び効果は、以下の実施例の説明により明らかにされる。
図1は、生体認証例を示す説明図である。 図2は、実施例1にかかる撮影装置および認証装置の構成例を示すブロック図である。 図3は、実施例1にかかる撮影装置および認証装置のブロック構成例1を示すブロック図である。 図4は、実施例1にかかる撮影装置および認証装置のブロック構成例2を示すブロック図である。 図5は、実施例1にかかる生体画像撮影処理手順例を示すフローチャートである。 図6は、近赤外光量とR成分画像データの輝度との関係を示すグラフである。 図7は、緑光量と差分との関係を示すグラフである。 図8は、実施例2にかかる生体画像撮影処理手順例を示すフローチャートである。 図9は、実施例3にかかる生体画像撮影処理手順例を示すフローチャートである。 図10は、実施例4にかかる生体画像撮影処理手順例を示すフローチャートである。
<生体認証例>
図1は、生体認証例を示す説明図である。図1では、3本の指を撮像して生体認証を行う例を示す。認証装置は、多波長の光を出力する光源から照射された指を撮像して、指の撮影画像データIsを生成する。指の撮影画像データIsは、R成分画像データIr、G成分画像データIg、およびB成分画像データIbを含むRGB画像データである。ここでは、一例として、光源から照射する波長の光が、近赤外の波長の光および緑光の波長の光を含んでおり、G成分画像データIgの輝度が最も高く、輝度飽和が生じやすい場合について説明する。
このため、認証装置は、波長分離により、撮影画像データIsから、近赤外波長分離画像データIiと緑光波長分離画像データIcとを生成する。認証装置は、R成分画像データIr、G成分画像データIg、およびB成分画像データIbの中で最も高輝度のG成分画像データIgを用いて、近赤外波長分離画像データIiおよび緑光波長分離画像データIcの各々の輝度が目標輝度となるように光源の光量を制御する。
具体的には、たとえば、認証装置は、
(A)R成分画像データIrの輝度と、近赤外波長分離画像データIiおよび緑光波長分離画像データIcの各々の輝度との関係
(B)G成分画像データIgの輝度と、近赤外波長分離画像データIiおよび緑光波長分離画像データIcの各々の輝度との関係
(C)B成分画像データIbの輝度と、近赤外波長分離画像データIiおよび緑光波長分離画像データIcの各々の輝度との関係
に基づいて、G成分画像データIgの輝度が所定範囲内で、かつ、近赤外波長分離画像データIiおよび緑光波長分離画像データIcの各々の輝度が目標輝度となるように光源の光量を調整する。これにより、撮影した画像データIsの輝度飽和抑制と近赤外波長分離画像データIiおよび緑光波長分離画像データIcの各輝度の安定化との両立を図る。
<撮影装置および認証装置の構成例>
図2は、実施例1にかかる撮影装置および認証装置の構成例を示すブロック図である。撮影装置200は、被写体として筐体200Aの上面板部200B上方にかざされた手210の指を撮影する。実施例1では、例として、人差し指211、中指212および薬指213を被写体(撮像対象)とする。ただし、被写体となる指211~213は、両手210の10本の指のうち2本以上含まれればよい。なお、指211~213の手210の甲側の面を指211~213のオモテ面と称し、指211~213の手210のひら側の面を指211~213のウラ面と称す。
図2では、撮影装置200は、筐体200Aと、撮像部201と、光源202と、データメモリ206と、を有する。撮影装置200にコントローラ207が接続された装置が認証装置208である。筐体200Aは、たとえば、設置面220に取り付けまたは載置(以下、総称して「設置」)される。設置面220は、地面、天井面または机など地面に平行な台の表面でもよく、壁など地面に垂直な面でもよい。なお、設置面220に直交する軸をZ軸とし、Z軸において設置面220から離間する方向を+Z方向とし、設置面220に近接する方向を-Z方向とする。また、設置面220は、XY平面に平行である。XY平面はX軸とY軸とにより張られる平面である。
図2に示したように、手210が上面板部200Bにかざされるように、撮影装置200および認証装置208は設置される。この場合、X軸は、手210が提示されたときの指の長手方向である。Y軸は、指211~213の配列方向である。
筐体200A内部に撮像部201と複数の光源202(図1では、光源202-1、202-2)とを含む。光源202-1、202-2を区別しない場合は、単に光源202と表記する。また、撮像部201と筐体200Aの上面板部200Bとの間には、第1光学フィルタ203が設けられる。
撮像部201は、第1光学フィルタ203を通過した被写体光を受光する。被写体光は、光源202からの照射光が被写体に反射された光(反射光)である。第1光学フィルタ203は特定の波長の光のみを透過させる。これにより、余計な光を撮像部201が受光することを防ぎ、撮影した画像データIsにノイズが発生するのを抑えることができる。撮像部201および筐体200Aの上面板部200Bは、提示される手210と対向する。
また、撮像部201から+Z方向に存在する上面板部200Bの領域には、光源202の照射光が指211~213のような生体で反射した光を透過させる透光板205が設けられる。透光板205は、たとえば、アクリルやガラスなどの透明な部材で構成される。また、透光板205に、特定の波長の光のみを通過させるフィルムが貼着されてもよい。これにより、撮影装置200内部を外部から視認しにくい状態にすることができる。
また、第1光学フィルタ203および第2光学フィルタ204は、偏光フィルタでもよい。これにより、指211~213のような生体に照射して反射された光成分のうち、皮膚表面での鏡面反射成分を低減することができる。したがって、撮影装置200は、生体の血管像をより鮮明に撮像することができる。また、第2光学フィルタ204は、光源202からの照射光の特定の波長のみを透過する帯域フィルタでもよい。これにより、撮像部201はより効率的に特定の波長の光を受光することができる。
撮像部201は、たとえば、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサやCCD(Charge Coupled Device)イメージセンサのようなカラー撮像素子により構成され、RGBなどの複数色の画像データを生成する。撮像部201の撮像面は、上面板部200Bに対向する。
撮像部201は、筐体200A外から上面板部200Bの透光板205および第1光学フィルタ203を介して入射されてくる光を撮像面で受光し、光電変換する。撮像部201は、データメモリ206に接続されており、光電変換した画像データIsをデータメモリ206に格納する。
画像データIsは、指の血管や、指紋のような皮膚表面の凹凸、メラニンや角質といった皮膚組織の吸光特性の違いに基づく皮膚表面の色情報などの複数の生体情報を含む指画像データである。指の血管のみを示す画像データIs(指血管画像データ)でもよく、指紋のような皮膚表面の凹凸や、メラニンや角質といった皮膚組織の吸光特性の違いに基づく皮膚表面の色情報のみを表す画像データIs(指表面画像データ)でもよい。以降では、指画像データおよび指血管画像データ、指表面画像データを総称して、指画像データIsと称す。データメモリ206は、コントローラ207に接続される。
光源202は、第2光学フィルタ204を介して、上面板部200Bから+Z方向に存在する被写体に光を照射する。指の血管を撮影する場合には、光源202からの照射光は、たとえば、近赤外光となる。また、指の皮膚表面を撮影する場合には、光源202からの照射光は、たとえば、緑や青といった可視光となる。
光源202は、筐体200A外のコントローラ207に接続される。コントローラ207は、光源202から照射される光量を制御する。また、コントローラ207は、指211~213の位置を検出したり、指画像データから指211~213内の血管や指紋の特徴を抽出したりする。また、コントローラ207は、データメモリ206に記憶された複数の指画像データを認証してもよい。
具体的には、たとえば、コントローラ207は、指画像データIsを2つデータメモリ206から取得し、指の血管の特徴や指の皮膚表面の特徴から両指画像データIsの人差し指211、中指212、および薬指213が同一人物の人差し指211、中指212、および薬指213であるかを認証する。
図3は、実施例1にかかる撮影装置200および認証装置208のブロック構成例1を示すブロック図である。撮影装置200は、光源制御部300を有する。光源制御部300は、光源202からの照射光の光量を制御する。光源制御部300は、図2に示したコントローラ207に含まれる。コンピュータ310は、認証機能を含む。コンピュータ310は、図1に示したコントローラ207に含まれる。
コンピュータ310は、プロセッサ311と、記憶デバイス312と、入力デバイス313と、出力デバイス314と、通信インターフェース(通信IF)315と、を有する。プロセッサ311、記憶デバイス312、入力デバイス313、出力デバイス314、および通信IF315は、バス316により接続される。プロセッサ311は、コンピュータ310を制御する。記憶デバイス312は、プロセッサ311の作業エリアとなる。また、記憶デバイス312は、各種プログラムやデータを記憶する非一時的なまたは一時的な記録媒体である。記憶デバイス312としては、たとえば、ROM(Read Only Memory)、RAM(Random Access Memory)、HDD(Hard Disk DrIie)、フラッシュメモリがある。入力デバイス313は、データを入力する。入力デバイス313としては、たとえば、キーボード、マウス、タッチパネル、テンキー、スキャナがある。出力デバイス314は、データを出力する。出力デバイス314としては、たとえば、ディスプレイ、プリンタ、スピーカがある。通信IF315は、ネットワークと接続し、データを送受信する。
上述した記憶デバイス312に記憶されたプログラムとしては、たとえば、画像処理プログラムや光源制御プログラム、認証プログラムがある。画像処理プログラムは、プロセッサ311に、撮像部201からの出力信号に基づいて画像データを生成させるプログラムである。光源制御プログラムは、プロセッサ311に、光源202からの照射光量を増減させるプログラムである。認証プログラムは、プロセッサ311に、記憶デバイス312に記憶された指画像データIsの同一性を認証させるプログラムである。なお、画像処理、光源制御および認証の各機能についてソフトウェアでの実現例について説明したが専用回路により、画像処理、光源制御および認証の各機能が実現されてもよい。
すなわち、光源制御部300が含まれない撮影装置200は、図2に示した撮影装置200であり、光源制御部300が含まれた撮影装置200は、図3に示した撮影装置200である。また、画像処理、光源制御および認証の各機能を有する認証装置208は、光源制御部300およびコンピュータ310を含み、図2および図3の認証装置208に対応する。
図4は、実施例1にかかる撮影装置200および認証装置208のブロック構成例2を示すブロック図である。図4に示す撮影装置200および認証装置208は、コンピュータ310を内蔵する。データメモリ206は、記憶デバイス312により実現される。光源制御部300は、記憶デバイス312に記憶されたプログラムをプロセッサ311に実行させることにより実現される。また、認証機能は、記憶デバイス312に記憶されたプログラムをプロセッサ311に実行させることにより実現される。コンピュータ310に認証機能がなければ撮影装置200であり、コンピュータ310に認証機能があれば認証装置208である。
認証の前段階で、コンピュータ310は、入力デバイス313によりユーザIDおよび暗証番号を受け付けたり、通信IF315によりICチップやユーザが所持する通信端末からユーザIDおよび暗証番号をワイヤレス受信したりすることにより、記憶デバイス312に、ユーザIDおよび暗証番号を、当該ユーザの指画像データIsと関連付けて登録してもよい。
また、コンピュータ310は、上述のように入力デバイス313または通信IF315からユーザIDおよび暗証番号と、指画像データIsと、を取得することにより、記憶デバイス312に記憶されているユーザIDおよび暗証番号に関連付けられる指画像データIsを特定し、両指画像データIsを認証してもよい(いわゆる1対1認証)。認証の前段階で暗証番号によってユーザIDを特定し、ユーザIDに関連付けられた指画像データIsと認証することで、より正確な認証が可能となる。なお、コンピュータ310は、記憶デバイス312に記憶されている指画像データ群から、今回入力された指画像データIsと一致する指画像データIsを特定してもよい(いわゆる1対N認証)。
図2~図4における光源202からの照射光は、それぞれ異なる複数の波長の光を含む。指の血管を撮影する場合には、光源202からの照射光は、たとえば、近赤外光となる。また、指の指紋のような皮膚表面の生体情報を撮影するための光として、たとえば、青または緑といった波長の光を用いることができる。光源202からの複数の波長の照射光は、それぞれ独立に制御して照射する光量を調整することができる。したがって、光源202からの複数の波長の照射光は同時に照射することができ、また、それぞれの波長を異なるタイミングで個別に照射することもできる。
<生体画像撮影処理>
図5は、実施例1にかかる生体画像撮影処理手順例を示すフローチャートである。図5では、一例として実行主体を認証装置208とするが、撮影装置200であってもよい。
ステップS501で撮影処理が開始されると、認証装置208は、ステップS502の光源制御により光源202を制御し、光の照射を行う。このとき、光源202は、複数の波長の光を同時に照射する。
つぎに、認証装置208は、ステップS503で画像撮影を行い、取得した画像データIsに対してステップS504で波長分離処理を施す。これにより、画像データIsは、照射した各波長の光の成分に相当する複数の波長分離画像データIi、Icに分離される。ここでは2つの波長分離画像データに分離する例について説明するが、さらにもう1つの波長を設定し、3つの波長分離画像データに分離することもできる。たとえば、青の波長の光に対応する波長分離画像データを用いることで、生体特徴の種類を増やし、認証精度を高めることが可能となる。
つぎに、認証装置208は、ステップS505で、ステップS503で取得した画像データIsおよびステップS504で生体した波長分離画像データIi、Icに対して画像処理を施すことで、指の検出処理を行う。指の検出処理の一例として、画像データの各画素の輝度に対する閾値処理で手の領域を2値化し、2値化した画像データの輪郭線の形状に基づいて指を検出する処理がある。
認証装置208は、ステップS506の指の検出判定において、ステップS505の指検出処理の結果に基づいて、指が検出されたか否かを判定する。指の検出判定(ステップS506)で、指が検出されないと判定した場合(ステップS506:No)、ステップ402の光源制御に戻り、指検出処理を繰り返す。
一方、指が検出されたと判定した場合(ステップS506:Yes)、ステップS507の指領域の輝度算出の処理に移行し、認証装置208は、ステップS503で取得した画像データIsおよびS504で生成した波長分離画像データIi、Icの指領域内の輝度算出を行う。
ステップS508では、認証装置208は、ステップS507で算出した指領域の輝度に基づいて、次回撮影時における複数の光源202の各光量値を計算する。
ステップS509の撮影終了判定では、認証装置208は、たとえば、認証が完了したか否か、撮影時間のタイムアウトが発生したか否か、といった撮影を終了するか否かの判定を行う。撮影が終了すると判定された場合(ステップS509:Yes)、認証装置208は、ステップS510で撮影が終了し、撮影が終了しないと判定された場合(ステップS509:No)、ステップS502に戻り、光源制御を繰り返す。
ステップS502の光源制御では、ステップS508において各光源202の光量値が計算されている場合、認証装置208は、計算された光量値で各光源202を照射するようにし、ステップS503の画像取得を行う。
ステップS507の指領域の輝度算出では、認証装置208は、ステップS503で撮影したRGB成分を含む画像データIsおよびステップS504で生成した複数の波長分離画像データIi、Icに対して、ステップS505の指検出処理で検出した指領域の中の、特に生体特徴の抽出を行う領域の輝度情報を求める。
輝度情報とは、たとえば、指領域内の特に生体特徴の抽出を行う領域の画素の輝度平均値である。指の検出本数が複数ある場合には、検出したすべての指領域の輝度平均を輝度情報としてもよい。また、生体の個体差や手の姿勢変動が大きく、一部の指領域の輝度が大きすぎたり小さすぎたりする可能性がある。
このように、すべての指を一律に適正な範囲内の輝度に調整することが難しい場合、認証装置208は、一部の指を除外した上で輝度算出を行うことで、認証精度の低下を抑えることが可能となる。たとえば、認証装置208は、複数本の指が検出されている中で、輝度飽和が発生した上限輝度以上の指や下限輝度以下の指を除外し、残りの指の指領域の輝度平均を用いて、ステップS508の各光源202の光量値計算を行う。これにより、すべての指領域の輝度を適正な範囲内の輝度に調整することが難しい場合でも、一部の指を除いた残りの指の輝度を適正な範囲内にすることで、高い認証精度を維持することができる。
なお、適正な範囲とは、たとえば、輝度飽和しない輝度の上限値(上限輝度)から、生体情報が欠落しない輝度の下限値(下限輝度)までの所定範囲である。下限輝度の一例としては、画像データ中の血管領域において輝度の明暗のコントラストが十分に観測可能な範囲の下限の輝度とすることができる。
また、ステップS508における各光源202の光量値計算については、複数の波長の光を同時に照射して撮影したRGB画像データIsの各色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbおよび、波長分離画像データIi、Icの輝度Li、Lcが輝度情報として用いられる。
認証装置208は、撮影したRGBの指画像データIsの中で、同時に照射した各波長の光に対する感度の総和が最大となる色成分画像データ(たとえば、画像データIg)の輝度Lgが適正な範囲内の輝度となるように光量を調整する。その上で、各波長分離画像データIi、Icについても同様に、認証装置208は、輝度Li、Lcが適正な範囲内の輝度となるように各光源202の光量値を調整する。
以下では、光源202の照射光は、近赤外光および緑の光とする。この2つの波長の光を光源202から同時に指に照射し、近赤外光および可視光に感度を持つ撮像部201で取得したRGB画像データIsを利用する場合の各光源202の光量値計算(ステップS508)の一例を示す。
撮影したRGB画像データIsの各色成分画像データIr、Ig、Ibの指領域内の画素の輝度Lr、Lg、Lbは、光源202が照射する近赤外光の波長分離画像データIiおよび緑光の波長分離画像データIcの画素の輝度Li、Lcの関数として、下記式(1)~(3)式で表すことができる。
Lr=Fr(Li,Lc)・・・(1)
Lg=Fg(Li,Lc)・・・(2)
Lb=Fb(Li,Lc)・・・(3)
関数Fr、Fg、Fbは、波長分離画像データIiおよび波長分離画像データIcの指領域内の画素の輝度Li、Lcを入力とする関数である。また、波長分離画像データIiおよび波長分離画像データIcは、RGB画像データIsの各色成分画像データIr、Ig、Ibの指領域内の画素の輝度Lr、Lg、Lbに基づいて認証装置208が波長分離処理(S504)を実行することで得られる。波長分離画像データIiおよび波長分離画像データIcの指領域内の画素の輝度Li、Lcは、それぞれ光源202の照射する近赤外光量Qi、緑光量Qcの関数として、下記式(4)、(5)で表すことができる。
Li=Fi(Qi)・・・(4)
Lc=Fc(Qc)・・・(5)
関数Fi、Fcは、それぞれ近赤外光量Qi、緑光量Qcの値を入力とする関数である。認証装置208は、RGB画像データIsの色成分画像データIr、Ig、Ibの指領域内の画素の輝度Lr、Lg、Lbを用いて上記(1)~(3)の連立方程式を解くことで、2つの未知数である波長分離画像データIiおよび波長分離画像データIcの指領域内の画素の輝度Li、Lcを求めることができる。
認証装置208は、上記式(4)、(5)より、2つの波長の光の各照射光量Qi、Qcと、波長分離画像データIiおよび波長分離画像データIcの輝度Li、Lcと、の関係を求める。そして、認証装置208は、観測したR、G、Bの色成分画像データIr、Ig、Ibの各画素の輝度Lr、Lg、Lbが適正な範囲内にあり、かつ波長分離画像データIi、Icの輝度Li、Lcがそれぞれ所定の輝度となるように、各光源202の照射光量(Qi、Qc)を調整する。所定の輝度としては、たとえば、輝度飽和しない輝度の上限輝度と血管領域やその他の生体領域において輝度の明暗のコントラストが十分に観測可能な輝度の下限の間にある輝度とすることができる。
上記式(4)、(5)での輝度Li、Lcは、指領域内の画素群の代表値(平均値、最大値、最小値、中央値、最頻値)でもよい。
たとえば、色成分画像データIr、Ig、Ibのうち光源202から同時に指に照射した近赤外光の感度と緑光の感度との総和が最大となる色成分画像データが、G成分画像データIgであったとする。光源202から近赤外光と緑光を同時に照射して撮影した場合、G成分画像データIgの輝度Lgが最も大きく、輝度飽和が生じるなどの生体情報が欠落する状態になりやすい。G成分画像データIgの生体情報が欠落した状態では、G成分画像データIgを用いて生成される波長分離画像データIi、Icにおいても同様に生体情報が欠落する可能性がある。
したがって、認証装置208は、少なくとも光源202の照射する複数の光の感度の総和が最大となる色成分画像データ(この例は、G成分画像データIg)の輝度が適正な範囲に収まる状態にしつつ、波長分離画像データIi、Icの輝度Li、Lcがそれぞれ所定の輝度となるように各光源202の照射光量(Qi、Qc)を調整する。これにより、鮮明な波長分離画像データIi、Icが得られる。所定の輝度としては、たとえば、輝度飽和しない輝度の上限輝度と血管領域やその他の生体領域において輝度の明暗のコントラストが十分に観測可能な輝度の下限の間にある輝度とすることができる。
同時に指に照射した近赤外光と緑光の感度の総和が最大となるのがG成分画像データIgの場合の例においては、認証装置208は、少なくともG成分画像データIgの輝度Lgを利用して光源202の光量を調整する。この場合、認証装置208は、R成分画像データIrやB成分画像データIbの輝度Lr、Lbも併用して光源202の光量を調整してもよい。波長分離画像データIi、Icを生成するために必要となるRGB画像データIsの各色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbをすべて適正な範囲内に収めることでより鮮明な波長分離画像データIi、Icが得られる。
つぎに、観測したRGB画像データIsから得られる色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbが複数の波長分離画像データIi、Icの輝度Li、Lcの線形結合によって表現できると仮定した場合の、光源制御方法の一例を説明する。色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbは、光源202の照射する近赤外光の成分に相当する波長分離画像データIi、Icの輝度Li、Lcと線形性があるとして、下記式(6)~(8)式で表すことができる。
Lr=Ar×(αR×Li+βR×Lc)・・・(6)
Lg=Ag×(αG×Li+βG×Lc)・・・(7)
Lb=Ab×(αB×Li+βB×Lc)・・・(8)
上記式(6)~(8)のAr、Ag、Abは、任意の値をとる係数である。αR、αG、αBは、近赤外光の波長において撮像部201で撮影したRGB画像データIsの各色成分R、G、Bの受光感度を表す既知の係数である。βR、βG、βBは、緑光の波長においてRGB画像データIsの各色成分R、G、Bの受光感度を表す既知の係数である。また、近赤外光の波長分離画像データIiの輝度Liと近赤外光量Qiとの関係は下記式(9)により、緑光の波長分離画像データIcの輝度Lcと緑光量Qcとの関係は下記式(10)により表すことができる。
Li=αi×Qi・・・(9)
Lc=βc×Qc・・・(10)
αiは、近赤外光量Qiと波長分離画像データIiの輝度Liとの関係を表す係数である。βcは、緑光量Qcと波長分離画像データIcの輝度Lcとの関係を表す係数である。近赤外光量Qiおよび緑光量Qcは、輝度Liおよび輝度Lcを観測したときの認証装置208において設定した光源202の光量の値として読み取ることが可能な既知の値である。近赤外光量Qiおよび観測した輝度Liの関係から上記式(9)により係数αiが求められ、緑光量Qcおよび観測した輝度Lcの関係から上記式(10)により係数βcが求められる。
認証装置208は、観測したRGB画像データIsの色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbと、既知であるRGB画像データIsの各色成分R、G、Bの受光感度αR、αG、αB、βR、βG、βBと、を用いて、上記(6)~(8)の連立方程式を解くことで、2つの未知数である波長分離画像データIi、Icの輝度Li、Lcを求めることができる。
また、認証装置208は、上記式(9)、(10)の関係より、現在の撮影フレームにおいて設定した近赤外光量Qiおよび上記(6)~(8)の連立方程式を解いて求めた輝度Liの関係から係数αiを求める。そして、認証装置208は、緑光量Qcおよび上記(6)~(8)の連立方程式を解いて求めた輝度Lcの関係から係数βcを求める。
次の撮影フレームにおいて、認証装置208は、算出された波長分離画像データIi、Icの輝度Li、Lcが所定の輝度となるように、それぞれ近赤外光量Qi、緑光量Qcを調整する。所定の輝度は、たとえば、血管領域や生体領域の輝度の明暗のコントラストが十分に観測できる値とする。認証装置208は、少なくとも2つの光源202の波長の光の色成分ごとの受光感度の総和{(αR+βR)、(αG+βG)、(αB+βB)}のうち、最大であるG成分画像データIg((αG+βG)が最大)において輝度飽和などが発生しないように適正な範囲内の輝度になるように、かつ、波長分離画像データIi、Icの輝度Li、Lcがそれぞれ適正な範囲内の輝度になるように、次の撮影フレームにおける各光源202の照射光量(Qi、Qc)を調整する。適正な範囲内の輝度は、たとえば、輝度飽和しない輝度の上限輝度と血管領域や生体領域の輝度の明暗のコントラストが十分に観測可能な輝度の下限の間にある輝度とする。
これにより、輝度飽和が発生しやすいG成分画像データIgの輝度飽和の発生を抑制しつつ、波長分離画像データIi、Icの輝度Li、Lcを適正な範囲内の輝度値にすることが可能となる。さらに、G成分画像データIgだけでなく、R成分画像データIrおよびB成分画像データIbの輝度Lr、Lbについても適正な範囲内の輝度となるように光源制御を行うことで波長分離画像データIi、Icの鮮明さをより高めることが可能である。
つぎに、光源202の照射する複数の波長の光と撮影したRGB画像データIsの関係性を簡潔にして、より効率的に光源制御を行う方法の一例を説明する。これまでの説明と同様に、認証装置208は、光源202により近赤外光および緑光を照射光として同時に指に照射し、撮像部201により近赤外光および可視光に感度を持つ撮像部201でRGB画像データIsを撮影する。
撮像部201のRGBの各色成分画像データIr、Ig、Ibの感度特性の特徴として、近赤外光に対しては、R成分画像データIr、G成分画像データIg、B成分画像データIbのすべてにおいてほぼ同等の感度を持つ場合を仮定する。
また、緑光に対してはG成分画像データIgが最も感度が大きく、R成分画像データIrにおいては感度をほぼ持たない場合を仮定する。
これらの仮定を踏まえると、上記式(6)、(7)においてはαR≒αGとみなすことができ、上記式(6)においてはβR≒0とみなすことができる。また任意変数についてAr=Ag=1とすると、上記式(6)で表されたR成分画像データIrの輝度Lrは、下記式(11)のように波長分離画像データIiの輝度Liのみによって表現でき、上記式(7)で表されたG成分画像データIgは、下記式(12)のように、波長分離画像データIi、Icの輝度Li、Lcの線形結合で表現できる。
Lr=αR×Li・・・(11)
Lg=αR×Li+βG×Lc・・・(12)
近赤外光と緑光を同時に指に照射した場合に、両方の波長の光に感度を持ち、R成分画像データIrよりも輝度が大きくなるG成分画像データIgにおいて、認証装置208は、波長分離画像データIi、Icの輝度Li、Lcが輝度飽和などが生じない適正な範囲内の輝度となるように光源202の光量制御を行い、近赤外光量Qiおよび緑光量Qcを再設定する。
この例では、R成分画像データIrは近赤外光にのみ感度αRを持つため、認証装置208は、はじめに上記式(11)に基づき、観測した輝度Lrおよび既知の係数αRから輝度Liを求める。次に、認証装置208は、上記式(9)に基づき、現在の撮影フレームにおいて設定した近赤外光量Qiおよび上記式(11)で求めた輝度Liの関係から係数αiを求める。認証装置208は、上記式(9)で求めた係数αiおよび上記式(11)に基づき、波長分離画像データIiの輝度LiおよびR成分画像データIrの輝度Lrが所定の範囲の輝度となるように、次の撮影フレームにおける近赤外光量Qiを決定する。
上記式(11)によりR成分画像データIrの輝度Lrと波長分離画像データIiの輝度Liの関係性を示す感度αRを先に求めておくことで、認証装置208は、上記式(12)において波長分離画像データIiの影響を差し引いた上でのG成分画像データIgの輝度Lgと波長分離画像データIcの輝度Lcとの関係性を示す感度βGを求めることができる。
つぎに上記(12)および上記式(10)に基づき、認証装置208は、G成分画像データIgの輝度Lgと波長分離画像データIcの輝度Lcとを用いて緑光の光量計算を行う。具体的には、たとえば、認証装置208は、G成分画像データIgの輝度Lgが適正な範囲内に収まり、かつ波長分離画像データIcの輝度Lcが適正な範囲内の所定の輝度となるときの緑光量Qcを、上記式(12)式および上記式(10)に基づいて算出する。所定の輝度としては、たとえば、輝度飽和しない輝度の上限輝度と血管領域や生体領域において輝度の明暗のコントラストが十分に観測可能な輝度の下限の間にある輝度とすることができる。
このように、2つの波長の光を同時に照射して被写体を撮影した場合でも、そのRGB画像データIsと照射した波長の光との関係性を簡潔化したことで、認証装置208は、近赤外光と緑光との光源制御を個別に行うことができ、それぞれの波長光量を効率的に制御することができる。
上記式(1)~(12)で説明した色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbや波長分離画像データIi、Icの輝度Li、Lcと、光源202の照射光量との関係性は、認証装置208に提示される指の位置や姿勢の変化に伴い、リアルタイムに変動すると考えられる。
したがって、上記式(1)~(12)の関係性は、連続的に撮影して同一フレーム(RGB画像データIs)から得られる色成分画像データIr、Ig、Ibおよび波長分離画像データIi、Icごとに計算を行う。そして、上記式(1)~(12)の関係性を毎フレーム計算した上で、次のフレームの撮影において、認証装置208は、鮮明な色成分画像データIr、Ig、Ibおよび波長分離画像データIi、Icが得られるように各光源202の光量を調整する。
このように、色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbおよび波長分離画像データIi、Icの輝度Li、Lcと光源202の照射光量の関係性をリアルタイムに更新しながら計算することによって、指の位置や姿勢の変化に対応して鮮明な色成分画像データIr、Ig、Ibおよび波長分離画像データIi、Icを取得することが可能となる。
つぎに、連続的に撮影するフレームごとに色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbおよび波長分離画像データIi、Icの輝度Li、Lcと光源202の照射光量の関係性を求め、次のフレームの撮影時の各光源202の照射光量の計算方法について述べる。
ここでは、R成分画像データIrの輝度Lrが上記式(11)で、G成分画像データIgの輝度Lgが上記式(12)で表現できる場合を例に説明する。上記式(11)よりR成分画像データIrの輝度Lrは、近赤外光の波長分離画像データIiの輝度Liに比例し、上記式(9)より波長分離画像データIiの輝度Liは近赤外光量Qiと比例関係にあるため、R成分画像データIrの輝度Lrは近赤外光量Qiと比例関係にある。
したがって、R成分画像データIr中の指領域内の輝度Lrの平均輝度Lravを算出すると、Lrav=a×近赤外光量Qiの関係性より係数a(比例定数)が求められる。上記式(11)より、R成分画像データIrの輝度Lrと波長分離画像データIiの輝度Liは線形性を持つ関係である。そこで、予め波長分離画像データIiの輝度Liの目標輝度TLiを設定しておき、R成分画像データIrの輝度Lrと波長分離画像データIiの輝度Liとの関係から、波長分離画像データIiの輝度Liが目標輝度TLiとなるときのR成分画像データIrの輝度Lrを目標輝度TRとして定める。
図6は、近赤外光量QiとR成分画像データIrの輝度Lrとの関係を示すグラフである。図6に示すように、近赤外光量Qi=IR1と近赤外光量IR1で照射した場合に観測したR成分画像データIrの指領域の平均輝度Lrav=R1との関係は直線近似できる(R1=a×IR1)。認証装置208は、この関係性からR成分画像データIrの輝度Lrを目標輝度TRにするための近赤外光量Qi=TIRを推定し、次回撮影時の照射光量とすることができる。
つぎに、認証装置208は、緑光量Qcの調整を行う。ここで、上記式(12)から上記式(11)を引き算することで下記式(13)が得られる。
Lg-Lr=βG×Lc・・・(13)
G成分画像データIgの輝度LgとR成分画像データIrの輝度Lrとの差分(Lg-Lr)は、緑光の波長分離画像データIcの輝度Lcに比例し、上記式(10)より波長分離画像データIcの輝度Lcは緑光量Qcに比例する。このため、G成分画像データIgの輝度LgとR成分画像データIrの輝度Lrとの差分(Lg-Lr)は、緑光量Qcに比例することがわかる。
つまり、G成分画像データIgとR成分画像データIrとの指領域内の輝度差分(Lg-Lr)をDavとすると、Dav=b×緑光量Qcの関係性より係数b(比例定数)が求められる。このように、上記式(13)および上記式(10)に基づき、観測したG成分画像データIgの輝度LgとR成分画像データIrの輝度の差分(Lg-Lr)と緑光量Qcとの関係性が求まる。これにより、認証装置208は、G成分画像データIgの輝度Lgおよび波長分離画像データIcの輝度Lcが適正な大きさとなるように緑光量Qcを調整することができる。
具体的には、たとえば、予め、G成分画像データIgの輝度Lgが適正な範囲に収まりつつ、波長分離画像データIcの輝度Lcが適正な範囲内の目標輝度TLcを設定しておく。また、G成分画像データIgの輝度LgとR成分画像データIrの輝度Lrとの輝度差分Davと波長分離画像データIcの輝度Lcとの関係から、波長分離画像データIcの輝度Lcが目標輝度TLcとなるときのG成分画像データIgの輝度LgとR成分画像データIrの輝度Lrとの輝度差分Davを輝度差分目標値TDとして定める。
図7は、緑光量Qcと輝度差分Davとの関係を示すグラフである。図7に示すように、緑光量QcがQc=G1のときに観測したG成分画像データIgとR成分画像データIrの指領域の輝度差分値D1と、緑光量G1との関係は、直線で近似できる(D1=b×G1)。この関係性から、認証装置208は、G成分画像データIgの輝度LgとR成分画像データIrの輝度Lrとの輝度差分Davを輝度差分目標値とするための緑光量Qc=TGを推定し、次回撮影時の照射光量とする。
このように、認証装置208は、近赤外光量Qi、緑光量Qcの順番で、次のフレーム撮影時の光量値を求め、光源制御を行うことで、指の位置や姿勢が変動した場合でも、その変動に対応して鮮明な色成分画像データIr、Ig、Ibおよび波長分離画像データIi、Icを得ることができるようになる。
今回の例では、色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbおよび波長分離画像データIi、Icの輝度Li、Lcが線形性を持ち、いくつかの近似により光量計算が簡略化できる場合について説明した。しかし、上記式(1)~(5)において色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbおよび波長分離画像データIi、Icの輝度Li、Lcとの関係が線形性を持たない場合においても、フレーム毎に光源202の光量値と色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbおよび波長分離画像データIi、Icの輝度Li、Lcとの関係性が求められれば、指の位置や姿勢が変動に対応した光源制御を行うことができることは言うまでもない。
実施例2は、実施例1において、すべての波長分離画像データIi、Icが同時に適正な範囲内の輝度に調整できない場合に、高い認証精度を実現するために光源制御を行う例である。実施例1と同一構成には同一符号を付し、その説明を省略する。
実施例1では、認証装置208は、複数の波長の光を指に同時に照射して撮影したRGB画像データIsから生成する複数の波長分離画像データIi、Icが鮮明となるように各光源の照射光量を制御する。ここで、すべての波長分離画像データIi、Icを同時に目標輝度にしようとすると、生体の個人差や、指の姿勢変動などによりRGB画像データIsの中の一部の色成分画像データで輝度飽和が生じる可能性がある。
輝度飽和が発生すると波長分離画像データIi、Icの指領域において生体情報が欠落するため、認証精度が低下してしまう。そこで、高い認証精度を維持するため、複数の波長分離画像データIi、Icのうち、高精度化に寄与する割合が大きい波長分離画像データの輝度を適正にすることを優先する。複数の波長分離画像データIi、Icのすべての輝度を適正にできない場合でも、より高精度化に寄与する波長分離画像データの輝度を優先して適正な値にすることで、高い認証精度を維持することができる。
図8は、実施例2にかかる生体画像撮影処理手順例を示すフローチャートである。図8では、一例として実行主体を認証装置208とするが、撮影装置200であってもよい。
ステップS801で撮影処理が開始されると、認証装置208は、ステップS802の光源制御により光源202を制御し、光の照射を行う。このとき、光源202は、複数の波長の光を同時に照射する。つぎに、認証装置208は、ステップS803で画像撮影を行って画像データIsを取得し、ステップS804で画像データIsに対して波長分離処理を施す。これにより、認証装置208は、ステップS803の撮影で得られた画像データIsを、照射した複数の波長の光の各波長成分で分離して、複数の波長分離画像データIi、Icを生成する。
つぎに、認証装置208は、ステップS805で、ステップS803で取得した画像データIsまたはステップS804で生成した波長分離画像データIi、Icに対して画像処理を施すことで、指領域の検出処理を行う。
ステップS806の指の検出判定では、認証装置208は、ステップS805の指検出処理の結果に基づいて、指が検出されたか否かを判定する。指の検出判定(ステップS805)で、指が検出されないと判定した場合(ステップS806:No)、ステップ602の光源制御に戻り、指検出処理を繰り返す。
指の検出判定(ステップS805)で、指が検出されたと判定した場合(ステップS806:Yes)、ステップS807の指領域の輝度算出の処理に移行し、認証装置208は、ステップS803で取得した画像データIsの色成分画像データIr、Ig、Ibの指領域内の輝度Lr、Lg、Lbと、ステップS804で生成した波長分離画像データIi、Icの指領域内の輝度Li、Lcを算出する。
ステップS808では、認証装置208は、ステップS807で算出した指領域内の輝度と光源202の光量値に基づいて、画像データの輝度調整可否判定を行う。そして、認証装置208は、光源制御によってすべての波長分離画像データIi、Icが同時に適正な範囲内の輝度に調整可能か否かを判定する。
すべての波長分離画像データIi、Icが調整可能と判定した場合(ステップS808:Yes)、ステップS809の各光源の第1光量値計算に進む。そして、認証装置208は、ステップS807で算出した指領域の輝度に基づいて、ステップS803で取得した画像データIsおよびすべての波長分離画像データIi、Icが適正な範囲内の輝度になるように、次回撮影時における複数の光源202の各光量値を計算する。
画像データIsおよびすべての波長分離画像データIi、Icが調整不可能と判定した場合(ステップS808:No)、ステップS810の各光源202の第2光量値計算(ステップS810)に進む。そして、認証装置208は、高精度化に寄与する割合の高い波長分離画像データを優先して、適正な範囲内の輝度になるように次回撮影時における複数の光源202の各光量値を計算する。
優先する波長分離画像データは、実験から事前に求めた高精度化への寄与の割合に基づいて決定される。たとえば、波長分離画像データIiを用いた場合の誤認証率および波長分離画像データIcを用いた場合の誤認証率をそれぞれ実験で求めて記憶デバイス312に格納しておく。
認証装置208は、記憶デバイス312から誤認証率を取得して、誤認証率の低い方の波長分離画像データを優先する。また、認証装置208は、過去の認証結果(履歴情報)を用いて、波長分離画像データIi、Icごとに誤認証率を算出して、記憶デバイス312に上書きしてもよい。これにより、認証装置208は、記憶デバイス312から最新の誤認証率を取得して、誤認証率の低い方の波長分離画像データを優先する。これにより、より高精度な認証を実現することが可能となる。
ステップS811の撮影終了判定では、認証装置208は、たとえば、認証が完了したか否かや、撮影時間のタイムアウトが発生したか否かといった撮影の終了判定を行う。撮影が終了すると判定された場合(ステップS811:Yes)、ステップS812で撮影が終了する。一方、撮影が終了しないと判定された場合(ステップS811:No)、ステップS802に戻り、認証装置208は、光源制御を行う。
ステップS802の光源制御では、ステップS808において、各光源202の光量値が計算されている場合、認証装置208は、各光源202が計算された光量値で照射するようにし、ステップS803の画像取得を行う。
ステップS808の画像データの輝度調整可否判定では、ステップS803で取得した画像データIsがRGB画像データの場合、認証装置208は、たとえば、いずれかの色成分画像データIr、Ig、Ibにおいて指領域で輝度飽和が発生したり、しきい値以下の輝度となるときに、ステップS804で生成したすべての波長分離画像データIi、Icを同時に適正な範囲内の輝度にできないと判定する。
ステップS803で取得したRGB画像データIsのいずれの色成分画像データIr、Ig、Ibも適正な範囲内の輝度であっても、ステップS809の第1光量値計算によって算出された光量値で各光源202を照射すると、次の撮影において取得されるRGB画像データIsのいずれかの色成分画像データIr、Ig、Ibにおいて、輝度飽和が発生したり、しきい値以下の輝度となることがある。このような場合についても、認証装置208は、画像データの輝度調整が不可能と判定することができる。
また、ステップS808の画像データの輝度調整可否判定では、認証装置208は、連続的に撮影する複数フレームにまたがって判定を行うことで、より正確に輝度の調整可否判定ができるようになる。たとえば、複数フレームで連続的にステップS809の各光源の第1光量値計算を行った場合に、撮影するRGB画像データIsおよび生成した波長分離画像データIi、Icが同程度の輝度で安定するが、RGB画像データIsの一部の色成分画像データで輝度飽和が発生したり、輝度がしきい値以下になるといった場合がある。このような場合、認証装置208は、画像データの輝度調整が不可能であると判定することができる。
ステップS809の各光源202の第1光量値計算は、すべての波長分離画像データIi、Icが適正な範囲内の輝度に調整可能と判断された場合の光量値計算である。したがって、実施例1の図4のフローチャートにおけるS508の各光源の光量値計算と同じであり、実施例2では説明を割愛する。
ステップS810の各光源202の第2光量値計算は、複数の波長分離画像データIi、Icのうち、高精度化に寄与する割合の高い波長分離画像の輝度が適正な範囲内の輝度になるように優先的に光源202の光量値を調整する処理である。具体的には、優先する波長分離画像データ(優先画像データ)および波長分離画像データIi、Icを生成するために、認証装置208は、生成元となるRGB画像データIsの色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbが適正な範囲内の輝度となるように各光源202の光量調整を行う。
優先画像データ以外の波長分離画像データの輝度については、優先画像データおよびRGB画像データIsが適正な範囲内の輝度である目標輝度から所定範囲外に逸脱しないという条件付きで、認証装置208は、適正な範囲内の輝度である目標輝度から所定範囲内の輝度となるように、各光源202の光量調整を行う。
実施例3は、実施例1および実施例2において、太陽光や室内照明などの外光の影響が大きい場合で、より鮮明に生体撮影するために光源制御を行う例である。実施例1と同一構成には同一符号を付し、その説明を省略する。
実施例1および実施例2においては、撮影したRGB画像データIsの色成分画像データIr、Ig、Ibのうち光源202から照射する複数の波長の光の色成分ごとの受光感度の総和{(αR+βR)、(αG+βG)、(αB+βB)}のうちが最大となる色成分画像データを用いて、光源制御を行い鮮明な画像撮影を行う方法について説明した。
撮像部201の照射する波長の光の感度特性は予め分かるため、RGB画像データIsのうちどの色成分画像データの輝度が大きくなりやすいかは撮影する前に判断できることを前提としている。しかし、特定の波長帯の光が非常に強い室内灯などの影響によって、撮影したRGB画像データIsの色成分画像データIr、Ig、Ibのうち最も明るくなる色成分画像データが変動する可能性が考えられる。このように撮影時の環境光(外光)の影響を考慮した場合の光源制御方法について説明する。
図9は、実施例3にかかる生体画像撮影処理手順例を示すフローチャートである。図9では、一例として実行主体を認証装置208とするが、撮影装置200であってもよい。ステップS901の撮影開始からステップS907の画像データからの指領域の輝度算出までは、実施例1における図5のフローチャートにおけるステップS501からステップS507と同じ処理であるため、説明を割愛する。
ステップS908では、認証装置208は、ステップS907で算出したRGB画像データIsの各色成分画像データIr、Ig、Ibの指領域の平均輝度などの輝度情報を算出する。そして、認証装置208は、光源202の照射光および外光の影響により最も輝度が大きくなる色成分画像データを決定する。
ステップS909では、認証装置208は、ステップS910で決定した最高輝度を持つ色成分画像データの輝度を少なくとも利用し、ステップS907で算出した指領域の輝度に基づいて、次回撮影時における複数の光源202の各光量値を計算する。
ステップS902における光源制御およびステップS909における各光源202の光量値計算については、認証装置208は、複数の波長の光を同時に照射して撮影したRGB画像データIsの各色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lb、および、波長分離画像データIi、Icの輝度Li、Lcを用いる。
撮影した指画像データIsの中で、同時に照射した各波長の光の色成分ごとの受光感度の総和{(αR+βR)、(αG+βG)、(αB+βB)}のうち最大となる色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbが大きすぎず、小さすぎず、適正な範囲内の輝度になるように光量を調整する。その上で、各波長分離画像データIi、Icについても同様に、輝度Li、Lcが適正な範囲内の輝度となるように各光源202の光量値を調整する。
実施例3においては、光源202の照射光は、近赤外光および緑の光とする。そして、この2つの光を同時に指に照射して近赤外光および可視光に感度を持つ撮像部201で取得されたRGB画像データIsを利用した、ステップS909の各光源202の光量値計算の一例を示す。
撮影した各色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbは、光源202の照射する近赤外光の成分に相当する波長分離画像データIiの輝度Liおよび緑光の成分に相当する波長分離画像データIcの輝度Lc、そして特定の波長の外光成分に相当する波長分離画像データIoの輝度Loの関数として、下記式(14)~(16)で表すことができる。
Lr=Fr2(Li,Lc,Lo)・・・(14)
Lg=Fg2(Li,Lc,Lo)・・・(15)
Lb=Fb2(Li,Lc,Lo)・・・(16)
関数Fr2、Fg2、Fb2は、波長分離画像データIiの輝度Li、波長分離画像データIcの輝度Lcおよび波長分離画像データIoの輝度Loを入力とする関数である。観測した各R、G、Bの色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbを基に上記式(14)~(16)の連立方程式を解くことで、3つの未知数である各波長分離画像データIi、Ic、Ioの輝度Li、Lc、Loが求められる。また、波長分離処理で得られる近赤外光の波長分離画像データIiの輝度Liおよび緑光の波長分離画像データIcの輝度Lcは、それぞれ近赤外光量Qi、緑光量Qcの関数として、下記式(17)、(18)で表すことができる。
Li=Fi2(Qi)・・・(17)
Lc=Fc2(Qc)・・・(18)
関数Fi2、Fc2はそれぞれ、近赤外光量Qi、緑光量Qcを入力とする関数である。さらに、外光を特定の範囲の波長帯に限定しているため、観測した各R、G、Bの色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbを基に外光成分の波長帯に分離した波長分離画像データIoの輝度Loは、外光の関数として下記式(19)で表すことができる。
Lo=Fn(Lo)・・・(19)
関数Fnは外光の光量値を入力とする関数であるが、基本的に外光は未知であり光量制御不能なため、上記式(19)の関係を求めたり、外光成分の波長分離画像データLoの輝度Loを調整したりすることはできない。したがって、認証装置208は、光源202の各波長の光の照射光量および外光と、色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbおよび波長分離画像データIi、Ic、Ioの輝度Li、Lc、Loの関係(上記式(14)~(18))を求める。そして、認証装置208は、観測した色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbが適正な範囲内にあり、かつ、波長分離画像データIi、Icの輝度Li、Lcが適正な範囲内の輝度となるように、各光源202の照射光量を調整する。
このとき、RGB画像データIsの各色成分画像データIr、Ig、Ibのうち同時に指に照射した近赤外光、緑光および外光の感度の総和{(ar+br+cr)、(ag+bg+cg)、(ab+bb+cb)}のうち最大となる色成分画像データが、仮にB成分画像データIbであったとする((ab+bb+cb)が最大値)。ar、br、cr、ag、bg、cg、ab、bb、cbについては、下記式(20)~(22)で後述する。
この場合、B成分画像データIbの輝度Lbが最も大きく、輝度Lbが飽和するなどの生体情報が欠落する状態になりやすい。したがって、少なくとも光源202の照射する近赤外光および緑光の感度と外光の感度の総和が最大となるB成分画像データIbの輝度Lbが適正な範囲に収まる状態にしつつ、波長分離画像データIi、Icの輝度Li、Lcが適正な範囲内の輝度となるように各光源202の照射光量を調整することで、鮮明な波長分離画像データIi、Icが得られる。
同時に指に照射した近赤外光および緑光の感度と外光の感度の総和が最大となるのがB成分画像データIbの場合の例においては、少なくともB成分画像データIbの輝度Lbを利用して光源202の光量を調整するが、認証装置208は、その他のR成分画像データIrやG成分画像データIgの輝度Lr、Lgも併用して光源202の光量を調整してもよい。波長分離画像データIi、Icを生成するために必要なRGB画像データIsの各色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbをすべて適正な範囲内に収めることでより鮮明な波長分離画像データIi、Icを得ることができる。
つぎに、観測したRGB画像データIsの色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbが複数の波長分離画像データIi、Icの線形結合によって表現できると仮定した場合の、光源制御方法の一例を説明する。撮影した各R、G、Bの色成分画像データIr、Ig、Ibは光源202の照射する近赤外光の成分に相当する波長分離画像データIiの輝度Li、緑光の成分に相当する波長分離画像LデータIcの輝度Lcおよび外光成分に相当する波長分離画像データIoの輝度Loと線形性があるとして、下記(20)~(22)で表すことができる。
Lr=Br×(ar×Li+br×Lc+cr×Lo)・・・(20)
Lg=Bg×(ag×Li+bg×Lc+cg×Lo)・・・(21)
Lb=Bb×(ab×Li+bb×Lc+cb×Lo)・・・(22)
Br、Bg、Bbは、任意の値をとる係数である。ar、ag、abは、近赤外光の波長における撮像部201で撮影したRGB画像データIsの色成分画像データIr、Ig、Ibの受光感度を表す既知の係数である。br、bg、bbは、緑光の波長におけるRGB画像データIsの色成分画像データIr、Ig、Ibの受光感度を表す既知の係数である。
cr、cg、cbは、外光の波長におけるRGB画像データIsの色成分画像データIr、Ig、Ibの受光感度を表す既知の係数である。上記式(20)~(22)の連立方程式を解くことで、未知の輝度Li、Lc、Loを求めることができる。また、近赤外光の波長分離画像データIiの輝度Liと近赤外光量Qiとの関係は下記式(23)により、緑光の波長分離画像データIcの輝度Lcと緑光量Qcとの関係は下記式(24)により表すことができる。
Li=Ai×Qi・・・(23)
Lc=Bc×Qc・・・(24)
Aiは、近赤外光量Qiと近赤外光の波長分離画像データIiの輝度Liとの関係を表す係数である。Bcは、緑光量Qcと緑光の波長分離画像データIcの輝度Lcとの関係を表す係数である。
このように、外光成分の輝度Loの影響を考慮しながら上記(20)~(22)で表されるRGB画像データIsの輝度が最大となる色成分画像データIr、Ig、Ibの輝度Lr、Lg、Lbが適正な範囲に収まる状態にしつつ、波長分離画像データIi、Icの輝度Li、Lcがそれぞれ適正な範囲内の輝度となるように各光源202の照射光量を調整することで、鮮明な波長分離画像データIi、Icが得られる。
実施例4は、実施例1~実施例3において、光源制御により各光源202の照射光量を調整した上で得られた各波長分離画像データを用いた複数の生体特徴データの照合方法について説明する。
各光源202の照射光量を調整して撮影したRGB画像データIsから生成する波長分離画像データは、波長ごとに異なる生体情報を含む。認証装置208は、それぞれの波長分離画像データから異なる生体特徴データを抽出する抽出部と、抽出部によって抽出された複数の生体特徴データ(マルチモーダル生体特徴データ)の照合を行う照合部と、を有する。抽出部および照合部はそれぞれ、記憶デバイス312に記憶された抽出プログラムおよび照合プログラムをプロセッサ311に実行させることにより実現される機能である。これにより、単一の生体特徴データを用いる場合と比べて高精度な認証が実現される。
実施例4では、照合部は、複数の光源202の光量調整後に得られた各波長分離画像データの輝度に基づいて、波長分離画像データ(モダリティ)ごとに信頼度を算出する。たとえば、波長分離画像データごとに輝度が飽和せず、血管領域の輝度の明暗のコントラスト等の生体特徴をより正確に捉えることが可能な輝度が、目標輝度として予め記憶デバイス312に格納される。
光量調整後に得られた各波長分離画像データの輝度と上述した目標輝度との差分が小さいほど、信頼度が高くなるように設定する。そして、照合部は、モダリティごとに算出した信頼度の比率に基づいて各モダリティの生体特徴データの照合結果を合成する際の比率を決定する。たとえば、波長分離画像データが2つ存在する場合、照合部は、それぞれの波長分離画像データから抽出した生体特徴データ1および生体特徴データ2を予め登録されている生体特徴と照合して、類似度に相当する照合スコア1および照合スコア2を算出する。
2つの照合スコア1,2を線形結合などによって1つの照合スコアに合成する際に、波長分離画像データごとに算出した信頼度の大きさの比率に基づいて線形結合時の照合スコアの重みを決定する。これにより、より信頼度の高い波長分離画像データの照合スコアを合成後のスコアに反映することができる。したがって、血管領域における輝度の明暗のコントラスト等の生体特徴をより正確に捉えた波長分離画像データの信頼度を高く設定し、より高精度な認証が実現される。
図10は、実施例4にかかる生体画像撮影処理手順例を示すフローチャートである。図10では、一例として実行主体を認証装置208とするが、撮影装置200であってもよい。ステップS1001の撮影開始からステップS1008の各光源の光量値計算までは、実施例1における図5のフローチャートにおけるステップS501からステップS508と同じ処理であるため、説明を割愛する。
ステップS1009では、認証装置208は、各光源202の光量値および撮影したRGB画像データIsおよび各波長分離画像データの輝度に基づいて光源制御の終了判定を行う。光源制御が終了したと判定した場合(ステップS1009:Yes)、認証装置208は、次のステップS1010で撮影終了判定を行う。光源制御が終了していないと判定した場合(ステップS1009:No)、ステップS1002の光源制御に戻る。
ステップS1010の撮影終了判定では、認証装置208は、たとえば、撮影開始から数えてタイムアウト時間に到達したか否かを判定する。タイムアウト時間に到達した場合などの撮影が終了判定された場合(ステップS1010:Yes)、認証装置208は、ステップS1011で撮影を終了する。撮影が終了判定されない場合(ステップS1010:No)、認証装置208は、抽出部での生体特徴データの抽出により(ステップS1012)、各波長分離画像データの各指領域から照合を行うための生体特徴データを抽出する。
つぎに、認証装置208は、上述したように、照合部により、各波長分離画像データの信頼度算出を行う(ステップS1013)。認証装置208は、照合部により、ステップS1012で各波長分離画像データ(近赤外画像データおよび緑光画像データ)の各指領域から抽出したマルチモーダル生体特徴データを、予めデータベースに登録されているマルチモーダル生体特徴データと照合し、照合スコアを算出する(ステップS1014)。データベースは、記憶デバイス312またはコンピュータ310と通信可能な他のコンピュータの記憶デバイス312により実現される。照合スコアは、たとえば、テンプレートマッチングや特徴点マッチングなどの照合により算出される。
ステップS1015の認証処理では、認証装置208は、ステップS1013で求めた各波長分離画像データ(モダリティ)の信頼度に基づいて、ステップS1014で算出したマルチモーダル生体特徴データの各モダリティの生体特徴データの照合スコアを合成し、合成した照合スコアに対して認証可否判定を行う。
認証可否判定では、認証装置208は、照合スコアが予め設定した閾値より大きい場合には、認証成功、閾値以下の場合には認証失敗と判定する。照合スコアの合成は、たとえば、各モダリティの照合スコアの線形結合である。この線形結合における各モダリティの照合スコアの係数は、上述の様にステップS1013で求めた信頼度に基づき決定される。これにより、合成時に信頼度の高いモダリティの照合スコアの比率を高め、認証精度を向上することができる。
ステップS1016の認証完了判定では、認証装置208は、ステップS1015で照合スコアに基づいて認証処理を行った結果、認証が終了するか否かを判定する。認証が終了すると判定した場合(ステップS1016:Yes)、認証装置208は、ステップS1011で撮影を終了し、認証がまだ終了しないと判定した場合(ステップS1016:No)、ステップS1002の光源制御に戻る。
ステップS1009の光源制御の終了判定では、認証装置208は、撮影したRGB画像データIsの輝度および各波長分離画像データの輝度が適正な範囲内に収まっているか否かに基づいて判定することができる。また、認証装置208は、連続する複数フレームにまたがって光源制御の終了判定を行うようにしてもよい。複数フレームで連続して、各波長分離画像の輝度が適正な範囲に収まっている状態で光源制御を終了するようにすることで、より正確かつ安定して光源制御の終了判定ができるようになる。またすべての波長分離画像データの輝度が適正な範囲内に収まらない場合でも、連続的に輝度値が安定している状態を光源制御の終了条件とすることも可能である。
ステップS1013の各波長分離画像データの信頼度算出では、認証装置208は、各波長分離画像データの輝度が適正な値に近いか否かなどの指標に基づいて、各波長分離画像データの信頼度を算出する。指の検出本数が複数ある場合には、各波長分離画像データの算出した信頼度を、検出したすべての指に適用することができる。また、検出した指ごとに異なる信頼度としてもよい。このように、認証装置208は、波長分離画像データごとに検出した各指領域の輝度平均等の輝度情報を基に、信頼度を計算することができる。
また、生体の個体差や手の姿勢変動が大きく、一部の指領域の輝度が大きすぎたり小さすぎたりする可能性がある。このように、すべての指を一律に適正な範囲内の輝度に調整することが難しい場合は、認証装置208は、より適正な範囲内の輝度である指の信頼度を高くし、適正な範囲から外れた輝度である指の信頼度を低くすることで、認証精度を向上することができる。
なお、本発明は前述した実施例に限定されるものではなく、添付した特許請求の範囲の趣旨内における様々な変形例及び同等の構成が含まれる。たとえば、前述した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに本発明は限定されない。また、ある実施例の構成の一部を他の実施例の構成に置き換えてもよい。また、ある実施例の構成に他の実施例の構成を加えてもよい。また、各実施例の構成の一部について、他の構成の追加、削除、または置換をしてもよい。
また、前述した各構成、機能、処理部、処理手段等は、それらの一部又は全部を、たとえば集積回路で設計する等により、ハードウェアで実現してもよく、プロセッサがそれぞれの機能を実現するプログラムを解釈し実行することにより、ソフトウェアで実現してもよい。
各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリ、ハードディスク、SSD(Solid State Drive)等の記憶装置、又は、IC(Integrated Circuit)カード、SDカード、DVD(Digital Versatile Disc)の記録媒体に格納することができる。
また、制御線や情報線は説明上必要と考えられるものを示しており、実装上必要な全ての制御線や情報線を示しているとは限らない。実際には、ほとんど全ての構成が相互に接続されていると考えてよい。
200 撮影装置
200A 筐体
200B 上面板部
201 撮像部
202 光源
203 第1光学フィルタ
204 第2光学フィルタ
205 透光板
206 データメモリ
207 コントローラ
208 認証装置
220 設置面
300 光源制御部
310 コンピュータ
311 プロセッサ
312 記憶デバイス
313 入力デバイス
314 出力デバイス

Claims (8)

  1. 波長が異なる複数の波長の光を生体へ照射する照射部と、
    前記照射部によって照射された前記生体を撮影して、前記生体の画像データを生成する撮影部と、
    前記撮影部によって生成された画像データに基づいて、前記複数の波長を分離した複数の波長分離画像データを生成する画像処理部と、
    前記画像データと、前記画像処理部によって生成された複数の波長分離画像データと、に基づいて、前記複数の波長の光の照射光量を制御する制御部と、
    を有することを特徴とする撮影装置。
  2. 請求項1に記載の撮影装置であって、
    前記制御部は、前記画像データの輝度および前記波長分離画像データの輝度が所定の範囲内に収まるように、前記複数の波長の光の照射光量を制御する、
    ことを特徴とする撮影装置。
  3. 請求項2に記載の撮影装置であって、
    前記画像データは、属性が異なる複数の属性画像データにより構成される、
    ことを特徴とする撮影装置。
  4. 請求項1に記載の撮影装置であって、
    前記制御部は、前記複数の属性画像データのうち、少なくとも前記照射部が照射する前記複数の波長の光の感度の総和が最大となる特定の属性画像データの輝度が所定の範囲内に収まるように、前記複数の波長の光の照射光量を制御する、
    ことを特徴とする撮影装置。
  5. 請求項1に記載の撮影装置であって、
    前記制御部は、前記複数の波長分離画像データのうち、認証精度への寄与率の高い特定の波長分離画像データの輝度が所定の範囲に収まるように、前記複数の波長の光の照射光量を制御する、
    ことを特徴とする撮影装置。
  6. 請求項4に記載の撮影装置であって、
    前記制御部は、前記複数の属性画像データのうち、前記複数の波長の光の各々の感度と前記照射部から照射されずに前記撮影部が受光した他の波長の光の感度との総和が最大となる特定の属性画像データの輝度が、所定の範囲に収まるように、前記複数の波長の光の照射光量を制御する、
    ことを特徴とする撮影装置。
  7. 請求項1に記載の撮影装置であって、
    前記生体は複数の指であり、
    前記制御部は、前記複数の指についての前記画像データおよび前記複数の波長分離画像データに含まれる一部の指の領域に基づいて、前記複数の波長の光の照射光量を制御する、
    ことを特徴とする撮影装置。
  8. 波長が異なる複数の波長の光を生体へ照射する照射部と、
    前記照射部によって照射された前記生体を撮影して、前記生体の画像データを生成する撮影部と、
    前記撮影部によって生成された画像データに基づいて、前記複数の波長を分離した複数の波長分離画像データを生成する画像処理部と、
    前記画像データと、前記画像処理部によって生成された複数の波長分離画像データと、に基づいて、前記複数の波長の光の照射光量を制御する制御部と、
    前記複数の波長分離画像データの各々から生体特徴データを抽出する抽出部と、
    前記抽出部によって抽出された複数の生体特徴データの各々を既登録の生体特徴データと照合する照合部と、
    を有することを特徴とする認証装置。
JP2022032968A 2022-03-03 2022-03-03 撮影装置および認証装置 Pending JP2023128557A (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2022032968A JP2023128557A (ja) 2022-03-03 2022-03-03 撮影装置および認証装置
CN202211069405.1A CN116761053A (zh) 2022-03-03 2022-09-02 摄影装置及认证装置
US17/944,048 US20230281284A1 (en) 2022-03-03 2022-09-13 Photographing apparatus and authentication apparatus
EP22195586.7A EP4239586A1 (en) 2022-03-03 2022-09-14 Photographing apparatus and authentication apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022032968A JP2023128557A (ja) 2022-03-03 2022-03-03 撮影装置および認証装置

Publications (2)

Publication Number Publication Date
JP2023128557A true JP2023128557A (ja) 2023-09-14
JP2023128557A5 JP2023128557A5 (ja) 2024-06-24

Family

ID=83318867

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022032968A Pending JP2023128557A (ja) 2022-03-03 2022-03-03 撮影装置および認証装置

Country Status (4)

Country Link
US (1) US20230281284A1 (ja)
EP (1) EP4239586A1 (ja)
JP (1) JP2023128557A (ja)
CN (1) CN116761053A (ja)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004178498A (ja) 2002-11-29 2004-06-24 Trecenti Technologies Inc 閲覧情報管理システムおよび管理方法
JP4671811B2 (ja) * 2004-11-05 2011-04-20 日立オートモティブシステムズ株式会社 指認証装置
WO2008136644A2 (en) * 2007-05-07 2008-11-13 Innozest Inc. Apparatus and method for recognizing subcutaneous vein pattern
JP6707943B2 (ja) * 2016-03-25 2020-06-10 富士通株式会社 生体画像処理装置及び生体画像処理方法
EP3955063B1 (fr) 2020-08-12 2024-07-03 The Swatch Group Research and Development Ltd Mécanisme horloger muni d'un engrenage magnétique
JP7507659B2 (ja) * 2020-11-06 2024-06-28 株式会社日立製作所 撮影装置、認証装置及び生体撮影方法

Also Published As

Publication number Publication date
EP4239586A1 (en) 2023-09-06
US20230281284A1 (en) 2023-09-07
CN116761053A (zh) 2023-09-15

Similar Documents

Publication Publication Date Title
JP6899537B2 (ja) 人体検出装置
US10599932B2 (en) Personal electronic device for performing multimodal imaging for non-contact identification of multiple biometric traits
WO2017187718A1 (ja) 撮像装置、認証処理装置、撮像方法、認証処理方法およびプログラム
KR102322029B1 (ko) 생체 정보 획득 방법 및 이를 위한 장치
US9659205B2 (en) Multimodal imaging system and method for non-contact identification of multiple biometric traits
JP5292821B2 (ja) 静脈画像取得装置および静脈画像取得方法
WO2017082100A1 (ja) 生体情報を用いた認証装置及び認証方法
JP2023535143A (ja) 創傷の組織学的評価のためのスペクトルイメージングシステムおよびその方法
KR102679397B1 (ko) 생체 인증 장치 및 생체 인증 방법
CN113167722B (zh) 信息处理装置、信息处理方法和程序
US20210140822A1 (en) Hyperspectral imaging method and device
CN113785291A (zh) 包括指纹传感器的设备的反欺骗方法和系统
JP7392779B2 (ja) 撮像装置、生体画像処理システム、生体画像処理方法、および生体画像処理プログラム
JP6817782B2 (ja) 脈拍検出装置及び脈拍検出方法
EP3340111B1 (en) Biometric authentication apparatus, biometric authentication system and biometric authentication method
JP2023128557A (ja) 撮影装置および認証装置
JP2020123068A (ja) 生体認証装置、生体認証方法およびコンピュータプログラム
JP7507659B2 (ja) 撮影装置、認証装置及び生体撮影方法
WO2018185992A1 (ja) 生体認証装置、及び方法
JP2007133656A (ja) 指紋照合装置
WO2021111684A1 (ja) 撮影装置および認証装置
JP7556203B2 (ja) 電子装置、電子装置の制御プログラム及び電子装置の制御方法
Trethyn Finishing and Improving of Finger Vein System

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240614

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240614