CN113661512A - 图像处理装置、方法、系统和计算机可读介质 - Google Patents

图像处理装置、方法、系统和计算机可读介质 Download PDF

Info

Publication number
CN113661512A
CN113661512A CN202080022229.9A CN202080022229A CN113661512A CN 113661512 A CN113661512 A CN 113661512A CN 202080022229 A CN202080022229 A CN 202080022229A CN 113661512 A CN113661512 A CN 113661512A
Authority
CN
China
Prior art keywords
image
iris
subject
image processing
storage area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080022229.9A
Other languages
English (en)
Inventor
蝶野庆一
塚田正人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN113661512A publication Critical patent/CN113661512A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0007—Image acquisition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141—Control of illumination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60—Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/67—Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231—Biological data, e.g. fingerprint, voice or retina
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06—Authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Pathology (AREA)
  • General Engineering & Computer Science (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Computer Hardware Design (AREA)
  • Ophthalmology & Optometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Input (AREA)

Abstract

本发明即使在存在被摄者的步行速度的波动的情况下满足时间分辨率和记录时间两者。虹膜成像设备(401‑404)捕获移动的被摄者的虹膜的图像。来自虹膜成像设备(401‑404)的图像被写入到存储器(502)的传输存储区域(521‑524)。读出设备(504)以与被摄者的移动速度相对应的帧间隔将存储在传输存储区域(521‑524)中的图像读出到图像处理存储区域(525)。图像处理单元(503)使用读出到图像处理存储区域(525)的图像来进行处理。

Description

图像处理装置、方法、系统和计算机可读介质
技术领域
本公开涉及图像处理装置、方法、系统和计算机可读介质，并且具体地涉及能够用于使用虹膜的认证的图像处理装置、方法、系统和程序。
背景技术
使用虹膜的生物认证是已知的。在这种生物认证中，通过使用摄像装置拍摄被摄者的虹膜，并且从被拍摄的虹膜的图案中提取特征值。为了认证被摄者，将提取的特征值与预先注册在数据库中的特征值进行比较，并且基于它们之间的匹配的分数来确定合格/不合格。此外，为了注册要认证的被摄者，将提取的特征值添加到数据库中。
如非专利文献1中所描述的，作为瞳孔周围的环形组织的虹膜具有非常复杂的图案，并且对于每个人是唯一的。此外，在虹膜的拍摄中，将近红外光施加到被摄者的眼睛。
如非专利文献2中所描述的，在虹膜的拍摄中，以虹膜半径由100到140像素表示的分辨率拍摄虹膜图像。此外，施加到被摄者的眼睛的近红外光的波长在700nm和900nm之间的范围内。
引文列表
非专利文献
非专利文献1：Hosoya,"Identification System by Iris Recognition",Japanese Society for Medical and Biological Engineering 44(1),pages33-39,2006
非专利文献2：Daugman,"How Iris Recognition Works,"https://www.cl.cam.ac.uk/～jgd1000/irisrecog.pdf
发明内容
技术问题
虹膜的直径为约1cm。因此，当虹膜的半径由100个像素表示时，粒度变为50μm。如上所述，由于虹膜的图案是微观的，因此在被摄者和摄像装置之间的距离大、要拍摄的视野宽并且被摄者移动的条件下，难以以足以用于认证和验证的质量水平拍摄虹膜图案。
鉴于上述情况，本公开的目的是提供一种能够以足以用于认证和验证的质量水平拍摄虹膜图案的图像处理装置、方法、系统和计算机可读介质。
对问题的解决方案
为了实现上述目的，在第一方面，本公开提供一种图像处理系统，包括：
多个虹膜摄像装置，其在同一视野内被布置在相互不同的位置处；
整体摄像装置，其用于在比虹膜摄像装置的视野宽的视野上进行摄像；
引导单元，其用于引导被摄者；
照明装置，其用于利用光照明被摄者；以及
控制装置，其用于使用来自整体摄像装置的图像来控制以下中的至少一个：从多个虹膜摄像装置读出图像，通过引导装置呈现图像和声音中的至少一个，或者利用来自照明装置的光提供照明，其中，
控制装置包括：读出装置，用于以与被摄者的移动速度相对应的帧间隔将从虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域；以及图像处理装置，用于使用读出到用于图像处理的存储区域的图像执行处理。
在第二方面，本公开提供一种图像处理装置，包括：
读出装置，其用于以与移动的被摄者的移动速度相对应的帧间隔将从虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域，该虹膜摄像装置用于对被摄者的虹膜进行摄像；以及
图像处理装置，用于使用读出到用于图像处理的存储区域的图像来执行处理。
在第三方面，本公开提供一种图像处理方法，包括：
使用来自整体摄像装置的图像来进行以下中的至少一个：从多个虹膜摄像装置读出图像，通过用于引导被摄者的引导装置呈现图像和声音中的至少一个，或者利用来自用于利用光照明被摄者的照明装置的光供照明，其中，所述整体摄像装置用于在比在同一视野内被布置在相互不同的位置处的多个虹膜摄像装置的视野宽的视野上进行摄像。
在第四方面中，本公开提供一种图像处理方法，包括：
以与移动的被摄者的移动速度相对应的帧间隔将从虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域，该虹膜摄像装置用于对被摄者的虹膜进行摄像；以及使用读出到用于图像处理的存储区域的图像来执行处理。
在第五方面，本公开提供一种存储程序的非暂时性计算机可读介质，该程序使计算机执行处理，该处理包括：
使用来自整体摄像装置的图像来进行以下中的至少一个：从多个虹膜摄像装置读出图像，通过用于引导被摄者的引导装置呈现图像和声音中的至少一个，或者利用来自用于利用光照明被摄者的照明装置的光提供照明，其中，所述整体摄像装置用于在比在同一视野内被布置在相互不同的位置处的多个虹膜摄像装置的视野宽的视野上进行摄像。
在第六方面中，本公开提供一种存储程序的非暂时性计算机可读介质，该程序使计算机执行处理，该处理包括：
以与移动的被摄者的移动速度相对应的帧间隔将从虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域，该虹膜摄像装置用于对被摄者的虹膜进行摄像；以及
使用读出到用于图像处理的存储区域的图像来执行处理。
本发明的有利效果
根据本公开的图像处理装置、方法、系统和计算机可读介质能够以足以用于认证和验证的质量水平拍摄虹膜图案。
附图说明
图1是示出根据本公开的第一示例实施例的图像处理系统的框图；
图2示出虹膜摄像控制的状态；
图3是示出图像处理系统中的操作过程的流程图；
图4是示出用于调查的控制器的配置的框图；
图5是示出根据本公开的第二示例实施例中使用的控制器的配置的框图；以及
图6是示出计算机装置的配置的示例的框图。
具体实施方式
在给出根据本公开的示例实施例的描述之前，定量地描述其问题。作为示例，下面将描述下面示出的条件，这些条件被假定为用于自动边界控制系统(ABC系统)的操作条件等。假定被摄者和摄像装置之间的距离(被摄者和门之间的距离)为2m，并且水平视野(即，一个被摄者的双眼能够被覆盖的水平方向上的范围)是0.2m。此外，垂直视野(即，从通常为男性的高被摄者到通常为女性的矮被摄者的宽范围被摄者的眼睛能够被覆盖的垂直方向上的范围)是0.4m。此外，假设被摄者相对于门的步行速度(移动速度)等于成人的慢走速度的平均值，例如为1m/s。
在上述操作条件下，假设使用具有5μm的像素间距的图像传感器和具有F2孔径光阑和200mm焦距的透镜，则从如后面所述的摄像装置要求32M像素的高分辨率和100帧每秒(fps)的高帧速率。
关于分辨率，为了在距离摄像装置2m的位置处确保0.2m的水平视野，摄像装置在水平方向上需要4000个像素(0.2[m]÷50[μm]＝4000)。此外，为了在距离摄像装置2m的位置处确保0.4m的垂直视野，摄像装置在垂直方向上需要8000个像素(0.4[m]÷50[μm]＝8000)。结果，摄像装置要求32M像素的分辨率。
另一方面，在使用上述透镜的情况下，如果容许弥散圆直径是0.03mm，则能够确保固定在2m远的深度视野是大约1cm。在被摄者具有1m/s的步行速度的情况下，被摄者通过1cm的被摄者深度的时间为1[cm]÷100[cm/s]＝0.01s，在这种情况下，为了捕获步行被摄者的虹膜处于对焦的0.01s瞬间，摄像装置要求100fps(1[s]÷100[fps]＝0.01s的时间分辨率)的性能。
能够利用单个设备满足32M像素的高分辨率和100fps的高帧速率的摄像装备作为流行产品不存在。因此，在上述操作条件下，难以以足以用于认证和验证的质量水平拍摄虹膜图案。这结束对该问题的定量描述。
以下将参照附图描述根据本公开的示例实施例。图1示出根据本公开的第一示例实施例的摄像系统。图像处理系统包括整体成像设备100、引导设备200、照明设备300、虹膜摄像设备401至404和控制器500。注意，尽管在图1中虹膜摄像设备的数量是四个，但是虹膜摄像设备的数量不限于任何特定的数量。虹膜摄像设备的数量可以根据要覆盖的视野和可用的虹膜摄像设备的分辨率来适当地设置。
整体成像设备(整体摄像装置)100以宽视野拍摄被摄者，该宽视野足够宽以覆盖从高被摄者到矮被摄者的整体被摄者范围。整体成像设备100可以具有其中被摄者可以被他/她的面部认证的分辨率。
控制器(控制装置)500监视从整体成像设备100供应的整体图像，并且控制引导设备(引导装置)200、照明设备(照明装置)300和多个虹膜摄像设备(虹膜摄像装置)401至404。控制器500的功能可以由硬件或计算机程序来实现。控制器500基于从整体成像设备100供应的他/她的整体图像或基于外部输入来确定被摄者的生物认证的开始。
由控制器500进行的控制包括引导控制、照明控制和虹膜摄像控制。在引导控制中，控制器500将用于引导被摄者的引导控制信息供应给引导设备200。引导设备200基于引导控制信息来引导被摄者。引导设备200包括例如显示器和/或扬声器。例如，引导设备200通过显示器和/或扬声器分别呈现用于指示生物认证的开始的图像和声音。此外，引导设备200通过显示器和/或扬声器向虹膜摄像设备分别呈现用于诱导被摄者将他/她的眼睛转向的图像和声音。
在照明控制中，控制器500向照明设备300供应用于向被摄者施加照明光的照明控制信息。照明设备300基于照明控制信息来将光(例如，近红外光)施加到被摄者。照明设备300包括作为光源的LED(发光二极管)和同步信号发生器。从照明设备300向被摄者施加的光量由供应给LED的电流值、LED的发光时间及其发光周期确定，并且照明控制信息包括其数值。当LED没有连续保持在开启状态时，LED的发光周期与多个虹膜摄像设备401至404的帧速率同步。
在虹膜摄像控制中，控制器500基于从整体成像设备100供应的整体图像来确定多个虹膜摄像设备401至404中的一个，它能适当地拍摄被摄者的眼睛的区域。此外，控制器500确定在所确定的虹膜摄像设备中以高速读出的关注区的垂直位置。
图2示出虹膜摄像控制的状态。将参照图2描述虹膜摄像控制的细节，在这个示例中，假设具有12M像素(4,000水平像素和3,000垂直像素)和60fps的帧速率的通用相机用于虹膜摄像设备401至404的每一个。这种相机作为工业相机已经变得普遍。在以50μm的粒度进行拍摄的情况下，利用该粒度可以通过他/她的虹膜来认证被摄者，每个虹膜摄像设备的水平和垂直视野分别是0.2m(4,000×50[μm]＝0.2[m])和0.15m(3,000×50[μm]＝0.15[m])。
多个虹膜摄像设备401至404被布置成使得它们在垂直方向上彼此堆叠。注意，多个虹膜摄像设备401至404被布置成使得彼此相邻的虹膜摄像设备的图像区域彼此部分重叠。例如，虹膜摄像设备401至404被布置成使得彼此相邻的虹膜摄像设备的图像区域彼此重叠2.5cm。在这种情况下，在远离四个虹膜摄像设备2m的聚焦点处，它们可以确保水平方向0.2m和垂直方向0.45m((0.15-0.025)+(0.15-0.025-0.025)+(0.15-0.025-0.025)+(0.15-0.025)m)的视野。也就是说，可以确保所需的水平方向0.2m和垂直方向0.4m的视野。注意，通过附图和上面的描述可以理解，虹膜摄像设备具有彼此相同的视野，并且被放置在彼此不同的位置。
在每个虹膜摄像设备的帧速率为60fps的情况下，当它们按原样使用时，它们不能满足100fps的所需帧速率。注意，工业相机等具有关注区模式。在关注区模式中，仅读出被定义为关注区的部分区域，而不是读出屏幕的整体区域。通过使用这种关注区模式，可以增加帧速率。
控制器500在任意给定虹膜摄像设备中设置关注区，并且从该虹膜摄像设备读出关注区中的图像。在图2所示的示例中，将水平方向上的4,000个像素和垂直方向上的1,500个像素的部分区域(其对应于屏幕的整体区域的一半)定义为关注区。在这种情况下，由于每一帧中的像素数量是整体区域中的像素数量的一半，所以可以将帧速率增加到120fps，这是在读出屏幕的整体区域的情况下的60fps的帧速率的两倍。然而，该部分区域的水平和垂直视野分别变为0.2m和0.75m。注意，人的两只眼睛在水平方向上对准。因此，在关注区中，优选的是减少垂直方向上的像素数量，而不是减少水平方向上的像素数量，从而可以拍摄双眼。
在彼此相邻的虹膜摄像设备的图像区域彼此重叠的上述范围内没有拍摄眼睛区域的条件下，拍摄眼睛区域的虹膜摄像设备只是四个虹膜摄像设备401至404中的一个。此外，可以以120fps的帧速率读出图像的条件是该虹膜摄像设备中的部分区域。控制器500推断虹膜摄像设备401至404中的一个能适当地拍摄眼睛区域，并且估计图像在该虹膜摄像设备中高速读出的关注区的垂直位置。
上述推断/估计可以通过以下描述的方法来进行。整体成像设备100具有其中被摄者可以通过他/她的面部被认证的分辨率，并且控制器500导出被摄者的眼睛在整体成像设备100拍摄的整体图像中的位置。控制器500通过使用相机参数和整体成像设备100与每个虹膜摄像设备的位置关系，导出与被摄者的眼睛在整体图像中的位置和眼睛在该成像装置中的位置相对应的虹膜摄像设备。通过使用关注区模式，可以通过使用通用相机来实现在水平方向上比0.2m宽且在垂直方向上比0.4m宽的视野以及高于100fps的时间分辨率。
注意，当在上述关注区模式中改变垂直位置时，在拍摄开始之前发生延迟。因此，在上述推断/估计中，可以使用通过在比2米远的位置处(即比虹膜摄像设备的聚焦点更远的位置处，例如通过在3米远的位置处)拍摄被摄者而获得的图像。通过具有大约2M像素的相机可以实现存在于3米远的位置的被摄者可以被他/她的面部认证的分辨率，从而具有比虹膜摄像相机的规格低的规格的相机可以用于整体成像设备100。
控制器500基于上述虹膜摄像控制，将虹膜摄像信息供应给虹膜摄像设备401至404中的每一个。控制器500向拍摄被摄者的眼睛区域的虹膜摄像设备供应包括关注区的垂直位置的虹膜摄像信息。控制器500可以向其它虹膜摄像设备供应可选虹膜摄像信息。控制器500例如可以向其他虹膜摄像设备供应包括关于虹膜图像的供应的停止的信息的虹膜摄像信息，以便减少虹膜图像的数据的总量。
虹膜摄像设备401至404中的每一个基于从控制器500供应的虹膜摄像信息来将虹膜图像供应给控制器500。另外，虹膜摄像设备401至404中的每一个将由控制器500通过使用虹膜摄像信息设置的关注区的图像(虹膜图像)输出到控制器500。虹膜摄像设备401至404中的每一个都可以有损压缩关注区中的虹膜图像，并且将压缩的虹膜图像输出到控制器500。例如，虹膜摄像设备401至404中的每一个通过使用量化(逐像素压缩)、预测编译和量化(基于多个像素对的压缩)、变换编译和量化的组合(基于多个像素对的压缩)来压缩关注区中的虹膜图像。控制器500通过使用从虹膜摄像设备401至404供应的虹膜图像进行背景技术部分中描述的认证和注册。当存在下一个被摄者时或者当认证或注册失败时，控制器500返回到下一个处理。
接下来，将描述操作过程。图3示出摄像系统中的操作过程。控制器500进行引导控制，从而通过使用引导设备200引导被摄者(步骤S1001)。控制器500进行照明控制，从而通过使用照明设备300将红外光施加到被摄者(步骤S1002)。控制器500进行上述虹膜摄像控制，从而通过使用多个虹膜摄像设备401至404获取虹膜的图像(虹膜图像)(步骤S1003)。在步骤S1003中获取的虹膜图像用于虹膜的认证或注册。在步骤S1003中，控制器500不需要如上所述从虹膜摄像设备401至404中的每一个获取给定被摄者的虹膜图像。控制器500从拍摄了被摄者的眼睛区域的虹膜摄像设备获得虹膜图像。
控制器500通过使用在步骤S1003中取得的虹膜图像进行基于虹膜的认证，或者注册虹膜图像(步骤S1004)。控制器500确定是否存在下一个被摄者，或者是否应当进行重新认证或重新注册(步骤S1005)。当确定存在下一个被摄者，或者应当进行重新认证或重新注册时，处理返回到步骤S1001，并且从引导控制开始进行处理。
注意，当根据该示例实施例的整体成像设备100具有可以通过他/她的面部认证被摄者的分辨率，并且在数据库中保存用于通过他/她的面部认证被摄者的特征值，但是在数据库中不保存用于通过他/她的虹膜认证被摄者的特征值时，根据本公开的装置还可以用于其中装置基于以面部为基础的认证来识别被摄者并且在数据库中注册被摄者的虹膜的提取的特征值的用途。另外，本发明的装置也能够用于如下用途：装置基于通过虹膜摄像控制得到的眼睛的位置的信息或者认证或注册通过虹膜摄像设备得到的虹膜图像时得到的眼睛的位置的信息来估计被摄者的高度的信息，并且将所估计的信息注册到数据库中。此外，根据本公开的装置可以用于通过使用关于高度的所估计的信息来确定或校准虹膜摄像设备中的一个的垂直位置，该虹膜摄像设备可以适当地拍摄眼睛的区域和其中图像在该虹膜摄像设备中以高速被读出的关注区。
在该示例实施例中，支持所要求的0.2m×0.4视野的高分辨率和对应于0.01s的时间分辨率的高帧速率性能可以利用通用相机的组合来实现。结果，在诸如当被摄者和摄像装置之间的距离长、要拍摄的视野宽以及被摄者移动的条件下，容易以足以用于认证和验证的质量水平拍摄虹膜图案。
接下来，将描述本公开的第二示例实施例。根据该示例实施例的整体图像处理系统的配置可以类似于图1中示出的根据第一示例实施例的图像处理系统的配置。在该示例实施例中，控制器500还用作进行图像处理方法的图像处理装置。在该示例实施例中，支持直接存储器存取(DMA)传输的板用于通过高速接口连接虹膜摄像设备401至404和控制器500。
图4示出用于调查的控制器500。控制器500包括支持DMA传输的板5011至5014以及图像处理单元503。板5011至5014将从虹膜摄像设备401至404读出的图像(虹膜图像)传输到控制器500的存储器502中被指定用于传输的存储区域521至524(以下也称为DMA传输区域)。利用DMA传输，虹膜图像可以高速传输到DMA传输区域521至524，但是存在对DMA传输区域的容量的限制。图像处理单元503从存储器502中的DMA传输区域521至524读出虹膜图像，并且进行各种类型的图像处理等。
此时，如果关注被摄者的步行速度的波动，则由于上述DMA传输区域的容量限制而出现以下问题。在使各虹膜摄像设备以与最快步行速度相对应的帧速率操作的情况下，每单位时间的图像数量增加，从而缩短虹膜图像能够被记录到DMA传输区域521至524中的时间。在这种情况下，有可能在以最慢步行速度步行的被摄者通过虹膜摄像设备的聚焦点之前记录结束。相反，在使各虹膜摄像设备以与最慢步行速度相对应的帧速率操作的情况下，可以延长可以记录到DMA传输区域521至524的虹膜图像的时间。但是，在这种情况下，存在虹膜摄像设备不能捕获以最快步行速度步行的被摄者通过聚焦点的时刻的可能性。在任一情况下，认证和注册都将失败。
图5示出在该示例性实施例中使用的控制器500。除了图4所示的控制器500的组件之外，控制器500还包括读出设备504。并且，在存储器502中，除了与每个板相对应的DMA传输区域521至524之外，还独立于DMA传输区域，提供用于图像处理的存储区域525。读出设备504从DMA传输区域521至524中的一个读出虹膜图像并且将其传输到存储区域525以用于图像处理。此时，读出设备504以根据被摄者的步行速度的帧间隔从DMA传输区域521至524中的一个DMA传输区域读出虹膜图像。图像处理单元503从用于图像处理的存储区域525读出虹膜图像，并且进行各种类型的图像处理等。
例如，通过使用包括诸如飞行时间(ToF)的距离测量功能的整体摄像设备100，控制器500可以分析作为时间序列的关于到被摄者的距离的信息，并且获取关于步行速度v[m/s]的信息。获取被摄者的步行速度的方法不受特别限制。例如，控制器500也可以通过分析使用距离传感器等按时间序列测量的距离来获取关于步行速度v[m/s]的信息。
在该示例实施例中，控制器500使得每个虹膜摄像设备以帧速率maxfps[fps]操作，利用该帧速率maxfps[fps]能够捕获以最快步行速度maxv[m/s]步行的被摄者通过聚焦点的时刻。注意，这里的“帧速率”指的是关注区模式中的帧速率。
控制器500基于maxv与所获取的步行速度v之间的关系来确定将数据读出到用于图像处理的存储器区域的DMA传输区域的帧间隔。例如，例如，可以简单地想到maxv÷v作为帧间隔，并且使读出设备504根据该值进行读出处理。例如，在步行速度v是maxv的速度的一半的情况下，帧间隔被确定为“2”。在这种情况下，延长了将数据读出到存储区域525以用于图像处理的帧间隔，并且因此即使利用有限的存储区域也能够延长记录时间。因此，可以防止在以慢步行速度步行的被摄者通过聚焦点之前结束记录。此时，即使时间分辨率已经降低了与步行速度的减慢相对应的量，也可以摄取被摄者通过聚焦点的时刻。
注意，如第一示例性实施例中所述，在相邻虹膜摄像设备的摄像区重叠的范围内没有摄取眼睛区的条件下，摄取眼睛区的虹膜摄像设备只是四个虹膜摄像设备401至404中的一个。因此，如果作为写入目的地的由读出设备504使用的用于图像处理的存储区域525具有与单个相机相对应的容量，则这是足够的。即使在相邻的虹膜摄像设备的摄像区重叠的范围内摄取眼睛区的情况下，如果使用由虹膜摄像设备之一摄取的虹膜图像，则如果用于图像处理的存储区域525具有对应于单个相机的容量也相似地足够。
在该示例实施例中，如果除了被摄者的步行速度之外，还已知被摄者通过聚焦点的时刻的时间，则控制器500还可以根据被摄者通过聚焦点的时刻的时间来控制摄像开始时间，而不是控制读出设备504的帧间隔。例如，控制器500可以延迟从虹膜摄像设备读出的开始时间，使得可以记录以慢步行速度步行的被摄者通过聚焦点的时刻。
在该示例实施例中，读出设备504以对应于被摄者的步行速度的帧间隔将记录到DMA传输区域521至524的虹膜图像传输到用于图像处理的存储区域525。这种布置使得即使在被摄者的步行速度存在波动的情况下，也能够在有限存储区域的约束下满足用于捕获被摄者通过聚焦点的时刻的时间分辨率和记录时间两者。
注意，尽管在图2中示出将水平方向的4,000个像素和垂直方向的1,500个像素的部分区域定义为关注区的示例，但是本公开不限于该示例。关注区的形状不限于矩形，并且关注区的数量不限于一个。控制器500例如可以从由整体成像设备100拍摄的整体图像(俯视图像)导出被摄者的右眼和左眼的位置，并且在虹膜摄像设备中设置与右眼的位置对应的关注区和与左眼的位置对应的关注区。在这种情况下，虹膜摄像设备将右眼和左眼的虹膜图像供应给控制器500。关注区的形状可以是矩形或可以是椭圆形。控制器500可以基于由虹膜摄像设备拍摄的虹膜图像而不是基于俯视图像来导出被摄者的右眼和左眼的位置。例如，控制器500可以临时将图2所示的部分区域定义为关注区，并且从关注区中的图像导出右眼和左眼的位置。在这种情况下，控制器500可以基于所导出的右眼和左眼的位置，将与右眼的位置相对应的部分区域和与左眼的位置相对应的部分区域中的每一个设置为虹膜摄像设备中的关注区。
在上述示例性实施例的每一个中，控制器500可以形成为计算机装置。图6示出可以用于控制器500的信息处理装置(计算机装置)的配置的示例。信息处理装置600包括控制单元(CPU：中央处理单元)610、存储单元620、ROM(只读存储器)630、RAM(随机存取存储器)640、通信接口(IF：接口)650和用户接口660。
通信接口650是用于通过有线通信装置、无线通信装置等将信息处理装置600连接到通信网络的接口。用户接口660包括例如显示单元，诸如显示器。此外，用户接口660包括诸如键盘、鼠标和触摸面板的输入单元。
存储单元620是可以保持各种类型的数据的辅助存储设备。存储单元620不必必须是信息处理装置600的一部分，并且可以是通过网络连接到信息处理装置600的外部存储设备或云存储。ROM 630是非易失性存储设备。例如，具有相对小容量的诸如闪存的半导体存储设备用于ROM 630。由CPU 610执行的程序可以存储在存储单元620或ROM 630中。
可以通过使用任何类型的非暂时性计算机可读介质来存储上述程序并且将其提供给信息处理装置600。非暂时性计算机可读介质包括任何类型的有形存储介质。非暂时性计算机可读介质的示例包括诸如软盘、磁带和硬盘驱动器的磁存储介质，诸如磁光盘的光磁存储介质，诸如CD(压缩盘)和DVD(数字多功能盘)的光盘介质，以及诸如掩模ROM、PROM(可编程ROM)、EPROM(可擦除PROM)、闪存ROM和RAM的半导体存储器。此外，可以使用任何类型的暂时性计算机可读介质将程序提供给计算机。暂时性计算机可读介质的示例包括电信号、光学信号和电磁波。暂时性计算机可读介质可以经由诸如电线和光纤的有线通信线路或无线电通信线路将程序提供给计算机。
RAM 640是易失性存储设备。作为RAM 640，可以使用诸如DRAM(动态随机存取存储器)或SRAM(静态随机存取存储器)的各种类型的半导体存储装置。RAM 640可以用作内部缓冲器，用于临时存储数据等。CPU 610将存储在存储单元620或ROM 630中的程序扩展(即，加载)到RAM 640中，并且执行扩展的(即，加载的)的程序。通过执行该程序，CPU 610执行各种类型的控制，包括例如引导控制、照明控制和虹膜摄像控制。此外，通过CPU 610执行程序，可以实现各种功能，包括例如图像处理单元503(参考图5)或读出设备504的功能中的至少一个。
尽管以上已经详细描述了根据本公开的示例实施例，但是本公开不限于上述示例实施例，并且本公开还包括在不脱离本公开的精神的情况下通过对上述示例实施例进行改变或修改而获得的那些示例实施例。
本申请基于并且要求于2019年2月18日提交的日本专利申请No.2019-026939的优先权的权益，其全部内容通过引用合并于此。
附图标记列表
100 整体成像设备
200 引导设备
300 照明设备
401-404 虹膜摄像设备
500 控制器
502 存储器
503 图像处理单元
504 读出设备
600 信息处理装置

Claims (10)

1.一种图像处理系统，包括：
多个虹膜摄像装置，所述多个虹膜摄像装置在同一视野内被布置在相互不同的位置处；
整体摄像装置，所述整体摄像装置用于在比所述虹膜摄像装置的视野宽的视野上进行摄像；
引导装置，所述引导装置用于引导被摄者；
照明装置，所述照明装置用于利用光照明所述被摄者；以及
控制装置，所述控制装置用于使用来自所述整体摄像装置的图像来控制以下中的至少一个：从所述多个虹膜摄像装置读出图像，通过所述引导装置呈现图像和声音中的至少一个，或者利用来自所述照明装置的光提供照明，其中，
所述控制装置包括：读出装置，所述读出装置用于以与所述被摄者的移动速度相对应的帧间隔将从所述虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域；以及图像处理装置，所述图像处理装置用于使用被读出到所述用于图像处理的存储区域的所述图像执行处理。
2.根据权利要求1所述的图像处理系统，其中，
所述控制装置进行从所述多个虹膜摄像装置的图像读出，以及
在从所述多个虹膜摄像装置的所述图像读出中，所述控制装置基于由所述整体摄像装置获得的图像从所述多个虹膜摄像装置当中指定能够对所述被摄者的眼睛进行摄像的虹膜摄像装置，在所指定的所述虹膜摄像装置中设置包括所述被摄者的所述眼睛的位置的关注区，并且从所指定的所述虹膜摄像装置获得所述关注区的图像。
3.根据权利要求1或2所述的图像处理系统，其中，
所述图像以与所述被摄者的预定移动速度相对应的预定帧速率被写入到所述用于传输的存储区域，以及
所述读出装置根据所述预定移动速度和所述被摄者的所述移动速度之间的关系来确定所述帧间隔。
4.一种图像处理装置，包括：
读出装置，所述读出装置用于以与移动的被摄者的移动速度相对应的帧间隔将从虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域，所述虹膜摄像装置用于对所述被摄者的虹膜进行摄像；以及
图像处理装置，所述图像处理装置用于使用被读出到所述用于图像处理的存储区域的所述图像来执行处理。
5.根据权利要求4所述的图像处理装置，其中，
所述图像以与所述被摄者的预定移动速度相对应的预定帧速率被写入到所述用于传输的存储区域，以及
所述读出装置根据所述预定移动速度和所述被摄者的所述移动速度之间的关系来确定所述帧间隔。
6.根据权利要求5所述的图像处理装置，其中，所述读出装置基于所述预定移动速度与所述被摄者的所述移动速度之间的比率来确定所述帧间隔。
7.一种图像处理方法，包括：
使用来自整体摄像装置的图像来进行以下中的至少一个：从多个虹膜摄像装置读出图像，通过用于引导被摄者的引导装置呈现图像和声音中的至少一个，或者利用来自用于利用光照明所述被摄者的照明装置的光提供照明，其中，所述整体摄像装置用于在比在同一视野内被布置在相互不同的位置处的所述多个虹膜摄像装置的视野宽的视野上进行摄像。
8.一种图像处理方法，包括：
以与移动的被摄者的移动速度相对应的帧间隔将从虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域，所述虹膜摄像装置用于对所述被摄者的虹膜进行摄像；以及
使用被读出到所述用于图像处理的存储区域的所述图像来执行处理。
9.一种存储程序的非暂时性计算机可读介质，所述程序使计算机执行处理，所述处理包括：
使用来自整体摄像装置的图像来进行以下中的至少一个：从多个虹膜摄像装置读出图像，通过用于引导被摄者的引导装置呈现图像和声音中的至少一个，或者利用来自用于利用光照明所述被摄者的照明装置的光提供照明，其中，所述整体摄像装置用于在比在同一视野内被布置在相互不同的位置处的所述多个虹膜摄像装置的视野宽的视野上进行摄像。
10.一种存储程序的非暂时性计算机可读介质，所述程序使计算机执行处理，所述处理包括：
以与移动的被摄者的移动速度相对应的帧间隔将从虹膜摄像装置写入到用于传输的存储区域的图像读出到用于图像处理的存储区域，所述虹膜摄像装置用于对所述被摄者的虹膜进行摄像；以及
使用被读出到所述用于图像处理的存储区域的所述图像来执行处理。
CN202080022229.9A 2019-02-18 2020-02-12 图像处理装置、方法、系统和计算机可读介质 Pending CN113661512A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019-026939 2019-02-18
JP2019026939 2019-02-18
PCT/JP2020/005219 WO2020170893A1 (ja) 2019-02-18 2020-02-12 画像処理装置、方法、システム、及びコンピュータ可読媒体

Publications (1)

Publication Number Publication Date
CN113661512A true CN113661512A (zh) 2021-11-16

Family

ID=72144029

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080022229.9A Pending CN113661512A (zh) 2019-02-18 2020-02-12 图像处理装置、方法、系统和计算机可读介质

Country Status (6)

Country Link
EP (1) EP3929861A4 (zh)
JP (1) JP7211483B2 (zh)
CN (1) CN113661512A (zh)
BR (1) BR112021016155A2 (zh)
SG (1) SG11202108901PA (zh)
WO (1) WO2020170893A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SG11202108917PA (en) 2019-02-18 2021-09-29 Nec Corp Image pick-up apparatus, method, system, and computer readable medium
US20230418916A1 (en) * 2020-10-16 2023-12-28 Nec Corporation Authentication system, authentication method, and computer readable medium
WO2023229498A1 (en) * 2022-05-23 2023-11-30 Bakov Ilia Antonovich Biometric identification system and method for biometric identification

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002118822A (ja) * 2000-10-04 2002-04-19 Hitachi Ltd 映像記録方法および装置
US20050084179A1 (en) * 2003-09-04 2005-04-21 Keith Hanna Method and apparatus for performing iris recognition from an image
WO2009016846A1 (ja) * 2007-08-02 2009-02-05 Panasonic Corporation 虹彩認証装置および虹彩認証システム
JP2009217526A (ja) * 2008-03-11 2009-09-24 Fujitsu Ltd ドライブレコーダおよびコンピュータプログラム
US20100290668A1 (en) * 2006-09-15 2010-11-18 Friedman Marc D Long distance multimodal biometric system and method
US20100299530A1 (en) * 2009-02-26 2010-11-25 Bell Robert E User authentication system and method
US20120019655A1 (en) * 2009-04-15 2012-01-26 Toyota Jidosha Kabushiki Kaisha Object detection device
US20120081580A1 (en) * 2010-09-30 2012-04-05 Apple Inc. Overflow control techniques for image signal processing
CN104967803A (zh) * 2015-07-01 2015-10-07 广东欧珀移动通信有限公司 一种视频录制方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007148988A (ja) * 2005-11-30 2007-06-14 Toshiba Corp 顔認証装置、顔認証方法および入退場管理装置
JP2008310463A (ja) * 2007-06-13 2008-12-25 Panasonic Corp 生体認証装置
JP2019026939A (ja) 2018-09-26 2019-02-21 株式会社Ｋｏｋｕｓａｉ Ｅｌｅｃｔｒｉｃ 半導体装置の製造方法、記録媒体および基板処理装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002118822A (ja) * 2000-10-04 2002-04-19 Hitachi Ltd 映像記録方法および装置
US20050084179A1 (en) * 2003-09-04 2005-04-21 Keith Hanna Method and apparatus for performing iris recognition from an image
US20100290668A1 (en) * 2006-09-15 2010-11-18 Friedman Marc D Long distance multimodal biometric system and method
WO2009016846A1 (ja) * 2007-08-02 2009-02-05 Panasonic Corporation 虹彩認証装置および虹彩認証システム
JP2009217526A (ja) * 2008-03-11 2009-09-24 Fujitsu Ltd ドライブレコーダおよびコンピュータプログラム
US20100299530A1 (en) * 2009-02-26 2010-11-25 Bell Robert E User authentication system and method
US20120019655A1 (en) * 2009-04-15 2012-01-26 Toyota Jidosha Kabushiki Kaisha Object detection device
US20120081580A1 (en) * 2010-09-30 2012-04-05 Apple Inc. Overflow control techniques for image signal processing
CN104967803A (zh) * 2015-07-01 2015-10-07 广东欧珀移动通信有限公司 一种视频录制方法及装置

Also Published As

Publication number Publication date
SG11202108901PA (en) 2021-09-29
US20220139111A1 (en) 2022-05-05
WO2020170893A1 (ja) 2020-08-27
BR112021016155A2 (pt) 2021-10-05
JPWO2020170893A1 (ja) 2021-12-16
JP7211483B2 (ja) 2023-01-24
EP3929861A4 (en) 2022-04-13
EP3929861A1 (en) 2021-12-29

Similar Documents

Publication Publication Date Title
CN113661512A (zh) 图像处理装置、方法、系统和计算机可读介质
US10846866B2 (en) Irradiation system, irradiation method, and program storage medium
JP7468746B2 (ja) 画像処理システム
JP2023113609A (ja) 情報処理システム、照明制御装置、照明制御方法、及びプログラム
JP2014186505A (ja) 視線検出装置及び撮像装置
KR20140041206A (ko) 프라이버시 마스크 생성하는 감시 카메라 및 감시 카메라의 제어 방법
CN113615150B (zh) 图像处理装置、方法、系统和计算机可读介质
US12026981B2 (en) Image processing apparatus, method, system, and computer readable medium
EP3929858A1 (en) Imaging device, method, and system, and computer-readable medium
JP7211492B2 (ja) 撮像システムおよび撮像方法
WO2023229498A1 (en) Biometric identification system and method for biometric identification
JP7322972B2 (ja) 物体検出方法
CN111033508A (zh) 一种识别身体运动的系统和方法
JP2020108047A (ja) 画像処理装置、移動体デバイス、画像処理方法および画像処理プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination