CN114500976A - 一种用于远距离大视场虹膜光学成像装置的照明光源辐射系统 - Google Patents

一种用于远距离大视场虹膜光学成像装置的照明光源辐射系统 Download PDF

Info

Publication number
CN114500976A
CN114500976A CN202111533931.4A CN202111533931A CN114500976A CN 114500976 A CN114500976 A CN 114500976A CN 202111533931 A CN202111533931 A CN 202111533931A CN 114500976 A CN114500976 A CN 114500976A
Authority
CN
China
Prior art keywords
led illumination
iris
source radiation
illumination source
optical imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111533931.4A
Other languages
English (en)
Other versions
CN114500976B (zh
Inventor
倪蔚民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Siyuan Kean Information Technology Co ltd
Original Assignee
Suzhou Siyuan Kean Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Siyuan Kean Information Technology Co ltd filed Critical Suzhou Siyuan Kean Information Technology Co ltd
Priority to CN202111533931.4A priority Critical patent/CN114500976B/zh
Publication of CN114500976A publication Critical patent/CN114500976A/zh
Application granted granted Critical
Publication of CN114500976B publication Critical patent/CN114500976B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02BCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40Control techniques providing energy savings, e.g. smart controller or presence detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

本发明提供一种用于远距离大视场虹膜光学成像装置的LED照明光源辐射系统,其特征在于所述LED照明光源辐射系统包括辐射强度立体角和/或辐射强度方向角,响应于不同工作半径/距离对应的虹膜光学成像系统的视场角之间匹配关系和光学功率组合控制。本发明提供的一种远距离大视场虹膜光学成像的装置及方法,同时实现大范围时视场角和辐射照度恒定。

Description

一种用于远距离大视场虹膜光学成像装置的照明光源辐射 系统
本申请是申请日为2020年4月18日,申请号202010308691.7,“一种远距离大视场虹膜光学成像的装置及方法”的分案申请。
技术领域
本发明涉及光学成像技术领域,特别涉及一种远距离大视场虹膜光学成像的装置及方法。
背景技术
已知用于虹膜成像装置存在以下缺陷,在远工作距离和大工作视场场景下获得图像的成像时间超过1-3s,用户无法在如此长时间内保持一致相对静止,归因于图像虹膜直径要求>200pixel的大放大倍率要求,导致即使非常轻微移动都能造成超过虹膜成像系统视场需要重新调整视场,变焦聚焦,照明。
此外,传统测距包括软件映射虹膜直径或双眼距离,因为归因于人群中变化差异大于20%导致误差过大而无法提供精确工作距离信息直接影响整体性能,同样红外,超声,tof等物理测距在远工作距离和大工作视场场景下也误差过大无法提供精确工作距离信息,同时已知技术存在景深,图像亮度,图像相对照度,照明光源辐射强度,眼睛虹膜受辐射照度等图像质量在远工作距离和大工作视场场景下也无法保证一致性,甚至相差数倍,传统的照明光源采用随工作距离平方反比变化调节,非恒定光源辐射强度(比如工作距离2-3倍范围,视场角变化2-3倍,辐射强度变化4-9倍),导致无法同时满足大范围时视场角和辐射照度恒定的要求。
因此,针对现有技术中的在远工作距离和大工作视场场景下上述技术问题,需要一种远距离大视场虹膜光学成像的装置及方法。
发明内容
本发明的一个方面在于提供一种远距离大视场虹膜光学成像的装置,所述装置包括:
虹膜光学跟踪系统,虹膜变焦聚焦光学成像系统,LED照明光源辐射系统,图像显示反馈系统,图像处理和驱动控制系统;
所述虹膜光学跟踪系统包括3D深度成像单元,用于执行3D物理空间点坐标获取,
和方向轴旋转单元,用于根据3D物理空间点坐标执行虹膜变焦聚焦光学成像系统的物方成像区域调整;
所述的虹膜变焦聚焦光学成像系统包括光学变焦聚焦透镜组,用于根据3D物理空间点坐标执行虹膜成像的焦距和聚焦位置调整;
所述LED照明光源辐射系统包括辐射强度立体角和/或辐射强度方向角,用于根据3D物理空间点坐标执行响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间匹配关系的组合控制;
所述的图像显示反馈系统包括显示屏用于实时显示当前图像和/或状态信息;
所述的图像处理和驱动控制系统连接虹膜光学跟踪系统,虹膜变焦聚焦光学成像系统,LED照明光源辐射系统,图像显示反馈系统,并实现各系统单元间的驱动和反馈控制。
优选地,所述3D深度成像单元包括采用3D TOF深度成像或结构光深度成像,或双目立体视觉成像。
优选地,所述方向轴旋转单元包括执行垂直和/或水平方向旋转轴的旋转角度。
优选地,所述LED照明光源辐射系统的辐射强度方向角度,满足关系:ψ=arctan(D/R),其中,
定义在LED照明光源辐射系统的辐射强度峰值方向对应的中心线和虹膜变焦聚焦光学成像系统的光轴间夹角,D为LED照明光源辐射系统的光学中心和虹膜变焦聚焦光学成像系统光学中心的距离,R为虹膜变焦聚焦光学成像系统的工作半径。
优选地,所述LED照明光源辐射系统的辐射强度立体角,满足关系:Ω(ω)=4π*sin2(ω)单位球面度sr,其中,
ω=arctan((PXiris2+PYiris2)1/2/2*PSiris/((1+β)*EFLiris))=arctan((PXiris2+PYiris2)1/2/2*PSiris/(β*R)),ω为虹膜变焦聚焦光学成像系统的半视场角,
PXiris为虹膜变焦聚焦光学成像系统的X水平方向像素分辨率,
PYiris为虹膜变焦聚焦光学成像系统的Y垂直方向像素分辨率,
EFLiris为焦距位置,
β=PR*PSiris,PR为虹膜物理直径像方分辨率,
PSiris为虹膜变焦聚焦光学成像系统的图像成像传感器的像素单位分辨率,
R为为虹膜变焦聚焦光学成像系统的工作半径。
优选地,所述LED照明光源辐射系统和虹膜变焦聚焦光学成像系统被配置为:
在滤光片的结合下同步脉冲外触发或同步脉冲内触发方式的全局像素曝光(积分)和照明辐射的组合成像模式,其中:
所述的组合成像模式的同步脉冲曝光(积分)时间和同步脉冲照明辐射时间Tpulse<m/(PR*speed),
speed为预定控制的运动速度,单位m/s,
PR为虹膜物理直径像方分辨率,
m为预定控制的运动模糊图像像素尺度,单位pixel;
所述的组合成像模式的同步脉冲曝光(积分)频率和同步脉冲照明辐射频率Fpulse,所述同步脉冲照明辐射频率Fpulse=[10,30]Hz,
所述LED照明光源辐射系统产生同步脉冲照明辐射在虹膜表面的受辐射照度Tpulse*Fpulse*Eiris(ω)<10mw/cm2
Eiris(ω)为虹膜表面上受辐射照度。
本发明的另一个方面在于提供一种远距离大视场虹膜光学成像的方法,所述方法包括:
图像处理和驱动控制系统执行虹膜光学跟踪系统,虹膜变焦聚焦光学成像系统,LED照明光源辐射系统,图像显示反馈系统之间的驱动和反馈控制过程:
a、反馈控制虹膜光学跟踪系统,通过虹膜光学跟踪系统的3D深度成像单元获取虹膜关键点3D坐标,转换相对坐标为3D物理空间点,反馈控制方向轴旋转单元调整角度,实现实时同步虹膜光学成像跟踪;
b、反馈控制虹膜变焦聚焦光学成像系统,根据3D物理空间点坐标,实现实时同步光学变焦聚焦透镜组的焦距和聚焦位置的反馈控制;
c、反馈控制LED照明光源辐射系统,根据3D物理空间点坐标,实现实时同步响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间匹配关系的LED照明光源辐射强度方向角度和/或LED照明光源辐射强度立体角的反馈控制;
d、反馈控制图像显示反馈系统实时显示当前图像和/或状态信息;
所述图像显示反馈系统实现实时同步显示当前图像为3D深度成像单元成像的红外图像,RGB可见光单元成像图像或虹膜变焦聚焦光学成像图像。
优选地,反馈控制虹膜成像跟踪系统,包括:
a1、根据预定的工作视场范围FOV,定义3D深度成像单元的视场角FOVface和有效成像焦距EFLface:
EFLface=[(PXface2+PYface2)1/2*PSface/2]/tan(FOVface/2)
PXface为3D深度成像单元的X水平方向像素分辨率;
PYface为3D深度成像单元的Y垂直方向像素分辨率;
PSface为3D深度成像单元的像素单位分辨率;
FOVface为3D深度成像单元的视场角度,FOVface=FOV;
EFLface为3D深度成像单元的有效成像焦距。
a2、定义3D深度成像单元控制获取虹膜关键点:
a21、获取3D深度成像单元的亮度(红外灰度阶)图像Ii(x,y)和深度距离图像Iz(x,y);
a22、在亮度图像Ii(x,y)中检测人脸区域,在人脸区域进一步定位左右眼中心坐标(xl,yl)和(xr,yr);
a23、获取在深度距离图像Iz(x,y)中左右眼中心对应坐标的位置的深度距离信息,
z=[Iz(xl,yl)+lz(xr,yr)]/2
z=Iz((xl+xr)/2,(yl+yr)/2);
a24、产生3D深度成像单元像方关键参考点,
KPface(xe,ye,z):KPface(xe,ye,z)=KPface((xl+xr-PXface)/2*PSface,(yl+yr-PYface)/2*PSface,z);
a25、产生3D深度成像单元物方关键参考点KPface(Xe,Ye,Ze):
KPface(Xe,Ye,Ze)=KPface(xe*z/EFLface,ye*z/EFLface,z)。
a3、建立3D深度成像单元的物方关键参考点坐标KPface(Xe,Xe,Ze)相对虹膜变焦聚焦光学成像系统的3D物理空间点Piris(X,Y,Z)坐标变换,Piris(X,Y,Z)=(Xe-Xoffset,Xe-Yoffset,Ze-Zoffset),
(Xoffset,Yoffset,Zoffset)为3D深度成像单元相对虹膜变焦聚焦光学成像系统的3D物理位置坐标偏移。
a4、执行方向轴旋转单元同步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arcsin(X/R),
执行水平方向旋转轴的旋转角度θh=arcsin(Y/R);
R=(X2+Y2+Z2)1/2
或者,执行方向轴旋转单元异步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arctan(X/Z),
执行水平方向旋转轴的旋转角度θh=arcsin(Y/R);
等价的,
执行水平方向旋转轴的旋转角度θh=arctan(Y/Z)
执行垂直方向旋转轴的旋转角度θv=arcsin(X/R)。
优选地,反馈控制虹膜变焦聚焦光学成像系统,包括:
b1、执行虹膜变焦聚焦光学成像系统的变焦聚焦参数同步控制;
b11、执行对虹膜变焦聚焦光学成像系统的焦距参数控制,实现焦距位置保持恒定的预定放大倍率即相同成像虹膜直径,
焦距位置EFLiris=R*β/(1+β)R=(X2+Y2+Z2)1/2
其中,β=PR*PSiris,PR为虹膜物理直径像方分辨率,
PSiris虹膜变焦聚焦光学成像系统的图像成像传感器的像素单位分辨率,
R为为虹膜变焦聚焦光学成像系统的工作半径;
b2、执行对虹膜变焦聚焦光学成像系统的聚焦参数控制,实现聚焦位置在像方景深范围内,
聚焦位置FOCUS=β*[R-kDOF,R+kDOF],
其中,k步数控制范围,DOF=2*FNO*SOC*(1+β)/β2,其中,FNO为虹膜变焦聚焦光学成像系统的光圈参数,
SOC为为虹膜变焦聚焦光学成像系统的最小物理光斑分辨率参数。
优选地,所述反馈控制LED照明光源辐射系统,包括:
c1、执行LED照明光源辐射系统的照明光源辐射强度方向角度参数控制,
LED照明光源辐射方向角度ψ=arctan(D/R),
定义在LED照明光源辐射系统的辐射强度峰值方向对应的中心线和虹膜变焦聚焦光学成像系统的光轴间夹角,D为LED照明光源辐射系统的光学中心和虹膜变焦聚焦光学成像系统光学中心的距离,R为虹膜变焦聚焦光学成像系统的工作半径;
c2、执行对LED照明光源辐射系统的LED照明光源辐射强度立体角的参数控制,
LED照明光源辐射强度立体角Ω(ω)=4π*sin2(ω)单位球面度sr,其中,
ω=arctan((PXiris2+PYiris2)1/2/2*PSiris/((1+β)*EFLiris))=arctan((PXiris2+PYiris2)1/2/2*PSiris/(β*R)),ω为虹膜变焦聚焦光学成像系统的半视场角,
PXiris为虹膜变焦聚焦光学成像系统的X水平方向像素分辨率,
PYiris为虹膜变焦聚焦光学成像系统的Y垂直方向像素分辨率,
EFLiris为焦距位置,
β=PR*PSiris,PR为虹膜物理直径像方分辨率,
PSiris为虹膜变焦聚焦光学成像系统的图像成像传感器的像素单位分辨率,
R为为虹膜变焦聚焦光学成像系统的工作半径。
本发明提供的一种远距离大视场虹膜光学成像的装置及方法,同时实现大范围时视场角和辐射照度恒定,具有以下优势:
1.恒定放大倍率即相同的成像图像虹膜直径。
2.响应于视场和工作距离及景深范围内成像速度0.1s以内。
3.恒定的成像景深。
4.恒定的成像图像亮度。
5.恒定的成像图像相对照度。
6.恒定的LED照明光源系统辐射总光功率。
7.恒定的眼睛虹膜受辐射照度,并满足眼睛生物安全辐射上限。
8.移动速度到1m/s不受运动模糊影响,对抗各种环境光>10,000lux噪声条件干扰。
9.工作距离大于1m,视场范围大于60度。
应当理解,前述大体的描述和后续详尽的描述均为示例性说明和解释,并不应当用作对本发明所要求保护内容的限制。
附图说明
参考随附的附图,本发明更多的目的、功能和优点将通过本发明实施方式的如下描述得以阐明,其中:
图1示意性示出了本发明一个实施例中远距离大视场虹膜光学成像的装置的原理示意图。
图2示意性示出了本发明另一个实施例中远距离大视场虹膜光学成像的装置的原理示意图。
附图标记:
100 远距离大视场虹膜光学成像的装置,
110 3D深度成像单元红外VCSEL光源,
111 深度成像单元红外的成像透镜和图像成像传感器,
112 虹膜光学跟踪系统的垂直方向旋转轴,
113 虹膜光学跟踪系统的水平方向旋转轴,
114 可见光RGB图像成像单元,
115 3D深度成像单元的视场角即预定的工作视场角FOVface,
116 预定的近端工作半径Rnear,
117 预定的近端工作距离Znear,
118 预定的远端工作半径Rfar,
119 预定的远端工作距离Zfar,
120 虹膜变焦聚焦光学成像系统的变焦聚焦成像透镜组,
121 虹膜变焦聚焦光学成像系统的滤光片,
122 虹膜变焦聚焦光学成像系统的图像成像传感器,
123 保护窗口,
124 虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near,
125虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far,
126虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的物方平面成像区域,
127虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的物方平面成像区域,
130L/130R在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左右侧LED照明光源,
131L/131R在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左右侧LED照明光源,
132L/132R在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far,
133L/133R在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near,
134L/134R在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear,
135L/135R在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar,
150 图像处理和驱动控制系统,
160 图像显示反馈系统。
200 远距离大视场虹膜光学成像的装置,
210 3D深度成像单元红外VCSEL光源,
211 深度成像单元红外的成像透镜和图像成像传感器,
214 可见光RGB图像成像单元,
215 3D深度成像单元的视场角即预定的工作视场角FOVface,
216 预定的近端工作半径Rnear,
217 预定的近端工作距离Znear,
218 预定的远端工作半径Rfar,
219 预定的远端工作距离Zfar,
228 虹膜光学跟踪系统的2轴MEMS旋转反射镜单元,
220 虹膜变焦聚焦光学成像系统的变焦聚焦成像透镜组,
221 虹膜变焦聚焦光学成像系统的滤光片,
222 虹膜变焦聚焦光学成像系统的图像成像传感器,
223 保护窗口,
224 虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near,
225 虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far,
226 虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的物方平面成像区域,
227 虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的物方平面成像区域,
230L/230R LED照明光源辐射系统的左右侧LED照明光源,
232L/232R在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far,
233L/233R在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near,
234L/234R在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear,
235L/235R在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar,
236L/236R LED照明光源辐射系统的左/右侧的液体透镜,
237L/237R LED照明光源辐射系统的左/右侧2轴MEMS旋转反射镜,
250 图像处理和驱动控制系统,
260 图像显示反馈系统。
具体实施方式
通过参考示范性实施例,本发明的目的和功能以及用于实现这些目的和功能的方法将得以阐明。然而,本发明并不受限于以下所公开的示范性实施例;可以通过不同形式来对其加以实现。说明书的实质仅仅是帮助相关领域技术人员综合理解本发明的具体细节。
在下文中,将参考附图描述本发明的实施例。在附图中,相同的附图标记代表相同或类似的部件,或者相同或类似的步骤。
实施例一:
如图1所示本发明一个实施例中远距离大视场虹膜光学成像的装置的原理示意图,根据本发明本实施例中,一种远距离大视场虹膜光学成像的装置100,包括:虹膜光学跟踪系统,虹膜变焦聚焦光学成像系统,LED照明光源辐射系统,图像显示反馈系统160,图像处理和驱动控制系统150。
虹膜光学跟踪系统包括3D深度成像单元,2方向轴旋转单元:虹膜光学跟踪系统的垂直方向旋转轴112和虹膜光学跟踪系统的水平方向旋转轴113。
3D深度成像单元可采用3D TOF深度成像或结构光深度成像(例如940nm红外VCSEL光源110,成像透镜和图像成像传感器111),或双目立体视觉成像(LED照明光源,固定间隔距离安装的2组参数对称的成像透镜和图像成像传感器)提供深度图像信息。
虹膜变焦聚焦光学成像系统包括光学变焦聚焦透镜组120,光学滤光片121,图像成像传感器122。
LED照明光源辐射系统包括LED照明光源辐射强度立体角和/或辐射强度方向角度组合控制。
图像显示反馈系统160包括显示屏,用于实时显示当前图像和/或状态信息。
图像处理和驱动控制系统150连接虹膜光学跟踪系统,虹膜变焦聚焦光学成像系统,LED照明光源辐射系统,图像显示反馈系统,并实现各系统单元间的驱动和反馈控制。
根据本发明本实施例一种远距离大视场虹膜光学成像的方法,包括:
图像处理和驱动控制系统执行各系统单元间的驱动和反馈控制过程如下:
a、反馈控制虹膜成像跟踪系统,通过3D深度成像单元获取虹膜关键点3D坐标,转换相对坐标为3D物理空间点,反馈控制2轴旋转单元调整角度,实现实时同步虹膜光学成像跟踪。
b、反馈控制虹膜变焦聚焦光学成像系统,根据3D物理空间点坐标,实现实时同步光学变焦聚焦透镜组的焦距和聚焦位置的反馈控制。
c、反馈控制LED照明光源辐射系统,根据3D物理空间点坐标,实现实时同步响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间匹配关系的LED照明光源辐射强度方向角度和/或LED照明光源辐射强度立体角的反馈控制。
d、反馈控制图像显示反馈系统实时显示当前图像和/或状态信息。
图像显示反馈系统实现实时同步显示当前图像为3D深度成像单元成像的红外亮度图像,RGB可见光单元成像图像或虹膜变焦聚焦光学成像图像。
根据本发明的实施例,具体的步骤包括:
a1、根据预定的工作视场范围FOV,定义3D深度成像单元的视场角FOVface115和有效成像焦距EFLface。
EFLface=[(PXface2+PYface2)1/2*PSface/2]/tan(FOVface/2),
PXface为3D深度成像单元的X水平方向像素分辨率,pixel;
PYface为3D深度成像单元的Y垂直方向像素分辨率,pixel;
PSface为3D深度成像单元的像素单位分辨率,um/pixel;
FOVface为3D深度成像单元的视场角,FOVface=FOV;
EFLface为3D深度成像单元的有效成像焦距,mm。
典型参数计算如下:
PXface=640pixels,PYface=480pixels,PSface=5.6um/pixel,FOVface=FOV=77度,EFLface=2.8mm。
a2、定义3D深度成像单元控制获取虹膜关键点。
a21、获取3D深度成像单元的亮度(红外灰度阶)图像Ii(x,y)和深度距离图像Iz(x,y)。
a22、在亮度图像Ii(x,y)中检测人脸区域,在人脸区域进一步定位左右眼中心坐标(xl,yl)和(xr,yr)。
目前应用公知的基于深度学习的卷积神经网络CNN级联模型可以可靠准确的实现人脸区域检测和人眼定位功能。
具体本实施例为了提高检测定位眼睛性能,采用独立或联合可见光RGB图像成像单元114,预先进行3D深度成像单元和可见光RGB图像成像单元114的的标定配准,然后进一步检测RGB图像中人脸区域和人眼定位提高精度和可靠性。另外RGB成像单元可以用于装置在待机状态时检测人脸触发系统进入正常工作状态,降低系统待机功耗。更进一步可见光RGB图像成像单元成像图像被用于图像显示反馈系统实时显示当前图像。
a23、获取在深度距离图像Iz(x,y)中左右眼中心对应坐标的位置的深度距离信息,
z=[Iz(xl,yl)+lz(xr,yr)]/2,或
z=Iz((xl+xr)/2,(yl+yr)/2)。
具体本实施例为了提高距离信息测量精度和可靠性性能,采用提取左右眼中心坐标位置的局部区域内有效像素过滤干扰像素,如中值滤波,或过滤灰度亮度图像中过高亮度或过低亮度的像素,或深度距离图像中距离过远或距离过近的像素等。
a24、产生3D深度成像单元像方关键参考点KPface(xe,ye,z):
KPface(xe,ye,z)=KPface((xl+xr-PXface)/2*PSface,(yl+yr-PYface)/2*PSface,z)。
a25、产生3D深度成像单元物方关键参考点KPface(Xe,Ye,Ze):
KPface(Xe,Ye,Ze)=KPface(xe*z/EFLface,ye*z/EFLface,z)。
a3、建立3D深度成像单元的物方关键参考点坐标KPface(Xe,Xe,Ze)相对虹膜变焦聚焦光学成像系统的3D物理空间点Piris(X,Y,Z)坐标变换,
Piris(X,Y,Z)=(Xe-Xoffset,Xe-Yoffset,Ze-Zoffset),
其中,(Xoffset,Yoffset,Zoffset)为3D深度成像单元相对虹膜变焦聚焦光学成像系统的3D物理位置坐标偏移。
a4、执行方向轴旋转单元同步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arcsin(X/R),
执行水平方向旋转轴的旋转角度θh=arcsin(Y/R);
R=(X2+Y2+Z2)1/2
或者,执行方向轴旋转单元异步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arctan(X/Z),
执行水平方向旋转轴的旋转角度θh=arcsin(Y/R);
等价的,
执行水平方向旋转轴的旋转角度θh=arctan(Y/Z)
执行垂直方向旋转轴的旋转角度θv=arcsin(X/R)。
本发明具体实施列中执行方向轴旋转单元同步控制,可通过采用垂直/水平方向旋转轴的角度旋转速度比K来实现同步,K=θv/θh。
本发明具体实施列中执行方向轴旋转单元异步控制,可通过采用垂直/水平方向旋转轴的角度旋转先后时序来实现异步,如先垂直方向旋转轴的旋转角度θv然后水平方向旋转轴的旋转角度θh;或等价的,先水平方向旋转轴的旋转角度θh然后垂直方向旋转轴的旋转角度θv。
特别的,作为一个简化,当Xoffset<<X,Yoffset<<Y,Zoffset<<Z时,即3D深度成像单元相对虹膜变焦聚焦光学成像系统的3D物理位置坐标偏移忽略不计时,垂直/水平方向旋转轴的旋转角度和Z近似无关。
更进一步优选的,3D深度成像单元和虹膜光学跟踪系统集成保持同步旋转控制,当虹膜光学跟踪系统调整2轴旋转角度后,提供了理想的准确性反馈测量,通过比较旋转后预期物方关键参考点KP(Xp,Yp,Zp):
KP(Xp,Yp,Zp)=KP((Ze*tan(θv)-Xe)*cos(θv),(Ze*tan(θh)-Ye)*cos(θh),(Xe2+Ye2+Ze2)1/2),
或等价的,
KP((Xe2+Ze2)1/2*sin(θv-arctan(Xe/Ze)),(Ye2+Ze2)1/2*sin(θh-arctan(Ye/Ze)),(Xe2+Ye2+Ze2)1/2),θv=X/Z,θh=Y/Z。
重复迭代步骤a1-a2后的3D深度成像单元输出的实际物方关键参考点KPface(Xe,Ye,Ze),判断是否在系统预定的误差范围内,如果超过预定误差范围,再次按实际物方关键参考点KPface(Xe,Ye,Ze)重复步骤a3建立3D物理空间点Piris(X,Y,Z)坐标变换,并反馈控制步骤a4,重新调整旋转角度。更近一步,3D深度成像单元和虹膜跟踪系统集成保持同步旋转控制,提供了扩展更大360度工作视场角。
执行虹膜变焦聚焦光学成像系统的变焦聚焦参数同步控制,包括:
b1、执行对虹膜变焦聚焦光学成像系统的焦距参数控制,实现焦距位置保持恒定的预定放大倍率即相同成像虹膜直径。
焦距位置EFLiris=R*β/(1+β)R=(X2+Y2+Z2)1/2
其中,β=PR*PSiris PR为虹膜物理直径像方分辨率pixel/mm如典型的20pixels/mm,PSiris虹膜变焦聚焦光学成像系统的图像成像传感器的像素单位分辨率um/pixel,如典型的3um/pixel,β=0.06。
如图1所示R为预定的工作半径,包括预定的近端工作半径Rnear116,预定的远端工作半径Rfar118,
预定的工作距离Z,包括预定的近端工作距离Znear117,预定的远端工作距离Zfar119。
如典型参数近端工作半径Rnear=1m,远端工作半径Rfar=2m,分别EFLiris=56.6mm和113.2mm。
考虑到实际使用者不自主移动同时保证速度和调整频率,可以R间隔变化一定预定范围后执行光学变焦操作。如保持相对5-10cm范围相同的焦距,这种设计是合理的,虹膜直径本身也是因人而异存在一定差异。
b2、执行对虹膜变焦聚焦光学成像系统的聚焦参数控制,实现聚焦位置在像方景深范围内,
聚焦位置FOCUS=β*[R-kDOF,R+kDOF]
其中,k步数控制范围,k=[1,2],步长为STEP=β*DOF,如k=2,包括-2STEP,-STEP,0,+STEP,2STEP共5个范围,DOF=2*FNO*SOC*(1+β)/β2,其中,FNO为虹膜变焦聚焦光学成像系统的光圈参数,参数范围[PF,2PF],PF=PSiris/(1um/pixel);SOC为为虹膜变焦聚焦光学成像系统的最小物理光斑分辨率参数,参数典型值为SOC=2*PSiris*1pixel,最大值DOF=21.2mm。
归因于深度信息的误差,虹膜变焦聚焦光学成像系统在实际生产制造过程精度机械误差,个体偏差等,产生2k+1倍步长控制位置,步长为β*DOF,一般3-5步长范围完全在预定的像方聚焦位置,保证聚焦位置在+-DOF/2的物方景深范围内(等价的,+-β*DOF/2的像方景深范围内),同时如此少量控制步数能保证在0.1s完成。
本发明上述设计保证具有恒定景深范围,并同时实现聚焦位置在像面景深范围内。
理想的非球面光学玻璃/塑料混合2片液体透镜liquid lens分别独立控制焦距EFLiris和聚焦FOCUS,上述设计需要焦距和和聚焦位置都转换为对应设计的成像光学系统2片液体镜头的屈光度为单位规格的数值,相比传统步进电机驱动的复杂凸轮曲线控制,归因于液体透镜具有屈光度和电压/电流对应的线性响应光学属性关系,可大大简化驱动控制过程,同时如此设计可大量减少整体成像系统组件数量(3-4组群12-16片)。
同时没有任何传统螺杆或齿轮连接驱动的机械传动部件,无使用寿命限制,控制精度和重复性也有本质性的提高。
本发明在实践中,目前液体透镜存在受限的通光孔径典型如6-10mm,和受限的屈光范围-10到+20屈光度,在大屈光度时波前误差增加到λ/10,但归因于景深对FNO值,长焦距应用要求,适合虹膜变焦聚焦光学成像系统。光学设计者利用液体透镜特性技巧可通过优化光路设计解决,如光路中选择合适的出入射光瞳设计FNO解决通光孔径,变焦部分光学系统初始设计采用设置变焦液体镜头在0屈光度光学功率时工作在远端工作半径/距离时对应最大焦距,聚焦部分光学系统初始设计采用设置聚焦液体镜头在0屈光度光学功率时工作在远端工作半径/距离时对应的像面位置。
执行对LED照明光源辐射系统的LED照明光源辐射强度方向角度和/或LED照明光源辐射强度立体角的参数控制,实现在不同3D物理空间点坐标响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角范围之间关系的匹配,如图1所示。
c1、执行LED照明光源辐射系统的照明光源辐射强度方向角度参数控制。
LED照明光源辐射方向角度ψ=arctan(D/R)
定义在LED照明光源辐射系统的辐射强度峰值方向对应的中心线和虹膜变焦聚焦光学成像系统的光轴间夹角,D为LED照明光源辐射系统的光学中心和虹膜变焦聚焦光学成像系统光学中心的距离,R为为虹膜变焦聚焦光学成像系统的工作半径。
等价的定义,在LED照明光源辐射系统的辐射强度峰值方向对应的中心线和虹膜变焦聚焦光学成像系统的物方平面夹角ψ',ψ=90-ψ'。
C2、执行对LED照明光源辐射系统的LED照明光源辐射强度立体角的参数控制。
LED照明光源辐射强度立体角Ω(ω)=4π*sin2(ω)单位球面度sr
ω=arctan((PXiris2+PYiris2)1/2/2*PSiris/((1+β)*EFLiris))
=arctan((PXiris2+PYiris2)1/2/2*PSiris/(β*R))
ω为虹膜变焦聚焦光学成像系统的半视场角。
PXiris为虹膜变焦聚焦光学成像系统的X水平方向像素分辨率,pixel。
PYiris为虹膜变焦聚焦光学成像系统的Y垂直方向像素分辨率,pixel。
由于真实物理光学如凸透镜和或凹面反射镜等无法制造出在给定LED照明光源辐射强度立体角Ω(ω)下等密度均匀光场分别光能量(光功率)分布,既单位阶跃函数分布,而是具有特定函数分布。
Figure BDA0003412446610000131
其中:
I(Ω)为LED照明光源辐射系统的辐射强度,单位mw/sr
I(Ω)=Ipeak*f(Ω)。
Ω为LED照明光源辐射系统的立体角,单位sr球面度。
Ipeak为LED照明光源辐射系统的辐射强度峰值,单位mw/sr。
f(Ω)为LED照明光源辐射系统的辐射强度归一化分布函数。
OP为LED照明光源辐射系统的恒定总光学功率,单位mw。
根据推论f(Ω(ω))=I(Ω(ω))/Ipeak,
因此,在LED照明光源辐射系统的辐射强度立体角Ω(ω)时,LED照明光源辐射系统具有辐射强度I(Ω(ω))=Ipeak*f(Ω(ω)),当f(Ω(ω))越接近1,越呈现单位阶跃函数分布特性。
定义ρ=Iρ/Ipeak=I(Ω(ω))/Ipeak=f(Ω(ω)),ρ为预定的自定义虹膜焦距聚焦光学成像系统的成像像面接受光辐射的相对照度,如0.5或0.707,更高意味相对照度分布更均匀。
本质上LED照明光源辐射强度立体角产生在虹膜表面上受辐射照度Eiris,
Eiris(ω,ψ)=OP/(Ω(ω)*R2)*cos3(ψ)=Ipeak/R2*cos3(ψ)。
当ω足够小时满足sin2(ω)=tan2(ω)。
如图1所示,虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near124。虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far125。虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的物方平面成像区域126。虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的物方平面成像区域127。在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左右侧LED照明光源130L/130R。在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左右侧LED照明光源131L/131R。在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far132L/132R。在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near133L/133R。在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear134L/134R。在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar135L/135R。
本发明可以实现在本质上对于恒定总光功率的LED照明光源辐射系统,通过动态改变LED照明光源辐射强度立体角分配的光辐射强度等量的改变虹膜表面受辐射照度,无论虹膜变焦聚焦光学成像系统在远端/近端工作半径[Rfar,Rnear]/距离[zfar,Znear]及对应的视场角[FOViris-far,FOViris-near]如何变化,根据公式Eiris(ω,ψ)保持接近恒定,而且能完全匹配工作半径/距离及对应的虹膜光学变焦聚焦光学成像系统的视场角。
可以证明对于一个具有虹膜变焦聚焦光学成像系统的成像像面接受光辐射照度Eimage。
根据公式Eimage(ω,ψ)=t*1/8/(1+β)2*cos4(Φ)*μ*Eiris(ω,ψ)/FNO2
当ω足够小时满足cos4(Φ)=1,Φ为虹膜变焦聚焦光学成像系统的成像入射角,Φ=[0,ω],
μ为虹膜生物组织反射率光学常数系数,0.12-0.15,
t为为虹膜变焦聚焦光学成像系统的透过率常数系数。
Eimage是恒定的,即成像图像亮度limage是恒定的。
limage=QE*Tpulse*Eimage*ADC*G*S
QE为光子-电子量子转换效率单位e-/(mw*um2)/s,G为单位转换增益单位mv/e-,ADC为模拟电压/数字亮度转换单位LSB/mv,,S为单位像素面积单位um2
目前传统CMOS SENSOR技术执行光子-电子量子转换的是PD硅基光电二极管其效率不理想,前沿的QF量子薄膜或OPF有机感光薄膜等技术,具有天然对红外光子高量子转换效率,global shutter全局快门的性质是理想的优选。
同时可以证明对于虹膜变焦聚焦光学成像系统的成像像面接受光辐射的相对照度ρ是恒定的,ρ=Eedge/Ecenter=Iρ/Ipeak,Eedge为成像像面边缘(视场边缘)的受辐射照度Eedge=Eimage(ω,ψ)*ρ,Ecenter为成像像面中心(视场中心)的受辐射照度,Ecenter=Eimage(ω,ψ)既成像图像亮度具有恒定的相对照度。
本发明通过LED照明光源辐射系统通过具有不同的辐射方向角和辐射强度立体角的阵列组合控制,实现匹配对应的虹膜变焦聚焦光学成像系统的视场角范围[FOViris-far,FOViris-near],工作半径范围[Rfar,Rnear],或工作距离范围[Zfar,Znear]。
本发明通过实现在本质上对于恒定总光功率的LED照明光源辐射系统的权重值再分配实现在对应的虹膜变焦聚焦光学成像系统的视场角范围[FOViris-far,FOViris-near],工作半径范围[Rfar,Rnear],或工作距离范围[Zfar,Znear]内等效拟合的响应于对应的LED照明光源辐射强度立体角。
∑OPi=OP
OPi=Wi*OP,∑Wi=1
OPi为具有不同的辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率,Wi为对应OPi的权重值。
i为具有不同的辐射方向角和辐射强度立体角的LED照明光源辐射系统的数量。
OP为LED照明光源辐射系统的恒定总光学功率。
本发明实现在具有不同的辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率组合控制后,在虹膜表面上产生恒定的总受辐射照度Eiris。
∑Ei=Eiris
Ei=Wi*Eiris,∑Wi=1
Ei为具有不同的辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率OPi在虹膜表面上产生的受辐射照度。
i为具有不同的辐射方向角和辐射强度立体角的LED照明光源辐射系统的数量。
根据本发明的具体实施例,在i=2的实列,即在远端工作半径Rfar和近端工作半径Rnear的不同辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率OPfar和OPnear分配实现任意给定工作半径R时对应的LED照明光源辐射强度立体角和恒定的总光功率OP的组合控制举例。
OP1+OP2=OP或OPfar+OPnear=OP,OPfar=Wfar*OP,OPnear=Wnear*OP。
定义OP为工作半径R对应的LED照明光源辐射系统的恒定总光学功率。
定义OPfar为远端工作半径Rfar对应的LED照明光源辐射系统的光学功率。
Wfar为对应OPfar的权重值。
定义OPnear为近端工作半径Rnear对应的近端LED照明光源辐射系统的光学功率。
Wnear为对应OPnear的权重值。
在Wfar+Wnear=1条件下,根据上述公式有以下推论:
Wfar=[cos3(ψR)*R2-cos3(ψnear)*Rnear2]/[cos3(ψfar)*Rfar2-cos3(ψnear)*Rnear2]。
Wnear]=[cos3(ψfar)*Rfar2-cos3(ψR)*R2]/[cos3(ψfar)*Rfar2-cos3(ψnear)*Rnear2]。
其中ψR为R工作半径LED照明光源辐射系统的辐射方向角。
其中ψfar为远端LED照明光源辐射系统的辐射方向角。
其中ψnear为近端LED照明光源辐射系统的辐射方向角。
特别的,在cos3(ψfar)/cos3(ψR)=1和cos3(ψnear)/cos3(ψR)=1的简化条件下,上述公式简化为
Wfar=[R2-Rnear2]/[Rfar2-Rnear2]
Wnear=[Rfar2-R2]/[Rfar2-Rnear2]。
通过组合控制分配权重值比例Wfar和Wnear在远端工作半径Rfar和近端工作半径Rnear的不同辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率OPfar和OPnear分配实现任意给定工作半径R时对应的LED照明光源辐射强度立体角和恒定的总光功率。
根据本发明具体实施例,同样对i=2的实施例,即在远端工作半径Rfar和近端工作半径Rnear的不同辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率OPfar和OPnear分配实现任意给定工作半径R时对应的LED照明光源辐射强度立体角和恒定的总光功率OP的组合控制举例。
同时加入LED照明光源辐射系统的辐射强度归一化分布函数的边界条件:
f(Ω)-°β*OPfar+f(Ω)near*OPnear=f(Ω)R*OP
OPfar+OPnear=OP,
OPfar=Wfar*OP,OPnear=Wnear**OP
定义OP为工作半径R对应的LED照明光源辐射系统的恒定总光学功率,f(Ω)R为对应OP的辐射强度归一化分布函数。
定义OPfar为远端工作半径Rfar对应的LED照明光源辐射系统的光学功率。
Wfar为对应OPfar的权重值,f(Ω)far为对应OPfar的辐射强度归一化分布函数。
定义OPnear为近端工作半径Rnear对应的近端LED照明光源辐射系统的光学功率。
Wnear为对应OPnear的权重值,f(Ω)near为对应的OPnear辐射强度归一化分布函数。
在Wfar+Wnear=1条件下,根据上述公式有以下推论:
Wfar=[cos3(ψR)*f(Ω)R*R2-cos3(ψnear)*f(Ω)near*Rnear2]/[cos3(ψfar)*f(Ω)far*Rfar2-cos3(ψnear)*f(Ω)near*Rnear2]。
Wnear=[cos3(ψfar)*f(Ω)far*Rfar2-cos3(ψR)*f(Ω)R*R2]/[cos3(ψfar)*f(Ω)far*Rfar2-cos3(ψnear)*f(Ω)near*Rnear2]。
特别的在Ω=Ω(ω),Wfar+Wnear=1条件下,根据上述公式有以下推论:
Wfar=[cos3(ψR)*f(Ω(ω))R*R2-cos3(ψnear)*f(Ω(ω))near*Rnear2]/[cos3(ψfar)*f(Ω(ω))far*Rfar2-cos3(ψnear)*f(Ω(ω))near*Rnear2]。
Wnear=[cos3(ψfar)*f(Ω(ω))far*Rfar2-cos3(ψR)*f(Ω(ω))R*R2]/[cos3(ψfar)*f(Ω(ω))far*Rfar2-cos3(ψnear)*f(Ω(ω))near*Rnear2]。
其中,ψR为R工作半径LED照明光源辐射系统的辐射方向角。
其中,ψfar为远端LED照明光源辐射系统的辐射方向角。
其中,ψnear为近端LED照明光源辐射系统的辐射方向角。
其中,f(Ω(ω))R为R工作半径LED照明光源辐射系统在Ω(ω)辐射强度立体角时对应的辐射强度归一化分布函数值。
其中,f(Ω(ω))far为远端工作半径LED照明光源辐射系统在Ω(ω)辐射强度立体角时对应的辐射强度归一化分布函数值。
其中,f(Ω(ω))near为近端工作半径LED照明光源辐射系统在Ω(ω)辐射强度立体角时对应的辐射强度归一化分布函数值。
特别的,在cos3(ψfar)/cos3(ψR)=1和cos3(ψnear)/cos3(ψR)=1的简化条件下,上述公式简化为:
Wfar=[f(Ω(ω))R*R2-f(Ω(ω))near*Rnear2]/[f(Ω(ω))far*Rfar2-f(Ω(ω))near*Rnear2]。
Wnear=[f(Ω(ω))far*Rfar2-f(Ω(ω))R*R2]/[f(Ω(ω))far*Rfar2-f(Ω(ω))near*Rnear2]。
通过组合控制分配权重值比例Wfar和Wnear在远端工作半径Rfar和近端工作半径Rnear的不同辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率OPfar和OPnear分配实现任意给定工作半径R时对应的LED照明光源辐射强度立体角和恒定的总光功率。
通过合成远端工作半径/距离和近端工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角范围内LED照明光源辐射强度立体角组合控制权重值再分配的光辐射功率等量的改变虹膜表面受辐射照度,根据公式保持接近恒定,而且能完全匹配对应的虹膜光学变焦聚焦光学成像系统的视场角。
作为本发明的等同扩展,采用更多具有不同的辐射方向角和辐射强度立体角的LED照明光源辐射系统的光学功率组合控制应该被等同理解和等价。
本发明通过LED照明光源辐射系统和虹膜变焦聚焦光学成像系统被组合配置为具有响应于同步辐射强度方向角和辐射强度立体角的组合控制,实现LED照明光源辐射系统在不同3D物理空间点坐标响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间对应匹配关系,在预定的工作视场和工作距离内满足恒定的成像图像亮度,恒定的成像图像相对照度,恒定的LED照明光源系统辐射光功率和恒定的眼睛虹膜受辐射照度。
为消除实际使用时使用者运动导致的运动模糊,归因于如此大的光学放大倍率,即使10cm/s以下的移动速度也能造成非常明显图像运动模糊干扰,导致影响影响识别性能。
本发明通过LED照明光源辐射系统和虹膜变焦聚焦光学成像系统被配置为同步脉冲外触发或同步脉冲内触发方式的全局像素曝光(积分)和照明辐射组合成像模式。
其中,同步脉冲曝光(积分)时间和同步脉冲照明辐射时间Tpulse<m/(PR*speed),speed为预定控制的运动速度如1m/s,m为预定控制的运动模糊图像像素尺度,m<10pxiels。
同步脉冲曝光(积分)频率和同步脉冲照明辐射频率Fpulse,Fpulse=[10,30]Hz,LED照明光源辐射系统产生同步脉冲照明辐射在虹膜表面的受辐射照度Tpulse*Fpulse*Eiris(ω)<10mw/cm2,以保证满足眼睛辐射生物安全。
更进一步,虹膜变焦聚焦光学成像系统在滤光片的结合下实现同步脉冲外触发或同步脉冲内触发方式的全局像素曝光(积分)和照明辐射组合成像模式可具有对外界不受控环境下对各种光干扰条件抗干扰性能。如高达10,000lux以上的户外太阳环境。
保护窗口123可采用全透射钢化光学玻璃,或更优选的采用反射700nm以下可见光,透射700-900nm红外光的滤光片,具有即能保护内部光学组件同时使用者无法观察到内部结构通过反射可见光提供使用者自然状态的使用视觉反馈效果,更进一步,过滤可见光可以提高虹膜变焦聚焦光学成像系统消除对外界非成像波长杂散光的干扰,进一步提高成像质量信噪比SNR。
实施例二:
如图2所示本发明一个实施例中远距离大视场虹膜光学成像的装置的原理示意图,根据本发明本实施例中,一种远距离大视场虹膜光学成像的装置200,包括:虹膜光学跟踪系统,虹膜变焦聚焦光学成像系统,LED照明光源辐射系统,图像显示反馈系统260,图像处理和驱动控制系统250。
虹膜光学跟踪系统包括3D深度成像单元,2轴MEMS旋转反射镜单元228。
3D深度成像单元可采用3D TOF深度成像或结构光深度成像(例如940nm红外VCSEL光源210,成像透镜和图像成像传感器211),或双目立体视觉成像(LED照明光源,固定间隔距离安装的2组参数对称的成像透镜和图像成像传感器)提供深度图像信息。
虹膜变焦聚焦光学成像系统包括光学变焦聚焦透镜组220,光学滤光片221,图像成像传感器222。
LED照明光源辐射系统包括LED照明光源辐射强度立体角和/或辐射强度方向角度组合控制。
图像显示反馈系统260包括显示屏,用于实时显示当前图像和状态信息。
图像处理和驱动控制系统250连接虹膜光学跟踪系统,虹膜变焦聚焦光学成像系统,LED照明光源辐射系统,图像显示反馈系统,并实现各系统单元间的驱动和反馈控制。
根据本发明本实施例一种远距离大视场虹膜光学成像的方法,包括:
图像处理和驱动控制系统执行各系统单元间的驱动和反馈控制过程如下:
a、反馈控制虹膜成像跟踪系统,通过3D深度成像单元获取虹膜关键点3D坐标,转换相对坐标为3D物理空间点,反馈控制2轴旋转单元调整角度,实现实时同步虹膜光学成像跟踪。
b、反馈控制虹膜变焦聚焦光学成像系统,根据3D物理空间点坐标,实现实时同步光学变焦聚焦透镜组的焦距和聚焦位置的反馈控制。
c、反馈控制LED照明光源辐射系统,根据3D物理空间点坐标,实现实时同步响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间匹配关系的LED照明光源辐射强度方向角度和/或LED照明光源辐射强度立体角的反馈控制。
d、反馈控制图像显示反馈系统实时显示当前图像和/或状态信息。
图像显示反馈系统实现实时同步显示当前图像为3D深度成像单元成像的红外亮度图像,RGB可见光单元成像图像或虹膜变焦聚焦光学成像图像。
根据本发明的实施例,具体的步骤包括:
a1、根据预定的工作视场范围FOV,定义3D深度成像单元的视场角FOVface215和有效成像焦距EFLface。
EFLface=[(PXface2+PYface2)1/2*PSface/2]/tan(FOVface/2),
PXface为3D深度成像单元的X水平方向像素分辨率,pixel;
PYface为3D深度成像单元的Y垂直方向像素分辨率,pixel;
PSface为3D深度成像单元的像素单位分辨率,um/pixel;
FOVface为3D深度成像单元的视场角,FOVface=FOV;
EFLface为3D深度成像单元的有效成像焦距,mm。
典型参数计算如下:
PXface=640pixels,PYface=480pixels,PSface=5.6um/pixel,FOVface=FOV=77度,EFLface=2.8mm。
a2、定义3D深度成像单元控制获取虹膜关键点。
a21、获取3D深度成像单元的亮度(红外灰度阶)图像Ii(x,y)和深度距离图像Iz(x,y)。
a22、在亮度图像Ii(x,y)中检测人脸区域,在人脸区域进一步定位左右眼中心坐标(xl,yl)和(xr,yr)。
目前应用公知的基于深度学习的卷积神经网络CNN级联模型可以可靠准确的实现人脸区域检测和人眼定位功能。
具体本实施例为了提高检测定位眼睛性能,采用独立或联合可见光RGB图像成像单元114,预先进行3D深度成像单元和可见光RGB图像成像单元114的的标定配准,然后进一步检测RGB图像中人脸区域和人眼定位提高精度和可靠性。另外RGB成像单元可以用于装置在待机状态时检测人脸触发系统进入正常工作状态,降低系统待机功耗。更进一步可见光RGB图像成像单元成像图像被用于图像显示反馈系统实时显示当前图像。
a23、获取在深度距离图像Iz(x,y)中左右眼中心对应坐标的位置的深度距离信息,
z=[Iz(xl,yl)+lz(xr,yr)]/2,或z=Iz((xl+xr)/2,(yl+yr)/2)。
具体本实施例为了提高距离信息测量精度和可靠性性能,采用提取左右眼中心坐标位置的局部区域内有效像素过滤干扰像素,如中值滤波,或过滤灰度亮度图像中过高亮度或过低亮度的像素,或深度距离图像中距离过远或距离过近的像素等。
a24、产生3D深度成像单元像方关键参考点KPface(xe,ye,z):
KPface(xe,ye,z)=KPface((xl+xr-PXface)/2*PSface,(yl+yr-PYface)/2*PSface,z)。
a25、产生3D深度成像单元物方关键参考点KPface(Xe,Ye,Ze):
KPface(Xe,Ye,Ze)=KPface(xe*z/EFLface,ye*z/EFLface,z)。
a3、建立3D深度成像单元的物方关键参考点坐标KPface(Xe,Xe,Ze)相对虹膜变焦聚焦光学成像系统的3D物理空间点Piris(X,Y,Z)坐标变换,
Piris(X,Y,Z)=(Xe-Xoffset,Xe-Yoffset,Ze-Zoffset),
其中,(Xoffset,Yoffset,Zoffset)为3D深度成像单元相对虹膜变焦聚焦光学成像系统的3D物理位置坐标偏移。
a4、执行2轴MEMS旋转反射镜单元228调整垂直/水平方向的旋转角度同步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arcsin(X/R)/2,
执行水平方向旋转轴的旋转角度θh=arcsin(Y/R)/2;
R=(X2+Y2+Z2)1/2
或者,
执行方向轴旋转单元异步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arctan(X/Z)/2,
执行水平方向旋转轴的旋转角度θh=arcsin(Y/R)/2;
等价的,
执行水平方向旋转轴的旋转角度θh=arctan(Y/Z)/2
执行垂直方向旋转轴的旋转角度θv=arcsin(X/R)/2。
根据本发明,本实施例采用2轴MEMS旋转反射镜单元调整垂直/水平方向的旋转角度,基于MEMS旋转反射镜具有高可靠稳定性,响应快速,体积小,精确度高,可重复性好等优点,优选的本发明具体实施例2通过压电,电磁,静电,超声波,热电方式等MEMS制动器实现。
更近一步,本实施例采用2轴MEMS旋转反射镜单元具有典型参数:
1.机械旋转角度>35度,光学旋转角度>70度,
2.工作频率>10Hz满量程旋转,
3.角度精度<0.1度,
4.工作模式:point to point 2轴静态矢量,
5.响应时间<50ms,
6.工作电压5vDC,
7.镜面镀膜:金属介质,金/铝膜或增强金/铝膜,700-900nm波长反射率>92%,
8.镜面质量:波前误差WFErms<20nm RMS(lamda/50),
9.光学窗口:无或增透膜保护窗,
11.使用寿命:>100,000,000次满量程旋转,
12.工作温度:-20度到+60度。
执行虹膜变焦聚焦光学成像系统的变焦聚焦参数同步控制,包括:
b1、执行对虹膜变焦聚焦光学成像系统的焦距参数控制,实现焦距位置保持恒定的预定放大倍率即相同成像虹膜直径。
焦距位置EFLiris=R*β/(1+β)R=(X2+Y2+Z2)1/2
其中,β=PR*PSiris PR为虹膜物理直径像方分辨率pixel/mm如典型的20pixels/mm,PSiris虹膜变焦聚焦光学成像系统的图像成像传感器的像素单位分辨率um/pixel,如典型的3um/pixel,β=0.06。
如图2所示R为预定的工作半径,包括预定的近端工作半径Rnear216,预定的远端工作半径Rfar218,
预定的工作距离Z,包括预定的近端工作距离Znear217,预定的远端工作距离Zfar219。
如典型参数近端工作半径Rnear=1m,远端工作半径Rfar=2m,分别EFLiris=56.6mm和113.2mm。
考虑到实际使用者不自主移动同时保证速度和调整频率,可以R间隔变化一定预定范围后执行光学变焦操作。如保持相对5-10cm范围相同的焦距,这种设计是合理的,虹膜直径本身也是因人而异存在一定差异。
b2、执行对虹膜变焦聚焦光学成像系统的聚焦参数控制,实现聚焦位置在像方景深范围内,
聚焦位置FOCUS=β*[R-kDOF,R+kDOF]
其中,k步数控制范围,k=[1,2],步长为STEP=β*DOF,如k=2,包括-2STEP,-STEP,0,+STEP,2STEP共5个范围,DOF=2*FNO*SOC*(1+β)/β2,其中,FNO为虹膜变焦聚焦光学成像系统的光圈参数,参数范围[PF,2PF],PF=PSiris/(1um/pixel);SOC为为虹膜变焦聚焦光学成像系统的最小物理光斑分辨率参数,参数典型值为SOC=2*PSiris*1pixel,最大值DOF=21.2mm。
归因于深度信息的误差,虹膜变焦聚焦光学成像系统在实际生产制造过程精度机械误差,个体偏差等,产生2k+1倍步长控制位置,步长为β*DOF,一般3-5步长范围完全在预定的像方聚焦位置,保证聚焦位置在+-DOF/2的物方景深范围内(等价的,+-β*DOF/2的像方景深范围内),同时如此少量控制步数能保证在0.1s完成。
本发明上述设计保证具有恒定景深范围,并同时实现聚焦位置在像面景深范围内。
理想的非球面光学玻璃/塑料混合2片液体透镜liquid lens分别独立控制焦距EFLiris和聚焦FOCUS,上述设计需要焦距和和聚焦位置都转换为对应设计的成像光学系统2片液体镜头的屈光度为单位规格的数值,相比传统步进电机驱动的复杂凸轮曲线控制,归因于液体透镜具有屈光度和电压/电流对应的线性响应光学属性关系,可大大简化驱动控制过程,同时如此设计可大量减少整体成像系统组件数量(3-4组群12-16片)。
同时没有任何传统螺杆或齿轮连接驱动的机械传动部件,无使用寿命限制,控制精度和重复性也有本质性的提高。
本发明在实践中,目前液体透镜存在受限的通光孔径典型如6-10mm,和受限的屈光范围-10到+20屈光度,在大屈光度时波前误差增加到λ/10,但归因于景深对FNO值,长焦距应用要求,适合虹膜变焦聚焦光学成像系统。光学设计者利用液体透镜特性技巧可通过优化光路设计解决,如光路中选择合适的出入射光瞳设计FNO解决通光孔径,变焦部分光学系统初始设计采用设置变焦液体镜头在0屈光度光学功率时工作在远端工作半径/距离时对应最大焦距,聚焦部分光学系统初始设计采用设置聚焦液体镜头在0屈光度光学功率时工作在远端工作半径/距离时对应的像面位置。
执行对LED照明光源辐射系统的LED照明光源辐射强度方向角度和/或LED照明光源辐射强度立体角的参数控制,实现在不同3D物理空间点坐标响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角范围之间关系的匹配,如图2所示。
c1、执行LED照明光源辐射系统的照明光源辐射强度方向角度参数控制。
LED照明光源辐射方向角度ψ=arctan(D/R)
定义在LED照明光源辐射系统的辐射强度峰值方向对应的中心线和虹膜变焦聚焦光学成像系统的光轴间夹角,D为LED照明光源辐射系统的光学中心和虹膜变焦聚焦光学成像系统光学中心的距离,R为为虹膜变焦聚焦光学成像系统的工作半径。
c2、执行对LED照明光源辐射系统的LED照明光源辐射强度立体角的参数控制。
LED照明光源辐射强度立体角Ω(ω)=4π*sin2(ω)单位球面度sr
ω=arctan((PXiris2+PYiris2)1/2/2*PSiris/((1+β)*EFLiris))
=arctan((PXiris2+PYiris2)1/2/2*PSiris/(β*R))
ω为虹膜变焦聚焦光学成像系统的半视场角。
PXiris为虹膜变焦聚焦光学成像系统的X水平方向像素分辨率,pixel。
PYiris为虹膜变焦聚焦光学成像系统的Y垂直方向像素分辨率,pixel。
由于真实物理光学如凸透镜和或凹面反射镜等无法制造出在给定LED照明光源辐射强度立体角Ω(ω)下等密度均匀光场分别光能量(光功率)分布,既单位阶跃函数分布,而是具有特定函数分布。
Figure BDA0003412446610000241
其中:
I(Ω)为LED照明光源辐射系统的辐射强度,单位mw/sr
I(Ω)=Ipeak*f(Ω)。
Ω为LED照明光源辐射系统的立体角,单位sr球面度。
Ipeak为LED照明光源辐射系统的辐射强度峰值,单位mw/sr。
f(Ω)为LED照明光源辐射系统的辐射强度归一化分布函数。
OP为LED照明光源辐射系统的恒定总光学功率,单位mw。
根据推论f(Ω(ω))=I(Ω(ω))/Ipeak,
因此,在LED照明光源辐射系统的辐射强度立体角Ω(ω)时,LED照明光源辐射系统具有辐射强度I(Ω(ω))=Ipeak*f(Ω(ω))。
定义ρ=Iρ/Ipeak=I(Ω(ω))/Ipeak=f(Ω(ω)),ρ为预定的自定义虹膜焦距聚焦光学成像系统的成像像面接受光辐射的相对照度,如0.5或0.707,更高意味相对照度分布更均匀。
本质上LED照明光源辐射强度立体角产生在虹膜表面上受辐射照度Eiris,Eiris(ω,ψ)=OP/(Ω(ω)*R2)*cos3(ψ)=Ipeak/R2*cos3(ψ)。
当ω足够小时满足sin2(ω)=tan2(ω)。
如图2所示,虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near224。虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far225。虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的物方平面成像区域226。虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的物方平面成像区域227。LED照明光源辐射系统的左右侧LED照明光源230L/230R。在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar的视场角FOViris-far232L/232R。在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源的辐射强度立体角,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear的视场角FOViris-near233L/233R。在近端工作半径/距离Rnear/Znear时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的近端工作半径/距离Rnear/Znear234L/234R。在远端工作半径/距离Rfar/Zfar时LED照明光源辐射系统的左/右侧照明光源辐射强度方向角度,匹配虹膜变焦聚焦光学成像系统的远端工作半径/距离Rfar/Zfar235L/235R。LED照明光源辐射系统的左/右侧的液体透镜236L/236R。LED照明光源辐射系统的左/右侧2轴MEMS旋转反射镜237L/237R。
本发明可以实现在本质上对于恒定总光功率的LED照明光源辐射系统,通过动态改变LED照明光源辐射强度立体角分配的光辐射强度等量的改变虹膜表面受辐射照度,无论虹膜变焦聚焦光学成像系统在远端/近端工作半径[Rfar,Rnear]/距离[Zfar,Znear]及对应的视场角[FOViris-far,FOViris-near]如何变化,根据公式Eiris(ω,ψ)保持接近恒定,而且能完全匹配工作半径/距离及对应的虹膜光学变焦聚焦光学成像系统的视场角。
可以证明对于一个具有虹膜变焦聚焦光学成像系统的成像像面接受光辐射照度Eimage。
根据公式Eimage(ω,ψ)=t*1/8/(1+β)2*cos4(Φ)*μ*Eiris(ω,ψ)/FNO2
当ω足够小时满足cos4(Φ)=1,Φ为虹膜变焦聚焦光学成像系统的成像入射角,Φ=[0,ω],
μ为虹膜生物组织反射率光学常数系数,0.12-0.15,
t为为虹膜变焦聚焦光学成像系统的透过率常数系数。
Eimage是恒定的,即成像图像亮度Iimage是恒定的。
Iimage=QE*Tpulse*Eimage*ADC*G*S
QE为光子-电子量子转换效率单位e-/(mw*um2)/s,G为单位转换增益单位mv/e-,ADC为模拟电压/数字亮度转换单位LSB/mv,S为单位像素面积单位um2
目前传统CMOS SENSOR技术执行光子-电子量子转换的是PD硅基光电二极管其效率不理想,前沿的QF量子薄膜或OPF有机感光薄膜等技术,具有天然对红外光子高量子转换效率,global shutter全局快门的性质是理想的优选。
同时可以证明对于虹膜变焦聚焦光学成像系统的成像像面接受光辐射的相对照度ρ是恒定的,ρ=Eedge/Ecenter=Iρ/Ipeak,Eedge为成像像面边缘(视场边缘)的受辐射照度Eedge=Eimage(ω,ψ)*ρ,Ecenter为成像像面中心(视场中心)的受辐射照度,Ecenter=Eimage(ω,ψ)既成像图像亮度具有恒定的相对照度。
本实施例通过LED照明光源辐射系统通过液体透镜和2轴MEMS旋转反射镜组合控制实现,实现匹配对应的虹膜变焦聚焦光学成像系统的视场角范围[FOViris-far,FOViris-near],工作半径范围[Rfar,Rnear],或工作距离范围[Zfar,Znear]。
优选的本实施例的LED照明光源辐射强度立体角通过在LED照明光源光出射光路位置放置液体透镜控制屈光度即折射角度实现,本质上通过液体透镜控制出射光屈光角度改变照明光源辐射强度立体角响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角。正是如此设计才能实现LED照明光源辐射强度立体角响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间的匹配关系。
优选的本实施例的LED照明光源辐射强度方向角通过在LED照明光源的出射光路位置放置2轴MEMS旋转反射镜控制垂直/水平方向的旋转角度同步控制实现,本质上通过2轴MEMS旋转反射镜控制垂直/水平方向的旋转角度改变LED照明光源辐射强度方向角,使LED照明光源辐射强度方向角响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角。正是如此设计才能实现LED照明光源辐射强度方向角响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间的匹配关系。
特别说明一下,用于LED照明光源辐射强度方向角控制的2轴MEMS旋转反射镜的垂直/水平方向的旋转角度方法:
a3、基于相同的步骤a1和和a2获取3D深度成像单元的物方关键参考点坐标KPface(Xe,Xe,Ze)。
a32、建立3D深度成像单元的物方关键参考点坐标KPface(Xe,Xe,Ze)相对LED照明光源辐射系统的3D物理空间点Piris(X',Y',Z')坐标变换,
Piris(X',Y',Z')=(Xe-X'offset,Xe-Y'offset,Ze-Z'offset)
(X'offset,Y'offset,Z'offset)为3D深度成像单元相对LED照明光源辐射系统的3D物理位置坐标偏移。
a33、执行LED照明光源辐射强度方向角控制的2轴MEMS旋转反射镜单元调整垂直/水平方向的旋转角度同步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arcsin(X'/R')/2,
执行水平方向旋转轴的旋转角度θh=arcsin(Y'/R')/2;
R'=(X'2+Y'2+Z'2)1/2
或者,
执行方向轴旋转单元异步控制,包括:
执行垂直方向旋转轴的旋转角度θv=arctan(X'/Z')/2,
执行水平方向旋转轴的旋转角度θh=arcsin(Y'/R')/2;
等价的,
执行水平方向旋转轴的旋转角度θh=arctan(Y'/Z')/2
执行垂直方向旋转轴的旋转角度θv=arcsin(X'/R')/2。
特别说明一下,本实施例LED照明光源辐射系统通过液体透镜和2轴MEMS旋转反射镜组合控制实现,LED照明光源光路顺序,出射光路依次经过液体透镜控制屈光度,然后再经过2轴MEMS旋转反射镜单元调整垂直/水平方向的旋转角度同步控制实现。
本发明通过LED照明光源辐射系统和虹膜变焦聚焦光学成像系统被组合配置为具有响应于同步辐射强度方向角和辐射强度立体角的组合控制,实现LED照明光源辐射系统在不同3D物理空间点坐标响应于不同工作半径/距离对应的虹膜变焦聚焦光学成像系统的视场角之间对应匹配关系,在预定的工作视场和工作距离内满足恒定的成像图像亮度,恒定的成像图像相对照度,恒定的LED照明光源系统辐射光功率和恒定的眼睛虹膜受辐射照度。
为消除实际使用时使用者运动导致的运动模糊,归因于如此大的光学放大倍率,即使10cm/s以下的移动速度也能造成非常明显图像运动模糊干扰,导致影响影响识别性能。
本发明通过LED照明光源辐射系统和虹膜变焦聚焦光学成像系统被配置为同步脉冲外触发或同步脉冲内触发方式的全局像素曝光(积分)和照明辐射组合成像模式。
其中,同步脉冲曝光(积分)时间和同步脉冲照明辐射时间Tpulse<m/(PR*speed),speed为预定控制的运动速度如1m/s,m为预定控制的运动模糊图像像素尺度,m<10pxiels。
同步脉冲曝光(积分)频率和同步脉冲照明辐射频率Fpulse,Fpulse=[10,30]Hz,LED照明光源辐射系统产生同步脉冲照明辐射在虹膜表面的受辐射照度Tpulse*Fpulse*Eiris(ω)<10mw/cm2,以保证满足眼睛辐射生物安全。
更进一步,虹膜变焦聚焦光学成像系统在滤光片的结合下实现同步脉冲外触发或同步脉冲内触发方式的全局像素曝光(积分)和照明辐射组合成像模式可具有对外界不受控环境下对各种光干扰条件抗干扰性能。如高达10,000lux以上的户外太阳环境。
保护窗口223可采用全透射钢化光学玻璃,或更优选的采用反射700nm以下可见光,透射700-900nm红外光的滤光片,具有即能保护内部光学组件同时使用者无法观察到内部结构通过反射可见光提供使用者自然状态的使用视觉反馈效果,更进一步,过滤可见光可以提高虹膜变焦聚焦光学成像系统消除对外界非成像波长杂散光的干扰,进一步提高成像质量信噪比SNR。
本发明提供的一种远距离大视场虹膜光学成像的装置及方法,同时实现大范围时视场角和辐射照度恒定。
本发明并不受限于以下所公开的示范性实施例,作为本发明实施例的等价变换或简化,如等价的2轴方向轴旋转采用万向球作为方向轴旋转应该被等同理解,如简化2轴方向轴旋转为单轴方向轴旋转也应该被等同理解,其他如包括光学/机械/电子元件的功能替换等也应该被等同。
结合这里披露的本发明的说明和实践,本发明的其他实施例对于本领域技术人员都是易于想到和理解的。说明和实施例仅被认为是示例性的,本发明的真正范围和主旨均由权利要求所限定。

Claims (15)

1.用于远距离大视场虹膜光学成像装置的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统,包括辐射强度立体角和/或辐射强度方向角,响应于不同工作半径/距离对应的虹膜光学成像系统的视场角之间匹配关系和光学功率组合控制。
2.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的辐射强度方向角度,定义为:
ψ=arctan(D/R),
其中,ψ定义为在LED照明光源辐射系统的辐射强度峰值方向对应的中心线和虹膜光学成像系统的光轴间夹角,D为LED照明光源辐射系统的光学中心和虹膜光学成像系统光学中心的距离,R为虹膜光学成像系统的工作半径。
3.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的辐射强度立体角和不同工作半径/距离对应的虹膜光学成像系统的视场角之间匹配关系定义为:
Ω(ω)=4π*sin2(ω)单位:球面度sr,
其中:
ω=arctan((PXiris2+PYiris2)1/2/2*PSiris/((1+β)*EFLiris))
=arctan((PXiris2+PYiris2)1/2/2*PSiris/(β*R)),
ω为虹膜光学成像系统的半视场角,
PXiris为虹膜光学成像系统的X水平方向像素分辨率,
PYiris为虹膜光学成像系统的Y垂直方向像素分辨率,
EFLiris为虹膜光学成像系统的焦距,
β=PR*PSiris,PR为虹膜物理直径像方分辨率,
PSiris为虹膜光学成像系统的图像成像传感器的像素单位分辨率,
R为为虹膜光学成像系统的工作半径。
4.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统定义恒定的总光学功率OP,单位mw。
5.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的辐射强度峰值Ipeak定义为:
OP=Ipeak*Ω(ω),单位mw/sr。
6.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的辐射强度定义为:
I(Ω)=Ipeak*f(Ω),
其中:
I(Ω)为LED照明光源辐射系统的辐射强度,单位mw/sr;
Ω为LED照明光源辐射系统的立体角,单位sr球面度;
f(Ω)为LED照明光源辐射系统的辐射强度归一化分布函数。
7.根据权利要求6所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统在辐射强度立体角Ω(ω)时,LED照明光源辐射系统的辐射强度定义:
I(Ω(ω))=Ipeak*f(Ω(ω))
8.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述虹膜光学成像系统的成像像面接受光辐射的相对照度定义为:
ρ=I(Ω(ω))/Ipeak=f(Ω(ω))。
9.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的辐射强度立体角产生在虹膜表面上受辐射照度Eiris定义为:
Eiris(ω,ψ)=OP/(Ω(ω)*R2)*cos3(ψ)=Ipeak/R2*cos3(ψ)。
10.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的光学功率组合控制,通过不同辐射强度立体角的LED照明光源辐射系统的光学功率权重值分配,实现响应于任意给定不同工作半径/距离对应的虹膜光学成像系统的视场角之间匹配关系的辐射强度立体角和恒定的总光学功率。
11.根据权利要求10所述的LED照明光源辐射系统,其特征在于,所述不同辐射强度立体角的LED照明光源辐射系统的光学功率权重值分配定义为:
∑OPi=oP
OPi=Wi*OP,∑Wi=1
其中:
OPi为不同辐射强度立体角的LED照明光源辐射系统的光学功率,Wi为对应OPi的权重值。
i为不同辐射强度立体角的LED照明光源辐射系统的数量。
OP为LED照明光源辐射系统的恒定总光学功率。
12.根据权利要求10所述的LED照明光源辐射系统,其特征在于,所述不同辐射强度立体角的LED照明光源辐射系统的光学功率组合控制后,在虹膜表面上产生恒定的总受辐射照度Eiris。
∑Ei=Eiris
Ei=Wi*Eiris,∑Wi=1
其中:
Ei为不同辐射强度立体角的LED照明光源辐射系统的光学功率OPi在虹膜表面上产生的受辐射照度。
i为具有不同辐射强度立体角的LED照明光源辐射系统的数量。
13.根据权利要求10所述的LED照明光源辐射系统,其特征在于,所述不同辐射强度立体角的LED照明光源辐射系统的光学功率定义对应的辐射强度归一化分布函数的边界条件。
14.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的辐射强度立体角通过LED照明光源辐射系统的出射光路位置放置透镜控制屈光度实现。
15.根据权利要求1所述的LED照明光源辐射系统,其特征在于,所述LED照明光源辐射系统的辐射强度方向角通过LED照明光源辐射系统的出射光路位置放置旋转反射镜控制旋转角度实现。
CN202111533931.4A 2019-11-21 2020-04-18 用于远距离大视场虹膜光学成像装置的照明光源辐射系统 Active CN114500976B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111533931.4A CN114500976B (zh) 2019-11-21 2020-04-18 用于远距离大视场虹膜光学成像装置的照明光源辐射系统

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN2019111467689 2019-11-21
CN201911146768 2019-11-21
CN202111533931.4A CN114500976B (zh) 2019-11-21 2020-04-18 用于远距离大视场虹膜光学成像装置的照明光源辐射系统
CN202010308691.7A CN111447430B (zh) 2019-11-21 2020-04-18 一种远距离大视场虹膜光学成像的装置及方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202010308691.7A Division CN111447430B (zh) 2019-11-21 2020-04-18 一种远距离大视场虹膜光学成像的装置及方法

Publications (2)

Publication Number Publication Date
CN114500976A true CN114500976A (zh) 2022-05-13
CN114500976B CN114500976B (zh) 2023-08-08

Family

ID=71652073

Family Applications (6)

Application Number Title Priority Date Filing Date
CN202010291365.XA Active CN111556306B (zh) 2019-11-21 2020-04-14 一种远距离大视场虹膜光学成像的装置及方法
CN202111532985.9A Pending CN114442312A (zh) 2019-11-21 2020-04-14 一种用于远距离大视场虹膜光学成像装置的虹膜变焦聚焦光学成像系统
CN202111533928.2A Active CN114302126B (zh) 2019-11-21 2020-04-18 用于远距离大视场虹膜光学成像装置的虹膜光学跟踪系统
CN202010308691.7A Active CN111447430B (zh) 2019-11-21 2020-04-18 一种远距离大视场虹膜光学成像的装置及方法
CN202111533931.4A Active CN114500976B (zh) 2019-11-21 2020-04-18 用于远距离大视场虹膜光学成像装置的照明光源辐射系统
CN202111532984.4A Active CN114430481B (zh) 2019-11-21 2020-04-18 一种用于虹膜光学成像装置的虹膜变焦聚焦光学成像系统

Family Applications Before (4)

Application Number Title Priority Date Filing Date
CN202010291365.XA Active CN111556306B (zh) 2019-11-21 2020-04-14 一种远距离大视场虹膜光学成像的装置及方法
CN202111532985.9A Pending CN114442312A (zh) 2019-11-21 2020-04-14 一种用于远距离大视场虹膜光学成像装置的虹膜变焦聚焦光学成像系统
CN202111533928.2A Active CN114302126B (zh) 2019-11-21 2020-04-18 用于远距离大视场虹膜光学成像装置的虹膜光学跟踪系统
CN202010308691.7A Active CN111447430B (zh) 2019-11-21 2020-04-18 一种远距离大视场虹膜光学成像的装置及方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202111532984.4A Active CN114430481B (zh) 2019-11-21 2020-04-18 一种用于虹膜光学成像装置的虹膜变焦聚焦光学成像系统

Country Status (1)

Country Link
CN (6) CN111556306B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111556306B (zh) * 2019-11-21 2022-03-01 苏州思源科安信息技术有限公司 一种远距离大视场虹膜光学成像的装置及方法
CN115641635B (zh) * 2022-11-08 2023-04-28 北京万里红科技有限公司 确定虹膜图像采集模块对焦参数的方法及虹膜对焦设备
CN115880348B (zh) * 2023-02-27 2023-10-24 荣耀终端有限公司 一种人脸深度的确定方法、电子设备及存储介质

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6714665B1 (en) * 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
CN1892676A (zh) * 2005-06-03 2007-01-10 沈洪泉 面部/虹膜组合光学成像的装置及方法
KR20090130696A (ko) * 2008-06-16 2009-12-24 연세대학교 산학협력단 거울의 패닝과 틸팅을 이용한 원거리 홍채 영상 획득시스템
CN101770573A (zh) * 2010-01-14 2010-07-07 沈洪泉 用于虹膜识别的自动聚焦虹膜图像成像装置及其控制方法
US20120274796A1 (en) * 2011-04-29 2012-11-01 Samsung Electronics Co., Ltd. Digital photographing apparatus, method of controlling the same, and computer-readable storage medium
CN102831392A (zh) * 2012-07-09 2012-12-19 哈尔滨工业大学 一种远距离虹膜跟踪与采集装置及其方法
CN102855471A (zh) * 2012-08-01 2013-01-02 中国科学院自动化研究所 远距离虹膜智能成像装置及方法
CN103945136A (zh) * 2014-04-04 2014-07-23 沈洪泉 高用户使用体验度的虹膜图像光电成像系统
US20150062324A1 (en) * 2012-04-13 2015-03-05 Kyung Yong Choi Iris recognition camera system for mobile device
CN106022299A (zh) * 2016-06-01 2016-10-12 北京天诚盛业科技有限公司 一种具有补光功能的虹膜识别装置、识别方法和补光方法
US20180173941A1 (en) * 2016-12-21 2018-06-21 Suprema Inc. Light irradiation method and light irradiation apparatus
CN108446648A (zh) * 2018-03-26 2018-08-24 北京上古视觉科技有限公司 一种虹膜采集系统及虹膜识别系统
CN207965914U (zh) * 2018-03-26 2018-10-12 北京上古视觉科技有限公司 一种虹膜采集系统及虹膜识别系统
CN109700470A (zh) * 2014-10-15 2019-05-03 苏州思源科安信息技术有限公司 一种基于rgb-ir成像的虹膜防伪造物活体检测方法
CN110443160A (zh) * 2019-07-18 2019-11-12 北京中科虹霸科技有限公司 虹膜采集方法和装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5727236A (en) * 1994-06-30 1998-03-10 Frazier; James A. Wide angle, deep field, close focusing optical system
KR100320465B1 (ko) * 1999-01-11 2002-01-16 구자홍 홍채 인식 시스템
CN100349542C (zh) * 2004-05-29 2007-11-21 倪蔚民 实时自动无侵害的虹膜光学成像装置
KR100702962B1 (ko) * 2006-02-14 2007-04-03 삼성테크윈 주식회사 초박형 촬상 장치에 적합한 줌 렌즈
CA2647147C (en) * 2006-04-11 2016-10-04 Neuroptix Corporation Ocular imaging
WO2009036103A1 (en) * 2007-09-10 2009-03-19 Retica Systems, Inc. Long distance multimodal biometric system and method
CN101499129B (zh) * 2008-01-30 2010-12-22 中国科学院自动化研究所 远距离虹膜识别系统及方法
CN101520838A (zh) * 2008-02-27 2009-09-02 中国科学院自动化研究所 自动跟踪和自动变焦的虹膜图像获取方法
US8243133B1 (en) * 2008-06-28 2012-08-14 Aoptix Technologies, Inc. Scale-invariant, resolution-invariant iris imaging using reflection from the eye
CN201838010U (zh) * 2010-05-26 2011-05-18 中国科学院自动化研究所 远距离虹膜和人脸一体化图像获取与识别设备
KR101795599B1 (ko) * 2011-06-14 2017-11-08 삼성전자주식회사 디지털 촬영 장치 및 그 제어방법
US8879801B2 (en) * 2011-10-03 2014-11-04 Qualcomm Incorporated Image-based head position tracking method and system
CN202632316U (zh) * 2012-05-14 2012-12-26 第三眼(天津)生物识别科技有限公司 远距离非侵入式虹膜图像获取系统
US9911036B2 (en) * 2012-11-14 2018-03-06 Tascent, Inc. Focusing method for optically capturing an iris image
US10716469B2 (en) * 2013-01-25 2020-07-21 Wesley W. O. Krueger Ocular-performance-based head impact measurement applied to rotationally-centered impact mitigation systems and methods
JP6324119B2 (ja) * 2014-03-04 2018-05-16 国立大学法人静岡大学 回転角度算出方法、注視点検出方法、情報入力方法、回転角度算出装置、注視点検出装置、情報入力装置、回転角度算出プログラム、注視点検出プログラム及び情報入力プログラム
KR101635602B1 (ko) * 2015-09-15 2016-07-05 주식회사 이지시스 홍채 인식 방법 및 장치
CN105279490A (zh) * 2015-10-21 2016-01-27 北京无线电计量测试研究所 一种人机交互式虹膜图像自动采集装置
CN206574092U (zh) * 2017-03-16 2017-10-20 慧眼识真(北京)电子科技有限公司 变焦虹膜识别装置
CN109376729B (zh) * 2018-12-28 2022-02-22 武汉虹识技术有限公司 虹膜图像采集方法及装置
CN109685033A (zh) * 2018-12-29 2019-04-26 深圳三人行在线科技有限公司 虹膜识别设备和方法
CN111556306B (zh) * 2019-11-21 2022-03-01 苏州思源科安信息技术有限公司 一种远距离大视场虹膜光学成像的装置及方法

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6714665B1 (en) * 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
CN1892676A (zh) * 2005-06-03 2007-01-10 沈洪泉 面部/虹膜组合光学成像的装置及方法
KR20090130696A (ko) * 2008-06-16 2009-12-24 연세대학교 산학협력단 거울의 패닝과 틸팅을 이용한 원거리 홍채 영상 획득시스템
CN101770573A (zh) * 2010-01-14 2010-07-07 沈洪泉 用于虹膜识别的自动聚焦虹膜图像成像装置及其控制方法
US20120274796A1 (en) * 2011-04-29 2012-11-01 Samsung Electronics Co., Ltd. Digital photographing apparatus, method of controlling the same, and computer-readable storage medium
US20150062324A1 (en) * 2012-04-13 2015-03-05 Kyung Yong Choi Iris recognition camera system for mobile device
CN102831392A (zh) * 2012-07-09 2012-12-19 哈尔滨工业大学 一种远距离虹膜跟踪与采集装置及其方法
CN102855471A (zh) * 2012-08-01 2013-01-02 中国科学院自动化研究所 远距离虹膜智能成像装置及方法
CN103945136A (zh) * 2014-04-04 2014-07-23 沈洪泉 高用户使用体验度的虹膜图像光电成像系统
CN109700470A (zh) * 2014-10-15 2019-05-03 苏州思源科安信息技术有限公司 一种基于rgb-ir成像的虹膜防伪造物活体检测方法
CN106022299A (zh) * 2016-06-01 2016-10-12 北京天诚盛业科技有限公司 一种具有补光功能的虹膜识别装置、识别方法和补光方法
US20180173941A1 (en) * 2016-12-21 2018-06-21 Suprema Inc. Light irradiation method and light irradiation apparatus
CN108446648A (zh) * 2018-03-26 2018-08-24 北京上古视觉科技有限公司 一种虹膜采集系统及虹膜识别系统
CN207965914U (zh) * 2018-03-26 2018-10-12 北京上古视觉科技有限公司 一种虹膜采集系统及虹膜识别系统
CN110443160A (zh) * 2019-07-18 2019-11-12 北京中科虹霸科技有限公司 虹膜采集方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
苑玮琦;刘畅;: "人脸人耳图像采集装置设计", 微计算机信息, no. 22 *

Also Published As

Publication number Publication date
CN114442312A (zh) 2022-05-06
CN114430481B (zh) 2023-07-11
CN114302126B (zh) 2023-10-27
CN111447430A (zh) 2020-07-24
CN114302126A (zh) 2022-04-08
CN111556306A (zh) 2020-08-18
CN114430481A (zh) 2022-05-03
CN111556306B (zh) 2022-03-01
CN114500976B (zh) 2023-08-08
CN111447430B (zh) 2022-08-12

Similar Documents

Publication Publication Date Title
CN111447430B (zh) 一种远距离大视场虹膜光学成像的装置及方法
CN105376469B (zh) 一种用于生物特征识别移动终端的驱动自动聚焦方法
CN106662755B (zh) 特别借助于光学反馈为设备的透镜调焦距的光学设备
US10213105B2 (en) Eye-tracking system and method therefor
US8132912B1 (en) Iris imaging system using circular deformable mirror mounted by its circumference
WO2005026782A3 (en) Inspection system using small catadioptric objective
CN106471801B (zh) 夜视装置
CN103688218B (zh) 获取生物统计特征的设备和方法
CN111091067A (zh) 一种远距离大视场虹膜光学成像的装置及方法
US20110298912A1 (en) Wavefront sensing for biometric imaging
WO2021098135A1 (zh) 一种远距离大视场虹膜光学成像的装置及方法
CN212410025U (zh) 一种模拟视觉感知的激光显示散斑测量装置
WO2021102619A1 (zh) 一种远距离大视场虹膜光学成像的装置及方法
CN111079552A (zh) 一种远距离大视场虹膜光学成像的装置及方法
WO2021102620A1 (zh) 一种远距离大视场虹膜光学成像的装置及方法
KR200367917Y1 (ko) 광학적 안정성을 갖는 홍채 인식용 카메라 모듈
CN107688236B (zh) 折轴式天文望远镜光瞳和光谱仪狭缝监控方法及其设备
CN110389429A (zh) 用于机器视觉高光学扩展量模块化变焦镜头
CN209783873U (zh) Tof相机杂散光检测装置
CN112882199A (zh) 一种高性能机载头戴微光夜视光学系统
EP1530206A3 (en) Optical head device having deformable reflecting mirror
CN113903079A (zh) 一种基于集成化微小型头戴式系统的视线估计方法
CN103345049A (zh) 一种可控发光面大小的变焦激光照明器
US20230252671A1 (en) Gaze Tracking
CN115236830B (zh) 光学镜片系统及飞时测距感测模组

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant