CN110826431B - 基于蒙特卡洛的可见光静脉显像方法 - Google Patents

基于蒙特卡洛的可见光静脉显像方法 Download PDF

Info

Publication number
CN110826431B
CN110826431B CN201911009741.5A CN201911009741A CN110826431B CN 110826431 B CN110826431 B CN 110826431B CN 201911009741 A CN201911009741 A CN 201911009741A CN 110826431 B CN110826431 B CN 110826431B
Authority
CN
China
Prior art keywords
layer
photons
skin
photon
tissue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911009741.5A
Other languages
English (en)
Other versions
CN110826431A (zh
Inventor
唐超颖
韩立元
王彪
贾茹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CN201911009741.5A priority Critical patent/CN110826431B/zh
Publication of CN110826431A publication Critical patent/CN110826431A/zh
Application granted granted Critical
Publication of CN110826431B publication Critical patent/CN110826431B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4887Locating particular structures in or on the body
    • A61B5/489Blood vessels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/044Recurrent networks, e.g. Hopfield networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/15Biometric patterns based on physiological signals, e.g. heartbeat, blood flow

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Pathology (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Vascular Medicine (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)

Abstract

本发明公开了种基于蒙特卡洛的可见光静脉显像方法,属于信息感知与识别技术领域,本发明的方法为1)、建立皮肤模型,对皮肤进行光学模型分析;2)、基于Monte Carlo方法进行皮肤成像模拟;3)、皮肤组织成像,最终实现静脉的显像;本发明利用Monte Carlo方法模拟皮肤图像颜色值,再以该颜色值为输入,皮肤参数值为输出,训练神经网络。对于给定的皮肤图像,从获取的皮肤参数值分布图中即可实现静脉显像,解决了现有技术中存在的问题,在针对数码成像的可见光图片进行静脉显像,为后续的识别奠定重要基础。

Description

基于蒙特卡洛的可见光静脉显像方法
技术领域
本发明属于一种信息感知与识别技术领域,具体是一种基于蒙特卡洛的可见光静脉显像方法。
背景技术
近年来,身份识别与个人利益、社会稳定和国家安全息息相关。身份识别技术有基于特定物品、特定知识和生物特征三个类别。前两类如身份证、IC卡、钥匙、密码、条纹码等,往往会存在复制、遗忘、丢失、盗用等隐患,这将会给个人、社会甚至国家造成巨大的损失。与前两类身份识别技术相比,第三类提取人的生物特征信息,主动对个人身份进行认证,早年运用于司法鉴定。指纹和人脸识别技术日趋成熟,但是在司法领域往往很难获取罪犯的脸部及指纹信息,这给识别和鉴定带来了极大困难。
静脉识别,作为一种新型的生物特征识别技术,提取纹络中的特征信息来实现身份识别,识别率高,安全性高,使用便利,因而具备不可比拟的优越性。但是,传统的静脉识别仪器依赖近红外成像设备,维护困难且研究成本很高。目前已有的一些可见光图像静脉显像方法存在着模型简单、鲁棒性差的问题。
发明内容
本发明针对现有技术中存在的鲁棒性差等的问题,公开了一种基于蒙特卡洛的可见光静脉显像方法,利用MC方法模拟皮肤图像颜色值,再以该颜色值为输入,皮肤参数值为输出,训练神经网络。对于给定的皮肤图像,从获取的皮肤参数值分布图中即可实现静脉显像,解决了现有技术中存在的问题。
本发明是这样实现的:
一种基于蒙特卡洛的可见光静脉显像方法,其方法步骤如下:
步骤一、建立皮肤模型,对皮肤进行光学模型分析;生物特征具有不易遗忘、防伪性能好、不易被盗、随身“携带”和随时随地可用等优点,因此利用人自身的生理和行为特征进行身份识别的生物特征识别技术可以克服传统认证方法的缺陷,本发明建立七层皮肤模型进行分析。
步骤二、基于Monte Carlo方法进行皮肤成像模拟;
步骤三、皮肤组织成像,最终实现静脉的显像。
进一步,所述的步骤一中建立角质层、生发层、真皮层、皮下脂肪层的七层皮肤模型,所述的真皮层依次包括真皮乳头层、上层血管网真皮层、网状真皮层、深部血管网真皮层,对七层皮肤进行光学模型分析;在利用MonteCarlo方法进行皮肤组织模拟时,需要输入五个光学特性参数值:吸收系数μα(cm-1)、散射系数μs(cm-1)、各向异性因子g、折射率n和皮肤各层厚度d(cm)。
进一步,所述的步骤一具体如下:
1.1、分析光在皮肤组织中的吸收作用,七层皮肤的吸收系数如下:
角质层:角质层中对光的吸收主要是水和组织的固有吸收,公式如下:
Figure BDA0002243853000000021
其中,
Figure BDA0002243853000000022
是除了水和血液之外的其它组织的固有吸收系数,
Figure BDA0002243853000000023
是水的体积分数,
Figure BDA0002243853000000024
是水的吸收系数;
生发层:生发层中的吸收体主要为黑色素,其吸收系数表达式为:
Figure BDA0002243853000000025
其中,
Figure BDA0002243853000000026
是黑色素的吸收系数,Cmel是黑色素的体积分数,其取值范围是1.3%~43%;
真皮层:真皮层包含真皮乳头层、上层血管网真皮层、网状真皮层、深部血管网真皮层四层,根据血氧饱和度S和血液中血红蛋白总的体积分数γ,该层的吸收系数可由下式表达:
Figure BDA0002243853000000027
其中,
Figure BDA0002243853000000028
是水的体积分数;Cblood是血液的体积分数;γ=FHbFRBCHt,FHb是红细胞中血红蛋白的体积分数,FRBC是红细胞在所有血细胞中的体积分数,Ht是红细胞比容;
Figure BDA0002243853000000029
是脱氧血红蛋白的吸收系数,
Figure BDA00022438530000000210
是有氧血红蛋白的吸收系数,表达式如下:
Figure BDA0002243853000000031
其中chb是血液中血红蛋白的浓度,值为150g/L,mhb是血红蛋白的分子量,值为66500g/mole,εohb(λ)和εdhb(λ)分别为有氧血红蛋白和脱氧血红蛋白的消光系数;
皮下脂肪层:皮下脂肪层的吸收系数可从现有技术中已有数据中获得。分析七层皮肤的光的散射系数μs,光的散射系数μs是指每单位长度光被散射的概率,单位是cm-1,七层皮肤的各层散射系数如下:
角质层的散射系数:
Figure BDA0002243853000000032
其中,λ是波长;
生发层的散射系数:
Figure BDA0002243853000000033
真皮层的散射系数:
Figure BDA0002243853000000034
皮下脂肪层的散射系数:
Figure BDA0002243853000000035
1.2、分析七层皮肤的折射率:
角质层的折射率:
nstr=1.55   (13)
生发层的折射率:
nliv=1.684-1.8723×104λ-2+1.0964×1010λ-4-8.6484×1014λ-6   (14)
真皮层的折射率:
ndermis=1.309-4.346×102λ-2+1.6065×109λ-4-1.2811×1014λ-6   (15)
皮下脂肪层的直射率:
nfat=1.44   (16)。
进一步,分析皮肤各层厚度的参数影响,皮肤各层的厚度变化成正相关,即同时变厚,或者同时变薄;以上层血管网真皮层的厚度(cm)为基准,构造线性映射函数如下:
Figure BDA0002243853000000041
其中,dpap是真皮乳头层的厚度;dupp是上层血管网真皮层的厚度;dret是网状真皮层的厚度;ddee是深部血管网真皮层的厚度;dfat是皮下脂肪层的厚度。
进一步,所述的步骤二中的MC方法模拟时,发射一个光子,当光子走完这一随机步长时,与生物组织发生吸收、散射作用,导致自身的权重衰减、传播方向改变;行走到组织表面时,从上表面逃逸变成漫反射光,从下表面逃逸变成透射光;当该光子自身的权值小于给定的阈值时,光子被组织吸收;最后,对所有光子重复上述过程,实现了整个光束的MC模拟。
进一步,所述的步骤二具体如下:
2.1,发射光子:
入射光束垂直组织平面xoy发射,方向沿着z轴方向,初始位置为原点(0,0,0),则方向余弦的初始值为(0,0,1);令光子的初始权值为1,经过反射作用,光子的权值减小至M=1-Rsp;其中,Rsp是反射系数,Rsp=(n0-n1)2/(n0+n1)2,n0是组织外部介质的折射率,n1是组织表面的折射率;
2.2,光子的步长:
设区间(a,b)上随机变量η的归一化概率密度函数为p(η):
Figure BDA0002243853000000051
设随机变量ξ在区间(0,1)上服从均匀分布,并且η和ξ之间一一映射,即η=f(ξ);η=f(ξ)是增函数时,经过推导一定存在ξ1∈(0,1),满足下式:
Figure BDA0002243853000000052
η=f(ξ)是减函数时,经过推导也一定存在ξ1∈(0,1),满足下式:
Figure BDA0002243853000000053
对变量η进行抽样,可以得到随机变量η和随机变量ξ之间的关系式η=f(ξ);变量ξ通过随机数产生器获取;
运用式(20)对随机变量进行抽样:光子的步长s是随机的,s的计算基于其概率分布的采样,依据互相作用系数μt的定义(μt=μαs),区间(s',s'+ds')中每单位长度的光子-组织互相作用概率为:
Figure BDA0002243853000000054
或者写成下式:
d(ln(P{s≥s'}))=-μtds'   (22)
将式(22)在(0,s1)范围内对s'积分,得到指数分布,其中P(s≥0)=1:
Figure BDA0002243853000000055
经过重新排列得到步长s的累积分布函数:
Figure BDA0002243853000000056
则步长s的概率密度函数为:
Figure BDA0002243853000000057
将式(25)代入到式(19)得:
s1=-ln(1-ξ)/μt   (26)
ξ的对称性为0.5,用ξ替代1-ξ得到光子的步长:
s1=-ln(ξ)/μt   (27)
2.3,光子的传输:
光子当前位置用坐标(x,y,z)表示,方向余弦(ux,uy,uz)决定其传输方向;光子到下一个位置时,对坐标进行更新为(x',y',z'):
x'=x+s·ux
y'=y+s·uy   (28)
z'=z+s·uz
2.4,光子的吸收:
光子在生物组织中传输时会与内部粒子发生吸收作用,导致光子的权值衰减,衰减大小为Δw=w·μαt,则当前光子的权值变为:
wleft=w-Δw=w-w·μαt=w·μst   (29)
设发射光子的初始权值为w0,光子与组织内部粒子发生n次吸收作用后,光子的权值变为wn
Figure BDA0002243853000000061
2.5、光子的散射:
光子在发生散射时,其传播方向会跟着改变,进而方向余弦一同改变;θ和ψ一旦确定,光子的方向余弦更新为:
Figure BDA0002243853000000062
如果光子的方向靠近z轴,|uz|>0.99999,那么式(31)修改为下式:
u′x=sinθcosψ
u′y=sinθsinψ   (32)
u′z=sign(uz)cosθ
用符号函数sign(·)来判断光子z轴的方向。
2.6、光子在边界上的反射和透射:
组织边界分为上、下表面,当光子抵达组织边界时,会产生逃逸出组织和反射回组织两种情况,设定光子的步长s和约化步长s1,约化步长s1指光子顺着当前方向与组织边界的间隔,s1由下式表示:
Figure BDA0002243853000000071
在直角坐标系中,z0和z1分别表示组织上、下表面的z轴坐标;若光子移动的步长s<s1,光子处于组织内部;若光子移动的步长s≥s1,光子将会达到边界,产生全反射或折射;到达组织边界时入射角为αi=arccos(|uz|),若产生折射,记折射角为αt,由折射定律可得:
ni sinαi=nt sinαt   (34)
若产生全反射,则反射率R(αi)可由菲涅耳公式得:
Figure BDA0002243853000000072
若随机数ξ>R(αi),光子产生折射,逃逸出组织,上表面逃逸变成漫反射光,下表面逃逸变成透射光;反之若ξ≤R(αi),光子产生全反射,因此方向余弦要更新为(ux,uy,uz),步长更新为s-s1;若光子步长不大,在行走完随机步长时光子便会与组织产生吸收和散射作用;
2.7、组织交界处的反射和透射:
假设光子在第i层中传输,光学特性参数为第i层的吸收系数μαi、第i层的散射系数μsi和第i层的折射率ni,步长s的方向余弦为(ux,uy,uz);若s>s1,光子会行走到第i层与第i-1层或第j=i+1层,光学特性参数为第j层的吸收系数μαj、第j层的散射系数μsj和第j层的折射率nj的交界处,此时由式(22)判断光子的情况;若产生全反射,光子继续在第i层传输,步长更新为s-s1
方向余弦更新为(ux,uy,uz);若产生折射,光子传输到第j=i+1层。
2.8:光子的终止:
光子的终止情况有:1)光子的权值衰减为0;2)光子逃逸;对于光子的权值衰减为0,设置一个阈值wε,当光子的权值w≤wε时,光子达到终止条件。
进一步,所述的步骤2.8中对于光子的终止的光子的权值衰减为0的情况时,还可以给定参数M,产生一个服从均匀分布的随机数ξ;当ξ>1/M,光子的权值变为0,终止;当ξ≤1/M,光之权值变为Mw,继续传输。
进一步,所述的步骤三具体为:
3.1、相机拍摄的可见光范围内的图像,其RGB颜色值由光源、皮肤漫反射率和相机光谱响应函数共同决定;即:
Figure BDA0002243853000000081
其中,R,G,B表示图像的颜色值,I(λ)是光源,λ是波长,取值范围是400~800nm;R(λ)是皮肤的漫反射率,S(λ)是相机的光谱响应函数,可由相机模型得到;将I(λ)、R(λ)、S(λ)的数据导入,生成RGB图像,得到颜色值数据;
3.2、使用一个三层前馈神经网络模型来训练皮肤图像RGB值到皮肤生理参数Cmel,Cblood,Ddermis之间的映射关系;输入层有3个参数,以MC模拟得到的RGB为输入;以生理参数Cmel,Cblood,Ddermis为输出;隐含层有5个神经元;
3.3、隐含层和输出层使用的激活函数分别为对称型s函数和线性函数,利用BP算法进行训练;对于一张待测的皮肤图像,输入其RGB值,便可从输出的映射图像中实现静脉的显像。
本发明与现有技术相比的有益效果在于:
1、本发明利用静脉识别作为一种新型的生物特征识别技术,提取纹络中的特征信息来实现身份识别,识别率高,安全性高,使用便利,因而具备不可比拟的优越性;由于本发明静脉位于皮肤以下,因此静脉显像是识别中极为关键的一步;传统的静脉识别必须依赖近红外成像设备,成本代价高且使用不便;相对于超声波和红外设备,数码成像技术已经普遍地应用于日常生活当中,目前为大众广泛使用的智能手机都具有数码相机的功能;本发明旨在针对数码成像的可见光图片进行静脉显像,为后续的识别奠定重要基础;
2、本发明采用的蒙特卡洛(Monte Carlo,MC)方法能够有效处理光在生物组织中的传输问题,神经网络亦是近年来的研究热点,将两者结合应用于皮肤成像的模拟与静脉显像,具有极高的研究价;本发明的MC方法可以模拟出不同皮肤参数、不同光照条件和相机模型下的皮肤图像颜色数值,从而获得大量准确有效的训练数据,神经网络具备自主学习特征的能力,其中卷积神经网络经常用来对二维图像数据进行特征提取,在图像处理过程中可以保留像素间的空间位置关系;本发明利用MC方法模拟皮肤图像颜色值,再以该颜色值为输入,皮肤参数值为输出,训练神经网络;
3、本发明对于给定的皮肤图像,从获取的皮肤参数值分布图中即可实现静脉显像,该发明成果对司法、医疗领域具有重要的理论价值和现实意义。
附图说明
图1为本发明建立的七层皮肤模型示意图;
图2为本发明实施例中光子的步长s和约化步长s1的示意图;
图3为本发明实施例中组织交界处的反射与透射的示意图;
图4为本发明MC方法模拟光子在皮肤中传输的流程图;
图5为本发明实施例中静脉显像结果图;
图6为本发明实施例中静脉显像及其提取结果对比图;
图7为本发明实施例中JAI同步相机拍摄图像的显像结果图;
图8为本发明实施例中不同相机不同身体部位的显像效果。
具体实施方式
为使本发明的目的、技术方案及效果更加清楚,明确,以下列举实例对本发明进一步详细说明;应当指出此处所描述的具体实施仅用以解释本发明,并不用于限定本发明。
步骤一、皮肤光学模型分析:
皮肤是一种非常复杂的结构,在所记载的文献中,对皮肤的研究多为三层或者五层,本发明的研究将建立七层皮肤模型,如图1所示。七层皮肤模型包括:表皮层(角质层、生发层)、真皮层(真皮乳头层、上层血管网真皮、网状真皮层、深部血管网真皮)、皮下脂肪层。
在利用MC方法进行皮肤组织模拟时,需要输入五个光学特性参数值:吸收系数μα(cm-1)、散射系数μs(cm-1)、各向异性因子g、折射率n和皮肤各层厚度d(cm)。
光在皮肤组织中的吸收作用主要由血红蛋白、黑色素等发色团引起。七层皮肤的吸收系数如下:
1)角质层:角质层中对光的吸收主要是水和组织的固有吸收,公式如下[19]
Figure BDA0002243853000000101
其中,
Figure BDA0002243853000000102
是除了水和血液之外的其它组织的固有吸收系数,
Figure BDA0002243853000000103
是水的体积分数,
Figure BDA0002243853000000104
是水的吸收系数。
2)生发层:生发层中的吸收体主要为黑色素,其吸收系数表达式为:
Figure BDA0002243853000000105
其中,
Figure BDA0002243853000000106
是黑色素的吸收系数,Cmel是黑色素的体积分数,其取值范围是1.3%~43%。
3)真皮层:真皮层包含四层:真皮乳头层、上层血管网真皮、网状真皮层、深部血管网真皮。根据血氧饱和度S和血液中血红蛋白总的体积分数γ,该层的吸收系数可由下式表达:
Figure BDA0002243853000000107
其中,
Figure BDA0002243853000000111
是水的体积分数;Cblood是血液的体积分数;γ=FHbFRBCHt,FHb是红细胞中血红蛋白的体积分数,FRBC是红细胞在所有血细胞中的体积分数,Ht是红细胞比容。
Figure BDA0002243853000000112
是脱氧血红蛋白的吸收系数,
Figure BDA0002243853000000113
是有氧血红蛋白的吸收系数,表达式如下:
Figure BDA0002243853000000114
其中chb是血液中血红蛋白的浓度,值为150g/L,mhb是血红蛋白的分子量,值为66500g/mole,εohb(λ)和εdhb(λ)分别为有氧血红蛋白和脱氧血红蛋白的消光系数。
4)皮下脂肪层:皮下脂肪层的吸收系数如下:
光的散射系数μs是指每单位长度光被散射的概率,单位是cm-1。在本发明中,七层皮肤的各层散射系数如下:
1)角质层的散射系数:
Figure BDA0002243853000000115
其中,λ是波长。
2)生发层的散射系数:
Figure BDA0002243853000000116
3)真皮层的散射系数:
Figure BDA0002243853000000117
4)皮下脂肪层的散射系数:
Figure BDA0002243853000000118
在可见光和近红外光光谱范围内,各向异性因子g的取值范围是0.8~0.95。在本发明中,七层皮肤的各层散射系数如下:
1)角质层的g:
gstr=0.198+0.304×[(1-exp(-(λ-507.4)/2404)]   (9)
2)生发层的g:
gliv=0.754+0.546×[(1-exp(-(λ-500)/1806)]   (10)
3)真皮层的g:
gdermis=0.715+0.00038×[(1-exp(-(λ-542)/1129)]   (11)
4)皮下脂肪层的g:
gfat=0.75   (12)
光子在组织的边界或者层与层交界处,组织的折射率对光路的测量有着极大的影响。因此,各层皮肤组织的折射率有十分重要的地位:
1)角质层的折射率:
nstr=1.55   (13)
2)生发层的折射率:
nliv=1.684-1.8723×104λ-2+1.0964×1010λ-4-8.6484×1014λ-6   (14)
3)真皮层的折射率:
ndermis=1.309-4.346×102λ-2+1.6065×109λ-4-1.2811×1014λ-6   (15)
4)皮下脂肪层的直射率:
nfat=1.44   (16)
皮肤各层的厚度直接影响着光的漫反射率和透射率的计算,因此皮肤厚度是MC模拟方法中的一个重要的参数。角质层主要由角质细胞构成,厚度约为20μm;生发层中主要是生发细胞,厚度约为80~100μm;真皮层有四层:真皮乳头层厚度约为150~200μm;上层血管网真皮厚度约为80~100μm;网状真皮层的厚度约为1400~1600μm;深部血管网真皮层的厚度约为80~120μm;皮下脂肪层主要为脂肪细胞,厚度约为1000~6000μm。
一般来说,皮肤各层的厚度变化成正相关,即同时变厚,或者同时变薄。本发明在波长为400~800nm的光谱范围内进行MC方法模拟,为了符合变化规律,本发明以上层血管网真皮层的厚度(cm)为基准,构造线性映射函数如下:
Figure BDA0002243853000000131
其中,dpap是真皮乳头层的厚度;dupp是上层血管网真皮层的厚度;dret是网状真皮层的厚度;ddee是深部血管网真皮层的厚度;dfat是皮下脂肪层的厚度。
步骤二、基于Monte Carlo(MC)方法进行皮肤成像模拟:
MC方法存在以下四点优势:①关于生物组织的光源和边界没有要求;②无需求解传输方程;③关于生物组织的光学特性参数没有要求;④计算机模拟工作,因而该方法被广泛应用。MC方法模拟时,发射一个光子,当光子走完这一随机步长时,会与生物组织发生吸收、散射作用,导致自身的权重衰减、传播方向改变。行走到组织表面时,从上表面逃逸变成漫反射光,从下表面逃逸变成透射光。当该光子自身的权值小于某一个给定的阈值时,光子被组织吸收。最后,对所有光子重复上述过程,实现了整个光束的MC模拟,MC方法模拟光子在皮肤中传输的流程图如图4所示。具体过程如下:
1)发射光子:入射光束垂直组织平面xoy发射,方向沿着z轴方向,初始位置为原点(0,0,0),则方向余弦的初始值为(0,0,1)。令光子的初始权值为1,经过反射作用,光子的权值减小至M=1-Rsp。其中,Rsp是反射系数,Rsp=(n0-n1)2/(n0+n1)2,n0是组织外部介质的折射率,n1是组织表面的折射率。
2)光子的步长:设区间(a,b)上随机变量η的归一化概率密度函数为p(η):
Figure BDA0002243853000000132
设随机变量ξ在区间(0,1)上服从均匀分布,并且η和ξ之间一一映射,即η=f(ξ)。η=f(ξ)是增函数时,经过推导一定存在ξ1∈(0,1),满足下式:
Figure BDA0002243853000000141
η=f(ξ)是减函数时,经过推导也一定存在ξ1∈(0,1),满足下式:
Figure BDA0002243853000000142
对变量η进行抽样,可以得到随机变量η和随机变量ξ之间的关系式η=f(ξ)。变量ξ通过随机数产生器获取。由于ξ1和1-ξ1分布一样,且彼此间能够相互转化,因此运用式(20)对随机变量进行抽样。
光子的步长s是随机的,s的计算基于其概率分布的采样。依据互相作用系数μt的定义(μt=μαs),区间(s',s'+ds')中每单位长度的光子-组织互相作用概率为:
Figure BDA0002243853000000143
或者写成下式:
d(ln(P{s≥s'}))=-μtds'   (22)
将式(22)在(0,s1)范围内对s'积分,可以得到指数分布,其中P(s≥0)=1:
Figure BDA0002243853000000144
经过重新排列得到步长s的累积分布函数:
Figure BDA0002243853000000145
则步长s的概率密度函数为:
Figure BDA0002243853000000146
将式(25)代入到式(19)得:
s1=-ln(1-ξ)/μt   (26)
因为ξ的对称性约为0.5,我们可以用ξ替代1-ξ得到光子的步长:
s1=-ln(ξ)/μt   (27)
3)光子的传输:光子当前位置用坐标(x,y,z)表示,方向余弦(ux,uy,uz)决定其传输方向。光子到下一个位置时,需要对坐标进行更新为(x',y',z'):
x'=x+s·ux
y'=y+s·uy   (28)
z'=z+s·uz
4)光子的吸收:光子在生物组织中传输时会与内部粒子发生吸收作用,导致光子的权值衰减,衰减大小为Δw=w·μαt,则当前光子的权值变为:
wleft=w-Δw=w-w·μαt=w·μst   (29)
设发射光子的初始权值为w0,光子与组织内部粒子发生n次吸收作用后,光子的权值变为wn
Figure BDA0002243853000000151
可见,光子与组织产生的吸收作用次数越多,权值衰减越快。
5)光子的散射:光子在发生散射时,其传播方向会跟着改变,进而方向余弦一同改变。θ和ψ一旦确定,光子的方向余弦更新为:
Figure BDA0002243853000000152
如果光子的方向足够靠近z轴(如|uz|>0.99999),那么式(31)修改为下式:
u′x=sinθcosψ
u′y=sinθsinψ   (32)
u′z=sign(uz)cosθ
用符号函数sign(·)来判断光子z轴的方向。
6)光子在边界上的反射和透射:组织边界分为上、下表面,当光子抵达组织边界时,会产生逃逸出组织和反射回组织两种情况。约化步长s1指光子顺着当前方向与组织边界的间隔,如图2所示。s1由下式表示:
Figure BDA0002243853000000161
在直角坐标系中,z0和z1分别表示组织上、下表面的z轴坐标。若光子移动的步长s<s1,光子处于组织内部;若光子移动的步长s≥s1,光子将会达到边界,产生全反射或折射。到达组织边界时入射角为αi=arccos(|uz|),若产生折射,记折射角为αt,由折射定律可得:
ni sinαi=nt sinαt   (34)
若产生全反射,则反射率R(αi)可由菲涅耳公式得:
Figure BDA0002243853000000162
若随机数ξ>R(αi),光子产生折射,逃逸出组织,上表面逃逸变成漫反射光,下表面逃逸变成透射光;反之若ξ≤R(αi),光子产生全反射,因此方向余弦要更新为(ux,uy,uz),步长更新为s-s1。若光子步长不大,在行走完随机步长时光子便会与组织产生吸收和散射作用。
7)组织交界处的反射和透射:假设光子在第i层中传输,光学特性参数为μαi、μsi和ni,步长s的方向余弦为(ux,uy,uz)。若s>s1,光子会行走到第i层与第i-1层或第j=i+1层(光学特性参数为μαj、μsj和nj)的交界处,此时由式(22)判断光子的情况。若产生全反射,光子继续在第i层传输,步长更新为s-s1,方向余弦更新为(ux,uy,uz)。若产生折射,光子传输到第j=i+1层。由于两层的散射系数不一样,于是光子的步长更新为s←s·μsisj,方向余弦也做出相应的改变,如图3所示。
8)光子的终止:以下两种情况下,光子被认为终止:①光子的权值衰减为0;②光子逃逸。对于第一种情况,设置一个阈值wε(如wε=1e-6),当光子的权值w≤wε时,光子达到终止条件。不过为了更加契合实际情况,引入“俄罗斯轮盘赌”的办法:给定参数M(如M=100),产生一个服从均匀分布的随机数ξ。当ξ>1/M,光子的权值变为0,终止;当ξ≤1/M,光之权值变为Mw,继续传输。
步骤三、皮肤组织成像:相机拍摄的可见光范围内的图像,其RGB颜色值由光源、皮肤漫反射率和相机光谱响应函数共同决定。即:
Figure BDA0002243853000000171
其中,R,G,B表示图像的颜色值,I(λ)是光源。λ是波长,取值范围是400~800nm。R(λ)是皮肤的漫反射率,S(λ)是相机的光谱响应函数,可由相机模型得到。生发层的黑色素体积分数Cmel、真皮层的血液体积分数Cblood和真皮层的厚度Ddermis这三个生理参数直接影响血管在皮肤图像中的颜色,使其在各自取值范围内进行变化,得到对应的漫反射率。将I(λ)、R(λ)、S(λ)的数据导入,生成RGB图像,得到颜色值数据。
使用一个三层前馈神经网络模型来训练皮肤图像RGB值到皮肤生理参数Cmel,Cblood,Ddermis之间的映射关系。输入层有3个参数,以MC模拟得到的RGB为输入;输出层有3个参数,以生理参数Cmel,Cblood,Ddermis为输出;隐含层有5个神经元。隐含层和输出层使用的激活函数分别为对称型s函数和线性函数,利用BP算法进行训练。对于一张待测的皮肤图像,输入其RGB值,便可从输出的映射图像中实现静脉的显像。
以下根据具体的实例阐述本发明的方法、结果:
将单反相机NikonD70拍摄的测试皮肤图像作为输入,网络输出得到生理参数值,进而得到静脉显像图像,如图5所示,图5静脉显像结果,Cm、Cb、depth分别为生发层的黑色素体积分数、真皮层的血液体积分数和真皮层的厚度。从图中可以看出,每一个生理参数均能够使皮肤图像达到静脉显像的效果。总体来说,在这三个生理参数中,血液的体积分数Cblood拼接出的静脉显像的效果相对稳定。
为了进一步验证静脉显像的正确性,通过血管增强操作进一步去除噪声,最后提取血管位置,如图6所示。以JAI同步相机拍摄的近红外图像为真实值,对JAI同步相机拍摄的可见光图像进行静脉显像,评价算法效果。评价指标为准确率:
Figure BDA0002243853000000181
准确率体现的是模型对于静脉显像的精确性,其值越大越好,说明该模型得到的静脉显像图像更加接近真实结果。部分图像对及其静脉显像图像如图7所示,评价指标数值如表1所示。
表1显像准确率指标
Figure BDA0002243853000000182
从表1可知,该模型的平均准确率达到了97.8749%,说明MC模拟方法结合神经网络可以十分准确地达到静脉显像的效果,且非常接近真实静脉脉络结构的分布情况。
下面验证本发明算法对不同相机拍摄的不同身体部位的可见光图像依然有很好的静脉显像效果,结果如图8所示,其中给出了Cblood图的结果。由图8可知,对于不同相机拍摄的不同身体部位,本发明算法还是能够清晰地对RGB图像进行静脉检测与显像,从而验证了本发明算法的鲁棒性。从中亦可以看出,基于MC的皮肤成像模拟并进行静脉显像的方法具有很高的实用价值。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进,这些改进也应视为本发明的保护范围。

Claims (6)

1.一种基于蒙特卡洛的可见光静脉显像方法,其特征在于,所述的方法的步骤如下:
步骤一、建立皮肤模型,对皮肤进行光学模型分析;所述的步骤一具体如下:1.1、分析光在皮肤组织中的吸收作用,七层皮肤的吸收系数如下:
角质层:角质层中对光的吸收主要是水和组织的固有吸收,公式如下:
其中,是除了水和血液之外的其它组织的固有吸收系数,是水的体积分数,是水的吸收系数;
生发层:生发层中的吸收体主要为黑色素,其吸收系数表达式为:
其中,是黑色素的吸收系数,Cmel是黑色素的体积分数,其取值范围是1.3%~43%;
真皮层:真皮层包含真皮乳头层、上层血管网真皮层、网状真皮层、深部血管网真皮层四层,根据血氧饱和度S和血液中血红蛋白总的体积分数γ,该层的吸收系数可由下式表达:
其中,是水的体积分数;Cblood是血液的体积分数;γ=FHbFRBCHt
FHb是红细胞中血红蛋白的体积分数,FRBC是红细胞在所有血细胞中的体积分数,Ht是红细胞比容;是脱氧血红蛋白的吸收系数,是有氧血红蛋白的吸收系数,表达式如下:
其中chb是血液中血红蛋白的浓度,值为150g/L,mhb是血红蛋白的分子量,值为66500g/mole,εohb(λ)和εdhb(λ)分别为有氧血红蛋白和脱氧血红蛋白的消光系数;
分析七层皮肤的光的散射系数μs,光的散射系数μs是指每单位长度光被散射的概率,单位是cm-1,七层皮肤的各层散射系数如下:
角质层的散射系数:
其中,λ是波长;
生发层的散射系数:
真皮层的散射系数:
皮下脂肪层的散射系数:
1.2、分析七层皮肤的折射率:
角质层的折射率:
nstr=1.55                      (13)
生发层的折射率:
nliv=1.684-1.8723×104λ-2+1.0964×1010λ-4-8.6484×1014λ-6  (14)
真皮层的折射率:
ndermis=1.309-4.346×102λ-2+1.6065×109λ-4-1.2811×1014λ-6 (15)
皮下脂肪层的直射率:
nfat=1.44                      (16);
步骤二、基于Monte Carlo方法进行皮肤成像模拟;
步骤三、皮肤组织成像,最终实现静脉的显像。
2.根据权利要求1所述的一种基于蒙特卡洛的可见光静脉显像方法,其特征在于,所述的步骤一中建立角质层、生发层、真皮层、皮下脂肪层的七层皮肤模型,所述的真皮层依次包括真皮乳头层、上层血管网真皮层、网状真皮层、深部血管网真皮层,对七层皮肤进行光学模型分析;在利用Monte Carlo方法进行皮肤组织模拟时,需要输入五个光学特性参数值:吸收系数μα(cm-1)、散射系数μs(cm-1)、各向异性因子g、折射率n和皮肤各层厚度d(cm)。
3.根据权利要求2所述的一种基于蒙特卡洛的可见光静脉显像方法,其特征在于,分析皮肤各层厚度的参数影响,皮肤各层的厚度变化成正相关,即同时变厚,或者同时变薄;以上层血管网真皮层的厚度(cm)为基准,构造线性映射函数如下:
其中,dpap是真皮乳头层的厚度;dupp是上层血管网真皮层的厚度;dret是网状真皮层的厚度;ddee是深部血管网真皮层的厚度;dfat是皮下脂肪层的厚度。
4.根据权利要求1所述的一种基于蒙特卡洛的可见光静脉显像方法,其特征在于,所述的步骤二具体如下:
2.1,发射光子:
入射光束垂直组织平面xoy发射,方向沿着z轴方向,初始位置为原点(0,0,0),则方向余弦的初始值为(0,0,1);令光子的初始权值为1,经过反射作用,光子的权值减小至M=1-Rsp;其中,Rsp是反射系数,Rsp=(n0-n1)2/(n0+n1)2,n0是组织外部介质的折射率,n1是组织表面的折射率;
2.2,光子的步长:
设区间(a,b)上随机变量η的归一化概率密度函数为p(η):
设随机变量ξ在区间(0,1)上服从均匀分布,并且η和ξ之间一一映射,即
η=f(ξ);η=f(ξ)是增函数时,经过推导一定存在ξ1∈(0,1),满足下式:
η=f(ξ)是减函数时,经过推导也一定存在ξ1∈(0,1),满足下式:
对变量η进行抽样,可以得到随机变量η和随机变量ξ之间的关系式η=f(ξ);变量ξ通过随机数产生器获取;
运用式(20)对随机变量进行抽样:光子的步长s是随机的,s的计算基于其概率分布的采样,依据互相作用系数μt的定义(μt=μαs),区间(s',s'+ds')中每单位长度的光子-组织互相作用概率为:
或者写成下式:
d(ln(P{s≥s'}))=-μtds'           (22)
将式(22)在(0,s1)范围内对s'积分,得到指数分布,其中P(s≥0)=1:
经过重新排列得到步长s的累积分布函数:
则步长s的概率密度函数为:
将式(25)代入到式(19)得:
s1=-ln(1-ξ)/μt                 (26)
ξ的对称性为0.5,用ξ替代1-ξ得到光子的步长:
s1=-ln(ξ)/μt                  (27)
2.3,光子的传输:
光子当前位置用坐标(x,y,z)表示,方向余弦(ux,uy,uz)决定其传输方向;光子到下一个位置时,对坐标进行更新为(x',y',z'):
2.4,光子的吸收:
光子在生物组织中传输时会与内部粒子发生吸收作用,导致光子的权值衰减,衰减大小为Δw=w·μαt,则当前光子的权值变为:
wleft=w-Δw=w-w·μαt=w·μst          (29)
设发射光子的初始权值为w0,光子与组织内部粒子发生n次吸收作用后,光子的权值变为wn
2.5、光子的散射:
光子在发生散射时,其传播方向会跟着改变,进而方向余弦一同改变;θ和ψ一旦确定,光子的方向余弦更新为:
如果光子的方向靠近z轴,|uz|>0.99999,那么式(31)修改为下式:
u′x=sinθcosψ
u′y=sinθsinψ   (32)
u′z=sign(uz)cosθ
用符号函数sign(·)来判断光子z轴的方向;
2.6、光子在边界上的反射和透射:
组织边界分为上、下表面,当光子抵达组织边界时,会产生逃逸出组织和反射回组织两种情况,设定光子的步长s和约化步长s1,约化步长s1指光子顺着当前方向与组织边界的间隔,s1由下式表示:
在直角坐标系中,z0和z1分别表示组织上、下表面的z轴坐标;若光子移动的步长s<s1,光子处于组织内部;若光子移动的步长s≥s1,光子将会达到边界,产生全反射或折射;到达组织边界时入射角为αi=arccos(|uz|),若产生折射,记折射角为αt,由折射定律可得:
ni sinαi=nt sinαt   (34)
若产生全反射,则反射率R(αi)可由菲涅耳公式得:
若随机数ξ>R(αi),光子产生折射,逃逸出组织,上表面逃逸变成漫反射光,下表面逃逸变成透射光;反之若ξ≤R(αi),光子产生全反射,因此方向余弦要更新为(ux,uy,uz),步长更新为s-s1;若光子步长不大,在行走完随机步长时光子便会与组织产生吸收和散射作用;
2.7、组织交界处的反射和透射:
假设光子在第i层中传输,光学特性参数为第i层的吸收系数μαi、第i层的散射系数μsi和第i层的折射率ni,步长s的方向余弦为(ux,uy,uz);若s>s1,光子会行走到第i层与第i-1层或第j=i+1层,光学特性参数为第j层的吸收系数μαj、第j层的散射系数μsj和第j层的折射率nj的交界处,此时由式(22)判断光子的情况;若产生全反射,光子继续在第i层传输,步长更新为s-s1,方向余弦更新为(ux,uy,uz);若产生折射,光子传输到第j=i+1层;
2.8:光子的终止:
光子的终止情况有:1)光子的权值衰减为0;2)光子逃逸;对于光子的权值衰减为0,设置一个阈值wε,当光子的权值w≤wε时,光子达到终止条件。
5.根据权利要求4所述的一种基于蒙特卡洛的可见光静脉显像方法,其特征在于,所述的步骤2.8中对于光子的终止的光子的权值衰减为0的情况时,还可以给定参数M,产生一个服从均匀分布的随机数ξ;当ξ>1/M,光子的权值变为0,终止;当ξ≤1/M,光之权值变为Mw,继续传输。
6.根据权利要求1所述的一种基于蒙特卡洛的可见光静脉显像方法,其特征在于,所述的步骤三具体为:
3.1、相机拍摄的可见光范围内的图像,其RGB颜色值由光源、皮肤漫反射率和相机光谱响应函数共同决定;即:
其中,R,G,B表示图像的颜色值,I(λ)是光源,λ是波长,取值范围是400~800nm;R(λ)是皮肤的漫反射率,S(λ)是相机的光谱响应函数,可由相机模型得到;将I(λ)、R(λ)、S(λ)的数据导入,生成RGB图像,得到颜色值数据;
3.2、使用一个三层前馈神经网络模型来训练皮肤图像RGB值到皮肤生理参数Cmel,Cblood,Ddermis之间的映射关系;输入层有3个参数,以MC模拟得到的RGB为输入;输出层有3个参数,以生理参数Cmel,Cblood,Ddermis为输出;隐含层有5个神经元;
3.3、隐含层和输出层使用的激活函数分别为对称型s函数和线性函数,利用BP算法进行训练;对于一张待测的皮肤图像,输入其RGB值,便可从输出的映射图像中实现静脉的显像。
CN201911009741.5A 2019-10-23 2019-10-23 基于蒙特卡洛的可见光静脉显像方法 Active CN110826431B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911009741.5A CN110826431B (zh) 2019-10-23 2019-10-23 基于蒙特卡洛的可见光静脉显像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911009741.5A CN110826431B (zh) 2019-10-23 2019-10-23 基于蒙特卡洛的可见光静脉显像方法

Publications (2)

Publication Number Publication Date
CN110826431A CN110826431A (zh) 2020-02-21
CN110826431B true CN110826431B (zh) 2023-04-25

Family

ID=69550125

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911009741.5A Active CN110826431B (zh) 2019-10-23 2019-10-23 基于蒙特卡洛的可见光静脉显像方法

Country Status (1)

Country Link
CN (1) CN110826431B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112168180B (zh) * 2020-09-24 2022-01-18 上海交通大学 一种基于两阶段空间映射的组织血氧成像检测方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102058393A (zh) * 2010-10-30 2011-05-18 华中科技大学 基于反射光谱测量的皮肤生理参数与光学特性参数的测量方法和系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105786762B (zh) * 2016-03-28 2017-02-22 陈威 一种人皮肤光谱的建模方法以及高拟合度的多个皮肤参数的数学建模方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102058393A (zh) * 2010-10-30 2011-05-18 华中科技大学 基于反射光谱测量的皮肤生理参数与光学特性参数的测量方法和系统

Also Published As

Publication number Publication date
CN110826431A (zh) 2020-02-21

Similar Documents

Publication Publication Date Title
CN101539995B (zh) 基于手指静脉纹与手指背纹的成像设备及多模态身份认证方法
Chen et al. Hyperspectral modeling of skin appearance
Tang et al. Uncovering vein patterns from color skin images for forensic analysis
CN107392187B (zh) 一种基于梯度方向直方图的人脸活体检测方法
SG190730A1 (en) Method and an apparatus for determining vein patterns from a colour image
CN105184254B (zh) 一种身份认证方法及系统
Chauhan et al. A survey of emerging biometric modalities
CN106372615A (zh) 一种人脸防伪识别方法以及装置
Wang et al. A robust and secure palm vessel biometric sensing system based on photoacoustics
CN104688184A (zh) 可见光皮肤图像的静脉显像方法
CN111339828B (zh) 基于红外影像和超声多普勒结合的静脉显影识别方法
CN110826431B (zh) 基于蒙特卡洛的可见光静脉显像方法
WO2022268183A1 (zh) 一种基于视频的随机手势认证方法及系统
Crisan et al. Low cost, high quality vein pattern recognition device with liveness Detection. Workflow and implementations
CN109063643A (zh) 一种用于脸部信息部分隐藏条件下的面部表情痛苦度识别方法
CN114038564A (zh) 一种糖尿病无创风险预测方法
RU2316051C2 (ru) Способ и система автоматической проверки присутствия лица живого человека в биометрических системах безопасности
Zhang et al. Biometric authentication via finger photoplethysmogram
WO2020019346A1 (zh) 生物特征识别方法、装置、系统及终端设备
CN115953822A (zh) 一种基于rPPG生理信号的人脸视频鉴伪方法和装置
Yaacoubi et al. A multimodal biometric identification system based on ECG and PPG signals
CN112790750A (zh) 一种基于视频眼动和心率分析的恐惧紧张情绪识别方法
Sharma et al. Lip print recognition for security systems: an up-coming biometric solution
EP3651062B1 (en) A method and a system for biometric identification of a subject
Sun et al. High‐security photoacoustic identity recognition by capturing hierarchical vascular structure of finger

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant