CN115661370B - 一种红外3d人体模型构建方法及存储介质 - Google Patents
一种红外3d人体模型构建方法及存储介质 Download PDFInfo
- Publication number
- CN115661370B CN115661370B CN202211600881.1A CN202211600881A CN115661370B CN 115661370 B CN115661370 B CN 115661370B CN 202211600881 A CN202211600881 A CN 202211600881A CN 115661370 B CN115661370 B CN 115661370B
- Authority
- CN
- China
- Prior art keywords
- human body
- standard
- infrared image
- points
- point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010276 construction Methods 0.000 title abstract description 8
- 238000013507 mapping Methods 0.000 claims abstract description 28
- 238000000034 method Methods 0.000 claims abstract description 28
- 239000011159 matrix material Substances 0.000 claims abstract description 26
- 239000013598 vector Substances 0.000 claims abstract description 15
- 238000006243 chemical reaction Methods 0.000 claims description 14
- 238000013527 convolutional neural network Methods 0.000 claims description 8
- 238000003708 edge detection Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 2
- 238000005516 engineering process Methods 0.000 abstract 1
- 238000001514 detection method Methods 0.000 description 7
- 210000000746 body region Anatomy 0.000 description 6
- 230000003187 abdominal effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 238000011172 small scale experimental method Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Landscapes
- Image Generation (AREA)
- Image Processing (AREA)
Abstract
本申请涉及一般的图像数据处理或产生技术领域,特别是涉及一种红外3D人体模型构建方法及存储介质。所述方法包括以下步骤:获取人体的关键点KP和边缘点EP;获取映射矩阵或形变网络;遍历KP、EP和FP,分别将红外图像中kpi、epj和fpr的像素值赋予标准3D人体模型中对应点;遍历标准3D人体模型目标区域中的点,若所述目标区域中存在未赋予像素值的点,则获取Fa;如果Fa中任意两法向量之间的夹角均小于等于AJ1,则将Va1=∑Qa b=1(Va,b/Qa)赋予NPa;否则,将Va2=∑Qa b=1(wb*Va,b)赋予NPa。本发明改善了基于二维红外图像得到的标准3D人体模型中存在的形变问题。
Description
技术领域
本发明涉及一般的图像数据处理或产生技术领域,特别是涉及一种红外3D人体模型构建方法及存储介质。
背景技术
现有技术中红外图像多以二维图像的形式被储存和查看,由此,红外图像中的人体也是以二维形式展现在用户面前。如何实现二维红外图像中二维人体图像向三维人体模型的转换,是现有技术中的难点。目前,已有人提出了将红外图像中人体区域按照预设规则进行分块后映射在标准3D人体模型的方法,其考虑到对红外图像中人体区域进行分块后与标准3D人体模型中对应块的面积可能不相等,因此还包括在映射之前对红外图像中人体区域的分块区域进行拉伸或缩放的步骤。例如,当红外图像中人体区域的腹部区域面积大于标准3D人体模型中的腹部区域面积时,对红外图像中人体区域的腹部区域进行拉伸后映射在标准3D人体模型中的腹部区域。上述这种方法得到的标准3D人体模型中会存在形变问题。如何改善基于二维红外图像得到的标准3D人体模型中存在的形变问题,是亟待解决的问题。
发明内容
本发明目的在于,提供一种红外3D人体模型构建方法及存储介质,改善了基于二维红外图像得到的标准3D人体模型中存在的形变问题。
根据本发明的第一方面,提供了一种红外3D人体模型构建方法,包括以下步骤:
S100,获取红外图像中人体的关键点KP=(kp1,kp2,…,kpi,…,kpN),其中,kpi为红外图像中人体的第i个关键点,i的取值范围是1到N,N为红外图像中人体的关键点的总数量。
S200,获取红外图像中人体的边缘点EP=(ep1,ep2,…,epj,…,epM),其中,epj为红外图像中人体的第j个边缘点,j的取值范围是1到M,M为红外图像中人体的边缘点的总数量。
S300,获取红外图像向标准3D人体模型转换时的映射矩阵或形变网络,所述映射矩阵或形变网络根据KP和EP在红外图像中的坐标,以及标准3D人体模型中与KP和EP对应的点的坐标得到。
S400,获取红外图像中人体的非关键点和非边缘点的像素点FP=(fp1,fp2,…,fpr,…,fpR),其中,fpr为红外图像中人体的第r个非关键点和非边缘点的像素点,r的取值范围为1到R,R为红外图像中人体的非关键点和非边缘点的像素点的总数量。
S500,遍历KP、EP和FP,分别将红外图像中kpi、epj和fpr的像素值赋予标准3D人体模型中坐标为(kpxi,kpyi,kpzi)、(epxj,epyj,epzj)和(fpxr,fpyr,fpzr)的点,kpxi、kpyi和kpzi分别为kpi经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标,epxj、epyj和epzj分别为epj经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标,fpxr、fpyr和fpzr分别为fpr经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标。
S600,遍历标准3D人体模型目标区域中的点,若所述目标区域中存在未赋予像素值的点,则获取Fa={fa,1,fa,2,…,fa,b,…,fa,Qa},其中,fa,b为NPa,b的法向量,NPa,b为标准3D人体模型中NPa的第b个已被赋予像素值的邻域点,NPa为所述目标区域中第a个未赋予像素值的点,b的取值为1到Qa,Qa为标准3D人体模型中NPa的已被赋予像素值的邻域点的总数量;所述目标区域为由nep1,nep2,…,nepj,…,nepM所围成的区域;其中,nepj为标准3D人体模型中与epj对应的点;a的取值为1到H,其中,H为所述目标区域中所有未赋予像素值的点的总数量。
S700,如果Fa中任意两法向量之间的夹角均小于等于AJ1,则将Va1=∑Qa b=1(Va,b/Qa)赋予NPa,Va,b为标准3D人体模型中NPa,b的像素值,AJ1为第一设定角度阈值;否则,将Va2=∑Qa b=1(wb*Va,b)赋予NPa,wb为NPa,b的权重,∑Qa b=1wb=1。
本发明与现有技术相比具有明显的有益效果,借由上述技术方案,本发明提供的红外图像处理方法及存储介质可达到相当的技术进步性及实用性,并具有产业上的广泛利用价值,其至少具有以下有益效果:
本发明获取了红外图像中人体的关键点和边缘点,基于这些关键点和边缘点实现了二维红外图像中人体向标准3D人体模型的转换,其中,可基于边缘点改善得到的标准3D人体模型中人体的边缘形变的问题,可基于关键点改善得到的标准3D人体模型中人体的内部形变的问题,相较于现有对人体区域直接进行拉伸或缩放后映射在标准3D人体模型的方法,本发明能够改善基于二维红外图像得到的标准3D人体模型中存在的形变问题。而且,本发明在转换的过程中,考虑了将二维红外图像中点映射到标准3D人体模型中后标准3D人体模型中仍有点没有被赋予像素值的情况,并针对此情况提出了解决办法,提高了构建得到的人体三维模型的精确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的红外3D人体模型构建方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
根据本发明的第一方面,提供了一种红外3D人体模型构建方法,如图1所示,包括以下步骤:
S100,获取红外图像中人体的关键点KP=(kp1,kp2,…,kpi,…,kpN),其中,kpi为红外图像中人体的第i个关键点,i的取值范围是1到N,N为红外图像中人体的关键点的总数量。
根据本发明,获取红外图像中人体的关键点KP的方法包括两种,第一种是基于相同的视角获取红外图像对应的可见光图像,然后利用第一关键点检测方法识别可见光图像中人体的关键点;由于可见光图像和红外图像是基于相同视角下拍摄的,因此可将光图像中人体的关键点的坐标与红外图像中人体的关键点的坐标相同,由此,在得到可见光图像中人体的关键点之后就可以得到红外图像中人体的关键点。本领域技术人员知悉,利用现有技术中任意的第一关键点检测方法识别可见光图像中的关键点均落入本发明的保护范围。可选的,现有技术中的关键点检测方法是基于第一卷积神经网络的关键点检测方法。
第二种是利用第二关键点检测方法识别红外图像中人体的关键点。可选的,第二关键点检测方法是基于第二卷积神经网络的关键点检测方法。根据本发明,第二卷积神经网络为经训练的卷积神经网络,第二卷积神经网络在进行训练时利用的样本是红外图像,第二卷积神经网络具备识别红外图像中人体关键点的功能。
需要说明的是,本发明获取的红外图像中的人体为同一个人的人体。例如,一个具体的场景是:一个人进入人体仓中进行图像拍摄。
S200,获取红外图像中人体的边缘点EP=(ep1,ep2,…,epj,…,epM),其中,epj为红外图像中人体的第j个边缘点,j的取值范围是1到M,M为红外图像中人体的边缘点的总数量。
根据本发明,利用边缘检测算法获取红外图像中人体的边缘点EP。本领域技术人员知悉,利用现有技术中任意的边缘检测算法获取红外图像中人体的边缘点均落入本发明的保护范围。
S300,获取红外图像向标准3D人体模型转换时的映射矩阵或形变网络,所述映射矩阵或形变网络根据KP和EP在红外图像中的坐标,以及标准3D人体模型中与KP和EP对应的点的坐标得到。
本发明的目的在于根据红外图像中人体的关键点和边缘点构建对应的标准3D人体模型。应当理解的是,标准3D人体模型是预先构建好的,其中构成标准3D人体模型的任意点的坐标是已知的,其中哪些点是与KP对应的关键点是已知的,哪些点是与EP对应的边缘点也是已知的,未知的只是标准3D人体模型中各点的像素值。应当理解的是,红外图像中某点与标准3D人体模型中某点对应指的是两点代表的是人体的同一位置,例如,红外图像中人体鼻子关键点与标准3D人体模型中人体鼻子关键点对应,红外图像中神阙穴所在位置的关键点与标准3D人体模型中神阙穴所在位置的关键点对应,红外图像中人体下颚边缘点与标准3D人体模型中人体下颚边缘点对应。
可选的,获取标准3D人体模型中EP对应的点的方法包括:
S310,获取标准3D人体模型中人体的初始边缘点PNEP=(pnep1,pnep2,…,pnepM0),pnepf为PNEP中第f个初始边缘点,f的取值范围为1到M0,M0为PNEP中初始边缘点的总数量。
需要说明的是,标准3D人体模型中人体的初始边缘点PNEP为用户输入的与红外图像具有相同拍摄视角的边缘点,例如,红外图像是从人体的正面拍摄的,那么PNEP为用户输入的人体的正面视角下的边缘点。
S320,获取红外图像向标准3D人体模型转换时的映射矩阵,红外图像向标准3D人体模型转换时的映射矩阵根据KP在红外图像中的坐标和标准3D人体模型中KP对应的点的坐标得到。
本领域技术人员知悉,利用现有技术中任意获取映射矩阵的方法获取本发明红外图像向标准3D人体模型转换时的映射矩阵均落入本发明的保护范围。
S330,获取NEP’=(nep’1,nep’2,…,nep’j,…,nep’M),其中,nep’j为利用所述红外图像向标准3D人体模型转换时的映射矩阵将epj进行转换后得到的边缘点。
S340,遍历NEP’,获取NEP=(nep1,nep2,…,nepj,…,nepM),其中,nepj为PNEP中与nep’j距离最近的初始边缘点。
根据本发明,遍历PNEP,获取pnepf与nep’j的距离,将PNEP中与nep’j距离最近的pnepf作为nepj。本领域技术人员知悉,利用现有技术中任意计算两个三维坐标点之间距离的方法获取本发明pnepf与nep’j距离均落入本发明的保护范围。
根据本发明,在得到了人体的多个位置分别在红外图像中的坐标和标准3D人体模型中的坐标后,根据多个位置在红外图像和标准3D人体模型中的坐标之间的对应关系即可获取映射矩阵或形变网络,该映射矩阵或形变网络即可实现红外图像中二维坐标系到标准3D人体模型中三维坐标系的转换。本领域技术人员知悉,利用现有技术中任意获取映射矩阵或形变网络的方法获取本发明的映射矩阵或形变网络均落入本发明的保护范围。
S400,获取红外图像中人体的非关键点和非边缘点的像素点FP=(fp1,fp2,…,fpr,…,fpR),其中,fpr为红外图像中人体的第r个非关键点和非边缘点的像素点,r的取值范围为1到R,R为红外图像中人体的非关键点和非边缘点的像素点的总数量。
应当理解的是,红外图像中人体除了包括关键点和边缘点之外,还包括既不是关键点,也不是边缘点的像素点,本发明将这样的像素点称之为非关键点和非边缘点。
S500,遍历KP、EP和FP,分别将红外图像中kpi、epj和fpr的像素值赋予标准3D人体模型中坐标为(kpxi,kpyi,kpzi)、(epxj,epyj,epzj)和(fpxr,fpyr,fpzr)的点,kpxi、kpyi和kpzi分别为kpi经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标,epxj、epyj和epzj分别为epj经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标,fpxr、fpyr和fpzr分别为fpr经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标。
根据本发明,在S300得到了红外图像向标准3D人体模型转换时的映射矩阵或形变网络后,即可知晓红外图像中像素点与标准3D人体模型中哪一点代表的是人体的同一位置,由此就可以根据红外图像中各像素点的像素值得到标准3D人体模型中对应点的像素值。
S600,遍历标准3D人体模型目标区域中的点,若所述目标区域中存在未赋予像素值的点,则获取Fa={fa,1,fa,2,…,fa,b,…,fa,Qa},其中,fa,b为NPa,b的法向量,NPa,b为标准3D人体模型中NPa的第b个已被赋予像素值的邻域点,NPa为所述目标区域中第a个未赋予像素值的点,b的取值为1到Qa,Qa为标准3D人体模型中NPa的已被赋予像素值的邻域点的总数量;所述目标区域为由nep1,nep2,…,nepj,…,nepM所围成的区域;其中,nepj为标准3D人体模型中与epj对应的点;a的取值为1到H,其中,H为所述目标区域中所有未赋予像素值的点的总数量。
根据本发明,S600遍历KP、EP和FP后,标准3D人体模型中的目标区域仍然可能存在未被赋予像素值的点,而这些未被赋予像素值的点可以根据其已被赋予像素值的邻域点的像素值确定。
根据本发明,只判断目标区域中的点是否被赋予像素值,可以提高构建得到的标准3D人体模型的精确性。应当理解的是,根据单张的红外图像只能够确定标准3D人体模型在某一视角下的点,例如,对人体进行正面拍摄时,拍摄得到的二维红外图像中只能看到人体的正面,根据该拍摄得到的二维红外图像对标准3D人体模型进行构建时,只能够得到标准3D人体模型正面的点的像素值,不能够得到标准3D人体模型背面的点的像素值,因此,本发明只判断标准3D人体模型中由nep1,nep2,…,nepj,…,nepM所围成的区域中是否存在未被赋予像素值的点。应当理解的是,nepj为标准3D人体模型中与epj对应的点,优选的,nepj具体为S340中PNEP中与nep’j距离最近的初始边缘点。本领域技术人员知悉,现有技术中任意获取标准3D人体模型中对应边缘点的技术方案均落入本发明的保护范围。
根据本发明,目标区域中存在的未赋予像素值的点与其已被赋予像素值的邻域点既可能在标准3D人体模型中的一个平面上,也可能在标准3D人体模型中的曲面上;因此本发明获取了Fa,以根据Fa判断目标区域中存在的未赋予像素值的点与其已被赋予像素值的邻域点是否在一个平面上。
根据本发明,标准3D人体模型中任意点的法向量是已知的。本领域技术人员知悉,利用现有技术中任何获取标准3D人体模型中点的法向量的方法获取Fa均落入本发明的保护范围。
S700,如果Fa中任意两法向量之间的夹角均小于等于AJ1,则将Va1=∑Qa b=1(Va,b/Qa)赋予NPa,Va,b为标准3D人体模型中NPa,b的像素值,AJ1为第一设定角度阈值;否则,则将Va2=∑Qa b=1(wb*Va,b)赋予NPa,wb为NPa,b的权重,∑Qa b=1wb=1。
根据本发明,若Fa中任意两法向量之间的夹角均小于等于AJ1,那么该点与其邻域点处于同一平面上,此时可以将存在像素值的邻域点的像素值的均值作为NPa的像素值。本发明中AJ1为某一略大于0°的角度。
根据本发明,若Fa中存在两法向量之间的夹角大于AJ1,那么该点与其邻域点不是处于同一平面上,此时为其存在像素值的邻域点赋予权重,再结合其存在像素值的邻域点的像素值获取NPa的像素值。
优选的,wb的获取包括:
S710,获取Ja,b和Ja,c,Ja,b为fa,b与fa,0的夹角,Ja,c为fa,c与fa,0的夹角,fa,0为NPa的法向量,fa,c为NPa,c的法向量,NPa,c为标准3D人体模型中NPa的第c个已被赋予像素值的邻域点,c的取值范围为1到Qa,且b≠c。
S720,如果Ja,b<AJ2<Ja,c,则wb>wc,wc为NPa,c的权重,AJ2为第二设定角度阈值,AJ2<AJ1。可选的,AJ2=0.5*AJ1。
根据本发明,当满足Ja,b<AJ2<Ja,c时,说明NPa,b和NPa在同一平面上,Ja,c和NPa不在同一平面上,本发明设置wb>wc,使得为NPa赋予的像素值更多地参考NPa,b的像素值,经小规模试验表明,相较于随机为wb赋予权重,由此得到的标准3D人体模型的精确度较高。
优选的,S720中,如果AJ2<Ja,b、AJ2<Ja,c且J0 a,b<J0 a,c,则wb>wc,J0 a,b为fa,b和标准3D人体模型的入射方向的夹角,J0 a,c为fa,c和标准3D人体模型的入射方向的夹角。例如,对人体进行正面拍摄时,拍摄得到的二维红外图像中只能看到人体的正面,对应的标准3D人体模型中只有正面的点会被赋予像素值,那么标准3D人体模型的入射方向即是垂直于标准3D人体模型的正面的方向。或者,对人体进行左侧面拍摄时,拍摄得到的二维红外图像中只能看到人体的左侧面,对应的标准3D人体模型中只有左侧面的点会被赋予像素值,那么标准3D人体模型的入射方向即是垂直于标准3D人体模型的左侧面的方向。
根据本发明,当满足AJ2<Ja,b、AJ2<Ja,c时,说明NPa,b和NPa,c均不与NPa在同一平面上,此时若J0 a,b<J0 a,c,说明NPa,b的像素值的准确性大于NPa,c的像素值的准确性,本发明设置wb>wc,使得为NPa赋予的像素值更多地参考NPa,b的像素值,经小规模试验表明,相较于随机为wb赋予权重,由此得到的标准3D人体模型的精确度较高。
优选的,S720中,如果Ja,b<Ja,c<AJ2,则wb>wc或者wb=wc。
根据本发明,当满足Ja,b<Ja,c<AJ2时,说明NPa,b和NPa,c均与NPa在同一平面上,此时可设置wb=wc,或者设置wb>wc以得到精确度较高的标准3D人体模型。
本发明实施例还提供了一种非瞬时性计算机可读存储介质,所述存储介质中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由处理器加载并执行本发明实施例所述的方法。
虽然已经通过示例对本发明的一些特定实施例进行了详细说明,但是本领域的技术人员应该理解,以上示例仅是为了进行说明,而不是为了限制本发明的范围。本领域的技术人员还应理解,可以对实施例进行多种修改而不脱离本发明的范围和精神。本发明的范围由所附权利要求来限定。
Claims (9)
1.一种红外3D人体模型构建方法,其特征在于,包括以下步骤:
S100,获取红外图像中人体的关键点KP=(kp1,kp2,…,kpi,…,kpN),其中,kpi为红外图像中人体的第i个关键点,i的取值范围是1到N,N为红外图像中人体的关键点的总数量;
S200,获取红外图像中人体的边缘点EP=(ep1,ep2,…,epj,…,epM),其中,epj为红外图像中人体的第j个边缘点,j的取值范围是1到M,M为红外图像中人体的边缘点的总数量;
S300,获取红外图像向标准3D人体模型转换时的映射矩阵或形变网络,所述映射矩阵或形变网络根据KP和EP在红外图像中的坐标,以及标准3D人体模型中与KP和EP对应的点的坐标得到;
S400,获取红外图像中人体的非关键点和非边缘点的像素点FP=(fp1,fp2,…,fpr,…,fpR),其中,fpr为红外图像中人体的第r个非关键点和非边缘点的像素点,r的取值范围为1到R,R为红外图像中人体的非关键点和非边缘点的像素点的总数量;
S500,遍历KP、EP和FP,分别将红外图像中kpi、epj和fpr的像素值赋予标准3D人体模型中坐标为(kpxi,kpyi,kpzi)、(epxj,epyj,epzj)和(fpxr,fpyr,fpzr)的点,kpxi、kpyi和kpzi分别为kpi经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标,epxj、epyj和epzj分别为epj经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标,fpxr、fpyr和fpzr分别为fpr经映射矩阵或形变网络进行坐标转换后的X、Y和Z轴坐标;
S600,遍历标准3D人体模型目标区域中的点,若所述目标区域中存在未赋予像素值的点,则获取Fa={fa,1,fa,2,…,fa,b,…,fa,Qa},其中,fa,b为NPa,b的法向量,NPa,b为标准3D人体模型中NPa的第b个已被赋予像素值的邻域点,NPa为所述目标区域中第a个未赋予像素值的点,b的取值为1到Qa,Qa为标准3D人体模型中NPa的已被赋予像素值的邻域点的总数量;所述目标区域为由nep1,nep2,…,nepj,…,nepM所围成的区域;其中,nepj为标准3D人体模型中与epj对应的点;a的取值为1到H,其中,H为所述目标区域中所有未赋予像素值的点的总数量;
S700,如果Fa中任意两法向量之间的夹角均小于等于AJ1,则将Va1=∑Qa b=1(Va,b/Qa)赋予NPa,Va,b为标准3D人体模型中NPa,b的像素值,AJ1为第一设定角度阈值;否则,则将Va2=∑Qa b=1(wb*Va,b)赋予NPa,wb为NPa,b的权重,∑Qa b=1wb=1。
2.根据权利要求1所述的方法,其特征在于,S700中,wb的获取包括:
S710,获取Ja,b和Ja,c,Ja,b为fa,b与fa,0的夹角,Ja,c为fa,c与fa,0的夹角,fa,0为NPa的法向量,fa,c为NPa,c的法向量,NPa,c为标准3D人体模型中NPa的第c个已被赋予像素值的邻域点,c的取值范围为1到Qa,且b≠c;
S720,如果Ja,b<AJ2<Ja,c,则wb>wc,wc为NPa,c的权重,AJ2为第二设定角度阈值,AJ2<AJ1。
3.根据权利要求2所述的方法,其特征在于,S720中,如果AJ2<Ja,b、AJ2<Ja,c且J0 a,b<J0 a,c,则wb>wc,J0 a,b为fa,b和标准3D人体模型的入射方向的夹角,J0 a,c为fa,c和标准3D人体模型的入射方向的夹角。
4.根据权利要求2所述的方法,其特征在于,S720中,如果Ja,b<Ja,c<AJ2,则wb≥wc。
5.根据权利要求2所述的方法,其特征在于,S720中,AJ2=0.5*AJ1。
6.根据权利要求1所述的方法,其特征在于,S100中,利用第一卷积神经网络识别可见光图像中的关键点,得到红外图像中人体的关键点KP,所述可见光图像与所述红外图像具有相同的拍摄视角。
7.根据权利要求1所述的方法,其特征在于,S100中,利用第二卷积神经网络识别红外图像中的关键点,得到红外图像中人体的关键点KP。
8.根据权利要求1所述的方法,其特征在于,S200中,利用边缘检测算法获取红外图像中人体的边缘点EP。
9.一种非瞬时性计算机可读存储介质,所述存储介质中存储有至少一条指令或至少一段程序,其特征在于,所述至少一条指令或所述至少一段程序由处理器加载并执行以实现如权利要求1-8中任意一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211600881.1A CN115661370B (zh) | 2022-12-14 | 2022-12-14 | 一种红外3d人体模型构建方法及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211600881.1A CN115661370B (zh) | 2022-12-14 | 2022-12-14 | 一种红外3d人体模型构建方法及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115661370A CN115661370A (zh) | 2023-01-31 |
CN115661370B true CN115661370B (zh) | 2023-04-28 |
Family
ID=85023621
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211600881.1A Active CN115661370B (zh) | 2022-12-14 | 2022-12-14 | 一种红外3d人体模型构建方法及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115661370B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116309058B (zh) * | 2023-03-15 | 2024-04-19 | 长沙观谱红外科技有限公司 | 一种人体红外图像的放大处理方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108629801A (zh) * | 2018-05-14 | 2018-10-09 | 华南理工大学 | 一种视频序列的三维人体模型姿态与形状重构方法 |
CN111767866A (zh) * | 2020-06-30 | 2020-10-13 | 北京爱奇艺科技有限公司 | 一种人体模型创建方法、装置、电子设备及存储介质 |
WO2020207270A1 (zh) * | 2019-04-09 | 2020-10-15 | 五邑大学 | 一种三维人脸重建方法及其系统、装置、存储介质 |
CN112330813A (zh) * | 2020-11-12 | 2021-02-05 | 首都师范大学 | 一种基于单目深度摄像头的着装下三维人体模型重建方法 |
CN113112583A (zh) * | 2021-03-22 | 2021-07-13 | 成都理工大学 | 基于红外热成像的3d人体重构方法 |
CN113781291A (zh) * | 2020-05-21 | 2021-12-10 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
-
2022
- 2022-12-14 CN CN202211600881.1A patent/CN115661370B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108629801A (zh) * | 2018-05-14 | 2018-10-09 | 华南理工大学 | 一种视频序列的三维人体模型姿态与形状重构方法 |
WO2020207270A1 (zh) * | 2019-04-09 | 2020-10-15 | 五邑大学 | 一种三维人脸重建方法及其系统、装置、存储介质 |
CN113781291A (zh) * | 2020-05-21 | 2021-12-10 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN111767866A (zh) * | 2020-06-30 | 2020-10-13 | 北京爱奇艺科技有限公司 | 一种人体模型创建方法、装置、电子设备及存储介质 |
CN112330813A (zh) * | 2020-11-12 | 2021-02-05 | 首都师范大学 | 一种基于单目深度摄像头的着装下三维人体模型重建方法 |
CN113112583A (zh) * | 2021-03-22 | 2021-07-13 | 成都理工大学 | 基于红外热成像的3d人体重构方法 |
Non-Patent Citations (1)
Title |
---|
Gareth Loy 等.Monocular 3D Reconstruction of Human Motion in Long Action Sequences.《ECCV》.2004,第442-455页. * |
Also Published As
Publication number | Publication date |
---|---|
CN115661370A (zh) | 2023-01-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109558764B (zh) | 人脸识别方法及装置、计算机设备 | |
CN110909693B (zh) | 3d人脸活体检测方法、装置、计算机设备及存储介质 | |
CN111652086B (zh) | 人脸活体检测方法、装置、电子设备及存储介质 | |
JP6507046B2 (ja) | 立体物検知装置及び立体物認証装置 | |
CN105335722B (zh) | 一种基于深度图像信息的检测系统及方法 | |
CN111783748B (zh) | 人脸识别方法、装置、电子设备及存储介质 | |
Gupta et al. | Texas 3D face recognition database | |
CN110096925A (zh) | 人脸表情图像的增强方法、获取方法和装置 | |
CN107292269B (zh) | 基于透视失真特性的人脸图像鉴伪方法、存储、处理设备 | |
CN111611934A (zh) | 一种人脸检测模型生成和人脸检测方法、装置及设备 | |
CN112926464B (zh) | 一种人脸活体检测方法以及装置 | |
CN115661370B (zh) | 一种红外3d人体模型构建方法及存储介质 | |
WO2020164266A1 (zh) | 一种活体检测方法、系统及终端设备 | |
KR101781361B1 (ko) | 얼굴 비교를 통한 개인 식별 방법 | |
CN111105366A (zh) | 图像处理方法和装置、终端设备及存储介质 | |
KR20220098895A (ko) | 인체 포즈 추정 장치 및 방법 | |
CN111667403A (zh) | 一种有遮挡的人脸图像的生成方法及装置 | |
CN113902781A (zh) | 三维人脸重建方法、装置、设备及介质 | |
CN110720105A (zh) | 人脸防伪检测方法、装置、芯片、电子设备和计算机可读介质 | |
CN107368817B (zh) | 人脸识别方法和装置 | |
CN113610969A (zh) | 一种三维人体模型生成方法、装置、电子设备及存储介质 | |
CN116052209B (zh) | 一种红外图像和标准3d人体模型的处理方法及存储介质 | |
CN116798130A (zh) | 一种人脸防伪方法、装置及存储介质 | |
CN116051364B (zh) | 一种红外图像处理方法及存储介质 | |
CN114373205B (zh) | 一种基于卷积宽度网络的人脸检测和识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |