CN113591786A - 人体和人脸的匹配方法、装置、设备和存储介质 - Google Patents

人体和人脸的匹配方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN113591786A
CN113591786A CN202110925798.0A CN202110925798A CN113591786A CN 113591786 A CN113591786 A CN 113591786A CN 202110925798 A CN202110925798 A CN 202110925798A CN 113591786 A CN113591786 A CN 113591786A
Authority
CN
China
Prior art keywords
human body
target
human
human face
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110925798.0A
Other languages
English (en)
Inventor
邓江帆
周峰
万俊峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Aibee Technology Co Ltd
Original Assignee
Beijing Aibee Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Aibee Technology Co Ltd filed Critical Beijing Aibee Technology Co Ltd
Priority to CN202110925798.0A priority Critical patent/CN113591786A/zh
Publication of CN113591786A publication Critical patent/CN113591786A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computational Linguistics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Evolutionary Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种人体和人脸的匹配方法、装置、设备和存储介质；获取人脸框及其对应的嵌入特征和目标点位置，人体框及其对应的嵌入特征和目标点位置；处理人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到人体和每一个人脸的嵌入特征距离；处理人体框对应的目标点位置，和每一个人脸框对应的目标点位置，得到人体和每一个人脸的目标点距离；针对目标图像中的人体，选择用于表征人体和人脸最接近的嵌入特征距离、且用于表征人体和人脸最接近的目标点距离对应的人脸，作为人体的配对人脸，实现较高准确率的完成同属于一人的人体和人体的配对。

Description

人体和人脸的匹配方法、装置、设备和存储介质
技术领域
本发明涉及图像处理技术领域，尤其涉及一种人体和人脸的匹配方法、装置、设备和存储介质。
背景技术
人体识别和人脸识别，属于行人识别的两种常见手段。行人识别的一种实际场景中，还存在有将场景中同属于一人的人脸和人体进行配对的需求。一般情况下，先分别完成人脸检测和人体检测，之后，再采用匈牙利算法从检测到的人脸和人体中，完成同属于一人的人脸和人体的配对。
具体的，采用匈牙利算法从检测到的人脸和人体中，完成同属于一人的人脸和人体的配对的基本方式是，在发现一个人脸框在人体框中的覆盖范围超过一定程度，则认定该人脸框和人体框是属于同一人的。但是，在场景图像中包含有多个人，且多个人之间的身体重复度较高时，就会导致人脸和人体的配对错误。由此可以看出：目前方案对属于一人的人脸和人体的配对，匹配的准确率较低。
发明内容
有鉴于此，本发明实施例提供一种人体和人脸的匹配方法、装置、设备和存储介质，以实现较高准确率的完成同属于一人的人体和人体的配对。
为实现上述目的，本发明实施例提供如下技术方案：
第一方面，本申请提供了一种人体和人脸的匹配方法，包括：
获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置；其中，目标图像中的人脸框对应的嵌入特征表征与人脸框同属于一人的人体的语义信息，目标图像中的人体框对应的嵌入特征表征与人体框同属于一人的人脸的语义信息；
处理目标图像中的目标人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到目标图像中的目标人体和每一个人脸的嵌入特征距离；并处理目标图像中的目标人体框对应的目标点位置，和每一个人脸框对应的目标点位置，得到目标图像中的目标人体和每一个人脸的目标点距离；其中，目标人体框指代目标图像中的至少一个人体框，目标人体为目标人体框指代的人体，每一个人脸为每一个人脸框指代的人脸；
针对目标图像中的目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为目标人体的配对人脸。
可选地，针对目标图像中的目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为目标人体的配对人脸，包括：
计算得到第一相似度值和第二相似度值；其中，第一相似度值指代：目标图像中的目标人体和每一个人脸的嵌入特征距离对应的相似度值，第二相似度值指代：目标图像中的目标人体和每一个人脸的目标点距离对应的相似度；
组合第一相似度值和第二相似度值，得到融合相似度值；
针对目标图像中的目标人体，将融合相似度值最大的人脸，作为目标人体的配对人脸。
可选地，获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置，包括：
调用检测模型处理目标图像，得到目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置。
可选地，检测模型包括：基础模块、嵌入模块和预测模块；
基础模块用于处理目标图像，得到目标图像中的人脸框和人体框；
嵌入模块用于处理目标图像，得到人脸框对应的嵌入特征和人体框对应的嵌入特征；
预测模块用于得到目标图像中的人脸框对应的目标点位置和人体框对应的目标点位置。
可选地，检测模型在训练过程中，针对人脸和人体属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相靠近的损失函数，对检测模型进行训练；针对人脸和人体不属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相远离的损失函数，对检测模型进行训练。
可选地，检测模型在训练过程中，采用角度损失函数，对检测模型得到人脸框对应的目标点位置和人体框对应的目标点位置的功能进行训练，角度损失函数用于：促使目标图像中的人体框对应的目标点位置的预测值靠向实际值，以及促使人脸框对应的目标点位置的预测值靠向实际值。
可选地，检测模型为一阶段检测器，检测模型的嵌入模块，包括：四个卷积层以及在四个卷积层末端的一个膨胀卷积层；预测模块设置于一阶段检测器的膨胀卷积层后；
检测模型为二阶段检测器，检测模型的嵌入模块，包括：两个全连接层；预测模块设置于二阶段检测器的第二个全连接层后。
可选地，目标点位置包括：人头中心点位置，脖子的中心点位置，以及肩膀和大臂的一个或两个连接点位置；人体框包括：人体全身框，人体上半身框和人体上半躯干框。
第二方面，本申请提供了一种人体和人脸的匹配装置，包括：
调用单元，用于获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置；其中，目标图像中的人脸框对应的嵌入特征表征与人脸框同属于一人的人体的语义信息，目标图像中的人体框对应的嵌入特征表征与人体框同属于一人的人脸的语义信息；
处理单元，用于处理目标图像中的目标人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到目标图像中的目标人体和每一个人脸的嵌入特征距离；并处理目标图像中的目标人体框对应的目标点位置，和每一个人脸框对应的目标点位置，得到目标图像中的目标人体和每一个人脸的目标点距离；其中，目标人体框指代目标图像中的至少一个人体框，目标人体为目标人体框指代的人体，每一个人脸为每一个人脸框指代的人脸；
筛选单元，用于针对目标图像中的目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为目标人体的配对人脸。
可选地，筛选单元针对目标图像中的目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为目标人体的配对人脸时，用于：
计算得到第一相似度值和第二相似度值；其中，第一相似度值指代：目标图像中的目标人体和每一个人脸的嵌入特征距离对应的相似度值，第二相似度值指代：目标图像中的目标人体和每一个人脸的目标点距离对应的相似度；组合第一相似度值和第二相似度值，得到融合相似度值；针对目标图像中的目标人体，将融合相似度值最大的人脸，作为目标人体的配对人脸。
可选地，调用单元执行获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置时，用于：
调用检测模型处理目标图像，得到目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置。
可选地，检测模型包括：基础模块、嵌入模块和预测模块；
基础模块用于处理目标图像，得到目标图像中的人脸框和人体框；
嵌入模块用于处理目标图像，得到人脸框对应的嵌入特征和人体框对应的嵌入特征；
预测模块用于得到目标图像中的人脸框对应的目标点位置和人体框对应的目标点位置；
检测模型为一阶段检测器，检测模型的嵌入模块，包括：四个卷积层以及在四个卷积层末端的一个膨胀卷积层；预测模块设置于一阶段检测器的膨胀卷积层后；
检测模型为二阶段检测器，检测模型的嵌入模块，包括：两个全连接层；预测模块设置于二阶段检测器的第二个全连接层后。
可选地，还包括模型训练单元，模型训练单元训练检测模型过程中，针对人脸和人体属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相靠近的损失函数，对检测模型进行训练；针对人脸和人体不属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相远离的损失函数，对检测模型进行训练；
模型训练单元采用角度损失函数，对检测模型得到人脸框对应的目标点位置和人体框对应的目标点位置的功能进行训练，角度损失函数用于：促使目标图像中的人体框对应的目标点位置的预测值靠向实际值，以及促使人脸框对应的目标点位置的预测值靠向实际值。
第三方面，本申请提供了一种电子设备，包括：
一个或多个处理器；
存储器，其上存储有程序；
当程序被一个或多个处理器执行时，使得一个或多个处理器实现上述第一方面中任意一项的人体和人脸的匹配方法。
第四方面，本申请提供了一种电子设备，包括：
第一处理逻辑，被配置为：接收目标图像的图像数据并使用神经网络模型来处理图像数据以输出目标图像中人体部位的位置信息、嵌入特征和目标点位置；
其中，神经网络模型包括：
第一子网络，接收图像数据的特征表达数据，并输出检测到的人脸和人体的位置数据；
第二子网络，与第一子网络并行的接收特征表达数据，并输出人脸对应的嵌入特征和人脸对应的嵌入特征；
第三子网络，接收人脸和人体的位置数据，并输出人脸对应的目标点位置和人体对应的目标点位置。
可选地，还包括：
第二处理逻辑，被配置为：根据第二子网络输出的人脸对应的嵌入特征和人体对应的嵌入特征，以及第三子网络输出的人脸对应的目标点位置和人体对应的目标点位置，计算人脸与人体之间的嵌入特征距离和目标点距离，得到人脸与人体的匹配关系。
可选地，神经网络模型为一阶段检测网络，第二子网络接收的特征表达数据为目标图像的特征图，第二子网络包括四个卷积层和在四个卷积层末端的一个膨胀卷积层；第三子网络设置于一阶段检测器的膨胀卷积层后；
神经网络模型为二阶段检测网络，第二子网络接收的特征表达数据为目标图像的候选区域的特征图，第二子网络包括两个全连接层；第三子网络设置于二阶段检测器的第二个全连接层后。
第五方面，本申请提供了一种可读存储介质，其上存储有计算机程序，其中，计算机程序被处理器执行时实现如上述第一方面中任意一项的人体和人脸的匹配方法。
从上述技术方案可以看出，本申请实施例提供的人体和人脸的匹配方法中，获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，人体框及其对应的嵌入特征和目标点位置；处理目标图像中的人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到目标图像中的人体和每一个人脸的嵌入特征距离；处理目标图像中的人体框对应的目标点位置，和每一个人脸框对应的目标点位置，得到目标图像中的人体和每一个人脸的目标点距离；针对目标图像中的人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为人体的配对人脸，实现较高准确率的完成同属于一人的人体和人体的配对。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为申请实施例提供的检测模型的展示图；
图2为本申请实施例提供的角度损失函数的生成过程的展示图；
图3为本申请实施例提供的人体和人脸的匹配方法的流程图；
图4为本申请实施例提供的人体和人脸的匹配装置的结构示意图；
图5为本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本申请中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本发明实施例提供一种人体和人脸的匹配方法、装置、设备和存储介质，以实现较高准确率的完成同属于一人的人体和人体的配对。
本申请实施例提供的人体和人脸的匹配方法中，需要调用检测模型来处理目标图像，得到目标图像中的人脸框及其对应的嵌入特征，目标图像中的人体框及其对应的嵌入特征。可选地，人体框包括：人体全身框，人体上半身框和人体上半躯干框。
由此可知：本申请方案所利用的检测模型，是在人脸和人体的基本检测模型的基础上进行改进得到。示例性的，可以是在常见的一阶段检测器(One Stage)或者二阶段检测器(Two Stages)等架构上进行改进。
具体的，参见图1，在一阶段检测器或者二阶段检测器增加嵌入模块11，嵌入模块11与检测器(指代一阶段检测器和二阶段检测器)的原本模块(也称之为基础模块)并行运行。对于一阶段检测器，嵌入模块包括4个普通卷积层以及在4个普通卷积层末端的一个膨胀卷积层组成；对于二阶段检测器，嵌入模块包括两个全连接层fc1和fc2。嵌入模块的主要功能是要处理图像，得到图像中的人脸框对应的嵌入特征和人体框对应的嵌入特征。
并且，在一阶段检测器或者二阶段检测器的原本模块末端还追加一个预测模块，同样参见图1，在一阶段检测器的原本模块中的膨胀卷积层后追加预测模块，在二阶段检测器的原本模块中的全连接层fc2后追加预测模块，该预测模块的主要功能是处理图像，得到图像中的人脸框对应的人头中心点位置和人体框对应的人头中心点位置。
在搭建好检测模型的架构后，需要利用样本数据对检测模型进行训练，训练检测模型的原本模块、嵌入模块和预测模块，使得原本模块能够处理图像，得到图像中的人脸框和人体框，使得嵌入模块能够处理图像，得到图像中的人脸框对应的嵌入特征和人体框对应的嵌入特征，使得预测模块能够处理图像，得到图像中的人脸框对应的人头中心点位置和人体框对应的人头中心点位置。
还需要说明的是，利用预测模块处理图像，也可以得到图像中的人脸框对应的脖子的中心点位置，以及肩膀和大臂的一个或两个连接点位置，以及人体框对应的脖子的中心点位置，以及肩膀和大臂的一个或两个连接点位置。基于此，预测模块处理图像，得到的目标点位置包括：人头中心点位置，脖子的中心点位置，以及肩膀和大臂的一个或两个连接点位置。
具体的，为了训练检测模型的嵌入模块，按照如下目的构造损失函数：如果两个目标属于同一个行人(比如同一个行人的人体和人脸)，则让它们的嵌入特征互相靠近；反之，则让其互相远离。
对于样本数据中，属于同一行人k的人体框和人脸框，构造损失函数为：
Figure BDA0003209149800000081
其中，
Figure BDA0003209149800000082
分别代表该行人的第i个人体框的嵌入特征和第j个人脸框的嵌入特征，Mk和Nk代表围绕该人体和人脸的有效框的数量。通过优化该损失函数，使得
Figure BDA0003209149800000083
与
Figure BDA0003209149800000084
之间的欧氏离尽量地小(互相靠近)。
对于样本数据中，不属于同一个行人的人体框和人脸框，则构造损失函数为：
Figure BDA0003209149800000085
其中，δ是一个小正数(设为2)；Mk和Nl分别代表行人k的人体框数量和行人l的人脸框数量。通过优化该损失函数，使得
Figure BDA0003209149800000086
与
Figure BDA0003209149800000087
之间的欧氏离尽量地大(互相远离)。
基于上述内容，可以看出：在检测模型的训练过程中，针对人脸和人体属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相靠近的损失函数，对检测模型的嵌入模块进行训练；针对人脸和人体不属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相远离的损失函数，对检测模型的嵌入模块进行训练。
经过批量的样本数据的训练之后，检测模型的嵌入模块学习到了同属一个人的人体与人脸的语义关联性，包括位置关系、形态关系等。基于此，在利用训练后的检测模型对图像进行处理后，得到人脸框及其对应的嵌入特征，人体框及其对应的嵌入特征。人脸框对应的嵌入特征能够表征与该人脸框同属于一人的人体的语义信息，具体也可以是从人脸和人体的位置关系、形态关系进行说明的语义信息；同理，人体框对应的嵌入特征可以表征与该人体框同属于一人的人脸的语义信息，当然也可以是从人脸和人体的位置关系、形态关系进行说明的语义信息。
可以采用角度损失函数对预测模块进行训练，具体的对预测模块得到人脸框对应的前述的目标点位置和人体框对应的前述的目标点位置的功能进行训练。其中，角度损失函数的目的是为目标点提供一个基于相对位置的约束。
图2分别画出了基于人体21、人脸22和人头23来构造该角度损失函数的方法。现以基于人体的情形，且目标点为人头中心点为例进行说明。
b*代表人体中心点的实际位置，h*和h分别代表人头中心点(人头框图中由23指示)的实际位置和预测位置。构造向量v*和v,使得二者之间的夹角θ尽可能地小。损失函数表达式如下：
Figure BDA0003209149800000091
同理，在图2中，f*代表人脸中心点的实际位置，h*和h分别代表人头中心点的实际位置和预测位置。同样按照上述损失函数表达式可以构造向量v*和v,使得二者之间的夹角θ尽可能地小。
下述以人头中心点位置为例，来对人体和人脸的匹配方法进行介绍。
基于上述实施例训练得到的检测模型，本申请实施例提供了一种人体和人脸的匹配方法，如图3所示，包括：
S301、调用检测模型处理目标图像，得到目标图像中的人脸框及其对应的嵌入特征和人头中心点位置，以及目标图像中的人体框及其对应的嵌入特征和人头中心点位置。
其中，目标图像指代需要进行人脸和人体匹配的图像，图像中至少包括一张人脸和一个人体。将目标图像输入到训练完成的检测模型，检测模型中的原本模块处理目标图像，得到人体框和人脸框；嵌入模块处理目标图像，得到人脸框对应的嵌入特征和人体框对应的嵌入特征；预测模块处理目标图像，得到人脸框对应的人头中心点位置和人体框对应的人头中心点位置。
目标图像中的人脸框对应的嵌入特征用于表征与人脸属于同一人的人体的语义信息，目标图像中的人体框对应的嵌入特征用于表征与人体属于同一人的人脸的语义信息。人脸框对应的人头中心点位是指：人头中心在人脸框的位置；人体框对应的人头中心点位置是指：人头中心在人体框的位置。
需要说明的是，人脸框和人体框分别指代的是人脸框的坐标数据，以及人体框的坐标数据。
还需要说明的是，本步骤是获取目标图像中的人脸框及其对应的嵌入特征和人头中心点位置，以及目标图像中的人体框及其对应的嵌入特征和人头中心点位置中的一种实施方式。可知的，其他能够实现获取目标图像中的人脸框及其对应的嵌入特征和人头中心点位置，以及目标图像中的人体框及其对应的嵌入特征和人头中心点位置的方式，也属于本申请的涵盖范围。
S302、处理目标图像中的目标人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到目标图像中的目标人体和每一个人脸的嵌入特征距离。
其中，目标人体框指代目标图像中的至少一个人体框，目标人体为目标人体框指代的人体，每一个人脸为每一个人脸框指代的人脸。
目标图像可以获取到多个人体框，可以针对每一个人体框，均利用步骤S302计算出其指代的人体与每一个人脸的人头中心点距离。当然，也可以针对部分人体框中的每一个，利用步骤S302计算出其指代的人体和每一个人脸的人头中心点距离。
需要指出的是，针对目标图像中的每一个人体框，均需要计算出其与每一个人脸框对应的嵌入特征之间的嵌入特征距离(也称之为人体和人脸的嵌入特征距离)。可知的，人脸框对应的嵌入特征可以表征与人脸属于同一人的人体的语义信息，人体框对应的嵌入特征用于表征与人体属于同一人的人脸的语义信息，因此，利用一个人脸框对应的嵌入特征和人体框对应的嵌入特征计算出的嵌入特征距离，可以表征人脸框和人体框属于同一个人的概率。
S303、处理目标图像中的目标人体框对应的人头中心点位置，和每一个人脸框对应的人头中心点位置，得到目标图像中的目标人体和每一个人脸的人头中心点距离。
其中，目标人体框指代目标图像中的每一个人体框，目标人体为目标人体框指代的人体，每一个人脸为每一个人脸框指代的人脸。
人脸框对应的人头中心点位置指代人脸框中的人头中心点位置，也可以理解成是人头中心点的坐标数据，同理，人体框对应的人头中心点位置，也是指代人体框中的人头中心点位置，当然也是人头中心点的坐标数据。
同样，也需要针对图标图像中的每一个人体框，计算出该人体框对应的人头中心点位置，与每一个人脸框对应的人头中心点位置之间的距离(也称之为人体和人脸的人头中心点距离)。属于同一个人的人脸框和人体框，人脸框中的人头中心点位置和人体框中的人头中心点位置应该是一个，所以两者之间的距离，应该是最短的，如此，人脸框对应的人头中心点位置和人体框对应的人头中心点位置之间的距离，可以反应出人脸框和人体框，是否属于同一个人。
S304、针对目标图像中的目标人体，选择用于表征目标人体和人脸最接近的嵌入特征距离、且用于表征目标人体和人脸最接近的人头中心点距离对应的人脸，作为目标人体的配对人脸。
按照上述内容可知：一个人脸框对应的嵌入特征和一个人体框对应的嵌入特征计算出的嵌入特征距离，可以表征人脸框和人体框属于同一个人的概率。并且，一个人脸框对应的人头中心点位置和一个人体框对应的人头中心点位置之间的距离，也可以表征人脸框和人体框属于同一个人的概率，因此，可以通过嵌入特征距离和人头中心点距离，来为人体寻找配对的人脸。
可以理解的是，嵌入特征距离表征目标人体和人脸最接近是指：嵌入特征距离表征目标人体和人脸的嵌入特征距离最小。同理，人头中心点距离表征目标人体和人脸最接近也可以是指：目标人体和人脸的人头中心点距离最小。
还需要说明的是，针对目标图像中的目标人体，目标人体和人脸最接近的嵌入特征距离，作为一个设定条件配置到本方法的执行设备中，目标人体和人脸最接近的人头中心点距离，也作为一个设定条件配置到本方法的执行设备中，在该设备执行步骤S304，则利用该两个条件，筛选出目标图像中的目标人体的配对人脸。
可选地，本申请的另一实施例中，步骤S304的一种实施方式，包括：
计算得到第一相似度值和第二相似度值；其中，第一相似度值指代：目标图像中的目标人体和每一个人脸的嵌入特征距离对应的相似度值，第二相似度值指代：目标图像中的目标人体和每一个人脸的人头中心点距离对应的相似度。
组合第一相似度值和第二相似度值，得到融合相似度值。
针对目标图像中的目标人体，将融合相似度值最大的人脸，作为目标人体的配对人脸。
以下通过一个示例来进行说明，在本示例中，一帧画面中有m个人体和n个人脸，依据每一个人体和每一个人脸的嵌入特征距离，以及每一个人体和每一个人脸的人头中心点距离，可以获得两个尺寸为m×n的矩阵Se和Sh。
Figure BDA0003209149800000121
元素
Figure BDA0003209149800000122
是第i个人体与第j个人脸的嵌入特征距离通过径向基函数得到的相似度数值；元素
Figure BDA0003209149800000123
是第i个人体与第j个人脸的人头中心点距离通过径向基函数得到的相似度数值。
可知的：通过径向基函数得到的相似度数值的计算公式为：
Figure BDA0003209149800000124
在利用上述公式计算得到元素
Figure BDA0003209149800000125
和元素
Figure BDA0003209149800000126
时，dij分别是指第i个人体与第j个人脸的嵌入特征距离以及人头中心点距离。
用下述公式对两个相似度矩阵进行融合：
Figure BDA0003209149800000127
在上述公式中，J是尺寸为m×n的全1矩阵。
Figure BDA0003209149800000128
的尺寸也是m×n，其元素由相应行和列对应的人体和人脸预测框置信度取平均后得到；[.]°为逐元素取指数操作，指数λ设为2；⊙表示对应位置元素相乘。
获得融合后的相似度矩阵S后，对每一个人体(每一行)，取相似度最大的人脸(列)作为其配对人脸，从而获得最终的人体-人脸对。
本申请实施例提供了一种人体和人脸的匹配装置，参见图4，包括：
调用单元401，用于获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置；其中，目标图像中的人脸框对应的嵌入特征表征与人脸框同属于一人的人体的语义信息，目标图像中的人体框对应的嵌入特征表征与人体框同属于一人的人脸的语义信息。
处理单元402，用于处理目标图像中的目标人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到目标图像中的目标人体和每一个人脸的嵌入特征距离；并处理目标图像中的目标人体框对应的目标点位置，和每一个人脸框对应的目标点位置，得到目标图像中的目标人体和每一个人脸的目标点距离；其中，目标人体框指代目标图像中的至少一个人体框，目标人体为目标人体框指代的人体，每一个人脸为每一个人脸框指代的人脸。
筛选单元403，用于针对目标图像中的目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为目标人体的配对人脸。
在一个可能的实施方式中，筛选单元403针对目标图像中的目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为目标人体的配对人脸时，用于：
计算得到第一相似度值和第二相似度值；其中，第一相似度值指代：目标图像中的目标人体和每一个人脸的嵌入特征距离对应的相似度值，第二相似度值指代：目标图像中的目标人体和每一个人脸的人头中心点距离对应的相似度；组合第一相似度值和第二相似度值，得到融合相似度值；针对目标图像中的目标人体，将融合相似度值最大的人脸，作为目标人体的配对人脸。
在一个可能的实施方式中，调用单元执行获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置时，用于：
调用检测模型处理目标图像，得到目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及目标图像中的人体框及其对应的嵌入特征和目标点位置。
在一个可能的实施方式中，检测模型包括：基础模块、嵌入模块和预测模块；
基础模块用于处理目标图像，得到目标图像中的人脸框和人体框；
嵌入模块用于处理目标图像，得到人脸框对应的嵌入特征和人体框对应的嵌入特征；
预测模块用于得到目标图像中的人脸框对应的目标点位置和人体框对应的目标点位置；
检测模型为一阶段检测器，检测模型的嵌入模块，包括：四个卷积层以及在四个卷积层末端的一个膨胀卷积层；预测模块设置于一阶段检测器的膨胀卷积层后；
检测模型为二阶段检测器，检测模型的嵌入模块，包括：两个全连接层；预测模块设置于二阶段检测器的第二个全连接层后。
在一个可能的实施方式中，还包括模型训练单元，模型训练单元训练检测模型过程中，针对人脸和人体属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相靠近的损失函数，对检测模型进行训练；针对人脸和人体不属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相远离的损失函数，对检测模型进行训练；
模型训练单元采用角度损失函数，对检测模型得到人脸框对应的目标点位置和人体框对应的目标点位置的功能进行训练，角度损失函数用于：促使目标图像中的人体框对应的目标点位置的预测值靠向实际值，以及促使人脸框对应的目标点位置的预测值靠向实际值。
本申请上述几个实施例中，调用单元401、处理单元402以及筛选单元403的具体工作过程，可参见对应的方法实施例内容，此处不再赘述。当然，模型训练单元的工作过程，也可参见对应的方法实施例内容。
本申请另一实施例还提供了一种电子设备，如图5所示，包括：
一个或多个处理器501；
存储器502，其上存储有程序；
当程序被一个或多个处理器501执行时，使得一个或多个处理器501实现如上述任意一个实施例提供的人体和人脸的匹配方法。
本申请另一实施例还提供了一种可读存储介质，其上存储有计算机程序，其中，计算机程序被处理器执行时实现如上述任意一个实施例提供的人体和人脸的匹配方法。
本申请另一实施例还提供了一种电子设备，包括：
第一处理逻辑，被配置为：接收目标图像的图像数据并使用神经网络模型来处理图像数据以输出目标图像中人体部位的位置信息、嵌入特征和目标点位置；
其中，神经网络模型包括：
第一子网络，接收图像数据的特征表达数据，并输出检测到的人脸和人体的位置数据；
第二子网络，与第一子网络并行的接收特征表达数据，并输出人脸对应的嵌入特征和人脸对应的嵌入特征；
第三子网络，接收人脸和人体的位置数据，并输出人脸对应的目标点位置和人体对应的目标点位置。
本实施例中，第一处理逻辑属于电子设备中的执行部件，可以理解成处理器或者处理器中的执行单元。
神经网络模型即前述提及的检测模型，第一子网络属于检测器的原本模块中的一个执行模块，该模块具有得到人脸的位置信息和人体的位置信息的功能。第二子网络属于检测器中的嵌入模块，第三子网络属于检测器中的预测模块。
在一个可能的实施方式中，神经网络模型为一阶段检测网络，第二子网络接收的特征表达数据为目标图像的特征图，第二子网络包括四个卷积层和在四个卷积层末端的一个膨胀卷积层；第三子网络设置于一阶段检测器的膨胀卷积层后；
神经网络模型为二阶段检测网络，第二子网络接收的特征表达数据为目标图像的候选区域的特征图，第二子网络包括两个全连接层；第三子网络设置于二阶段检测器的第二个全连接层后。
在一个可能的实施方式中，该电子设备还包括：
第二处理逻辑，被配置为：根据第二子网络输出的人脸对应的嵌入特征和人体对应的嵌入特征，以及第三子网络输出的人脸对应的目标点位置和人体对应的目标点位置，计算人脸与人体之间的嵌入特征距离和目标点距离，得到人脸与人体的匹配关系。
本实施方式中，第二处理逻辑，与第一处理逻辑等同，属于电子设备中的执行部件，可以理解成处理器或者处理器中的执行单元。
采用前述对应图3的实施例中步骤S302和步骤S303的内容，计算得到的人脸与人体之间的嵌入特征距离和目标点距离，进一步的，还可以是人脸与人体之间的嵌入特征和目标点距离对应的相似度值。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (18)

1.一种人体和人脸的匹配方法，其特征在于，包括：
获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及所述目标图像中的人体框及其对应的嵌入特征和目标点位置；其中，所述目标图像中的人脸框对应的嵌入特征表征与所述人脸框同属于一人的人体的语义信息，所述目标图像中的人体框对应的嵌入特征表征与所述人体框同属于一人的人脸的语义信息；
处理所述目标图像中的目标人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到所述目标图像中的目标人体和每一个人脸的嵌入特征距离；并处理所述目标图像中的目标人体框对应的目标点位置，和每一个人脸框对应的目标点位置，得到所述目标图像中的目标人体和每一个人脸的目标点距离；其中，所述目标人体框指代所述目标图像中的至少一个人体框，所述目标人体为所述目标人体框指代的人体，所述每一个人脸为每一个所述人脸框指代的人脸；
针对所述目标图像中的所述目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为所述目标人体的配对人脸。
2.根据权利要求1所述的人体和人脸的匹配方法，其特征在于，所述针对所述目标图像中的所述目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为所述目标人体的配对人脸，包括：
计算得到第一相似度值和第二相似度值；其中，所述第一相似度值指代：所述目标图像中的目标人体和每一个人脸的嵌入特征距离对应的相似度值，所述第二相似度值指代：所述目标图像中的目标人体和每一个人脸的目标点距离对应的相似度；
组合所述第一相似度值和所述第二相似度值，得到融合相似度值；
针对所述目标图像中的目标人体，将所述融合相似度值最大的人脸，作为所述目标人体的配对人脸。
3.根据权利要求1所述的人体和人脸的匹配方法，其特征在于，所述获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及所述目标图像中的人体框及其对应的嵌入特征和目标点位置，包括：
调用检测模型处理所述目标图像，得到所述目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及所述目标图像中的人体框及其对应的嵌入特征和目标点位置。
4.根据权利要求3所述的人体和人脸的匹配方法，其特征在于，所述检测模型包括：基础模块、嵌入模块和预测模块；
所述基础模块用于处理所述目标图像，得到所述目标图像中的人脸框和所述人体框；
所述嵌入模块用于处理所述目标图像，得到所述人脸框对应的嵌入特征和所述人体框对应的嵌入特征；
所述预测模块用于得到所述目标图像中的人脸框对应的目标点位置和所述人体框对应的目标点位置。
5.根据权利要求3或4所述的人体和人脸的匹配方法，其特征在于，所述检测模型在训练过程中，针对人脸和人体属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相靠近的损失函数，对所述检测模型进行训练；针对人脸和人体不属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相远离的损失函数，对所述检测模型进行训练。
6.根据权利要求3或4所述的人体和人脸的匹配方法，其特征在于，所述检测模型在训练过程中，采用角度损失函数，对所述检测模型得到人脸框对应的目标点位置和人体框对应的目标点位置的功能进行训练，所述角度损失函数用于：促使目标图像中的人体框对应的目标点位置的预测值靠向实际值，以及促使所述人脸框对应的目标点位置的预测值靠向实际值。
7.根据权利要求4所述的人体和人脸的匹配方法，其特征在于，所述检测模型为一阶段检测器，所述检测模型的嵌入模块，包括：四个卷积层以及在四个所述卷积层末端的一个膨胀卷积层；所述预测模块设置于所述一阶段检测器的膨胀卷积层后；
所述检测模型为二阶段检测器，所述检测模型的嵌入模块，包括：两个全连接层；所述预测模块设置于所述二阶段检测器的第二个全连接层后。
8.根据权利要求1至4中任意一项所述的人体和人脸的匹配方法，其特征在于，所述目标点位置包括：人头中心点位置，脖子的中心点位置，以及肩膀和大臂的一个或两个连接点位置；所述人体框包括：人体全身框，人体上半身框和人体上半躯干框。
9.一种人体和人脸的匹配装置，其特征在于，包括：
调用单元，用于获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及所述目标图像中的人体框及其对应的嵌入特征和目标点位置；其中，所述目标图像中的人脸框对应的嵌入特征表征与所述人脸框同属于一人的人体的语义信息，所述目标图像中的人体框对应的嵌入特征表征与所述人体框同属于一人的人脸的语义信息；
处理单元，用于处理所述目标图像中的目标人体框对应的嵌入特征，和每一个人脸框对应的嵌入特征，得到所述目标图像中的目标人体和每一个人脸的嵌入特征距离；并处理所述目标图像中的目标人体框对应的目标点位置，和每一个人脸框对应的目标点位置，得到所述目标图像中的目标人体和每一个人脸的目标点距离；其中，所述目标人体框指代所述目标图像中的至少一个人体框，所述目标人体为所述目标人体框指代的人体，所述每一个人脸为每一个所述人脸框指代的人脸；
筛选单元，用于针对所述目标图像中的所述目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为所述目标人体的配对人脸。
10.根据权利要求9所述的人体和人脸的匹配装置，其特征在于，所述筛选单元针对所述目标图像中的所述目标人体，选择符合第一条件的嵌入特征距离、且符合第二条件的目标点距离对应的人脸，作为所述目标人体的配对人脸时，用于：
计算得到第一相似度值和第二相似度值；其中，所述第一相似度值指代：所述目标图像中的目标人体和每一个人脸的嵌入特征距离对应的相似度值，所述第二相似度值指代：所述目标图像中的目标人体和每一个人脸的目标点距离对应的相似度；组合所述第一相似度值和所述第二相似度值，得到融合相似度值；针对所述目标图像中的目标人体，将所述融合相似度值最大的人脸，作为所述目标人体的配对人脸。
11.根据权利要求9所述的人体和人脸的匹配装置，其特征在于，所述调用单元执行获取目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及所述目标图像中的人体框及其对应的嵌入特征和目标点位置时，用于：
调用检测模型处理所述目标图像，得到所述目标图像中的人脸框及其对应的嵌入特征和目标点位置，以及所述目标图像中的人体框及其对应的嵌入特征和目标点位置。
12.根据权利要求11所述的人体和人脸的匹配装置，其特征在于，所述检测模型包括：基础模块、嵌入模块和预测模块；
所述基础模块用于处理所述目标图像，得到所述目标图像中的人脸框和所述人体框；
所述嵌入模块用于处理所述目标图像，得到所述人脸框对应的嵌入特征和所述人体框对应的嵌入特征；
所述预测模块用于得到所述目标图像中的人脸框对应的目标点位置和所述人体框对应的目标点位置；
所述检测模型为一阶段检测器，所述检测模型的嵌入模块，包括：四个卷积层以及在四个所述卷积层末端的一个膨胀卷积层；所述预测模块设置于所述一阶段检测器的膨胀卷积层后；
所述检测模型为二阶段检测器，所述检测模型的嵌入模块，包括：两个全连接层；所述预测模块设置于所述二阶段检测器的第二个全连接层后。
13.根据权利要求11或12所述的人体和人脸的匹配装置，其特征在于，还包括模型训练单元，所述模型训练单元训练所述检测模型过程中，针对人脸和人体属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相靠近的损失函数，对所述检测模型进行训练；针对人脸和人体不属于同一人的样本数据，采用促使人体框对应的嵌入特征和人脸框对应的嵌入特征互相远离的损失函数，对所述检测模型进行训练；
所述模型训练单元采用角度损失函数，对所述检测模型得到人脸框对应的目标点位置和人体框对应的目标点位置的功能进行训练，所述角度损失函数用于：促使目标图像中的人体框对应的目标点位置的预测值靠向实际值，以及促使所述人脸框对应的目标点位置的预测值靠向实际值。
14.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储器，其上存储有程序；
当所述程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1至8中任意一项所述的人体和人脸的匹配方法。
15.一种电子设备，其特征在于，包括：
第一处理逻辑，被配置为：接收目标图像的图像数据并使用神经网络模型来处理所述图像数据以输出所述目标图像中人体部位的位置信息、嵌入特征和目标点位置；
其中，所述神经网络模型包括：
第一子网络，接收所述图像数据的特征表达数据，并输出检测到的人脸和人体的位置数据；
第二子网络，与所述第一子网络并行的接收所述特征表达数据，并输出所述人脸对应的嵌入特征和所述人脸对应的嵌入特征；
第三子网络，接收所述人脸和人体的位置数据，并输出所述人脸对应的目标点位置和所述人体对应的目标点位置。
16.根据权利要求15所述的电子设备，其特征在于，还包括：
第二处理逻辑，被配置为：根据所述第二子网络输出的所述人脸对应的嵌入特征和所述人体对应的嵌入特征，以及所述第三子网络输出的所述人脸对应的目标点位置和所述人体对应的目标点位置，计算所述人脸与所述人体之间的嵌入特征距离和目标点距离，得到人脸与人体的匹配关系。
17.根据权利要求15所述的电子设备，其特征在于，
所述神经网络模型为一阶段检测网络，所述第二子网络接收的所述特征表达数据为所述目标图像的特征图，所述第二子网络包括四个卷积层和在四个所述卷积层末端的一个膨胀卷积层；所述第三子网络设置于所述一阶段检测器的膨胀卷积层后；
所述神经网络模型为二阶段检测网络，所述第二子网络接收的所述特征表达数据为所述目标图像的候选区域的特征图，所述第二子网络包括两个全连接层；所述第三子网络设置于所述二阶段检测器的第二个全连接层后。
18.一种可读存储介质，其特征在于，其上存储有计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1至8中任意一项所述的人体和人脸的匹配方法。
CN202110925798.0A 2021-08-12 2021-08-12 人体和人脸的匹配方法、装置、设备和存储介质 Pending CN113591786A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110925798.0A CN113591786A (zh) 2021-08-12 2021-08-12 人体和人脸的匹配方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110925798.0A CN113591786A (zh) 2021-08-12 2021-08-12 人体和人脸的匹配方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN113591786A true CN113591786A (zh) 2021-11-02

Family

ID=78257705

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110925798.0A Pending CN113591786A (zh) 2021-08-12 2021-08-12 人体和人脸的匹配方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN113591786A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109740516A (zh) * 2018-12-29 2019-05-10 深圳市商汤科技有限公司 一种用户识别方法、装置、电子设备及存储介质
CN111178208A (zh) * 2019-12-20 2020-05-19 华瑞新智科技（北京）有限公司 基于深度学习的行人检测方法、装置及介质
CN111738231A (zh) * 2020-08-06 2020-10-02 腾讯科技（深圳）有限公司 目标对象检测方法、装置、计算机设备和存储介质
CN112464809A (zh) * 2020-11-26 2021-03-09 北京奇艺世纪科技有限公司 一种人脸关键点检测方法、装置、电子设备及存储介质
CN113205138A (zh) * 2021-04-30 2021-08-03 四川云从天府人工智能科技有限公司 人脸人体匹配方法、设备和存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109740516A (zh) * 2018-12-29 2019-05-10 深圳市商汤科技有限公司 一种用户识别方法、装置、电子设备及存储介质
CN111178208A (zh) * 2019-12-20 2020-05-19 华瑞新智科技（北京）有限公司 基于深度学习的行人检测方法、装置及介质
CN111738231A (zh) * 2020-08-06 2020-10-02 腾讯科技（深圳）有限公司 目标对象检测方法、装置、计算机设备和存储介质
CN112464809A (zh) * 2020-11-26 2021-03-09 北京奇艺世纪科技有限公司 一种人脸关键点检测方法、装置、电子设备及存储介质
CN113205138A (zh) * 2021-04-30 2021-08-03 四川云从天府人工智能科技有限公司 人脸人体匹配方法、设备和存储介质

Similar Documents

Publication Publication Date Title
CN110998604B (zh) 有局部外观的对象的识别与重构
CN112559784B (zh) 基于增量学习的图像分类方法及系统
CN110264444B (zh) 基于弱分割的损伤检测方法及装置
CN110660078B (zh) 对象追踪方法、装置、计算机设备和存储介质
CN109798888B (zh) 移动设备的姿态确定装置、方法和视觉里程计
CN112926462B (zh) 训练方法、装置、动作识别方法、装置及电子设备
CN109101866B (zh) 基于分割剪影的行人再识别方法及系统
CN113205142A (zh) 一种基于增量学习的目标检测方法和装置
CN111178358A (zh) 文本识别方法、装置、计算机设备和存储介质
CN111652181B (zh) 目标跟踪方法、装置及电子设备
CN116964588A (zh) 一种目标检测方法、目标检测模型训练方法及装置
CN111444850A (zh) 一种图片检测的方法和相关装置
CN112215301B (zh) 基于卷积神经网络的影像直线探测方法
CN111598117A (zh) 图像识别方法及装置
CN112001229B (zh) 视频行为识别的方法、装置、系统和计算机设备
CN113780145A (zh) 精子形态检测方法、装置、计算机设备和存储介质
CN113591786A (zh) 人体和人脸的匹配方法、装置、设备和存储介质
CN115424346A (zh) 一种人体坐姿检测方法、装置、计算机设备及系统
CN113591785A (zh) 人体部位的匹配方法、装置、设备和存储介质
CN113591783A (zh) 人体和人脸的匹配方法、装置、设备和存储介质
CN115856874A (zh) 毫米波雷达点云降噪方法、装置、设备及存储介质
CN115346270A (zh) 交警手势识别方法、装置、电子设备及存储介质
CN114863201A (zh) 三维检测模型的训练方法、装置、计算机设备和存储介质
CN114022516A (zh) 一种基于高秩特征和位置注意力的双模态视觉跟踪方法
JP7239002B2 (ja) 物体数推定装置、制御方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination