CN109637664A - 一种bmi评测方法、装置及计算机可读存储介质 - Google Patents

一种bmi评测方法、装置及计算机可读存储介质 Download PDF

Info

Publication number
CN109637664A
CN109637664A CN201811384493.8A CN201811384493A CN109637664A CN 109637664 A CN109637664 A CN 109637664A CN 201811384493 A CN201811384493 A CN 201811384493A CN 109637664 A CN109637664 A CN 109637664A
Authority
CN
China
Prior art keywords
bmi
face
facial image
facial
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811384493.8A
Other languages
English (en)
Inventor
石磊
马进
王健宗
肖京
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201811384493.8A priority Critical patent/CN109637664A/zh
Publication of CN109637664A publication Critical patent/CN109637664A/zh
Priority to PCT/CN2019/088637 priority patent/WO2020103417A1/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Medical Informatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Public Health (AREA)
  • Multimedia (AREA)
  • Pathology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Databases & Information Systems (AREA)
  • Biomedical Technology (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及智能决策技术领域，公开了一种BMI评测方法，该方法包括：采集样本人脸图像数据，所述样本人脸图像数据包括BMI值；采用卷积神经网络训练样本人脸图像数据，获得训练模型；获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。本发明还提出一种BMI评测装置以及一种计算机可读存储介质。本发明实现了一种快速实时检测BMI值，降低了测量者的测量BMI的难度。

Description

一种BMI评测方法、装置及计算机可读存储介质
技术领域
本发明涉及智能决策技术领域，尤其涉及一种BMI评测方法、装置及计算机可读存储介质。
背景技术
BMI指数(身体质量指数，简称体质指数，又称体重指数，英文为Body Mass Index，简称BMI)是一个与身高体重有关的能反映身体质量指数/肥胖指数的参数，是用体重公斤数除以身高米数平方得出的数字。主要用于统计，当需要比较及分析一个人的体重对于不同高度的人所带来的健康影响时，BMI值是一个中立而可靠的指标，是国际上常用的衡量人体胖瘦程度以及是否健康的一个标准。BMI是与体内脂肪总量密切相关的指标,该指标考虑了体重和身高两个因素。BMI简单、实用、可反映全身性超重和肥胖。在测量身体因超重而面临心脏病、高血压等风险时，比单纯的以体重来认定，更具准确性。目前评测BMI较普遍采用的计算方法有两种：一种是：成年:〔身高(cm)-100〕×0.9＝标准体重(kg)另一种是：男性:身高(cm)-105＝标准体重(kg)，女性:身高(cm)-100＝标准体重(kg)。
传统的BMI获取方式，需要首先测量待测者的身高和体重信息，这些信息需要利用身高体重测试仪或人工使用其他测量传感器进行，再进行数值计算，得出最终的BMI指标，不仅需要特定的仪器(通常这类仪器不便于携带)进行测量，而且使用程序繁琐耗时耗力，而且测量缓慢，对于需要及时测量身高体重的快速发育的青少年儿童，和需要降低BMI的减肥人群，无法做到实时快捷方便地有效测量。
发明内容
本发明提供一种BMI评测方法、装置及计算机可读存储介质，其主要目的在于快速实时检测BMI值，降低测量者的测量BMI的难度。
为实现上述目的，本发明还提供一种BMI评测方法，该方法包括：
采集样本人脸图像数据，所述样本人脸图像数据包括BMI值；
采用卷积神经网络训练样本人脸图像数据，获得训练模型；
获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；
对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；
根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
可选的，步骤对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像的同时，还包括步骤：
根据相机参数对人脸轮廓区域的每个像素的RGB色度分量，逐点进行色度校正和亮度校正。
可选的，步骤采用卷积神经网络训练样本人脸图像数据，获得训练模型，还包括步骤：
将人脸图像剪裁成大小为224*224的图像；
将所述剪裁后的图像转成leveldb格式；
用所述leveldb格式图像训练卷积神经网络VGG-16；
用softmax函数输出BMI极低、BMI正常、BMI极高三个类别值的概率值，输出值为最大概率值对应的类别值。
可选的，步骤获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；进一步包括步骤：
获取待检测的人脸图像，采用主动形状模型算法对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，采用sobel算子进行人脸轮廓提取，剔除人脸区域之外的背景，获取人脸轮廓；
对所述人脸轮廓根据透视视角采用二维线性插值算法进行等比例拉伸，获得预处理后人脸图像。
可选的，所述获取待检测的人脸图像，根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值的步骤之后，还包括步骤：
获取用户上传的实测BMI值；
将所述评测BMI值与所述实测BMI值采用卷积网络模型进行微调训练；
更新迭代所述训练模型。
本发明实施例还包括一种BMI评测装置，所述装置包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的BMI评测程序，所述BMI评测程序被所述处理器执行时实现如下步骤：
采集样本人脸图像数据，所述样本人脸图像数据包括BMI值；
采用卷积神经网络训练样本人脸图像数据，获得训练模型；
获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；
对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；
根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
可选的，步骤对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像的同时，还包括步骤：
根据相机参数对人脸轮廓区域的每个像素的RGB色度分量，逐点进行色度校正和亮度校正。
可选的，步骤采用卷积神经网络训练样本人脸图像数据，获得训练模型，还包括步骤：
将人脸图像剪裁成大小为224*224的图像；
将所述剪裁后的图像转成leveldb格式；
用所述leveldb格式图像训练卷积神经网络VGG-16；
用softmax函数输出BMI极低、BMI正常、BMI极高三个类别值的概率值，输出值为最大概率值对应的类别值。
可选的，步骤获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；进一步包括步骤：
获取待检测的人脸图像，采用主动形状模型算法对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，采用sobel算子进行人脸轮廓提取，剔除人脸区域之外的背景，获取人脸轮廓；
对所述人脸轮廓根据透视视角采用二维线性插值算法进行等比例拉伸，获得预处理后人脸图像。
本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有BMI评测程序，所述程序可被一个或者多个处理器执行，以实现上述所述的方法的步骤。
本发明提出的BMI评测方法、装置及计算机可读存储介质，通过预先采集人脸图像与BMI值，经过学习算法训练网络模型，根据训练好的网络模型预测待检测的人脸图像的BMI值，无需复杂的测量设备，就能自动完成BMI检测，不仅大大降低了BMI测量者的测量难度，还能实时测量供测量者监控自身的健康状况。
附图说明
图1为本发明一实施例提供的BMI评测方法的流程示意图；
图2为本发明一实施例提供的标记脸部特征点的人脸示意图；
图3为本发明一实施例提供的采用sobel算子进行边缘轮廓提取的效果图；
图4为本发明一实施例提供的双线性插值的模型示意图；
图5为本发明一实施例提供的BMI评测装置的内部结构示意图；
图6为本发明一实施例提供的BMI评测装置中BMI评测程序的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明提供一种BMI评测方法。参照图1所示，图1为本发明一实施例提供的BMI评测方法的流程示意图。该方法可以由一个装置执行，该装置可以由软件和/或硬件实现。
在本实施例中，BMI评测方法包括：
步骤S10，采集样本人脸图像数据，所述样本人脸图像数据包括BMI值。
步骤S20，采用卷积神经网络训练样本人脸图像数据，获得训练模型。
具体的，可以由线上服务器收集一万张带有BMI值的样本人脸图像，在caffe深度学习框架下训练卷积神经网络。
所述卷积神经网络的训练包括：首先将人脸图像统一剪裁为大小为224*224的图像，再转成统一的leveldb格式，最后用这些图像训练卷积神经网络VGG-16。所使用的卷积神经网络包括1个数据输入层，13个卷积层，3个全连接层。13个卷积层的卷积核个数分别为64、64、128、128、256、256、256、512、512、512、512、512、512。第2个卷积层与第3个卷积层之间、第4个卷积层与第5个卷积层之间、第7个卷积层与第8个卷积层之间、第4个卷积层与第5个卷积层之间、第10个卷积层与第11个卷积层之间、第13个卷积层和第1个全连接层之间，均连接了一个池化层，上述13个卷积层和3个全连接层均用ReLU(非线性激活函数)进行处理。将VGG-16网络模型的最后一层去掉重新训练，最后采用softmax函数输出BMI极低、BMI正常、BMI极高三个类别值的概率值，输出值为最大概率值对应的类别值。softmax函数能将一个含任意实数的K维向量z“压缩”到另一个K维实向量σ(z)中，使得每一个元素的范围都在(0，1)之间，并且所有元素的和为1。例如，输入向量[BMI极低,BMI正常,BMI极高]对应的Softmax函数的值为[0.2,0.5,0.3]，那么输出向量中拥有最大权重的项对应着输入向量中的最大值“BMI正常”。
步骤S30，获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点。
具体的，可以通过线下终端的图像采集单元，如手机的摄像头，采集待检测的用户人脸图像，并通过网络传送单元，将所述人脸图像发送到线上服务器，同时将所述图像采集单元的相机参数也一并发送给线上服务器，手机上同步显示采集的人脸图像的效果图。
具体的，对人脸图像的人脸关键特征点进行定位的方法如下。可选的，本实施例采用主动形状模型(Active Shape Model，ASM)算法对人脸关键特征点进行定位。
该ASM算法的基本思路是：将人脸的纹理特征和各个特征点之间的位置约束相结合。ASM算法分为训练和搜索两步。训练时，建立各个特征点的位置约束，构建各个特定点的局部特征。搜索时，迭代地进行匹配。
ASM的训练步骤具体如下：首先，构建形状模型：搜集n个人脸的训练样本(n＝400)；手动标记脸部特征点，如图2所示，图2为标记脸部特征点的人脸示意图；将训练集中特征点的坐标串成特征向量；对形状进行归一化和对齐(对齐采用Procrustes方法)；对对齐后的形状特征做PCA处理。所述PCA处理的基本原理为：设有m条n维数据，1)将原始数据按列组成n行m列矩阵X；2)将X的每一行(代表一个属性字段)进行零均值化，即减去这一行的均值；3)求出协方差矩阵；4)求出协方差矩阵的特征值及对应的特征向量r；5)将特征向量按对应特征值大小从上到下按行排列成矩阵，取前k行组成矩阵P；6)即为降维到k维后的数据。
接着，为每个特征点构建局部特征。目的是在每次迭代搜索过程中每个特征点可以寻找新的位置。局部特征一般用梯度特征，以防光照变化。有的方法沿着边缘的法线方向提取，有的方法在特征点附近的矩形区域提取。
接着进行ASM的搜索步骤，具体如下：首先，计算眼睛(或者眼睛和嘴巴)的位置，做简单的尺度和旋转变化，对齐人脸；接着，匹配每个局部特征点(常采用马氏距离)，计算新的位置；得到仿射变换的参数，迭代直到收敛。另外，常采用多尺度的方法加速。搜索的过程最终收敛到高分辨率的原图像上。
步骤S40，根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓。
在获取能够标识眉毛、下颌的人脸关键点后，以此为依据确定眼睛、鼻子和嘴巴的相对坐标，然后进行人脸轮廓提取。可选的，采用sobel算子进行人脸轮廓提取，剔除人脸区域之外的背景。Sobel算子是一个离散微分算子，它结合了高斯平滑和微分求导，用来计算图像灰度函数的近似梯度。其基本原理是对传进来的图像像素做卷积，卷积的实质是在求梯度值，或者说给了一个加权平均，其中权值就是所谓的卷积核；然后对生成的新像素灰度值做阈值运算，以此来确定边缘信息。图像边缘,相素值会发生显著的变化了。表示这一改变的一个方法是使用导数。梯度值的大变预示着图像中内容的显著变化。若Gx是对原图x方向上的卷积，Gy是对原图y方向上的卷积，原图中的作用点像素值通过卷积之后为：得到像素点新的像素值之后，给定一个阈值就可以得到sobel算子计算出的图像边缘了。如图3所示，图3是采用sobel算子进行边缘轮廓提取的效果图。
步骤S50，对人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像。
可选的，对人脸轮廓根据透视视角采用二维线性插值算法进行等比例拉伸。假设源图像大小为m×n，目标图像为a×b。那么两幅图像的边长比分别为：m/a和n/b。注意，通常这个比例不是整数，编程存储的时候要用浮点型。目标图像的第(i,j)个像素点(i行j列)可以通过边长比对应回源图像。其对应坐标为(i×m/a,j×n/b)。显然，这个对应坐标一般来说不是整数，而非整数的坐标是无法在图像这种离散数据上使用的。双线性插值通过寻找距离这个对应坐标最近的四个像素点，来计算该点的值(灰度值或者RGB值)。若图像为灰度图像，那么(i，j)点的灰度值的数学计算模型是：,f(x,y)＝b1+b2x+b3y+b4xy。其中b1,b2,b3,b4是相关的系数。关于其计算过程如下：如图4所示，图4为双线性插值的模型示意图。已知Q12，Q22，Q11，Q21，但是要插值的点为P点，这就要用双线性插值了，首先在x轴方向上，对R1和R2两个点进行插值，然后根据R1和R2对P点进行插值，这就是双线性插值。
可选的，对人脸轮廓进行拉伸处理的同时，还包括根据相机参数对人脸轮廓的每个像素的RGB色度分量，逐点进行色度校正和亮度校正，以减少图像采集环境中的光线、摄像头的参数等的影响。经过轮廓提取和畸变校正后的人脸图像，
步骤S60，根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
可选的，所述人脸图像的评测BMI值可以为BMI极低、BMI正常或者BMI极高，将评测BMI值实时返回给线下终端，例如智能手机、平板电脑、便携计算机。
本实施例提出的BMI评测方法，进一步地，在本发明方法的另一实施例中，该方法在步骤S60后还包括如下步骤：
获取用户上传的实测BMI值；
将所述评测BMI值与所述实测BMI值采用卷积网络模型进行微调训练；
更新迭代所述学习模型。
具体的，用户在获得所述学习模型评测的评测BMI值以后，可以选择上传该用户的经过实际测量的实测BMI值，以对所述学习模型进行微调训练，实现模型的快速更新迭代。微调学习模型的时候，以前述10000个人脸样本为例，将前8000个小批量样本的学习率设置为0.001，后2000个小批量样本的学习率设置为0.0001，每次迭代的小批量大小为300，动量值设置为0.9，权重衰减值为0.0005。
对不同的用户，针对其上传的经过实测的实测BMI值，增大其人脸图片在训练过程中的权重，以增强学习模型的泛化性，更好匹配该用户的实际身体情况。
本发明还提供一种BMI评测装置。参照图2所示，为本发明一实施例提供的装置的内部结构示意图。
在本实施例中，装置1可以是个人电脑(Personal Computer，PC)，也可以是智能手机、平板电脑、便携计算机等终端设备。该BMI评测装置1至少包括存储器11、处理器12，通信总线13，以及网络接口14。
其中，存储器11至少包括一种类型的可读存储介质，所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等)、磁性存储器、磁盘、光盘等。存储器11在一些实施例中可以是BMI评测装置1的内部存储单元，例如该BMI评测装置1的硬盘。存储器11在另一些实施例中也可以是BMI评测装置1的外部存储设备，例如BMI评测装置1上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，存储器11还可以既包括BMI评测装置1的内部存储单元也包括外部存储设备。存储器11不仅可以用于存储安装于BMI评测装置1的应用软件及各类数据，例如BMI评测程序01的代码等，还可以用于暂时地存储已经输出或者将要输出的数据。
处理器12在一些实施例中可以是一中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器或其他数据处理芯片，用于运行存储器11中存储的程序代码或处理数据，例如执行BMI评测程序01等。
通信总线13用于实现这些组件之间的连接通信。
网络接口14可选的可以包括标准的有线接口、无线接口(如WI-FI接口)，通常用于在该装置1与其他电子设备之间建立通信连接。
可选地，该装置1还可以包括用户接口，用户接口可以包括显示器(Display)、输入单元比如键盘(Keyboard)，可选的用户接口还可以包括标准的有线接口、无线接口。可选地，在一些实施例中，显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及有机发光二极管(Organic Light-Emitting Diode，OLED)触摸器等。其中，显示器也可以适当的称为显示屏或显示单元，用于显示在BMI评测装置1中处理的信息以及用于显示可视化的用户界面。
图2仅示出了具有组件11-14以及BMI评测程序01的BMI评测装置1，本领域技术人员可以理解的是，图1示出的结构并不构成对BMI评测装置1的限定，可以包括比图示更少或者更多的部件，或者组合某些部件，或者不同的部件布置。
在图2所示的装置1实施例中，存储器11中存储有BMI评测程序01；处理器12执行存储器11中存储的BMI评测程序01时实现如下步骤：
步骤S10，采集样本人脸图像数据，所述样本人脸图像数据包括BMI值。
步骤S20，采用卷积神经网络训练样本人脸图像数据，获得训练模型。
具体的，可以由线上服务器收集一万张带有BMI值的样本人脸图像，在caffe深度学习框架下训练卷积神经网络。
所述卷积神经网络的训练包括：首先将人脸图像统一剪裁为大小为224*224的图像，再转成统一的leveldb格式，最后用这些图像训练卷积神经网络VGG-16。所使用的卷积神经网络包括1个数据输入层，13个卷积层，3个全连接层。13个卷积层的卷积核个数分别为64、64、128、128、256、256、256、512、512、512、512、512、512。第2个卷积层与第3个卷积层之间、第4个卷积层与第5个卷积层之间、第7个卷积层与第8个卷积层之间、第4个卷积层与第5个卷积层之间、第10个卷积层与第11个卷积层之间、第13个卷积层和第1个全连接层之间，均连接了一个池化层，上述13个卷积层和3个全连接层均用ReLU(非线性激活函数)进行处理。将VGG-16网络模型的最后一层去掉重新训练，最后采用softmax函数输出BMI极低、BMI正常、BMI极高三个类别值的概率值，输出值为最大概率值对应的类别值。softmax函数能将一个含任意实数的K维向量z“压缩”到另一个K维实向量σ(z)中，使得每一个元素的范围都在(0，1)之间，并且所有元素的和为1。例如，输入向量[BMI极低,BMI正常,BMI极高]对应的Softmax函数的值为[0.2,0.5,0.3]，那么输出向量中拥有最大权重的项对应着输入向量中的最大值“BMI正常”。
步骤S30，获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点。
具体的，可以通过线下终端的图像采集单元，如手机的摄像头，采集待检测的用户人脸图像，并通过网络传送单元，将所述人脸图像发送到线上服务器，同时将所述图像采集单元的相机参数也一并发送给线上服务器，手机上同步显示采集的人脸图像的效果图。
具体的，对人脸图像的人脸关键特征点进行定位的方法如下。可选的，本实施例采用主动形状模型(Active Shape Model，ASM)算法对人脸关键特征点进行定位。
该ASM算法的基本思路是：将人脸的纹理特征和各个特征点之间的位置约束相结合。ASM算法分为训练和搜索两步。训练时，建立各个特征点的位置约束，构建各个特定点的局部特征。搜索时，迭代地进行匹配。
ASM的训练步骤具体如下：首先，构建形状模型：搜集n个人脸的训练样本(n＝400)；手动标记脸部特征点，如图2所示，图2为标记脸部特征点的人脸示意图；将训练集中特征点的坐标串成特征向量；对形状进行归一化和对齐(对齐采用Procrustes方法)；对对齐后的形状特征做PCA处理。所述PCA处理的基本原理为：设有m条n维数据，1)将原始数据按列组成n行m列矩阵X；2)将X的每一行(代表一个属性字段)进行零均值化，即减去这一行的均值；3)求出协方差矩阵；4)求出协方差矩阵的特征值及对应的特征向量r；5)将特征向量按对应特征值大小从上到下按行排列成矩阵，取前k行组成矩阵P；6)即为降维到k维后的数据。
接着，为每个特征点构建局部特征。目的是在每次迭代搜索过程中每个特征点可以寻找新的位置。局部特征一般用梯度特征，以防光照变化。有的方法沿着边缘的法线方向提取，有的方法在特征点附近的矩形区域提取。
接着进行ASM的搜索步骤，具体如下：首先，计算眼睛(或者眼睛和嘴巴)的位置，做简单的尺度和旋转变化，对齐人脸；接着，匹配每个局部特征点(常采用马氏距离)，计算新的位置；得到仿射变换的参数，迭代直到收敛。另外，常采用多尺度的方法加速。搜索的过程最终收敛到高分辨率的原图像上。
步骤S40，根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓。
在获取能够标识眉毛、下颌的人脸关键点后，以此为依据确定眼睛、鼻子和嘴巴的相对坐标，然后进行人脸轮廓提取。可选的，采用sobel算子进行人脸轮廓提取，剔除人脸区域之外的背景。Sobel算子是一个离散微分算子，它结合了高斯平滑和微分求导，用来计算图像灰度函数的近似梯度。其基本原理是对传进来的图像像素做卷积，卷积的实质是在求梯度值，或者说给了一个加权平均，其中权值就是所谓的卷积核；然后对生成的新像素灰度值做阈值运算，以此来确定边缘信息。图像边缘,相素值会发生显著的变化了。表示这一改变的一个方法是使用导数。梯度值的大变预示着图像中内容的显著变化。若Gx是对原图x方向上的卷积，Gy是对原图y方向上的卷积，原图中的作用点像素值通过卷积之后为：得到像素点新的像素值之后，给定一个阈值就可以得到sobel算子计算出的图像边缘了。如图3所示，图3是采用sobel算子进行边缘轮廓提取的效果图。
步骤S50，对人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像。
可选的，对人脸轮廓根据透视视角采用二维线性插值算法进行等比例拉伸。假设源图像大小为m×n，目标图像为a×b。那么两幅图像的边长比分别为：m/a和n/b。注意，通常这个比例不是整数，编程存储的时候要用浮点型。目标图像的第(i,j)个像素点(i行j列)可以通过边长比对应回源图像。其对应坐标为(i×m/a,j×n/b)。显然，这个对应坐标一般来说不是整数，而非整数的坐标是无法在图像这种离散数据上使用的。双线性插值通过寻找距离这个对应坐标最近的四个像素点，来计算该点的值(灰度值或者RGB值)。若图像为灰度图像，那么(i，j)点的灰度值的数学计算模型是：,f(x,y)＝b1+b2x+b3y+b4xy。其中b1,b2,b3,b4是相关的系数。关于其计算过程如下：如图4所示，图4为双线性插值的模型示意图。已知Q12，Q22，Q11，Q21，但是要插值的点为P点，这就要用双线性插值了，首先在x轴方向上，对R1和R2两个点进行插值，然后根据R1和R2对P点进行插值，这就是双线性插值。
可选的，对人脸轮廓进行拉伸处理的同时，还包括根据相机参数对人脸轮廓的每个像素的RGB色度分量，逐点进行色度校正和亮度校正，以减少图像采集环境中的光线、摄像头的参数等的影响。经过轮廓提取和畸变校正后的人脸图像，
步骤S60，根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
可选的，所述人脸图像的评测BMI值可以为BMI极低、BMI正常或者BMI极高，将评测BMI值实时返回给线下终端，例如智能手机、平板电脑、便携计算机。
本实施例提出的BMI评测方法，进一步地，在本发明方法的另一实施例中，该方法在步骤S60后还包括如下步骤：
获取用户上传的实测BMI值；
将所述评测BMI值与所述实测BMI值采用卷积网络模型进行微调训练；
更新迭代所述学习模型。
具体的，用户在获得所述学习模型评测的评测BMI值以后，可以选择上传该用户的经过实际测量的实测BMI值，以对所述学习模型进行微调训练，实现模型的快速更新迭代。微调学习模型的时候，以前述10000个人脸样本为例，将前8000个小批量样本的学习率设置为0.001，后2000个小批量样本的学习率设置为0.0001，每次迭代的小批量大小为300，动量值设置为0.9，权重衰减值为0.0005。
对不同的用户，针对其上传的经过实测的实测BMI值，增大其人脸图片在训练过程中的权重，以增强学习模型的泛化性，更好匹配该用户的实际身体情况。
可选地，在其他实施例中，BMI评测程序还可以被分割为一个或者多个模块，一个或者多个模块被存储于存储器11中，并由一个或多个处理器(本实施例为处理器12)所执行以完成本发明，本发明所称的模块是指能够完成特定功能的一系列计算机程序指令段，用于描述BMI评测程序在BMI评测装置中的执行过程。
例如，参照图3所示，为本发明BMI评测装置一实施例中的BMI评测程序的程序模块示意图，该实施例中，BMI评测程序可以被分割为样本数据采集模块10、样本数据模型训练模块20、人脸关键点定位模块30，人脸轮廓提取模块40，人脸轮廓拉伸模块50，人脸图像BMI值预测模块60。
示例性地：
样本数据采集模块10用于：采集样本人脸图像数据，所述样本人脸图像数据包括BMI值；
样本数据模型训练模块20用于：采用卷积神经网络训练样本人脸图像数据，获得训练模型；
人脸关键点定位模块30用于：获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
人脸轮廓提取模块40用于：根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；
人脸轮廓拉伸模块50：用于对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；
人脸图像BMI值预测模块60：用于根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
上述样本数据采集模块10、样本数据模型训练模块20、人脸关键点定位模块30，人脸轮廓提取模块40，人脸轮廓拉伸模块50，人脸图像BMI值预测模块60等程序模块被执行时所实现的功能或操作步骤与上述实施例大体相同，在此不再赘述。
此外，本发明实施例还提出一种计算机可读存储介质，所述计算机可读存储介质上存储有BMI评测程序，所述BMI评测程序可被一个或多个处理器执行，以实现如下操作：
步骤S10，采集样本人脸图像数据，所述样本人脸图像数据包括BMI值；
步骤S20，采用卷积神经网络训练样本人脸图像数据，获得训练模型；
步骤S30，获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
步骤S40，根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；
步骤S50，对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；
步骤S60，根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
本发明计算机可读存储介质具体实施方式与上述BMI评测装置和方法各实施例基本相同，在此不作累述。
本发明提出的BMI评测方法、装置及计算机可读存储介质，通过预先采集人脸图像与BMI值，经过学习算法训练网络模型，根据训练好的网络模型预测待检测的人脸图像的BMI值，无需复杂的测量设备，就能自动完成BMI检测，不仅大大降低了BMI测量者的测量难度，还能实时测量供测量者监控自身的健康状况。
需要说明的是，上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种BMI评测方法，其特征在于，所述方法包括：
采集样本人脸图像数据，所述样本人脸图像数据包括BMI值；
采用卷积神经网络训练样本人脸图像数据，获得训练模型；
获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；
对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；
根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
2.根据权利要求1所述的BMI评测方法，其特征在于，步骤对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像的同时，还包括步骤：
根据相机参数对人脸轮廓区域的每个像素的RGB色度分量，逐点进行色度校正和亮度校正。
3.根据权利要求1所述的BMI评测方法，其特征在于，步骤采用卷积神经网络训练样本人脸图像数据，获得训练模型，还包括步骤：
将人脸图像剪裁成大小为224*224的图像；
将所述剪裁后的图像转成leveldb格式；
用所述leveldb格式图像训练卷积神经网络VGG-16；
用softmax函数输出BMI极低、BMI正常、BMI极高三个类别值的概率值，输出值为最大概率值对应的类别值。
4.根据权利要求1所述的BMI评测方法，其特征在于，步骤获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；进一步包括步骤：
获取待检测的人脸图像，采用主动形状模型算法对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，采用sobel算子进行人脸轮廓提取，剔除人脸区域之外的背景，获取人脸轮廓；
对所述人脸轮廓根据透视视角采用二维线性插值算法进行等比例拉伸，获得预处理后人脸图像。
5.根据权利要求1-4任意一项所述的BMI评测方法，其特征在于，所述根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值的步骤之后，还包括步骤：
获取用户上传的实测BMI值；
将所述评测BMI值与所述实测BMI值采用卷积网络模型进行微调训练；
更新迭代所述训练模型。
6.一种BMI评测装置，其特征在于，所述装置包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的BMI评测程序，所述BMI评测程序被所述处理器执行时实现如下步骤：
采集样本人脸图像数据，所述样本人脸图像数据包括BMI值；
采用卷积神经网络训练样本人脸图像数据，获得训练模型；
获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；
对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；
根据所述训练模型对所述预处理后人脸图像进行类别预测，得到待检测人脸图像的评测BMI值。
7.根据权利要求6所述的BMI评测装置，其特征在于，步骤对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像的同时，还包括步骤：
根据相机参数对人脸轮廓区域的每个像素的RGB色度分量，逐点进行色度校正和亮度校正。
8.根据权利要求6所述的BMI评测装置，其特征在于，步骤采用卷积神经网络训练样本人脸图像数据，获得训练模型，还包括步骤：
将人脸图像剪裁成大小为224*224的图像；
将所述剪裁后的图像转成leveldb格式；
用所述leveldb格式图像训练卷积神经网络VGG-16；
用softmax函数输出BMI极低、BMI正常、BMI极高三个类别值的概率值，输出值为最大概率值对应的类别值。
9.根据权利要求6所述的BMI评测装置，其特征在于，步骤获取待检测的人脸图像，对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；根据人脸关键点，进行人脸轮廓提取，获取人脸轮廓；对所述人脸轮廓根据透视视角进行等比例拉伸，获得预处理后人脸图像；进一步包括步骤：
获取待检测的人脸图像，采用主动形状模型算法对所述待检测人脸图像的人脸关键特征点进行定位，获取人脸关键点；
根据人脸关键点，采用sobel算子进行人脸轮廓提取，剔除人脸区域之外的背景，获取人脸轮廓；
对所述人脸轮廓根据透视视角采用二维线性插值算法进行等比例拉伸，获得预处理后人脸图像。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有BMI评测程序，所述程序可被一个或者多个处理器执行，以实现如权利要求1至5中任一项所述的方法的步骤。
CN201811384493.8A 2018-11-20 2018-11-20 一种bmi评测方法、装置及计算机可读存储介质 Pending CN109637664A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201811384493.8A CN109637664A (zh) 2018-11-20 2018-11-20 一种bmi评测方法、装置及计算机可读存储介质
PCT/CN2019/088637 WO2020103417A1 (zh) 2018-11-20 2019-05-27 一种bmi评测方法、装置及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811384493.8A CN109637664A (zh) 2018-11-20 2018-11-20 一种bmi评测方法、装置及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN109637664A true CN109637664A (zh) 2019-04-16

Family

ID=66068616

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811384493.8A Pending CN109637664A (zh) 2018-11-20 2018-11-20 一种bmi评测方法、装置及计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN109637664A (zh)
WO (1) WO2020103417A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110082283A (zh) * 2019-05-23 2019-08-02 山东科技大学 一种大气颗粒物sem图像识别方法及系统
CN110570442A (zh) * 2019-09-19 2019-12-13 厦门市美亚柏科信息股份有限公司 一种复杂背景下轮廓检测方法、终端设备及存储介质
CN111144285A (zh) * 2019-12-25 2020-05-12 中国平安人寿保险股份有限公司 胖瘦程度识别方法、装置、设备及介质
WO2020103417A1 (zh) * 2018-11-20 2020-05-28 平安科技（深圳）有限公司 一种bmi评测方法、装置及计算机可读存储介质
CN111861875A (zh) * 2020-07-30 2020-10-30 北京金山云网络技术有限公司 一种人脸美化的方法、装置、设备和介质
CN112067054A (zh) * 2020-09-15 2020-12-11 中山大学 一种基于bmi检测的智慧型穿衣镜
CN112529888A (zh) * 2020-12-18 2021-03-19 平安科技（深圳）有限公司 基于深度学习的人脸图像评估方法、装置、设备及介质
CN112582063A (zh) * 2019-09-30 2021-03-30 长沙昱旻信息科技有限公司 Bmi预测方法、装置、系统及计算机存储介质、电子设备
CN113436735A (zh) * 2020-03-23 2021-09-24 北京好啦科技有限公司 基于人脸结构度量的体重指数预测方法、设备和存储介质
CN113591704A (zh) * 2021-07-30 2021-11-02 四川大学 体重指数估计模型训练方法、装置和终端设备
CN114496263A (zh) * 2022-04-13 2022-05-13 杭州研极微电子有限公司 用于体重估计的神经网络模型建立方法及可读存储介质
WO2022199395A1 (zh) * 2021-03-22 2022-09-29 深圳市百富智能新技术有限公司 人脸活体检测方法、终端设备及计算机可读存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111916219B (zh) * 2020-07-17 2024-08-02 深圳中集智能科技有限公司 检验检疫智能安全预警方法、装置及电子系统
CN116433700B (zh) * 2023-06-13 2023-08-18 山东金润源法兰机械有限公司 一种法兰零件轮廓视觉定位方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504376A (zh) * 2014-12-22 2015-04-08 厦门美图之家科技有限公司 一种人脸图像的年龄分类方法和系统
CN104851123A (zh) * 2014-02-13 2015-08-19 北京师范大学 一种三维人脸变化模拟方法
CN108182384A (zh) * 2017-12-07 2018-06-19 浙江大华技术股份有限公司 一种人脸特征点定位方法及装置
CN108629303A (zh) * 2018-04-24 2018-10-09 杭州数为科技有限公司 一种脸型缺陷识别方法及系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11026634B2 (en) * 2017-04-05 2021-06-08 doc.ai incorporated Image-based system and method for predicting physiological parameters
CN108875590A (zh) * 2018-05-25 2018-11-23 平安科技（深圳）有限公司 Bmi预测方法、装置、计算机设备和存储介质
CN109637664A (zh) * 2018-11-20 2019-04-16 平安科技（深圳）有限公司 一种bmi评测方法、装置及计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104851123A (zh) * 2014-02-13 2015-08-19 北京师范大学 一种三维人脸变化模拟方法
CN104504376A (zh) * 2014-12-22 2015-04-08 厦门美图之家科技有限公司 一种人脸图像的年龄分类方法和系统
CN108182384A (zh) * 2017-12-07 2018-06-19 浙江大华技术股份有限公司 一种人脸特征点定位方法及装置
CN108629303A (zh) * 2018-04-24 2018-10-09 杭州数为科技有限公司 一种脸型缺陷识别方法及系统

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020103417A1 (zh) * 2018-11-20 2020-05-28 平安科技（深圳）有限公司 一种bmi评测方法、装置及计算机可读存储介质
CN110082283B (zh) * 2019-05-23 2021-12-14 山东科技大学 一种大气颗粒物sem图像识别方法及系统
CN110082283A (zh) * 2019-05-23 2019-08-02 山东科技大学 一种大气颗粒物sem图像识别方法及系统
CN110570442A (zh) * 2019-09-19 2019-12-13 厦门市美亚柏科信息股份有限公司 一种复杂背景下轮廓检测方法、终端设备及存储介质
CN112582063A (zh) * 2019-09-30 2021-03-30 长沙昱旻信息科技有限公司 Bmi预测方法、装置、系统及计算机存储介质、电子设备
CN111144285A (zh) * 2019-12-25 2020-05-12 中国平安人寿保险股份有限公司 胖瘦程度识别方法、装置、设备及介质
CN113436735A (zh) * 2020-03-23 2021-09-24 北京好啦科技有限公司 基于人脸结构度量的体重指数预测方法、设备和存储介质
CN111861875A (zh) * 2020-07-30 2020-10-30 北京金山云网络技术有限公司 一种人脸美化的方法、装置、设备和介质
CN112067054A (zh) * 2020-09-15 2020-12-11 中山大学 一种基于bmi检测的智慧型穿衣镜
CN112529888A (zh) * 2020-12-18 2021-03-19 平安科技（深圳）有限公司 基于深度学习的人脸图像评估方法、装置、设备及介质
CN112529888B (zh) * 2020-12-18 2024-04-30 平安科技（深圳）有限公司 基于深度学习的人脸图像评估方法、装置、设备及介质
WO2022199395A1 (zh) * 2021-03-22 2022-09-29 深圳市百富智能新技术有限公司 人脸活体检测方法、终端设备及计算机可读存储介质
CN113591704A (zh) * 2021-07-30 2021-11-02 四川大学 体重指数估计模型训练方法、装置和终端设备
CN113591704B (zh) * 2021-07-30 2023-08-08 四川大学 体重指数估计模型训练方法、装置和终端设备
CN114496263A (zh) * 2022-04-13 2022-05-13 杭州研极微电子有限公司 用于体重估计的神经网络模型建立方法及可读存储介质

Also Published As

Publication number Publication date
WO2020103417A1 (zh) 2020-05-28

Similar Documents

Publication Publication Date Title
CN109637664A (zh) 一种bmi评测方法、装置及计算机可读存储介质
CN107633204B (zh) 人脸遮挡检测方法、装置及存储介质
CN108460338B (zh) 人体姿态估计方法和装置、电子设备、存储介质、程序
CN107679448B (zh) 眼球动作分析方法、装置及存储介质
CN106056064B (zh) 一种人脸识别方法及人脸识别装置
WO2021012494A1 (zh) 基于深度学习的人脸识别方法、装置及计算机可读存储介质
CN110097051A (zh) 图像分类方法、装置及计算机可读存储介质
Maglogiannis et al. Face detection and recognition of natural human emotion using Markov random fields
CN107679447A (zh) 面部特征点检测方法、装置及存储介质
WO2020078119A1 (zh) 模拟用户穿戴服装饰品的方法、装置和系统
CN108229318A (zh) 手势识别和手势识别网络的训练方法及装置、设备、介质
CN107679475B (zh) 门店监控评价方法、装置及存储介质
CN103425964B (zh) 图像处理设备和图像处理方法
CN110084221A (zh) 一种基于深度学习的带中继监督的序列化人脸关键点检测方法
CN106778687A (zh) 基于局部评估和全局优化的注视点检测方法
CN111857334B (zh) 人体手势字母的识别方法、装置、计算机设备及存储介质
JP2018055470A (ja) 表情認識方法、表情認識装置、コンピュータプログラム及び広告管理システム
CN109598234A (zh) 关键点检测方法和装置
CN109886153A (zh) 一种基于深度卷积神经网络的实时人脸检测方法
CN110399812B (zh) 人脸特征智能提取方法、装置及计算机可读存储介质
CN109345553A (zh) 一种手掌及其关键点检测方法、装置和终端设备
CN110415212A (zh) 异常细胞检测方法、装置及计算机可读存储介质
Jambhale et al. Gesture recognition using DTW & piecewise DTW
CN109325408A (zh) 一种手势判断方法及存储介质
CN113378812A (zh) 一种基于Mask R-CNN和CRNN的数字表盘识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination