CN107242876A - 一种用于精神状态辅助诊断的计算机视觉方法 - Google Patents
一种用于精神状态辅助诊断的计算机视觉方法 Download PDFInfo
- Publication number
- CN107242876A CN107242876A CN201710259448.9A CN201710259448A CN107242876A CN 107242876 A CN107242876 A CN 107242876A CN 201710259448 A CN201710259448 A CN 201710259448A CN 107242876 A CN107242876 A CN 107242876A
- Authority
- CN
- China
- Prior art keywords
- mrow
- image
- layer
- msubsup
- expression
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 238000003745 diagnosis Methods 0.000 title claims abstract description 21
- 238000013527 convolutional neural network Methods 0.000 claims abstract description 19
- 238000012549 training Methods 0.000 claims abstract description 11
- 238000000605 extraction Methods 0.000 claims abstract description 9
- 230000004927 fusion Effects 0.000 claims abstract description 7
- 238000011478 gradient descent method Methods 0.000 claims abstract description 6
- 238000012360 testing method Methods 0.000 claims abstract description 5
- 230000001815 facial effect Effects 0.000 claims abstract description 4
- 230000004913 activation Effects 0.000 claims description 11
- 238000001514 detection method Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 6
- 230000008921 facial expression Effects 0.000 claims description 4
- 238000005457 optimization Methods 0.000 claims description 4
- 206010053238 Amimia Diseases 0.000 claims description 2
- 230000001537 neural effect Effects 0.000 claims 1
- 230000000694 effects Effects 0.000 description 2
- 230000003340 mental effect Effects 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 230000001154 acute effect Effects 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000003759 clinical diagnosis Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 210000000750 endocrine system Anatomy 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 210000000653 nervous system Anatomy 0.000 description 1
- 230000009894 physiological stress Effects 0.000 description 1
- 238000001671 psychotherapy Methods 0.000 description 1
- 230000035882 stress Effects 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7246—Details of waveform analysis using correlation, e.g. template matching or determination of similarity
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Abstract
本发明公开了一种用于精神状态辅助诊断的计算机视觉方法,该方法使用已确知微表情的面部视频作为训练数据库,使用含有卷积层和池化层的卷积神经网络对视频中的图像帧进行特征的提取和融合,之后使用随机梯度下降法进行多次迭代更新得到优化后的网络作为训练完成的网络。然后将待测图像输入进已训练完成的网络中,由已训练完成的网络直接输出待检测图像中是否出现有微表情的检测结果,为医生诊断病人精神状态提供参考。当人们试图压抑自己真实情感时会出现微表情,检测微表情能反映出人的精神状态,从而辅助医生诊断,在一定程度上提高了医生对病人精神状态诊断的准确性和效率。
Description
技术领域
本发明涉及计算机视觉方法领域,具体是一种用于精神状态辅助诊断的计算机视觉方法。
背景技术
对病人精神状态诊断作用和目的是诊断出病人在心理即精神行为状态以及是否发生改变,针对不同的精神状态来改善病人精神行为状态是在治疗过程中十分重要的一环。病人在治疗的过程中会受一些应激源如手术、对自己病情的了解等的影响,产生比较剧烈的心理与生理应激反应,这些应激反应如果十分强烈,可能会对内分泌系统、神经系统产生影响,产生焦虑、抑郁等心理,甚者会干扰诊断、手术、治疗等的实施和效果。因此,对于病人的精神状态特点和变化,及时发现并给予相应的心理治疗是十分重要的。现在对病人精神状态评估多数为问卷调查和自我评估,缺少一些客观的辅助判断来帮助医生诊断病人的精神状态,易造成评估不准,导致诊断出现误差。
而病人的微表情可以辅助医生进行精神状态的判断,微表情是一种持续时间仅为1/25~1/5s非常快速的表情,它是人们试图压抑或隐藏自己真实情感时表现出短暂的、不能自主控制的面部表情。在临床上,医生如果能发现病人的微表情,则可以更好的判断病人的精神状态及其变化,从而针对性地进行治疗,缩短治疗时间,提高治疗效果。未经过系统训练的人对微表情识别能力不高,而用计算机来自动检测微表情是很好的检测方法,微表情的自动检测可以在不被病人察觉的情况下进行,从而加强了判断的真实性和有效性。将计算机自动检测结合到临床诊断里,会帮助医生更好的对病人精神状态进行诊断。
发明内容
本发明的目的是提供一种用于精神状态辅助诊断的计算机视觉方法,以解决现有技术对于病人精神状态评估方法单一、缺少客观评估的问题。
为了达到上述目的,本发明所采用的技术方案为:
一种用于精神状态辅助诊断的计算机视觉方法,其特征在于:将微表情视频中的图像帧使用含有卷积层和池化层的卷积神经网络方法进行特征提取和融合,之后使用随机梯度下降算法进行卷积神经网络的优化得到已训练的网络模型,再将待测视频中的图像帧输入进已训练的网络模型中,得到检测结果,其步骤如下:
(1)、选取多个对象的多个面部表情视频作为训练数据库,训练数据库中包含无表情视频和微表情视频;
(2)、将训练数据库中每个视频的每帧图像取出并灰度化,将每帧图像剪裁成多个等大小的正方形块状的人脸图像作为训练样本;
(3)、将步骤(2)得到的训练样本输入到卷积神经网络进行网络的训练,此卷积神经网络共包括多层卷积层多层池化层,卷积与池化的操作交替进行,其中卷积层中处理过程为:
第一层为卷积层,已知有多个卷积核,分别将卷积核与原图像进行离散卷积并加上偏置项之后,通过ReLU激活函数得出提取后的图像特征,表示如下:
其中l代表网络层数,i代表像素的位置,代表第l-1层中图像的第i个像素,代表第l层中第j个的图像特征,Mj代表输入的所有图像的集合,k 代表卷积核,代表第l层中的第j个卷积核中第i个值,代表第l层中的第 j个偏置项。f(x)代表ReLU激活函数,表示如下:
f(x)=max(0,x) (2),
卷积完成之后将结果输入到下一层即与卷积层交替相邻的池化层进行池化运算;
池化层中处理过程为:
卷积后的图像特征输入到交替相邻的下一层池化层中,将上一层即与池化层交替相邻的卷积层的图像特征分成n*n的块,在每一块中求出最大的图像特征值,再将此特征最大值乘以乘性偏置项,然后加上偏置项,最后通过ReLU激活函数得出融合后的图像特征,表示如下:
其中l代表网络层数,代表第l-1层中的第j个图像特征,代表第l层中的第j个图像特征,代表第l层中的第j个乘性偏置项,代表第l层中的第j个偏置项,f(x)代表ReLU激活函数,g(x)代表输入的图像特征中的最大值,表示如下:
g(x)=max(xi)i∈Mj (4),
其中Mj代表输入的所有图像特征的集合;
(4)、重复步骤(3)直至计算完所有的卷积层和池化层;
(5)、使用随机梯度下降法优化卷积神经网络,经过至少1000次迭代后得到已训练的网络;
(6)、已知有一待检测是否出现微表情的患者的视频中的图像帧序列,将待测视频的每帧图像输入进步骤(5)中得到的已训练的网络中去,由卷积神经网络输出是否出现微表情,如果含有微表情则将含有微表情的图像帧标记出来作为结果。
所述的一种用于精神状态辅助诊断的计算机视觉方法,其特征在于:使用卷积神经网络来进行视频中图像帧的特征提取和融合并使用随机梯度下降法进行网络优化得到已训练的网络,进而进行微表情检测。
本发明通过从已知的微表情视频数据中进行训练的基础上,检测病人的面部是否出现微表情,依据结果辅助医生对病人精神状态进行诊断,从而达到提高对病人精神状态诊断准确率和诊断效率以及提高医生工作的效率并减轻医生工作量的目标。该技术可应用于对病人精神状态诊断的辅助诊断。
本发明中,随机梯度下降算法是一种优化算法,比较适用于控制变量较多,受控系统比较复杂,无法建立准确数学模型的最优化控制过程。在训练网络过程中目标是使网络的输出结果与正确结果的误差最小,经过多次迭代,得到目标函数的极小值。
本发明使用卷积神经网络的方法进行特征提取和图像分类。该方法从提取低层次特征逐步到提取高层次抽象的特征,从而更好的提取了有效的特征信息,提高了计算准确率,并且卷积神经网络有很高的灵活性,可以根据不同的实际情况进行不同参数的调整,再应用到不同的场合中去。
本发明的有益效果是:将卷积神经网络对于视频信息的特征提取用于临床微表情检测,从而辅助医生对病人的精神状态进行诊断,实现了将微表情的自动检测运用到临床诊断中去,提高了对病人精神状态诊断准确率和效率。
附图说明
图1是本发明的实现流程框架图。
图2是本发明实验中的检测结果。
具体实施方式
如图1所示,一种用于精神状态辅助诊断的计算机视觉方法,过程如下:
(1)、选取12个对象的343个面部表情视频序列作为训练数据库。其中包括无表情视频和微表情视频。
(2)、将视频每帧图像取出并灰度化,将每帧图像剪裁出等大小的人脸图像,先作为训练样本。
(3)、使用卷积神经网络进行网络的训练,此卷积神经网络共包括4层卷积层4层池化层,卷积与池化的操作交替进行,首先将图像输入到第一层卷积层中,已知有多个卷积核,分别将卷积核与原图像进行离散卷积并加上偏置项之后,通过ReLU激活函数得出提取后的图像特征,表示如下:
其中l代表网络层数,i代表像素的位置,代表第l-1层中图像的第i个像素,代表第l层中第j个的图像特征,Mj代表输入的所有图像的集合,k代表卷积核,代表第l层中的第j个卷积核中第i个值,代表第l层中的第j个偏置项。f(x)代表ReLU激活函数,表示如下:
f(x)=max(0,x) (2),
卷积完成之后将结果输入到下一层即与卷积层交替相邻的池化层进行池化运算;
卷积后的图像特征输入到交替相邻的下一层池化层中,将上一层即与池化层交替相邻的卷积层的图像特征分成n*n的块,在每一块中求出最大的图像特征值,再将此特征最大值乘以乘性偏置项,再加上偏置项,通过ReLU激活函数得出融合后的图像特征,表示如下:
其中l代表网络层数,代表第l-1层中的第j个图像特征,代表第l层中的第j个图像特征,代表第l层中的第j个乘性偏置项,代表第l层中的第j个偏置项,f(x)代表ReLU激活函数,g(x)代表输入的图像特征中的最大值,表示如下:
g(x)=max(xi)i∈Mj (4);
其中Mj代表输入的所有图像特征的集合。
(4)、重复步骤(3)直至计算完所有的卷积层和池化层。
(5)、使用随机梯度下降法优化卷积神经网络,经过近1000次迭代后得到已训练的网络。
(6)、已知有一待检测是否出现微表情的患者的视频中的图像帧序列,将待测视频的每帧图像输入进步骤(5)中得到的已训练的网络中去,由卷积神经网络输出是否出现微表情,如果含有微表情则将含有微表情的图像帧标记出来作为结果,如图2所示,此5幅图像为待检测是否含有微表情的视频中的图像帧序列,图中第三幅含有边框的图是被检测出微表情的图像,其他四幅没有被检测出微表情。将此结果作为医生做出诊断的参考。图2中图片来自CASME数据库。
Claims (2)
1.一种用于精神状态辅助诊断的计算机视觉方法,其特征在于:将微表情视频中的图像帧使用含有卷积层和池化层的卷积神经网络方法进行特征提取和融合,之后使用随机梯度下降算法进行卷积神经网络的优化得到已训练的网络模型,再将待测视频中的图像帧输入进已训练的网络模型中,得到检测结果,其步骤如下:
(1)、选取多个对象的多个面部表情视频作为训练数据库,训练数据库中包含无表情视频和微表情视频;
(2)、将训练数据库中每个视频的每帧图像取出并灰度化,将每帧图像剪裁成多个等大小的正方形块状的人脸图像作为训练样本;
(3)、将步骤(2)得到的训练样本输入到卷积神经网络进行网络的训练,此卷积神经网络共包括多层卷积层多层池化层,卷积与池化的操作交替进行,其中卷积层中处理过程为:
第一层为卷积层,已知有多个卷积核,分别将卷积核与原图像进行离散卷积并加上偏置项之后,通过ReLU激活函数得出提取后的图像特征,表示如下:
<mrow>
<msubsup>
<mi>x</mi>
<mi>j</mi>
<mi>l</mi>
</msubsup>
<mo>=</mo>
<mi>f</mi>
<mo>(</mo>
<mrow>
<munder>
<mi>&Sigma;</mi>
<mrow>
<mi>i</mi>
<mo>&Element;</mo>
<msub>
<mi>M</mi>
<mi>j</mi>
</msub>
</mrow>
</munder>
<msubsup>
<mi>x</mi>
<mi>i</mi>
<mrow>
<mi>l</mi>
<mo>-</mo>
<mn>1</mn>
</mrow>
</msubsup>
<mo>*</mo>
<msubsup>
<mi>k</mi>
<mrow>
<mi>i</mi>
<mi>j</mi>
</mrow>
<mi>l</mi>
</msubsup>
<mo>+</mo>
<msubsup>
<mi>b</mi>
<mi>j</mi>
<mi>l</mi>
</msubsup>
</mrow>
<mo>)</mo>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>1</mn>
<mo>)</mo>
</mrow>
<mo>,</mo>
</mrow>
其中l代表网络层数,i代表像素的位置,代表第l-1层中图像的第i个像素,代表第l层中第j个的图像特征,Mj代表输入的所有图像的集合,k代表卷积核,代表第l层中的第j个卷积核中第i个值,代表第l层中的第j个偏置项,f(x)代表ReLU激活函数,表示如下:
f(x)=max(0,x) (2),
卷积完成之后将结果输入到下一层即与卷积层交替相邻的池化层进行池化运算;
池化层中处理过程为:
卷积后的图像特征输入到交替相邻的下一层池化层中,将上一层即与池化层交替相邻的卷积层的图像特征分成n*n的块,在每一块中求出最大的图像特征值,再将此特征最大值乘以乘性偏置项,然后加上偏置项,最后通过ReLU激活函数得出融合后的图像特征,表示如下:
<mrow>
<msubsup>
<mi>x</mi>
<mi>j</mi>
<mi>l</mi>
</msubsup>
<mo>=</mo>
<mi>f</mi>
<mrow>
<mo>(</mo>
<msubsup>
<mi>&beta;</mi>
<mi>j</mi>
<mi>l</mi>
</msubsup>
<mo>&CenterDot;</mo>
<mi>g</mi>
<mo>(</mo>
<msubsup>
<mi>x</mi>
<mi>j</mi>
<mrow>
<mi>l</mi>
<mo>-</mo>
<mn>1</mn>
</mrow>
</msubsup>
<mo>)</mo>
<mo>+</mo>
<msubsup>
<mi>b</mi>
<mi>j</mi>
<mi>l</mi>
</msubsup>
<mo>)</mo>
</mrow>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>3</mn>
<mo>)</mo>
</mrow>
<mo>,</mo>
</mrow>
其中l代表网络层数,代表第l-1层中的第j个图像特征,代表第l层中的第j个图像特征,代表第l层中的第j个乘性偏置项,代表第l层中的第j个偏置项,f(x)代表ReLU激活函数,g(x)代表输入的图像特征中的最大值,表示如下:
g(x)=max(xi)i∈Mj (4),
其中Mj代表输入的所有图像特征的集合;
(4)、重复步骤(3)直至计算完所有的卷积层和池化层;
(5)、使用随机梯度下降法优化卷积神经网络,经过至少1000次迭代后得到已训练的网络;
(6)、已知有一待检测是否出现微表情的患者的视频中的图像帧序列,将待测视频的每帧图像输入进步骤(5)中得到的已训练的网络中去,由卷积神经网络输出是否出现微表情,如果含有微表情则将含有微表情的图像帧标记出来作为结果。
2.根据权利要求1所述的一种用于精神状态辅助诊断的计算机视觉方法,其特征在于:使用卷积神经网络来进行视频中图像帧的特征提取和融合并使用随机梯度下降法进行网络优化得到已训练的网络,进而进行微表情检测。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710259448.9A CN107242876B (zh) | 2017-04-20 | 2017-04-20 | 一种用于精神状态的计算机视觉方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710259448.9A CN107242876B (zh) | 2017-04-20 | 2017-04-20 | 一种用于精神状态的计算机视觉方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107242876A true CN107242876A (zh) | 2017-10-13 |
CN107242876B CN107242876B (zh) | 2020-12-15 |
Family
ID=60017270
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710259448.9A Expired - Fee Related CN107242876B (zh) | 2017-04-20 | 2017-04-20 | 一种用于精神状态的计算机视觉方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107242876B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110298325A (zh) * | 2019-07-02 | 2019-10-01 | 四川长虹电器股份有限公司 | 基于视频表情识别的表达障碍患者辅助护理系统 |
CN110507297A (zh) * | 2019-08-30 | 2019-11-29 | 深圳市汇健医疗工程有限公司 | 基于5g网络的手术中心智慧手术干预平台 |
CN110507335A (zh) * | 2019-08-23 | 2019-11-29 | 山东大学 | 基于多模态信息的服刑人员心理健康状态评估方法及系统 |
CN112487980A (zh) * | 2020-11-30 | 2021-03-12 | 深圳市广信安科技股份有限公司 | 基于微表情治疗方法、装置、系统与计算机可读存储介质 |
CN112716494A (zh) * | 2021-01-18 | 2021-04-30 | 上海对外经贸大学 | 基于微表情与脑波分析算法的心理健康状况分析算法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100296706A1 (en) * | 2009-05-20 | 2010-11-25 | Canon Kabushiki Kaisha | Image recognition apparatus for identifying facial expression or individual, and method for the same |
US20110029471A1 (en) * | 2009-07-30 | 2011-02-03 | Nec Laboratories America, Inc. | Dynamically configurable, multi-ported co-processor for convolutional neural networks |
US8410903B2 (en) * | 2008-06-16 | 2013-04-02 | Canon Kabushiki Kaisha | Personal authentication apparatus and personal authentication method |
CN103258204A (zh) * | 2012-02-21 | 2013-08-21 | 中国科学院心理研究所 | 一种基于Gabor和EOH特征的自动微表情识别方法 |
CN103617436A (zh) * | 2013-12-17 | 2014-03-05 | 山东大学 | 基于差分切片能量图和Gabor变换的微表情识别方法 |
CN105608440A (zh) * | 2016-01-03 | 2016-05-25 | 复旦大学 | 基于最小化误差的面部微表情序列特征抽取方法 |
US20160275341A1 (en) * | 2015-03-18 | 2016-09-22 | Adobe Systems Incorporated | Facial Expression Capture for Character Animation |
CN106446810A (zh) * | 2016-09-12 | 2017-02-22 | 合肥工业大学 | 一种用于精神状态分析的计算机视觉方法 |
CN106570474A (zh) * | 2016-10-27 | 2017-04-19 | 南京邮电大学 | 一种基于3d卷积神经网络的微表情识别方法 |
-
2017
- 2017-04-20 CN CN201710259448.9A patent/CN107242876B/zh not_active Expired - Fee Related
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8410903B2 (en) * | 2008-06-16 | 2013-04-02 | Canon Kabushiki Kaisha | Personal authentication apparatus and personal authentication method |
US20100296706A1 (en) * | 2009-05-20 | 2010-11-25 | Canon Kabushiki Kaisha | Image recognition apparatus for identifying facial expression or individual, and method for the same |
US20110029471A1 (en) * | 2009-07-30 | 2011-02-03 | Nec Laboratories America, Inc. | Dynamically configurable, multi-ported co-processor for convolutional neural networks |
CN103258204A (zh) * | 2012-02-21 | 2013-08-21 | 中国科学院心理研究所 | 一种基于Gabor和EOH特征的自动微表情识别方法 |
CN103617436A (zh) * | 2013-12-17 | 2014-03-05 | 山东大学 | 基于差分切片能量图和Gabor变换的微表情识别方法 |
US20160275341A1 (en) * | 2015-03-18 | 2016-09-22 | Adobe Systems Incorporated | Facial Expression Capture for Character Animation |
CN105608440A (zh) * | 2016-01-03 | 2016-05-25 | 复旦大学 | 基于最小化误差的面部微表情序列特征抽取方法 |
CN106446810A (zh) * | 2016-09-12 | 2017-02-22 | 合肥工业大学 | 一种用于精神状态分析的计算机视觉方法 |
CN106570474A (zh) * | 2016-10-27 | 2017-04-19 | 南京邮电大学 | 一种基于3d卷积神经网络的微表情识别方法 |
Non-Patent Citations (3)
Title |
---|
XIAOHONG LI等: "Spontaneous facial micro-expression detection based on deep learning", 《IEEE 13TH INTERNATIONAL CONFERENCE ON SIGNAL PROCESSING》 * |
YANAN GUO等: "Deep Neural Networks with Relativity Learning for Facial Expression Recognition", 《INTERNATIONAL SYMPOSIUM ON INTERACTION DESIGN AND HUMAN FACTORS》 * |
许丽等: "表情变化的三维人脸特征分析方法", 《电子测量与仪器学报》 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110298325A (zh) * | 2019-07-02 | 2019-10-01 | 四川长虹电器股份有限公司 | 基于视频表情识别的表达障碍患者辅助护理系统 |
CN110507335A (zh) * | 2019-08-23 | 2019-11-29 | 山东大学 | 基于多模态信息的服刑人员心理健康状态评估方法及系统 |
CN110507335B (zh) * | 2019-08-23 | 2021-01-01 | 山东大学 | 基于多模态信息的服刑人员心理健康状态评估方法及系统 |
CN110507297A (zh) * | 2019-08-30 | 2019-11-29 | 深圳市汇健医疗工程有限公司 | 基于5g网络的手术中心智慧手术干预平台 |
CN112487980A (zh) * | 2020-11-30 | 2021-03-12 | 深圳市广信安科技股份有限公司 | 基于微表情治疗方法、装置、系统与计算机可读存储介质 |
CN112716494A (zh) * | 2021-01-18 | 2021-04-30 | 上海对外经贸大学 | 基于微表情与脑波分析算法的心理健康状况分析算法 |
Also Published As
Publication number | Publication date |
---|---|
CN107242876B (zh) | 2020-12-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Jain et al. | Convolutional neural network based Alzheimer’s disease classification from magnetic resonance brain images | |
CN107242876A (zh) | 一种用于精神状态辅助诊断的计算机视觉方法 | |
EP4002271A1 (en) | Image segmentation method and apparatus, and storage medium | |
CN109345538A (zh) | 一种基于卷积神经网络的视网膜血管分割方法 | |
CN106682616A (zh) | 基于双通道特征深度学习的新生儿疼痛表情识别方法 | |
CN106778014A (zh) | 一种基于循环神经网络的患病风险预测方法 | |
CN108053398A (zh) | 一种半监督特征学习的黑色素瘤自动检测方法 | |
Phankokkruad | COVID-19 pneumonia detection in chest X-ray images using transfer learning of convolutional neural networks | |
CN107145885A (zh) | 一种基于卷积神经网络的单字图文字识别方法及装置 | |
CN106295501A (zh) | 基于唇部运动的深度学习身份识别方法 | |
Yang et al. | Classification of diabetic retinopathy severity based on GCA attention mechanism | |
Mehmood et al. | Systematic framework to predict early-stage liver carcinoma using hybrid of feature selection techniques and regression techniques | |
CN108877923A (zh) | 一种基于深度学习的舌苔生成中药处方的方法 | |
CN112037179A (zh) | 一种脑疾病诊断模型的生成方法、系统及设备 | |
CN111046978A (zh) | 一种基于StyleGANs和决策融合的皮肤镜图像识别方法 | |
Himami et al. | Deep learning in image classification using dense networks and residual networks for pathologic myopia detection | |
CN111612739A (zh) | 一种基于深度学习的脑梗死分类方法 | |
Hai et al. | Real time burning image classification using support vector machine | |
CN106845512A (zh) | 基于分形参数的兽类形体识别方法及系统 | |
CN106446810A (zh) | 一种用于精神状态分析的计算机视觉方法 | |
Anbalagan et al. | Deep learning model using ensemble based approach for walking activity recognition and gait event prediction with grey level co-occurrence matrix | |
Putra et al. | Heart Disease Detection using Iridology with Principal Component Analysis (PCA) and Backpropagation Neural Network | |
Ali et al. | AMDNet23: Hybrid CNN-LSTM deep learning approach with enhanced preprocessing for age-related macular degeneration (AMD) detection | |
Mo et al. | A multi-level context fusion network for exudate segmentation in retinal images | |
Li et al. | Retinal Blood Vessel Segmentation via Attention Gate Network |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20201215 |