CN106874883A - 一种基于深度学习的实时人脸检测方法及系统 - Google Patents

一种基于深度学习的实时人脸检测方法及系统 Download PDF

Info

Publication number
CN106874883A
CN106874883A CN201710106887.6A CN201710106887A CN106874883A CN 106874883 A CN106874883 A CN 106874883A CN 201710106887 A CN201710106887 A CN 201710106887A CN 106874883 A CN106874883 A CN 106874883A
Authority
CN
China
Prior art keywords
face
convolutional neural
neural networks
real
data handling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710106887.6A
Other languages
English (en)
Inventor
张卫山
孙浩云
宫文娟
卢清华
李忠伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China University of Petroleum East China
Original Assignee
China University of Petroleum East China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China University of Petroleum East China filed Critical China University of Petroleum East China
Priority to CN201710106887.6A priority Critical patent/CN106874883A/zh
Publication of CN106874883A publication Critical patent/CN106874883A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5044—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering hardware capabilities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/94—Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于深度学习的实时人脸检测方法及系统，该方法包括以下步骤：构建的人脸图像数据库和卷积神经网络，利用构建的数据库对神经网络进行训练，得到最优的卷积神经网络以及人脸数据库中的人脸特征；构建storm拓扑结构；数据源输入组件将实时视频流分发给各数据处理组件，数据处理组件通过卷积神经网络对人脸和非人脸进行分类、人脸边界框回归、坐标定位，得到人脸检测的结果。本发明通过优化后的卷积神经网络对人脸图像数据进行特征提取，有效地提高了特征提取的准确率，将Storm架构和卷积神经网络的特征提取相结合，提高了人脸检测的效率。

Description

一种基于深度学习的实时人脸检测方法及系统
技术领域
本发明涉及一种基于深度学习的实时人脸检测方法及系统。
背景技术
深度学习是目前机器学习发展的最高度，卷积神经网络作为深度学习中的一种方法，在物体识别、图像处理等领域有着较高的效果。对于人脸特征提取，卷积神经网络有着可以自动学习图像特征的优势，减少人工干预，提取出高质量的特征，从而为提高人脸检测的准确率打下了坚实的基础。
由于深度学习的方法可能消耗大量的GPU资源，计算量过大可能达不到实际应用场景中实时的效果，为了解决大数据实时处理问题，分布式实时处理框架Storm应运而生，Storm有许多应用领域，包括实时分析、在线机器学习、信息流处理、连续性的计算、分布式RPC和ETL等。
随着社会的发展，信息化程度的不断提高，人们对身份鉴别的准确性、安全性和实用性提出了更高的要求，人脸检测是人脸识别和重构问题中最基本的任务,同样也是人脸识别问题中的一个关键环节,其结果直接关乎到人脸识别最终的效果。若能对其进行精准的检测定位，不仅能提高视频监控工作人员的工作效率，对视频的检索、维护公共安全秩序具有重要意义。
有鉴于此，急需解决视频监中人脸检测准确率较低和速率较低的问题。
发明内容
本发明所要解决的技术问题是如何将卷积神经网络应用于人脸检测技术中，并达到实时人脸检测的效果的问题，本发明提供了一种基于深度学习的实时人脸检测方法及系统。
为了解决上述技术问题，本发明所采用的技术方案是：
一种基于深度学习的实时人脸检测方法，包括以下步骤：
步骤S10：构建人脸数据库，并设计用于人脸检测的卷积神经网络；
步骤S20：利用人脸数据库对卷积神经网络进行训练，得到最优卷积神经网络，利用最优的卷积神经对人脸数据库的人脸数据进行特征提取，取得人脸特征；
步骤S30：构建Storm的拓扑结构，所述Storm的拓扑结构包括若干个数据源输入组件spout；每个数据源输入组件spout分别与若干个数据处理组件bolt连接；
在以数据源输入组件spout为父节点的数据处理组件bolt上分别布置训练好的最优卷积神经网络，且所有数据处理组件bolt具有相同的子节点；所述相同的字节点用于将检测到的人脸区域坐标在检测图像上进行标注和返回检测结果；
步骤S40：数据源输入组件spout将采集的待检测的人脸图像实时视频流分发给各个数据处理组件bolt，每个数据处理组件bolt通过预先布置的最优卷积神经网络进行人脸部位识别、通过分类器对识别的结果进行人脸/非人脸分类、将人脸部位通过最优卷积神经网络进行边界框回归并得出人脸部位在原图中的坐标，返回人脸坐标结果。
所述步骤S40：采用一种基于GPU的资源调度算法：在Storm集群上，通过检测集群中GPU的资源使用情况实时调度任务资源。用基于GPU的资源调度算法实时监控各个数据处理组件bolt的GPU使用状况，将GPU消耗大的进程分配到有强GPU的数据处理组件bolt上。
所述人脸数据库包括多种角度的人脸信息，每种角度的人脸信息包括多张图片。
所述步骤S20包括以下步骤：
将人脸数据库中的信息作为卷积神经网络的输入数据源，使用设定的卷积神经网络默认参数进行卷积神经网络训练；所述默认参数包括初始权值、训练速率和迭代次数；
根据训练中间结果，对默认参数进行不断调整，直到得到最优卷积神经网络网络参数，进而得到最优卷积神经网络；
所述步骤S10中，用于人脸检测的卷积神经网络自上而下包括三个网络结构：
第一个网络结构，包括三层卷积层：
第一卷积层：Input Size 12×12×3，卷积核：3×3、
第二卷积层：Input Size 5×5×10，卷积核：3×3和
第三卷积层：Input Size 3×3×16，卷积核：3×3，
第一个网络结构用于人脸/非人脸区域判断并获得人脸区域的候选窗口、对人脸区域进行边界框回归并得到回归向量；
第二个网络结构，包括三个卷积层和第一全连接层，自上而下依次是：
第四卷积层：Input Size 24×24×3，卷积核：3×3、
第五卷积层：Input Size 11×11×28，卷积核：3×3、
第六卷积层：Input Size 4×4×48，卷积核：2×2、
第一全连接层：Out Size 128，
第二个网络结构用于对第一个网络构获取的边界框再次进行判断人脸和非人脸区域，抑制非人脸区域并进行边界框再回归；
第三个网络结构，包括四个卷积层和第二全连接层，自上而下依次是：
第七卷积层：Input Size 48×48×3，卷积核：3×3、
第八卷积层：Input Size 23×23×32，卷积核：3×3、
第九卷积层：Input Size 10×10×64，卷积核：3×3、
第十卷积层：Input Size 4×4×64，卷积核：2×2、
第二全连接层：Out Size 256；
第三个网络结构用于对从第二个网络结构的获取的边界框进行进一步的边界框人脸/非人脸区域判别，抑制非人脸区域并进行边界框再回归，得出边界框的回归向量坐标即为人脸区域的坐标。
所述步骤40中，
数据源输入组件spout将采集来自流媒体服务器的实时视频流解码为多个帧图像，再将每一帧图像分发给不同数据处理组件bolt；
每个数据处理组件bolt将视频流解码成帧图像，使用训练好的最优卷积神经网络对每一帧图像进行人脸检测，获取人脸区域坐标。
一种基于深度学习的实时人脸检测系统，包括：
人脸数据库和卷积神经网络建立模块：构建人脸数据库，并设计用于人脸检测的卷积神经网络；
训练模块：利用人脸数据库对卷积神经网络进行训练，得到最优卷积神经网络，利用最优的卷积神经对人脸数据库的人脸数据进行特征提取，取得人脸特征；
Storm的拓扑结构构建模块：构建Storm的拓扑结构，所述Storm的拓扑结构包括若干个数据源输入组件spout；每个数据源输入组件spout分别与若干个数据处理组件bolt连接；
在以数据源输入组件spout为父节点的数据处理组件bolt上分别布置训练好的最优卷积神经网络，且所有数据处理组件bolt具有相同的子节点；所述相同的字节点用于将检测到的人脸区域坐标在检测图像上进行标注和返回检测结果；
人脸检测模块：数据源输入组件spout将采集的待检测的人脸图像实时视频流分发给各个数据处理组件bolt，每个数据处理组件bolt通过预先布置的最优卷积神经网络进行人脸部位识别、通过分类器对识别的结果进行人脸/非人脸分类、将人脸部位通过最优卷积神经网络进行边界框回归并得出人脸部位在原图中的坐标，返回人脸坐标结果。
本发明将基于卷积神经网络的人脸检测技术、和Storm实时处理平台相结合，实现基于卷积神经网络的实时人脸检测，具有以下有益效果：
(1)通过卷积神经网络进行特征提取、边界框回归，坐标定位，有效地提高了检测的准确率和检测效率；
(2)利用Storm并行化人脸检测，达到实时检测的目的，有效的提高了检测的效率。
附图说明
图1为本发明提供的一种基于卷积神经网络的实时人脸检测方法的流程图；
图2(a)、图2(b)和图2(c)为本发明中卷积神经网络的网络结构；
图3为本发明中分布式实时处理框架Storm的拓扑结构图。
具体实施方式
下面结合附图与实施例对本发明作进一步说明。
本发明充分利用卷积神经网络学习图像特征的优势以及目前实时云计算技术的特点，将卷积神经网络与实时云计算技术结合，把卷积神经网络应用于人脸特征的检测，减少人工干预，提取出高质量的图像特征，提高人脸检测的准确率；并利用实时云计算中进行大数据实时处理的分布式实时处理框架Storm，解决卷积神经网络消耗大量的GPU资源，在计算量过大时可能达不到实际应用场景中实时效果的问题，提高人脸检测的效率，这在视频监控中人脸自动检测技术方面是一种区别于传统人脸检测系统的新的尝试。
下面结合说明书附图和具体实施例对本发明做出详细的说明。
如图1所示，本发明提供的一种基于卷积神经网络的实时人脸检测方法，包括以下步骤：
步骤S10、利用存储来自流媒体服务器的视频流历史数据构建人脸数据库，并设计用于人脸检测的卷积神经网络，在本发明中，人脸数据库包含多种角度的人脸信息，每种角度的人脸信息有多张图片。
步骤S20、利用人脸数据库中的人脸信息作为卷积神经网络的输入，通过卷积神经网络的卷积神经网络离线训练模块进行卷积神经网络的训练，得到最优的卷积神经网络。
在本发明中，步骤S20具体包括以下步骤：
步骤S21、将人脸数据库中的人脸的信息输入卷积神经网络，使用卷积神经网络默认参数进行卷积神经网络训练；
步骤S22、根据训练中间结果，对默认参数初始权值、训练速率、迭代次数进行不断调整，直到得到最优的卷积神经网络网络参数，此时卷积神经网络会以最高的效率得到最好的检测效果；
步骤S30、构建分布式实时处理框架Storm的拓扑结构，并将训练好的卷积神经网络分别布置在Storm的数据处理组件bolt上，且该数据处理组件bolt以数据源输入组件spout为父节点，这样每个数据处理组件bolt构成用于提取待检测图的卷积神经网络人脸检测模块；布置卷积神经网络的所有数据处理组件bolt具有相同的子节点，在该子节点上将检测到的人脸区域坐标在检测图像上进行标注并返回最终检测结果，如图3所示。
步骤S40、数据源输入组件spout将采集于流媒体服务器的实时视频流分发给其下属各个数据处理组件bolt，每个数据处理组件bolt上的卷积神经网络检测视频流中的人脸特征，由于卷积神经网络会消耗大量的GPU资源，由于在Storm中设计了基于GPU的资源调度算法，能够通过实时监控Storm各个数据处理组件bolt的GPU使用状况，将GPU消耗过大的进程分配到有较强GPU的数据处理组件bolt上，解决卷积神经网络会消耗大量的GPU资源的问题，从而避免由于计算量过大达不到实际应用场景中实时效果的问题，实现人脸检测的实时效果。
在本发明中，数据源输入组件spout将采集来自流媒体服务器的实时视频流解码为多个帧图像，再将每一帧图像分发给不同数据处理组件bolt；
每个数据处理组件bolt使用其上训练好的卷积神经网络对每一帧图像进行人脸检测。
在本发明中，利用历史数据构建人脸数据库，使用设计好的的卷积神经网络由三个网络结构组成：
如图2(a)所示,第一个网络结构，包括三层卷积层：第一卷积层：Input Size 12×12×3，卷积核：3×3、第二卷积层：Input Size 5×5×10，卷积核：3×3和第三卷积层：Input Size 3×3×16，卷积核：3×3，第一个网络结构用于人脸/非人脸区域判断并获得人脸区域的候选窗口、对人脸区域进行边界框回归并得到回归向量；
如图2(b)所示,第二个网络结构，包括三个卷积层和第一全连接层，自上而下依次是第四卷积层：Input Size 24×24×3，卷积核：3×3、第五卷积层：Input Size 11×11×28，卷积核：3×3、第六卷积层：Input Size 4×4×48，卷积核：2×2、全连接层：OutSize128，第二个网络结构对第一个网络构获取的边界框再次进行判断人脸和非人脸区域，抑制非人脸区域并进行边界框再回归；
如图2(c)所示,第三个网络结构，自上而下依次包括四个卷积层和第二全连接层，第七卷积层：Input Size 48×48×3，卷积核：3×3、第八卷积层：Input Size 23×23×32，卷积核：3×3、第九卷积层：Input Size 10×10×64，卷积核：3×3、第十卷积层：InputSize4×4×64，卷积核：2×2、全连接层：Out Size 256；第三个网络结构对从第二个网络结构的获取的边界框进行更加精细的边界框人脸/非人脸区域判别，抑制非人脸区域并进行边界框再回归，得出边界框的回归向量坐标即为人脸区域的坐标。
对此卷积神经网络结构进行训练。
本发明的基于卷积神经网络的实时人脸检测方法，将基于卷积神经网络的特征检测技术与Storm实时处理平台相结合，提高人脸检测的准确率和效率；在充分利用计算资源的前提下，找到最优的网络，对人脸进行检测。
上述虽然结合附图对本发明的具体实施方式进行了描述，但并非对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

Claims (7)

1.一种基于深度学习的实时人脸检测方法，其特征是，包括以下步骤：
步骤S10：构建人脸数据库，并设计用于人脸检测的卷积神经网络；
步骤S20：利用人脸数据库对卷积神经网络进行训练，得到最优卷积神经网络，利用最优的卷积神经对人脸数据库的人脸数据进行特征提取，取得人脸特征；
步骤S30：构建Storm的拓扑结构，所述Storm的拓扑结构包括若干个数据源输入组件spout；每个数据源输入组件spout分别与若干个数据处理组件bolt连接；
在以数据源输入组件spout为父节点的数据处理组件bolt上分别布置训练好的最优卷积神经网络，且所有数据处理组件bolt具有相同的子节点；所述相同的字节点用于将检测到的人脸区域坐标在检测图像上进行标注和返回检测结果；
步骤S40：数据源输入组件spout将采集的待检测的人脸图像实时视频流分发给各个数据处理组件bolt，每个数据处理组件bolt通过预先布置的最优卷积神经网络进行人脸部位识别、通过分类器对识别的结果进行人脸/非人脸分类、将人脸部位通过最优卷积神经网络进行边界框回归并得出人脸部位在原图中的坐标，返回人脸坐标结果。
2.如权利要求1所述的一种基于深度学习的实时人脸检测方法，其特征是，所述步骤S40：采用一种基于GPU的资源调度算法：在Storm集群上，通过检测集群中GPU的资源使用情况实时调度任务资源。用基于GPU的资源调度算法实时监控各个数据处理组件bolt的GPU使用状况，将GPU消耗大的进程分配到有强GPU的数据处理组件bolt上。
3.如权利要求1所述的一种基于深度学习的实时人脸检测方法，其特征是，所述人脸数据库包括多种角度的人脸信息，每种角度的人脸信息包括多张图片。
4.如权利要求1所述的一种基于深度学习的实时人脸检测方法，其特征是，所述步骤S20包括以下步骤：
将人脸数据库中的信息作为卷积神经网络的输入数据源，使用设定的卷积神经网络默认参数进行卷积神经网络训练；所述默认参数包括初始权值、训练速率和迭代次数；
根据训练中间结果，对默认参数进行不断调整，直到得到最优卷积神经网络网络参数，进而得到最优卷积神经网络。
5.如权利要求1所述的一种基于深度学习的实时人脸检测方法，其特征是，所述步骤S10中，用于人脸检测的卷积神经网络自上而下包括三个网络结构：
第一个网络结构，包括三层卷积层：
第一卷积层：Input Size 12×12×3，卷积核：3×3、
第二卷积层：Input Size 5×5×10，卷积核：3×3和
第三卷积层：Input Size 3×3×16，卷积核：3×3，
第一个网络结构用于人脸/非人脸区域判断并获得人脸区域的候选窗口、对人脸区域进行边界框回归并得到回归向量；
第二个网络结构，包括三个卷积层和第一全连接层，自上而下依次是：
第四卷积层：Input Size 24×24×3，卷积核：3×3、
第五卷积层：Input Size 11×11×28，卷积核：3×3、
第六卷积层：Input Size 4×4×48，卷积核：2×2、
第一全连接层：Out Size 128，
第二个网络结构用于对第一个网络构获取的边界框再次进行判断人脸和非人脸区域，抑制非人脸区域并进行边界框再回归；
第三个网络结构，包括四个卷积层和第二全连接层，自上而下依次是：
第七卷积层：Input Size 48×48×3，卷积核：3×3、
第八卷积层：Input Size 23×23×32，卷积核：3×3、
第九卷积层：Input Size 10×10×64，卷积核：3×3、
第十卷积层：Input Size 4×4×64，卷积核：2×2、
第二全连接层：Out Size 256；
第三个网络结构用于对从第二个网络结构的获取的边界框进行进一步的边界框人脸/非人脸区域判别，抑制非人脸区域并进行边界框再回归，得出边界框的回归向量坐标即为人脸区域的坐标。
6.如权利要求1所述的一种基于深度学习的实时人脸检测方法，其特征是，所述步骤40中，
数据源输入组件spout将采集来自流媒体服务器的实时视频流解码为多个帧图像，再将每一帧图像分发给不同数据处理组件bolt；
每个数据处理组件bolt将视频流解码成帧图像，使用训练好的最优卷积神经网络对每一帧图像进行人脸检测，获取人脸区域坐标。
7.一种基于深度学习的实时人脸检测系统，其特征是，包括：
人脸数据库和卷积神经网络建立模块：构建人脸数据库，并设计用于人脸检测的卷积神经网络；
训练模块：利用人脸数据库对卷积神经网络进行训练，得到最优卷积神经网络，利用最优的卷积神经对人脸数据库的人脸数据进行特征提取，取得人脸特征；
Storm的拓扑结构构建模块：构建Storm的拓扑结构，所述Storm的拓扑结构包括若干个数据源输入组件spout；每个数据源输入组件spout分别与若干个数据处理组件bolt连接；
在以数据源输入组件spout为父节点的数据处理组件bolt上分别布置训练好的最优卷积神经网络，且所有数据处理组件bolt具有相同的子节点；所述相同的字节点用于将检测到的人脸区域坐标在检测图像上进行标注和返回检测结果；
人脸检测模块：数据源输入组件spout将采集的待检测的人脸图像实时视频流分发给各个数据处理组件bolt，每个数据处理组件bolt通过预先布置的最优卷积神经网络进行人脸部位识别、通过分类器对识别的结果进行人脸/非人脸分类、将人脸部位通过最优卷积神经网络进行边界框回归并得出人脸部位在原图中的坐标，返回人脸坐标结果。
CN201710106887.6A 2017-02-27 2017-02-27 一种基于深度学习的实时人脸检测方法及系统 Pending CN106874883A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710106887.6A CN106874883A (zh) 2017-02-27 2017-02-27 一种基于深度学习的实时人脸检测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710106887.6A CN106874883A (zh) 2017-02-27 2017-02-27 一种基于深度学习的实时人脸检测方法及系统

Publications (1)

Publication Number Publication Date
CN106874883A true CN106874883A (zh) 2017-06-20

Family

ID=59168818

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710106887.6A Pending CN106874883A (zh) 2017-02-27 2017-02-27 一种基于深度学习的实时人脸检测方法及系统

Country Status (1)

Country Link
CN (1) CN106874883A (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107247944A (zh) * 2017-06-28 2017-10-13 北京智慧眼科技股份有限公司 基于深度学习的人脸检测速度优化方法及装置
CN107423701A (zh) * 2017-07-17 2017-12-01 北京智慧眼科技股份有限公司 基于生成式对抗网络的人脸非监督特征学习方法及装置
CN107609464A (zh) * 2017-07-24 2018-01-19 南京邮电大学 一种实时高精度人脸快速检测方法
CN107633238A (zh) * 2017-10-12 2018-01-26 深圳市信海通科技有限公司 一种视频分析方法以及智能分析服务器
CN108563999A (zh) * 2018-03-19 2018-09-21 特斯联（北京）科技有限公司 一种面向低质量视频图像的人物身份识别方法与装置
CN109101958A (zh) * 2018-11-01 2018-12-28 钟祥博谦信息科技有限公司 基于深度学习的人脸检测系统
CN109598210A (zh) * 2018-11-16 2019-04-09 三星电子（中国）研发中心 一种图片处理方法和装置
TWI657378B (zh) * 2017-09-22 2019-04-21 財團法人資訊工業策進會 複數非線性扭曲鏡頭下之目標追蹤方法及系統
CN109815814A (zh) * 2018-12-21 2019-05-28 天津大学 一种基于卷积神经网络的人脸检测方法
CN109886083A (zh) * 2019-01-03 2019-06-14 杭州电子科技大学 一种基于深度学习的实时场景小脸检测方法
CN110046602A (zh) * 2019-04-24 2019-07-23 李守斌 基于分类的深度学习人脸检测方法
CN110708567A (zh) * 2019-04-15 2020-01-17 中国石油大学(华东) 一种基于主动学习的分布式自优化视频实时解析框架
TWI684959B (zh) * 2018-11-16 2020-02-11 國立雲林科技大學 口鼻異物遮蔽檢測方法及其系統
CN111177469A (zh) * 2019-12-20 2020-05-19 国久大数据有限公司 人脸检索方法及人脸检索装置
CN111860366A (zh) * 2020-07-24 2020-10-30 兰州理工大学白银新材料研究院 一种远程控制的智能人脸识别防疫门禁系统
US10891845B2 (en) 2018-11-28 2021-01-12 National Yunlin University Of Science And Technology Mouth and nose occluded detecting method and system thereof
CN113674373A (zh) * 2021-07-02 2021-11-19 清华大学 基于深度学习的真实感人脸渲染方法与装置
US11182903B2 (en) 2019-08-05 2021-11-23 Sony Corporation Image mask generation using a deep neural network

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140114978A1 (en) * 2012-10-24 2014-04-24 Metavana, Inc. Method and system for social media burst classifications
CN104992147A (zh) * 2015-06-09 2015-10-21 中国石油大学(华东) 一种基于快慢结合云计算环境的深度学习的车牌识别方法
CN105117682A (zh) * 2015-07-06 2015-12-02 肖洒 人脸面部表情识别控制系统
CN105242957A (zh) * 2015-09-28 2016-01-13 广州云晫信息科技有限公司 一种云计算系统调配gpu资源到虚拟机的方法及系统
CN105678214A (zh) * 2015-12-21 2016-06-15 中国石油大学(华东) 云环境下基于卷积神经网络车型识别的车流量统计方法
US20160275341A1 (en) * 2015-03-18 2016-09-22 Adobe Systems Incorporated Facial Expression Capture for Character Animation
CN106228137A (zh) * 2016-07-26 2016-12-14 广州市维安科技股份有限公司 一种基于关键点定位的atm机异常人脸检测方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140114978A1 (en) * 2012-10-24 2014-04-24 Metavana, Inc. Method and system for social media burst classifications
US20160275341A1 (en) * 2015-03-18 2016-09-22 Adobe Systems Incorporated Facial Expression Capture for Character Animation
CN104992147A (zh) * 2015-06-09 2015-10-21 中国石油大学(华东) 一种基于快慢结合云计算环境的深度学习的车牌识别方法
CN105117682A (zh) * 2015-07-06 2015-12-02 肖洒 人脸面部表情识别控制系统
CN105242957A (zh) * 2015-09-28 2016-01-13 广州云晫信息科技有限公司 一种云计算系统调配gpu资源到虚拟机的方法及系统
CN105678214A (zh) * 2015-12-21 2016-06-15 中国石油大学(华东) 云环境下基于卷积神经网络车型识别的车流量统计方法
CN106228137A (zh) * 2016-07-26 2016-12-14 广州市维安科技股份有限公司 一种基于关键点定位的atm机异常人脸检测方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
WEISHAN ZHANG ETC.: "Distributed Embedded Deep Learning based Real-time Video Processing", 《2016 IEEE INTERNATIONAL CONFERENCE ON SYSTEMS，MAN，AND CYBERNETICS》 *

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107247944A (zh) * 2017-06-28 2017-10-13 北京智慧眼科技股份有限公司 基于深度学习的人脸检测速度优化方法及装置
CN107247944B (zh) * 2017-06-28 2020-11-10 智慧眼科技股份有限公司 基于深度学习的人脸检测速度优化方法及装置
CN107423701A (zh) * 2017-07-17 2017-12-01 北京智慧眼科技股份有限公司 基于生成式对抗网络的人脸非监督特征学习方法及装置
CN107609464B (zh) * 2017-07-24 2019-10-29 南京邮电大学 一种实时人脸快速检测方法
CN107609464A (zh) * 2017-07-24 2018-01-19 南京邮电大学 一种实时高精度人脸快速检测方法
TWI657378B (zh) * 2017-09-22 2019-04-21 財團法人資訊工業策進會 複數非線性扭曲鏡頭下之目標追蹤方法及系統
US10445620B2 (en) 2017-09-22 2019-10-15 Institute For Information Industry Method and system for object tracking in multiple non-linear distortion lenses
CN107633238A (zh) * 2017-10-12 2018-01-26 深圳市信海通科技有限公司 一种视频分析方法以及智能分析服务器
CN108563999A (zh) * 2018-03-19 2018-09-21 特斯联（北京）科技有限公司 一种面向低质量视频图像的人物身份识别方法与装置
CN109101958A (zh) * 2018-11-01 2018-12-28 钟祥博谦信息科技有限公司 基于深度学习的人脸检测系统
TWI684959B (zh) * 2018-11-16 2020-02-11 國立雲林科技大學 口鼻異物遮蔽檢測方法及其系統
CN109598210A (zh) * 2018-11-16 2019-04-09 三星电子（中国）研发中心 一种图片处理方法和装置
CN109598210B (zh) * 2018-11-16 2020-10-27 三星电子（中国）研发中心 一种图片处理方法和装置
US10891845B2 (en) 2018-11-28 2021-01-12 National Yunlin University Of Science And Technology Mouth and nose occluded detecting method and system thereof
CN109815814A (zh) * 2018-12-21 2019-05-28 天津大学 一种基于卷积神经网络的人脸检测方法
CN109815814B (zh) * 2018-12-21 2023-01-24 天津大学 一种基于卷积神经网络的人脸检测方法
CN109886083A (zh) * 2019-01-03 2019-06-14 杭州电子科技大学 一种基于深度学习的实时场景小脸检测方法
CN110708567A (zh) * 2019-04-15 2020-01-17 中国石油大学(华东) 一种基于主动学习的分布式自优化视频实时解析框架
CN110046602A (zh) * 2019-04-24 2019-07-23 李守斌 基于分类的深度学习人脸检测方法
US11182903B2 (en) 2019-08-05 2021-11-23 Sony Corporation Image mask generation using a deep neural network
CN111177469A (zh) * 2019-12-20 2020-05-19 国久大数据有限公司 人脸检索方法及人脸检索装置
CN111860366A (zh) * 2020-07-24 2020-10-30 兰州理工大学白银新材料研究院 一种远程控制的智能人脸识别防疫门禁系统
CN113674373A (zh) * 2021-07-02 2021-11-19 清华大学 基于深度学习的真实感人脸渲染方法与装置
CN113674373B (zh) * 2021-07-02 2024-04-26 清华大学 基于深度学习的真实感人脸渲染方法

Similar Documents

Publication Publication Date Title
CN106874883A (zh) 一种基于深度学习的实时人脸检测方法及系统
CN106845415B (zh) 一种基于深度学习的行人精细化识别方法及装置
US9251425B2 (en) Object retrieval in video data using complementary detectors
CN104303193B (zh) 基于聚类的目标分类
CN111047818A (zh) 一种基于视频图像的森林火灾预警系统
CN107609512A (zh) 一种基于神经网络的视频人脸捕捉方法
CN113240688A (zh) 一种一体化洪涝灾害精准监测预警方法
CN106778653A (zh) 面向智能机器人的基于人脸识别样本库的交互方法和装置
CN107426542A (zh) 基于边缘计算的实时人工智能视频系统的硬件架构
CN109194926A (zh) 一种基于边缘计算的城市安防系统及其检测方法
CN111325137A (zh) 暴力分拣检测方法、装置、设备及存储介质
CN108021895A (zh) 人数统计方法、设备、可读存储介质及电子设备
CN111855500A (zh) 一种基于深度学习的复合绝缘子老化程度智能检测方法
CN113408087A (zh) 一种基于云边系统和视频智能分析的变电站巡视方法
CN110176024A (zh) 在视频中对目标进行检测的方法、装置、设备和存储介质
CN109902613A (zh) 一种基于迁移学习和图像增强的人体特征提取方法
CN109241814A (zh) 基于yolo神经网络的行人检测方法
Yan et al. Insulator detection and recognition of explosion based on convolutional neural networks
CN103034868B (zh) 一种针对小样本以及高维图像的分类方法
CN113642403A (zh) 基于边缘计算的人群异动智能安全检测系统
CN109740527B (zh) 一种视频帧中图像处理方法
CN111582654B (zh) 基于深度循环神经网络的服务质量评价方法及其装置
EP4311202A1 (en) End-edge-cloud coordination system and method based on digital retina, and device
CN114241522A (zh) 现场作业安全穿戴识别方法、系统、设备及存储介质
WO2016172262A1 (en) Systems and methods for processing video data for activity monitoring

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170620

RJ01 Rejection of invention patent application after publication