CN103366163A - 基于增量学习的人脸检测系统和方法 - Google Patents

基于增量学习的人脸检测系统和方法 Download PDF

Info

Publication number
CN103366163A
CN103366163A CN201310294528XA CN201310294528A CN103366163A CN 103366163 A CN103366163 A CN 103366163A CN 201310294528X A CN201310294528X A CN 201310294528XA CN 201310294528 A CN201310294528 A CN 201310294528A CN 103366163 A CN103366163 A CN 103366163A
Authority
CN
China
Prior art keywords
face
people
video
module
incremental learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310294528XA
Other languages
English (en)
Other versions
CN103366163B (zh
Inventor
王力国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING FENGHUA UNITED TECHNOLOGY Co Ltd
Original Assignee
BEIJING FENGHUA UNITED TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING FENGHUA UNITED TECHNOLOGY Co Ltd filed Critical BEIJING FENGHUA UNITED TECHNOLOGY Co Ltd
Priority to CN201310294528.XA priority Critical patent/CN103366163B/zh
Publication of CN103366163A publication Critical patent/CN103366163A/zh
Application granted granted Critical
Publication of CN103366163B publication Critical patent/CN103366163B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及一种基于增量学习的人脸检测系统和方法,该系统包括背景建模单元(10),其用于确定视频中的前景区域和背景区域;样本提取单元(20),其从前景区域中提取供增量学习的正样本并从背景区域中提取供增量学习的负样本;增量学习单元(30),其利用正样本和负样本在人脸分类器上进行增量学习,对人脸检测器进行更新;人脸检测单元(40),其利用增量学习后的人脸检测器对人脸进行检测。根据本发明的人脸检测系统和方法,其检测精确度高、实时性强并且训练速度快,从而提升了人脸检测的精度和效率,适用于人脸检测和检测的技术领域。

Description

基于增量学习的人脸检测系统和方法
技术领域
本发明涉及一种基于增量学习的人脸检测系统和方法,适用于人脸检测和检测的技术领域。
背景技术
人脸检测是指对于任意一张给定的图像,采用一定的策略对其进行搜索以确定其中是否含有人脸。
人脸检测是一个复杂的具有挑战性的模式检测问题,其主要的难点有两个方面。一个方面是由于人脸内在的变化所引起:人脸具有相当复杂的细节变化,不同的外貌如脸形、肤色等,不同的表情如眼、嘴的开与闭等;人脸的遮挡,如眼镜、头发和头部饰物以及其他外部物体等。另外一方面是由于外在条件变化所引起:由于成像角度的不同造成人脸的多姿态,如平面内旋转、深度旋转以及上下旋转,其中深度旋转影响较大;光照的影响,如图像中的亮度、对比度的变化和阴影等;图像的成像条件,如摄像设备的焦距、成像距离,图像获得的途径等等。
这些困难都为解决人脸检测问题造成了难度。现有技术中需要一些相关的算法和装置并能在应用过程中达到实时,将为成功构造出具有实际应用价值的人脸检测系统提供保证。
发明内容
本发明提供了一种基于增量学习的人脸检测系统和方法,其检测精确度高、实时性强并且训练速度快。
一方面,根据本发明的一种基于增量学习的人脸检测系统,包括:
背景建模单元,其用于确定视频中的前景区域和背景区域;
样本提取单元,其包括正样本提取单元和负样本提取单元,正样本提取单元从前景区域中提取供增量学习的正样本,负样本提取单元从背景区域中提取供增量学习的负样本;
增量学习单元,其利用正样本和负样本在人脸分类器上进行增量学习,对人脸检测器进行更新;
人脸检测单元,其利用增量学习后的人脸检测器对人脸进行检测。
优选地,背景建模单元使用混合高斯背景建模算法,对视频中的图像进行计算,得到所述图像的混合高斯模型,将图像中符合该模型特性的区域作为背景区域,将不符合该模型特性的区域作为前景区域。
优选地,正样本提取单元将前景区域中基于mean-shift(均值漂移)跟踪算法得到的不能被检测为人脸的图像区域作为正样本;负样本提取单元将背景区域中检测出的人脸区域作为负样本。
优选地,增量学习单元包括:
图像特征计算模块,其对每一个样本计算所述人脸分类器中采用的特征,并逐个计算所述人脸检测器中的弱分类器的参数;
误差估计模块,其基于计算得到的所述弱分类器的参数,分别对每个弱分类器进行误差估计,计算误差的上界,并将误差值进行排序;
人脸检测器更新模块,其根据误差估计模块得到的每个弱分类器的误差值,利用误差最小的弱分类器对人脸检测器进行更新。
另一方面,利用本发明的人脸检测系统进行人脸检测的方法,包括以下步骤:
(1)在背景建模单元中对原始视频进行背景建模,确定视频中的前景区域和背景区域;
(2)将背景建模单元输出的前景区域和背景区域分别输入到样本提取单元的正样本提取模块和负样本提取模块中;
(3)增量学习单元基于样本提取单元输出的正样本和负样本进行增量学习.利用误差最小的弱分类器不断对人脸检测器进行更新,将更新后的人脸检测器输出到所述人脸检测单元中;
(4)利用更新后的人脸检测器进行人脸检测。
优选地,增量学习单元进行增量学习的步骤包括:
(1)利用所述增量学习单元中的图像特征计算模块对每一个样本计算人脸分类器中采用的特征,并逐个计算人脸检测器中的弱分类器的参数;
(2)增量学习单元中的误差估计模块基于计算得到的弱分类器的参数,分别对每个弱分类器进行误差估计,计算分类器误差的上界,并将误差值进行排序;
(3)增量学习单元中的人脸检测器更新模块根据误差估计模块得到的每个弱分类器的误差值,利用误差最小的弱分类器对人脸检测器进行更新。
优选地,正样本提取模块提取正样本的方法为:设定一个阈值,对输入的前景区域进行人脸检测,待分类人脸窗口得分大于所述阈值的认定为人脸,然后使用均值漂移的人脸跟踪算法继续跟踪该人脸在后续5帧中出现的未检测为人脸的窗口,作为正样本。
又一方面,本发明还涉及一种视频浏览系统,包括:
视频帧提取模块,其直接对实时视频流或历史视频文件进行处理,以提取视频帧;
人脸检测模块,其利用本发明的上述人脸检测系统对每个视频帧的图像进行人脸检测,并建立人脸库;
索引生成模块,其作为人脸检测模块的后端,实时处理人脸检测结果,将人脸在视频中出现的时间点保存为包含xml标记的视频索引文件;
视频浏览模块,其为人机交互模块,当用户从人脸库中选择待检索或浏览的人脸图片时,其自动根据视频索引文件定位到人脸对应的视频片段,实现对原始视频的快速定位与浏览。
利用本发明的基于增量学习的人脸检测系统和方法,能够大大提升人脸检测的精度和效率。
附图说明
图1显示了根据本发明的基于增量学习的人脸检测系统的组成示意图。
图2为根据本发明的基于增量学习的人脸检测系统运行时的流程示意图。
图3为根据本发明的基于增量学习的人脸检测系统中的样本提取单元的功能模块及其流程示意图。
图4为根据本发明的基于增量学习的人脸检测系统中的增量学习单元的功能模块及其流程示意图。
图5显示了根据本发明的基于人脸检测的视频浏览系统的框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,下文中将结合附图对本发明的实施例进行详细说明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。
参见图1,其中显示了根据本发明的基于增量学习的人脸检测系统的组成示意图,如图所示,该系统包括:
1.背景建模单元10:用于确定视频中的前景区域和背景区域。优选地,使用混合高斯背景建模算法,对视频中的图像进行计算,得到所述图像的混合高斯模型,将图像中符合该模型特性的区域作为背景区域,将不符合该模型特性的区域作为前景区域。
2.样本提取单元20:分别对前景区域和背景区域进行人脸检测。样本提取单元20包括正样本提取单元201和负样本提取单元202,正样本提取单元201从前景区域中提取供增量学习的正样本,负样本提取单元202从背景区域中提取供增量学习的负样本。优选地,正样本提取单元201将前景区域中基于mean-shift跟踪算法得到的不能被检测为人脸的图像区域作为正样本;负样本提取单元202将背景区域中检测出的人脸区域作为负样本。
3.增量学习单元30:其包括图像特征计算模块301、误差估计模块302和人脸检测器更新模块303,这三个功能模块分别利用供增量学习的正负样本,进行样本特征计算、分类器参数修正和分类器误差估计,最后选择分类误差最小的弱分类器对人脸检测器进行更新。
4.人脸检测单元40:在离线训练得到的人脸检测器401的基础上,结合背景建模和增量学习,不断更新得到增强的人脸检测器,进行人脸检测。
图2为根据本发明的基于增量学习的人脸检测系统运行时的流程示意图,图3为根据本发明的基于增量学习的人脸检测系统中的样本提取单元20的功能模块及其流程示意图。结合图2-3,根据本发明的人脸检测方法包括以下步骤:
1.在背景建模单元10中,对原始视频进行背景建模,得到背景模型。使用混合高斯背景建模算法,对视频中的图像进行计算,得到图像的混合高斯模型,将图像中符合该模型特性的区域作为背景区域,将不符合该模型特性的区域作为前景区域,从而确定视频中的前景区域和背景区域,并将前景区域和背景区域输出给样本提取单元20。
2.在样本提取单元20中,将背景建模单元10输出的前景区域和背景区域分别输入到正样本提取模块201和负样本提取模块202中。正样本提取模块201对前景区域进行人脸检测,将前景区域中基于mean-shift跟踪算法得到的但不能被检测为人脸的图像区域作为正样本输出到增量学习单元30中;负样本提取模块202对背景区域进行人脸检测,将检测出的人脸区域作为负样本输出到增量学习单元30中。其中,获取正样本和负样本的具体方法为:首先,基于标准人脸数据库离线训练出一个初步的人脸检测器;然后,通过设置较低的检测阈值,以获得较高的检测率,对从某个场景获取的历史视频帧进行检测,手动将检测结果中的非人脸选出,基于此人脸与非人脸获得增量学习的正负样本。
3.在增量学习单元30中,基于样本提取单元20输出的正样本和负样本进行增量学习,利用误差最小的弱分类器不断对人脸检测器401进行更新,最终将更新后的人脸检测器输出到人脸检测单元40中。
4.在人脸检测单元40中,利用更新后的人脸检测器进行人脸检测。
如图3所示,样本提取单元20包括:
正样本提取模块201,其设定一个阈值T1,对输入的前景区域进行人脸检测,待分类人脸窗口得分大于T1的认定为人脸,然后使用均值漂移(mean-shift)的人脸跟踪算法继续跟踪该人脸在后续5帧中出现的未检测为人脸的窗口,作为正样本,输出给增量学习单元30,以扩充样本的多样性,提升分类器的检测性能;
负样本提取模块202,其设置一个区间[T2,T1](其中,T1>T2),对输入的背景区域进行人脸检测,待分类人脸窗口得分在这个区间内的作为负样本,输出给增量学习单元30,以扩充样本的多样性,提升分类器的检测性能。
图4为根据本发明的基于增量学习的人脸检测系统中的增量学习单元30的功能模块及其流程示意图,增量学习单元30包括图像特征计算模块301、误差估计模块302和人脸检测器更新模块303。
图像特征计算模块301,其对每一个样本计算人脸分类器中所采用的特征(可为Haar-like特征或LBP特征),利用这些特征值,逐个计算当前人脸检测器中的弱分类器的参数(阈值和权重)。
误差估计模块302,其基于图像特征计算模块301中弱分类器的新参数,分别对每个弱分类器进行误差估计,计算分类器误差的上界,并将误差值进行排序。误差估计由巴氏距离计算得出。
人脸检测器更新模块303,根据误差估计模块302得到的每个弱分类器的误差值,利用误差最小的N个弱分类器对人脸检测器进行更新,人脸检测器中其他分类器的参数保持不变,人脸检测器中的弱分类器总数保持不变。
下面将说明本发明的人脸检测系统进行增量学习的算法。需要说明的是,对于本领域技术人员来说,可以采用的增量学习的方法有很多种,以下描述的只是其中一种可能的优选实施方式。
本发明提出了一种离线Adaboost训练和增量学习相融合的方法,其中采用Gentle Adaboost算法进行弱分类器的训练,目的在于自动选取最优的N个弱分类器h(x)组合成一个强分类器H(x):
H ( x ) = Σ k = 1 N α k h k ( x ) - - - ( 1 )
其中αk表示k个分类器的标量值。
人脸检测问题可以作为一个二值分类问题,为了能介绍清楚本发明中的算法,先介绍其中基于高斯分布的弱分类器设计:假设人脸属于ω1类而非人脸属于ω2类。当同样采用高斯分布对每个弱分类器进行建模时,特征分布由两个参数确定:均值μ和方差σ2。因此对于一维特征x而言,其均值和方差可以表达为:
μ i = 1 N Σ x ∈ ω i x - - - ( 2 )
σ i 2 = 1 N Σ x ∈ ω i ( x - u i ) 2 - - - ( 3 )
两个高斯分布均值的算术平均值为:
μ = μ 1 + μ 2 2 - - - ( 4 )
可以通过利用判别式函数来获得最小误检率的分类器。
f i ( x ) = ln [ p ( ω i | x ) ] = ln p ( x | ω i ) + ln P ( ω i ) = - 1 2 ( x - u i σ ) 2 - 1 2 ln 2 π - 1 2 ln σ i 2 + ln P ( ω i ) - - - ( 5 )
假设本发明中先验概率P(ωi)是同一的。p(x|ωi)表示分段条件概率。ω1和ω2之间的界限通过下列公式的解来确定:
f(x)=f1(x)-f2(x)=0       (6)
将(5)代入(6),得到
f ( x ) = ( σ 1 2 - σ 2 2 ) x 2 + ( 2 σ 2 2 u 1 - 2 σ 1 2 ) x + σ 1 2 u 2 2 - σ 2 2 u 1 2 + σ 1 2 σ 2 2 ln ( σ 2 2 σ 1 2 ) = 0 - - - ( 7 )
如果σ1=σ2,那么新阈值为式(7)的唯一解
θ = x = ( u 1 + u 2 ) 2 = μ - - - ( 8 )
如果σ1≠σ2,式(7)有两个不同解
x 1,2 = - ( σ 2 2 u 1 - σ 1 2 u 2 ) ± ( σ 2 2 u 1 - σ 1 2 u 2 ) 2 - ( σ 1 2 - σ 2 2 ) ( σ 1 2 u 2 2 - σ 2 2 u 1 2 + σ 1 2 σ 2 2 ln ( σ 2 2 / σ 1 2 ) ) ( σ 1 2 - σ 2 2 ) - - - ( 9 )
取θ=x=min(abs(x1一μ),abs(x2一μ))+μ,即距离正负样本高斯分布均值的算术平均值较近的解为特征x的新阈值。
在本发明的算法中,增量样本逐一参与到增量学习的过程中,并使用如下公式分别对正负样本高斯分布的u和σ2进行更新:
u ( n ) = m 1 + m u ( n - 1 ) + 1 1 + m x ( n ) - - - ( 10 )
σ 2 ( n ) = m 1 + m σ 2 ( n - 1 ) + 1 1 + m ( x ( n ) - u ( n ) ) 2 - - - ( 11 )
本发明使用加权平均的方法计算增量学习后的模型参数,其中,u(n一1)和σ2(n-1)分别为该特征的分布在增量学习前的均值和方差,u(n)和σ2(n)分别为该特征的分布在输入第n个样本后的均值和方差。x(n)为第n个增量输入的样本在一维特征x上的取值。m确定了增量学习中的加权系数,即新样本的特征取值对参数更新的贡献程度,m通常等于本次增量前的样本总数M。随着增量的样本逐渐增多,增量系数1/(1+m)递减,也即增量模型在适应新的场景后逐渐趋于稳定。为了避免当样本较少时,增量系数很大造成旧模型的偏倚,限定m的最小值为200,即当M小于200时,m取值为200。
对离线模型进行增量学习之前,利用离线模型的正、负训练样本,分别计算出离线模型每个特征(弱分类器)的高斯分布的均值u(0)和方差σ2(0),作为增量学习的初始值。增量学习阶段,不再需要离线模型的训练样本参与计算。
为了评判增量后的分类器优良,本发明引入Bhattacharyya界限计算分类器误差的上限e,按如下公式给定:
e=exp(-k(1/2))            (12)
k ( 1 / 2 ) = 1 8 ( u 2 - u 1 ) t [ σ 1 + σ 2 2 ] - 1 ( u 2 - u 1 ) + 1 2 ln | σ 1 + σ 2 2 | σ 1 σ 2 - - - ( 13 )
= 1 4 ( u 2 - u 1 ) t 1 σ 1 + σ 2 ( u 2 - u 1 ) + 1 2 ln | σ 1 + σ 2 | 2 σ 1 σ 2
其中
Figure BSA0000092490220000093
Figure BSA0000092490220000094
分别为人脸(ω1)和非人脸(ω2)的均值和方差。
将每个弱分类器的误差e按从小到大排序,若e1<e2<…<eth<eN…,N为离线模型中弱分类器的个数。取误差e小于eth的弱分类器对相应的分类器阈值θi按公式(8)计算得到的θ进行更新,其中eth取值为1.5。
由于本发明的增量算法不对弱分类器的类型和个数做更新,而仅仅只对弱分类器的阈值做更新,并不是最优的结果。因此在离线分类器的基础上进行特征选择,对增量后的所有弱分类器,用增量样本对它们进行分类能力的评估,得到每个弱分类器在增量样本上的分类能力。
弱分类器分类能力的计算:分别用离线模型的N个弱分类器对增量样本(正负样本)进行测试,统计每个弱分类器对正负样本的分类结果。例如:对于分类器1,有P个正样本的通过,有N个负样本通过,则分类器1的分类能力C为P-N,C越趋于正,则对正、负样本的分类能力越强。
利用用于增量学习的正负样本来选择那些对增量样本有最大区分度的前20个弱分类器,这20个弱分类器(称之为特异分类器)可能分布在不同的强分类器中,在测试样本通过级联强分类器时,将统计该样本通过的特异分类器的个数SN。若该样本通过所有的级联强分类器,则判断SN是否大于设定的阈值(例如,设为10),大于则判定该样本为正样本,否则判定为负样本。
利用根据本发明的基于增量学习的人脸检测系统和方法,其能够使人脸检测器进行增量学习,从而提升了人脸检测的精度和效率。
基于本发明的人脸检测系统,还可以构建一种视频浏览系统,主要包括:视频帧提取模块、人脸检测模块、索引生成模块、视频浏览模块。其中视频帧提取模块可支持不同视频编码格式的文件,如视频监控领域最常用的H.264以及MPEG4。本发明的视频浏览系统可通过视频帧提取模块直接对实时视频流或历史视频文件进行处理,以提取视频帧。在此之前,需要对视频进行预处理,即将每个视频帧从YUV格式转换成RGB格式。人脸检测模块利用本发明中以上所述的人脸检测系统,对转换后的RGB图像进行人脸检测,并建立人脸库,所用分类器采用本发明提出的基于增量学习的检测器,以适应于不同应用场景,获取最佳检测效果。索引生成模块作为人脸检测模块的后端,实时处理人脸检测结果,将人脸在视频中出现的时间点保存并组织为包含xml标记的视频索引文件。视频浏览模块为主要的人机交互模块,当有视频检索和浏览任务时,由用户从人脸库中选择待检索或浏览的人脸图片,系统自动根据视频索引文件,直接定位到人脸对应的视频片段,实现对原始视频的快速定位与高效浏览。当发现感兴趣的人物事件时,再通过网络获取高质量的原始视频片段,进行细致的浏览或取证。基于人脸检测的视频浏览系统的框图如图5所示。
虽然本发明所揭露的实施方式如上,但所述的内容只是为了便于理解本发明而采用的实施方式,并非用以限定本发明。任何本发明所属技术领域内的技术人员,在不脱离本发明所揭露的精神和范围的前提下,可以在实施的形式上及细节上作任何的修改与变化,但本发明的专利保护范围,仍须以所附的权利要求书所界定的范围为准。

Claims (10)

1.一种基于增量学习的人脸检测系统,其特征在于,所述人脸检测系统包括:
背景建模单元(10),其用于确定视频中的前景区域和背景区域;
样本提取单元(20),其包括正样本提取单元(201)和负样本提取单元(202),所述正样本提取单元从前景区域中提取供增量学习的正样本,所述负样本提取单元从背景区域中提取供增量学习的负样本;
增量学习单元(30),其利用所述正样本和所述负样本在人脸分类器上进行增量学习,对人脸检测器进行更新;
人脸检测单元(40),其利用增量学习后的人脸检测器对人脸进行检测。
2.根据权利要求1所述的人脸检测系统,其特征在于,所述背景建模单元使用混合高斯背景建模算法,对视频中的图像进行计算,得到所述图像的混合高斯模型,将图像中符合该模型特性的区域作为背景区域,将不符合该模型特性的区域作为前景区域。
3.根据权利要求1或2所述的人脸检测系统,其特征在于,所述正样本提取单元将前景区域中基于均值漂移跟踪算法得到的不能被检测为人脸的图像区域作为正样本;所述负样本提取单元将背景区域中检测出的人脸区域作为负样本。
4.根据权利要求1至3中任一项所述的人脸检测系统,其特征在于,所述增量学习单元包括:
图像特征计算模块(301),其对每一个样本计算所述人脸分类器中采用的特征,并逐个计算所述人脸检测器中的弱分类器的参数;
误差估计模块(302),其基于计算得到的所述弱分类器的参数,分别对每个弱分类器进行误差估计,计算误差的上界,并将误差值进行排序;
人脸检测器更新模块(303),其根据所述误差估计模块(302)得到的每个弱分类器的误差值,利用误差最小的弱分类器对人脸检测器进行更新。
5.一种利用根据权利要求1所述的人脸检测系统进行人脸检测的方法,其特征在于,包括以下步骤:
(1)在所述背景建模单元中对原始视频进行背景建模,确定视频中的前景区域和背景区域;
(2)将所述背景建模单元输出的所述前景区域和所述背景区域分别输入到所述样本提取单元的所述正样本提取模块和所述负样本提取模块中;
(3)所述增量学习单元基于所述样本提取单元输出的正样本和负样本进行增量学习,利用误差最小的弱分类器不断对人脸检测器进行更新,将更新后的人脸检测器输出到所述人脸检测单元中;
(4)利用更新后的人脸检测器进行人脸检测。
6.根据权利要求5所述的方法,其特征在于,所述背景建模单元使用混合高斯背景建模算法,对视频中的图像进行计算,得到所述图像的混合高斯模型,将图像中符合该模型特性的区域作为背景区域,将不符合该模型特性的区域作为前景区域。
7.根据权利要求5或6所述的方法,其特征在于,所述正样本提取单元将前景区域中基于均值漂移跟踪算法得到的不能被检测为人脸的图像区域作为正样本;所述负样本提取单元将背景区域中检测出的人脸区域作为负样本。
8.根据权利要求5或6所述的方法,其特征在于,所述增量学习单元进行增量学习的步骤包括:
(1)利用所述增量学习单元中的图像特征计算模块对每一个样本计算人脸分类器中采用的特征,并逐个计算所述人脸检测器中的弱分类器的参数;
(2)所述增量学习单元中的误差估计模块基于计算得到的所述弱分类器的参数,分别对每个弱分类器进行误差估计,计算分类器误差的上界,并将误差值进行排序;
(3)所述增量学习单元中的人脸检测器更新模块根据所述误差估计模块得到的每个弱分类器的误差值,利用误差最小的弱分类器对人脸检测器进行更新。
9.根据权利要求5所述的方法,其特征在于,所述正样本提取模块提取所述正样本的方法为:设定一个阈值,对输入的前景区域进行人脸检测,待分类人脸窗口得分大于所述阈值的认定为人脸,然后使用均值漂移的人脸跟踪算法继续跟踪该人脸在后续5帧中出现的未检测为人脸的窗口,作为正样本。
10.一种视频浏览系统,包括:
视频帧提取模块,所述视频帧提取模块直接对实时视频流或历史视频文件进行处理,以提取视频帧;
人脸检测模块,所述人脸检测模块利用根据权利要求1所述的人脸检测系统对每个视频帧的图像进行人脸检测,并建立人脸库;
索引生成模块,所述索引生成模块作为所述人脸检测模块的后端,实时处理人脸检测结果,将人脸在视频中出现的时间点保存为包含xml标记的视频索引文件;
视频浏览模块,所述视频浏览模块为人机交互模块,当用户从人脸库中选择待检索或浏览的人脸图片时,所述视频浏览模块自动根据所述视频索引文件定位到人脸对应的视频片段,实现对原始视频的快速定位与浏览。
CN201310294528.XA 2013-07-15 2013-07-15 基于增量学习的人脸检测系统和方法 Active CN103366163B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310294528.XA CN103366163B (zh) 2013-07-15 2013-07-15 基于增量学习的人脸检测系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310294528.XA CN103366163B (zh) 2013-07-15 2013-07-15 基于增量学习的人脸检测系统和方法

Publications (2)

Publication Number Publication Date
CN103366163A true CN103366163A (zh) 2013-10-23
CN103366163B CN103366163B (zh) 2016-07-20

Family

ID=49367469

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310294528.XA Active CN103366163B (zh) 2013-07-15 2013-07-15 基于增量学习的人脸检测系统和方法

Country Status (1)

Country Link
CN (1) CN103366163B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107392936A (zh) * 2017-06-09 2017-11-24 广东光阵光电科技有限公司 一种基于meanshift的目标跟踪方法
CN109034247A (zh) * 2018-07-27 2018-12-18 北京以萨技术股份有限公司 一种基于跟踪算法的较高纯度的人脸识别样本提取方法
CN109766954A (zh) * 2019-01-31 2019-05-17 北京市商汤科技开发有限公司 一种目标对象处理方法、装置、电子设备及存储介质
CN110968718A (zh) * 2019-11-19 2020-04-07 北京百度网讯科技有限公司 目标检测模型负样本挖掘方法、装置及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020136433A1 (en) * 2001-03-26 2002-09-26 Koninklijke Philips Electronics N.V. Adaptive facial recognition system and method
CN101021904A (zh) * 2006-10-11 2007-08-22 鲍东山 视频内容分析系统
CN101221623A (zh) * 2008-01-30 2008-07-16 北京中星微电子有限公司 一种物体类型的在线训练和识别方法及其系统
US20100202681A1 (en) * 2007-06-01 2010-08-12 Haizhou Ai Detecting device of special shot object and learning device and method thereof
CN102156707A (zh) * 2011-02-01 2011-08-17 刘中华 一种视频摘要形成和搜索的方法、系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020136433A1 (en) * 2001-03-26 2002-09-26 Koninklijke Philips Electronics N.V. Adaptive facial recognition system and method
CN101021904A (zh) * 2006-10-11 2007-08-22 鲍东山 视频内容分析系统
US20100202681A1 (en) * 2007-06-01 2010-08-12 Haizhou Ai Detecting device of special shot object and learning device and method thereof
CN101221623A (zh) * 2008-01-30 2008-07-16 北京中星微电子有限公司 一种物体类型的在线训练和识别方法及其系统
CN102156707A (zh) * 2011-02-01 2011-08-17 刘中华 一种视频摘要形成和搜索的方法、系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
徐立: "鲁棒人脸跟踪系统关键技术的研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》, 15 June 2007 (2007-06-15) *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107392936A (zh) * 2017-06-09 2017-11-24 广东光阵光电科技有限公司 一种基于meanshift的目标跟踪方法
CN107392936B (zh) * 2017-06-09 2020-06-05 广东光阵光电科技有限公司 一种基于meanshift的目标跟踪方法
CN109034247A (zh) * 2018-07-27 2018-12-18 北京以萨技术股份有限公司 一种基于跟踪算法的较高纯度的人脸识别样本提取方法
CN109034247B (zh) * 2018-07-27 2021-04-23 北京以萨技术股份有限公司 一种基于跟踪算法的较高纯度的人脸识别样本提取方法
CN109766954A (zh) * 2019-01-31 2019-05-17 北京市商汤科技开发有限公司 一种目标对象处理方法、装置、电子设备及存储介质
US11403489B2 (en) 2019-01-31 2022-08-02 Beijing Sensetime Technology Development Co., Ltd. Target object processing method and apparatus, electronic device, and storage medium
CN110968718A (zh) * 2019-11-19 2020-04-07 北京百度网讯科技有限公司 目标检测模型负样本挖掘方法、装置及电子设备

Also Published As

Publication number Publication date
CN103366163B (zh) 2016-07-20

Similar Documents

Publication Publication Date Title
CN109522853B (zh) 面向监控视频的人脸检测与搜索方法
CN102214291B (zh) 一种快速准确的基于视频序列的人脸检测跟踪方法
CN101923645B (zh) 适应复杂应用场景中低质量虹膜图像的虹膜分割方法
CN102385703B (zh) 一种基于人脸的身份认证方法及系统
CN103902978B (zh) 人脸检测及识别方法
CN102521565A (zh) 低分辨率视频的服装识别方法及系统
CN102156983A (zh) 基于模式识别与目标跟踪的异常行人位置检测方法
CN103778409A (zh) 基于人脸特征数据挖掘的人脸识别方法与装置
CN101620673A (zh) 一种鲁棒的人脸检测及跟踪方法
CN107066963B (zh) 一种自适应人群计数方法
CN104036278A (zh) 人脸算法标准脸部图像的提取方法
CN105718866A (zh) 一种视觉目标检测与识别方法
CN108009472A (zh) 一种基于卷积神经网络和贝叶斯分类器的指背关节纹识别方法
CN104463232A (zh) 一种基于hog特征和颜色直方图特征的密度人群计数的方法
CN101996308A (zh) 人脸认证方法及系统、人脸模型训练方法及系统
CN108537143B (zh) 一种基于重点区域特征比对的人脸识别方法与系统
CN102073676A (zh) 一种网络色情视频实时检测方法和系统
CN105335691A (zh) 笑脸识别鼓励系统
CN104657724A (zh) 一种交通视频行人检测方法
CN103473564A (zh) 一种基于敏感区域的正面人脸检测方法
WO2013075295A1 (zh) 低分辨率视频的服装识别方法及系统
Kuang et al. Real-Time Detection and Recognition of Road Traffic Signs using MSER and Random Forests.
CN103366163B (zh) 基于增量学习的人脸检测系统和方法
CN106599834A (zh) 信息推送方法和系统
CN104123714A (zh) 一种人流量统计中最优目标检测尺度的生成方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: 100085, room 26, room 3, information road, Haidian District, Beijing, 0308/0310

Applicant after: Beijing Fenghua United Technology Co., Ltd.

Address before: 100085, Beijing, Haidian District on the road No. 26, room 906, room 9

Applicant before: Beijing Fenghua United Technology Co., Ltd.

C14 Grant of patent or utility model
GR01 Patent grant