CN101221623B - 一种物体类型的在线训练和识别方法及其系统 - Google Patents

一种物体类型的在线训练和识别方法及其系统 Download PDF

Info

Publication number
CN101221623B
CN101221623B CN2008100572132A CN200810057213A CN101221623B CN 101221623 B CN101221623 B CN 101221623B CN 2008100572132 A CN2008100572132 A CN 2008100572132A CN 200810057213 A CN200810057213 A CN 200810057213A CN 101221623 B CN101221623 B CN 101221623B
Authority
CN
China
Prior art keywords
sample
training
classifier
weak
weak classifier
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2008100572132A
Other languages
English (en)
Other versions
CN101221623A (zh
Inventor
邓亚峰
王俊艳
王磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vimicro Corp
Original Assignee
Vimicro Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vimicro Corp filed Critical Vimicro Corp
Priority to CN2008100572132A priority Critical patent/CN101221623B/zh
Publication of CN101221623A publication Critical patent/CN101221623A/zh
Application granted granted Critical
Publication of CN101221623B publication Critical patent/CN101221623B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本发明涉及一种物体类型的在线训练和识别方法,包括:进行图像采集,并对所采集到的图像进行背景建模;根据建模结果提取前景物体区域,并对该区域是否为目标类物体进行初步验证;将通过初步验证的样本作为正样本,而将背景图像中存在的相同形状的区域作为反样本;提取当前搜集的正样本和反样本的特征,并送入在线物体训练模型进行在线训练,采用训练好的模型对所提取的前景物体区域的物体类型进行类型识别,得到物体类型。本发明的方法运算速度快,且能更好地适应应用场景。

Description

一种物体类型的在线训练和识别方法及其系统
技术领域
本发明涉及一种物体类型的识别方法及系统,尤其涉及一种物体类型的在线训练和识别方法及其系统。
背景技术
智能视频监控中,不仅仅需要得到视频中前景物体的轨迹,大小等信息,还需要识别物体的种类,比如区分人,汽车,以及其它物体。
现有的物体识别技术中,基于启发式规则方式的,多采用物体的形状、大小、比例等简单信息对提取的前景物体进行分析,得到物体种类。这种方法比较简单,但是效果较差,抗干扰能力较差。
而基于训练方式的方法一般采用采集割取各类别样本,采用离线训练的方式,训练得到能够区分样本类别的分类器,再采用训练模型将监控场景中提取的前景进行分类。
如图1所示,传统的基于离线训练方式的物体类型训练识别方法一般分为两个阶段:
第一阶段,离线训练模型。训练过程如下:
首先,进行图像采集。需要采集包含有物体的图像,作为正样本的训练样本来源,并标定出其中物体的位置和大小;同时,需要采集不包含有物体的图像,作为反样本的训练样本来源;
其次,按照标定结果,割取标定物体作为正样本。同时,割取反样本,定义非正样本的区域均为反样本;
第三,对于所有采集的正样本和反样本,计算其特征,即分别提取所有正样本特征和反样本特征;
第四,将所有正样本特征和反样本特征送入训练模块进行离线训练,得到训练模型。
第二阶段,物体类型识别。识别过程如下:
首先,采集图像,并对背景建模,提取前景区域;
其次,采用训练好的模型识别前景区域,得到物体类型;
这种离线训练识别方法,效果较好,但是,采集和标定训练样本的工作量很大,不利于实现,而且,受所采集训练样本模式的影响较大,会出现在一类场景中采集的样本训练得到的模型对其他场景效果不好,而采集所有场景的样本进行训练,分类器又收敛缓慢,造成处理速度降低,而且,资源代价很高。
发明内容
本发明所要解决的技术问题在于提供一种物体类型的在线训练和识别方法及其系统,克服传统基于离线的方式运算缓慢,不能更好地适应应用场景的缺陷。
为了实现上述目的,本发明提供了一种物体类型的在线训练和识别方法,其特点在于,包括:进行图像采集,并对所采集到的图像进行背景建模;根据建模结果提取前景物体区域,并对该区域是否为目标类物体进行初步验证,其中进行初步验证的过程包括在线搜集目标类物体的样本,采用增量的PCA算法训练该目标类物体的PCA空间;在训练样本达到预定数目后,认为该PCA空间可信;以及将获取的前景物体区域投影到该目标类物体的可信PCA空间上,得到投影向量,如果投影向量的二范数大于预设的一阈值,则认为是该类物体,可作为正样本训练,否则,认为不是,抛弃;将通过初步验证的样本作为正样本,而将背景图像中存在的相同形状的区域作为反样本;提取当前搜集的正样本和反样本的弱特征,构造弱分类器;采用层次型在线adaboost算法训练多个强分类器,该多个强分类器层层相连构成一个层次型结构的最终强分类器,其中每个强分类器由多个选择器组成,且所述多个选择器共用一个弱分类器组;利用该最终强分类器对所提取的前景物体区域进行物体类型识别,将通过该最终强分类器的所有层的样本认为是正样本,否则认为是反样本。
优选地,在提取前景物体区域之后和进行初步验证之前,还包括:对所提取的前景物体区域进行物体分割。
优选地,所述进行物体分割的步骤包括:训练目标类物体的物体模型;按照物体的形状对各种不同尺度,处于所提取的前景物体区域中不同位置的图像区域采用该物体模型进行判定;如果该尺度该位置的图像区域通过了该物体模型,则认为该图像区域为一个该目标类物体,从而将所述前景物体区域中粘连在一起的多个物体分开,将分割后的前景物体区域输出以进行物体类型识别。
优选地,本发明采用下述强分类器训练构造算法训练强分类器:初始化组成最终强分类器的弱分类器;初始化所有的选择器,选择器包括选择的弱分类器和弱分类器权重;初始化所有选择器对应所有弱特征的分类正确样本权重和λn,m c以及分类错误样本权重和λn,m w;对于当前的一个样本,样本标签为l,如果l=1则为正样本,l=-1为反样本;设定样本权重为w=1;更新M个在线弱特征构造的弱分类器组;对于N个选择器,更新选择器的弱分类器序号j和弱分类器权重αn
优选地,所述弱特征采用各种不同尺度,不同位置的HOG特征,且该HOG特征是一个NHOG维的向量。
优选地,采用基于最近邻的方式构造所述弱分类器,所述弱分类器形式为:
h j weak ( x ) = sign ( D ( f j ( x ) , c j p ) - D ( f j ( x ) , c j n ) ) ;
其中,cj p为正样本第j个特征中心,cj n为反样本第j个特征中心,fj(x)为当前特征。
优选地,所述初始化组成最终强分类器的弱分类器步骤是采用从所有的候选弱特征中随机选取的方式获得。
优选地,所述更新M个在线弱特征构造的弱分类器组的步骤是采用卡尔曼滤波方式在线更新弱特征的均值cj p和cj n,从而实现在线更新弱分类器。
优选地,所述对于N个选择器,更新选择器的弱分类器序号j和弱分类器权重αn步骤包括:
获取M个弱分类器对于样本的分类结果标志Hyp(m),分类正确为1,否则,为0;
为每个弱分类器设定未使用标志bUsedm,标志是否已经被某个选择器选择使用,如果已经使用为1,没有使用为0;
对于所有的N个选择器,进行下列处理更新:
对于所有的M个弱分类器,根据其对样本的分类结果,如果Hypm为1,则
Figure GSB00000041644800032
否则,
Figure GSB00000041644800033
如果当前弱分类器没有使用,即bUsedm为1,则跳过,对所有没有使用过的弱分类器计算分类错误率en,m,并选择错误率最小的en作为当前选择器的弱分类器,即取j=arg min(en,m),同时计算弱分类器权重αn;更新样本的权重w;
替换分类效果最差的T个弱分类器。
优选地,所述分类错误率en,m满足:
e n , m = λ n , m w λ n , m w + λ n , m c ;
所述弱分类器权重αn满足:
α n = 0.5 ln ( 1 - e n e n ) ;
所述样本的权重w满足:
如果Hyp(j)为1则
Figure GSB00000041644800043
否则,
Figure GSB00000041644800044
优选地,在所述采用层次型在线adaboost算法训练多个强分类器层层相连构成一个层次型结构的最终强分类器,以及利用该最终强分类器对所提取的前景物体区域进行物体类型识别的过程中,对于输入的反样本,采用所述强分类器训练构造算法训练第一层强分类器中的各个选择器,训练完成后,采用训练好的第一层强分类器对输入的反样本进行分类,如果分类正确,则退出;否则,将该反样本输入到下一层强分类器进行训练,依此类推,直到该反样本被某一层强分类器拒绝为止;对于输入的正样本,将其输入所有层中,分别训练各层强分类器的各个选择器。
优选地,对于组成最终强分类器的各层而言,当该层训练过的反样本数目大于第三阈值,并且,该层训练过的正样本数目大于第四阈值时,认为该层有效,可以用来识别物体类型。
优选地,当在线训练的模型包含的有效层数大于第五阈值时,认为模型已训练好,获得一个所述最终强分类器,所述最终强分类器是由至少一个有效层组成的层次型分类器。
为了实现上述目的,本发明还提供一种物体类型在线训练和识别系统,其特点在于,包括:
图像采集单元,用于进行图像采集;
背景建模单元,与所述图像采集单元连接,用于对所采集到的图像进行背景建模;
区域提取单元,与所述背景建模单元连接,用于根据建模结果提取前景物体区域;
物体类型初步验证单元,与所述区域提取单元连接,用于对所提取的前景物体区域是否为目标类物体进行初步验证,其中初步验证的方法是首先在线搜集目标类物体的样本,采用增量的PCA算法训练该目标类物体的PCA空间;然后在训练样本达到预定数目后,认为该PCA空间可信;接着将获取的前景物体区域投影到该目标类物体的可信PCA空间上,得到投影向量,如果投影向量的二范数大于预设的一阈值,则认为是该类物体,可作为正样本训练,否则,认为不是,抛弃;
特征提取单元,与所述背景建模单元和物体类型初步验证单元连接,用于提取通过初步验证的样本作为正样本,以及从背景图像中提取相同形状的区域作为反样本;
在线模型训练单元,与所述特征提取单元连接,用于根据所提取的正样本和反样本的特征进行在线训练,获得一个训练好的模型,其中在线训练的方法是提取当前搜集的正样本和反样本的弱特征,构造弱分类器,然后采用层次型在线adaboost算法训练多个强分类器,该多个强分类器层层相连构成一个层次型结构的最终强分类器,其中每个强分类器由多个选择器组成,且所述多个选择器共用一个弱分类器组;
类型识别单元,与所述模型训练单元和区域提取单元连接,用于对所提取的前景物体区域的物体类型进行类型识别,以得到物体类型,其中识别的方法是利用该最终强分类器对所提取的前景物体区域进行物体类型识别,将通过该最终强分类器的所有层的样本认为是正样本,否则认为是反样本。
优选地,该系统还包括:物体分割单元,连接在该区域提取单元与类型识别单元之间,用于将所提取的前景物体区域进行物体分割。
根据本发明的一方面,由于本发明将物体类型训练和识别结合在一起,且采用在线训练的方式训练模型,可训练一个层次型结构的分类器来进行物体类型识别,从而可以省去了传统方法中标定样本的工作量,使得识别速度更快。同时,由于采用在线训练方式训练,本发明还可根据场景自适应更新训练模型,使之能更好的适应应用场景。
以下结合附图和具体实施例对本发明进行详细描述,但不作为对本发明的限定。
附图说明
图1为现有的基于离线训练的物体类型识别方法的流程示意图;
图2为本发明基于在线训练的物体类型识别方法的流程示意图;
图3为本发明的物体类型在线训练和识别系统的结构示意图。
具体实施方式
本发明以在线adaboost算法为基础,提出一种自动提取场景中各类样本,并且将采集的样本渐进地送入训练模块训练,并根据训练出的训练模型与所提取的前景物体进行类型识别的方法。相较基于离线训练方式的物体识别技术,该种方法具有节省采集标定样本工作,并且训练的模型能够更好地适应应用场景,同时,训练模型简单运算快的特点。
本发明提出的在线物体类型训练识别方法如图2所示:
首先,进行图像采集和背景建模;
其次,提取前景物体区域,并对该区域是否目标物体类型进行初始验证,以得到目标物体类型的全景图象;
背景建模(Background modeling)和前景物体区域提取(ForegroundExtraction)是现有技术,可以采用Background Subtraction,Kernel DensityEstimation等方法进行处理。
第三,将通过初步验证的样本作为正样本,而将背景图像中存在的相同形状的区域作为反样本;
第四,提取当前搜集的正样本和反样本的特征,并送入在线物体训练模型进行在线训练,采用训练好的模型对所提取的前景物体区域的物体类型进行类型识别,得到物体类型。
优选地,本发明中,所提取的前景物体区域为经过物体分割的区域,其中物体分割的方法是,先训练好一个目标类物体的物体模型,然后,在所提取的前景物体区域中,按照物体的形状对各种不同尺度,处于区域中不同位置的图像区域采用该物体模型进行判定,如果该尺度该位置的图像区域通过了该物体模型,则认为该图像区域为一个该目标类型的物体,从而可将前景物体区域中粘连在一起的多个物体分开。这样做的优点是对于几个物体粘连在一起时,前景检测会将其检测为一个区域,如果将该区域作为一个整体进行判定,会错判,同时,无法将物体分开,物体跟踪时,会出现错误。尤其对于视频监控而言,通过该物体分割方法还能够帮助分割粘连在一起的物体,有效提高报警的精确度。
并且,优选的,所述目标物体类型的初始验证是为了避免某些其他前景物体被当作目标类物体训练,得到错误的模型。本发明的一种可行方法是离线采集标定一些物体的样本,训练物体的PCA(主成份分析,Principal componentanalysis)空间,然后,在线训练时,将获取的前景物体区域投影到该物体的PCA空间上,得到投影向量,如果投影向量的二范数大于预设的第一阈值,则认为是该类物体,作为正样本训练,否则,认为不是,抛弃。或者,进一步,PCA空间的另一种获取方式为在线搜集该目标类物体的样本,采用增量的PCA算法训练该目标类物体的PCA空间,并在训练样本达到一定数目后,认为该空间可信,即可用来验证前景区域类别,这种方式避免了离线采集标定过程。然后,在线训练时,将获取的前景物体区域投影到该物体的PCA空间上,得到投影向量,如果投影向量的二范数大于预设的第二阈值,则认为是该类物体,作为正样本训练,否则,认为不是,抛弃。
本发明主要是利用adaboost(自适应增强法,Adaptive Boosting)算法来训练分类器并利用这些分类器来快速检测物体和进行物体类型识别。例如,论文Real-Time Tracking via On-line Boosting·Grabner Helmut,Grabner Michael,Bischof Horst,Proceedings of the British Machine Vision Conference(BMVC′06),vol.1,pages 47-56,2006中提出了一种基于在线adaboost的方法,本发明提出一种改进方法,在加速识别速度的同时提高了识别性能。具体的,本发明利用该adaboost算法进行在线训练和识别的方法如下:
首先,提取当前搜集的正样本和反样本的弱特征,构造弱分类器;
接着,采用层次型在线adaboost算法训练多个强分类器,该多个强分类器层层相连构成一个层次型结构的最终强分类器,其中每个强分类器由多个选择器组成,且所述多个选择器共用一个弱分类器组;
最后,利用该最终强分类器对所提取的前景物体区域进行物体类型识别,将通过该最终强分类器的所有层的样本认为是正样本,否则认为是反样本。
在本发明中,强分类器在线训练算法如下:
(1)初始化组成最终强分类器的弱分类器,可以采用从所有的候选弱特征中随机选取的方式获得;
(2)初始化所有的选择器,选择器包括选择的弱分类器和弱分类器权重;
(3)初始化所有选择器对应所有弱特征的分类正确样本权重和λn,m c以及分类错误样本权重和λn,m w
(4)对于当前的一个样本,样本标签为l,如果l=1则为正样本,l=-1为反样本;设定样本权重为w=1;
(5)更新M个在线弱特征构造的弱分类器组,弱分类器更新算法下面会详述;
(6)对于N个选择器,更新选择器的弱分类器序号j和弱分类器权重αn;具体更新方法如下:
获取M个弱分类器对于样本的分类结果标志Hyp(m),分类正确为1,否则,为0;
为每个弱分类器设定未使用标志bUsedm,标志是否已经被某个选择器选择使用,如果已经使用为1,没有使用为0;
对于所有的N个选择器,进行下列处理更新:
对于所有的M个弱分类器,根据其对样本的分类结果,如果Hypm为1,则
Figure GSB00000041644800081
否则,
Figure GSB00000041644800082
如果当前弱分类器没有使用,即bUsedm为1,则跳过,对所有没有使用过的弱分类器进行下列处理:
计算分类错误率
Figure GSB00000041644800083
并选择错误率最小的en作为当前选择器的弱分类器,即取j=arg min(en,m),同时计算
Figure GSB00000041644800084
更新样本的权重,如果Hyp(j)为1则
Figure GSB00000041644800091
否则,
Figure GSB00000041644800092
替换分类效果最差的T个弱分类器。
在本发明中,弱分类器构造更新算法如下:
本发明针对物体检测的特点,选择HOG(梯度方向直方图,Histogram oforiented gradients)特征作为弱特征,当然也可以采用LBP(局部二进制模式,local binary pattern)或者haar-like(微结构特征)特征作为弱特征;论文Real-Time Tracking via On-line Boosting·Grabner Helmut,Grabner Michael,Bischof Horst,Proceedings of the British Machine Vision Conference(BMVC′06),vol.1,pages 47-56,2006中采用的是固定尺度的HOG特征,本发明采用各种不同尺度,不同位置的HOG特征,使得弱特征对物体的分类能力更加强。基于HOG的特征是一个NHOG维的向量,采用基于最近邻的方式构造弱分类器,一种方式为:取弱分类器形式为其中,cj p为正样本第j个特征中心,cj n为反样本第j个特征中心,fj(x)为当前特征。一种可行的弱分类器在线更新算法如下,采用卡尔曼滤波方式在线更新弱特征的均值cj p和cj n,从而实现在线更新弱分类器。
在本发明的在线训练和识别过程中,对于输入反样本,首先,采用上述强分类器训练构造算法训练第一层强分类器中的各个选择器,训练完成后,采用训练好的第一层强分类器对样本进行分类,如果分类正确,则退出,否则,将该样本输入到下一层的强分类器进行训练,以此类推,直到该样本被某一层强分类器拒绝为止。对于输入的正样本,将其作为正样本输入到所有层中,分别训练各层强分类的各个选择器。这样得到的最终强分类器,如果识别时,某个样本能够通过所有层,则认为是正样本,否则,认为是反样本。
对于组成最终强分类器的各层而言,当该层训练过的反样本数目NN大于设定的第三阈值TNN,并且,该层训练过的正样本数目NP大于设定的第四阈值TNP时,认为该层有效,可以用来识别物体类型。
当在线训练的模型包含的有效层数VS大于设定的第五阈值TVS时,认为模型已训练好,获得一个最终强分类器。最终的强分类器是由VS个有效层组成的层次型分类器。此时认为由最终强分类器组成的模型已训练好,可用于进行物体类型识别判定。
本发明的物体类型在线训练和识别方法和传统基于离线的方式有几点不同:
首先,本发明的训练和识别过程是同时渐进进行的,而离线系统的训练过程和识别过程是完全分离独立的两个过程;
其次,本发明的在线训练模型不是一次训练完成的,而是多次增量训练完成,而且,可以不断更新;而离线系统是一次训练完成的,不能够根据应用场景进行更新。
如图3所示,为本发明基于上述方法所提供的一种物体类型在线训练和识别系统,包括:图像采集单元,用于进行图像采集;背景建模单元,与所述图像采集单元连接,用于对所采集到的图像进行背景建模;区域提取单元,与所述背景建模单元连接,用于根据建模结果提取前景物体区域;物体类型初步验证单元,与所述区域提取单元连接,用于对所提取的前景物体区域是否目标物体类型进行初步验证;特征提取单元,与所述背景建模单元和物体类型初步验证单元连接,用于提取通过初步验证的样本作为正样本,以及从背景图像中提取相同形状的区域作为反样本;在线模型训练单元,与所述特征提取单元连接,用于根据所提取的正样本和反样本的特征进行在线训练,获得一个训练好的模型;类型识别单元,与所述模型训练单元和区域提取单元连接,用于对所提取的前景物体区域的物体类型进行类型识别,以得到物体类型。
优选地,该系统还包括:物体分割单元,连接在该区域提取单元与类型识别单元之间,用于将所提取的前景物体区域进行物体分割。
当然,本发明还可有其他多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变型,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims (11)

1.一种物体类型的在线训练和识别方法,其特征在于,包括:
(1)进行图像采集,并对所采集到的图像进行背景建模;
(2)根据建模结果提取前景物体区域,并对该区域是否为目标类物体进行初步验证,其中进行初步验证的过程包括:
(21)在线搜集目标类物体的样本,采用增量的PCA算法训练该目标类物体的PCA空间;
(22)在训练样本达到预定数目后,认为该PCA空间可信;
(23)将获取的前景物体区域投影到该目标类物体的可信PCA空间上,得到投影向量,如果投影向量的二范数大于预设的一阈值,则认为是该类物体,可作为正样本训练,否则,认为不是,抛弃;
(3)将通过初步验证的样本作为正样本,而将背景图像中存在的相同形状的区域作为反样本;
(4)提取当前搜集的正样本和反样本的弱特征,构造弱分类器;
(5)采用层次型在线adaboost算法训练多个强分类器,该多个强分类器层层相连构成一个层次型结构的最终强分类器,其中每个强分类器由多个选择器组成,且所述多个选择器共用一个弱分类器组;
(6)利用该最终强分类器对所提取的前景物体区域进行物体类型识别,将通过该最终强分类器的所有层的样本认为是正样本,否则认为是反样本;
其中,在步骤(5)中,采用下述强分类器训练构造算法训练强分类器:
(51)初始化组成最终强分类器的弱分类器;
(52)初始化所有的选择器,选择器包括选择的弱分类器和弱分类器权重;
(53)初始化所有选择器对应所有弱特征的分类正确样本权重和
Figure FSB00000553937600011
以及分类错误样本权重和
Figure FSB00000553937600012
(54)对于当前的一个样本,样本标签为1,如果1=1则为正样本,1=-1为反样本;设定样本权重为w=1;
(55)更新M个在线弱特征构造的弱分类器;
(56)对于N个选择器,更新选择器的弱分类器序号j和弱分类器权重αn,其包括:
(561)获取M个弱分类器对于样本的分类结果标志Hyp(m),分类正确为1,否则,为0;
(562)为每个弱分类器设定未使用标志bUsedm,标志是否已经被某个选择器选择使用,如果已经使用为1,没有使用为0;
(563)对于所有的N个选择器,进行下列处理更新:
(564)对于所有的M个弱分类器,根据其对样本的分类结果,如果Hypm为1,则
Figure FSB00000553937600021
否则,
Figure FSB00000553937600022
(565)如果当前弱分类器没有使用,即bUsedm为1,则跳过,对所有没有使用过的弱分类器计算分类错误率en,m,并选择错误率最小的en作为当前选择器的弱分类器,即取j=argmin(en,m),同时计算弱分类器权重αn;更新样本的权重w;
(566)替换分类效果最差的T个弱分类器。
2.根据权利要求1所述的物体类型的在线训练和识别方法,其特征在于,在提取前景物体区域之后和进行初步验证之前,还包括:
对所提取的前景物体区域进行物体分割。
3.根据权利要求2所述的物体类型的在线训练和识别方法,其特征在于,所述进行物体分割的步骤包括:
训练目标类物体的物体模型;
按照物体的形状对各种不同尺度,处于所提取的前景物体区域中不同位置的图像区域采用该物体模型进行判定;
如果该尺度该位置的图像区域通过了该物体模型,则认为该图像区域为一个该目标类物体,从而将所述前景物体区域中粘连在一起的多个物体分开,将分割后的前景物体区域输出以进行物体类型识别。
4.根据权利要求1所述的物体类型的在线训练和识别方法,其特征在于,所述弱特征采用各种不同尺度,不同位置的HOG特征,且该HOG特征是一个NHOG维的向量。
5.根据权利要求1所述的物体类型的在线训练和识别方法,其特征在于,所述初始化组成最终强分类器的弱分类器步骤是采用从所有的候选弱特征中随机选取的方式获得。
6.根据权利要求1所述的物体类型的在线训练和识别方法,其特征在于,所述分类错误率en,m满足:
e n , m = λ n , m w λ n , m w + λ n , m c ;
所述弱分类器权重αn满足:
α n = 0.5 ln ( 1 - e n e n ) ;
所述样本的权重w满足:
如果Hyp(j)为1则
Figure FSB00000553937600033
否则,
Figure FSB00000553937600034
7.根据权利要求1所述的物体类型的在线训练和识别方法,其特征在于,在所述采用层次型在线adaboost算法训练多个强分类器层层相连构成一个层次型结构的最终强分类器,以及利用该最终强分类器对所提取的前景物体区域进行物体类型识别的过程中,
对于输入的反样本,采用所述强分类器训练构造算法训练第一层强分类器中的各个选择器,训练完成后,采用训练好的第一层强分类器对输入的反样本进行分类,如果分类正确,则退出;否则,将该反样本输入到下一层强分类器进行训练,依此类推,直到该反样本被某一层强分类器拒绝为止;
对于输入的正样本,将其输入所有层中,分别训练各层强分类器的各个选择器。
8.根据权利要求7所述的物体类型的在线训练和识别方法,其特征在于,对于组成最终强分类器的各层而言,当该层训练过的反样本数目大于第三阈值,并且,该层训练过的正样本数目大于第四阈值时,认为该层有效,可以用来识别物体类型。
9.根据权利要求8所述的物体类型的在线训练和识别方法,其特征在于,当在线训练的模型包含的有效层数大于第五阈值时,认为模型已训练好,获得一个所述最终强分类器,所述最终强分类器是由至少一个有效层组成的层次型分类器。
10.一种物体类型在线训练和识别系统,其特征在于,包括:
图像采集单元,用于进行图像采集;
背景建模单元,与所述图像采集单元连接,用于对所采集到的图像进行背景建模;
区域提取单元,与所述背景建模单元连接,用于根据建模结果提取前景物体区域;
物体类型初步验证单元,与所述区域提取单元连接,用于对所提取的前景物体区域是否为目标类物体进行初步验证,其中初步验证的方法是首先在线搜集目标类物体的样本,采用增量的PCA算法训练该目标类物体的PCA空间;然后在训练样本达到预定数目后,认为该PCA空间可信;接着将获取的前景物体区域投影到该目标类物体的可信PCA空间上,得到投影向量,如果投影向量的二范数大于预设的一阈值,则认为是该类物体,可作为正样本训练,否则,认为不是,抛弃;
特征提取单元,与所述背景建模单元和物体类型初步验证单元连接,用于提取通过初步验证的样本作为正样本,以及从背景图像中提取相同形状的区域作为反样本;
在线模型训练单元,与所述特征提取单元连接,用于根据所提取的正样本和反样本的特征进行在线训练,获得一个训练好的模型,其中在线训练的方法是先提取当前搜集的正样本和反样本的弱特征,构造弱分类器,然后采用层次型在线adaboost算法训练多个强分类器,该多个强分类器层层相连构成一个层次型结构的最终强分类器,其中每个强分类器由多个选择器组成,且所述多个选择器共用一个弱分类器组;其中,所述在线模型训练单元采用下述强分类器训练构造算法训练强分类器:
(a)初始化组成最终强分类器的弱分类器;
(b)初始化所有的选择器,选择器包括选择的弱分类器和弱分类器权重;
(c)初始化所有选择器对应所有弱特征的分类正确样本权重和
Figure FSB00000553937600041
以及分类错误样本权重和
Figure FSB00000553937600042
(d)对于当前的一个样本,样本标签为1,如果1=1则为正样本,1=-1为反样本;设定样本权重为w=1;
(e)更新M个在线弱特征构造的弱分类器;
(f)对于N个选择器,更新选择器的弱分类器序号j和弱分类器权重αn,其包括:
(f1)获取M个弱分类器对于样本的分类结果标志Hyp(m),分类正确为1,否则,为0;
(f2)为每个弱分类器设定未使用标志bUsedm,标志是否已经被某个选择器选择使用,如果已经使用为1,没有使用为0;
(f3)对于所有的N个选择器,进行下列处理更新:
(f4)对于所有的M个弱分类器,根据其对样本的分类结果,如果Hypm为1,则
Figure FSB00000553937600051
否则,
Figure FSB00000553937600052
(f5)如果当前弱分类器没有使用,即bUsedm为1,则跳过,对所有没有使用过的弱分类器计算分类错误率en,m,并选择错误率最小的en作为当前选择器的弱分类器,即取j=argmin(en,m),同时计算弱分类器权重αn;更新样本的权重w;
(f6)替换分类效果最差的T个弱分类器;
类型识别单元,与所述模型训练单元和区域提取单元连接,用于对所提取的前景物体区域的物体类型进行类型识别,以得到物体类型,其中识别的方法是利用该最终强分类器对所提取的前景物体区域进行物体类型识别,将通过该最终强分类器的所有层的样本认为是正样本,否则认为是反样本。
11.根据权利要求10所述的物体类型在线训练和识别系统,其特征在于,该系统还包括:
物体分割单元,连接在该区域提取单元与类型识别单元之间,用于将所提取的前景物体区域进行物体分割。
CN2008100572132A 2008-01-30 2008-01-30 一种物体类型的在线训练和识别方法及其系统 Expired - Fee Related CN101221623B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2008100572132A CN101221623B (zh) 2008-01-30 2008-01-30 一种物体类型的在线训练和识别方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2008100572132A CN101221623B (zh) 2008-01-30 2008-01-30 一种物体类型的在线训练和识别方法及其系统

Publications (2)

Publication Number Publication Date
CN101221623A CN101221623A (zh) 2008-07-16
CN101221623B true CN101221623B (zh) 2011-11-23

Family

ID=39631447

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008100572132A Expired - Fee Related CN101221623B (zh) 2008-01-30 2008-01-30 一种物体类型的在线训练和识别方法及其系统

Country Status (1)

Country Link
CN (1) CN101221623B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4626692B2 (ja) * 2008-09-12 2011-02-09 ソニー株式会社 物体検出装置、撮像装置、物体検出方法およびプログラム
US8600108B2 (en) 2010-01-25 2013-12-03 Hewlett-Packard Development Compant, L.P. Data processing system and method
CN102004925B (zh) * 2010-11-09 2012-08-29 无锡中星微电子有限公司 物体分类模型的训练方法及利用该模型的识别方法
JP5660078B2 (ja) * 2012-05-31 2015-01-28 カシオ計算機株式会社 多クラス識別器、方法、およびプログラム
CN102810203A (zh) * 2012-06-29 2012-12-05 陕西省交通规划设计研究院 基于高清视频监控图像的不明物品、事件检测系统及方法
CN103366163B (zh) * 2013-07-15 2016-07-20 北京丰华联合科技有限公司 基于增量学习的人脸检测系统和方法
KR102399974B1 (ko) * 2015-05-20 2022-05-19 한화테크윈 주식회사 다중 객체 추적 방법 및 이를 위한 장치
CN109325449B (zh) * 2018-01-04 2022-06-21 苏州中科天启遥感科技有限公司 基于样本更新的卷积神经网络目标检测框架
CN108288279A (zh) * 2018-01-25 2018-07-17 盛视科技股份有限公司 一种基于x光图像前景目标提取的物品甄别方法
CN109447073B (zh) * 2018-11-08 2021-11-02 电子科技大学 一种基于张量鲁棒主成分分析的红外弱小目标检测方法
US10902551B1 (en) * 2019-12-17 2021-01-26 X Development Llc True positive transplant
CN111553388A (zh) * 2020-04-07 2020-08-18 哈尔滨工程大学 一种基于在线AdaBoost的垃圾邮件检测方法
CN112634460B (zh) * 2020-11-27 2023-10-24 浙江工商大学 基于Haar-like特征的户外全景图生成方法及装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1981293A (zh) * 2004-02-02 2007-06-13 皇家飞利浦电子股份有限公司 具有在线学习能力的连续面貌识别

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1981293A (zh) * 2004-02-02 2007-06-13 皇家飞利浦电子股份有限公司 具有在线学习能力的连续面貌识别

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Helmut Grabner etc.,.on-line boosting and vision.IEEE Conference on Computer Vision and Pattern Recognition,1.2006,1260-267. *
HelmutGrabneretc. .on-line boosting and vision.IEEE Conference on Computer Vision and Pattern Recognition
徐立.鲁棒人脸跟踪系统关键技术的研究.《中国优秀硕士学位论文全文数据库》.2007,(第6期), *

Also Published As

Publication number Publication date
CN101221623A (zh) 2008-07-16

Similar Documents

Publication Publication Date Title
CN101221623B (zh) 一种物体类型的在线训练和识别方法及其系统
CN109670446B (zh) 基于线性动态系统和深度网络的异常行为检测方法
CN110969130B (zh) 一种基于yolov3司机危险动作识别方法及系统
CN101329734B (zh) 基于k-l变换和ls-svm的车牌字符识别方法
CN101271515B (zh) 能识别多角度目标的图像检测装置
CN102346847B (zh) 一种支持向量机的车牌字符识别方法
CN112837315B (zh) 一种基于深度学习的输电线路绝缘子缺陷检测方法
CN104778474A (zh) 一种用于目标检测的分类器构建方法及目标检测方法
CN106384345B (zh) 一种基于rcnn的图像检测以及流量统计方法
CN109271991A (zh) 一种基于深度学习的车牌检测方法
CN104463196A (zh) 一种基于视频的天气现象识别方法
CN104766042A (zh) 交通标志板识别方法及装置
CN105303193A (zh) 一种基于单帧图像处理的人数统计系统
CN102509112A (zh) 车牌识别方法及其识别系统
CN103136504A (zh) 人脸识别方法及装置
CN104156734A (zh) 一种基于随机蕨分类器的全自主在线学习方法
CN105488468A (zh) 一种目标区域的定位方法和装置
CN105760858A (zh) 一种基于类Haar中间层滤波特征的行人检测方法及装置
CN103310179A (zh) 一种基于人脸识别技术的最优姿态检测方法及系统
CN101251896B (zh) 一种基于多分类器的物体检测系统及方法
CN104615986A (zh) 利用多检测器对场景变化的视频图像进行行人检测的方法
CN103218610A (zh) 狗脸检测器的形成方法和狗脸检测方法
CN105930792A (zh) 一种基于视频局部特征字典的人体动作分类方法
CN112364721A (zh) 一种道面异物检测方法
CN103745213A (zh) 基于lvq神经网络的光学字符识别方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20111123

Termination date: 20120130