CN104268598A - 一种基于二维扫描激光的人腿检测方法 - Google Patents

一种基于二维扫描激光的人腿检测方法 Download PDF

Info

Publication number
CN104268598A
CN104268598A CN201410506045.6A CN201410506045A CN104268598A CN 104268598 A CN104268598 A CN 104268598A CN 201410506045 A CN201410506045 A CN 201410506045A CN 104268598 A CN104268598 A CN 104268598A
Authority
CN
China
Prior art keywords
data
represent
centerdot
pattern
vertical edge
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410506045.6A
Other languages
English (en)
Other versions
CN104268598B (zh
Inventor
周波
韩明瑞
戴先中
马旭东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southeast University
Original Assignee
Southeast University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southeast University filed Critical Southeast University
Priority to CN201410506045.6A priority Critical patent/CN104268598B/zh
Publication of CN104268598A publication Critical patent/CN104268598A/zh
Application granted granted Critical
Publication of CN104268598B publication Critical patent/CN104268598B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands

Abstract

本发明公开了一种基于二维扫描激光的人腿检测方法,首先通过激光传感器对室内环境进行扫描,并将扫描数据进行预处理;其次,根据采集数据进行AdaBoost训练,即将采集的若干组扫描样本进行数据分割,将其作为算法的输入通过已建立的弱分类器训练学习得到一个强分类器;然后进行人腿步态检测,即将预处理后的激光扫描数据进行垂直边缘检测,然后从提取的垂直边缘中检测满足人腿模式的所有子集;最后对检测出的SL模型采用AdaBoost算法进行分类判断。本发明使用低成本的二维激光有效的解决了人腿快速检测的问题,简单快速,准确率高,避免常用计算机视觉方法计算慢、受图像干扰的缺陷。

Description

一种基于二维扫描激光的人腿检测方法
技术领域
本发明涉及一种人腿检测方法,具体来说,涉及一种基于二维扫描激光的人腿检测方法,特别是室内动态未知环境移动机器人的人腿检测方法。
背景技术
在有人的环境下例如科技馆或博物馆,对人的检测是非常关键的任务,并且具有很大的意义。检测环境中人的存在及其位置与运动状态,能够更好地理解并预测人的意图和行动,同时可以对人流量进行统计,从而更有利于工作人员的决策,提高工作效率。某些场所对人的检测还可以提供人机交互的功能,从而提供更友善的服务。
目前,有关人检测的研究,主要有下面几种方法:基于视觉方法,基于距离传感器方法,基于视觉传感器与距离传感器相结合的方法,声音传感器、激光传感器与视觉传感器相结合的方法等。其中,基于视觉的方法是目前people-tracking领域应用最为广泛、最为成熟的一门技术。然而,现有基于视觉对人检测的方法主要存在的问题是需要处理大量的图片信息,使得系统的实时性难得到满足,以及图像容易受光照、天气等外部条件影响等。此外,随着激光雷达的成本的下降,近年来,基于激光传感器的各种检测跟踪的研究和应用也越来越频繁,与视觉相比,其提供了较大的视场且独立于环境。
基于激光传感器的方法中激光扫描数据通常只有二维距离信息,因此其中包含了很少人的信息。实验表明,在复杂环境下很难从二维数据中检测到人,即使是用肉眼观察。但是,实验发现对应于人腿的距离测量值有一定的空间和几何特性,例如大小、弧度、凸度及紧凑性。此外,激光传感器有着对光线强度不敏感,且不需要复杂的标定计算就可以准确测量出距离的优点,所以针对激光传感器对人检测的应用具有很大的前景。
发明内容
技术问题:本发明所要解决的技术问题是:提供一种基于二维扫描激光的人腿检测方法,该检测方法克服了室内动态未知环境中,移动机器人动态人跟踪(动态人跟踪英文译文为:people-tracking)领域所存在的常用计算机视觉方法识别人腿中存在的计算慢、受图像干扰的缺陷,可以实现移动机器人简单快速且准确率高地在有人环境下对人的检测。
技术方案:为解决上述技术问题,本发明采用的技术方案为:
一种基于二维扫描激光的人腿检测方法,该人腿检测方法包括以下步骤:
第一步:通过激光传感器对室内有人环境进行扫描,并对扫描得到的数据进行预处理;
第二步:从第一步预处理后的扫描数据中选择数据作为样本集,采用AdaBoost算法进行学习和训练,得到一个用于人腿检测的强分类器;
第三步:对第一步预处理后的扫描数据进行垂直边缘提取和分类,根据两腿分离的LA模式、分腿向前的FS模式以及两腿并拢或单腿的SL模式三种的步态模型,初步检测出人腿;
第四步:对第三步检测出的符合SL模式的扫描数据集,采用第二步训练得到的AdaBoost强分类器,作进一步的人腿检测。
进一步,所述的第一步包括以下步骤:
101):获得原始距离数据:由固定在移动机器人上的二维激光传感器,通过激光扫描,获得人腿检测的原始距离数据;设每次扫描共获取n个原始距离数据,该n个原始距离数据组成原始距离数据集合为:[r1,r2,…,ri,…,rn];
102):对步骤101)获得的原始距离数据进行中值滤波预处理:对原始距离数据集合中的每一个扫描数据ri,取中值窗口半径为w,中值窗口内的2w+1个扫描数据ri-w,ri-w+1,…,ri,…,ri+w-1,ri+w,对该2w+1个扫描数据求取中值则当时,则时,则ri保持不变;其中,δ表示中值滤波器滤波阈值;将原始距离数据集合进行中值滤波预处理后的数据记为 S 1 = [ r 1 1 , r 2 1 , · · · , r i 1 , · · · , r n 1 ] ;
103)对S1进行局部最小化处理:进行如式(1)所示的局部最小化处理,得到S2
S 2 = [ min 0 ≤ k 1 ≤ δ 1 r 1 + k 1 1 , min - 1 ≤ k 1 ≤ δ 1 r 2 + k 1 1 , · · · , min - δ 1 ≤ k 1 ≤ 0 r n + k 1 1 ] = [ r 1 2 , r 2 2 , · · · , r n 2 ] 式(1)
其中,δ1表示用于控制局部邻域范围大小的参数,0≤δ1≤n;k1是整数变量,k1是为了使局部最小化的范围不超过ri 1所定义的范围;表示S1中第1+k1个元素,表示S1中第2+k1个元素,表示S1中第n+k1个元素,r1 2表示S1中第1个元素对应邻域内的最小元素值,r2 2表示S1中第2个元素对应邻域内的最小元素值,rn 2表示S1中第n个元素对应邻域内的最小元素值;
104)进行局部最大化处理:按照式(2)对S2进行局部最大化处理,得到
S ^ = [ max 0 ≤ k 2 ≤ δ 2 r 1 + k 2 2 , max - 1 ≤ k 2 ≤ δ 2 r 2 + k 2 2 , · · · , max - δ 2 ≤ k 2 ≤ 0 r n + k 2 2 ] = [ r ^ 1 , r ^ 2 , · · · , r ^ n ]   式(2)
其中,δ2表示用于控制局部范围大小的另一个参数,0≤δ2≤n;k2是整数变量,k2是为了使局部最大化的范围不超过ri 2所定义的范围;表示S2中第1+k2个元素,表示S2中第2+k2个元素,表示S2中第n+k2个元素,表示S2中第1个元素对应邻域内的最大元素值,表示S2中第2个元素对应邻域内的最大元素值,表示S2中第n个元素对应邻域内的最大元素值。
进一步,所述的第二步包括以下步骤:
201)数据分割:将预处理后的扫描数据分割成不同的段,过程如下:
将第一步预处理后的扫描数据组成数据段如式(3),设数据段由采用极坐标表示的点集表示,p1为该数据段的起点,pn为该数据段的的终点;为点集中第i个点的距离值,φi为点集中第i个点对应的角度;
S ^ j = { p 1 , · · · , p i , · · · , p n }       式(3)
如果D(pi,pi+1)>Dthd,则pi与pi+1属于不同的数据段;如果D(pi,pi+1)≤Dthd,则pi与pi+1属于同一数据段;将中所有相邻点进行判断,得到若干组不同的数据段,然后去掉其中点的个数小于等于3的段,得到N组数据段即为数据分割得到的数据段集合;其中,Dthd表示分隔阈值,D(pi,pi+1)表示两个连续扫描点之间的欧氏距离,分隔阈值根据式(4)确定:
Dthd=C0+C1min(pi,pi+1)             式(4)
其中,min(pi,pi+1)为极坐标表示下连续两扫描点间的最小距离差;C0为用于降噪的恒定参数;Δφ表示pi与pi+1之间的夹角;
202)生成训练数据集:根据十个预定义特征分别建立10个弱分类器,作为AdaBoost算法的输入;十个预定义特征为:点的数目、标准差、根据中值计算的平均偏差、分段的宽度、圆性质评估、圆直径参数、边界长度、边界标准差、平均曲率和凸性;对于弱分类器,采用单值特征fj,如式(5)所示:
h j ( e ) = + 1 if p j f j < p j &theta; j - 1 otherwise      式(5)
式(5)中,hj(e)表示对应于单值特征fj的弱分类器,e为数据段参数,θj表示单值特征fj的阈值,pj表示不等式方向的符号量,pj∈{+1,-1};下标j表示预定义特征的编号;
203)样本分类:将步骤201)分割得到的N组数据段进行人工分类,正样本标签为+1,负样本标签为-1,得到训练数据集(em,lm),m=1,2,...,N,其中em为样本,lm用来指示en为正样本还是负样本,lm∈{+1,-1};
204)训练得到强分类器:根据步骤202)建立的10个弱分类器hj(e),将步骤203)得到的训练数据集(em,lm)作为弱分类器的输入,首先初始化权值:
D 1 ( m ) = 1 2 a , l m = + 1 1 2 b , l m = - 1 ( m = 1 , . . . , N )      式(6)
其中,D1(m)表示第m个训练数据集的初始权值,a表示正样本数量,b表示负样本数量;
然后,在设定的轮次t=1、2、…、T内,T等于弱分类器的个数,执行下述步骤2041)至2045),
2041)归一化权值:
D t ( m ) = D t ( m ) &Sigma; i = 1 N D t ( i )     式(7)
其中,t=1+q,q表示步骤2045)返回步骤2041)的次数,q的初始值为0;Dt(m)表示第m个训练数据集在第t轮次的权值,Dt(i)表示第i个训练数据集在第t轮次的权值;
2042)根据Dt训练每一个特征fj的弱分类器hj
2043)对于每个弱分类器hj进行如下计算:
r j = &Sigma; m = 1 N D t ( m ) l m h j ( e m )          式(8)
其中,hj(em)∈{+1,-1};rj表示运算过程中的中间变量;
2044)选择使|rj|最大的hj并进行如下赋值:
(ht,rt)=(hj,rj)         式(9)
2045)按照式(10)更新权值,然后返回步骤2041),直至执行完设定的轮次,进入步骤205);
Dt+1(m)=Dt(m)exp(-αtlmht(em))       式(10)
其中, &alpha; t = 1 2 log ( 1 + r t 1 - r t ) ;
205)得到强分类器H:
H(e)=sign(F(e))          式(11)
其中, F ( e ) = &Sigma; t = 1 T &alpha; t h t ( e ) .
进一步,所述的第三步包括以下步骤:
301):将经过第一步预处理后的扫描数据用直角坐标系表示,该直角坐标系以角度为横坐标,以距离值为纵坐标;
302):识别垂直边缘,若为一组垂直边缘;如果不为一组垂直边缘;σ表示垂直边缘的设定阈值;
303):判断所提取的垂直边缘是左边缘还是右边缘,若则为左边缘,若则为右边缘;
304):将所得的垂直边缘排成一集合其中表示第1组垂直边缘对应的方位,e2表示第2组垂直边缘对应的方位;el表示第l组垂直边缘对应的方位;当垂直边缘是左边缘时,该垂直边缘对应的方位采用L表示,当垂直边缘是右边缘时,该垂直边缘对应的方位采用R表示;
对于提取的垂直边缘中相同类型的相邻边缘,如果相邻垂直边缘之间的距离小于阈值d,且相邻垂直边缘之间夹角小于阈值fa,则合并相邻垂直边缘,将合并后的垂直边缘集合记为相同类型是指具有相同的方位,都为右边缘或者左边缘;
305):提取三种人腿模式:两腿分离的LA模式,分腿向前的FS模式,以及两腿并拢或单腿的SL模式;LA模式对应的有序序列为{L、R、L、R},FS模式对应有序序列为{L、R、R}或{L、L、R},SL模式对应有序序列{L、R};
306):从垂直边缘集合ε′中检测满足任意一种人腿模式的所有子集,当检测到满足三种人腿模式有序序列之一的边缘集合,则将该边缘集合中的每一条边缘从垂直边缘集合ε′中移除。
进一步,所述的步骤306)中,将垂直边缘集合ε′先与LA模式对应的有序序列进行检测,然后与FS模式对应的有序序列进行检测,最后与SL模式对应的有序序列进行检测。
进一步,所述的第四步包括以下步骤:
401):SL模式提取:将步骤306)中,从垂直边缘集合ε′中提取出符合SL模式的边缘集合成SL模式数据段集合;
402)SL模式点对分:在SL模式中包含了扫描到两腿并拢和单腿两种情况,将SL模式数据段集合中,对于包含点的数目大于预先设定的对分阈值的数据段,将该数据段包含的点按其空间顺序对半分,形成两个数据段;经过对分处理后,得到对分后的SL模式数据段集合;
403)输入数据:将步骤402得到的对分后的SL模式数据段集合,作为AdaBoost的输入,对于不符合SL模式特征的数据,则从对分后的SL模式数据段集合中移除;对于符合SL模式特征的数据,则保留;
404)最终结果获取:将步骤403)判断所得的符合SL模式特征的数据集合作为AdaBoost算法输出,为SL模式检测的最终结果。
有益效果:本发明的人腿检测方法,使用低成本的二维激光有效的解决了人腿快速检测的问题,避免常用计算机视觉方法计算慢、受图像干扰的缺陷,且能够同时实现对静止和运动的人的检测。本发明的人腿检测方法首先通过激光传感器对室内环境进行扫描,并将扫描数据采用改进中值滤波方法、局部最小化和局部最大化等方法进行预处理;其次,根据采集数据进行AdaBoost训练,即将采集的若干组扫描样本进行数据分割,将其作为算法的输入通过已建立的弱分类器训练学习得到一个强分类器;然后进行人腿步态检测,即将预处理后的激光扫描数据进行垂直边缘检测,然后从提取的垂直边缘中检测满足三种人腿模式(LA、FS、SL)中任意一种人腿模式的所有子集;最后对检测出的SL模型采用AdaBoost算法进行分类判断。本发明采用二维激光扫描装置有效地解决了在有人环境下对人的检测的问题,通过基于步态模式结合AdaBoost在线学习的人腿快速检测,提高了people-tracking的速度与精度,保证了在实际应用中的实时性。此方法简单高效,避免常用计算机视觉方法计算慢、受图像干扰的缺陷,且能够同时实现对静止和运动的人的检测,可广泛用于人流数据统计、自主无人驾驶、室内外服务机器人等领域的广泛需求,具有广阔的应用前景和良好的经济效益。
附图说明
图1为本发明的流程框图。
图2为本发明第一步的流程框图。
图3为本发明第二步的流程框图。
图4为本发明第三步的流程框图。
图5为本发明第四步的流程框图。
图6为本发明扫描数据涉及参数的示意图。
图7为本发明分段的示意图。
图8为本发明中SL模式示意图。
具体实施方式
下面结合附图,对本发明做进一步说明。
如图1所示,本发明的基于二维扫描激光的人腿检测方法,包括以下步骤:
第一步:通过激光传感器对室内有人环境进行扫描,并对扫描得到的数据进行预处理。
考虑到环境噪声及动态因素的影响,把测量的激光数据通过改进中值滤波方法进行滤波处理;然后采用局部最小化算法,以消除由于在倾斜表面反射可能产生的尖峰;最后通过局部最大化算法以丢弃像桌腿一样细的对象。如图2所示,第一步具体包括以下步骤101)至104):
101):获得原始距离数据:由固定在移动机器人上的二维激光传感器,通过激光扫描,获得人腿检测的原始距离数据;设每次扫描共获取n个原始距离数据,该n个原始距离数据组成原始距离数据集合为:[r1,r2,…,ri,…,rn];
102):对步骤101)获得的原始距离数据进行中值滤波预处理:对原始距离数据集合中的每一个扫描数据ri,取中值窗口半径为w,中值窗口内的2w+1个扫描数据ri-w,ri-w+1,…,ri,…,ri+w-1,ri+w,对该2w+1个扫描数据求取中值则当时,则时,则ri保持不变;其中,δ表示中值滤波器滤波阈值;将原始距离数据集合进行中值滤波预处理后的数据记为 S 1 = [ r 1 1 , r 2 1 , &CenterDot; &CenterDot; &CenterDot; , r i 1 , &CenterDot; &CenterDot; &CenterDot; , r n 1 ] ;
103)对S1进行局部最小化处理:进行如式(1)所示的局部最小化处理,得到S2
S 2 = [ min 0 &le; k 1 &le; &delta; 1 r 1 + k 1 1 , min - 1 &le; k 1 &le; &delta; 1 r 2 + k 1 1 , &CenterDot; &CenterDot; &CenterDot; , min - &delta; 1 &le; k 1 &le; 0 r n + k 1 1 ] = [ r 1 2 , r 2 2 , &CenterDot; &CenterDot; &CenterDot; , r n 2 ] 式(1)
其中,δ1表示用于控制局部邻域范围大小的参数,0≤δ1≤n;k1是整数变量,k1是为了使局部最小化的范围不超过ri 1所定义的范围;表示S1中第1+k1个元素,表示S1中第2+k1个元素,表示S1中第n+k1个元素,r1 2表示S1中第1个元素对应邻域内的最小元素值,r2 2表示S1中第2个元素对应邻域内的最小元素值,rn 2表示S1中第n个元素对应邻域内的最小元素值;
104)进行局部最大化处理:按照式(2)对S2进行局部最大化处理,得到
S ^ = [ max 0 &le; k 2 &le; &delta; 2 r 1 + k 2 2 , max - 1 &le; k 2 &le; &delta; 2 r 2 + k 2 2 , &CenterDot; &CenterDot; &CenterDot; , max - &delta; 2 &le; k 2 &le; 0 r n + k 2 2 ] = [ r ^ 1 , r ^ 2 , &CenterDot; &CenterDot; &CenterDot; , r ^ n ]   式(2)
其中,δ2表示用于控制局部范围大小的另一个参数,0≤δ2≤n;k2是整数变量,k2是为了使局部最大化的范围不超过ri 2所定义的范围;表示S2中第1+k2个元素,表示S2中第2+k2个元素,表示S2中第n+k2个元素,表示S2中第1个元素对应邻域内的最大元素值,表示S2中第2个元素对应邻域内的最大元素值,表示S2中第n个元素对应邻域内的最大元素值。
第二步:从第一步预处理后的扫描数据中选择数据作为样本集,采用AdaBoost算法进行学习和训练,得到一个用于人腿检测的强分类器。
如图3所示,第二步具体包括以下步骤201)至205):
201)数据分割:为了在距离图像中根据几何特征来检测人的腿,首先需要将扫描数据分割成不同的段。分割的目的是为使分割得到各段集合都与检测目标(人)相关。如果连续两个点之间的距离大于某个阈值则视为不同的段,否则视为同一段;然后再去掉分割得到的一些孤立值(即某个分段内的点数据太少,不构成一个特征此处采用简单的跳跃距离来分割,过程如下:
将第一步预处理后的扫描数据组成数据段如式(3),设数据段由采用极坐标表示的点集表示,p1为该数据段的起点,pn为该数据段的的终点;为点集中第i个点的距离值,φi为点集中第i个点对应的角度;
S ^ j = { p 1 , &CenterDot; &CenterDot; &CenterDot; , p i , &CenterDot; &CenterDot; &CenterDot; , p n }     式(3)
如果D(pi,pi+1)>Dthd,则pi与pi+1属于不同的数据段;如果D(pi,pi+1)≤Dthd,则pi与pi+1属于同一数据段;将中所有相邻点进行判断,得到若干组不同的数据段,然后去掉其中点的个数小于等于3的段,得到N组数据段即为数据分割得到的数据段集合;其中,Dthd表示分隔阈值,D(pi,pi+1)表示两个连续扫描点之间的欧氏距离,分隔阈值根据式(4)确定:
Dthd=C0+C1min(pi,pi+1)          式(4)
其中,min(pi,pi+1)为极坐标表示下连续两扫描点间的最小距离差;C0为用于降噪的恒定参数;Δφ表示pi与pi+1之间的夹角。扫描数据及涉及参数如图6所示。
202)生成训练数据集:根据十个预定义特征分别建立10个弱分类器,作为AdaBoost算法的输入;十个预定义特征为:点的数目、标准差、根据中值计算的平均偏差、分段的宽度、圆性质评估、圆直径参数、边界长度、边界标准差、平均曲率和凸性。每个分段的特征集可构成一个配置文件,如图7所示。图7中坐标系为激光所在二维平面的标准笛卡尔坐标系,图中点为某几个分段中的点,横坐标表示点在x方向位置,纵坐标表示点在y方向位置。对于弱分类器,采用单值特征fj,如式(5)所示:
h j ( e ) = + 1 if p j f j < p j &theta; j - 1 otherwise            式(5)
式(5)中,hj(e)表示对应于单值特征fj的弱分类器,e为数据段参数,θj表示单值特征fj的阈值,pj表示不等式方向的符号量,pj∈{+1,-1};下标j表示预定义特征的编号。
203)样本分类:将步骤201)分割得到的N组数据段进行人工分类,正样本标签为+1,负样本标签为-1,得到训练数据集(em,lm),m=1,2,...,N,其中em为样本,lm用来指示em为正样本还是负样本,即检测的目标是否为人。lm∈{+1,-1}。
204)训练得到强分类器:根据步骤202)建立的10个弱分类器hj(e),将步骤203)得到的训练数据集(em,lm)作为弱分类器的输入,首先初始化权值:
D 1 ( m ) = 1 2 a , l m = + 1 1 2 b , l m = - 1 ( m = 1 , . . . , N )       式(6)
其中,D1(m)表示第m个训练数据集的初始权值,a表示正样本数量,b表示负样本数量;
然后,在设定的轮次t=1、2、…、T内,T等于弱分类器的个数,执行下述步骤2041)至2045),
2041)归一化权值:
D t ( m ) = D t ( m ) &Sigma; i = 1 N D t ( i )     式(7)
其中,t=1+q,q表示步骤2045)返回步骤2041)的次数,q的初始值为0;Dt(m)表示第m个训练数据集在第t轮次的权值,Dt(i)表示第i个训练数据集在第t轮次的权值;
2042)根据Dt训练每一个特征fj的弱分类器hj
2043)对于每个弱分类器hj进行如下计算:
r j = &Sigma; m = 1 N D t ( m ) l m h j ( e m )           式(8)
其中,hj(em)∈{+1,-1};rj表示运算过程中的中间变量;
2044)选择使|rj|最大的hj并进行如下赋值:
(ht,rt)=(hj,rj)        式(9)
2045)按照式(10)更新权值,然后返回步骤2041),直至执行完设定的轮次,进入步骤205);
Dt+1(m)=Dt(m)exp(-αtlmht(em))       式(10)
其中, &alpha; t = 1 2 log ( 1 + r t 1 - r t ) .
205)得到强分类器H:
H(e)=sign(F(e))           式(11)
其中, F ( e ) = &Sigma; t = 1 T &alpha; t h t ( e ) .
第三步:对第一步预处理后的扫描数据进行垂直边缘提取和分类,根据两腿分离的LA模式、分腿向前的FS模式以及两腿并拢或单腿的SL模式三种的步态模型,检测出人腿。
如图4所示,第三步具体包括以下步骤301)至306):
301):将经过第一步预处理后的扫描数据用直角坐标系表示,该直角坐标系以角度为横坐标,以距离值为纵坐标。
302):识别垂直边缘,若为一组垂直边缘;如果不为一组垂直边缘;σ表示垂直边缘的设定阈值。
303):判断所提取的垂直边缘是左边缘还是右边缘,若则为左边缘,若则为右边缘。
304):将所得的垂直边缘排成一集合其中表示第1组垂直边缘对应的方位,e2表示第2组垂直边缘对应的方位;el表示第l组垂直边缘对应的方位;当垂直边缘是左边缘时,该垂直边缘对应的方位采用L表示,当垂直边缘是右边缘时,该垂直边缘对应的方位采用R表示。
对于提取的垂直边缘中相同类型的相邻边缘,如果相邻垂直边缘之间的距离小于阈值d,且相邻垂直边缘之间夹角小于阈值fa,则合并相邻垂直边缘,将合并后的垂直边缘集合记为相同类型是指具有相同的方位,都为右边缘或者左边缘。
305):提取三种人腿模式:两腿分离的LA模式,分腿向前的FS模式,以及两腿并拢或单腿的SL模式;LA模式对应的有序序列为{L、R、L、R},FS模式对应有序序列为{L、R、R}或{L、L、R},SL模式对应有序序列{L、R}。L表示垂直边缘对应的方位为左边缘;R表示垂直边缘对应的方位为右边缘。
306):从垂直边缘集合ε′中检测满足任意一种人腿模式的所有子集,当检测到满足三种人腿模式有序序列之一的边缘集合,则将该边缘集合中的每一条边缘从垂直边缘集合ε′中移除。作为优选,由于所有的LA模式最为可靠,因此最先检测;而最容易误检测的SL模式留到最后检测。在检测时,将垂直边缘集合ε′先与LA模式对应的有序序列进行检测,然后与FS模式对应的有序序列进行检测,最后与SL模式对应的有序序列进行检测。
第四步:对第三步检测出的符合SL模式的扫描数据集,采用第二步训练得到的AdaBoost强分类器,作进一步的人腿检测。
如图5所示,第四步具体包括以下步骤401)至404):
401):SL模式提取:将步骤306)中,从垂直边缘集合ε′中提取出符合SL模式的边缘集合成SL模式数据段集合。
402)SL模式点对分:在SL模式中包含了扫描到两腿并拢和单腿两种情况,如图8所示。将SL模式数据段集合中,对于包含点的数目大于预先设定的对分阈值的数据段,将该数据段包含的点按其空间顺序对半分,形成两个数据段;经过对分处理后,得到对分后的SL模式数据段集合。对分阈值为18。如果直接将SL模式的数据段用AdaBoost训练得到的强分类器测试,对于双腿并拢的情况很可能出现误检测。考虑到双腿并拢扫描到的是两个类圆弧的形状,即类似于两个单腿合在一起,为此我们在SL模式的腿用AdaBoost方法进一步检测前,首先将SL模式中的点对分为两个数据段。对于单腿的情况,即使是对半分后检测,也不会影响其检测结果。
403)输入数据:将步骤402得到的对分后的SL模式数据段集合,作为AdaBoost的输入,对于不符合SL模式特征的数据,则从对分后的SL模式数据段集合中移除;对于符合SL模式特征的数据,则保留。
404)最终结果获取:将步骤403)判断所得的符合SL模式特征的数据集合作为AdaBoost算法输出,为SL模式检测的最终结果。
应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。本实施例中未明确的各组成部分均可用现有技术加以实现。

Claims (7)

1.一种基于二维扫描激光的人腿检测方法,其特征在于:该人腿检测方法包括以下步骤:
第一步:通过激光传感器对室内有人环境进行扫描,并对扫描得到的数据进行预处理;
第二步:从第一步预处理后的扫描数据中选择数据作为样本集,采用AdaBoost算法进行学习和训练,得到一个用于人腿检测的强分类器;
第三步:对第一步预处理后的扫描数据进行垂直边缘提取和分类,根据两腿分离的LA模式、分腿向前的FS模式以及两腿并拢或单腿的SL模式三种的步态模型,初步检测出人腿;
第四步:对第三步检测出的符合SL模式的扫描数据集,采用第二步训练得到的AdaBoost强分类器,作进一步的人腿检测。
2.按照权利要求1所述的基于二维扫描激光的人腿检测方法,其特征在于:所述的第一步包括以下步骤:
101):获得原始距离数据:由固定在移动机器人上的二维激光传感器,通过激光扫描,获得人腿检测的原始距离数据;设每次扫描共获取n个原始距离数据,该n个原始距离数据组成原始距离数据集合为:[r1,r2,…,ri,…,rn];
102):对步骤101)获得的原始距离数据进行中值滤波预处理:对原始距离数据集合中的每一个扫描数据ri,取中值窗口半径为w,中值窗口内的2w+1个扫描数据ri-w,ri-w+1,…,ri,…,ri+w-1,ri+w,对该2w+1个扫描数据求取中值则当时,则时,则ri保持不变;其中,δ表示中值滤波器滤波阈值;将原始距离数据集合进行中值滤波预处理后的数据记为 S 1 = [ r 1 1 , r 2 1 , &CenterDot; &CenterDot; &CenterDot; , r i 1 , &CenterDot; &CenterDot; &CenterDot; , r n 1 ] ;
103)对S1进行局部最小化处理:进行如式(1)所示的局部最小化处理,得到S2
S 2 = [ min 0 &le; k 1 &le; &delta; 1 r 1 + k 1 1 , min - 1 &le; k 1 &le; &delta; 1 r 2 + k 1 1 , &CenterDot; &CenterDot; &CenterDot; , min - &delta; 1 &le; k 1 &le; 0 r n + k 1 1 ] = [ r 1 2 , r 2 2 , &CenterDot; &CenterDot; &CenterDot; , r n 2 ] 式(1)
其中,δ1表示用于控制局部邻域范围大小的参数,0≤δ1≤n;k1是整数变量,k1是为了使局部最小化的范围不超过ri 1所定义的范围;表示S1中第1+k1个元素,表示S1中第2+k1个元素,表示S1中第n+k1个元素,r1 2表示S1中第1个元素对应邻域内的最小元素值,r2 2表示S1中第2个元素对应邻域内的最小元素值,rn 2表示S1中第n个元素对应邻域内的最小元素值;
104)进行局部最大化处理:按照式(2)对S2进行局部最大化处理,得到
S ^ = [ max 0 &le; k 2 &le; &delta; 2 r 1 + k 2 2 , max - 1 &le; k 2 &le; &delta; 2 r 2 + k 2 2 , &CenterDot; &CenterDot; &CenterDot; , max - &delta; 2 &le; k 2 &le; 0 r n + k 2 2 ] = [ r ^ 1 , r ^ 2 , &CenterDot; &CenterDot; &CenterDot; , r ^ n ]   式(2)
其中,δ2表示用于控制局部范围大小的另一个参数,0≤δ2≤n;k2是整数变量,k2是为了使局部最大化的范围不超过ri 2所定义的范围;表示S2中第1+k2个元素,表示S2中第2+k2个元素,表示S2中第n+k2个元素,表示S2中第1个元素对应邻域内的最大元素值,表示S2中第2个元素对应邻域内的最大元素值,表示S2中第n个元素对应邻域内的最大元素值。
3.按照权利要求1所述的基于二维扫描激光的人腿检测方法,其特征在于:所述的第二步包括以下步骤:
201)数据分割:将预处理后的扫描数据分割成不同的段,过程如下:
将第一步预处理后的扫描数据组成数据段如式(3),设数据段由采用极坐标表示的点集表示,p1为该数据段的起点,pn为该数据段的的终点;为点集中第i个点的距离值,φi为点集中第i个点对应的角度;
S ^ j = { p 1 , &CenterDot; &CenterDot; &CenterDot; , p i , &CenterDot; &CenterDot; &CenterDot; , p n }      式(3)
如果D(pi,pi+1)>Dthd,则pi与pi+1属于不同的数据段;如果D(pi,pi+1)≤Dthd,则pi与pi+1属于同一数据段;将中所有相邻点进行判断,得到若干组不同的数据段,然后去掉其中点的个数小于等于3的段,得到N组数据段即为数据分割得到的数据段集合;其中,Dthd表示分隔阈值,D(pi,pi+1)表示两个连续扫描点之间的欧氏距离,分隔阈值根据式(4)确定:
Dthd=C0+C1min(pi,pi+1)          式(4)
其中,min(pi,pi+1)为极坐标表示下连续两扫描点间的最小距离差;C0为用于降噪的恒定参数;Δφ表示pi与pi+1之间的夹角;
202)生成训练数据集:根据十个预定义特征分别建立10个弱分类器,作为AdaBoost算法的输入;十个预定义特征为:点的数目、标准差、根据中值计算的平均偏差、分段的宽度、圆性质评估、圆直径参数、边界长度、边界标准差、平均曲率和凸性;对于弱分类器,采用单值特征fj,如式(5)所示:
h j ( e ) = + 1 if p j f j < p j &theta; j - 1 otherwise       式(5)
式(5)中,hj(e)表示对应于单值特征fj的弱分类器,e为数据段参数,θj表示单值特征fj的阈值,pj表示不等式方向的符号量,pj∈{+1,-1};下标j表示预定义特征的编号;
203)样本分类:将步骤201)分割得到的N组数据段进行人工分类,正样本标签为+1,负样本标签为-1,得到训练数据集(em,lm),m=1,2,...,N,其中em为样本,lm用来指示en为正样本还是负样本,lm∈{+1,-1};
204)训练得到强分类器:根据步骤202)建立的10个弱分类器hj(e),将步骤203)得到的训练数据集(em,lm)作为弱分类器的输入,首先初始化权值:
D 1 ( m ) = 1 2 a , l m = + 1 1 2 b , l m = - 1 ( m = 1 , . . . , N )        式(6)
其中,D1(m)表示第m个训练数据集的初始权值,a表示正样本数量,b表示负样本数量;
然后,在设定的轮次t=1、2、…、T内,T等于弱分类器的个数,执行下述步骤2041)至2045),
2041)归一化权值:
D t ( m ) = D t ( m ) &Sigma; i = 1 N D t ( i )    式(7)
其中,t=1+q,q表示步骤2045)返回步骤2041)的次数,q的初始值为0;Dt(m)表示第m个训练数据集在第t轮次的权值,Dt(i)表示第i个训练数据集在第t轮次的权值;
2042)根据Dt训练每一个特征fj的弱分类器hj
2043)对于每个弱分类器hj进行如下计算:
r j = &Sigma; m = 1 N D t ( m ) l m h j ( e m )          式(8)
其中,hj(em)∈{+1,-1};rj表示运算过程中的中间变量;
2044)选择使|rj|最大的hj并进行如下赋值:
(ht,rt)=(hj,rj)       式(9)
2045)按照式(10)更新权值,然后返回步骤2041),直至执行完设定的轮次,进入步骤205);
Dt+1(m)=Dt(m)exp(-αtlmht(em))     式(10)
其中, &alpha; t = 1 2 log ( 1 + r t 1 - r t ) ;
205)得到强分类器H:
H(e)=sign(F(e))         式(11)
其中, F ( e ) = &Sigma; t = 1 T &alpha; t h t ( e ) .
4.按照权利要求1所述的基于二维扫描激光的人腿检测方法,其特征在于:所述的第三步包括以下步骤:
301):将经过第一步预处理后的扫描数据用直角坐标系表示,该直角坐标系以角度为横坐标,以距离值为纵坐标;
302):识别垂直边缘,若为一组垂直边缘;如果不为一组垂直边缘;σ表示垂直边缘的设定阈值;
303):判断所提取的垂直边缘是左边缘还是右边缘,若则为左边缘,若则为右边缘;
304):将所得的垂直边缘排成一集合其中表示第1组垂直边缘对应的方位,e2表示第2组垂直边缘对应的方位;el表示第l组垂直边缘对应的方位;当垂直边缘是左边缘时,该垂直边缘对应的方位采用L表示,当垂直边缘是右边缘时,该垂直边缘对应的方位采用R表示;
对于提取的垂直边缘中相同类型的相邻边缘,如果相邻垂直边缘之间的距离小于阈值d,且相邻垂直边缘之间夹角小于阈值fa,则合并相邻垂直边缘,将合并后的垂直边缘集合记为相同类型是指具有相同的方位,都为右边缘或者左边缘;
305):提取三种人腿模式:两腿分离的LA模式,分腿向前的FS模式,以及两腿并拢或单腿的SL模式;LA模式对应的有序序列为{L、R、L、R},FS模式对应有序序列为{L、R、R}或{L、L、R},SL模式对应有序序列{L、R};
306):从垂直边缘集合ε′中检测满足任意一种人腿模式的所有子集,当检测到满足三种人腿模式有序序列之一的边缘集合,则将该边缘集合中的每一条边缘从垂直边缘集合ε′中移除。
5.按照权利要求4所述的基于二维扫描激光的人腿检测方法,其特征在于:所述的步骤306)中,将垂直边缘集合ε′先与LA模式对应的有序序列进行检测,然后与FS模式对应的有序序列进行检测,最后与SL模式对应的有序序列进行检测。
6.按照权利要求1所述的基于二维扫描激光的人腿检测方法,其特征在于:所述的第四步包括以下步骤:
401):SL模式提取:将步骤306)中,从垂直边缘集合ε′中提取出符合SL模式的边缘集合成SL模式数据段集合;
402)SL模式点对分:在SL模式中包含了扫描到两腿并拢和单腿两种情况,将SL模式数据段集合中,对于包含点的数目大于预先设定的对分阈值的数据段,将该数据段包含的点按其空间顺序对半分,形成两个数据段;经过对分处理后,得到对分后的SL模式数据段集合;
403)输入数据:将步骤402得到的对分后的SL模式数据段集合,作为AdaBoost的输入,对于不符合SL模式特征的数据,则从对分后的SL模式数据段集合中移除;对于符合SL模式特征的数据,则保留;
404)最终结果获取:将步骤403)判断所得的符合SL模式特征的数据集合作为AdaBoost算法输出,为SL模式检测的最终结果。
7.按照权利要求6所述的基于二维扫描激光的人腿检测方法,其特征在于:所述的步骤402)中,对分阈值为18。
CN201410506045.6A 2014-09-26 2014-09-26 一种基于二维扫描激光的人腿检测方法 Active CN104268598B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410506045.6A CN104268598B (zh) 2014-09-26 2014-09-26 一种基于二维扫描激光的人腿检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410506045.6A CN104268598B (zh) 2014-09-26 2014-09-26 一种基于二维扫描激光的人腿检测方法

Publications (2)

Publication Number Publication Date
CN104268598A true CN104268598A (zh) 2015-01-07
CN104268598B CN104268598B (zh) 2017-05-03

Family

ID=52160118

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410506045.6A Active CN104268598B (zh) 2014-09-26 2014-09-26 一种基于二维扫描激光的人腿检测方法

Country Status (1)

Country Link
CN (1) CN104268598B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106303926A (zh) * 2016-08-23 2017-01-04 Tcl移动通信科技(宁波)有限公司 一种基于移动终端的接近传感器数据处理方法及系统
CN107436440A (zh) * 2017-09-22 2017-12-05 乐山师范学院 基于扫描式激光测距的人流量测量系统
CN107544506A (zh) * 2017-09-27 2018-01-05 上海有个机器人有限公司 机器人跟随方法、机器人以及存储介质
CN108345004A (zh) * 2018-02-09 2018-07-31 弗徕威智能机器人科技(上海)有限公司 一种移动机器人的人体跟随方法
CN109297496A (zh) * 2018-09-29 2019-02-01 上海新世纪机器人有限公司 基于slam的机器人定位方法及装置
CN110609561A (zh) * 2019-11-18 2019-12-24 深圳市优必选科技股份有限公司 一种行人跟踪方法、装置、计算机可读存储介质及机器人
CN111444769A (zh) * 2020-02-25 2020-07-24 华中科技大学 一种基于多尺度自适应随机森林的激光雷达检测人腿方法
CN111665523A (zh) * 2020-06-10 2020-09-15 上海有个机器人有限公司 障碍检测方法和装置
CN112232271A (zh) * 2020-10-29 2021-01-15 上海有个机器人有限公司 一种基于激光的人流检测方法以及设备
CN113126600A (zh) * 2019-12-26 2021-07-16 沈阳新松机器人自动化股份有限公司 基于uwb的跟随系统及物品运送车
CN114310887A (zh) * 2021-12-28 2022-04-12 深圳中智永浩机器人有限公司 3d人腿识别方法、装置、计算机设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6556712B1 (en) * 1996-05-23 2003-04-29 Apple Computer, Inc. Methods and apparatus for handwriting recognition
US20060098865A1 (en) * 2004-11-05 2006-05-11 Ming-Hsuan Yang Human pose estimation with data driven belief propagation
CN101034441A (zh) * 2007-03-29 2007-09-12 浙江大学 基于集成隐马尔可夫模型学习方法的人体运动数据的识别方法
CN101406390A (zh) * 2007-10-10 2009-04-15 三星电子株式会社 检测人体部位和人的方法和设备以及对象检测方法和设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6556712B1 (en) * 1996-05-23 2003-04-29 Apple Computer, Inc. Methods and apparatus for handwriting recognition
US20060098865A1 (en) * 2004-11-05 2006-05-11 Ming-Hsuan Yang Human pose estimation with data driven belief propagation
CN101034441A (zh) * 2007-03-29 2007-09-12 浙江大学 基于集成隐马尔可夫模型学习方法的人体运动数据的识别方法
CN101406390A (zh) * 2007-10-10 2009-04-15 三星电子株式会社 检测人体部位和人的方法和设备以及对象检测方法和设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
赵艳梅: "《基于激光的行人腿部特征信息提取》", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106303926A (zh) * 2016-08-23 2017-01-04 Tcl移动通信科技(宁波)有限公司 一种基于移动终端的接近传感器数据处理方法及系统
CN107436440A (zh) * 2017-09-22 2017-12-05 乐山师范学院 基于扫描式激光测距的人流量测量系统
CN107436440B (zh) * 2017-09-22 2023-09-05 乐山师范学院 基于扫描式激光测距的人流量测量系统
CN107544506B (zh) * 2017-09-27 2021-05-18 上海有个机器人有限公司 机器人跟随方法、机器人以及存储介质
CN107544506A (zh) * 2017-09-27 2018-01-05 上海有个机器人有限公司 机器人跟随方法、机器人以及存储介质
CN108345004A (zh) * 2018-02-09 2018-07-31 弗徕威智能机器人科技(上海)有限公司 一种移动机器人的人体跟随方法
CN109297496A (zh) * 2018-09-29 2019-02-01 上海新世纪机器人有限公司 基于slam的机器人定位方法及装置
CN110609561A (zh) * 2019-11-18 2019-12-24 深圳市优必选科技股份有限公司 一种行人跟踪方法、装置、计算机可读存储介质及机器人
CN113126600A (zh) * 2019-12-26 2021-07-16 沈阳新松机器人自动化股份有限公司 基于uwb的跟随系统及物品运送车
CN111444769B (zh) * 2020-02-25 2022-07-01 华中科技大学 一种基于多尺度自适应随机森林的激光雷达检测人腿方法
CN111444769A (zh) * 2020-02-25 2020-07-24 华中科技大学 一种基于多尺度自适应随机森林的激光雷达检测人腿方法
CN111665523A (zh) * 2020-06-10 2020-09-15 上海有个机器人有限公司 障碍检测方法和装置
CN111665523B (zh) * 2020-06-10 2022-11-18 上海有个机器人有限公司 障碍检测方法和装置
CN112232271A (zh) * 2020-10-29 2021-01-15 上海有个机器人有限公司 一种基于激光的人流检测方法以及设备
CN112232271B (zh) * 2020-10-29 2023-09-12 上海有个机器人有限公司 一种基于激光的人流检测方法以及设备
CN114310887A (zh) * 2021-12-28 2022-04-12 深圳中智永浩机器人有限公司 3d人腿识别方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN104268598B (zh) 2017-05-03

Similar Documents

Publication Publication Date Title
CN104268598A (zh) 一种基于二维扫描激光的人腿检测方法
CN108510467B (zh) 基于深度可变形卷积神经网络的sar图像目标识别方法
Zhang et al. Pedestrian detection method based on Faster R-CNN
CN102722712B (zh) 基于连续度的多尺度高分辨图像目标检测方法
CN102043945B (zh) 基于车辆实时跟踪和二进指数分类车牌字符识别的方法
CN103226835B (zh) 基于在线初始化梯度增强回归树的目标跟踪方法及系统
CN102902967B (zh) 基于人眼结构分类的虹膜和瞳孔的定位方法
CN102043958B (zh) 一种高分辨率遥感图像多类目标检测识别方法
CN103390164A (zh) 基于深度图像的对象检测方法及其实现装置
CN107392141A (zh) 一种基于显著性检测和lsd直线检测的机场提取方法
CN102147869A (zh) 基于前景分析和模式识别的行人检测方法
CN106295532B (zh) 一种视频图像中的人体动作识别方法
CN106682641A (zh) 基于fhog‑lbph特征的图像行人识别方法
CN105046197A (zh) 基于聚类的多模板行人检测方法
CN103761531A (zh) 基于形状轮廓特征的稀疏编码车牌字符识别方法
CN103310195A (zh) 车辆高分遥感图像的基于llc特征的弱监督识别方法
CN104408449A (zh) 智能移动终端场景文字处理方法
CN103065122A (zh) 基于面部动作单元组合特征的人脸表情识别方法
CN103886325A (zh) 一种分块的循环矩阵视频跟踪方法
CN101533466B (zh) 一种眼睛定位图像处理方法
CN104301585A (zh) 一种运动场景中特定种类目标实时检测方法
CN102411709A (zh) 一种虹膜分割识别方法
CN105225216A (zh) 基于空间距圆标记边缘检测的虹膜预处理算法
CN103632137A (zh) 一种人眼虹膜图像分割方法
CN102945374A (zh) 一种高分辨率遥感图像中民航飞机自动检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20150107

Assignee: Nanjing Keyuan Intelligent Technology Group Co.,Ltd.

Assignor: SOUTHEAST University

Contract record no.: X2022320000114

Denomination of invention: A human leg detection method based on two-dimensional scanning laser

Granted publication date: 20170503

License type: Common License

Record date: 20220616

EE01 Entry into force of recordation of patent licensing contract