CN102209974B - 特征量提取装置、物体识别装置、以及特征量提取方法 - Google Patents

特征量提取装置、物体识别装置、以及特征量提取方法 Download PDF

Info

Publication number
CN102209974B
CN102209974B CN200980144589.XA CN200980144589A CN102209974B CN 102209974 B CN102209974 B CN 102209974B CN 200980144589 A CN200980144589 A CN 200980144589A CN 102209974 B CN102209974 B CN 102209974B
Authority
CN
China
Prior art keywords
edge
pixel
image
edge direction
prime
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200980144589.XA
Other languages
English (en)
Other versions
CN102209974A (zh
Inventor
曹芸芸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhiwei Iot Co ltd
Original Assignee
松下电器产业株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 松下电器产业株式会社 filed Critical 松下电器产业株式会社
Publication of CN102209974A publication Critical patent/CN102209974A/zh
Application granted granted Critical
Publication of CN102209974B publication Critical patent/CN102209974B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

特征量计算单元(105)计算由规定像素的边缘的方向、存在于上述规定像素的邻近区域的边缘像素的边缘方向、以及与存在于上述规定像素的邻近区域的边缘像素的空间位置关系规定了的边缘像素的个数(三维直方图)作为图像的特征量(S5)。由此,能够得到还表现了边缘的位置关系的特征量(S5)。其结果,还能够识别起因于边缘的位置关系的不同的边缘图案的不同,例如,能够提高人物图像的识别精度。

Description

特征量提取装置、物体识别装置、以及特征量提取方法
技术领域
本发明涉及特征量提取装置、物体识别装置、以及特征量提取方法,例如涉及判断提供的浓淡图像是否为人物的技术。
背景技术
以往,在判定提供的图像是否为人物图像时,大多使用边缘特征。例如,提出有使用了边缘方向直方图(HOG:Histograms of Oriented Gradients,方向梯度直方图)的物体识别方法(例如,参照专利文献1~3)。
简单地说明使用了边缘方向直方图的物体识别方法。以Ni表示边缘方向的个数,从提供的M(像素)×N(像素)的浓淡图像I,求某一个数的边缘方向图像Ei。这里,如下式这样定义Ei
在位置(x,y)的边缘方向为i时:Ei(x,y)=1
在位置(x,y)的边缘方向为i以外时:Ei(x,y)=0   …(1)
i:边缘方向的号码,i=1,…,Ni
Ni:边缘方向的个数
通过下式求边缘方向直方图(HOG)。
H ( i ) = 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 E i ( x , y ) . . . ( 2 )
i:边缘方向的号码,i=1,…,Ni
Ni:边缘方向的个数
通过使用边缘方向直方图,能够识别图1A的边缘图像和图1B的边缘图像。也就是说,通过使用边缘方向直方图,能够识别边缘方向不同的图像。
但是,使用了边缘方向直方图的识别方法检测图像整体的统计性的特征,所以例如难以识别图1B与图1C。其原因是,在图1B的边缘图像与图1C的边缘图像之间,边缘方向的频数相同。其结果,发生错误识别。
因此,作为能够识别图1B的边缘图像与图1C的边缘图像的一个方法,提出过使用了边缘的共现性的方法(例如,参照非专利文献1)。该方法使用边缘方向的共生矩阵(co-occurrence matrix of edge direction)作为表示边缘的共现性的特征量。用下式表示边缘方向的共生矩阵HCO(i,j)。
H co ( i , j ) = 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 [ E i ( x , y ) Σ ( x ′ , , y ′ ) ∈ R ( x , y ) E j ( x ′ , y ′ ) ] . . . ( 3 )
i,j:边缘方向的号码,i=1,…,Ni,j=1,…,Nj
Ni,Nj:边缘方向的个数
R(x,y):(x,y)的邻近区域
在使用了边缘方向的共现性的图像识别方法中,进行考虑了邻近区域中的边缘方向的识别,所以在边缘方向直方图这样仅使用了边缘方向的频数的识别中曾经无法准确识别的边缘,也能够准确地识别。
现有技术文献
专利文献
专利文献1:特开平第5-210739号公报
专利文献2:特开第2003-263638号公报
专利文献3:特开第2007-156626号公报
非专利文献
非专利文献1:Sami Brand,Jorma Laaksonen,Erkki Oja,“Statistical ShapeFeatures in Content-Based Image Retrieval”,Proceedings of the15thInternational Conference on Pattern Recognition(ICPR’2000),Volume2,pp.6062
发明内容
发明要解决的问题
但是,在非专利文献1这样以往的使用了边缘方向的共生矩阵的图像识别方法中,由于未充分考虑边缘的位置关系,所以有错误识别物体的顾虑。在以往的使用了边缘方向的共生矩阵的图像识别方法中,例如,难以进行图1C与图1D的识别。再者,图1D这样的边缘图案是作为人物图像的“肘”经常出现的图案,图1C这样的边缘图案是作为“树”经常出现的边缘图案。由此,例如在想要识别步行者时,存在将“树”的图像错误识别为是步行者的图像的可能性,识别不充分。
本发明的目的在于,提供还能够识别起因于边缘的位置关系的不同的边缘图案的不同,例如能够提高人物图像的识别精度的特征量提取装置、物体识别装置、以及特征量提取方法。
解决问题的方案
本发明的特征量提取装置的一个形态所采用的结构包括:边缘图像提取单元,用于从图像中提取边缘;特征量计算单元,用于计算作为图像的特征量的边缘空间共生矩阵,所述边缘空间共生矩阵由规定像素的边缘方向i和存在于所述规定像素的邻近区域的边缘像素的边缘方向j的至少一方、与在将所述邻近区域进行了分割的多个分割区域中所述边缘像素所存在的位置k的组合所确定的边缘像素的个数组成。
本发明的物体识别装置的一个形态所采用的结构包括:上述特征量提取装置;多个弱识别器,分别输入由所述特征量提取装置获得了的多个特征量,从输入的特征量和通过预先学习获得了的识别函数输出估计值;结合单元,将从所述多个弱识别器输出的估计值相加;以及判定单元,对相加所得的估计值进行阈值判定。
本发明的特征量提取方法的一个形态包括:边缘提取步骤,从图像中提取边缘;以及特征量计算步骤,计算作为图像的特征量的边缘空间共生矩阵,所述边缘空间共生矩阵由规定像素的边缘方向i和存在于所述规定像素的邻近区域的边缘像素的边缘方向j的至少一方、以及与在将所述邻近区域进行了分割的多个分割区域中所述边缘像素所存在的位置k的组合所确定的边缘像素的个数组成。
发明的效果
根据本发明,还能够识别起因于边缘的位置关系的不同的边缘图案的不同,例如,能够提高人物图像的识别精度。
附图说明
图1A~图1D是表示边缘图案的例子的图。
图2是表示本发明的实施方式的物体识别装置的整体结构的方框图。
图3是表示特征量计算单元的结构的方框图。
图4A是表示作为人物图像经常出现的边缘图案(edge pattern)的例子的图。
图4B是表示作为树的图像经常出现的边缘图案的例子的图。
图5是表示边缘方向的例子的图。
图6是表示邻近区域的分割的例子的图。
图7是表示识别单元的结构的方框图。
图8是用于说明特征量计算单元和识别单元的动作的流程图。
具体实施方式
以下,参照附图详细地说明本发明的实施方式。
[整体结构]
图2表示本发明的实施方式的物体识别装置的整体结构。在本实施方式中,说明主要通过物体识别装置100识别人物图像的情况,但物体识别装置100的识别对象不限于人物图像。
物体识别装置100通过图像获取单元101获取图像。图像获取单元101例如是照相机、扫描仪。图像获取单元101获取图像,进而通过对获取的图像进行截取需要的部分、图像变换这些预处理,获得浓淡图像数据S1,并将其输出。
噪声去除单元102去除浓淡图像数据S1的噪声。实际上,作为噪声去除单元102使用噪声去除滤波器即可,作为噪声去除滤波器使用中值滤波器、锐化滤波器、或平均值滤波器等即可。去除了噪声的浓淡图像数据S2被输出到图像大小归一化单元103。
图像大小归一化单元103对去除了噪声的浓淡图像S2进行大小归一化。也就是说,图像大小归一化单元103将输入的浓淡图像大小变更为预先确定的大小。例如,在输入的图像小于确定的大小时进行扩大操作,在输入的图像大于确定的大小时进行缩小操作。在本实施方式的例子中,采用64(像素)×128(像素)作为图像归一化的大小,将所有的图像变更为64(像素)×128(像素)的图像大小。进行了大小归一化的图像数据S3被输出到边缘提取单元104。
边缘提取单元104从进行了大小归一化的浓淡图像S3提取边缘。边缘提取单元104例如通过对浓淡图像数据S3进行微分,获得边缘方向图像数据S4。边缘方向图像数据S4被输出到特征量计算单元105。
特征量计算单元105从边缘方向图像数据S4计算特征量S5,并将其输出到识别单元106。识别单元106基于特征量S5,识别输入图像(也就是由图像获取单元101获取的图像)是否为人物图像。
[特征量计算单元]
图3表示特征量计算单元105的结构。特征量计算单元105将由边缘提取单元104获得的边缘方向图像输入到图像截取单元105-1。如图4A、图4B所示,图像截取单元105-1从边缘图像截取规定区域AR1、AR2的图像。图4A、图4B表示截取了由5(像素)×5(像素)构成的区域AR1、AR2的例子。再者,图4A表示作为人物图像经常出现的边缘图案的例子,图4B表示作为树的图像经常出现的边缘图案的例子。这里,区域AR1、AR2的中心像素P0是空间位置关系的基准点。
以下,以截取了图4A的区域AR1的情况为例进行说明。区域AR1内的边缘图像数据被输出到中心边缘像素的边缘方向判定单元105-2、邻近边缘像素的边缘方向判定单元105-3、以及边缘像素的空间位置关系检测单元105-4。
这里,在本实施方式中,如图5所示,将边缘方向例如分为6方向。各个边缘方向1~6是以下的范围。
边缘方向1:0°~30°,180°~210°
边缘方向2:30°~60°,210°~240°
边缘方向3:60°~90°,240°~270°
边缘方向4:90°~120°,270°~300°
边缘方向5:120°~150°,300°~330°
边缘方向6:150°~180°,330°~360°
再者,某个边缘像素的边缘方向通过该像素、与和该像素相邻的横与纵方向的像素之间的亮度的差(梯度)的反正切(arctan)运算而求得。在上述亮度的差大于规定值时,将该像素的边缘方向作为获得的边缘方向,在上述亮度的差为规定值以下时,判定为该像素不是边缘图像,将边缘方向设为-1。
中心边缘像素的边缘方向判定单元105-2求图4A的中心像素P0(坐标(x,y)的像素)的边缘方向,将求得的边缘方向输出到运算单元105-5。
邻近边缘像素的边缘方向判定单元105-3求存在于中心像素P0的邻近区域的边缘像素的边缘方向,将求得的边缘方向输出到运算单元105-5。在图4A的情况下,在中心像素P0的邻近区域存在四个边缘像素,所以邻近边缘像素的边缘方向判定单元105-3判定该四个边缘像素各自的边缘方向。
除此之外,本实施方式的特征量计算单元105通过边缘像素的空间位置关系检测单元105-4,检测边缘像素的空间位置关系。边缘像素的空间位置关系检测单元105-4检测存在于中心像素P0的邻近区域的边缘像素位于将中心像素P0的邻近区域分割为多个区域而构成的分割区域中的哪个分割区域。图6表示邻近区域的分割的例子。在图6的例子中,邻近区域被分割为八个区域R1~R8。边缘像素的空间位置关系检测单元105-4检测各个边缘像素位于区域R1~R8中的哪个区域。
运算单元105-5使用由中心边缘像素的边缘方向判定单元105-2、邻近边缘像素的边缘方向判定单元105-3、以及边缘像素的空间位置关系检测单元105-4获得的检测结果,计算三维的直方图。该三维的直方图可以被称为边缘空间共生矩阵(spatial co-occurrence matrix of edge directions)。以下,说明该边缘空间共生矩阵。
这里,以Ni表示边缘方向的个数,从提供的M(像素)×N(像素)的边缘图像S4,求某一个数(图4A的情况为六个)的边缘方向图像Ei。这里,如下式这样定义Ei
在位置(x,y)的边缘方向为i时:Ei(x,y)=1
在位置(x,y)的边缘方向为i以外时:Ei(x,y)=0    …(4)
i:边缘方向的号码,i=1,…,Ni
Ni:边缘方向的个数
这里,在将作为空间位置关系的基准点的中心像素P0的边缘方向的号码设为i,将存在于中心像素P0的邻近区域的像素(在图4A、图4B的情况下,为中心像素P0的周围的24个像素)的边缘方向的号码设为j,将存在于中心像素P0的邻近区域的像素的位置号码设为k时,运算单元105-5通过下式,求边缘空间共生矩阵HSCO(i,j,k)。
H sco ( i , j , k ) = 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 [ E i ( x , y ) Σ ( x ′ , , y ′ ) ∈ R k ( x , y ) E j ( x ′ , y ′ ) ] . . . ( 5 )
i,j:边缘方向的号码,i=1,…,Ni,j=1,…,Ni
Ni:边缘方向的个数
k:边缘像素的位置号码,k=1,…,Nk
Nk:分割子区域的数
再者,式(5)中的Rk如图6所示,表示分割区域号码。
以式(5)表示的边缘的空间共生矩阵HSCO(i,j,k)计算出由规定像素(中心像素P0)的边缘的方向、存在于规定像素的邻近区域的边缘像素的边缘方向、以及规定像素与存在于邻近区域的边缘像素的空间位置关系规定了的边缘像素的个数作为图像的特征量。以式(5)表示的边缘的空间共生矩阵HSCO(i,j,k),对于图像整体考虑了边缘的位置关系,所以具有能够区分通过以往的边缘直方图(HOG)或以往的边缘共生矩阵(co-occurrence matrix of edge directions)无法区分的图形的能力。
这里,例如HSCO(4,3,3)的值是位于边缘方向4(90°~120°,270°~300°)的像素的右上方向(位置R3)的边缘方向3(60°~90°,240°~270°)的像素的数。在图4B所示的、作为树的图像经常出现的边缘图案中,该值(特征量)应该较大。具体而言,在图4B的边缘图案的情况下,HSCO(4,3,3)=2。相对于此,在图4A的边缘图案的情况下,HSCO(4,3,3)=0。
另外,HSCO(4,3,6)的值是位于边缘方向4(90°~120°,270°~300°)的像素的左下方向(位置R6)的边缘方向3(60°~90°,240°~270°)的像素的数。在图4A所示的、作为人物的图像经常出现的边缘图案中,该值(特征量)应该较大。具体而言,在图4A的边缘图案的情况下,HSCO(4,3,6)=2。相对于此,在图4B的边缘图案的情况下,HSCO(4,3,6)=0。
这样,对于边缘像素的所有像素,运算单元105-5对于i、j、k的所有组合,求边缘空间共生矩阵HSCO(i,j,k)。在本实施方式的例子中,i=1,2,………,6,j=1,2,………,6,k=1,2,………,8,所以获得以6×6×8=288个元素构成的边缘空间共生矩阵。也就是说,作为特征量S5,获得288个特征量(三维直方图)。
[识别单元]
图7表示识别单元106的结构。识别单元106具有多个弱识别器106-11~106-1n、结合单元106-2、以及判定单元106-3。
由特征量计算单元150获得的特征量S5(特征量1~n)被输入到弱识别器106-11~106-1n。设有对应于特征量1~n的数量的弱识别器106-11~106-1n。在本实施方式的例子中,设有288个弱识别器,但即使比其小的数也没有关系。
弱识别器106-11~106-1n具有通过预先学习而获得的特征量、以及与其对应的识别函数。具体而言,在想要通过物体识别装置100识别人物的情况下,在学习时,将大量的人物图像和非人物图像用作学习图像,求物体识别装置100的特征量计算单元105的输出结果S5,通过利用机器学习方法、例如推进(Boosting)方法进行学习,各个弱识别器106-11~106-1n获得对应于人物图像的各个特征量的识别函数。
然后,在实际的图像识别时,使用从特征量计算单元105输入的特征量1~n和通过预先学习获得的上述识别函数,输出作为对应于各个特征量的人物的估计值h1~hn
由结合单元106-2将各个估计值h1~hn相加,由此获得的估计值H被输出到判定单元106-3。判定单元106-3对估计值H进行阈值判定,在估计值H大于规定的阈值时,判定为输入图像是人物图像,输出判定结果S6。
[动作]
接着,使用图8,说明物体识别装置100的动作。这里,特别地说明作为本发明的特征的、特征量计算单元105和识别单元106的动作。
物体识别装置100在步骤ST10中开始特征量计算和识别处理后,在步骤ST11中,对于特征量计算单元105的、图像的所有像素,中心边缘像素的边缘方向判定单元105-2、邻近边缘像素的边缘方向判定单元105-3、以及边缘像素的空间位置关系检测单元105-4检测各个边缘像素的边缘方向和边缘位置关系。
在接下来的步骤ST12中,特征量计算单元105的运算单元105-5通过式(5)计算边缘空间共生矩阵作为特征量S5。
在接下来的步骤ST13中,将作为边缘空间共生矩阵的元素的对应的特征量(特征量1~n)输入到对应的弱识别器106-11~106-1n。
在接下来的步骤ST14中,各个弱识别器106-11~106-1n计算估计值hi(i=1~n)。在接下来的步骤ST15中,结合单元106-2计算估计值H。
在接下来的步骤ST16中,判定单元106-3对估计值H进行阈值判定。在估计值H大于阈值时,判定单元106-3转移到步骤ST17,判断为输入图像是人物图像,并输出“1”作为判定结果S6。相对于此,在估计值H为阈值以下时,判定单元106-3转移到步骤ST18,判断为输入图像是非人物图像,并输出“-1”作为判定结果S6。
在步骤ST17或步骤ST18之后,在步骤ST19中结束特征量计算和识别处理。
[效果]
如以上说明的,根据本实施方式,特征量计算单元105通过计算出由规定像素(在实施方式中为中心像素)的边缘的方向、存在于上述规定像素的邻近区域的边缘像素的边缘方向、以及与存在于上述规定像素的邻近区域的边缘像素的空间位置关系规定了的边缘像素的个数(三维直方图)作为图像的特征量S5,能够获得还表现了边缘的位置关系的特征量S5。其结果,还能够识别起因于边缘的位置关系的不同的边缘图案的不同,例如,能够提高人物图像的识别精度。
另外,在本实施方式中计算的边缘空间共生矩阵(特征量)是全局特征,所以能够获得图像中的人物对于位置偏移、姿态变动具有稳健性(robustness)的特征量。
[其他实施方式]
再者,在上述实施方式中,叙述了计算出由规定像素的边缘的方向、存在于上述规定像素的邻近区域的边缘像素的边缘方向、以及与存在于上述规定像素的邻近区域的边缘像素的空间位置关系规定了的边缘像素的个数(三维直方图)作为图像的特征量的情况,而例如也可以计算出由规定像素的边缘的方向、与存在于上述规定像素的邻近区域的边缘像素的空间位置关系规定了的边缘像素的个数(二维直方图)作为图像的特征量。
在这种情况下,只需在将特征量计算单元105的结构做成从图3的结构中省略了邻近边缘像素的边缘方向判定单元105-3的结构的同时,运算单元105-5通过下式求边缘空间共生矩阵H1(i,k)即可。
H 1 ( i , k ) = 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 [ E i ( x , y ) Σ j = 1 N i Σ ( x ′ , , y ′ ) ∈ R k ( x , y ) E j ( x ′ , y ′ ) ] . . . ( 6 )
i,j:边缘方向的号码,i=1,…,Ni,j=1,…,Ni
Ni:边缘方向的个数
k:边缘像素的位置号码,k=1,…,Nk
Nk:分割子区域的数
在这种情况下,能够想到与上述实施方式比较,识别精度降低,但能够与上述实施方式同样地获得表现了边缘的位置关系的特征量,所以能够识别起因于边缘的位置关系的不同的边缘图案的不同。
另外,也可以计算由存在于规定像素的邻近区域的边缘像素的边缘方向、以及与存在于上述规定像素的邻近区域的边缘像素的空间位置关系规定了的边缘像素的个数(二维直方图)作为图像的特征量。
这种情况下,只需在将特征量计算单元105的结构做成从图3的结构中省略了中心边缘像素的边缘方向判定单元105-2的结构的同时,运算单元105-5通过下式求边缘空间矩阵H2(j,k)即可。
H 2 ( j , k ) = Σ i = 1 N j 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 [ E i ( x , y ) Σ ( x ′ , , y ′ ) ∈ R k ( x , y ) E j ( x ′ , y ′ ) ] . . . ( 7 )
i,j:边缘方向的号码,i=1,…,Nj,j=1,…,Nj
Nj:边缘方向的个数
k:边缘像素的位置号码,k=1,…,Nk
Nk:分割子区域的数
再者,在上述实施方式中,叙述了将识别单元106做成具有多个弱识别器106-11~106-1n的结构的情况,但识别单元106的结构不限于此。本发明的特征特别在于特征量计算单元105的特征量的计算处理,所以除此之外的结构也可以进行适当变更。
在2008年11月11日提交的特愿第2008-288864号的日本专利申请所包含的说明书、附图和说明书摘要的公开内容,全部引用于本申请。
工业实用性
本发明具有还能够识别起因于边缘的位置关系的不同的边缘图案的不同的效果,例如适用于识别人物图像。

Claims (5)

1.特征量提取装置,包括:
边缘图像提取单元,用于从图像中提取边缘;以及
特征量计算单元,用于计算作为图像的特征量的边缘空间共生矩阵,所述边缘空间共生矩阵由规定像素的边缘方向i和存在于所述规定像素的邻近区域的边缘像素的边缘方向j的至少一方、与在将所述邻近区域进行了分割的多个分割区域中所述边缘像素所存在的位置k的组合所确定的边缘像素的个数组成。
2.特征量提取装置,包括:
边缘图像提取单元,用于从图像中提取边缘;以及
特征量计算单元,用于通过以下的式(1)或式(2)计算所述图像的特征量,
H 1 ( i , k ) = 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 [ E i ( x , y ) Σ j = 1 N i Σ ( x ′ , , y ′ ) ∈ R k ( x , y ) E j ( x ′ , y ′ ) ] . . . ( 1 )
i,j:边缘方向的号码,i=1,…,Ni,j=1,…,Ni
Ni:边缘方向的个数
k:边缘像素的位置号码,k=1,…,Nk
Nk:分割子区域的个数,
H 2 ( j , k ) = Σ i = 1 N j 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 [ E i ( x , y ) Σ ( x ′ , , y ′ ) ∈ R k ( x , y ) E j ( x ′ , y ′ ) ] . . . ( 2 )
i,j:边缘方向的号码,i=1,…,Nj,j=1,…,Nj
Nj:边缘方向的个数
k:边缘像素的位置号码,k=1,…,Nk
Nk:分割子区域的个数,
其中,在式(1)和式(2)中,N、M表示计算特征量的对象区域的纵方向和横方向的像素数,(x,y)表示规定像素的坐标,Rk(x,y)表示像素(x,y)的第k邻近区域,Ei、Ej由下式(3)定义,
在位置(x,y)的边缘方向为i时:Ei(x,y)=1
在位置(x,y)的边缘方向为i以外时:Ei(x,y)=0   …(3)
i:边缘方向的号码,i=1,…,Ni
Ni:边缘方向的个数。
3.特征量提取装置,包括:
边缘图像提取单元,用于从图像中提取边缘;以及
特征量计算单元,用于通过下式(4)计算所述图像的特征量,
H sco ( i , j , k ) = 1 NM Σ x = 0 M - 1 Σ y = 0 N - 1 [ E i ( x , y ) Σ ( x ′ , , y ′ ) ∈ R k ( x , y ) E j ( x ′ , y ′ ) ] . . . ( 4 )
i,j:边缘方向的号码,i=1,…,Ni,j=1,…,Ni
Ni:边缘方向的个数
k:边缘像素的位置号码,k=1,…,Nk
Nk:分割子区域的个数,
其中,在式(4)中,N、M表示计算特征量的对象区域的纵方向和横方向的像素数,(x,y)表示规定像素的坐标,Rk(x,y)表示像素(x,y)的第k邻近区域,Ei、Ej由下式(5)定义,
在位置(x,y)的边缘方向为i时:Ei(x,y)=1
在位置(x,y)的边缘方向为i以外时:Ei(x,y)=0   …(5)
i:边缘方向的号码,i=1,…,Ni
Ni:边缘方向的个数。
4.物体识别装置,包括:
权利要求1至权利要求3中的任一项所述的特征量提取装置;
多个弱识别器,分别输入由所述特征量提取装置获得了的多个特征量,从输入的特征量和通过预先学习获得了的识别函数输出估计值;
结合单元,将从所述多个弱识别器输出的估计值相加;以及
判定单元,对相加所得的估计值进行阈值判定。
5.特征量提取方法,包括:
边缘提取步骤,从图像中提取边缘;以及
特征量计算步骤,计算作为图像的特征量的边缘空间共生矩阵,所述边缘空间共生矩阵由规定像素的边缘方向i和存在于所述规定像素的邻近区域的边缘像素的边缘方向j的至少一方、以及与在将所述邻近区域进行了分割的多个分割区域中所述边缘像素所存在的位置k的组合所确定的边缘像素的个数组成。
CN200980144589.XA 2008-11-11 2009-11-06 特征量提取装置、物体识别装置、以及特征量提取方法 Active CN102209974B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP288864/08 2008-11-11
JP2008288864A JP5376906B2 (ja) 2008-11-11 2008-11-11 特徴量抽出装置、物体識別装置及び特徴量抽出方法
PCT/JP2009/005920 WO2010055629A1 (ja) 2008-11-11 2009-11-06 特徴量抽出装置、物体識別装置及び特徴量抽出方法

Publications (2)

Publication Number Publication Date
CN102209974A CN102209974A (zh) 2011-10-05
CN102209974B true CN102209974B (zh) 2014-05-14

Family

ID=42169775

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980144589.XA Active CN102209974B (zh) 2008-11-11 2009-11-06 特征量提取装置、物体识别装置、以及特征量提取方法

Country Status (5)

Country Link
US (1) US8649608B2 (zh)
EP (1) EP2348485A4 (zh)
JP (1) JP5376906B2 (zh)
CN (1) CN102209974B (zh)
WO (1) WO2010055629A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5707570B2 (ja) * 2010-03-16 2015-04-30 パナソニックIpマネジメント株式会社 物体識別装置、物体識別方法、及び、物体識別装置の学習方法
CN102414720B (zh) 2010-03-19 2015-08-19 松下电器(美国)知识产权公司 特征量计算装置、特征量计算方法
JP5706647B2 (ja) 2010-09-03 2015-04-22 キヤノン株式会社 情報処理装置、およびその処理方法
SE535888C2 (sv) * 2011-06-08 2013-02-05 Imtt Svenska Ab Förfarande för att identifiera en karaktäristisk del i en bild
EP2574958B1 (en) 2011-09-28 2017-02-22 Honda Research Institute Europe GmbH Road-terrain detection method and system for driver assistance systems
WO2013102900A1 (en) * 2012-01-04 2013-07-11 Mike Goldstein Inspection device for mechanical instruments and uses thereof
US9152888B2 (en) * 2012-09-13 2015-10-06 Los Alamos National Security, Llc System and method for automated object detection in an image
US9092692B2 (en) 2012-09-13 2015-07-28 Los Alamos National Security, Llc Object detection approach using generative sparse, hierarchical networks with top-down and lateral connections for combining texture/color detection and shape/contour detection
US9152881B2 (en) 2012-09-13 2015-10-06 Los Alamos National Security, Llc Image fusion using sparse overcomplete feature dictionaries
JP5957357B2 (ja) * 2012-10-15 2016-07-27 株式会社日立ハイテクノロジーズ パターン検査・計測装置及びプログラム
KR102056686B1 (ko) 2013-02-18 2019-12-18 삼성디스플레이 주식회사 영상 처리부, 이를 포함하는 표시 장치 및 이를 이용한 영상 처리 방법
US9767571B2 (en) 2013-07-29 2017-09-19 Samsung Electronics Co., Ltd. Apparatus and method for analyzing image including event information
CN112017203A (zh) * 2019-05-31 2020-12-01 广州市百果园信息技术有限公司 图像处理方法、视频处理方法、装置、设备及存储介质
CN110929708A (zh) * 2019-09-30 2020-03-27 京东数字科技控股有限公司 识别泰国身份证中国旗的方法、设备及存储介质
CN114782711B (zh) * 2022-06-20 2022-09-16 四川航天职业技术学院(四川航天高级技工学校) 一种基于图像识别的智能化风险检测方法及系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3008233B2 (ja) 1991-09-12 2000-02-14 富士写真フイルム株式会社 被写体認識装置
JP2008004123A (ja) 1995-09-13 2008-01-10 Fujifilm Corp 特定形状領域の抽出装置及び方法、特定領域の抽出装置及び方法、複写条件決定装置及び方法
US6381365B2 (en) 1997-08-22 2002-04-30 Minolta Co., Ltd. Image data processing apparatus and image data processing method
JP3718967B2 (ja) * 1997-08-22 2005-11-24 コニカミノルタビジネステクノロジーズ株式会社 画像特徴量抽出装置および方法並びに画像特徴量抽出プログラムを記録した記録媒体
JP2001175868A (ja) 1999-12-22 2001-06-29 Nec Corp 人物検出方法及び装置
JP3661635B2 (ja) * 2000-11-29 2005-06-15 オムロン株式会社 画像処理方法およびその装置
JP2003263638A (ja) 2002-03-08 2003-09-19 Mitsubishi Heavy Ind Ltd 物体認識装置及び物体認識方法並びに物体認識プログラム
JP4579646B2 (ja) 2004-10-28 2010-11-10 キヤノン株式会社 画像処理装置、画像処理方法、コンピュータプログラム及び記憶媒体
JP2007156626A (ja) 2005-12-01 2007-06-21 Nissan Motor Co Ltd 物体種別判定装置及び物体種別判定方法
JP2008026974A (ja) * 2006-07-18 2008-02-07 Mitsubishi Electric Corp 人物追跡装置
JP4988408B2 (ja) 2007-04-09 2012-08-01 株式会社デンソー 画像認識装置
JP4966080B2 (ja) * 2007-04-18 2012-07-04 パナソニック株式会社 対象物検出装置
JP4983392B2 (ja) 2007-05-17 2012-07-25 カシオ計算機株式会社 撮像装置、プログラム、編集システム及び編集方法
US8015132B2 (en) * 2008-05-16 2011-09-06 Samsung Electronics Co., Ltd. System and method for object detection and classification with multiple threshold adaptive boosting
JP5210739B2 (ja) 2008-07-09 2013-06-12 陞達科技股▲ふん▼有限公司 共振回路の周波数を利用してファンの回転速度を設定する方法

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
JP特開2006-127159A 2006.05.18
JP特開2008-257649A 2008.10.23
JP特開2008-269181A 2008.11.06
JP特開2008-26974A 2008.02.07
SamiBrandt et al.Statistical Shape Features in Content-Based Image Retrieval.《15th International Conference on Pattern Recognition
Statistical Shape Features in Content-Based Image Retrieval;Sami Brandt, et al;《15th International Conference on Pattern Recognition, Proceedings.2000》;20001231;第2卷;1062-1065 *

Also Published As

Publication number Publication date
JP2010117772A (ja) 2010-05-27
JP5376906B2 (ja) 2013-12-25
US8649608B2 (en) 2014-02-11
WO2010055629A1 (ja) 2010-05-20
EP2348485A4 (en) 2018-01-17
EP2348485A1 (en) 2011-07-27
CN102209974A (zh) 2011-10-05
US20110243434A1 (en) 2011-10-06

Similar Documents

Publication Publication Date Title
CN102209974B (zh) 特征量提取装置、物体识别装置、以及特征量提取方法
CN104217208B (zh) 目标检测方法和装置
Isikdogan et al. Automatic channel network extraction from remotely sensed images by singularity analysis
CN111080582B (zh) 工件内外表面缺陷检测方法
CN102722731A (zh) 一种基于改进sift算法的高效图像匹配方法
CN103325085A (zh) 自动图像对齐
CN105389586A (zh) 一种基于计算机视觉自动检测虾体完整性的方法
Cheng et al. Building boundary extraction from high resolution imagery and lidar data
CN104408711A (zh) 一种基于多尺度区域融合的显著区域检测方法
CN106340010B (zh) 一种基于二阶轮廓差分的角点检测方法
CN102999886A (zh) 图像边缘检测器及标尺光栅栅线精度检测系统
CN105023265A (zh) 鱼眼镜头下的棋盘格角点自动检测方法
EP2993621A1 (en) Method and apparatus for detecting shielding against object
CN104408728A (zh) 一种基于噪声估计的伪造图像检测方法
CN106327464A (zh) 一种边缘检测方法
CN104318559A (zh) 用于视频图像匹配的特征点快速检测方法
CN108090492B (zh) 基于尺度线索抑制的轮廓检测方法
CN106327522A (zh) 基于多方向形态学滤波复杂云背景下红外小目标检测方法
CN103914829B (zh) 一种含噪图像边缘检测方法
KR20180098945A (ko) 고정형 단일 카메라를 이용한 차량 속도 감지 방법 및 장치
CN104637060A (zh) 一种基于邻域主成分分析-拉普拉斯的图像分割方法
CN105405146A (zh) 基于特征密度聚类与正态分布变换的侧扫声呐配准方法
CN109389644B (zh) 基于方向梯度增强的车位线检测方法
I Abbas et al. Iraqi cars license plate detection and recognition system using edge detection and template matching correlation
JP2016053763A (ja) 画像処理装置、画像処理方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20211018

Address after: Room 01, 6 / F, Mituo Road, 45 Singapore

Patentee after: Bingxi FUCE Private Limited

Address before: Osaka, Japan

Patentee before: Matsushita Electric Industrial Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220401

Address after: Room 1306, 13 / F, Lida Industrial Center, 57-59 Beiwan street, Fo Tan Ao, Shatin, Hong Kong, China

Patentee after: Zhiwei IOT Co.,Ltd.

Address before: Room 01, 6 / F, Mituo Road, 45 Singapore

Patentee before: Bingxi FUCE Private Ltd.

TR01 Transfer of patent right