WO2010069167A1

WO2010069167A1 - 识别图像中障碍物的方法和装置

Info

Publication number: WO2010069167A1
Application number: PCT/CN2009/071577
Authority: WO
Inventors: 段勃勃; 刘威; 袁淮
Original assignee: 东软集团股份有限公司
Priority date: 2008-12-15
Filing date: 2009-04-30
Publication date: 2010-06-24
Also published as: CN101419667B; JP2012512446A; DE112009003144B4; CN101419667A; DE112009003144T5; JP5276721B2; US20110262009A1; US8406474B2

Description

识别图像中障碍物的方法和装置本申请要求于 2008 年 12 月 15 日提交中国专利局、申请号为 200810185833.4、发明名称为"识别图像中障碍物的方法和装置"的中国专利申请的优先权，其全部内容通过引用结合在本申请中。

技术领域

本发明涉及障碍物识别技术领域，特别涉及识别图像中障碍物的方法和装置。

背景技术

在本领域，障碍物通常是指高于地面的立体物。

目前，基于运动补偿的方法是基于单目视觉的障碍物检测常用方法之一。它的原理是在道路平坦、短时间内光照条件不变前提下，道路平面的任一点在相邻时刻图像帧内所成对应像点的像素值不变。如果假设前一时刻图像中所有的点都是路面上的点的对应的成像点，则由相机运动参数和成像原理，能够计算出由前一时刻图像中所有的点在下一时刻相机发生运动后所组成的假想图像，则该假设图像与当前时刻实际拍摄到的图像的差异都是由于那些不是道路平面上的点所引起的。这些差异所对应的图像像素即可能是突出地面的障碍物。

目前的方法主要是单纯基于运动补偿的结果来判断图像中某个区域是存在障碍物，这种识别策略在运动参数精度较低或图像噪声的影响下，会导致运动补偿的结果达不到理想的效果，从而对于某些非障碍物被误识别为障碍物。

发明内容

本发明实施例提供一种识别图像中障碍物的方法和装置，能够降低误检测本发明实施例提供的一种识别图像中障碍物的方法，包括：

获取当前帧以及与当前帧最近的之前 N帧的图像，对所获取的每帧图像按相同方式进行划分，对于每帧图像均获得若干个划分后的块区域；

计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的运动障碍物置信度；

根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；

根据每个块区域确定图像中的障碍物。

其中，所述计算当前帧的每个块区域的运动障碍物置信度的步骤包括： i )获取运动参数，生成当前帧对应之前 n-k时刻的假想图像； n >=2, k>=l; ii )对于一个块区域，计算该块的当前帧与所述假想图像的相似程度，获得第一运动置信度 C_M_A1；

iii )对于一个块区域，计算该块的当前帧与当前帧之前 n-k时刻图像的相似程度，获得第二运动置信度 C_M_A2;

iv )对于一个块区域，若所述第一运动置信度 C_M_A1的值大于第一运动阈值，且所述第一运动置信度 C_M_A1与第二运动置信度 C_M_A2的比值大于第二运动阈值，则当前帧的该块区域的运动障碍物置信度 C_M为 1 , 否则当前帧的该块区域的运动障碍物置信度 C_M为 0;

¥ )重复执行步骤10至^ ,直到计算出每个块区域的运动障碍物置信度。其中，所述确定当前帧图像中每个块区域是否为障碍物的步骤包括：若当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1的数量大于第一数量阈值，则当前帧图像中该块区域的总置信度 _1¹(^1为 1 , 否则该块区域的总置信度 C_Total为 0;

若当前帧图像中所述某个块区域的总置信度( _1¹(^1为 1 , 则该块区域为障碍物，否则该块区域为非障碍物。

本发明实施例提供的另一种识别图像中障碍物的方法，包括：

计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度；

根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；根据每个块区域确定图像中的障碍物。

V )重复执行步骤 ii )至 iv ),直到计算出每个块区域的运动障碍物置信度。其中，所述特征障碍物置信度包括基于垂直特性的特征障碍物置信度、或者基于纹理特性的特征障碍物置信度。

其中，所述根据垂直特性计算当前帧的每个块区域的特征障碍物置信度的步骤包括：

a )判断当前帧一块区域是否具有垂直属性，若有则当前帧该块区域的特征障碍物置信度为 1 , 否则当前帧的该块区域的特征障碍物置信度 C_F为 0; b )重复执行步骤 a ), 直到计算出每个块区域的特征障碍物置信度。

其中，所述判断当前帧一块区域是否具有垂直属性的步骤包括：

aOl )计算一个块区域的垂直方向的强度 /_v; 其

行，第列像素的灰度值，为整数， i' j e R , ?为该图像块区域， N为图像宽度， M为图像高度。

a02 )若步骤 aOl )所述垂直方向的强度 I_v大于强度阈值，则所述块区域具有垂直属性，否则所述块区域不具有垂直属性。

其中，所述确定当前帧图像中每个块区域是否为障碍物的步骤包括：若当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1的数量大于第一数量阈值，且，当前帧及与当前帧最近的之前 N帧所对应的所述某个相同块区域的特征障碍物置信度的值等于 1的数量大于第二数量阈值，则当前帧图像中该块区域的总置信度。—^^^ 为 1 , 否则该块区域的总置信度 C_Total为 0;

本发明实施例提供的一种识别图像中障碍物的装置，包括：

图像分割单元，用于获取当前帧以及与当前帧最近的之前 N帧的图像，对所获取的每帧图像按相同方式进行划分，对于每帧图像均获得若干个划分后的块区域；

运动障碍物置信度计算单元，用于计算当前帧以及与当前帧最近的之前 N 帧所对应的每个块区域的运动障碍物置信度，

第一块区域障碍物识别单元，用于根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；

障碍物确定单元，用于根据每个块区域确定图像中的障碍物。

其中，所述运动障碍物置信度计算单元包括：

假想图像生成单元，用于获取运动参数，生成当前帧之前 n-k时刻的假想图像； n >=2, k>=l;

第一运动置信度计算单元，用于对于一个块区域计算当前帧与所述假想图像的相似程度，获得第一运动置信度 C_M_A1 ;

第二运动置信度计算单元，用于对于一个块区域计算当前帧与当前帧之前 n-k时刻图像的相似程度，获得第二运动置信度 C_M_A2;

运动障碍物置信度确定单元，用于在所述第一运动置信度 C_M_A1 的值大于第一运动阈值，且所述第一运动置信度 C_M_A1 与第二运动置信度 C_M_A2的比值大于第二运动阈值时，确定当前帧的该块区域的运动障碍物置信度 C_M为 1 , 否则确定当前帧的该块区域的运动障碍物置信度 C_M为 0。

其中，所述第一块区域障碍物识别单元包括：

第一总置信度确定单元，用于在当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1 的数量大于第一数量阈值时，确定当前帧图像中该块区域的总置信度 C_Total为 1 , 否则确定该块区域的总置信度 C_Total为 0;

第一识别单元，用于获知当前帧图像中所述某个块区域的总置信度 C_Total为 1时，确定该块区域为障碍物，否则确定该块区域为非障碍物。

本发明实施例提供的另一种识别图像中障碍物的装置，包括：

特征障碍物置信度计算单元，用于计算当前帧以及与当前帧最近的之前 N 帧所对应的每个块区域的特征障碍物置信度；

第二块区域障碍物识别单元，用于根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；

其中，所述运动障碍物置信度计算单元包括：

第一运动置信度计算单元，用于对于一个块区域计算当前帧与所述假想图像的相似程度，获得第一运动置信度 C_M_A1；

其中，所述特征障碍物置信度包括基于垂直特性的特征障碍物置信度、基于垂直边缘特性的特征障碍物置信度，或者基于纹理特性的特征障碍物置信度。

其中，在所述特征障碍物置信度基于垂直特性时，所述特征障碍物置信度计算单元包括：

垂直属性判断单元，用于判断当前帧的某一块区域是否具有垂直属性，将判断结果通知给特征障碍物置信度确定单元；

特征障碍物置信度确定单元，用于获知当前帧某块区域具有垂直属性时，确定当前帧该块区域的特征障碍物置信度为 1 , 否则确定当前帧的该块区域的特征障碍物置信度 C_F为 0。

其中，所述第二块区域障碍物识别单元包括：

第二总置信度确定单元，用于在当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1 的数量大于第一数量阈值，且，当前帧及与当前帧最近的之前 N帧所对应的所述某个相同块区域的特征障碍物置信度的值等于 1的数量大于第二数量阈值时，确定当前帧图像中该块区域的总置信度 C_Total为 1 ,否则确定该块区域的总置信度( _1¹(^1为 0; 第二识别单元，用于获知当前帧图像中所述某个块区域的总置信度

C_Total为 1时，确定该块区域为障碍物，否则确定该块区域为非障碍物。

应用本发明实施例提供的一种识别图像中障碍物的方法和装置，与传统仅基于运动补偿方法相比，不但采用了基于运动补偿的绝对程度的策略，还采用了基于运动补偿的相对的策略，从而降低了误检测率，能够准确的判断出图像中的障碍物。

应用本发明实施例提供的另一种识别图像中障碍物的方法和装置，与传统仅基于运动补偿方法相比，不但采用了基于运动补偿的绝对程度的策略，以及采用了基于运动补偿的相对的策略，并在此基础上进一步融合了特征分析的策略，从而更进一步地降低了误检测率，能够准确的判断出图像中的障碍物。附图说明

为了更清楚地说明本发明实施例中的技术方案，下面对实施例中所需要使用的附图作筒单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图 1是根据本发明实施例的识别图像中障碍物的方法流程图；

图 2 是根据本发明实施例的计算当前帧的每个块区域的运动障碍物置信度的方法流程图；

图 3 是根据本发明实施例的所设定的世界坐标系和前一时刻图像的摄相机的世界坐标系的关系示意图；

图 4是根据本发明实施例的当前时刻假想图像的示意图；

图 5是根据本发明实施例的一种识别图像中障碍物的装置结构图；图 6是根据本发明实施例的另一种识别图像中障碍物的装置结构图。具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供的一种识别图像中障碍物的方法，包括：获取当前帧以及与当前帧最近的之前 N帧的图像，对所获取的每帧图像按相同方式进行划分，对于每帧图像均获得若干个划分后的块区域；计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的运动障碍物置信度；根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；根据每个块区域确定图像中的障碍物。应用本发明，与传统仅基于运动补偿方法相比，不但采用了基于运动补偿的绝对程度的策略，还采用了基于运动补偿的相对的策略，从而降低了误检测率，能够准确的判断出图像中的障碍物。

本发明实施例提供的另一种识别图像中障碍物的方法，包括：获取当前帧以及与当前帧最近的之前 N帧的图像，对所获取的每帧图像按相同方式进行划分，对于每帧图像均获得若干个划分后的块区域；计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度；根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；根据每个块区域确定图像中的障碍物。应用本发明，与传统仅基于运动补偿方法相比，不但采用了基于运动补偿的绝对程度的策略，还采用了基于运动补偿的相对的策略，并在此基础上进一步融合了特征分析的策略，从而在降低了误检测率的同时提高了检测的准确率，能够准确的判断出图像中的障碍物。

参见图 1 , 其是根据本发明实施例的识别图像中障碍物的方法流程图。本例中既采用了基于运动补偿的绝对程度的策略，还采用了基于运动补偿的相对的策略，并在此基础上进一步融合了特征分析的策略。具体包括：

步骤 101 , 划分图像块区域，具体的，获取当前帧以及与当前帧最近的之前 N帧的图像，对所获取的每帧图像按照相同的方式进行划分，对于每帧图像均获得若干个划分后的块区域。

例如，首先从图像序列中取出当前帧的图像（即表示 n时刻的图像）和之前与当前帧最接近的 N帧图，其中， n>=2;图像序列的帧间隔可以设为 Δ 。其次，将上述的每帧图像都分成多个块区域，块区域的形状可以是矩形, 也可以是三角形等能够将图像完全划分的任何形状，本实施例为：都划分为 Ν χ Μ像素的互不重叠的矩形块区域，这样，对于每帧图像均获得了相同的若干个划分的矩形块区域。至于具体的分割方法本文未做限定，只要能够分割成多个矩形块区域即可。上述与当前帧最近的之前 Ν帧图像中的 Ν, 具体数目可根据实际需要确定，例如，可以根据物体移动的速度，在相机中从出现到消失这段时间内所获得的帧数作为前述 Ν的具体数目。步骤 102,计算当前帧以及与当前帧最近的之前 Ν帧所对应的每个块区域的运动障碍物置信度。所谓运动障碍物置信度，是指基于运动补偿后的该块区域是否为障碍物的置信度，这里的运动补偿与现有的运动补偿稍有不同，现有的运动补偿通常只包括基于运动补偿的绝对程度，而本发明中的运动补偿包括基于运动补偿的绝对程度和相对程度。可以理解，由于与当前帧最近的之前 N帧所对应的每个块区域的运动障碍物置信度的计算方法，和当前帧的每个块区域的运动障碍物置信度的计算方法相同，下面仅对当前帧的每个块区域的运动障碍物置信度的计算方法进行说明，对于与当前帧最近的之前 N帧的不再重复说明。参见图 2, 其是根据本发明实施例的计算当前帧的每个块区域的运动障碍物置信度的方法流程图。具体包括：步骤 201 , 获取相机运动参数。本发明实施例中所获取的相机运动参数可以由传感器获得，如可以通过速度传感器和陀螺仪传感器等获取，也可以由序列图像用计算的方法获得，如采用光流方法、运动恢复结构（Structure from Motion, SFM)的方法或基于特征点检则、直接法等方法估计得到 , ^口文献 1" A robust method for computing vehicle ego-motion (一种计算自车运动的直接方法 ) "采用直接的方法估计运动参数，文献 2"Transforming camera geometry to a virtual downward-looking camera: robust ego-motion estimation and ground-layer detection"采用改进的直接方法菝得运动参数。本发明实施例采用文献 1的直接估计方法获取相机运动参数。在本发明实施例中设定世界坐标系 ^{[< ;} ，H]和前一时刻图像的相机坐标系 ^[< '^{; Χ}，，^{Ζ ]}的原点 ^G，重合，坐标轴之间可以有旋转角，世界坐标系的轴平行于道路平面，垂直于道路平面。如图 3所示。

根据道路平面假设，相机运动参数 m表示为 = ，^^ 即在方向有一个平移，在¹ ^方向有一个旋转。步骤 202,生成当前帧对应之前 n-k时刻的假想图像；其中， n >=2, k>=l ; 所谓的假想图像是指假设前某一时刻（本例中即 n-k时刻）图像中所有像素点都是道路平面上的点所成的像（其中相机高度），相机运动后，这些地面上的点在新的相机位置下所成的像，即为假想图像。如图 4所示。下面以前一时刻图像上某点 P为例，说明如何生成新的相机位置下的假想图像。假设前一时刻图像上点尸是道路平面上点 ^P。所成的像（实际上是立体物上的点 ^ρι所成的像），相机运动后， ^P。所成的像点尸 '即为当前时刻假想图像上与尸对应的点，即将点尸的灰度值赋给点尸'。基于这一原理，可以得到当前时刻假想图像上其它像素点与前一时刻图像上点的对应关系，从而可以得到新的相机位置下的当前时刻的假想图像。下面说明如何求得假想图像中尸'点的坐标。

以前一时刻图像中某一像素点 c)为例， _r, c分别为该点在图像中的行坐标和列坐标， P是道路平面上点 P₀ (X_w , ^ , Z_w )的所成的像点。

根据相机成像公式（也被称为摄像机成像公式）可以计算出点 p。的世界坐

^ (Χ Υ , Ζ )。：

其中 a_x, , 。,v。是相机内部参数，可由相机标定获得；

其中 = [Γ_χ,7 ,Γ/为平移向量， 7 ,7 ,7为相机坐标系原点在世界坐标系下的置，为相机外部参数，在安装相机时获得；

cos γ cos β cos γ sin β α - sin γ cos a cos γ sin β cos + sin ^ sin a 其中 sin γ cos β cos a cos ^ + sin ^ sin β sin a sin γ sin β cos a - cos γ sin a

- sin β cos β sin a cos β cos a 为旋转矩阵， ",Α^分别是相机坐标系绕世界坐标系 U,Z轴的旋转角，为相机外部参数，在安装相机时获得；

已知 =相机高度， /^，(；)为像素的坐标；

求解上述方程（1 ), 可得 ^ ,2^和 , Z_c是 P的在相机坐标系中 Z轴的坐标。

利用获得的运动参数 ^{m =} ，^^}可得运动后相机坐标系原点在世界坐标系下的坐标为⁷ ^ ^'^ +^ , 相机坐标系绕世界坐标系 ^轴的旋转角变为 ^α,^{β + ω} ,^γ。根据此时相机的旋转矩阵和平移矩阵，以及已经计算出的 ^ρ。的世

再由上述相机成像公式（1 ), 方程右端为已知，可求得左端未知数，即点 ^p。在假象图像中的成像坐标。具体的，基于上述变换，可将之前某图像 F ^上所有的点按运动参数运动，产生了一幅新的假想图像 F„。如果不考虑噪声的影响，在平面运动的假设前提下，假想图像中的平面区域与当前时刻的图像 F„的平面区域是完全一致的，而非平面区域则不同，以下将利用这个原理，确定区域为立体物的置信度。

步骤 203 , 对于一个块区域计算当前帧与之前 n-k时刻的假想图像的相似程度，将所述获得的相似程度作为基于运动补偿的第一运动置信度 C_M_A1。

需要说明的是，本文将当前帧与之前 n-k时刻的假想图像的相似程度称为第一运动置信度 C_M_A1 , 该第一运动置信度实际是基于运动补偿绝对程度的；将当前帧与之前实际的 n-k 时刻图像的相似程度称为第二运动置信度 C_M_A2 , 该第二运动置信度实际是未经运动补偿的；而第一运动置信度 C_M_A1与第二运动置信度 C_M_A2的比值实际是基于运动补偿相对程度的。

具体的，步骤 203包括：针对图像中某个块区域中的所有像素，在假想图像中寻找坐标相同的像素，然后基于对应点的像素值计算该块区域的当前时刻图像和当前时刻的假想图像的相似程度，从而获得该块区域为障碍物的第一运动置信度 C_M_A1 , 其中可以采用归一化相关值（NC )计算所述相似程度 NC:

其中，块区域的大小为 N*M, 为图像中的像素（ )的灰度值，

X ' ( , j)为图像的假想图像 F_n中的像素 ( , j)灰度值。

步骤 204, 对于一个块区域计算当前帧与之前 n-k时刻图像的相似程度，将所述获得的相似程度作为不进行运动补偿的第二运动置信度 C_M_A2；具体的，针对图像中某个块区域中的所有像素，在 F ^中寻找坐标相同的像素，然后基于对应点对的像素值计算该块区域的当前时刻图像和之前 n-k 时刻图像的相似程度，从而得到该块区域为障碍物的第二运动置信度 C_M_A2 , 其中可以采用归一化相关值（ NC )计算所述相似程度 NC:

其中，块区域的大小为 N*M, 为图像中的像素（ )的灰度值，

X "(i, j、为之前 n-k时刻图像 F:中的像素 (i, j)灰度值。

步骤 205 , 确定运动障碍物置信度 C_M。

具体的，若所述第一运动置信度 C_M_A1 的值大于第一运动阈值，且所述第一运动置信度 C_M_A1与第二运动置信度 C_M_A2的比值大于第二运动阈值，则当前帧的该块区域的运动障碍物置信度 C_M为 1 , 否则当前帧的该块区域的运动障碍物置信度 C_M为 0。

也就是说，上述运动障碍物置信度 C_M 是基于运动补偿绝对程度（即 C_M_A1 的值大于第一运动阈值的情况），与基于运动补偿相对程度（即 C_M_A1与 C_M_A2的比值大于第二运动阈值的情况）获得的。

其中需要说明的是，第一运动置信度 C_M_A1与第二运动置信度 C_M_A2 的比值是一个广义的概念，该比值既可以是 C_M_A1/ C_M_A2的值，也可以是 (C_M_A1- C_M_A2)/(1- C_M_A2)的值，还可以是其他表现形式的值。

步骤 206, 重复执行上述步骤 203~205 , 直到计算出每个块区域的运动障碍物置信度。

步骤 103 ,计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的特征障碍物置信度 C_F。其中，所述特征障碍物置信度包括基于垂直特性的特征障碍物置信度、基于垂直边缘特性的特征障碍物置信度，或者基于纹理特性的特征障碍物置信度。下面以垂直特性为例，具体说明如何计算特征障碍物置信度 C_F。步骤 a, 判断当前帧一块区域是否具有垂直属性，若有则当前帧该块区域的特征障碍物置信度 C_F为 1 , 否则当前帧的该块区域的特征障碍物置信度 C_F为 0。具体的判断当前帧一块区域是否具有垂直属性的步骤包括：

aOl )计算一个块区域的垂直方向的强度 /_v; 其

第列像素的灰度值， k为整数, i' j e R , 为该图像块区域， N为图像块区域宽度， M为图像块区域高度。

a02 )若步骤 aOl )所述垂直方向的强度 /_v大于强度阈值 T, 即 /_ν > Γ , 则所述块区域具有垂直属性，否则所述块区域不具有垂直属性。

步骤 b, 重复执行步骤 a, 直到计算出每个块区域的特征障碍物置信度。步骤 104,根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物。具体的，取一块区域对应最近 N 帧的运动障碍物置信度，设为 C_M_t,C_M_t_₁,...,C_M_t__N_₁, 统计运动障碍物置信度的值等于 1的数量 Sum_M; 取该块区域对应最近 N帧的特征置信度，设为 C_F_t,C_F_M,...,C V_N4 , 统计特征障碍物置信度的值等于 1的数量 Sum_F; 若 Sum_M大于第一数量阈值 S_M_Limit, 且 Sum_F大于第二数量阈值 C_F_Limit , 则总置信度 C_Total为 1 , 否则为 0。若当前帧图像中所述某个块区域的总置信度( _1¹(^1为 1 , 则该块区域为障碍物，否则该块区域为非障碍物。也就是说，若当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1的数量大于第一数量阈值，且，当前帧及与当前帧最近的之前 N帧所对应的所述某个相同块区域的特征障碍物置信度的值等于 1 的数量大于第二数量阈值，则当前帧图像中该块区域的总置信度 C_Total为 1 , 否则该块区域的总置信度 C_Total为 0; 在当前帧图像中某个块区域的总置信度。—^^^ 为 1时，则该块区域为障碍物，否则该块区域为非障碍物。

步骤 105, 根据每个块区域确定图像中的障碍物。

具体的，当判断出每个块区域是否为障碍物后，综合所有结果，即可得到图像中的障碍物。

可见，图 1所提供的识别图像中障碍物的方法，与传统仅基于运动补偿方法相比，不但采用了基于运动补偿的绝对程度的策略，还采用了基于运动补偿的相对的策略，并在此基础上进一步融合了特征分析的策略，从而在降低了误检测率的同时提高了检测的准确率，能够准确的判断出图像中的障碍物。图 1所示为一较佳实施例，在实际应用中，还可以有另一种情况是，即，只进行运动补偿（包括绝对程度和相对程度），而不再基于特征分析进行补偿，这同样可以达到降低了误检测率的目的。这种实施方式下，与图 1所示步骤基本相同，其区别是，不再执行步骤 103 , 相应的步骤 104变为：根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物。其中，确定当前帧图像中每个块区域是否为障碍物的步骤包括：具体的，取一块区域对应最近 N 帧的运动障碍物置信度，设为 C_M_t,C_M_M,...,C_M_t__N4, 统计运动障碍物置信度的值等于 1的数量 Sum_M; 若 Sum_M大于第一数量阈值 S_M_Limit, 则总置信度 C_Total为 1 , 否则为 0。若当前帧图像中所述某个块区域的总置信度( _1¹(^1为 1 , 则该块区域为障碍物，否则该块区域为非障碍物。也就是说，若当前帧及与当前帧最近的之前 Ν帧所对应的某个相同块区域的运动障碍物置信度的值等于 1的数量大于第一数量阈值，则当前帧图像中该块区域的总置信度 C_Total为 1 , 否则该块区域的总置信度 C_Total为 0; 在当前帧图像中某个块区域的总置信度 _1¹(^1为 1时，则该块区域为障碍物，否则该块区域为非障碍物。本发明实施例还提供了一种识别图像中障碍物的装置，参见图 5, 其与图

1所示实施例对应，包括：图像分割单元 501、运动障碍物置信度计算单元 502、特征障碍物置信度计算单元 503、第二块区域障碍物识别单元 504和障碍物确定单元 505。其中，

图像分割单元 501 ,用于获取当前帧以及与当前帧最近的之前 N帧的图像，对所获取的每帧图像按相同的方式进行划分，对于每帧图像均获得若干个划分后的块区域；

运动障碍物置信度计算单元 502, 用于计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的运动障碍物置信度，

特征障碍物置信度计算单元 503, 用于计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的特征障碍物置信度；该特征障碍物置信度可以包括基于垂直特性的特征障碍物置信度、基于垂直边缘特性的特征障碍物置信度，或者基于纹理特性的特征障碍物置信度。

第二块区域障碍物识别单元 504, 用于根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；

障碍物确定单元 505 , 用于根据每个块区域确定图像中的障碍物。

上述运动障碍物置信度计算单元 502还可以包括：假想图像生成单元、第一运动置信度计算单元、第二运动置信度计算单元以及运动障碍物置信度确定单元。其中，

运动障碍物置信度确定单元，用于在所述第一运动置信度 C_M_A1 的值大于第一运动阈值，且所述第一运动置信度 C_M_A1 与第二运动置信度 C_M_A2的比值大于第二运动阈值时，确定当前帧的该块区域的运动障碍物置信度 C_M为 1 , 否则确定当前帧的该块区域的运动障碍物置信度 C_M为 0; 当上述特征障碍物置信度基于垂直特性时，所述特征障碍物置信度计算单元 503可以包括：垂直属性判断单元和特征障碍物置信度确定单元。其中，垂直属性判断单元，用于判断当前帧的某一块区域是否具有垂直属性，将判断结果通知给特征障碍物置信度确定单元；

上述第二块区域障碍物识别单元 504可以包括：第二总置信度确定单元和第二识别单元，其中，

第二总置信度确定单元，用于在当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1 的数量大于第一数量阈值，且，当前帧及与当前帧最近的之前 N帧所对应的所述某个相同块区域的特征障碍物置信度的值等于 1的数量大于第二数量阈值时，确定当前帧图像中该块区域的总置信度 C_Total为 1 ,否则确定该块区域的总置信度( _1¹(^1为 0; 第二识别单元，用于获知当前帧图像中所述某个块区域的总置信度 C_Total为 1时，确定该块区域为障碍物，否则确定该块区域为非障碍物。本发明实施例还提供了一种识别图像中障碍物的装置，参见图 6, 其与图 5所示实施例的区别是，不包括特征障碍物置信度计算单元 503, 也即，图 6 所示装置包括：图像分割单元 601、运动障碍物置信度计算单元 602、第一块区域障碍物识别单元 603和障碍物确定单元 604。其中，

图像分割单元 601 ,用于获取当前帧以及与当前帧最近的之前 N帧的图像，对所获取的每帧图像按相同方式进行划分，对于每帧图像均获得若干个划分后的块区域；

运动障碍物置信度计算单元 602, 用于计算当前帧以及与当前帧最近的之前 N帧所对应的每个块区域的运动障碍物置信度，

第一块区域障碍物识别单元 603, 用于根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；

障碍物确定单元 604, 用于根据每个块区域确定图像中的障碍物。

上述运动障碍物置信度计算单元 602与图 5中的运动障碍物置信度计算单元 502相同，包括：假想图像生成单元、第一运动置信度计算单元、第二运动置信度计算单元以及运动障碍物置信度确定单元，具体不再赘述。

上述第一块区域障碍物识别单元 603可以包括：

第一识别单元，用于获知当前帧图像中所述某个块区域的总置信度 C_Total为 1时，确定该块区域为障碍物，否则确定该块区域为非障碍物。应用本发明所提供的识别图像中障碍物的装置，与传统仅基于运动补偿的逻辑装置相比，不但采用了基于运动补偿的绝对程度的策略，还采用了基于运动补偿的相对的策略，并在此基础上进一步融合了特征分析的策略，从而在降低了误检测率的同时提高了检测的准确率，能够准确的判断出图像中的障碍物。本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以存储于计算机可读取存储介质中，这里所称得的存储介质，如： ROM/RAM、磁碟、光盘等。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims

权利要求

1、一种识别图像中障碍物的方法，其特征在于，包括：

根据每个块区域确定图像中的障碍物。

2、根据权利要求 1所述的方法，其特征在于，所述计算当前帧的每个块区域的运动障碍物置信度的步骤包括：

i )获取运动参数，生成当前帧对应之前 n-k时刻的假想图像； n >=2, k>=l ; ii )对于一个块区域，计算该块的当前帧与所述假想图像的相似程度，获得第一运动置信度 C_M_A1；

V )重复执行步骤 ii )至 iv ),直到计算出每个块区域的运动障碍物置信度。

3、根据权利要求 2所述的方法，其特征在于，所述确定当前帧图像中每个块区域是否为障碍物的步骤包括：

若当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1的数量大于第一数量阈值，则当前帧图像中该块区域的总置信度 _1¹(^1为 1 , 否则该块区域的总置信度 C_Total为 0;

4、一种识别图像中障碍物的方法，其特征在于，包括：

根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；

根据每个块区域确定图像中的障碍物。

5、根据权利要求 4所述的方法，其特征在于，所述计算当前帧的每个块区域的运动障碍物置信度的步骤包括：

i )获取运动参数，生成当前帧对应之前 n-k时刻的假想图像； n >=2, k>=l; ii )对于一个块区域，计算该块的当前帧与所述假想图像的相似程度，获得第一运动置信度 C_M_A1；

6、根据权利要求 4所述的方法，其特征在于，所述特征障碍物置信度包括基于垂直特性的特征障碍物置信度、或者基于纹理特性的特征障碍物置信度。

7、根据权利要求 6所述的方法，其特征在于，所述根据垂直特性计算当前帧的每个块区域的特征障碍物置信度的步骤包括：

8、根据权利要求 7所述的方法，其特征在于，所述判断当前帧一块区域是否具有垂直属性的步骤包括：

aOl )计算一个块区域的垂直方向的强度 /_v; 其

第列像素的灰度值， k为整数, i' j e R , 为该图像块区域， N为图像宽度， M为图像高度。

a02 )若步骤 aOl )所述垂直方向的强度 /_v大于强度阈值，则所述块区域具有垂直属性，否则所述块区域不具有垂直属性。

9、根据权利要求 7所述的方法，其特征在于，所述确定当前帧图像中每个块区域是否为障碍物的步骤包括：

若当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1的数量大于第一数量阈值，且，当前帧及与当前帧最近的之前 N帧所对应的所述某个相同块区域的特征障碍物置信度的值等于 1的数量大于第二数量阈值，则当前帧图像中该块区域的总置信度。—^^^ 为 1 , 否则该块区域的总置信度 C_Total为 0;

10、一种识别图像中障碍物的装置，其特征在于，包括：

11、根据权利要求 10所述的装置，其特征在于，所述运动障碍物置信度计算单元包括：假想图像生成单元，用于获取运动参数，生成当前帧对应之前 n-k时刻的 i想图像； n >=2, k>=l;

第二运动置信度计算单元，对于一个块区域计算当前帧与当前帧之前 n-k 时刻图像的相似程度，获得第二运动置信度 C_M_A2;

12、根据权利要求 10所述的装置，其特征在于，所述第一块区域障碍物识别单元包括：

13、一种识别图像中障碍物的装置，其特征在于，包括：

第二块区域障碍物识别单元，用于根据所述当前帧以及与当前帧最近的之前 N帧的所述每个块区域的运动障碍物置信度，和每个块区域的特征障碍物置信度，依次确定当前帧图像中每个块区域是否为障碍物；障碍物确定单元，用于根据每个块区域确定图像中的障碍物。

14、根据权利要求 13所述的装置，其特征在于，所述运动障碍物置信度计算单元包括：

假想图像生成单元，用于获取运动参数，生成当前帧对应之前 n-k时刻的 i想图像； n >=2, k>=l;

15、根据权利要求 13所述的装置，其特征在于，所述特征障碍物置信度包括基于垂直特性的特征障碍物置信度、基于垂直边缘特性的特征障碍物置信度，或者基于纹理特性的特征障碍物置信度。

16、根据权利要求 15所述的方法，其特征在于，在所述特征障碍物置信度基于垂直特性时，所述特征障碍物置信度计算单元包括：

17、根据权利要求 13所述的装置，其特征在于，所述第二块区域障碍物识别单元包括：

第二总置信度确定单元，用于在当前帧及与当前帧最近的之前 N帧所对应的某个相同块区域的运动障碍物置信度的值等于 1 的数量大于第一数量阈值，且，当前帧及与当前帧最近的之前 N帧所对应的所述某个相同块区域的特征障碍物置信度的值等于 1的数量大于第二数量阈值时，确定当前帧图像中该块区域的总置信度 C_Total为 1 ,否则确定该块区域的总置信度( _1¹(^1为 0; 第二识别单元，用于获知当前帧图像中所述某个块区域的总置信度 C_Total为 1时，确定该块区域为障碍物，否则确定该块区域为非障碍物。