CN102708370A - 一种多视角图像前景目标提取方法及装置 - Google Patents

一种多视角图像前景目标提取方法及装置 Download PDF

Info

Publication number
CN102708370A
CN102708370A CN201210155226XA CN201210155226A CN102708370A CN 102708370 A CN102708370 A CN 102708370A CN 201210155226X A CN201210155226X A CN 201210155226XA CN 201210155226 A CN201210155226 A CN 201210155226A CN 102708370 A CN102708370 A CN 102708370A
Authority
CN
China
Prior art keywords
image
image block
point
sift
foreground target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201210155226XA
Other languages
English (en)
Other versions
CN102708370B (zh
Inventor
苗振江
梁清华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jiaotong University
Original Assignee
Beijing Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jiaotong University filed Critical Beijing Jiaotong University
Priority to CN201210155226.XA priority Critical patent/CN102708370B/zh
Publication of CN102708370A publication Critical patent/CN102708370A/zh
Application granted granted Critical
Publication of CN102708370B publication Critical patent/CN102708370B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公布了一种多视角图像前景目标提取方法,包括以下步骤:步骤1:输入多视角图像集图像分块预处理;步骤2:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配;步骤3:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型;步骤4:用偏见正则切方法得到最小切的解x*,对解x*用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出。本发明还公布了一种多视角图像前景目标提取装置。本发明不需要摄像头标定步骤,只需在多视角图像集中的一张图像交互,并且能够处理大小的图像集,是一种快速简单易操作的分割方法。

Description

一种多视角图像前景目标提取方法及装置
技术领域
本发明涉及图像处理和计算机视觉技术领域,尤其涉及一种多视角图像前景目标提取方法及装置。
背景技术
前景目标提取是计算机视觉领域的热点和难点问题,用于提取图像中感兴趣的物体作为输出或作为后续操作的输入,其前景提取的准确与否,直接影响后续的操作是否成功。前景目标提取广泛应用多个领域,如三维模型重建,运动捕捉,智能监控等。
前景目标提取是将物体F从图像I中分离出来,即将I划分为前景区F和非前景区
Figure BDA00001652133400011
提取结果α要么是0,要么是1,“0”表示背景,“1”表示前景,其目的是从图像I中完整的提取出用户感兴趣的物体F。
根据处理的视角数目的不同,分为单视角前景目标提取和多视角前景目标提取。  单视角前景目标提取方法经过多年的研究,研究者们提出了许多有效的方法。最早的前景目标提取技术是背景减除法,它要求场景的背景固定且已知背景图像,利用包含前景的图像与背景图像的差获取前景。背景减除技术简单有效,计算量小,可以达到实时处理。但是它对背景有严格的要求,极大的限制了它的应用范围。
由于设备和场景的限制,我们平时拍摄的环境背景都是变化的,因此,针对自然环境的图像前景目标提取技术逐渐成为当前的研究热点。其中,交互式目标提取方法成为当前的主流技术,代表性的有Graph Cut,GrabCut,泊松方法和软分割剪刀,主动轮廓方法等。以上这些方法主要针对的是单张图像,无法直接应用到多视角图像的前景目标提取中。当然可以将多视角图像看成多个单视角图像分别进行处理,不过这样需要耗费更多的人力和时间。
多视角前景目标提取方法主要思想是根据初始分割结果重建三维模型,然后将重建的三维模型通过空间一致性投影到各个视角图像中指导分割,经过多次迭代到达前景提取的目的。另一种无需三维重建,只需要将每次分割结果与摄像机光心构成的视锥投影到其它成像平面中作为前景目标提取的一种启发信息指导前景目标提取。上述两种思想都需要已知摄像头的内外参数以及视角数目不能少于一定数目(至少4个),并要求所有的摄像头都覆盖前景,甚至要求前景目标位于所有图像的中央区域,使得前景提取的应用受到很大的限制。
发明内容
本发明解决的技术问题在于如何使得多视角图像前景目标提取快速简单易操作。
为了解决以上问题,本发明公开了一种多视角图像前景目标提取方法,包括以下步骤:
步骤1:输入多视角图像集图像分块预处理;
步骤2:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配;
步骤3:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型;
步骤4:用偏见正则切方法得到最小切的解x*,对解x*用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出。
进一步,作为一种优选,所述步骤1:输入多视角图像集图像分块预处理具体包括以下步骤:
步骤101:RGB颜色空间转成Lab颜色空间;
步骤102:计算图像的梯度图,用罗伯特交叉梯度算子在Lab颜色空间中三通道分别计算水平方向梯度gx和垂直方向梯度gy,则梯度g为: g = Σ lab g x 2 + g y 2 ;
步骤103:根据预先定义的分块个数K,计算图像分块的步长
R = N / K ;
步骤104:在图像中随机产生K个初始点,并以点的初始位置为中心的3*3窗口中找到梯度最小的点作为图像分块的中心点,则中心点集C的元素为图像分块的中心点像素坐标x,y和像素L,a,b颜色分量构成的5维向量;
步骤105:计算图像中每个像素点到每个中心点的距离D:
D ij = ( l k - l i ) 2 + ( a k - a i ) 2 + ( b k - b i ) 2 + m R ( x k - x i ) 2 + ( y k - y i ) 2 ,
其中参数m控制分块的边缘的紧缩度,l,a,b为Lab彩色空间颜色分量,x,y为像素坐标值;
步骤106:将图像中每个像素点归为距离最小的中心点所在的图像分块;
步骤107:计算每个分块相似的颜色分量l,a,b和像素坐标x,y的平均值更新中心点集C;
步骤108:重复迭代步骤105-107,直到收敛。
进一步,作为一种优选,所述步骤2:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配具体包括以下步骤:
步骤201:对多视角图像集中每幅图像进行SIFT特征点提取;
步骤202:对相邻图像进行SIFT特征点匹配,其中,采用特征点的特征向量的欧式距离作为图像中的SIFT特征点是否匹配的判断依据;
步骤203:剔除错误匹配点,计算两张相邻图像匹配点对的图像像素坐标的欧式距离di,其平均距离为
Figure BDA00001652133400041
对于D>di的匹配点对为错误匹配,予以剔除。
进一步,作为一种优选,所述步骤3:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型G(V,E,W),  其中V为顶点集,即图像分块集,E为边集,W为相似权矩阵,具体包括以下步骤:
步骤301:每个图像分块作为图的顶点,对每张图像,根据拓扑邻接关系连接相邻顶点;对于图像分块Si,Sj∈In,n=1,...,m,如果图像分块Si,Sj的中心点的欧式距离小于k1R(R定义见步骤102),k1为大于0的常数,则图像分块Si,Sj相邻,即Si∈Sj的邻接顶点集N(Sj),Sj∈Si的邻接顶点集N(Si);
步骤302:多视角图像,通过匹配的特征点连接图的顶点;对于相邻图像的匹配点对Pi∈Ii和Pj∈Ij,分别在图像Ii,Ij中以Pi,Pj为中心画大小为2R×2R的窗口Ri,Rj,那么,对于图像分块
Figure BDA00001652133400042
Figure BDA00001652133400043
位于窗口Ri,Rj内,那么图像分块Si,Sj相邻,即Si∈Sj的邻接顶点集N(Sj),Sj∈Si的邻接顶点集N(Si);
步骤303:对于每个图像分块,计算颜色直方图H的累计直方图F(n):
F ( n ) = Σ i = 1 n H ( i ) ;
步骤304:计算相似权矩阵W,边Eij的权重为:
W ij = exp ( - d ( S i , S j ) 2 / 2 δ 2 ) S j ∈ N ( S j ) 0 Others
其中,d(Si,Sj)d(Si,Sj)为两个图像分块的相似距离
d ( S i , S j ) = 1 2 Σ n ( F i ( n ) - F j ( n ) ) 2 F i ( n ) + F j ( n ) ;
步骤305:计算对角矩阵D,矩阵D的元素计算公式如下:
D ij = Σ k W ik i = j 0 i ≠ j .
进一步,作为一种优选,所述步骤4:用偏见正则切方法得到最小切的解x*,对解x*用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出;具体包括以下步骤:
步骤401:计算拉普拉斯矩阵
Figure BDA00001652133400055
的最小K个特征值λ12,...,λk及其对应的特征向量μ12,...,μk
步骤402:根据手工输入的种子点集T构造偏向向量sT,偏向向量sT维数与拉普拉斯矩阵特征向量维数相同。偏向向量sT对应于种子点集T所标记的顶点的元素置为1,其它为0;
步骤403:计算偏向最小切x*,计算公式如下
x * = Σ i = 2 k 1 λ i - γ μ i μ i T D s T
其中γ为最小K个特征值λ12,...,λk的平均值;
步骤404:对x*进行归一化操作,使其值位于【0,255】之间;步骤405:利用大律法自适应确定二值化阈值参数,对x*二值化化操作,输出分割结果图像。
进一步,作为一种优选,所述手工输入的种子点集T为手动输入的一系列点。
进一步,作为一种优选,所述手工输入的种子点集T为手动输入的一系列曲线。
进一步,作为一种优选,所述手工输入的种子点集T为手动输入的像素属于前景的概率组成的概率图。
本发明还公开了一种多视角图像前景目标提取装置,包括:
图像分块预处理模块:输入多视角图像集图像分块预处理;
特征点匹配模块:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配;
图模型的表示和建立模块:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型;
多视角图像前景提取计算模块:用偏见正则切方法得到最小切的解,对解用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出;
以上模块顺序连接。
由于采用以上步骤,本发明与已有方法相比,具有无需摄像头标定步骤,使得多视角图像前景提取操作更简单等优点。
附图说明
当结合附图考虑时,通过参照下面的详细描述,能够更完整更好地理解本发明以及容易得知其中许多伴随的优点,但此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定,其中:
图1是本发明方法的算法流程图;
图2是本发明装置的框图。
具体实施方式
以下参照图1、2对本发明的实施例进行说明。
为使上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
如图1所示,一种多视角图像前景目标提取方法,包括以下步骤:S1、步骤1:输入多视角图像集图像分块预处理;针对图像的像素点处理,数据量大导致图的计算复杂度和空间复杂度大的问题,采用图像分块预处理将邻域里颜色相似的像素点聚成一个图像分块,用图像分块代替图像像素点,大大提高了图像分割的速度。具体的步骤如下:
步骤101:RGB颜色空间转成Lab颜色空间;
步骤102:计算图像的梯度图,用罗伯特交叉梯度算子在Lab颜色空间中三通道分别计算水平方向梯度gx和垂直方向梯度gy,则梯度g为:
g = Σ lab g x 2 + g y 2 ;
步骤103:根据预先定义的分块个数K,计算图像分块的步长
R = N / K ;
步骤104:在图像中随机产生K个初始点,并以点的初始位置为中心的3*3窗口中找到梯度最小的点作为图像分块的中心点,则中心点集C的元素为图像分块的中心点像素坐标x,y和像素L,a,b颜色分量构成的5维向量;
步骤105:计算图像中每个像素点到每个中心点的距离D: D ij = ( l k - l i ) 2 + ( a k - a i ) 2 + ( b k - b i ) 2 + m R ( x k - x i ) 2 + ( y k - y i ) 2 , 其中参数m控制分块的边缘的紧缩度,l,a,b为Lab彩色空间颜色分量,x,y为像素坐标值;
步骤106:将图像中每个像素点归为距离最小的中心点所在的图像分块;
步骤107:计算每个分块相似的颜色分量l,a,b和像素坐标x,y的平均值更新中心点集C;
步骤108:重复迭代步骤105-107,直到收敛。
S2、步骤2:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配;对输入图像进行尺度不变特征SIFT特征点提取及多视角图像间的特征点的匹配,得到图像中对于同一个三维点的SIFT特征点的像素坐标。当然本领域普通人员还能够采用别的特征点提取(如:Surf,Orb等)和匹配方法等这些修改或变化包含在本发明的包含范围之内。
步骤201:对多视角图像集中每幅图像进行SIFT特征点提取;
步骤202:对相邻图像进行SIFT特征点匹配,其中,采用特征点的特征向量的欧式距离作为图像中的SIFT特征点是否匹配的判断依据;
步骤203:SIFT算子初次匹配存在错误匹配,常用的随机抽样一致(RANSAC)剔除错误匹配特征点效果更佳,然而RANCAC算法随机采用多次迭代,计算时间长。本发明中对正确匹配的点数要求不高,所以采用更简单的计算方法。基于匹配特征点的几何拓扑,计算两张相邻图像匹配点对的图像像素坐标的欧式距离di,其平均距离为对于D>di的匹配点对为错误匹配,予以剔除。
S3、步骤3:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型;图模型的表示和建立模块:本发明将多视角图像的图像分块连接成一个图G(V,E,W),其中V为顶点集,即图像分块集,E为边集,W为相似权矩阵。具体的步骤如下:
步骤301:每个图像分块作为图的顶点,对每张图像,根据拓扑邻接关系连接相邻顶点;对于图像分块Si,Sj∈In,n=1,...,m,如果图像分块Si,Sj的中心点的欧式距离小于k1R(R定义见步骤102),k1为大于0的常数,则图像分块Si,Sj相邻,即Si∈Sj的邻接顶点集N(Sj),Sj∈Si的邻接顶点集N(Si)。当然本领域普通人员还能够对图像分块的距离阈值根据具体应用做出修改或变化也包含在本发明的包含范围之内。
步骤302:多视角图像,通过匹配的特征点连接图的顶点;对于相邻图像的匹配点对Pi∈Ii和Pj∈Ij,分别在图像Ii,Ij中以Pi,Pj为中心画大小为2R×2R的窗口Ri,Rj,那么,对于图像分块
Figure BDA00001652133400092
Figure BDA00001652133400093
位于窗口Ri,Rj内,那么图像分块Si,Sj相邻,即Si∈Sj的邻接顶点集N(Sj),Sj∈Si的邻接顶点集N(Si)。当然本领域普通人员还能够对匹配点为中心的窗口大小根据具体应用做出修改或变化也包含在本发明的包含范围之内。
步骤303:对于每个图像分块,计算颜色直方图H的累计直方图F(n):
F ( n ) = Σ i = 1 n H ( i ) ;
步骤304:计算相似权矩阵W。边Eij的权重为:
W ij = exp ( - d ( S i , S j ) 2 / 2 δ 2 ) S j ∈ N ( S j ) 0 Others
其中,d(Si,Sj)d(Si,Sj)为两个图像分块的相似距离
d ( S i , S j ) = 1 2 Σ n ( F i ( n ) - F j ( n ) ) 2 F i ( n ) + F j ( n ) ;
步骤305:计算对角矩阵D,矩阵D的元素计算公式如下:
D ij = Σ k W ik i = j 0 i ≠ j .
S4、步骤4:用偏见正则切方法得到最小切的解x*,对解x*用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出。具体步骤如下:
步骤401:计算拉普拉斯矩阵
Figure BDA00001652133400105
的最小K个特征值λ12,...,λk及对应的特征向量μ12,...,μk
步骤402:根据S5手工输入的种子点集T构造偏向向量sT,偏向向量sT维数与拉普拉斯矩阵特征向量维数相同。偏向向量sT对应于种子点集T所标记的顶点的元素置为1,其它为0;种子点集T可以是手动输入的一系列点,也可以是曲线,甚至像素属于前景的概率组成的概率图,对于这些修改和改变也包含在本发明的包含范围之内。
步骤403.计算偏向最小切x*,计算公式如下
x * = Σ i = 2 k 1 λ i - γ μ i μ i T D s T
其中γ为最小K个特征值λ12,...,λk的平均值;
步骤404.对x*进行归一化操作,使其值位于【0,255】之间;
步骤405.利用大律法自适应确定二值化阈值参数,对x*二值化化操作,输出分割结果图像。
如图2所示,一种多视角图像前景目标提取装置,包括:
图像分块预处理模块1:输入多视角图像集图像分块预处理;
特征点匹配模块2:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配;
图模型的表示和建立模块3:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型;
多视角图像前景提取计算模块4:用偏见正则切方法得到最小切的解,对解用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出;
以上模块顺序连接
如上所述,对本发明的实施例进行了详细地说明,但是只要实质上没有脱离本发明的发明点及效果可以有很多的变形,这对本领域的技术人员来说是显而易见的。因此,这样的变形例也全部包含在本发明的保护范围之内。

Claims (9)

1.一种多视角图像前景目标提取方法,其特征在于,包括以下步骤:
步骤1:输入多视角图像集图像分块预处理;
步骤2:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配;
步骤3:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型;
步骤4:用偏见正则切方法得到最小切的解x*,对解x*用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出。
2.根据权利要求1所述的一种多视角图像前景目标提取方法,其特征在于,所述步骤1:输入多视角图像集图像分块预处理具体包括以下步骤:
步骤101:RGB颜色空间转成Lab颜色空间;
步骤102:计算图像的梯度图,用罗伯特交叉梯度算子在Lab颜色空间中三通道分别计算水平方向梯度gx和垂直方向梯度gy,则梯度g为: g = Σ lab g x 2 + g y 2 ;
步骤103:根据预先定义的分块个数K,计算图像分块的步长
R = N / K ;
步骤104:在图像中随机产生K个初始点,并以点的初始位置为中心的3*3窗口中找到梯度最小的点作为图像分块的中心点,则中心点集C的元素为图像分块的中心点像素坐标x,y和像素L,a,b颜色分量构成的5维向量;
步骤105:计算图像中每个像素点到每个中心点的距离D:
D ij = ( l k - l i ) 2 + ( a k - a i ) 2 + ( b k - b i ) 2 + m R ( x k - x i ) 2 + ( y k - y i ) 2 ,
其中参数m控制分块的边缘的紧缩度,l,a,b为Lab彩色空间颜色分量,x,y为像素坐标值;
步骤106:将图像中每个像素点归为距离最小的中心点所在的图像分块;
步骤107:计算每个分块相似的颜色分量l,a,b和像素坐标x,y的平均值更新中心点集C;
步骤108:重复迭代步骤105-107,直到收敛。
3.根据权利要求书1所述的一种多视角图像前景目标提取方法,其特征在于,所述步骤2:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配具体包括以下步骤:
步骤201:对多视角图像集中每幅图像进行SIFT特征点提取;
步骤202:对相邻图像进行SIFT特征点匹配,其中,采用特征点的特征向量的欧式距离作为图像中的SIFT特征点是否匹配的判断依据;
步骤203:剔除错误匹配点,计算两张相邻图像匹配点对的图像像素坐标的欧式距离di,其平均距离为
Figure FDA00001652133300021
对于D>di的匹配点对为错误匹配,予以剔除。
4.根据权利要求书1所述的一种多视角图像前景目标提取方法,其特征在于,所述步骤3:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型G(V,E,W),其中V为顶点集,即图像分块集,E为边集,W为相似权矩阵,具体包括以下步骤:
步骤301:每个图像分块作为图的顶点,对每张图像,根据拓扑邻接关系连接相邻顶点;对于图像分块Si,Sj∈In,n=1,...,m,如果图像分块Si,Sj的中心点的欧式距离小于k1R(R定义见步骤102),k1为大于0的常数,则图像分块Si,Sj相邻,即Si∈Sj的邻接顶点集N(Sj),Sj∈Si的邻接顶点集N(Si);
步骤302:多视角图像,通过匹配的特征点连接图的顶点;对于相邻图像的匹配点对Pi∈Ii和Pj∈Ij,分别在图像Ii,Ij中以Pi,Pj为中心画大小为2R×2R的窗口Ri,Rj,那么,对于图像分块
Figure FDA00001652133300031
位于窗口Ri,Rj内,那么图像分块Si,Sj相邻,即Si∈Sj的邻接顶点集N(Sj),Sj∈Si的邻接顶点集N(Si);
步骤303:对于每个图像分块,计算颜色直方图H的累计直方图F(n): F ( n ) = Σ i = 1 n H ( i ) ;
步骤304:计算相似权矩阵W,边Eij的权重为:
W ij = exp ( - d ( S i , S j ) 2 / 2 δ 2 ) S j ∈ N ( S j ) 0 Others
其中,d(Si,Sj)d(Si,Sj)为两个图像分块的相似距离
d ( S i , S j ) = 1 2 Σ n ( F i ( n ) - F j ( n ) ) 2 F i ( n ) + F j ( n ) ;
步骤305:计算对角矩阵D,矩阵D的元素计算公式如下:
D ij = Σ k W ik i = j 0 i ≠ j .
5.根据权利要求书1所述的一种多视角图像前景目标提取方法,其特征在于,所述步骤4:用偏见正则切方法得到最小切的解x*,对解x*用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出;具体包括以下步骤:
步骤401:计算拉普拉斯矩阵
Figure FDA00001652133300037
的最小K个特征值λ12,...,λk及其对应的特征向量μ12,...,μk
步骤402:根据手工输入的种子点集T构造偏向向量sT,偏向向量sT维数与拉普拉斯矩阵特征向量维数相同。偏向向量sT对应于种子点集T所标记的顶点的元素置为1,其它为0;
步骤403:计算偏向最小切x*,计算公式如下
x * = Σ i = 2 k 1 λ i - γ μ i μ i T D s T
其中γ为最小K个特征值λ12,...,λk的平均值;
步骤404:对x*进行归一化操作,使其值位于【0,255】之间;
步骤405:利用大律法自适应确定二值化阈值参数,对x*二值化化操作,输出分割结果图像。
6.根据权利要求书5所述的一种多视角图像前景目标提取方法,其特征在于,所述手工输入的种子点集T为手动输入的一系列点。
7.根据权利要求书5所述的一种多视角图像前景目标提取方法,其特征在于,所述手工输入的种子点集T为手动输入的一系列曲线。
8.根据权利要求书5所述的一种多视角图像前景目标提取方法,其特征在于,所述手工输入的种子点集T为手动输入的像素属于前景的概率组成的概率图。
9.一种多视角图像前景目标提取装置,其特征在于,包括:
图像分块预处理模块:输入多视角图像集图像分块预处理;
特征点匹配模块:对每幅图像进行尺度不变特征SIFT特征点的提取,并对相邻视角的图像进行SIFT特征点匹配;
图模型的表示和建立模块:根据图像分块的拓扑邻接结构和图像间SIFT匹配特征点构建图模型;
多视角图像前景提取计算模块:用偏见正则切方法得到最小切的解,对解用大律法计算二值化阈值进行自适应二值化操作,其结果作为图像分割的结果输出;
以上模块顺序连接。
CN201210155226.XA 2012-05-17 2012-05-17 一种多视角图像前景目标提取方法及装置 Expired - Fee Related CN102708370B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210155226.XA CN102708370B (zh) 2012-05-17 2012-05-17 一种多视角图像前景目标提取方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210155226.XA CN102708370B (zh) 2012-05-17 2012-05-17 一种多视角图像前景目标提取方法及装置

Publications (2)

Publication Number Publication Date
CN102708370A true CN102708370A (zh) 2012-10-03
CN102708370B CN102708370B (zh) 2015-04-15

Family

ID=46901113

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210155226.XA Expired - Fee Related CN102708370B (zh) 2012-05-17 2012-05-17 一种多视角图像前景目标提取方法及装置

Country Status (1)

Country Link
CN (1) CN102708370B (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103617431A (zh) * 2013-11-05 2014-03-05 北京工业大学 基于最大位平均熵的sift描述子二值化及相似度匹配方法
CN103700105A (zh) * 2013-12-24 2014-04-02 中国科学院自动化研究所 一种用于深度图计算的最优邻域图像组选择方法
CN104036245A (zh) * 2014-06-10 2014-09-10 电子科技大学 一种基于在线特征点匹配的生物特征识别方法
CN104504708A (zh) * 2014-12-26 2015-04-08 大连理工大学 一种基于毗邻图像特征点集的dsa脑血管图像自动分割方法
CN104537659A (zh) * 2014-12-23 2015-04-22 金鹏电子信息机器有限公司 双摄像机的自动标定方法和系统
CN105447451A (zh) * 2015-11-13 2016-03-30 东方网力科技股份有限公司 一种检索物体标志物的方法及设备
CN105590115A (zh) * 2015-12-18 2016-05-18 北京畅景立达软件技术有限公司 视角不变的人体特征表示方法
CN104282022B (zh) * 2014-09-29 2017-02-08 江南大学 一种具备多视角学习能力的模糊聚类图像分割方法
CN106770362A (zh) * 2016-12-27 2017-05-31 武汉精测电子技术股份有限公司 基于aoi的宏观缺陷检测装置及方法
CN106778767A (zh) * 2016-11-15 2017-05-31 电子科技大学 基于orb和主动视觉的视觉图像特征提取及匹配方法
CN106778890A (zh) * 2016-12-28 2017-05-31 南京师范大学 基于sift匹配的云台相机姿态变化检测方法
WO2017181892A1 (zh) * 2016-04-19 2017-10-26 中兴通讯股份有限公司 前景分割方法及装置
CN108292425A (zh) * 2015-12-04 2018-07-17 电子湾有限公司 自动引导的图像捕获和展示
CN108596191A (zh) * 2018-04-23 2018-09-28 福建师范大学 一种用于具有弱边缘的单一目标提取方法
CN108665447A (zh) * 2018-04-20 2018-10-16 浙江大学 一种基于眼底照相深度学习的青光眼图像检测方法
CN111461196A (zh) * 2020-03-27 2020-07-28 上海大学 基于结构特征的快速鲁棒图像识别跟踪方法和装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101144716A (zh) * 2007-10-15 2008-03-19 清华大学 一种多视角运动目标检测、定位与对应方法
CN102426705A (zh) * 2011-09-30 2012-04-25 北京航空航天大学 一种视频场景行为拼接方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101144716A (zh) * 2007-10-15 2008-03-19 清华大学 一种多视角运动目标检测、定位与对应方法
CN102426705A (zh) * 2011-09-30 2012-04-25 北京航空航天大学 一种视频场景行为拼接方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
刘桢宏: "多视角图像配准方法研究", 《中国优秀硕士学位论文全文数据库》 *
梁清华等: "Object Segmentation in Multiple Views without Camera Calibration", 《21ST INTERNATIONAL CONFERENCE ON PATTERN RECOGNITION》 *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103617431A (zh) * 2013-11-05 2014-03-05 北京工业大学 基于最大位平均熵的sift描述子二值化及相似度匹配方法
CN103617431B (zh) * 2013-11-05 2017-01-18 北京工业大学 基于最大位平均熵的sift描述子二值化及相似度匹配方法
CN103700105A (zh) * 2013-12-24 2014-04-02 中国科学院自动化研究所 一种用于深度图计算的最优邻域图像组选择方法
CN104036245A (zh) * 2014-06-10 2014-09-10 电子科技大学 一种基于在线特征点匹配的生物特征识别方法
CN104036245B (zh) * 2014-06-10 2018-04-06 电子科技大学 一种基于在线特征点匹配的生物特征识别方法
CN104282022B (zh) * 2014-09-29 2017-02-08 江南大学 一种具备多视角学习能力的模糊聚类图像分割方法
CN104537659A (zh) * 2014-12-23 2015-04-22 金鹏电子信息机器有限公司 双摄像机的自动标定方法和系统
CN104537659B (zh) * 2014-12-23 2017-10-27 金鹏电子信息机器有限公司 双摄像机的自动标定方法和系统
CN104504708A (zh) * 2014-12-26 2015-04-08 大连理工大学 一种基于毗邻图像特征点集的dsa脑血管图像自动分割方法
CN104504708B (zh) * 2014-12-26 2017-02-22 大连理工大学 一种基于毗邻图像特征点集的dsa脑血管图像自动分割方法
CN105447451A (zh) * 2015-11-13 2016-03-30 东方网力科技股份有限公司 一种检索物体标志物的方法及设备
CN108292425A (zh) * 2015-12-04 2018-07-17 电子湾有限公司 自动引导的图像捕获和展示
US11966995B2 (en) 2015-12-04 2024-04-23 Ebay Inc. Automatic guided image capturing and presentation of images
CN108292425B (zh) * 2015-12-04 2022-08-09 电子湾有限公司 自动引导的图像捕获和展示
US11258944B2 (en) 2015-12-04 2022-02-22 Ebay Inc. Automatic guided capturing and presentation of images
CN105590115A (zh) * 2015-12-18 2016-05-18 北京畅景立达软件技术有限公司 视角不变的人体特征表示方法
WO2017181892A1 (zh) * 2016-04-19 2017-10-26 中兴通讯股份有限公司 前景分割方法及装置
CN106778767A (zh) * 2016-11-15 2017-05-31 电子科技大学 基于orb和主动视觉的视觉图像特征提取及匹配方法
CN106778767B (zh) * 2016-11-15 2020-08-11 电子科技大学 基于orb和主动视觉的视觉图像特征提取及匹配方法
CN106770362A (zh) * 2016-12-27 2017-05-31 武汉精测电子技术股份有限公司 基于aoi的宏观缺陷检测装置及方法
CN106770362B (zh) * 2016-12-27 2019-12-31 武汉精测电子集团股份有限公司 基于aoi的宏观缺陷检测装置及方法
CN106778890A (zh) * 2016-12-28 2017-05-31 南京师范大学 基于sift匹配的云台相机姿态变化检测方法
CN108665447A (zh) * 2018-04-20 2018-10-16 浙江大学 一种基于眼底照相深度学习的青光眼图像检测方法
CN108596191B (zh) * 2018-04-23 2021-06-29 福建师范大学 一种用于具有弱边缘的单一目标提取方法
CN108596191A (zh) * 2018-04-23 2018-09-28 福建师范大学 一种用于具有弱边缘的单一目标提取方法
CN111461196A (zh) * 2020-03-27 2020-07-28 上海大学 基于结构特征的快速鲁棒图像识别跟踪方法和装置
CN111461196B (zh) * 2020-03-27 2023-07-21 上海大学 基于结构特征的快速鲁棒图像识别跟踪方法和装置

Also Published As

Publication number Publication date
CN102708370B (zh) 2015-04-15

Similar Documents

Publication Publication Date Title
CN102708370B (zh) 一种多视角图像前景目标提取方法及装置
CN109784333B (zh) 基于点云带权通道特征的三维目标检测方法及系统
CN108573276B (zh) 一种基于高分辨率遥感影像的变化检测方法
CN104599275B (zh) 基于概率图模型的非参数化的rgb-d场景理解方法
CN101901343B (zh) 基于立体约束的遥感影像道路提取方法
CN112862792B (zh) 一种用于小样本图像数据集的小麦白粉病孢子分割方法
CN114724120B (zh) 基于雷视语义分割自适应融合的车辆目标检测方法及系统
CN111899172A (zh) 一种面向遥感应用场景的车辆目标检测方法
CN106909902B (zh) 一种基于改进的层次化显著模型的遥感目标检测方法
WO2015010451A1 (zh) 一种从单幅图像检测道路的方法
CN104574375A (zh) 结合彩色和深度信息的图像显著性检测方法
CN110309842B (zh) 基于卷积神经网络的物体检测方法及装置
CN107749052A (zh) 基于深度学习神经网络的图像去雾方法及系统
CN105528595A (zh) 在无人机航拍图像中对输电线路绝缘子的识别定位方法
CN104881681A (zh) 基于混合图模型的图像序列类别标注方法
CN104392241A (zh) 一种基于混合回归的头部姿态估计方法
CN110675422B (zh) 一种基于广义非凸鲁棒主成分分析的视频前背景分离方法
CN103268482B (zh) 一种低复杂度的手势提取和手势深度获取方法
CN110111346B (zh) 基于视差信息的遥感图像语义分割方法
CN106780450A (zh) 一种基于低秩多尺度融合的图像显著性检测方法
CN110909724A (zh) 一种多目标图像的缩略图生成方法
CN110197206A (zh) 图像处理的方法及装置
CN104966054A (zh) 无人机可见光图像中的弱小目标检测方法
CN115018999A (zh) 一种多机器人协作的稠密点云地图构建方法及装置
CN106909881A (zh) 基于无人机遥感影像提取玉米育种基地垄数的方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150415

Termination date: 20160517