CN106600592A - 一种基于连续帧图像拼接的轨道长弦测量方法 - Google Patents
一种基于连续帧图像拼接的轨道长弦测量方法 Download PDFInfo
- Publication number
- CN106600592A CN106600592A CN201611155320.XA CN201611155320A CN106600592A CN 106600592 A CN106600592 A CN 106600592A CN 201611155320 A CN201611155320 A CN 201611155320A CN 106600592 A CN106600592 A CN 106600592A
- Authority
- CN
- China
- Prior art keywords
- image
- distortion
- track
- point
- delta
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000691 measurement method Methods 0.000 title abstract 2
- 238000000034 method Methods 0.000 claims abstract description 45
- 238000005259 measurement Methods 0.000 claims abstract description 24
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims abstract description 11
- 238000012545 processing Methods 0.000 claims abstract description 6
- 230000009466 transformation Effects 0.000 claims abstract 3
- 238000012937 correction Methods 0.000 claims description 9
- 238000009499 grossing Methods 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 4
- 238000006073 displacement reaction Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims 1
- 238000012360 testing method Methods 0.000 claims 1
- 238000000844 transformation Methods 0.000 claims 1
- 238000009825 accumulation Methods 0.000 abstract description 5
- 238000005516 engineering process Methods 0.000 abstract description 3
- 239000000463 material Substances 0.000 abstract description 2
- 238000007781 pre-processing Methods 0.000 abstract 1
- 241000219739 Lens Species 0.000 description 12
- 210000000695 crystalline len Anatomy 0.000 description 12
- 238000010586 diagram Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种基于连续帧图像拼接的轨道长弦测量方法,首先对图像进行预处理,采用基于直线特征的方法结合最小二乘平差法消除相机镜头影响最大的径向畸变,CCD相机的偏心畸变及薄透畸变影响可以忽略不计;然后采用基于灭点的理论对图像进行校正最后,对校正后的图片进行特征点提取,图像仿射变换,图像融合,提取拼接后长图的轨道内边缘,结合其坐标计算任意弦长轨道轨向。该方法可以高效,准确,稳定的测量轨道轨向,所投资人力物力少,成本低,有效的解决了目前常用方法测量长弦轨向中的误差积累问题,大幅度提高长距离轨向测量精度,随着相机和数字图像处理技术的不断完善,测量精度可以不断的得到提高。
Description
技术领域
本发明涉及一种基于连续帧图像拼接的轨道长弦测量方法。
背景技术
随着我国高速铁路的快速发展,列车运行速度越来越快,这对轨道平顺性的要求也不断提高。然而,受到铁路修建、地理环境以及列车运行等因素的影响,轨道的平顺性并不能一直保持在预期的要求范围内,这会严重影响列车的安全运行,因此,需对轨道平顺性进行检测,及时发现故障进行处理,保证列车的安全运行。
因此,确保轨道有良好的平顺性是十分必要的,轨向的测量是轨道平顺性检测的一个重要指标。目前轨向测量的方法主要有常规法和弦测法,常规法测量中需要人为的拉一根长弦进行测量,这样效率低且工作量大;弦测法目前应用最为广泛的,通过轨检仪测得一短弦的轨向不平顺,再将所得值转换成长弦的轨向不平顺,即“以小推大”。这种测量方法在长弦的测量中,若短弦存在误差,则在长弦的推算中这个误差就会一直积累,在20m或更长的弦测量中,其误差积累效果变得很明显,测量偏差较大,不能满足检测要求。因此,一种高效、自动、智能的轨向平顺性检测方法成为必要。
发明内容
鉴于上述轨检仪在长弦测量上存在的问题,本文提出了一种基于连续帧图像拼接的轨道长弦测量方法,利用数字图像处理和数字摄影测量技术分析相机拍摄的轨道图片,很好的解决目前长弦测量的误差累积问题,提高了长弦测量精度,高效、自动、智能的完成检测任务。
本发明的技术方案主要通过如下步骤实现:
一种基于连续帧图像拼接的轨道长弦测量方法,包括以下步骤:
步骤1,采集连续多帧拍摄的轨道近景影像,根据图像拼接的精度和序列图像的重叠度的关系,取图像合适重叠度值,使图像拼接对轨向的误差影像最小,然后根据重叠度求出两幅图像之间的间隔,进而从原序列图像中抽取出用于拼接的新的序列图像;
步骤2,对所提取的新的序列图像进行消除拍摄设备镜头畸变影响的矫正处理;
步骤3,对步骤2得到的矫正后的图像再进行几何矫正处理,以将倾斜视角图像转变为俯视角度图像;
步骤4,将步骤3得到的俯视角度图像进行图像拼接,形成一幅铁路轨道长图;
步骤5,对步骤4所得到的铁路轨道图像使用边缘检测的方法,提取轨道图像的边缘图像;
步骤6,对步骤5得到的边缘图像进行滤波处理,降低图像中的噪声干扰,消除横向之间连接的边缘,剔除像素个数小于设定阈值的边缘线段,拟合出轨道内边缘;
步骤7,利用步骤6所得到的轨道内边缘图像结合坐标解算,得到任意弦长的铁路轨道轨向测量。
所述的方法,所述的步骤1中,连续多帧拍摄的轨道近景影像,是通过在轨道上设置相应摄像设备,并沿轨道移动进行动态拍摄所得到的。
所述的方法,所述的步骤1中,根据图像拼接的精度和序列图像的重叠度的关系,取图像合适重叠度值的步骤包括:
根据图像拼接的精度a和序列图像的重叠度c的关系a=f(c),整个的拼接共有条接缝,其中La表示要拼接图像的总长度,Lc为重叠区域长度,L为一幅图像的长度;取每条接缝取处的误差为Xi(i=1,2,…,m)在(-a,a)内服从均匀分布,拼接图像的整体误差通过计算整体误差的期望值E(Y)的最小值,确定最佳图像重叠度值,其中a取0.2mm。
所述的方法,所述的步骤1中,根据重叠度求出两幅图像之间的间隔,是通过以下公式计算:
其中c为重叠度,L0为用于拼接的两幅图像之间的间隔,L为拍摄到的轨道图像的长度。
所述的方法,所述的步骤1中,从原序列图像中抽取出用于拼接的新的序列图像的步骤包括:
根据重叠度求出两幅图像之间的间隔L0=L-cL,每隔张图像抽取一张作为新的图像序列,其中N为原图像序列总张数,c为重叠度,L为拍摄到的轨道图像的长度,La表示要拼接图像的总长度。
所述的方法,所述的步骤2中,进行消除拍摄设备镜头畸变影响的矫正处理包括以下步骤:
镜头径向畸变表达式为:
其中(Δx,Δy)为径向畸变差,(x,y)为畸变图像中的点坐标,(x0,y0)为畸变中心坐标,k1,k2,k3为畸变系数,r为畸变半径,
其中,位移S是由镜头的径向畸变引起的,(xA,yA),(xB,yB),(xC,yC),
(xD′,yD′)分别为A,B,C,D的坐标,SAB为AB之间的距离,(ΔxA,ΔyA),(ΔxB,ΔyB),(ΔxC′,ΔyC′)分别为A,B,C′处的径向畸变差,
令S=0,通过以上两个公式,以最小二乘平差计算径向畸变系数k1,然后通过误差评价函数得到最优畸变系数纠正畸变图像。
所述的方法,所述的步骤3中,对图像再进行几何矫正处理的步骤包括:
水平像片与倾斜像片相应像点之间的坐标关系表达式为:
其中,a,a0分别代表地面点A在倾斜像片P、水平像片P0上的构象,令a点在像平面坐标系o~xy中的坐标为x,y,a0点在像空间坐标系S~x0y0z0中的坐标为x0、y0、z0=-f,a1、a2、a3、b1、b2、b3、c1、c2、c3是外方位角元素ω、κ的三角函数,f为焦距,然后利用灭点对步骤2得到的轨道图像进行检校,获取外方位角元素,然后进行图像纠正。
所述的方法,所述的步骤4中,进行图像拼接的步骤包括:
1)利用Harris算法提取两幅待拼接图像的特征点:
R=det(A)-k·tr2(A)
其中
W是高斯平滑窗口,k为经验值,当R大于给定阈值T时,即为特征点。
2)利用特征点附近的灰度信息建立初始匹配对,由步骤2提取两幅图像的特征点集X=(X1,X2,…,Xm)和Y=(Y1,Y2,…,Yn),其中X1=(x11,y11),Y1=(x21,y21),定义Xi,Yj的相似性度量函数为
其中,μ,δ为两幅图像f1,f2在特征点附近的局部均值和方差。当Xi,Yj之间的相似性度量函数满足下面两个条件时,则认为它们为匹配同名点对:
条件一:Cf1,f2(Xl,Yk)=max(Cf1,f2(Xi,Yj))
条件二:Cf1,f2(Xl,Yk)>Tt
其中Tt为经验参数,取0.5<Tt<1;
3)利用正确匹配点对间距离的相对固定来进行优化,消除伪匹配点对,获得精确匹配结果;
4)判断正确匹配点对是否大于3,若大于则进行下一步,否则返回第1步改变阈值T和经验参数Tt重新执行;
5)根据获得的精确匹配点对,确定两幅图像之间的仿射变换模型,将待拼接图像映射到基准图像空间中,设图像的特征点坐标集{(xi,yj)}配准后坐标集{(xi′,yj′)},建立仿射变换模型:
式中a11=kcosθ,a21=-a12,a12=ksinθ,a22=a11,a13=a11x0+a12y0,a23=a11y0-a12x0,k为比例缩放因子,θ为旋转角度,x0,y0为平移量,将特征点对代入求得两幅图像仿射变换的各参数后将待配准图像映射到基准图像空间;
6)采用重叠区域线性平滑函数消除拼接图像上的接缝:在重叠区域区平滑因子α=1-i/n(0<α<1),重叠区域内点j在两幅图像中的像素值为别为Aj和Bj,i为点j距离重叠区域左边边界的距离,n为重叠区的宽度,则拼接后的新图像j点像素为
Xj=αAj+(1-α)Bj。
本发明的技术效果在于,可以高效,准确,稳定的测量轨道轨向,所投资人力物力少,成本低,有效的解决了目前常用方法测量长弦轨向中的误差积累问题,大幅度提高长距离轨向测量精度,随着相机和数字图像处理技术的不断完善,测量精度可以不断的得到提高。
下面结合附图和具体实施方式对本发明作进一步的详细说明。
附图说明
图1是本发明的流程示意图;
图2是本发明的相机在轨道方向倾斜拍摄方式示意图;
图3是本发明的基于直线特征的畸变差纠正原理图;
图4是本发明的轨道图像几何校正模型;
图5是本发明的相邻两幅轨道图像拼接的算法流程图。
具体实施方式
本方法的具体步骤如下:
1.通过推行移动小车采集到一系列连续帧的轨道近景影像,相机的拍摄方式如图2所示,S为平视时的相机镜头,S′是与水平面成一倾斜角度α,这样能清晰拍到的距离L′比平视拍摄得到的清晰距离L长,这样得到的图像视野范围广,减少了拼接次数,系统处理量减小,提高系统的运算速度。得到轨道图片序列之后,确定重叠度c,根据图像拼接的精度和图像序列的重叠度的关系,取图像合适重叠度值,一般在0.4~0.7之间,使图像拼接对轨向的误差影像最小。重叠度c确定之后由公式1,可以求出用于拼接的两幅图像之间的间隔L0,重叠度和根据需要降低,从原图像序列中每隔n张图像抽取一张作为新的图像序列。
2.对步骤1得到新的图像序列进行处理,对于相机,由于各种误差的存在,并不是一个理想的透视模型,其中最重要的影响是镜头的畸变差,主要的镜头误差有三种:径向畸变、偏心畸变和薄透镜畸变。由于镜头镜头畸变中主要影响因素是径向畸变,,数字图像处理中只考虑镜头的径向畸变,其数学模型可表示为:
式中:(Δx,Δy)为径向畸变差,(x,y)为畸变图像中的点坐标,(x0,y0)为畸变中心坐标,k1,k2,k3为畸变系数,r为畸变半径,r2=(x-x0)2+(y-y0)2。
只需取径向畸变公式中第一项作为畸变主要部分,将径向畸变k1作为主要畸变参数纠正。
由于镜头畸变的影响,物方的直线在影像上的投影发生弯曲,将原直线二分后如图3所示,位移s可近似认为是由镜头的径向畸变引起的,
式中(xA,yA),(xB,yB),(xC,yC),(xC′,yC′)分别为A,B,C,D的坐标,SAB为AB之间的距离,(ΔxA,ΔyA),(ΔxB,ΔyB),(ΔxC′,ΔyC′)分别为A,B,C′处的径向畸变差。
对A,B,C三点进行畸变纠正,即令s=0,结合公式1和公式3以及最小二乘平差方法可解算出径向畸变系数k1。然后通过误差评价函数得到最优畸变系数纠正畸变图像。
3.对步骤2得到的轨道图像进行几何矫正,由于采用的拍摄方式是倾斜拍摄(与水平面成α角),得到的图片会产生梯形失真,桶形失真等几何畸变,需要对轨道图像进行几何校正,把倾斜的图像转变成类似正上方拍摄的水平图像,几何校正模型如图4所示,a,a0分别代表地面点A在倾斜像片P、水平像片P0上的构象。f为焦距,假设a点在像平面坐标系o~xy标x,y;a0点在像空间坐标系S~x0y0z0中的坐标为x0、y0、z0=-f。则可以导出水平像片与倾斜像片相应像点之间的坐标关系为:
式中a1、a2、a3、b1、b2、b3、c1、c2、c3是外方位角元素ω、κ的三角函数。只需要求出外方位角元素即可得到水平影像,目前主要利用控制点获得影像的方位元素,对于无法获得控制点的影像,利用灭点来计算影像的方位元素,本发明利用灭点对步骤2得到的轨道图像进行检校,获取外方位角元素,然后进行图像纠正。
4.将步骤3得到的图片序列中相邻的两张图片进行拼接,图像拼接的流程图如图5所示,具体实施可分为下面几个步骤:
1)利用Harris算法提取两幅图像的特征点,其处理过程可表示为
R=det(A)-k·tr2(A)
其中
上表达式中,W是高斯平滑窗口,k为经验值,一般取0.04~0.06,当R大于给定阈值T时,即为特征点。
2)利用特征点附近的灰度信息建立初始匹配对,由步骤2可提取两幅图像的特征点集X=(X1,X2,…,Xm)和Y=(Y1,Y2,…,Yn),其中X1=(x11,y11),Y1=(x21,y21),定义Xi,Yj的相似性度量函数为
其中,μ,δ为两幅图像f1,f2在特征点附近的局部均值和方差。当Xi,Yj之间的相似性度量函数满足下面两个条件时,可初步认为它们为匹配同名点对。
条件一:Cf1,f2(Xl,Yk)=max(Cf1,f2(Xi,Yj))
条件二:Cf1,f2(Xl,Yk)>Tt
其中Tt为经验参数,可以控制初匹配点对数,一般取0.5<Tt<1,可取为Tt=0.8。
3)利用正确匹配点对间距离的相对固定来进行优化,消除伪匹配点对,获得精确匹配结果。
4)判断正确匹配点对是否大于3,若大于则进行下一步,否则返回第1步改变阈值T和经验参数Tt重新执行。
5)根据获得的精确匹配点对,确定两幅图像之间的仿射变换模型,将待拼接图像映射到基准图像空间中。设图像的特征点坐标集{(xi,yj)}配准后坐标集{(xi′,yj′)},可建立仿射变换模型:
式中k为比例缩放因子,θ为旋转角度,x0,y0为平移量。
仿射变换模型可以改写为
式中a11=kcosθ,a21=-a12,a12=ksinθ,a22=a11,a13=a11x0+a12y0,a23=a11y0-a12x0,可知计算这6个未知数至少需要3对特征点对,将特征点对代入求得两幅图像仿射变换的各参数后将待配准图像映射到基准图像空间。
6)采用重叠区域线性平滑函数消除拼接图像上的接缝。具体方法是在重叠区域区平滑因子α=1-i/n(0<α<1),设重叠区域内点j在两幅图像中的像素值为别为Aj和Bj,i为点j距离重叠区域左边边界的距离,n为重叠区的宽度,那么拼接后的新图像j点像素为
Xj=αAj+(1-α)Bj
5.通过步骤4后得到一幅轨道图像长图,然后使用Canny算子进行边缘检测,得到轨道图像长图的铁轨内边缘图像。
6.对步骤5得到的图像进行平滑处理,连通性处理,滤波处理等,去除边缘图像中的噪声干扰,使边缘提取中距离较近但不连续的直线相互连接,消除垂直轨道边缘的线段,剔除像素个数小于设定阈值的边缘线段,拟合出轨道内边缘。
7.利用步骤6所得到的轨道内边缘图像结合坐标解算可实现任意弦长的铁路轨道轨向测量,有效的解决了目前常用方法测量长弦轨向中的误差积累问题,大幅度提高长距离轨向测量精度。
Claims (8)
1.一种基于连续帧图像拼接的轨道长弦测量方法,其特征在于,包括以下步骤:
步骤1,采集连续多帧拍摄的轨道近景影像,根据图像拼接的精度和序列图像的重叠度的关系,取图像合适重叠度值,使图像拼接对轨向的误差影像最小,然后根据重叠度求出两幅图像之间的间隔,进而从原序列图像中抽取出用于拼接的新的序列图像;
步骤2,对所提取的新的序列图像进行消除拍摄设备镜头畸变影响的矫正处理;
步骤3,对步骤2得到的矫正后的图像再进行几何矫正处理,以将倾斜视角图像转变为俯视角度图像;
步骤4,将步骤3得到的俯视角度图像进行图像拼接,形成一幅铁路轨道长图;
步骤5,对步骤4所得到的铁路轨道图像使用边缘检测的方法,提取轨道图像的边缘图像;
步骤6,对步骤5得到的边缘图像进行滤波处理,降低图像中的噪声干扰,消除横向之间连接的边缘,剔除像素个数小于设定阈值的边缘线段,拟合出轨道内边缘;
步骤7,利用步骤6所得到的轨道内边缘图像结合坐标解算,得到任意弦长的铁路轨道轨向测量。
2.根据权利要求要求1所述的方法,其特征在于,所述的步骤1中,连续多帧拍摄的轨道近景影像,是通过在轨道上设置相应摄像设备,并沿轨道移动进行动态拍摄所得到的。
3.根据权利要求要求1所述的方法,其特征在于,所述的步骤1中,根据图像拼接的精度和序列图像的重叠度的关系,取图像合适重叠度值的步骤包括:
根据图像拼接的精度a和序列图像的重叠度c的关系a=f(c),整个的拼接共有条接缝,其中La表示要拼接图像的总长度,Lc为重叠区域长度,L为一幅图像的长度;取每条接缝取处的误差为Xi(i=1,2,…,m)在(-a,a)内服从均匀分布,拼接图像的整体误差通过计算整体误差的期望值E(Y)的最小值,确定最佳图像重叠度值,其中a取0.2mm。
4.根据权利要求要求1所述的方法,其特征在于,所述的步骤1中,根据重叠度求出两幅图像之间的间隔,是通过以下公式计算:
其中c为重叠度,L0为用于拼接的两幅图像之间的间隔,L为拍摄到的轨道图像的长度。
5.根据权利要求要求1所述的方法,其特征在于,所述的步骤1中,从原序列图像中抽取出用于拼接的新的序列图像的步骤包括:
根据重叠度求出两幅图像之间的间隔L0=L-cL,每隔张图像抽取一张作为新的图像序列,其中N为原图像序列总张数,c为重叠度,L为拍摄到的轨道图像的长度,La表示要拼接图像的总长度。
6.根据权利要求要求1所述的方法,其特征在于,所述的步骤2中,进行消除拍摄设备镜头畸变影响的矫正处理包括以下步骤:
镜头径向畸变表达式为:
其中(Δx,Δy)为径向畸变差,(x,y)为畸变图像中的点坐标,(x0,y0)为畸变中心坐标,k1,k2,k3为畸变系数,r为畸变半径,
其中,位移S是由镜头的径向畸变引起的,(xA,yA),(xB,yB),(xC,yC),
(xD′,yD′)分别为A,B,C,D的坐标,SAB为AB之间的距离,(ΔxA,ΔyA),(ΔxB,ΔyB),(ΔxC′,ΔyC′)分别为A,B,C′处的径向畸变差,
令S=0,通过以上两个公式,以最小二乘平差计算径向畸变系数k1,然后通过误差评价函数得到最优畸变系数纠正畸变图像。
7.根据权利要求要求1所述的方法,其特征在于,所述的步骤3中,对图像再进行几何矫正处理的步骤包括:
水平像片与倾斜像片相应像点之间的坐标关系表达式为:
其中,a,a0分别代表地面点A在倾斜像片P、水平像片P0上的构象,令a点在像平面坐标系o~xy中的坐标为x,y,a0点在像空间坐标系S~x0y0z0中的坐标为x0、y0、z0=-f,a1、a2、a3、b1、b2、b3、c1、c2、c3是外方位角元素ω、κ的三角函数,f为焦距,然后利用灭点对步骤2得到的轨道图像进行检校,获取外方位角元素,然后进行图像纠正。
8.根据权利要求要求1所述的方法,其特征在于,所述的步骤4中,进行图像拼接的步骤包括:
1)利用Harris算法提取两幅待拼接图像的特征点:
R=det(A)-k·tr2(A)
其中
W是高斯平滑窗口,k为经验值,当R大于给定阈值T时,即为特征点。
2)利用特征点附近的灰度信息建立初始匹配对,由步骤2提取两幅图像的特征点集X=(X1,X2,…,Xm)和Y=(Y1,Y2,…,Yn),其中X1=(x11,y11),Y1=(x21,y21),定义Xi,Yj的相似性度量函数为
其中,μ,δ为两幅图像f1,f2在特征点附近的局部均值和方差。当Xi,Yj之间的相似性度量函数满足下面两个条件时,则认为它们为匹配同名点对:
条件一:Cf1,f2(Xl,Yk)=max(Cf1,f2(Xi,Yj))
条件二:Cf1,f2(Xl,Yk)>Tt
其中Tt为经验参数,取0.5<Tt<1;
3)利用正确匹配点对间距离的相对固定来进行优化,消除伪匹配点对,获得精确匹配结果;
4)判断正确匹配点对是否大于3,若大于则进行下一步,否则返回第1步改变阈值T和经验参数Tt重新执行;
5)根据获得的精确匹配点对,确定两幅图像之间的仿射变换模型,将待拼接图像映射到基准图像空间中,设图像的特征点坐标集{(xi,yj)}配准后坐标集{(xi′,yj′)},建立仿射变换模型:
式中a11=kcosθ,a21=-a12,a12=ksinθ,a22=a11,a13=a11x0+a12y0,a23=a11y0-a12x0,k为比例缩放因子,θ为旋转角度,x0,y0为平移量,将特征点对代入求得两幅图像仿射变换的各参数后将待配准图像映射到基准图像空间;
6)采用重叠区域线性平滑函数消除拼接图像上的接缝:在重叠区域区平滑因子α=1-i/n(0<α<1),重叠区域内点j在两幅图像中的像素值为别为Aj和Bj,i为点j距离重叠区域左边边界的距离,n为重叠区的宽度,则拼接后的新图像j点像素为
Xj=αAj+(1-α)Bj。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611155320.XA CN106600592A (zh) | 2016-12-14 | 2016-12-14 | 一种基于连续帧图像拼接的轨道长弦测量方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611155320.XA CN106600592A (zh) | 2016-12-14 | 2016-12-14 | 一种基于连续帧图像拼接的轨道长弦测量方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106600592A true CN106600592A (zh) | 2017-04-26 |
Family
ID=58802532
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611155320.XA Pending CN106600592A (zh) | 2016-12-14 | 2016-12-14 | 一种基于连续帧图像拼接的轨道长弦测量方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106600592A (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109544460A (zh) * | 2017-09-22 | 2019-03-29 | 宝沃汽车(中国)有限公司 | 图像矫正方法、装置及车辆 |
CN110473236A (zh) * | 2019-06-25 | 2019-11-19 | 上海圭目机器人有限公司 | 一种道面图像检测用相机的偏置位置的测量方法 |
CN110675393A (zh) * | 2019-09-29 | 2020-01-10 | 上海呈彧智能科技有限公司 | 一种基于机器视觉的坯料规格检测方法 |
CN110717936A (zh) * | 2019-10-15 | 2020-01-21 | 哈尔滨工业大学 | 一种基于相机姿态估计的图像拼接方法 |
CN111982015A (zh) * | 2020-08-18 | 2020-11-24 | 深圳大学 | 结构几何形态监测方法 |
CN113723500A (zh) * | 2021-08-27 | 2021-11-30 | 四川启睿克科技有限公司 | 基于特征相似性和线性平滑组合的图像数据扩充方法 |
CN113837064A (zh) * | 2021-09-22 | 2021-12-24 | 广州小鹏自动驾驶科技有限公司 | 道路识别方法、系统和可读存储介质 |
CN116894776A (zh) * | 2023-09-11 | 2023-10-17 | 广东电网有限责任公司江门供电局 | 基于图像拼接的压接导线弯曲度测量方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101276465A (zh) * | 2008-04-17 | 2008-10-01 | 上海交通大学 | 广角图像自动拼接方法 |
CN102393953A (zh) * | 2011-07-15 | 2012-03-28 | 汉王科技股份有限公司 | 图像帧拼接方法和装置 |
CN103369192A (zh) * | 2012-03-31 | 2013-10-23 | 深圳市振华微电子有限公司 | 多通道视频图像全硬件拼接方法及装置 |
CN104835115A (zh) * | 2015-05-07 | 2015-08-12 | 中国科学院长春光学精密机械与物理研究所 | 用于航空相机的图像成像方法及系统 |
CN105354796A (zh) * | 2015-10-12 | 2016-02-24 | 北京鑫洋泉电子科技有限公司 | 用于行车辅助的图像处理方法及系统 |
CN105611170A (zh) * | 2015-12-31 | 2016-05-25 | 深圳市道通智能航空技术有限公司 | 一种无人机及其全景拼接方法、装置和系统 |
-
2016
- 2016-12-14 CN CN201611155320.XA patent/CN106600592A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101276465A (zh) * | 2008-04-17 | 2008-10-01 | 上海交通大学 | 广角图像自动拼接方法 |
CN102393953A (zh) * | 2011-07-15 | 2012-03-28 | 汉王科技股份有限公司 | 图像帧拼接方法和装置 |
CN103369192A (zh) * | 2012-03-31 | 2013-10-23 | 深圳市振华微电子有限公司 | 多通道视频图像全硬件拼接方法及装置 |
CN104835115A (zh) * | 2015-05-07 | 2015-08-12 | 中国科学院长春光学精密机械与物理研究所 | 用于航空相机的图像成像方法及系统 |
CN105354796A (zh) * | 2015-10-12 | 2016-02-24 | 北京鑫洋泉电子科技有限公司 | 用于行车辅助的图像处理方法及系统 |
CN105611170A (zh) * | 2015-12-31 | 2016-05-25 | 深圳市道通智能航空技术有限公司 | 一种无人机及其全景拼接方法、装置和系统 |
Non-Patent Citations (2)
Title |
---|
余毅: ""基于车载近景摄影测量的高速铁路轨道几何状态检测"", 《中国优秀硕士论文全文数据库 工程科技Ⅱ辑》 * |
郑莹: ""铁路轨道数码影像的纠正与拼接"", 《中国优秀硕士论文全文数据库 信息科技辑》 * |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109544460A (zh) * | 2017-09-22 | 2019-03-29 | 宝沃汽车(中国)有限公司 | 图像矫正方法、装置及车辆 |
CN110473236A (zh) * | 2019-06-25 | 2019-11-19 | 上海圭目机器人有限公司 | 一种道面图像检测用相机的偏置位置的测量方法 |
CN110473236B (zh) * | 2019-06-25 | 2022-03-15 | 上海圭目机器人有限公司 | 一种道面图像检测用相机的偏置位置的测量方法 |
CN110675393A (zh) * | 2019-09-29 | 2020-01-10 | 上海呈彧智能科技有限公司 | 一种基于机器视觉的坯料规格检测方法 |
CN110675393B (zh) * | 2019-09-29 | 2024-03-26 | 上海呈彧智能科技有限公司 | 一种基于机器视觉的坯料规格检测方法 |
CN110717936B (zh) * | 2019-10-15 | 2023-04-28 | 哈尔滨工业大学 | 一种基于相机姿态估计的图像拼接方法 |
CN110717936A (zh) * | 2019-10-15 | 2020-01-21 | 哈尔滨工业大学 | 一种基于相机姿态估计的图像拼接方法 |
CN111982015A (zh) * | 2020-08-18 | 2020-11-24 | 深圳大学 | 结构几何形态监测方法 |
CN113723500B (zh) * | 2021-08-27 | 2023-06-16 | 四川启睿克科技有限公司 | 基于特征相似性和线性平滑组合的图像数据扩充方法 |
CN113723500A (zh) * | 2021-08-27 | 2021-11-30 | 四川启睿克科技有限公司 | 基于特征相似性和线性平滑组合的图像数据扩充方法 |
CN113837064A (zh) * | 2021-09-22 | 2021-12-24 | 广州小鹏自动驾驶科技有限公司 | 道路识别方法、系统和可读存储介质 |
CN113837064B (zh) * | 2021-09-22 | 2023-11-03 | 广州小鹏自动驾驶科技有限公司 | 道路识别方法、系统和可读存储介质 |
CN116894776A (zh) * | 2023-09-11 | 2023-10-17 | 广东电网有限责任公司江门供电局 | 基于图像拼接的压接导线弯曲度测量方法及系统 |
CN116894776B (zh) * | 2023-09-11 | 2024-01-23 | 广东电网有限责任公司江门供电局 | 基于图像拼接的压接导线弯曲度测量方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106600592A (zh) | 一种基于连续帧图像拼接的轨道长弦测量方法 | |
US10529091B2 (en) | Calibration method and apparatus | |
CN105674880B (zh) | 基于双目原理的接触网几何参数测量方法及系统 | |
CN103279956B (zh) | 一种检测贴片机元器件定位精度的方法 | |
WO2017080102A1 (zh) | 飞行装置、飞行控制系统及方法 | |
CN101697105B (zh) | 一种摄像式触摸检测定位方法及摄像式触摸检测系统 | |
US8494307B2 (en) | Method and apparatus for determining misalignment | |
CN104835159A (zh) | 用于连续变焦距光学成像系统的数字图像校正方法 | |
CN106996748A (zh) | 一种基于双目视觉的轮径测量方法 | |
EP2126843A2 (en) | Method and system for video-based road lane curvature measurement | |
US10235579B2 (en) | Vanishing point correction apparatus and method | |
CN108833912A (zh) | 一种摄像机机芯光轴中心和视场角的测量方法及系统 | |
CN111210477A (zh) | 一种运动目标的定位方法及系统 | |
JP6822427B2 (ja) | 地図変化点検出装置 | |
CN110674732B (zh) | 一种融合多元数据的沥青路面车辙三维尺寸自动检测及定位方法 | |
CN108716890A (zh) | 一种基于机器视觉的高精度尺寸检测方法 | |
CN103810676B (zh) | 一种钢管运行速度的监测方法 | |
CN111707668A (zh) | 基于序列图像的隧道检测及图像处理方法 | |
CN107784633B (zh) | 适用于平面测量的无人机航拍图像校准方法 | |
CN114719873A (zh) | 一种低成本精细地图自动生成方法、装置及可读介质 | |
CN104180794B (zh) | 数字正射影像拉花区域的处理方法 | |
CN108876771A (zh) | 一种咬边焊接缺陷的检测方法 | |
CN117232435B (zh) | 一种道岔尖轨磨耗值和降低值的测量装置及方法 | |
CN115575407B (zh) | 一种应用于轨道与隧道的检测方法 | |
CN113706424B (zh) | 一种基于人工智能的果冻效应图像校正方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170426 |