CN103793894A - 基于云模型元胞自动机角点检测的变电站遥视图像拼接方法 - Google Patents

基于云模型元胞自动机角点检测的变电站遥视图像拼接方法 Download PDF

Info

Publication number
CN103793894A
CN103793894A CN201310640415.0A CN201310640415A CN103793894A CN 103793894 A CN103793894 A CN 103793894A CN 201310640415 A CN201310640415 A CN 201310640415A CN 103793894 A CN103793894 A CN 103793894A
Authority
CN
China
Prior art keywords
image
value
cloud
linguistic value
linguistic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310640415.0A
Other languages
English (en)
Inventor
张庆华
张权平
马春
王兵
丰建军
原会军
彭飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANXI JINCHENG ELECTRIC POWER SUPPLY Co
State Grid Corp of China SGCC
Original Assignee
SHANXI JINCHENG ELECTRIC POWER SUPPLY Co
State Grid Corp of China SGCC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANXI JINCHENG ELECTRIC POWER SUPPLY Co, State Grid Corp of China SGCC filed Critical SHANXI JINCHENG ELECTRIC POWER SUPPLY Co
Priority to CN201310640415.0A priority Critical patent/CN103793894A/zh
Publication of CN103793894A publication Critical patent/CN103793894A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

一种基于云模型元胞自动机角点检测的变电站遥视图像拼接方法,所述方法对初始化处理后的待拼接图像分别进行基于云模型元胞自动机的图像边缘检测以获取细化且连续的图像边缘,并在此基础上进行基于角点几何特征的角点检测获得角点特征点,进而在图像重叠区域中进行图像特征点匹配,实现图像拼接,最后进行图像融合消除拼接接缝。本发明将基于云模型元胞自动机的边缘检测方法与基于角点几何特征的角点检测方法相结合,使获得的特征点同时具备边缘特征和角点特征,所以能够提高图像配准的正确率并降低配准的计算量,从而提高图像拼接的效率和质量。

Description

基于云模型元胞自动机角点检测的变电站遥视图像拼接方法
技术领域
本发明涉及一种基于云模型元胞自动机进行边缘检测,并根据角点几何特征进行角点检测的变电站遥视图像拼接方法,属于数据处理技术领域。 
背景技术
变电站遥视系统借助计算机技术、多媒体技术及通讯技术,采集变电站图像等多媒体信号,从而使变电站运行水平不断提高,使变电站的无人值班逐步变成了可能。但是由于摄像机仅能感应部分区域的异常,不能实时获知视野广阔的现场全景图像信息,不能进行全方位的监测,安全系数不高,所以需要将由摄像机获取的监控图像或者一路摄像机不同位置获取的监控图像拼接成一幅宽视野的高分辨率的全景图像,才能更好地展现宽场景的实时动态情况。图像拼接方法主要包括两个步骤:图像配准和图像融合。其中图像拼接的核心技术是图像配准技术,目前常用的图像配准技术主要包括三种:基于特征的配准、基于灰度信息的配准和基于变换域的配准。其中,基于特征的配准是分别在图像中提取特征,再进行特征匹配,最后计算出变换模型参数。由于图像的特征通常不易受光照,平移、旋转、尺度等变换而发生改变,具有较强的稳定性,而且少量的特征不但能够反映出图像的重要信息,还有利于提高处理速度,所以目前主流图像拼接方法都采用基于特征的技术,基本的图像特征包括区域、纹理、轮廓、边缘和角点等,其中边缘特征和角点特征均是图像最基本的特征之一,它们包含了用于识别的有用信息,是图像拼接中两种最常用的特征。但是现有的方法通常仅采用其中一种特征进行图像配准,即分别提取边缘点或角点,采用这类方法获得的特征点较多,进行图像配准时计算量较大,并且容易出现误匹配的情况。边缘点和角点虽然是不同的特征,但也存在一定的联系,即图像的角点通常是图像的边界点,且是两条边界线或多条边界线的交点。如果能够利用边缘点和角点之间的联系,就可获取同时具备边缘和角点特征的特征点,从而提高图像配准的正确率,降低配准的计算量。另外为了利用边缘点与角点之间的联系进行特征点提取,就必须获得细化且连续的边界,现有的图像边缘检测算法很难实现,需要采用特殊的方法对图像进行边缘检测,为进一步提取角点做准备。 
发明内容
本发明的目的在于针对现有技术之弊端,提供一种基于云模型元胞自动机角点检测的变电站遥视图像拼接方法,以实现高效的变电站遥视图像拼接。 
本发明所述问题是以下述技术方案实现的: 
一种基于云模型元胞自动机角点检测的变电站遥视图像拼接方法,所述方法对初始化处理后的待拼接图像分别进行基于云模型元胞自动机的图像边缘检测,并在此基础上进行基于角点几何特征的角点检测获得角点特征点,进而在图像重叠区域中进行图像特征点匹配,实现图像拼接,最后进行图像融合消除拼接接缝;
具体步骤为:
a. 初始化处理:
对两幅待拼接变电站遥视图像进行预处理,将图像转换为灰度图并将所得图像的灰度值矩阵作为元胞的初始状态矩阵;
b. 采用基于云模型元胞自动机的图像边缘检测方法对待拼接图像的灰度值矩阵进行边缘检测;
c. 根据步骤b获得的边缘特征点进行基于角点几何特征的角点检测,获得两幅待拼接图像的角点特征点;
d. 基于特征点的图像配准:
在待拼接图像的重叠区域中进行图像特征点匹配,获得最佳匹配特征点,并根据最佳匹配点通过图像变换进行图像拼接;
e. 图像融合:
采用加权平均融合法进行图像融合,消除由于摄像机在图像采集时光强不均匀造成的拼接接缝,最终完成图像拼接。
上述基于云模型元胞自动机角点检测的变电站遥视图像拼接方法,对待拼接图像进行边缘检测;具体步骤为: 
a. 计算输入变量,计算待拼接图像的方向信息测度矩阵,假设当前象素点坐标为(i,j),其象素矩阵为I,邻域N(i,j)是Moore型邻居,lθ是过中心点且角度为θ的一条直线,这条直线将N(i,j)分为两个部分,即Sθ1和Sθ2,则方向信息测度M(i,j)的表达式为:
Figure RE-DEST_PATH_IMAGE001
其中: 
Figure RE-DEST_PATH_IMAGE002
Figure RE-DEST_PATH_IMAGE003
Figure RE-DEST_PATH_IMAGE005
Figure RE-DEST_PATH_IMAGE006
通过计算得到矩阵M(i,j)为矩阵I的方向信息测度矩阵;
计算待拼接图像的邻域边缘强度和邻域隔离宽度;邻域边缘强度表达式为:
Figure RE-DEST_PATH_IMAGE007
其中 
Figure RE-DEST_PATH_IMAGE008
、 
Figure RE-DEST_PATH_IMAGE009
分别是图像全局最大灰度值和最小灰度值, 
Figure RE-DEST_PATH_IMAGE010
、 
Figure RE-DEST_PATH_IMAGE011
分别是两个邻域的平均灰度值;邻域边缘隔离宽度表达式为:
Figure RE-DEST_PATH_IMAGE012
其中: 
Figure RE-DEST_PATH_IMAGE013
          
其中P1与P2分别为两个邻域的几何中心,n=2;
b. 输入向量云化;本专利方法中包括三个输入变量:方向信息x1、邻域边缘强度x2和邻域边缘隔离宽度x3;每个输入变量对应两种定性的概念:A1={大},A2={小},三个输入变量组成了输入向量X;对于多语言值的云化可以通过多维云来实现,多维云又可以由一维云扩展而来,为了实现方便,这里选用一维云作为基本模型;对于不同的系统,云化过程的设计是不同的,这里采用半正态云扩展模型对变量进行云化;输入向量共对应8种定型概念(语言值):{x1语言值为A1,x2语言值为A1,x3语言值为A1},{x1语言值为A1,x2语言值为A1,x3语言值为A2},{x1语言值为A1,x2语言值为A2,x3语言值为A2},{x1语言值为A2,x2语言值为A2,x3语言值为A2}{x1语言值为A1,x2语言值为A2,x3语言值为A1},{x1语言值为A2,x2语言值为A1,x3语言值为A1},{x1语言值为A2,x2语言值为A2,x3语言值为A1},{x1语言值为A2,x2语言值为A1,x3语言值为A2},每个语言值对应一个三维X条件云发生器,每个三维X条件云发生器由三个一维X条件云发生器CGAij和1个乘法器MP构成,其中当i=1、2、3时分别表示不同的输入变量x1,x2和x3,当j=1、2时分别表示不同的输入变量语言值为A1和A2;例如,输入向量的第一个语言值{x1语言值为A1,x2语言值为A1,x3语言值为A1}对应的三维X条件云发生器由三个一维X条件云发生器CGA11,CGA21和CGA31以及1个乘法器MP构成,CGA11表示输入变量x1第1个语言值对应的一维X条件云发生器,CGA21表示输入变量x2第1个语言值对应的一维X条件云发生器,CGA31表示输入变量x3第1个语言值对应的一维X条件云发生器,μ11,μ21和μ31分别为CGA11,CGA21和CGA31的输出隶属度,μ11,μ21和μ31通过乘法器MP得到μA111×μ21×μ31,μA1表示满足输入向量第一个语言值的隶属度;其它7个输入向量语言值隶属度μ2,…,μ8的计算过程与μ1的计算过程类似,只是采用的一维X条件云发生器不同;
c. 云推理规则;该推理具有一个输出,其包括2种定性概念(语言值):B1={是边缘点},B2={不是边缘点};对任意当前时刻元胞进行推理时均要求符合以下云推理规则,其规则数为8,分别对应输入向量的8种语言值;
IF   A11 and A21 and A31  THEN B1
IF   A12 and A21 and A31  THEN B2
         … … …
         … … …
IF   A12 and A22 and A32  THEN B2
d. 云推理;输入向量云化得到的隶属度μm (m=1,2,…,8),分别表示第m条定性规则的激活程度,规则选择器RS从中选择最大的隶属度μmax,即μmax对应的定性规则被选中,根据云推理规则选择对应的输出语言值作为推理结果;
e. 反云化输出;如果输出语言值为B1,则将μmax值带入输出语言值B1的一维Y条件云发生器CGB1k (k=1,2,3)中,产生一组共三个云滴Drop(y11, μmax), Drop(y12, μmax)和Drop(y13, μmax),多次重复该过程,云推理器产生的是三个由大量云滴组成的云团,分别计算y11,y12和y13的均值E(y11),E(y12)和E(y13)作为结果输出;
f. 元胞自动机演化,具体步骤如下:
步骤一,将元胞空间与图像的灰度值矩阵I对应;
步骤二,计算矩阵I的方向信息测度矩阵M,边缘强度矩阵 
Figure RE-DEST_PATH_IMAGE014
和边缘隔离宽度矩阵 
Figure RE-DEST_PATH_IMAGE015
步骤三,利用局部规则分辨边缘点,对于一个当前元胞(i,j)要求符合如下局部规则:
1.将方向信息测度矩阵M,边缘强度矩阵 
Figure RE-DEST_PATH_IMAGE016
和边缘隔离宽度矩阵 
Figure RE-DEST_PATH_IMAGE017
作为输入进行云推理,然后建立标记矩阵B(b ),将对应推理结果是边缘点的点设为1,代表边缘点,其余设为0,代表非边缘点;
2.如果b 
Figure 670941DEST_PATH_IMAGE018
=1;考察它的Moore型邻域,如果它的邻居符合边缘结构,那么找到状态为1的邻居元胞位置,在方向信息测度矩阵M,边缘强度矩阵 
Figure 119239DEST_PATH_IMAGE014
和边缘隔离宽度矩阵 
Figure 898977DEST_PATH_IMAGE017
上与之对应位置,对每个找到的邻居元胞,找出其次邻居中具有最大 的元胞,使其下一状态的信息测度值,边缘强度值和边缘隔离宽度值等于当前值与云推理输出结果的加和;已经反馈过的点,后面时刻不再进行反馈;
3.如果b 
Figure 825344DEST_PATH_IMAGE018
=0;考察它的Moore型邻域,如果它的邻居符合任何一种边缘结构,说明它本身也是边缘点,则在下一时刻状态变为1;
步骤四,利用局部规则分辨噪声点,对于一个当前元胞(i,j)要求符合如下局部规则:
如果b 
Figure 639717DEST_PATH_IMAGE018
=1;考察它的Moore型邻域,如果它的邻居不符合任何一种边缘结构,说明它本身不是边缘点而是噪声点,则在下一时刻状态变为0;
步骤五,元胞自动机进行演化,重复步骤三和四,直到达到稳定状态(B =B 
Figure RE-DEST_PATH_IMAGE021
)。
 本发明利用边缘特征与角点特征之间的联系,采用云模型元胞自动机图像边缘检测方法获取变电站遥视图像细化且连续的边界,进而采用基于角点几何特征的角点检测方法获取图像角点特征,由于将云模型元胞自动机边缘检测与角点检测相结合,使获得的特征点同时具备了边缘特征和角点特征,从而能够提高图像配准的正确率并降低配准的计算量。 
附图说明
下面结合附图对本发明作进一步说明。 
图1是本发明技术方案的流程图; 
图2是边缘检测的云推理器示意图;
图3是边缘结构示意图;
图4是角点模板示意图;
图5-a、图5-b分别是待拼接变电站图像1和图像2;
图6-a、图6-b分别是云模型元胞自动机边缘检测获取的图像1和图像2的图像边缘;
图7-a、图7-b分别是采用本专利方法获取的图像1和图像2的角点特征点;
图8-a、图8-b分别是采用Harris角点检测方法获取的图像1和图像2的角点特征点;
图9是图像拼接获得的结果图。
文中所用符号清单为:x1,x2和x3为三个输入变量,Ex表示期望值,En表示熵值,He表示超熵值,y1为输出变量,μ表示隶属度值,CGA和CGB为云发生器,MP为乘法器,RS为规则选择器。 
具体实施方式
步骤a是预处理步骤,对两张待拼接图像进行预处理,将图像转换为灰度图并获得图像的灰度值矩阵作为元胞的初始状态,然后确定相关参数,如待拼接图像的重叠区域坐标等。 
步骤b、c、d属于图像配准的步骤。 
步骤b采用基于云模型元胞自动机的图像边缘检测方法对待拼接图像的灰度值矩阵进行边缘检测,具体实施方法如下: 
a.   计算输入变量。计算待拼接图像的方向信息测度矩阵。假设当前象素点坐标为(i,j),其象素矩阵为I,邻域N(i,j)是Moore型邻居,lθ是过中心点且角度为θ的一条直线,这条直线将N(i,j)分为两个部分,即Sθ1和Sθ2,则方向信息测度M(i,j)的表达式为:
Figure 586113DEST_PATH_DEST_PATH_IMAGE001
                   (1)
其中: 
Figure 485936DEST_PATH_DEST_PATH_IMAGE002
            (2)
                   (3)
Figure 884873DEST_PATH_DEST_PATH_IMAGE004
                      (4)
Figure 245447DEST_PATH_DEST_PATH_IMAGE005
                      (5)
Figure 163725DEST_PATH_DEST_PATH_IMAGE006
                     (6)
通过计算得到矩阵M(i,j)为矩阵I的方向信息测度矩阵。
计算待拼接图像的邻域边缘强度和邻域隔离宽度。邻域边缘强度表达式为: 
                (7)
其中
Figure 955280DEST_PATH_DEST_PATH_IMAGE008
分别是图像全局最大灰度值和最小灰度值,
Figure 892329DEST_PATH_DEST_PATH_IMAGE010
Figure 65822DEST_PATH_DEST_PATH_IMAGE011
分别是两个邻域的平均灰度值。邻域边缘隔离宽度表达式为:
Figure 76503DEST_PATH_DEST_PATH_IMAGE012
                              (8)
其中:
Figure 575617DEST_PATH_DEST_PATH_IMAGE013
          (9)
其中P1与P2分别为两个邻域的几何中心,n=2。
b.  输入向量云化。图2左边部分是输入向量云化过程,本专利方法中包括三个输入变量:方向信息x1、邻域边缘强度x2和邻域边缘隔离宽度x3。每个输入变量对应两种定性的概念:A1={大},A2={小},三个输入变量组成了输入向量X。对于多语言值的云化可以通过多维云来实现,多维云又可以由一维云扩展而来,为了实现方便,这里选用一维云作为基本模型。对于不同的系统,云化过程的设计是不同的,这里采用半正态云扩展模型对变量进行云化。输入向量共对应8种定性概念(语言值):{x1语言值为A1,x2语言值为A1,x3语言值为A1},{x1语言值为A1,x2语言值为A1,x3语言值为A2},{x1语言值为A1,x2语言值为A2,x3语言值为A2},{x1语言值为A2,x2语言值为A2,x3语言值为A2}{x1语言值为A1,x2语言值为A2,x3语言值为A1},{x1语言值为A2,x2语言值为A1,x3语言值为A1},{x1语言值为A2,x2语言值为A2,x3语言值为A1},{x1语言值为A2,x2语言值为A1,x3语言值为A2},每个语言值对应一个三维X条件云发生器,每个三维X条件云发生器由三个一维X条件云发生器CGAij和1个乘法器MP构成,其中当i=1、2、3时分别表示不同的输入变量x1,x2和x3,当j=1、2时分别表示不同的输入变量语言值为A1和A2。例如,输入向量的第一个语言值{x1语言值为A1,x2语言值为A1,x3语言值为A1}对应的三维X条件云发生器由三个一维X条件云发生器CGA11,CGA21和CGA31以及1个乘法器MP构成,CGA11表示输入变量x1为第1个语言值对应的一维X条件云发生器,CGA21表示输入变量x2为第1个语言值对应的一维X条件云发生器,CGA31表示输入变量x3为第1个语言值对应的一维X条件云发生器,μ11,μ21和μ31分别为CGA11,CGA21和CGA31的输出隶属度,μ11,μ21和μ31通过乘法器MP得到μA111×μ21×μ31,μA1表示满足输入向量第一个语言值的隶属度。其它7个输入向量语言值隶属度μ2,…,μ8的计算过程与μ1的计算过程类似,只是采用的一维X条件云发生器不同。 
c.   云推理规则。该推理具有一个输出,其包括2种定性概念(语言值):B1={是边缘点},B2={不是边缘点}。对任意当前时刻元胞进行推理时均要求符合以下云推理规则,其规则数为8,分别对应输入向量的8种语言值。 
IF   A11 and A21 and A31  THEN B1
IF   A12 and A21 and A31  THEN B2
         …
IF   A12 and A22 and A32  THEN B2
d.  云推理。图2中间部分是云推理过程,输入向量云化得到的隶属度μm (m=1,2,…,8),分别表示第m条定性规则的激活程度,规则选择器RS从中选择最大的隶属度μmax,即μmax对应的定性规则被选中,根据云推理规则选择对应的输出语言值作为推理结果。
e.   反云化输出。图2右边部分是反云化输出过程,如果输出语言值为B1,则将μmax值带入输出语言值B1的一维Y条件云发生器CGB1k (k=1,2,3)中,产生一组共三个云滴Drop(y11, μmax), Drop(y12, μmax)和Drop(y13, μmax),多次重复该过程,云推理器产生的是三个由大量云滴组成的云团,分别计算y11,y12和y13的均值E(y11),E(y12)和E(y13)作为结果输出。 
 f.      元胞自动机演化,具体步骤如下: 
步骤一,将元胞空间与图像的灰度值矩阵I对应。
步骤二,计算矩阵I的方向信息测度矩阵M,边缘强度矩阵
Figure 877822DEST_PATH_IMAGE053
和边缘隔离宽度矩阵
Figure 973954DEST_PATH_IMAGE054
。 
步骤三,利用局部规则分辨边缘点,对于一个当前元胞(i,j)要求符合如下局部规则: 
1.将方向信息测度矩阵M,边缘强度矩阵
Figure 202908DEST_PATH_832012DEST_PATH_IMAGE014
和边缘隔离宽度矩阵
Figure 914512DEST_PATH_749153DEST_PATH_IMAGE015
作为输入进行云推理,然后建立标记矩阵B(b
Figure 779700DEST_PATH_DEST_PATH_IMAGE016
),将对应推理结果是边缘点的点设为1,代表边缘点,其余设为0,代表非边缘点。
2.如果b
Figure 449715DEST_PATH_512578DEST_PATH_IMAGE016
=1。考察它的Moore型邻域,如果它的邻居符合边缘结构,如图3所示,那么找到状态为1的邻居元胞位置,在方向信息测度矩阵M,边缘强度矩阵
Figure 33144DEST_PATH_907788DEST_PATH_IMAGE014
和边缘隔离宽度矩阵
Figure 814018DEST_PATH_863105DEST_PATH_IMAGE015
上与之对应位置,对每个找到的邻居元胞,找出其次邻居中具有最大的元胞,使其下一状态的信息测度值,边缘强度值和边缘隔离宽度值等于当前值与云推理输出结果的加和。已经反馈过的点,后面时刻不再进行反馈。 
3.如果b
Figure 640208DEST_PATH_685568DEST_PATH_IMAGE016
=0。考察它的Moore型邻域,如果它的邻居符合任何一种边缘结构(如图3所示),说明它本身也是边缘点,则在下一时刻状态变为1。 
步骤四,利用局部规则分辨噪声点,对于一个当前元胞(i,j)要求符合如下局部规则: 
如果b
Figure 710933DEST_PATH_139552DEST_PATH_IMAGE016
=1。考察它的Moore型邻域,如果它的邻居不符合任何一种边缘结构,说明它本身不是边缘点而是噪声点,则在下一时刻状态变为0。
步骤五,元胞自动机进行演化,重复步骤三和四,直到达到稳定状态(B
Figure 764339DEST_PATH_DEST_PATH_IMAGE018
=B)。 
步骤c采用基于角点几何特征的角点检测方法获取待拼接图像的角点特征点,具体实施方法如下: 
根据角点几何特性,定义图形模板,如图4所示,直接对步骤b获得的图像边缘进行像素点扫描。在图4( a)中,模板中心对应同一条边界线上的中间点,模板中心对应点是边界点不是角点;在图4( b) 中,模板中心对应两条边界线的交点,模板中心对应点是角点;在图4 (c) 中,模板中心对应多条边界线的交点,模板中心对应点是角点。像素点扫描过程中将符合模板图(b)和图(c)的点定义为角点。
步骤d进行基于特征点的图像配准。在待拼接图像的重叠区域中进行图像特征点匹配,获得最佳匹配特征点,并根据最佳匹配点通过图像变换进行图像拼接,具体实施方法如下: 
1)   确定待拼接图像重叠区域。事先对摄像机位置进行标定,对于2台假定内部参数完全相同的摄像机设置在适当位置,其拍摄的宽度为一定值,则所拍摄图像重叠的区域可通过计算获得。
2)   在图像的重叠区域内寻找2幅图像之间像素点的最大相似性。设
Figure 615938DEST_PATH_DEST_PATH_IMAGE020
分别为2幅图像I1和I2中任意的2个特征点,其相关系数Cor表达式为: 
Figure 439537DEST_PATH_DEST_PATH_IMAGE021
                   (10)
式中:std(·) , cov(·, ·)为图像的标准差和互相关函数,其表达式为:
Figure 296635DEST_PATH_DEST_PATH_IMAGE022
               (11)
Figure 990921DEST_PATH_DEST_PATH_IMAGE023
   (12)
式中M(X)表示图像I1和I2相关部分的像素灰度的平均值,n表示相关部分窗口大小,其表达式为:
Figure 173641DEST_PATH_DEST_PATH_IMAGE024
                    (13)
3)   图像配准。对于2幅待匹配的图像,在1幅图像的重叠范围中选择1点(x,y)作为初始点,根据所选择拼接的方向上的平移分量即可粗定位其在另一幅图像中的对应点(x’,y’),然后设定一定的步长i,j,以互相关系数最大为原则进行迭代搜索,求出最佳拼接点,最后基于最佳匹配点通过图像变换进行图像拼接,将两幅待拼接图像拼接为一幅图像。
步骤e采用加权平均融合法进行图像融合,消除由于摄像机在图像采集时光强不均匀造成的拼接接缝,最终完成图像拼接。具体实施方法如下: 
假设I1(i,j)为图像I1中的一个像素点,I2(i’,j’)为图像I2中与之对应的像素点,则融合后的图像中的像素点C(i’’,j’’) 表达式为:
           (14)
式中,
Figure 145325DEST_PATH_DEST_PATH_IMAGE026
Figure 694118DEST_PATH_DEST_PATH_IMAGE027
分别是图像I1和I2的权值。 
实验分析: 
为了说明本专利的优点,采用实验方法加以验证。首先给出某变电站遥视系统拍摄的两张图像,这两张图像均涉及同一变压器,但均未展现该变压器全貌,所以为了获得该变压器全貌需要对这两张图像进行拼接。两幅待拼接图像的大小分别是551像素×428像素和558像素×428像素,如图5所示;接着采用基于云模型元胞自动机的图像边缘检测方法对待拼接图像进行边缘检测,检测结果如图6所示,由图6可知采用基于云模型元胞自动机的图像边缘检测方法获取的图像边缘是单像素细化且连续的边缘;然后采用基于角点几何特征的角点检测方法获取待拼接图像的角点特征点,结果如图7所示;最后基于角点特征点进行图像配准与图像融合,完成图像拼接,拼接结果如图9所示。从实例可看出,该方法获得的图像拼接效果较好,适用于变电站遥视系统的图像拼接需要。
另外,以相同图像为例,如图5所示,采用Harris角点检测方法分别对待拼接图像进行角点检测,检测结果如图8所示,比较图7与图8,发现图8中的角点数量较多,其中有部分角点属于误判,与图8相比图7 中的角点数量较少,且均是具有明显角点特征与边缘点特征的特征点,所以采用本专利方法能够提高图像配准的正确率并降低配准的计算量。 

Claims (2)

1.一种基于云模型元胞自动机角点检测的变电站遥视图像拼接方法,其特征在于,所述方法对初始化处理后的待拼接图像分别进行基于云模型元胞自动机的图像边缘检测,并在此基础上进行基于角点几何特征的角点检测获得角点特征点,进而在图像重叠区域中进行图像特征点匹配,实现图像拼接,最后进行图像融合消除拼接接缝;
具体步骤为:
a. 初始化处理:
对两幅待拼接变电站遥视图像进行预处理,将图像转换为灰度图并将所得图像的灰度值矩阵作为元胞的初始状态矩阵;
b.  采用基于云模型元胞自动机的图像边缘检测方法对待拼接图像的灰度值矩阵进行边缘检测;
c.  根据步骤b获得的边缘特征点进行基于角点几何特征的角点检测,获得两幅待拼接图像的角点特征点;
d. 基于特征点的图像配准:
在待拼接图像的重叠区域中进行图像特征点匹配,获得最佳匹配特征点,并根据最佳匹配点通过图像变换进行图像拼接;
e. 图像融合:
采用加权平均融合法进行图像融合,消除由于摄像机在图像采集时光强不均匀造成的拼接接缝,最终完成图像拼接。
2.根据权利要求1所述的一种基于云模型元胞自动机角点检测的变电站遥视图像拼接方法,其特征是,对待拼接图像进行边缘检测;具体步骤为:
a. 计算输入变量,计算待拼接图像的方向信息测度矩阵,假设当前象素点坐标为(i,j),其象素矩阵为I,邻域N(i,j)是Moore型邻居,lθ是过中心点且角度为θ的一条直线,这条直线将N(i,j)分为两个部分,即Sθ1和Sθ2,则方向信息测度M(i,j)的表达式为:
Figure DEST_PATH_DEST_PATH_IMAGE001
其中: 
Figure DEST_PATH_579545DEST_PATH_IMAGE002
Figure DEST_PATH_DEST_PATH_IMAGE003
Figure DEST_PATH_877802DEST_PATH_IMAGE004
Figure DEST_PATH_264921DEST_PATH_IMAGE006
通过计算得到矩阵M(i,j)为矩阵I的方向信息测度矩阵;
计算待拼接图像的邻域边缘强度和邻域隔离宽度;邻域边缘强度表达式为:
其中
Figure DEST_PATH_821673DEST_PATH_IMAGE008
Figure DEST_PATH_DEST_PATH_IMAGE009
分别是图像全局最大灰度值和最小灰度值,
Figure DEST_PATH_915531DEST_PATH_IMAGE010
Figure DEST_PATH_DEST_PATH_IMAGE011
分别是两个邻域的平均灰度值;邻域边缘隔离宽度表达式为:
Figure DEST_PATH_712586DEST_PATH_IMAGE012
其中:
Figure DEST_PATH_DEST_PATH_IMAGE013
          
其中P1与P2分别为两个邻域的几何中心,n=2;
b. 输入向量云化;包括三个输入变量:方向信息x1、邻域边缘强度x2和邻域边缘隔离宽度x3;每个输入变量对应两种定性的概念:A1={大},A2={小},三个输入变量组成了输入向量X;对于多语言值的云化可以通过多维云来实现,多维云又可以由一维云扩展而来,为了实现方便,这里选用一维云作为基本模型;对于不同的系统,云化过程的设计是不同的,这里采用半正态云扩展模型对变量进行云化;输入向量共对应8种定型概念(语言值):{x1语言值为A1,x2语言值为A1,x3语言值为A1},{x1语言值为A1,x2语言值为A1,x3语言值为A2},{x1语言值为A1,x2语言值为A2,x3语言值为A2},{x1语言值为A2,x2语言值为A2,x3语言值为A2}{x1语言值为A1,x2语言值为A2,x3语言值为A1},{x1语言值为A2,x2语言值为A1,x3语言值为A1},{x1语言值为A2,x2语言值为A2,x3语言值为A1},{x1语言值为A2,x2语言值为A1,x3语言值为A2},每个语言值对应一个三维X条件云发生器,每个三维X条件云发生器由三个一维X条件云发生器CGAij和1个乘法器MP构成,其中当i=1、2、3时分别表示不同的输入变量x1,x2和x3,当j=1、2时分别表示不同的输入变量语言值为A1和A2;例如,输入向量的第一个语言值{x1语言值为A1,x2语言值为A1,x3语言值为A1}对应的三维X条件云发生器由三个一维X条件云发生器CGA11,CGA21和CGA31以及1个乘法器MP构成,CGA11表示输入变量x1第1个语言值对应的一维X条件云发生器,CGA21表示输入变量x2第1个语言值对应的一维X条件云发生器,CGA31表示输入变量x3第1个语言值对应的一维X条件云发生器,μ11,μ21和μ31分别为CGA11,CGA21和CGA31的输出隶属度,μ11,μ21和μ31通过乘法器MP得到μA111×μ21×μ31,μA1表示满足输入向量第一个语言值的隶属度;其它7个输入向量语言值隶属度μ2,…,μ8的计算过程与μ1的计算过程类似,只是采用的一维X条件云发生器不同;
c. 云推理规则;该推理具有一个输出,其包括2种定性概念(语言值):B1={是边缘点},B2={不是边缘点};对任意当前时刻元胞进行推理时均要求符合以下云推理规则,其规则数为8,分别对应输入向量的8种语言值;
IF   A11 and A21 and A31  THEN B1
IF   A12 and A21 and A31  THEN B2
         … … …
         … … …
IF   A12 and A22 and A32  THEN B2
d. 云推理;输入向量云化得到的隶属度μm (m=1,2,…,8),分别表示第m条定性规则的激活程度,规则选择器RS从中选择最大的隶属度μmax,即μmax对应的定性规则被选中,根据云推理规则选择对应的输出语言值作为推理结果;
e. 反云化输出;如果输出语言值为B1,则将μmax值带入输出语言值B1的一维Y条件云发生器CGB1k (k=1,2,3)中,产生一组共三个云滴Drop(y11, μmax), Drop(y12, μmax)和Drop(y13, μmax),多次重复该过程,云推理器产生的是三个由大量云滴组成的云团,分别计算y11,y12和y13的均值E(y11),E(y12)和E(y13)作为结果输出;
f. 元胞自动机演化,具体步骤如下:
步骤一,将元胞空间与图像的灰度值矩阵I对应;
步骤二,计算矩阵I的方向信息测度矩阵M,边缘强度矩阵
Figure DEST_PATH_266231DEST_PATH_IMAGE014
和边缘隔离宽度矩阵
Figure DEST_PATH_DEST_PATH_IMAGE015
步骤三,利用局部规则分辨边缘点,对于一个当前元胞(i,j)要求符合如下局部规则:
1).将方向信息测度矩阵M,边缘强度矩阵
Figure DEST_PATH_377406DEST_PATH_IMAGE014
和边缘隔离宽度矩阵
Figure DEST_PATH_388087DEST_PATH_IMAGE015
作为输入进行云推理,然后建立标记矩阵B(b
Figure DEST_PATH_356043DEST_PATH_IMAGE016
),将对应推理结果是边缘点的点设为1,代表边缘点,其余设为0,代表非边缘点;
2).如果b
Figure DEST_PATH_904705DEST_PATH_IMAGE016
=1;考察它的Moore型邻域,如果它的邻居符合边缘结构,那么找到状态为1的邻居元胞位置,在方向信息测度矩阵M,边缘强度矩阵
Figure DEST_PATH_616309DEST_PATH_IMAGE014
和边缘隔离宽度矩阵
Figure DEST_PATH_481497DEST_PATH_IMAGE015
上与之对应位置,对每个找到的邻居元胞,找出其次邻居中具有最大的元胞,使其下一状态的信息测度值,边缘强度值和边缘隔离宽度值等于当前值与云推理输出结果的加和;已经反馈过的点,后面时刻不再进行反馈;
3).如果b
Figure DEST_PATH_292458DEST_PATH_IMAGE016
=0;考察它的Moore型邻域,如果它的邻居符合任何一种边缘结构,说明它本身也是边缘点,则在下一时刻状态变为1;
步骤四,利用局部规则分辨噪声点,对于一个当前元胞(i,j)要求符合如下局部规则:
如果b
Figure DEST_PATH_875886DEST_PATH_IMAGE016
=1;考察它的Moore型邻域,如果它的邻居不符合任何一种边缘结构,说明它本身不是边缘点而是噪声点,则在下一时刻状态变为0;
步骤五,元胞自动机进行演化,重复步骤三和四,直到达到稳定状态(B=B
Figure DEST_PATH_DEST_PATH_IMAGE019
)。
CN201310640415.0A 2013-12-04 2013-12-04 基于云模型元胞自动机角点检测的变电站遥视图像拼接方法 Pending CN103793894A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310640415.0A CN103793894A (zh) 2013-12-04 2013-12-04 基于云模型元胞自动机角点检测的变电站遥视图像拼接方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310640415.0A CN103793894A (zh) 2013-12-04 2013-12-04 基于云模型元胞自动机角点检测的变电站遥视图像拼接方法

Publications (1)

Publication Number Publication Date
CN103793894A true CN103793894A (zh) 2014-05-14

Family

ID=50669519

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310640415.0A Pending CN103793894A (zh) 2013-12-04 2013-12-04 基于云模型元胞自动机角点检测的变电站遥视图像拼接方法

Country Status (1)

Country Link
CN (1) CN103793894A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105608716A (zh) * 2015-12-21 2016-05-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN107146229A (zh) * 2017-04-05 2017-09-08 西安电子科技大学 基于元胞自动机模型的结肠息肉图像分割方法
CN107316275A (zh) * 2017-06-08 2017-11-03 宁波永新光学股份有限公司 一种光流辅助的大尺度显微图像拼接算法
CN107679551A (zh) * 2017-09-11 2018-02-09 电子科技大学 一种基于分形的涌现现象的识别方法
CN108307200A (zh) * 2018-01-31 2018-07-20 深圳积木易搭科技技术有限公司 一种在线视频拼接方法系统
CN108648149A (zh) * 2018-05-10 2018-10-12 上海扩博智能技术有限公司 基于增强现实的图像拼接方法、系统、设备及存储介质
CN111563867A (zh) * 2020-07-14 2020-08-21 成都中轨轨道设备有限公司 一种用于提升图像清晰度的图像融合方法
CN111709960A (zh) * 2020-04-30 2020-09-25 广东利元亨智能装备股份有限公司 一种基于元胞自动机理论的图像边缘精准定位方法
CN113160413A (zh) * 2021-02-25 2021-07-23 北京大学 一种基于细胞自动机的实时动态云层绘制方法
CN116132798A (zh) * 2023-02-02 2023-05-16 深圳市泰迅数码有限公司 一种智能摄像头的自动跟拍方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102298779A (zh) * 2011-08-16 2011-12-28 淮安盈科伟力科技有限公司 全景辅助泊车系统的图像配准方法
CN103020967A (zh) * 2012-12-07 2013-04-03 青岛经纬蓝图信息技术有限公司 基于海岛边缘特征的无人机航拍图像精确匹配方法
US20130216106A1 (en) * 2010-11-08 2013-08-22 Nec Corporation Image matching device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130216106A1 (en) * 2010-11-08 2013-08-22 Nec Corporation Image matching device
CN102298779A (zh) * 2011-08-16 2011-12-28 淮安盈科伟力科技有限公司 全景辅助泊车系统的图像配准方法
CN103020967A (zh) * 2012-12-07 2013-04-03 青岛经纬蓝图信息技术有限公司 基于海岛边缘特征的无人机航拍图像精确匹配方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
孙晓翔: "变电站遥视系统中图像拼接方法的研究", 《中国优秀硕士学位论文全文数据库工程科技II辑》 *
张珂等: "基于云模型元胞自动机的图像边缘检测方法", 《华北电力大学学报》 *
贾伟等: "基于Canny角点检测的变电站遥视图像拼接方法", 《计算机光盘软件与应用》 *
辜萍萍等: "基于元胞自动机的图像边缘检测新方法", 《微电子学与计算机》 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105608716A (zh) * 2015-12-21 2016-05-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN105608716B (zh) * 2015-12-21 2020-12-18 联想(北京)有限公司 一种信息处理方法及电子设备
CN107146229A (zh) * 2017-04-05 2017-09-08 西安电子科技大学 基于元胞自动机模型的结肠息肉图像分割方法
CN107146229B (zh) * 2017-04-05 2019-08-13 西安电子科技大学 基于元胞自动机模型的结肠息肉图像分割方法
CN107316275A (zh) * 2017-06-08 2017-11-03 宁波永新光学股份有限公司 一种光流辅助的大尺度显微图像拼接算法
CN107679551B (zh) * 2017-09-11 2020-06-16 电子科技大学 一种基于分形的涌现现象的识别方法
CN107679551A (zh) * 2017-09-11 2018-02-09 电子科技大学 一种基于分形的涌现现象的识别方法
CN108307200A (zh) * 2018-01-31 2018-07-20 深圳积木易搭科技技术有限公司 一种在线视频拼接方法系统
CN108307200B (zh) * 2018-01-31 2020-06-09 深圳积木易搭科技技术有限公司 一种在线视频拼接方法系统
CN108648149A (zh) * 2018-05-10 2018-10-12 上海扩博智能技术有限公司 基于增强现实的图像拼接方法、系统、设备及存储介质
CN108648149B (zh) * 2018-05-10 2022-05-31 上海扩博智能技术有限公司 基于增强现实的图像拼接方法、系统、设备及存储介质
CN111709960A (zh) * 2020-04-30 2020-09-25 广东利元亨智能装备股份有限公司 一种基于元胞自动机理论的图像边缘精准定位方法
CN111709960B (zh) * 2020-04-30 2022-02-18 广东利元亨智能装备股份有限公司 一种基于元胞自动机理论的图像边缘精准定位方法
CN111563867A (zh) * 2020-07-14 2020-08-21 成都中轨轨道设备有限公司 一种用于提升图像清晰度的图像融合方法
CN113160413A (zh) * 2021-02-25 2021-07-23 北京大学 一种基于细胞自动机的实时动态云层绘制方法
CN113160413B (zh) * 2021-02-25 2022-07-12 北京大学 一种基于细胞自动机的实时动态云层绘制方法
CN116132798A (zh) * 2023-02-02 2023-05-16 深圳市泰迅数码有限公司 一种智能摄像头的自动跟拍方法
CN116132798B (zh) * 2023-02-02 2023-06-30 深圳市泰迅数码有限公司 一种智能摄像头的自动跟拍方法

Similar Documents

Publication Publication Date Title
CN103793894A (zh) 基于云模型元胞自动机角点检测的变电站遥视图像拼接方法
Ma et al. A review of 3D reconstruction techniques in civil engineering and their applications
CN102006425B (zh) 一种基于多摄像机的视频实时拼接方法
Hamzah et al. Stereo matching algorithm based on per pixel difference adjustment, iterative guided filter and graph segmentation
Babahajiani et al. Urban 3D segmentation and modelling from street view images and LiDAR point clouds
Chen et al. Moving-object detection from consecutive stereo pairs using slanted plane smoothing
US11521311B1 (en) Collaborative disparity decomposition
Kuo et al. 3D object detection and pose estimation from depth image for robotic bin picking
Xian et al. UprightNet: geometry-aware camera orientation estimation from single images
CN108305277B (zh) 一种基于直线段的异源图像匹配方法
Lee et al. Automatic integration of facade textures into 3D building models with a projective geometry based line clustering
Pintore et al. Recovering 3D existing-conditions of indoor structures from spherical images
Huang et al. Correlation and local feature based cloud motion estimation
Misra et al. Feature based remote sensing image registration techniques: a comprehensive and comparative review
Su et al. DLA-Net: Learning dual local attention features for semantic segmentation of large-scale building facade point clouds
Wang et al. Automatic registration of point cloud and panoramic images in urban scenes based on pole matching
Zabulis et al. 3D object pose refinement in range images
Tian et al. Automatic feature type selection in digital photogrammetry of piping
Huang et al. Multi‐class obstacle detection and classification using stereovision and improved active contour models
Tao et al. An efficient 3D object detection method based on fast guided anchor stereo RCNN
CN103903269B (zh) 球机监控视频的结构化描述方法和系统
van de Wouw et al. Hierarchical 2.5-d scene alignment for change detection with large viewpoint differences
CN106056599B (zh) 一种基于物体深度数据的物体识别算法及装置
Chen et al. Research on feature point matching algorithm improvement using depth prediction
Yaman et al. Multimodal Stereo Vision Using Mutual Information with Adaptive Windowing.

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140514