CN102129576B - 全天空极光图像占空比参数的提取方法 - Google Patents
全天空极光图像占空比参数的提取方法 Download PDFInfo
- Publication number
- CN102129576B CN102129576B CN 201110047076 CN201110047076A CN102129576B CN 102129576 B CN102129576 B CN 102129576B CN 201110047076 CN201110047076 CN 201110047076 CN 201110047076 A CN201110047076 A CN 201110047076A CN 102129576 B CN102129576 B CN 102129576B
- Authority
- CN
- China
- Prior art keywords
- aurora
- albp
- mask images
- pixel
- result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开了一种全天空极光图像占空比参数的提取方法,主要解决现有技术只能对具有明显形状和边界的光斑进行分割导致占空比参数误差较大的缺陷。其特定是根据极光在天空所呈现的不同形态采用相应分割方法,即首先对全天空极光图像进行预处理;然后确定光斑区域最优分割阈值,对光斑区域进行分割;接着根据光线区域与背景天空区域纹理结构的差异,对光线区域进行分割;最后根据光斑和光线区域的分割结果,计算占空比参数。本发明通过灰度特征确定光斑分割阈值,对无明显形状或边界的光斑也能精确分割,并根据纹理特征实现光线区域的成功分割,有效降低了占空比参数的误差,可用于复杂形态的极光区域从天空背景区域的分割。
Description
技术领域
本发明属于图像处理技术领域,涉及特征提取和图像分割,可用于复杂形态的极光区域从天空背景区域的分割。
背景技术
空间科学的研究重点在于了解近地球周围环境的物理过程的语义,这些过程由太阳风等离子体、地球磁场和地球大气层相互之间的复杂作用所引起。极光就是由太阳风引起的变化而带来的能量所产生的主要现象之一,因此极光所引起的空间和时间上的变化在很大程度上反映了太阳风与地球磁场的变化,对极光的观察成为了研究地球科学的重要基础。早期主要通过一些物理属性,例如太阳风速度、电子密度等对极光进行研究,实际上,除了以上物理特征,极光在亮度、结构等方面的变化也是极光研究的一个重要方面。
随着数字全天空摄像仪的出现,全天空极光图像为极光现象的研究提供了新的研究途径。其中极光区域在全天空极光图像所占面积的比例,即占空比成为极光研究的重要参数。占空比参数在时间轴上的变化蕴含了极光变化的丰富信息,为了获得极光的占空比参数,首先要将极光区域从整个全天空图像中分割出来。为了准确的分割出极光区域,要对极光的形态进行深入的分析,对不同形态的极光区域采用不同的分割方法。
极光的形态与极光所属类型密切相关,中国极地中心的科学家以日侧冕状极光为研究重点,将极光分为四类:多弧状极光、热点冕状极光、辐射冕状极光和帷幔冕状极光。以上四类极光主要呈现出以下三种形态:
·光斑状:该类极光只包含光带或光斑,不含或几乎不含光线,通常是弧状和热点冕状极光;
·光线状:该类极光只包含光线,几乎没有光斑出现,通常以帷幔冕和辐射冕状极光为主;
·混合形态:该类极光不仅包含光斑还包含光线,多弧状极光、热点冕状极光、帷幔冕状和辐射冕状极光都有这种情况出现,在极光图像中比较普遍。
近年来图像分割领域非常活跃,有很多方法被提出并在相应的领域获得了良好的分割效果,但在极光图像的分割应用上却很少,这是因为极光在天空背景上是透明的、边缘模糊、形状不规则,而且变化速度快且变化形式多样,因此对极光的描述非常困难。
在1999年,Syrjasuo等人在文献“M.T.Syrjasuo,T.I.Pulkkinen.Determining theSkeletons of the Auroras.International Conference on Image Analysis and Processing,Venice,Italy pp.1063-1066,1999.”中为了勾画极光的骨架,在预处理阶段使用Fuzzy logic的方法对具有明显形状的极光区域进行了分割,他们通过对极光边缘的提取从而将极光区域与背景天空区域分割开,这项技术要求极光区域要有明显的边缘,对于具有明显光斑和光带的极光图像,该方法的效果较好,但对于边缘模糊的光斑尤其是没有明显边缘的极光光线部分,分割效果并不好。
在2004年,Syrjasuo等人在文献“M.T.Syrjasuo,E.F.Donovan and L.L.Cogger.Content-based retrieval of auroral images-thousands of irregular shapes.InternationalConference on Visualization,Imaging,and Image Processing,Marbella,Spain,pp.224-228,2004.”以及2005年在文献“M.T.Syrjasuo,and E.F.Donovan.Using relevance feedbackin retrieving auroral images.International Conference on Computational Intelligence,CalgaryAlberta,Canada,pp.420-425,2005.”中使用Isolable-contour map对一种亮度很高的特殊弧状极光即南北走向弧状极光进行分割,并提取分割结果的边缘特征该类极光的检索。Isolable-contour map方法要求被检测区域要有明确的形状,因此该方法适合有明显形状的且亮度较高的极光区域,对于亮度较低、前景与背景没有明显区域差别的光斑以及很难描述形状的光线区域,该方法无法获得理想的分割结果。
综上,已有的极光图像分割方法主要存在以下两个问题:
1)Fuzzy logic和Isolable-contour map适用于图像中明显光斑区域的分割,对于边缘模糊或没有明显形状的光斑区域,由于无法提取其边缘或形状特征,无法实现精确分割,导致光斑部分占空比参数不准确,从而使整个极光区域占空比参数的产生误差。
2)现有的极光分割技术只考虑了亮度较高的光斑或光带的分割,而多数极光是光斑和光线的混合体,甚至有些极光的光线区域在整个极光区域中占很大比例,现有技术无法实现光线区域的分割,从而导致极光光线区域分割的缺失,造成分割结果的不准确,进而导致占空比参数的不准确。
发明内容
本发明的目的在于克服上述现有方法的不足,提出一种基于极光不同形态的全天空极光图像占空比参数的提取方法,以提高极光区域分割的准确率,减少占空比参数的误差。
实现本发明的技术思路是:首先采用改进的Otsu方法对光斑区域进行分割,得到光斑区域分割结果,然后对图像的光线区域进行分割,接着将上面两部分的分割结果进行组合形成极光整体区域的分割结果,最后计算极光区域在整个天空区域的比例得到极光占空比参数,具体实现步骤如下:
(1)对数据库中所有全天空极光图像进行预处理:将每一幅原始大小为512×512的全天空极光图像用半径为220的圆形区域进行掩模,去掉周围干扰灯光、山脉噪声,掩模成大小为440×440的掩模图像,所有掩模图像构成掩模图像集SM;
(2)输入一幅掩模图像IM,使用改进的Otsu方法对极光光斑区域进行分割,得到光斑区域分割结果RP;
(3)从掩模图像集SM中选择100幅不含极光或几乎不含极光的掩模图像构建纹理阈值训练集SK,使用自适应局部二值模式ALBP特征向量提取算法,提取纹理阈值训练集SK中每一幅图像的ALBP特征向量,构成ALBP特征向量集A={αi},其中αi表示纹理阈值训练集SK中第i幅掩模图像的ALBP特征向量;
(4)对纹理阈值训练集SK的ALBP特征向量集A进行训练,得到参考向量R和纹理分割阈值Z;
(5)将掩模图像IM分割成大小为16×16的图像块,构成图像块集X={xi,j},提取每一块的ALBP特征向量,构成ALBP特征向量集B={βi,j},其中xi,j表示掩模图像IM中第i行第j列的图像块,βi,j表示图像块xi,j的ALBP特征向量;
(6)计算ALBP特征向量βi,j与参考向量R的相似度Si,j:
其中X2(βi,j,R)表示使用Chi-square统计量计算ALBP特征向量βi,j与参考向量R之间的相似度,C表示ALBP特征向量的维数共有C维,l表示第l维,βi,j(l)表示ALBP特征向量的第l维向量,R(l)表示参考向量R的第l维向量;
(7)将相似度Si,j与纹理分割阈值Z进行比较,当相似度Si,j大于或等于纹理分割阈值Z,则图像块xi,j为极光光线区域,否则图像块xi,j为背景天空区域,得到掩模图像IM的光线区域分割结果RT;
(8)对光斑区域分割结果RP和光线区域分割结果RT求并集,得到掩模图像IM的完整分割结果RA,求光斑区域分割结果RP和光线区域分割结果RT的交集,得到光斑区域分割结果RP和光线区域分割结果RT的重合部分RX,将该重合部分RX去掉,得到修正后的光线区域分割结果R′T=RT-RX;
(9)根据极光区域的完整分割结果RA、修正后的光线区域分割结果R′T和光斑区域的分割结果RP,计算掩模图像IM的极光占空比参数:OA,OT,OP;
其中:OA是完整极光区域的占空比参数,表示掩模图像IM中以各种形态出现的极光在整个天空背景中所占比例,(i,j)是掩模图像IM中第i行第j列的坐标,(i,j)∈RM表示只选择在圆形区域RM内的坐标(i,j),p(i,j)是坐标(i,j)所对应的像素,yA(i,j)表示像素p(i,j)是否属于极光区域的完整分割结果RA,如果像素p(i,j)属于完整分割结果RA,则yA(i,j)的值为1,否则yA(i,j)的值为0,N′是圆形区域RM中像素总数;
其中:OT表示极光光线区域的占空比参数,是掩模图像IM中以光线形态所呈现的极光在整个天空背景中所占比例,yT(i,j)用于判断像素p(i,j)是否属于光线区域分割结果R′T,如果像素p(i,j)属于光线区域分割结果R′T,则yT(i,j)的值为1,否则yT(i,j)的值为0;
其中:OP是极光光斑区域的占空比参数,表示掩模图像IM中以光斑或光带形态出现的极光在整个天空背景中所占比例,yP(i,j)表示像素p(i,j)是否属于光斑区域分割结果RP,如果像素p(i,j)属于光斑区域分割结果RP,则yP(i,j)的值为1,否则yP(i,j)的值为0。
本发明与已有的极光图像分割算法相比,具有以下优点:
(1)本发明通过前后背景的灰度特征确定光斑区域分割阈值,无需光斑区域的形状特征或边界特征,对于无明显形状或者边界模糊的光斑,能够实现精确的分割,从而有效降低了光斑区域占空比参数的误差;
(2)本发明不仅考虑到极光光斑区域的分割,而且充分考虑到在多数极光图像中频繁出现的光线区域,针对光线区域特殊的形态特征,提出通过光线区域与背景天空区域纹理结构差异来实现极光光线区域的分割,弥补了现有方法在极光光线区域分割方法的缺失,提高了完整极光区域占空比参数的准确性;
(3)仿真结果表明,与现有极光分割技术相比,本发明根据极光在天空所呈现的不同形态采用相应的分割方法,能够更加细致准确的将极光光斑区域和光线区域从背景天空区域中分离出来,有效降低了占空比参数的误差。
本发明的技术过程和效果可结合以下附图详细说明。
附图说明
图1是本发明全天空极光图像占空比参数的提取总流程图;
图2是本发明中对光斑区域分割的子流程图;
图3是本发明中对光线区域分割的子流程图;
图4是本发明与现有方法对含光斑和光线的弧状极光仿真分割的结果比较图;
图5是本发明与现有方法对含光斑和光线的热点冕状极光仿真分割的结果比较图;
图6是本发明与现有方法对含光斑和光线的帷幔冕状极光仿真分割的结果比较图;
图7是本发明与现有方法对只含光线的帷幔冕状极光仿真分割的结果比较图;
图8是本发明与现有方法对含光斑和光线的辐射冕状极光仿真分割的结果比较图;
图9是本发明与现有方法对只含光线的辐射冕状极光仿真分割的结果比较图。
具体实施方式
参照图1,本发明全天空极光图像占空比参数的提取方法主要包括四个阶段:图像预处理、光斑区域分割、光线区域分割和占空比参数计算,具体步骤如下:
步骤1:对数据库中所有全天空极光图像进行预处理:将每一幅原始大小为512×512的全天空极光图像用半径为220的圆形区域进行掩模,去掉周围干扰灯光、山脉噪声,掩模成大小为440×440的掩模图像,所有掩模图像构成掩模图像集SM。
步骤2:参照图2,计算掩模图像IM中圆形区域RM内灰度不同像素的发生概率,确定光斑区域最优分割阈值G*,通过与最优光斑区域最优分割阈值G*的比较,得到光斑区域的分割结果。
2.1)计算圆形区域RM内灰度不同像素的发生概率
2.1.1)只保留掩模图像IM中圆形区域RM,计算该圆形区域内像素总数N′:
N′=N-(c2-π(c/2)2)
其中:N是掩模图像IM中像素总数,c是掩模图像IM的边长,即圆形区域RM的直径,c2-π(c/2)2是圆形区域RM外四个角中像素总数,这四个角中像素灰度均为0;
2.1.2)计算圆形区域RM中灰度为0的像素个数n′0:
n′0=n0-(c2-π(c/2)2)
其中:n0是掩模图像IM中灰度为0的像素个数;
2.1.3)根据圆形区域RM内像素总数N′和灰度为0的像素个数n′0,计算灰度为0的像素的发生概率g0:
2.1.4)根据圆形区域RM内像素总数N′和灰度为k的像素的个数nk,计算灰度为k的像素的发生概率gk:
其中:M是圆形区域RM内灰度的最大值;
2.2)根据不同灰度的像素在圆形区域RM内发生的概率,使用Otsu方法计算前景类和背景类像素的最优分割阈值G*:
2.2.1)假设G是圆形区域RM中前景类像素和背景类像素的分割阈值,设G初值为0,假设max是前景类与背景类之间的最大类间方差,将max初始化为0;
2.2.2)在圆形区域RM中,将所有像素分为两类,灰度大于或等于分割阈值G的像素,被划分为前景类像素,灰度小于分割阈值G的像素,则被划分为背景类像素,其属于前景类的像素和属于背景类的像素的发生概率分别为:
其中pB是背景类像素的发生概率,pF是前景类像素的发生概率,k表示像素的灰度,M是圆形区域RM内灰度的最大值;
2.2.4)计算前景类和背景类之间的类间方差σ2:
σ2=pF(mF-m)2+pB(mB-m)2
将类间方差σ2与最大类间方差max进行对比,如果σ2大于max,则将σ2的值赋值给最大类间方差max,并且将分割阈值G赋值给最优分割阈值G*,否则,最大类间方差max和最优分割阈值G*均保持不变;
2.2.5)给分割阈值G加1,即G′=G+1,将G′与圆形区域RM中灰度最大值M相比较,如果G′小于或等于灰度最大值M,则将G′作为新的分割阈值带入步骤2.2.2);如果G′大于灰度最大值M,则循环完毕,得到最优分割阈值G*;
2.3)根据最优分割阈值G*,完成极光光斑区域分割:将掩模图像IM中每个像素与光斑分割阈值G*进行比较,如果大于或等于G*,则将该像素划分为前景类,如果小于G*则该像素被划分为背景类,得到掩模图像IM的光斑分割结果RP。
步骤3:参照图3,对特征训练集ST进行训练,构建主要概率模式集P,根据主要概率模式集P,提取ALBP特征向量,确定参考向量R和纹理分割阈值Z,根据纹理分割阈值Z,得到光线区域的分割结果RT。
3.1)构建主要概率模式集P:
3.1.1)从掩模图像集SM中选择100幅含有大量光线区域的掩模图像构成特征训练集ST,对特征训练集ST中每一幅掩模图像从左上角开始,按从左到右、从上到下的顺序,取大小为5×5的正方形邻域作为处理单元,对于每个处理单元,以中心像素的灰度作为阈值,邻域中像素的灰度与中心像素灰度进行对比,如果邻域像素的灰度大于中心像素的灰度,则该邻域像素被置为1,否则置0,邻域的所有像素转换为一串0~1交替的二进制序列,为二进制序列中每个元素分配一个权重因子2i,则该二进制序列转换为一个确切的十进制数,即为中心像素的LBP特征向量:
其中:Q表示邻域中元素个数,取值为16,D表示方形邻域的边长,取值为5,i表示邻域中第i个像素,pi表示邻域中第i个像素的灰度,pc表示中心像素灰度值,bi表示邻域中第i个像素的灰度pi是否大于或等于中心像素灰度pc,当bi为1时表示邻域中第i个像素的灰度pi大于或等于中心像素灰度pc,bi为0表示邻域中第i个像素的灰度pi小于中心像素灰度pc;
根据LBP特征向量,提取旋转不变LBP特征向量:
LBPri(Q,D)=fm(fc(LBP(Q,D),j)),j=0,1,...Q-1
其中:fc(LBP(Q,D),j)表示二进制序列LBP(Q,D)顺时针旋转j次,j取值为从0到Q-1的整数,fn(fc(LBP(Q,D),j))表示从所有取值中选择最小值;
3.1.2)将特征训练集ST中所有掩模图像的旋转不变LBP特征向量取均值,得到平均旋转不变LBP特征向量V;
3.1.3)按照模式发生概率从大到小的顺序,对平均旋转不变LBP特征向量V进行排序得到排序后的平均旋转不变LBP特征向量V′,选择该向量V′中的前C个模式,这C个模式的概率值之和Sum满足大于或等于90%,用这C个模式组成主要概率模式集P;
3.2)对于输入的掩模图像I,提取I的旋转不变LBP特征向量rM,根据主要概率模式集P,保留rM中与其对应的C个模式及其概率值,即为掩模图像I的ALBP特征向量;
3.3)确定参考向量R和光线区域分割阈值Z:
3.3.1)掩模图像集SM中选择100幅不含极光或几乎不含极光的掩模图像构建纹理阈值训练集SK,使用ALBP特征向量提取算法,提取纹理阈值训练集SK中每一幅图像的ALBP特征向量,构成ALBP特征向量集A={αi},其中αi表示纹理阈值训练集SK中第i幅掩模图像的ALBP特征向量;
对该训练集SK中所有掩模图像的ALBP特征求平均值,得到参考向量R:
其中:NR表示纹理阈值训练集SK中掩模图像的数量,NR为100;
3.3.2)将训练集中每一幅掩模图像分割为16×16大小的块,对每个块提取ALBP特征向量,计算每个块ALBP特征向量与参考向量R之间相似度:
其中:Wi,j表示第i幅图像第j个块的ALBP特征向量,l是ALBP特征向量中的第l维,Wi,j(l)表示ALBP特征向量Wi,j的第l维向量,R(l)表示参考向量R的第l维向量,C是ALBP特征向量的维数;
3.3.3)从所有块的ALBP特征向量与参考向量R之间的相似度Li,j中找到最大值,即为纹理分割阈值:
3.4)根据光线区域分割阈值Z,得到光线区域分割结果RT:
3.4.1)将掩模图像IM分割成大小为16×16的图像块,构成图像块集X={xi,j},提取每一块的ALBP特征向量,构成ALBP特征向量集B={βi,j},其中xi,j表示掩模图像IM中第i行第j列的图像块,βi,j表示图像块xi,j的ALBP特征向量;
3.4.2)计算ALBP特征向量βi,j与参考向量R的相似度Si,j:
其中:X2(βi,j,R)表示使用Chi-square统计量计算ALBP特征向量βi,j与参考向量R之间的相似度,C表示ALBP特征向量的维数共有C维,l表示第l维,βi,j(l)表示ALBP特征向量的第l维向量,R(l)表示参考向量R的第l维向量;
3.4.3)将相似度Si,j与纹理分割阈值Z进行比较,当相似度Si,j大于或等于纹理分割阈值Z,则图像块xi,j为极光光线区域,否则图像块xi,j为背景天空区域,得到掩模图像IM的光线区域分割结果RT。
步骤4.根据光斑区域、光线区域和完整极光区域的分割结果,计算占空比参数。
4.1)对光斑区域分割结果RP和光线区域分割结果RT求并集,得到掩模图像IM的完整分割结果RA,求光斑区域分割结果RP和光线区域分割结果RT的交集,得到光斑区域分割结果RP和光线区域分割结果RT的重合部分RX,将该重合部分RX去掉,得到修正后的光线区域分割结果:R’T=RT-RX;
4.2)计算占空比参数
根据极光区域的完整分割结果RA、修正后的光线区域分割结果R′T和光斑区域的分割结果RP,计算掩模图像IM的极光占空比参数:OA,OT,OP;
其中:OA是完整极光区域的占空比参数,表示掩模图像IM中以各种形态出现的极光在整个天空背景中所占比例,(i,j)是掩模图像IM中第i行第j列的坐标,(i,j)∈RM表示只选择在圆形区域RM内的坐标(i,j),p(i,j)是坐标(i,j)所对应的像素,yA(i,j)表示像素p(i,j)是否属于极光区域的完整分割结果RA,如果像素p(i,j)属于完整分割结果RA,则yA(i,j)的值为1,否则yA(i,j)的值为0,N′是圆形区域RM中像素总数;
其中:OT表示极光光线区域的占空比参数,是掩模图像IM中以光线形态所呈现的极光在整个天空背景中所占比例,yT(i,j)用于判断像素p(i,j)是否属于光线区域分割结果R′T,如果像素p(i,j)属于光线区域分割结果R′T,则yT(i,j)的值为1,否则yT(i,j)的值为0;
其中:OP是极光光斑区域的占空比参数,表示掩模图像IM中以光斑或光带形态出现的极光在整个天空背景中所占比例,yP(i,j)表示像素p(i,j)是否属于光斑区域分割结果RP,如果像素p(i,j)属于光斑区域分割结果RP,则yP(i,j)的值为1,否则yP(i,j)的值为0。
本发明的优点可通过以下仿真实验进一步说明:
本发明所使用的数据来自2003年12月到2004年1月由北极黄河站所采集的全天空极光图像。为了验证本发明的有效性,仿真实验所采用的数据均经过中国极地中心的专家进行人工标记和分割,便于本发明分割仿真的结果与专家分割结果进行比较。
本发明在大量全天空极光图像上进行了测试实验,其中包括弧状极光、帷幔冕状极光、热点冕状极光和辐射冕状极光,并且每一种类型都选择多幅含有不同形态极光的图像,以对各种类型极光的不同形态进行分割仿真,来验证本发明的有效性。
本发明与现有Fuzzy logic和Isolable-contour map方法在相同的数据集上将极光区域从天空背景区域中分割出来,对三种方法分割仿真的结果分别进行:以人眼感知为评分依据的主观视觉评价实验和以错误率γ为评价依据的客观数据评价。
实验1:主观视觉评价
由于人眼非常敏感,能够观察到两幅图之间最细微的差别,因此人眼对分割结果的评价非常重要。在本实验中,邀请12人对全天空极光图像分割仿真的结果进行评分,由于极光图像不同于自然图像,评分人员是否具有专业背景知识对分割仿真结果的评价有一定影响,因此实验由两组人员完成,专家组由6位具有极光背景知识的专家组成,无经验组由6位没有专业背景知识的普通人组成。对分割仿真的结果的评价采用评分的形式来实现:
其中:U表示对分割仿真的结果的评价标准,分数越高表示对分割仿真的结果越满意。
对多弧状极光、热点冕状极光、帷幔冕状极光和辐射冕状极光四种类型,每类100幅图像,分别使用本发明方法与现有Fuzzy logic和Isolable-contour map方法进行分割仿真。分割仿真的结果如图4所示,其中:图4是本发明与现有方法对含光斑和光线的弧状极光分割仿真的结果,图5是本发明与现有方法对含光斑和光线的热点冕状极光分割仿真的结果,图6是本发明与现有方法对含光斑和光线的帷幔冕状极光分割仿真的结果,图7是本发明与现有方法对只含光线的帷幔冕状极光分割仿真的结果,图8是本发明与现有方法对含光斑和光线的辐射冕状极光分割仿真的结果,图9是本发明与现有方法对只含光线的辐射冕状极光分割仿真的结果。
表1.专家组评价结果
表2.无经验组评价结果
两组人员对分割仿真的结果按评价标准U进行评分,专家组评价结果如表1,无经验组评价结果如表2。
从表1和表2可看出,对于多弧状极光仿真分割的效果,两组人员对本发明的评分略比Fuzzy logic和Isolable-contour map评分高,这是因为多弧状极光中所出现的极光形态主要以明亮的光斑和光带为主,三种方法均能很好的将其分割出来,但是有些多弧状极光中还会出现少量光线区域,Fuzzy logic和Isolable-contour map无法将这部分分离出来,而本发明可将这部分成功的分离出来,分割仿真的结果如图4所示,其中:图4(a)是待分割的含有光斑和光线区域的弧状极光,图4(b)是Fuzzy logic方法分割仿真的结果,图4(c)是Isolable-contour map方法分割仿真的结果,图4(d)是本发明分割仿真的结果。
对于热点冕状极光、辐射冕状极光和帷幔冕状极光,无论是专家组还是无经验组,对三种方法的分割仿真结果的评价中,本发明的评分都明显高于Fuzzy logic和Isolable-contour map两种方法,这是由于在三种冕状极光中光斑区域的边界较为模糊,而且出现了大量的光线区域,本发明使用前景像素与背景像素的灰度差异作为分割依据,对光斑区域的边缘和形状没有特殊要求,对于边缘模糊或没有明显形状的光斑,本发明也能够很好的进行分割,本发明还实现了现有方法没有考虑到的极光光线区域的分割,因此本发明仿真分割的效果较之于Fuzzy logic和Isolable-contour map更加精确。对三种冕状极光中所包含的典型极光形态的分割仿真结果如图5-9所示:
图5是含光斑和光线的热点冕状极光分割仿真的结果,其中:图5(a)是待分割的含有光斑和光线区域的热点冕状极光,图5(b)是Fuzzy logic方法分割仿真的结果,图5(c)是Isolable-contour map方法分割仿真的结果,图5(d)是本发明分割仿真的结果。
图6是含光斑和光线的帷幔冕状极光分割仿真的结果,其中:图6(a)是待分割的含有光斑和光线区域的帷幔冕状极光,图6(b)是Fuzzy logic方法分割仿真的结果,图6(c)是Isolable-contour map方法分割仿真的结果,图6(d)是本发明分割仿真的结果。
图7是只含光线的帷幔冕状极光分割仿真的结果,其中:图7(a)是待分割的只含光线的辐射冕状极光,图7(b)是Fuzzy logic方法分割仿真的结果,图7(c)是Isolable-contourmap方法分割仿真的结果,图7(d)是本发明分割仿真的结果。
图8是含光斑和光线的辐射冕状极光分割仿真的结果,其中:图8(a)是待分割的含有光斑和光线区域的辐射冕状极光,图8(b)是Fuzzy logic方法分割仿真的结果,图8(c)是Isolable-contour map方法分割仿真的结果,图8(d)是本发明分割仿真的结果。
图9是只含光线的辐射冕状极光分割仿真的结果,其中:图9(a)是待分割的只含光线的辐射冕状极光,图9(b)是Fuzzy logic方法分割仿真的结果,图9(c)是Isolable-contourmap方法分割仿真的结果,图9(d)是本发明分割仿真的结果。
实验二:客观数据评价
为了客观的衡量分割仿真的结果,将本发明对四类极光的分割仿真的结果与专家手工分割的结果进行对比。
由于极光本身所具有的透明且边缘不清晰的特征,即使是专家手工分割也不可能做到完全精确,为了更加客观的对分割效果进行评价做出以下约定:将专家分割的结果和分割仿真的结果都划分成2×2大小的块,在每个小块中,只要有一个白点就认为该区域是极光区域,如果小块中一个白点都没有,则认为该区域是天空区域。对分割仿真的结果进行客观评价采用下面公式表示:
其中:γ是分割仿真的结果的错误率,γa是专家划分为极光区域但仿真分割的结果划分为天空区域的错误块个数,γs是专家划分为天空区域但仿真分割的结果划分为极光区域的错误块个数,n是一幅图像中所有的块个数。最终的实验结果见表3。
表3.错误率(%)
从表3可看出,本发明仿真分割的结果的错误率明显低于Fuzzy logic和Isolable-contour map两种方法。其中:多弧状极光主要由明显的光带和少量光线组成,因此Fuzzy logic和Isolable-contour map能够检测到大部分极光区域,只有少量光线区域检测不完全,因此本发明仿真分割的结果的错误率略低于Fuzzy logic和Isolable-contour map;但对于热点、帷幔和辐射冕状极光,光线在整个极光区域中占了很大部分,因此Fuzzylogic和Isolable-contour map未检测到的极光区域增多,错误率也随之增加,本发明使用与极光光线区域形态相对应的方法,通过纹理结构的差异来进行分割,仿真分割结果的错误率远远低于Fuzzy logic和Isolable-contour map两种方法。
综上,本发明方法对极光在全天空图像上所呈现的不同形态采用相应的方法进行分割,提高了极光分割结果的准确性,降低了极光占空比参数的误差。
Claims (3)
1.一种全天空极光图像占空比参数的提取方法,包括如下步骤:
(1)对数据库中所有全天空极光图像进行预处理:将每一幅原始大小为512×512的全天空极光图像用半径为220的圆形区域进行掩模,去掉周围干扰灯光、山脉噪声,掩模成大小为440×440的掩模图像,所有掩模图像构成掩模图像集SM;
(2)输入一幅掩模图像IM,使用改进的Otsu方法对极光光斑区域进行分割,得到光斑区域分割结果RP:
(2a)只保留掩模图像IM中圆形区域RM,计算该圆形区域内像素总数:
N'=N-(c2-π(c/2)2)
其中:N是掩模图像IM中像素总数,c是掩模图像IM的边长,即圆形区域RM的直径,c2-π(c/2)2是圆形区域RM外四个角中像素总数,这四个角中像素灰度均为0;
(2b)计算圆形区域RM中灰度为0的像素个数n′0:
n′0=n0-(c2-π(c/2)2)
其中:n0是掩模图像IM中灰度为0的像素个数;
(2c)根据圆形区域RM内像素总数N'和灰度为0的像素个数n′0,计算灰度为0的像素的发生概率:
(2d)根据圆形区域RM内像素总数N'和灰度为k的像素的个数nk,计算灰度为k的像素的发生概率:
其中:M是圆形区域RM内灰度的最大值;
(2e)根据灰度为0的像素发生的概率g0和灰度为k的像素的发生概率gk,使用Otsu方法计算前景类和背景类像素的最优分割阈值G*;
(2f)将掩模图像IM中每个像素与光斑分割阈值G*进行比较,如果大于或等于G*,将该像素划分为极光光斑区域,否则将该像素划分为背景天空区域,得到掩模图像IM的光斑分割结果RP;
(3)从掩模图像集SM中选择100幅不含极光或几乎不含极光的掩模图像构建纹理阈值训练集SK,使用自适应局部二值模式ALBP特征向量提取算法,提取纹理阈值训练集SK中每一幅图像的ALBP特征向量,构成ALBP特征向量集A={αi},其中αi表示纹理阈值训练集SK中第i幅掩模图像的ALBP特征向量;
(4)对纹理阈值训练集SK的ALBP特征向量集A进行训练,得到参考向量R和纹理分割阈值Z;
(5)将掩模图像IM分割成大小为16×16的图像块,构成图像块集X={xi,j},提取每一块的ALBP特征向量,构成ALBP特征向量集B={βi,j},其中xi,j表示掩模图像IM中第i行第j列的图像块,βi,j表示图像块xi,j的ALBP特征向量;
(6)计算ALBP特征向量βi,j与参考向量R的相似度Si,j:
其中X2(βi,j,R)表示使用Chi-square统计量计算ALBP特征向量βi,j与参考向量R之间的相似度,C表示ALBP特征向量的维数共有C维,l表示第l维,βi,j(l)表示ALBP特征向量的第l维向量,R(l)表示参考向量R的第l维向量;
(7)将相似度Si,j与纹理分割阈值Z进行比较,当相似度Si,j大于或等于纹理分割阈值Z,则图像块xi,j为极光光线区域,否则图像块xi,j为背景天空区域,得到掩模图像IM的光线区域分割结果RT;
(8)对光斑区域分割结果RP和光线区域分割结果RT求并集,得到掩模图像IM的完整分割结果RA,求光斑区域分割结果RP和光线区域分割结果RT的交集,得到光斑区域分割结果RP和光线区域分割结果RT的重合部分RX,将该重合部分RX去掉,得到修正后的光线区域分割结果R′T=RT-RX;
(9)根据极光区域的完整分割结果RA、修正后的光线区域分割结果R′T和光斑区域的分割结果RP,计算掩模图像IM的极光占空比参数:OA,OT,OP;
其中:OA是完整极光区域的占空比参数,表示掩模图像IM中以各种形态出现的极光在整个天空背景中所占比例,(i,j)是掩模图像IM中第i行第j列的坐标,(i,j)∈RM表示只选择在圆形区域RM内的坐标(i,j),p(i,j)是坐标(i,j)所对应的像素,yA(i,j)表示像素p(i,j)是否属于极光区域的完整分割结果RA,如果像素p(i,j)属于完整分割结果RA,则yA(i,j)的值为1,否则yA(i,j)的值为0,N′是圆形区域RM中像素总数;
其中:OT表示极光光线区域的占空比参数,是掩模图像IM中以光线形态所呈现的极光在整个天空背景中所占比例,yT(i,j)用于判断像素p(i,j)是否属于光线区域分割结果R′T,如果像素p(i,j)属于光线区域分割结果R′T,则yT(i,j)的值为1,否则yT(i,j)的值为0;
其中:OP是极光光斑区域的占空比参数,表示掩模图像IM中以光斑或光带形态出现的极光在整个天空背景中所占比例,yP(i,j)表示像素p(i,j)是否属于光斑区域分割结果RP,如果像素p(i,j)属于光斑区域分割结果RP,则yP(i,j)的值为1,否则yP(i,j)的值为0。
2.根据权利要求1所述的全天空极光图像占空比参数的提取方法,其中步骤(3)所述的使用自适应局部二值模式ALBP特征向量提取算法,提取纹理阈值训练集SK中每一幅图像的ALBP特征向量,按如下步骤进行:
(3a)构建主要概率模式集P:
首先,从掩模图像集SM中选择100幅含有大量光线区域的掩模图像构成特征训练集ST,对特征训练集ST中每一幅掩模图像提取旋转不变LBP特征;
其次,将特征训练集ST中所有掩模图像的旋转不变LBP特征向量取均值,得到平均旋转不变LBP特征向量V;
最后,按照模式发生概率从大到小的顺序,对平均旋转不变LBP特征向量V进行排序得到排序后的平均旋转不变LBP特征向量V′,选择该向量V'中前C个模式,这C个模式的概率值之和满足大于或等于90%,用这C个模式组成主要概率模式集P;
(3b)对于输入的掩模图像I,提取I的旋转不变LBP特征向量rM,根据主要概率模式集P,保留rM中与其对应的C个模式及其概率值,即为掩模图像I的ALBP特征向量。
3.根据权利要求1所述的全天空极光图像占空比参数的提取方法,其中步骤(4)所述的对纹理阈值训练集SK的ALBP特征向量集A进行训练,按如下步骤进行:
(4a)提取纹理阈值训练集SK中每幅掩模图像的ALBP特征αi,并对该训练集SK中掩模图像的ALBP特征求平均值,得到参考向量R:
其中:NR表示纹理阈值训练集SK中掩模图像的数量,NR为100;
(4b)将训练集中每一幅掩模图像分割为16×16大小的块,对每个块提取ALBP特征向量,计算每个块的ALBP特征向量与参考向量R之间相似度:
其中:Wi,j表示第i幅图像第j个块的ALBP特征向量,l是ALBP特征向量中的第l维,Wi,j(l)表示ALBP特征向量Wi,j的第l维向量,R(l)表示参考向量R的第l维向量,C是ALBP特征向量的维数;
(4c)从所有块的ALBP特征向量与参考向量R之间的相似度Li,j中找到最大值,即为纹理分割阈值:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201110047076 CN102129576B (zh) | 2011-02-28 | 2011-02-28 | 全天空极光图像占空比参数的提取方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 201110047076 CN102129576B (zh) | 2011-02-28 | 2011-02-28 | 全天空极光图像占空比参数的提取方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102129576A CN102129576A (zh) | 2011-07-20 |
CN102129576B true CN102129576B (zh) | 2012-12-05 |
Family
ID=44267656
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 201110047076 Expired - Fee Related CN102129576B (zh) | 2011-02-28 | 2011-02-28 | 全天空极光图像占空比参数的提取方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102129576B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103632166A (zh) * | 2013-12-04 | 2014-03-12 | 西安电子科技大学 | 基于融合显著信息的潜在主题极光图像分类方法 |
WO2017221860A1 (ja) * | 2016-06-21 | 2017-12-28 | 日本電気株式会社 | 領域識別装置と領域識別方法および領域識別プログラム |
CN109919859B (zh) * | 2019-01-25 | 2021-09-07 | 暨南大学 | 一种户外场景图像去雾增强方法、计算设备及其存储介质 |
CN110991485B (zh) * | 2019-11-07 | 2023-04-14 | 成都傅立叶电子科技有限公司 | 一种目标检测算法的性能评估方法及系统 |
CN112819782B (zh) * | 2021-01-29 | 2023-03-24 | 菱王电梯有限公司 | 一种自学习的轿厢视觉分析方法 |
CN113298768B (zh) * | 2021-05-20 | 2022-11-08 | 山东大学 | 棉花检测分割计数方法及系统 |
CN114677766B (zh) * | 2022-05-26 | 2023-02-14 | 中国科学院西安光学精密机械研究所 | 基于无镜头成像技术的手语识别方法、系统及交互设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101408985A (zh) * | 2008-09-22 | 2009-04-15 | 北京航空航天大学 | 一种圆形光斑亚像素中心提取方法及装置 |
CN101719279A (zh) * | 2009-12-23 | 2010-06-02 | 西北工业大学 | 星空图像背景运动估计方法 |
-
2011
- 2011-02-28 CN CN 201110047076 patent/CN102129576B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101408985A (zh) * | 2008-09-22 | 2009-04-15 | 北京航空航天大学 | 一种圆形光斑亚像素中心提取方法及装置 |
CN101719279A (zh) * | 2009-12-23 | 2010-06-02 | 西北工业大学 | 星空图像背景运动估计方法 |
Non-Patent Citations (4)
Title |
---|
《Patchy Aurora Image Segmentation Based on ALBP and Block Threshold》;Rong Fu, Xinbo Gao, Yongjun Jian;《2010 International Conference on Pattern Recognition》;20100826;3380-3383 * |
《基于表象和纹理的全天空极光图像分类》;左红兵;《西安电子科技大学硕士学位论文》;20090701;7-14, 37-43 * |
Rong Fu, Xinbo Gao, Yongjun Jian.《Patchy Aurora Image Segmentation Based on ALBP and Block Threshold》.《2010 International Conference on Pattern Recognition》.2010,3380-3383. |
左红兵.《基于表象和纹理的全天空极光图像分类》.《西安电子科技大学硕士学位论文》.2009,7-14, 37-43. |
Also Published As
Publication number | Publication date |
---|---|
CN102129576A (zh) | 2011-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102129576B (zh) | 全天空极光图像占空比参数的提取方法 | |
CN109816012A (zh) | 一种融合上下文信息的多尺度目标检测方法 | |
CN103049763B (zh) | 一种基于上下文约束的目标识别方法 | |
CN107730515B (zh) | 基于区域增长和眼动模型的全景图像显著性检测方法 | |
CN109961049A (zh) | 一种复杂场景下香烟品牌识别方法 | |
CN103208001B (zh) | 结合形状自适应邻域和纹理特征提取的遥感图像处理方法 | |
CN110060235A (zh) | 一种基于深度学习的甲状腺结节超声图像分割方法 | |
CN104951799B (zh) | 一种sar遥感影像溢油检测识别方法 | |
CN108053417A (zh) | 一种基于混合粗分割特征的3DU-Net网络的肺分割装置 | |
CN106056118A (zh) | 一种用于细胞的识别计数方法 | |
CN105354865A (zh) | 多光谱遥感卫星影像自动云检测方法及系统 | |
CN104134234A (zh) | 一种全自动的基于单幅图像的三维场景构建方法 | |
CN104408458B (zh) | 基于射线补全区域图和特征学习的sar图像分割方法 | |
CN103020971A (zh) | 从图像中自动分割目标对象的方法 | |
CN105574063A (zh) | 基于视觉显著性的图像检索方法 | |
CN104835196B (zh) | 一种车载红外图像彩色化三维重建方法 | |
CN102902956A (zh) | 一种地基可见光云图识别处理方法 | |
CN107945200A (zh) | 图像二值化分割方法 | |
CN103984963B (zh) | 一种高分辨率遥感图像场景分类方法 | |
CN107369158A (zh) | 基于rgb‑d图像的室内场景布局估计及目标区域提取方法 | |
CN104156733A (zh) | 一种基于多尺度结构特征的地基云状识别方法 | |
CN102945567A (zh) | 室内场景的分类与重建方法及系统 | |
CN109447111A (zh) | 一种基于子类训练样本的遥感监督分类方法 | |
CN106127735A (zh) | 一种设施蔬菜边缘清晰类叶面病斑分割方法及装置 | |
CN106875481A (zh) | 一种三维可视化遥感影像地表分类模型的制作方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20121205 Termination date: 20180228 |
|
CF01 | Termination of patent right due to non-payment of annual fee |