CN106228197A - 一种基于自适应极限学习机的卫星图像云量识别方法 - Google Patents
一种基于自适应极限学习机的卫星图像云量识别方法 Download PDFInfo
- Publication number
- CN106228197A CN106228197A CN201610678002.5A CN201610678002A CN106228197A CN 106228197 A CN106228197 A CN 106228197A CN 201610678002 A CN201610678002 A CN 201610678002A CN 106228197 A CN106228197 A CN 106228197A
- Authority
- CN
- China
- Prior art keywords
- cloud
- neutral net
- learning machine
- extreme learning
- sample
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
- G06F18/24133—Distances to prototypes
- G06F18/24143—Distances to neighbourhood prototypes, e.g. restricted Coulomb energy networks [RCEN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computational Linguistics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Evolutionary Biology (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于自适应极限学习机的卫星图像云量识别方法,首先利用云图历史数据训练极限学习机神经网络,然后通过KNN算法找出测试样本的k个近邻,将k个近邻的算术平均值作为神经网络的输入,得到分类结果,最后采用空间相关方法计算云图上的总云量。本发明克服了传统技术中神经网络的输入数据零散、结果误差大的缺陷。
Description
技术领域
本发明属于云图像处理技术领域,特别涉及了一种基于自适应极限学习机的卫星图像云量识别方法。
背景技术
云是大气环境最明显、最常见的表现形式,因此受到广大气象研究者的关注。在天气预报,气候监测、科学探测、大气遥感和大气气象模型等方面,了解云的分布是至关重要的。传统地面观测可以在一定程度上获得云量,但地面观测点的空间分布和观察时间都受到各种各样条件的限制。气象卫星在观察云量时基本不受时间和空间的限制,可以自由的获得高质量的多层云量分布图。对于提高大气辐射、能源和水循环、大气环境监测、气候分析算法模型的性能,理解总云量的空间分布和时间演变是至关重要的。高分辨率的卫星云图数据可以更清楚地描述云的结构。使用高分辨率卫星数据对于提高气象预报能力和算法模型的性能有着非常重要的实际意义。
基于卫星图像的云检测和云量是获得全球云分布的主要途径。针对不同的卫星和信道特性,已经有很多云检测方法被提出。传统上,这些方法可分为两类:可见光/红外线阈值方法和聚类方法。每个方法也可以通过空间均匀性的知识补充。阈值技术只要包括可见动态阈值,红外线温度阈值,红外线检测器的均匀性。现有的阈值检测方法经常结合上述技术,主要有ISCCP、APOLLO、CLAVR、LDTNLR、CO 2片等方法。聚类方法包括直方图聚类、自适应阈值聚类,动态阈值聚类,动态聚类。利用云的探测技术,获得全球云的分布是研究辐射平衡和全球气候变迁的重要途径。目前,针对云量主要有七种常用方法:ISCCP、CLAVR-1、CLAVR-X、MODIS、UW HIRS、APP和NIR/VIS。云分类方法可以归结为两大类:一类是计算云面积的比例,另一个是利用辐射像素和反射率来计算相等的云量。第一个方法很简单,但结果往往会导致比实际值高;第二方法不适合多层云和迅速变化的云。无论是哪一种计算方法,云分类的精确度取决于云检测的准确性。
由于实际操作条件的限制,目前云检测方法通常采用光谱阈值法。近年来,机器学习算法模型被引入到卫星遥感研究。机器学习技术与传统的方法相比显示出显著优势和发展前景。目前,机器学习算法中,神经网络被认为是一个比较高精度的方法。虽然神经网络在许多方面具有独特的优势,但也存在一些问题。传统的神经网络学习方法使用梯度误差反馈的方法来训练网络,其中有一些不足之处:学习速度慢,迭代复杂,容易陷入局部极小。这些缺陷严重影响了神经网络在云检测中的应用。此外,构建神经网络模型缺乏系统的步骤,如果输入数据是非常零散的,误差会被放大。进而为进行云量的识别造成了干扰。这类问题目前还没有找到相类似的解决方案。
发明内容
为了解决上述背景技术提出的技术问题,本发明旨在提供一种基于自适应极限学习机的卫星图像云量识别方法,克服了传统技术中神经网络的输入数据零散、结果误差大的缺陷。
为了实现上述技术目的,本发明的技术方案为:
一种基于自适应极限学习机的卫星图像云量识别方法,包括以下步骤:
(1)用云图历史数据训练极限学习机神经网络,训练样本Xi=[xi1,xi2,...,xin]作为神经网络训练的输入数据,其中,Xi代表第i个训练样本,i=1,2,…,m,m是训练样本的个数,神经网络的输出是云分类;
(2)针对一个测试样本Q=[q1,q2,...,qn],将它与训练样本Xi=[xi1,xi2,...,xin]比较,计算测试样本Q与各训练样本的欧式距离,通过欧氏距离找出测试样本Q的k个近邻Xq1,Xq2,...,Xqk;
(3)计算测试样本Q的k个近邻Xq1,Xq2,...,Xqk的算术平均值作为训练好的神经网络的输入数据,并根据神经网络输出的分类结果,采用空间相关方法计算总云量。
进一步地,所述极限学习机神经网络存在m个不同的样本(Xi,Yi),i=1,2,...,m,Xi是输入样本,Yi是输出样本,神经网络隐藏层节点的数量为激活函数为g(x),Xi=[xi1,xi2,...,xin]是一个n维向量,Yi=[yi1,yi2,...,yis]是一个s维向量,因此极限学习机神经网络的模型被描述为j=1,2,...,N,j≠i,其中,wi=[wi1,wi2,...,win]T是输入神经元连接第i个隐层神经元的权重向量,bi是第i个隐层神经元的偏置,βi=[βi1,βi2,...βis]是第i个隐层神经元连接输出层神经元的权重向量,oj是第j个输入样本的网络输出值;
极限学习机神经网络训练的目的是使得oj能够无限逼近Yj,设极限学习机神经网络的输出能够无误差逼近输出样本,即就存在βi、wi和bi,使得即记做Hβ=Y,其中,
由于输入神经元和隐层神经元之间的权重向量任意给定,因此寻找最优的β即是极限学习机神经网络的目标,β的估计值为H′是矩阵H的Moore-Penrose广义逆。
进一步地,神经网络输出的云分类结果包括3种:晴空、薄云和厚云。
进一步地,因为神经网络输出的云分类结果有3种,所以设定输出样本Yi是一个3维向量。
进一步地,步骤(3)的具体过程如下:
通过神经网络输出的云分类结果得到厚云像素亮度的下界Icld和晴空像素亮度的上界Iclr,Icld是所有厚云的亮度的最小值,Iclr是所有晴空亮度的最大值,云图上每个像素的云量根据下式求得:
Ac=(I-Iclr)/(Icld-Iclr)
上式中I为单个像素接收机的亮度,最终得到云图上所有像素的总云量。
采用上述技术方案带来的有益效果:
本发明通过自适应极限学习机保证了网络具有良好的泛化性能,采用KNN算法对数据预处理,缩小了输入数据和学习数据之间的误差,采用改进的空间相关方法计算云量,计算结果更加精确。
附图说明
图1是本发明的基本流程图。
具体实施方式
以下将结合附图,对本发明的技术方案进行详细说明。
如图1所示,一种基于自适应极限学习机的卫星图像云量识别方法,包括以下步骤:
步骤1、用云图历史数据训练极限学习机神经网络,训练样本Xi=[xi1,xi2,...,xin]作为神经网络训练的输入数据,其中,Xi代表第i个训练样本,i=1,2,…,m,m是训练样本的个数,神经网络的输出是云分类。
本发明中的极限学习机神经网络由三层简单的非循环处理单元构成,存在m个不同的样本(Xi,Yi),i=1,2,...,m,Xi是输入样本,Yi是输出样本,神经网络隐藏层节点的数量为激活函数为g(x),Xi=[xi1,xi2,...,xin]是一个n维向量,Yi=[yi1,yi2,...,yis]是一个s维向量。本发明中神经网络输出的云分类结果有3种:晴空、薄云和厚云,因此输出样本Yi为3维向量。极限学习机神经网络的模型被描述为其中,wi=[wi1,wi2,...,win]T是输入神经元连接第i个隐层神经元的权重向量,bi是第i个隐层神经元的偏置,βi=[βi1,βi2,...βis]是第i个隐层神经元连接输出层神经元的权重向量,oj是第j个输入样本的网络输出值;
极限学习机神经网络训练的目的是使得oj能够无限逼近Yj,设极限学习机神经网络的输出能够无误差逼近输出样本,即就存在βi、wi和bi,使得即记做Hβ=Y,其中,
由于输入神经元和隐层神经元之间的权重向量任意给定,因此寻找最优的β即是极限学习机神经网络的目标,β的估计值为H′是矩阵H的Moore-Penrose广义逆。
在本实施例中,选取sigmoid函数为神经网络的激活函数g(x)。
步骤2:针对一个测试样本Q=[q1,q2,...,qn],将它与训练样本Xi=[xi1,xi2,...,xin]比较,计算测试样本Q与各训练样本的欧式距离,通过欧氏距离找出测试样本Q的k个近邻Xq1,Xq2,...,Xqk。
构建神经网络模型缺乏系统的步骤,如果输入数据是非常零散的,误差会被放大。本发明使用K近邻的方法和极限学习机相结合,减小误差被放大。
步骤3:计算测试样本Q的k个近邻Xq1,Xq2,...,Xqk的算术平均值作为训练好的神经网络的输入数据,并根据神经网络输出的分类结果,采用空间相关方法计算总云量。
通过上述步骤得出云检测结果,代入云量模型,得出最终云量结果。具体步骤如下:通过神经网络输出的云分类结果得到厚云像素亮度的下界Icld和晴空像素亮度的上界Iclr,Icld是所有厚云的亮度的最小值,Iclr是所有晴空亮度的最大值,此处主要将薄云进行区分。那么卫星图像上所有的像素均可由下式求得:
Ac=(I-Iclr)/(Icld-Iclr)
上式中I为单个像素接收机的亮度。如果计算结果大于1则认为是1,如果计算结果小于0则认为是0。这种情况下,厚云的云量被默认为1,晴朗的天空云量被设置为零。
以上实施例仅为说明本发明的技术思想,不能以此限定本发明的保护范围,凡是按照本发明提出的技术思想,在技术方案基础上所做的任何改动,均落入本发明保护范围之内。
Claims (5)
1.一种基于自适应极限学习机的卫星图像云量识别方法,其特征在于,包括以下步骤:
(1)用云图历史数据训练极限学习机神经网络,训练样本Xi=[xi1,xi2,...,xin]作为神经网络训练的输入数据,其中,Xi代表第i个训练样本,i=1,2,…,m,m是训练样本的个数,神经网络的输出是云分类;
(2)针对一个测试样本Q,将它与训练样本Xi=[xi1,xi2,...,xin]比较,计算测试样本Q与各训练样本的欧式距离,通过欧氏距离找出测试样本Q的k个近邻Xq1,Xq2,...,Xqk;
(3)计算测试样本Q的k个近邻Xq1,Xq2,...,Xqk的算术平均值作为训练好的神经网络的输入数据,并根据神经网络输出的分类结果,采用空间相关方法计算云图上的总云量。
2.根据权利要求1所述一种基于自适应极限学习机的卫星图像云量识别方法,其特征在于:所述极限学习机神经网络存在m个不同的样本(Xi,Yi),i=1,2,...,m,Xi是输入样本,Yi是输出样本,神经网络隐藏层节点的数量为激活函数为g(x),Xi=[xi1,xi2,...,xin]是一个n维向量,Yi=[yi1,yi2,...,yis]是一个s维向量,因此极限学习机神经网络的模型被描述为j=1,2,...,m,j≠i,其中,wi=[wi1,wi2,...,win]T是输入神经元连接第i个隐层神经元的权重向量,bi是第i个隐层神经元的偏置,βi=[βi1,βi2,...βis]是第i个隐层神经元连接输出层神经元的权重向量,oj是第j个输入样本的网络输出值;
极限学习机神经网络训练的目的是使得oj能够无限逼近Yj,设极限学习机神经网络的输出能够无误差逼近输出样本,即就存在βi、wi和bi,使得即记做Hβ=Y,其中,
由于输入神经元和隐层神经元之间的权重向量任意给定,因此寻找最优的β即是极限学习机神经网络的目标,β的估计值为H′是矩阵H的Moore-Penrose广义逆。
3.根据权利要求2所述一种基于自适应极限学习机的卫星图像云量识别方法,其特征在于:神经网络输出的云分类结果包括3种:晴空、薄云和厚云。
4.根据权利要求3所述一种基于自适应极限学习机的卫星图像云量识别方法,其特征在于:因为神经网络输出的云分类结果有3种,所以设定输出样本Yi是一个3维向量。
5.根据权利要求4所述一种基于自适应极限学习机的卫星图像云量识别方法,其特征在于,步骤(3)的具体过程如下:
通过神经网络输出的云分类结果得到厚云像素亮度的下界Icld和晴空像素亮度的上界Iclr,Icld是所有厚云的亮度的最小值,Iclr是所有晴空亮度的最大值,云图上每个像素的云量根据下式求得:
Ac=(I-Iclr)/(Icld-Iclr)
上式中I为单个像素接收机的亮度,最终得到云图上所有像素的总云量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610678002.5A CN106228197A (zh) | 2016-08-15 | 2016-08-15 | 一种基于自适应极限学习机的卫星图像云量识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610678002.5A CN106228197A (zh) | 2016-08-15 | 2016-08-15 | 一种基于自适应极限学习机的卫星图像云量识别方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106228197A true CN106228197A (zh) | 2016-12-14 |
Family
ID=57553225
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610678002.5A Pending CN106228197A (zh) | 2016-08-15 | 2016-08-15 | 一种基于自适应极限学习机的卫星图像云量识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106228197A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107769801A (zh) * | 2017-10-16 | 2018-03-06 | 成都市深思创芯科技有限公司 | 一种基于神经网络的提升射频接收机中频信噪比的方法 |
CN107895136A (zh) * | 2017-08-15 | 2018-04-10 | 东北大学 | 一种煤矿区域识别方法及系统 |
CN108229550A (zh) * | 2017-12-28 | 2018-06-29 | 南京信息工程大学 | 一种基于多粒度级联森林网络的云图分类方法 |
CN109146876A (zh) * | 2018-09-14 | 2019-01-04 | 四川省安全科学技术研究院 | 一种基于高分遥感影像的矿山环境变化检测方法 |
CN110222767A (zh) * | 2019-06-08 | 2019-09-10 | 西安电子科技大学 | 基于嵌套神经网络和栅格地图的三维点云分类方法 |
CN110535486A (zh) * | 2019-08-07 | 2019-12-03 | 东南大学 | 基于超表面神经网络的射频信号直接处理式无线收发机 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102708381A (zh) * | 2012-05-09 | 2012-10-03 | 江南大学 | 融合最小二乘向量机回归学习思想的改进极限学习机 |
CN103699902A (zh) * | 2013-12-24 | 2014-04-02 | 南京信息工程大学 | 一种地基可见光云图的分类方法 |
CN104463252A (zh) * | 2014-12-18 | 2015-03-25 | 南京信息工程大学 | 一种基于自适应极限学习机的地基云分类方法 |
CN104573708A (zh) * | 2014-12-19 | 2015-04-29 | 天津大学 | 组合降采样极限学习机 |
CN105069486A (zh) * | 2015-09-09 | 2015-11-18 | 西安石油大学 | 基于极限学习机的石化设备腐蚀预测方法 |
-
2016
- 2016-08-15 CN CN201610678002.5A patent/CN106228197A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102708381A (zh) * | 2012-05-09 | 2012-10-03 | 江南大学 | 融合最小二乘向量机回归学习思想的改进极限学习机 |
CN103699902A (zh) * | 2013-12-24 | 2014-04-02 | 南京信息工程大学 | 一种地基可见光云图的分类方法 |
CN104463252A (zh) * | 2014-12-18 | 2015-03-25 | 南京信息工程大学 | 一种基于自适应极限学习机的地基云分类方法 |
CN104573708A (zh) * | 2014-12-19 | 2015-04-29 | 天津大学 | 组合降采样极限学习机 |
CN105069486A (zh) * | 2015-09-09 | 2015-11-18 | 西安石油大学 | 基于极限学习机的石化设备腐蚀预测方法 |
Non-Patent Citations (1)
Title |
---|
杨军主编: "《气象卫星及其应用(下)》", 31 October 2012, 北京气象出版社 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107895136A (zh) * | 2017-08-15 | 2018-04-10 | 东北大学 | 一种煤矿区域识别方法及系统 |
CN107769801A (zh) * | 2017-10-16 | 2018-03-06 | 成都市深思创芯科技有限公司 | 一种基于神经网络的提升射频接收机中频信噪比的方法 |
CN107769801B (zh) * | 2017-10-16 | 2019-04-26 | 成都市深思创芯科技有限公司 | 一种基于神经网络的提升射频接收机中频信噪比的方法 |
CN108229550A (zh) * | 2017-12-28 | 2018-06-29 | 南京信息工程大学 | 一种基于多粒度级联森林网络的云图分类方法 |
CN108229550B (zh) * | 2017-12-28 | 2022-02-18 | 南京信息工程大学 | 一种基于多粒度级联森林网络的云图分类方法 |
CN109146876A (zh) * | 2018-09-14 | 2019-01-04 | 四川省安全科学技术研究院 | 一种基于高分遥感影像的矿山环境变化检测方法 |
CN110222767A (zh) * | 2019-06-08 | 2019-09-10 | 西安电子科技大学 | 基于嵌套神经网络和栅格地图的三维点云分类方法 |
CN110222767B (zh) * | 2019-06-08 | 2021-04-06 | 西安电子科技大学 | 基于嵌套神经网络和栅格地图的三维点云分类方法 |
CN110535486A (zh) * | 2019-08-07 | 2019-12-03 | 东南大学 | 基于超表面神经网络的射频信号直接处理式无线收发机 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106228197A (zh) | 一种基于自适应极限学习机的卫星图像云量识别方法 | |
CN112766199B (zh) | 基于自适应多尺度特征提取模型的高光谱图像分类方法 | |
CN109492822B (zh) | 空气污染物浓度时空域关联预测方法 | |
Han et al. | Convolutional neural network for convective storm nowcasting using 3-D Doppler weather radar data | |
CN110287800B (zh) | 一种基于sgse-gan的遥感图像场景分类方法 | |
CN108038445B (zh) | 一种基于多视角深度学习框架的sar自动目标识别方法 | |
Xia et al. | A hybrid method based on extreme learning machine and k-nearest neighbor for cloud classification of ground-based visible cloud image | |
CN108052881A (zh) | 一种实时检测施工现场图像中多类实体对象的方法及设备 | |
CN106096655B (zh) | 一种基于卷积神经网络的光学遥感图像飞机检测方法 | |
CN107491734B (zh) | 基于多核融合与空间Wishart LapSVM的半监督极化SAR图像分类方法 | |
CN107703554A (zh) | 多通道毫米波辐射计温湿廓线反演系统及其反演方法 | |
CN109598220A (zh) | 一种基于多元输入多尺度卷积的人数统计方法 | |
Chen et al. | Agricultural remote sensing image cultivated land extraction technology based on deep learning | |
CN104680151B (zh) | 一种顾及雪覆盖影响的高分辨全色遥感影像变化检测方法 | |
CN112949944B (zh) | 一种基于时空特征的地下水位智能预测方法及系统 | |
CN112016628A (zh) | 一种基于动态多目标预测的空间碎片撞击损伤判读方法 | |
Devisurya et al. | Early detection of major diseases in turmeric plant using improved deep learning algorithm | |
CN116861347A (zh) | 一种基于深度学习模型的磁力异常数据计算方法 | |
CN109977797A (zh) | 基于排序损失函数的一阶目标检测器的优化方法 | |
Li et al. | Classification of tropical cyclone intensity based on deep learning and Yolo V5 | |
Zhang et al. | A transformer‐based coupled ocean‐atmosphere model for ENSO studies | |
Wang et al. | Pedestrian wind flow prediction using spatial-frequency generative adversarial network | |
Liu et al. | Integration transformer for ground-based cloud image segmentation | |
CN116611023A (zh) | 一种基于预测高度抽象特征网络的雷电自动预测方法 | |
Ling et al. | Estimating Winter Wheat LAI Using Hyperspectral UAV Data and an Iterative Hybrid Method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20161214 |