CN114707396A - 一种全天时pm2.5浓度无缝格点数据的近实时生产方法 - Google Patents
一种全天时pm2.5浓度无缝格点数据的近实时生产方法 Download PDFInfo
- Publication number
- CN114707396A CN114707396A CN202111625657.3A CN202111625657A CN114707396A CN 114707396 A CN114707396 A CN 114707396A CN 202111625657 A CN202111625657 A CN 202111625657A CN 114707396 A CN114707396 A CN 114707396A
- Authority
- CN
- China
- Prior art keywords
- data
- time
- aod
- concentration
- seamless
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004519 manufacturing process Methods 0.000 title claims abstract description 27
- 230000004927 fusion Effects 0.000 claims abstract description 17
- 238000004088 simulation Methods 0.000 claims abstract description 13
- 238000012544 monitoring process Methods 0.000 claims abstract description 12
- 238000010801 machine learning Methods 0.000 claims abstract description 11
- 238000005516 engineering process Methods 0.000 claims abstract description 10
- 238000005259 measurement Methods 0.000 claims abstract description 10
- 238000013508 migration Methods 0.000 claims abstract description 9
- 230000005012 migration Effects 0.000 claims abstract description 9
- 238000004458 analytical method Methods 0.000 claims abstract description 8
- 238000000034 method Methods 0.000 claims description 20
- 239000011159 matrix material Substances 0.000 claims description 18
- 238000002310 reflectometry Methods 0.000 claims description 14
- 238000012937 correction Methods 0.000 claims description 11
- 238000007637 random forest analysis Methods 0.000 claims description 7
- 239000005427 atmospheric aerosol Substances 0.000 claims description 5
- 238000004422 calculation algorithm Methods 0.000 claims description 5
- 238000001228 spectrum Methods 0.000 claims description 5
- 238000013528 artificial neural network Methods 0.000 claims description 4
- 239000008277 atmospheric particulate matter Substances 0.000 claims description 4
- 238000000354 decomposition reaction Methods 0.000 claims description 4
- 238000009826 distribution Methods 0.000 claims description 4
- 230000003068 static effect Effects 0.000 claims description 4
- 238000013213 extrapolation Methods 0.000 claims description 3
- 238000012950 reanalysis Methods 0.000 claims description 3
- 239000000809 air pollutant Substances 0.000 claims description 2
- 231100001243 air pollutant Toxicity 0.000 claims description 2
- 238000012512 characterization method Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 claims description 2
- 230000005283 ground state Effects 0.000 claims description 2
- 230000009897 systematic effect Effects 0.000 claims description 2
- 239000000443 aerosol Substances 0.000 abstract description 12
- 238000010276 construction Methods 0.000 abstract description 2
- 239000003344 environmental pollutant Substances 0.000 abstract description 2
- 230000003287 optical effect Effects 0.000 abstract description 2
- 231100000719 pollutant Toxicity 0.000 abstract description 2
- 239000013618 particulate matter Substances 0.000 description 24
- 238000012549 training Methods 0.000 description 6
- 238000012795 verification Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 239000002245 particle Substances 0.000 description 3
- 230000005855 radiation Effects 0.000 description 3
- 238000007499 fusion processing Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000002790 cross-validation Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000011478 gradient descent method Methods 0.000 description 1
- RGNPBRKPHBKNKX-UHFFFAOYSA-N hexaflumuron Chemical compound C1=C(Cl)C(OC(F)(F)C(F)F)=C(Cl)C=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F RGNPBRKPHBKNKX-UHFFFAOYSA-N 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000007787 long-term memory Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000005180 public health Effects 0.000 description 1
- 238000011155 quantitative monitoring Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000005316 response function Methods 0.000 description 1
- 238000010206 sensitivity analysis Methods 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 238000005549 size reduction Methods 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000013179 statistical model Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
- G06F30/27—Design optimisation, verification or simulation using machine learning, e.g. artificial intelligence, neural networks, support vector machines [SVM] or training a model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2111/00—Details relating to CAD techniques
- G06F2111/10—Numerical modelling
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Evolutionary Computation (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biophysics (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Geometry (AREA)
- Medical Informatics (AREA)
- Computer Hardware Design (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种全天时PM2.5浓度无缝格点数据的近实时生产方法,涉及大气环境遥感监测领域,包括如下步骤:反演日间逐小时气溶胶光学厚度;重建AOD数据的缺失值;订正数值模式模拟气溶胶结果的误差;建立国控站点实测大气污染物浓度观测数据与AOD的机器学习模型;多尺度AOD融合分析;估算近地面PM2.5浓度;构建PM2.5浓度的时空迁移模型;融合站点实测与估算PM2.5浓度数据以生产逐小时无缝PM2.5格点数据;本发明可获取全天时小时分辨率且空间无缝的PM2.5浓度格点数据资料,尤其是实现了无卫星反演AOD数据的情况下面域PM2.5浓度数据快速生产的关键技术。
Description
技术领域
本发明涉及大气环境遥感监测领域,具体涉及一种全天时PM2.5浓度无缝格点 数据的近实时生产方法。
背景技术
近年来,以PM2.5为主的大气颗粒物污染已成为影响城市空气质量的主要因素,由于PM2.5粒径小、比表面积大,易在空气中长期滞留,故对公众健康和全球生态环境具有 严重威胁。因此,近实时监测近地面PM2.5浓度对落实大气颗粒物污染精细化管控和灰霾 防治具有重要现实意义。然而,由于站点分布稀疏不均,现有地基空气质量观测网络中仍 存在大面积监测盲区。同时,站点业务化运营需要耗费较多的人力和物力。因此,现有站 点观测数据较难满足区域PM2.5浓度全方位跟踪监测的客观需求。
研究表明,基于数据驱动的统计模型能够较好地刻画大气气溶胶和大气颗粒物浓度间 的映射关系,因此,利用卫星遥感反演气溶胶光学厚度(Aerosol Optical Depth,AOD)数据 开展近地面PM2.5浓度估算,已然成为当前定量获取区域PM2.5浓度的重要技术手段。然而, 由于受到云、雪等亮地表的干扰,卫星反演AOD产品常存在大面积的数据缺失,同时, 基于辐射传输理论的AOD反演算法难以顾及夜间大气气溶胶参数的定量监测,进而导致 据此估算的PM2.5浓度格点数据无法实现24-h时空全覆盖。另外,基于大气化学传输模式的数值模拟结果虽可提供时空连续的气溶胶参数再分析资料,但由于模式模拟过程的简化和近实时排放清单等关键基础数据的缺失,导致该类产品的空间分辨率较低且结果存在较大不确定性。
针对上述问题,目前亟需一套能够同步解决以下技术问题的技术方案:
(1)日间近实时AOD数据卫星遥感反演及缺失信息重建;
(2)夜间等缺乏AOD观测情况下的面域PM2.5浓度估算;
(3)多源异构数据间的偏差订正与融合分析;
以实现近实时PM2.5浓度无缝格点数据的高效生产,满足区域PM2.5污染的全天时、全方 位跟踪监测的需求。
发明内容
本发明的目的在于提供一种全天时PM2.5浓度无缝格点数据的近实时生产方法,以解 决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种全天时PM2.5浓度无缝格点数据的 近实时生产方法,包括以下步骤:
步骤1:依托静止卫星遥感观测平台,快速反演日间逐小时AOD数据;
步骤2:重建步骤1生产的AOD格点数据中的缺失信息;
步骤3:使用机器学习算法,基于卫星反演AOD数据对数值模式模拟的AOD结果进行空间降尺度和误差订正;
步骤4:结合随机森林机器学习建模方法,利用地面实测大气颗粒物浓度数据估算对 应点位的AOD数据水平;
步骤5:以步骤3所得的降尺度后的数值模拟AOD结果作为背景场,融合步骤2和步骤4所得的多源AOD数据,获得日间高精度空间无缝AOD产品;
步骤6:利用步骤5所得的无缝AOD产品,结合地面国控站点实测PM2.5浓度,实 时气象观测数据与大气污染相关的社会经济数据和时间变量,采用随机森林机器学习方法 建立模型,估算面域PM2.5浓度分布数据;
步骤7:针对夜间等无有效卫星遥感反演AOD数据的情况,构建不同时刻间PM2.5浓度迁移模型,基于邻近时刻已有资料实现其他时刻面域PM2.5浓度数据的估算;
步骤8:开展当前时刻站点实测PM2.5浓度数据与步骤6或7所得时空无缝PM2.5格点数据产品间的融合,生产当前时刻高精度全覆盖PM2.5浓度格点资料。
作为本发明的一种优选技术方案,上述步骤1依托静止卫星高时频观测特性,采用“最 小波谱回归系数”法进行地表反射率估算,实现精准地气解耦。
作为本发明的一种优选技术方案,上述步骤1中依据AOD数据时空自相关特征,利用经验正交函数法融合多时相残缺AOD资料来实现部分缺失数据重建,提升步骤1所得 卫星反演AOD原始数据的空间覆盖水平。
作为本发明的一种优选技术方案,上述步骤2中所采用的数据重构技术具体描述为, 引入时空邻域AOD数据,构建当前时刻的AOD时空关联矩阵,运用奇异值分解法(SVD)对AOD时空关联矩阵进行迭代分解,并利用主模态迭代重构时空关联矩阵中的缺失值直 至收敛。
作为本发明的一种优选技术方案,上述步骤4中地面实测大气颗粒物浓度数据为国控 空气质量观测网络提供的实时空气污染物浓度,所述步骤4中估算AOD的统计建模公式 为:
AOD~PM10+PM2.5+NO2+SO2+MET
其中,AOD数据由大气气溶胶特性观测站点提供,PM10、PM2.5、NO2和SO2浓度数 据由国家地基空气质量监测网络提供,MET表示对应时刻的气象观测数据。
作为本发明的一种优选技术方案,上述步骤5中利用最优插值融合技术对所提及的多 源异构AOD数据进行融合分析:
xa=xb+K(Yo-HXb)
其中,xa为再分析值,xb为背景值,K为卡尔曼增益,Yo为待分析 像元x邻域内的观测值,H为观测算子,HXb表示观测值Yo对应的背景 值。在本发明中,降尺度后的模式模拟结果作为融合背景场,卫星反演结果与地面估算数 据作为融合观测场。
作为本发明的一种优选技术方案,上述不同数据源AOD产品的系统性误差订正由其 对应的背景场和观测场误差方差来表示:
ε=var(X-Y) 其中,X为实测数据,Y为待校准数据。
作为本发明的一种优选技术方案,上述步骤6中建模公式为:
PM2.5~AOD+MET+SE+TIME
其中,PM2.5数据由国家地基空气质量监测网络提供,AOD使用步骤5所生产的时空全覆盖再分析资料,MET表示对应时刻的气象观测数据,SE所指与大气污染相关的社会 经济数据,TIME表示对应的时间变量。
作为本发明的一种优选技术方案,上述步骤7中不同时刻间PM2.5浓度迁移模型由深 度神经网络学习模型构建,深度神经网络学习模型表达式如下:
其中,t表示当前时刻,t-m则表示以t时刻为基准前推m时刻,LSTM为长短期记 忆层,FC为全连接层,迁移模型是基于站点连续实测数据构建,应用模型外推以实现面域 尺度PM2.5浓度的估算。
与现有技术相比,本发明的有益效果是:
本发明提出一种全天时PM2.5浓度无缝格点数据的近实时生产方法,专注于实现24-h 时空连续PM2.5浓度格点数据的生产,以解决大气颗粒物污染全天时、全方位跟踪监测的 数据短缺问题。相比较于其他类似技术发明,本发明所提出生产技术可获取全天时小时分 辨率且空间无缝的PM2.5浓度格点数据资料,尤其是实现了在夜间等无卫星反演AOD数据的情况下面域PM2.5浓度数据快速生产的关键技术。以及本项发明可解决相关行业对时空无缝高分辨率PM2.5浓度数据资料的现实应用需求。
附图说明
图1是本发明的一种全天时PM2.5浓度无缝格点数据的近实时生产方法的流程 示意图;
图2是本发明中静止卫星遥感反演AOD数据的算法流程图;
图3是本发明中多源多尺度AOD数据融合分析示意图;
图4是本发明中PM2.5浓度无缝格点资料的精度验证散点图。
具体实施方式
为了使本领域的技术人员更好地理解本申请方案,下面将结合本申请实施例中的附图 对本申请实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本申 请一部分的实施例,而不是全部的实施例;基于本申请中的实施例,本领域普通技术人员 在没有做出创造性劳动成果前提下所获得的所有其他实施例,都应当属于本申请保护的范 围;
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组 合,下面将参考附图1-4,并结合实施例来详细说明本申请;
本发明提出一种全天时PM2.5浓度无缝格点数据的近实时生产方法,解决当前逐小时 PM2.5浓度无缝格点数据生产的关键技术问题,具体涉及大气参数反演、缺失信息重建、深 度学习建模、数据融合同化等相关技术,如图1所示,包括以下步骤:
步骤1:依据静止卫星高时频观测特性,本发明提出一种高精度AOD快速反演算法,以实现日间AOD格点资料的实时生产。
a)通过静止卫星数据发布平台实时获取可见光、近红外、短波红外及热红外等波段的 像素值,根据定标系数对各波段数据进行辐射定标,生成具有物理意义的卫星表观反射率 或亮温数据;
b)从地理定位数据中读取太阳天顶角和方位角以及传感器天顶角和方位角等观测几 何参数,并根据国家卫星气象中心网站给出的行列号和经纬度转换关系,计算各像元具体 经纬度信息;
c)根据不同类型像元在可见光、短波红外以及热红外波段的反射率和亮温差异,采用 多波段联合阈值法对云、冰雪和内陆水体像元进行快速检测;
d)将太阳天顶角或观测天顶角大于75°的像元进行掩膜剔除,以消除天顶角过大而造 成反演结果不确定性增大;
c)利用“最小波谱回归系数”法对地表反射率进行建模求解(以FY-4A静止卫星为例),具体来说:
基于6SV辐射传输模式,利用大气校正模块,模拟计算清洁背景下(如AOD=0.05)0.47, 0.65和2.25μm各波段的虚拟地表反射率。
该方法由于对各像元进行独立计算,故对大多数地表类型具有普适性;
d)依据大气气溶胶地面站点观测气溶胶特性,归纳中国区域不同月份的粒子谱分布及 复折射指数,生成中国区本地化典型气溶胶模式;
e)利用6SV辐射传输模式,基于拟定太阳和卫星几何参数、大气模式、气溶胶模式、以及卫星光谱响应函数,计算不同地表反射率和AOD水平下的蓝光、红光和短波红外波 段的表观反射率,构建不同气溶胶模式AOD反演查找表;
f)根据各像元实时观测数据、几何参数以及估算的地表反射率,利用构建的查找表开 展AOD快速插值反演。
步骤2:对步骤1卫星遥感反演所得的AOD数据缺失值进行重建,提升AOD格点资 料的空间覆盖水平。
a)在给定空间范围内,引入一定时间窗口内的历史AOD数据,构建基于当前小时分辨率的AOD时空关联矩阵X:
其中m和n表示空间范围内AOD影像的行列数,t0表示当前待重建时刻,tk表 示k个历史时刻;
b)将原始关联矩阵中10~20%的有效值留出作为评判重建精度的实测数据,并将时域 均值作为初始值填入矩阵空缺位置以初始化EOF分析;
c)运用SVD方法将时空关联矩阵分解为以下三个部分:
[U,S,V]=SVD(X)
其中,U和V分别表示时间和空间模态,S表示奇异值,利用第一模态重构原始时空矩 阵,开展重建结果精度验证,利用重建结果更新原始矩阵中缺失点位的填充信息;
d)基于更新后的矩阵,重复c)直至收敛;接着,增加主模态数量,重复上述步骤,直至全局收敛,进而实现当前小时尺度AOD反演产品中的缺失信息重建。
步骤3:利用基于机器学习的数据误差校正技术,对气溶胶模式模拟结果进行校正, 具体来说:
a)提取对应时刻卫星遥感反演AOD和数值模式模拟AOD的配对数据;
b)借助相关辅助变量,建立随机森林机器学习模型;
c)外推模型实现模式模拟AOD背景场的降尺度校正。
步骤4:依托AERONET和SONET地基实测AOD数据,国控空气质量监测站点实测PM10,PM2.5,NO2和SO2浓度数据,以及相应时刻的气象观测数据MET,利用随机森 林机器学习方法,构建基于实测污染物浓度数据的日间小时分辨率AOD估算模型,并开 展交叉验证以评估模型的泛化能力,进而估算空气质量监测站点所在点位的AOD数据:
AOD~PM10+PM2.5+NO2+SO2+MET
步骤5:本发明提出一种使用最优插值技术开展“卫星-地基-模式”多源异构数据融合分 析,以生产高精度全覆盖AOD产品资料,其中,数值模拟结果作为融合分析的背景场, 卫星和地基数据作为融合观测场。
对于任意待分析像元x,定义其背景值为xb,则其再分析值xa可表示为:
xa=xb+K(Yo-HXb)
其中,Yo为待分析像元x邻域内的观测值。H为观测算子,HXb表示观测值Yo对应的背景值。K为卡尔曼增益,用以量化邻近观测对待分析点的影响,可定义为:
K=PbHT(HPbHT+R)-1
其中,HT为H的转置矩阵。观测误差协方差矩阵R为对角矩阵,对角元素由对应的观测误差方差εo组成,背景误差协方差矩阵Pb为对称矩阵,可表示为:
其中,εb为背景误差方差,背景场和观测场的误差方差可以通过实测值进行估计,ρ(i,j) 用来表示数据点i,j之间空间关联,本发明采用高斯核权重来近似拟合这种空间相关 性:
其中,dx和dy分别代表数据点i、j,空间距离dij在经向和纬向的正交分量,lx和ly表 示对应的空间窗口大小。
具体融合过程中,本发明采用空间层次聚类技术对卫星反演AOD数据进行重采样,解决卫星遥感反演格点数据与地面站点稀疏观测数据间的样本量不均衡问题。具体来说,计算背景场与观测场之间的偏差场,将一定范围(50km)误差不超过AOD±0.05的格点观测值聚为一类,最后将聚类结果输入数据融合过程。
利用该项融合技术,将AOD卫星反演与缺失值重建结果、国控点位AOD估算数据与AOD数值预报场进行融合,生成日间时空无缝的小时分辨率AOD数据产品
步骤6:结合步骤5所产生的高精度全覆盖AOD数据,建立基于数据驱动的统计关系模型以估算面域PM2.5浓度格点资料。
a)选取除AOD以外的其他建模变量以辅助模型构建,如,以相对湿度、边界层高度为主的气象变量MET,以人口密度、路网密度为主的社会经济变量SE,以及反映时间特 征的相关变量TIME等;
b)根据站点经纬度位置,将a)中所述变量与PM2.5浓度观测数据进行匹配,提取得到二维训练数据集,并随机留取10~20%的训练数据作为模型估算精度交叉检验的验证集, 用于验证模型的泛化能力;
c)将训练数据集输入随机森林机器学习模型中进行模型参数训练:
PM2.5~AOD+MET+SE+TIME
d)开展建模变量敏感性分析,通过计算输入变量的相对重要性,逐步剔除对建模精度 无显著贡献的变量,优化模型结构;
e)基于优化模型,利用生产的AOD融合产品估算面域PM2.5浓度格点数据。
步骤7:充分挖掘PM2.5浓度序列的时间自相关特性,构建不同时刻间的PM2.5浓度迁移模型,以实现在夜间等无卫星反演AOD数据情况下的PM2.5浓度无缝格点资料的生产。
a)根据国控站点经纬度信息,将湿度、边界层高度等气象变量与PM2.5浓度观测数据 进行匹配,得到不同站点的PM2.5~MET观测时间序列集;
b)采用交叉验证法,随机选取80%配对数据样本作为训练集,20%作为验证集;
c)以当前时刻t为基准,前推m个时刻观测时间序列输入LSTM-FC层来挖掘其时间依赖性:
d)采用梯度下降法进行上述模型参数训练,同时利用验证集开展模型精度评价,通过 不断调整学习率等超参数,进行模型性能优化;
e)将步骤6所产生的PM2.5浓度无缝格点数据及其对应时刻气象场数据一并输入基于 站点观测所建立的迁移模型中,以实现无卫星反演AOD数据情况下的PM2.5浓度无缝格点资料的生产。
步骤8:此步骤旨在对步骤6和步骤7所生产的PM2.5浓度无缝格点资料进行优化校正。
a)计算各格点距国控站点的欧式距离d;
b)定义搜索半径r,相关距离cl,最大站点个数n;
c)对于任意一个格点,搜索半径r内的最近n个国控站点;
d)定义国控站点对格点值的校正强度ws:
f)循环遍历每一个格点,完成整幅PM2.5浓度图像的优化校正。
以上所述的,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此, 任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,根据本发明的技术方案及其 发明构思加以等同替换或改变,都应涵盖在本发明的保护范围之内。
Claims (9)
1.一种全天时PM2.5浓度无缝格点数据的近实时生产方法,其特征在于,所述技术方案包括以下步骤:
步骤1:依托静止卫星遥感观测平台,快速反演日间逐小时AOD数据;
步骤2:重建步骤1生产的AOD格点数据中的缺失信息;
步骤3:使用机器学习算法,基于卫星反演AOD数据对数值模式模拟的AOD结果进行空间降尺度和误差订正;
步骤4:结合随机森林机器学习建模方法,利用地面实测大气颗粒物浓度数据估算对应点位的AOD数据水平;
步骤5:以步骤3所得的降尺度后的数值模拟AOD结果作为背景场,融合步骤2和步骤4所得的多源AOD数据,获得日间高精度空间无缝AOD产品;
步骤6:利用步骤5所得的无缝AOD产品,结合地面国控站点实测PM2.5浓度,实时气象观测数据与大气污染相关的社会经济数据和时间变量,采用随机森林机器学习方法建立模型,估算面域PM2.5浓度分布数据;
步骤7:针对夜间等无有效卫星遥感反演AOD数据的情况,构建不同时刻间PM2.5浓度迁移模型,基于邻近时刻已有资料实现其他时刻面域PM2.5浓度数据的估算;
步骤8:开展当前时刻站点实测PM2.5浓度数据与步骤6或7所得时空无缝PM2.5格点数据产品间的融合,生产当前时刻高精度全覆盖PM2.5浓度格点资料。
2.如权利要求1所述的一种全天时PM2.5浓度无缝格点数据的近实时生产方法,其特征在于,所述步骤1依托静止卫星高时频观测特性,采用“最小波谱回归系数”法进行地表反射率估算,实现精准地气解耦。
3.如权利要求1所述的一种全天时PM2.5浓度无缝格点数据的近实时生产方法,其特征在于,所述步骤1中依据AOD数据时空自相关特征,利用经验正交函数法融合多时相残缺AOD资料来实现部分缺失数据重建,提升步骤1所得卫星反演AOD原始数据的空间覆盖水平。
4.如权利要求1所述的一种全天时PM2.5浓度无缝格点数据的近实时生产方法,其特征在于,所述步骤2中所采用的数据重构技术具体描述为,引入时空邻域AOD数据,构建当前时刻的AOD时空关联矩阵,运用奇异值分解法(SVD)对AOD时空关联矩阵进行迭代分解,并利用主模态迭代重构时空关联矩阵中的缺失值直至收敛。
5.如权利要求1所述的一种全天时PM2.5浓度无缝格点数据的近实时生产方法,其特征在于,所述步骤4中地面实测大气颗粒物浓度数据为国控空气质量观测网络提供的实时空气污染物浓度,所述步骤4中估算AOD的统计建模公式为:
AOD~PM10+PM2.5+NO2+SO2+MET
其中,AOD数据由大气气溶胶特性观测站点提供,PM10、PM2.5、NO2和SO2浓度数据由国家地基空气质量监测网络提供,MET表示对应时刻的气象观测数据。
6.如权利要求1所述的一种全天时PM2.5浓度无缝格点数据的近实时生产方法,其特征在于,所述步骤5中利用最优插值融合技术对所提及的多源异构AOD数据进行融合分析:
xa=xb+K(Yo-HXb)
其中,xa为再分析值,xb为背景值,K为卡尔曼增益,Yo为待分析像元x邻域内的观测值,H为观测算子,HXb表示观测值Yo对应的背景值,在本发明中,降尺度后的模式模拟结果作为融合背景场,卫星反演结果与地面估算数据作为融合观测场。
7.如权利要求1所述的一种全天时全覆盖PM2.5浓度格点据的近实时生产技术方案,其特征在于,不同数据源AOD产品的系统性误差订正由其对应的背景场和观测场误差方差来表示:
ε=var(X-Y)
其中,X为实测数据,Y为待校准数据。
8.如权利要求1所述的一种全天时PM2.5浓度无缝格点数据的近实时生产方法,其特征在于,所述步骤6中建模公式为:
PM2.5~AOD+MET+SE+TIME
其中,PM2.5数据由国家地基空气质量监测网络提供,AOD使用步骤5所生产的时空全覆盖再分析资料,MET表示对应时刻的气象观测数据,SE所指与大气污染相关的社会经济数据,TIME表示对应的时间变量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111625657.3A CN114707396B (zh) | 2021-12-28 | 2021-12-28 | 一种全天时pm2.5浓度无缝格点数据的近实时生产方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111625657.3A CN114707396B (zh) | 2021-12-28 | 2021-12-28 | 一种全天时pm2.5浓度无缝格点数据的近实时生产方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114707396A true CN114707396A (zh) | 2022-07-05 |
CN114707396B CN114707396B (zh) | 2024-08-20 |
Family
ID=82166521
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111625657.3A Active CN114707396B (zh) | 2021-12-28 | 2021-12-28 | 一种全天时pm2.5浓度无缝格点数据的近实时生产方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114707396B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115081557A (zh) * | 2022-08-22 | 2022-09-20 | 北华航天工业学院 | 基于地面监测数据的夜间气溶胶光学厚度估算方法和系统 |
CN116486931A (zh) * | 2023-06-21 | 2023-07-25 | 上海航天空间技术有限公司 | 耦合物理机制的全覆盖大气甲烷浓度数据生产方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105512464A (zh) * | 2015-11-26 | 2016-04-20 | 武汉大学 | 一种结合卫星和站点观测反演时空连续pm2.5浓度的方法 |
CN109583516A (zh) * | 2018-12-24 | 2019-04-05 | 天津珞雍空间信息研究院有限公司 | 一种基于地基和卫星观测的时空连续pm2.5反演方法 |
CN109657363A (zh) * | 2018-12-24 | 2019-04-19 | 天津珞雍空间信息研究院有限公司 | 一种时空连续的pm2.5反演方法 |
CN112378828A (zh) * | 2020-12-11 | 2021-02-19 | 中科三清科技有限公司 | 基于卫星遥感数据反演大气细颗粒物浓度的方法及装置 |
-
2021
- 2021-12-28 CN CN202111625657.3A patent/CN114707396B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105512464A (zh) * | 2015-11-26 | 2016-04-20 | 武汉大学 | 一种结合卫星和站点观测反演时空连续pm2.5浓度的方法 |
CN109583516A (zh) * | 2018-12-24 | 2019-04-05 | 天津珞雍空间信息研究院有限公司 | 一种基于地基和卫星观测的时空连续pm2.5反演方法 |
CN109657363A (zh) * | 2018-12-24 | 2019-04-19 | 天津珞雍空间信息研究院有限公司 | 一种时空连续的pm2.5反演方法 |
CN112378828A (zh) * | 2020-12-11 | 2021-02-19 | 中科三清科技有限公司 | 基于卫星遥感数据反演大气细颗粒物浓度的方法及装置 |
Non-Patent Citations (2)
Title |
---|
BAI K: "A homogenized daily in situ PM 2.5 concentration dataset from the national air quality monitoring network in China", EARTH SYSTEM SCIENCE DATA, vol. 12, no. 4, 30 April 2020 (2020-04-30) * |
李珂: "融合星地多源数据资料的长三角地区高分辨率时空无缝PM2.5浓度数据", 遥感学报, vol. 26, no. 5, 30 May 2022 (2022-05-30) * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115081557A (zh) * | 2022-08-22 | 2022-09-20 | 北华航天工业学院 | 基于地面监测数据的夜间气溶胶光学厚度估算方法和系统 |
CN116486931A (zh) * | 2023-06-21 | 2023-07-25 | 上海航天空间技术有限公司 | 耦合物理机制的全覆盖大气甲烷浓度数据生产方法及系统 |
CN116486931B (zh) * | 2023-06-21 | 2023-08-29 | 上海航天空间技术有限公司 | 耦合物理机制的全覆盖大气甲烷浓度数据生产方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN114707396B (zh) | 2024-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Zhao et al. | A spatial downscaling approach for the SMAP passive surface soil moisture product using random forest regression | |
Zeng et al. | Daily global solar radiation in China estimated from high‐density meteorological observations: a random forest model framework | |
Yang et al. | Filling the missing data gaps of daily MODIS AOD using spatiotemporal interpolation | |
Tooke et al. | Integrated irradiance modelling in the urban environment based on remotely sensed data | |
Li et al. | Estimation of all-sky 1 km land surface temperature over the conterminous United States | |
CN114019579B (zh) | 高时空分辨率近地表空气温度重构方法、系统、设备 | |
Heo et al. | Digital elevation model-based convolutional neural network modeling for searching of high solar energy regions | |
CN114707396A (zh) | 一种全天时pm2.5浓度无缝格点数据的近实时生产方法 | |
Yoo et al. | Spatial downscaling of MODIS land surface temperature: Recent research trends, challenges, and future directions | |
Dehshiri et al. | Dust cycle, soiling effect and optimum cleaning schedule for PV modules in Iran: A long-term multi-criteria analysis | |
Larue et al. | Simulation and assimilation of passive microwave data using a snowpack model coupled to a calibrated radiative transfer model over northeastern Canada | |
Bennouna et al. | Atmospheric turbidity determined by the annual cycle of the aerosol optical depth over north-center Spain from ground (AERONET) and satellite (MODIS) | |
Fang et al. | A western United States snow reanalysis dataset over the Landsat era from water years 1985 to 2021 | |
CN109655583A (zh) | 一种基于卫星遥感的大气环境地面监测站点布控组网方法 | |
Shwetha et al. | Prediction of land surface temperature under cloudy conditions using microwave remote sensing and ANN | |
CN112016696A (zh) | 融合卫星与地基观测的pm1浓度反演方法及系统 | |
Michaelides et al. | Monitoring and forecasting air pollution levels by exploiting satellite, ground‐based, and synoptic data, elaborated with regression models | |
Lee et al. | Analytical approach to estimating aerosol extinction and visibility from satellite observations | |
Xiong et al. | Estimating the PM2. 5 concentration over Anhui Province, China, using the Himawari-8 AOD and a GAM/BME model | |
Tapiador et al. | Precipitation estimates for hydroelectricity | |
Flückiger et al. | Modelling daily air temperature at a fine spatial resolution dealing with challenging meteorological phenomena and topography in Switzerland | |
Lei et al. | Full coverage estimation of the PM concentration across china based on an adaptive spatiotemporal approach | |
CN116227142A (zh) | 基于modis遥感数据的逐日地表温度重建方法及装置 | |
Leng et al. | Determination of all-sky surface soil moisture at fine spatial resolution synergistically using optical/thermal infrared and microwave measurements | |
Park et al. | Geostationary satellite-derived ground-level particulate matter concentrations using real-time machine learning in Northeast Asia |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |