CN102147807A - 基于gis的海量雷电数据时空分析方法 - Google Patents

基于gis的海量雷电数据时空分析方法 Download PDF

Info

Publication number
CN102147807A
CN102147807A CN2011100575363A CN201110057536A CN102147807A CN 102147807 A CN102147807 A CN 102147807A CN 2011100575363 A CN2011100575363 A CN 2011100575363A CN 201110057536 A CN201110057536 A CN 201110057536A CN 102147807 A CN102147807 A CN 102147807A
Authority
CN
China
Prior art keywords
data
lightning
gis
monitoring
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011100575363A
Other languages
English (en)
Inventor
侯荣涛
朱斌
史鑫明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Information Science and Technology
Original Assignee
Nanjing University of Information Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Information Science and Technology filed Critical Nanjing University of Information Science and Technology
Priority to CN2011100575363A priority Critical patent/CN102147807A/zh
Publication of CN102147807A publication Critical patent/CN102147807A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Instructional Devices (AREA)

Abstract

本发明公布了一种基于GIS的海量雷电数据时空分析方法。本发明方法主要实现:①结合地理信息系统(GIS)技术,研究雷电信息源的数据质量控制方法,构建和维护雷电空间数据库,并建立雷电实时定位监测系统来获取雷电发生的信息源。以空间要素形式实时地呈现闪电的定位分布,预测雷电的最新趋势。②采用更加交互式方法统计和分析历史闪电数据,包括任意形状空间分析、闪电密度分析、专题图分析等方法,形成气象产品。最后通过共享网络来发布和共享雷电资料分析产品,通过以上闪电数据空间分析方法实现雷电业务服务的根本目标。

Description

基于GIS的海量雷电数据时空分析方法
技术领域
本发明属于GIS与气象信息技术交叉领域。地理信息系统(GIS)强大之处是能将空间地理分布状况及所具有的属性进行数字存储,建立数据管理系统,同时开发各种分析和处理功能,以便快速获取信息,并将处理结果以地图、图元及数据的形式表示出来。因此,处理海量且庞杂的实时雷电数据信息,可以通过GIS的强大的空间查询分析和图形可视化功能为雷电防护的分析和决策提供科学手段,大大提高了以多种形式对雷电数据资料的统计效率。
背景技术
自然界雷电的发生具有很强的随机性、瞬时性和危险性,它与大气强对流系统密切相关。雷电监测网络主要由地面大气电场监测网、闪电定位监测网、地面自动观测站组成。本网络包含3-5个电场仪,覆盖9个闪电定位观测点,以及1-2个自动气象观测站。在当天雷电事件发生后,每个仪器都能即时地监测到每次雷电的原始数据信息(包括序号、时间、经纬度、强度等信息),并且以文本信息即时地更新传到服务器中,有时每天的雷电次数少则几条,而梅雨天的次数可能多达数万条。因此,当雷电的原始数据资料以文本记录形式存放时,空间庞大且信息冗杂,而且其灾害分布形势不具有直观性和鲜明性。
地理信息系统(GIS)是20世纪60年代中期兴起的一门交叉边缘学科。GIS利用计算机建立地理数据库,将空间地理分布状况及所具有的属性进行数字存储,建立数据管理系统,同时开发各种分析和处理功能,以便快速获取信息,并将处理结果以地图、图元及数据的形式表示出来。因此,结合雷电监测网络的实时雷电数据信息,并通过GIS的强大的空间查询分析和图形可视化功能为雷电防护的分析和决策提供了科学手段。一方面能够利用GIS的地图及图层加载功能,实现雷电精确定位及资料回放显示效果;另一方面能够利用GIS的空间查询分析及专题图制作功能,实现雷电资料查询显示以及闪电密度分析功能,大大提高了以多种形式对雷电数据资料的统计效率。
参考文献
[1]闫飞,张海燕,毛云志.基于DSP的雷电定位系统设计[J].微计算机信息,2010,26:128
[2]冯民学,焦雪等.江苏省雷电分布特征分析[J].气象科学,2009,29(2):246-250
[3]刘岩,王振会,张慧良等.2007年浙江地区梅雨期闪电特征的分析[J].气象科学,2009,29(2):225-228.
[4]陈家宏,樊灵孟.雷电定位系统和雷电参数[C].The 3rd Asian LightningProtection Forum,Taisei Corp,Tokyo,Japan,2005.
[5]吴璞三.雷电定向定位与时差定位[J].高电压技术,1995,21(9):3-6.
[6]国网武汉高压研究院.福建省雷电参数研究[R].武汉:国网武汉高压研究院,2006.
[7]Rajesh Chawla,Vivek Chopra,Gary Damschen,et al.Professional XML WebServices[M].Wrox Press,2002.
[8]Krider E,Pifer A E,Vance D L.Lightuing direction finding system for forest firedetection.Ball Amer Metor SoC,1980,61:980-986.
发明内容
本发明目的是针对现有技术存在的缺陷提供一种
本发明为实现上述目的,采用如下技术方案:
本发明基于GIS的海量雷电数据时空分析方法包括以下几个步骤:
①采用服务端数据监控模块将闪电定位监测网数据采集至本地服务器监测站中,通过实时监测算法更新本地数据,通过消躁和预处理方法将原始雷电数据导入闪电资料GIS数据库中,形成闪电数据资源层;实时监测算法是开启间隔时间为1秒的实时监测线程,读取以当年时间为名称的文本文件记录总行数m,并与数据库当天表中的记录总数n作比较,若数量相同,则无更新;若文本文件记录总行数m小于文本中记录数n,则更新最后m-n条记录,其中m和n都为大于1的自然数;
②数据服务接口层提供服务端资源层和客户端业务层之间的数据交互,通过提供统一的数据服务接口,客户端业务层访问数据库并得到相应的数据;数据接口层使用基于XML和Web Service传输协议;将实时及历史闪电数据通过WebService传输到相应的防雷部门客户端;
③客户端业务层中通过主控线程加载GIS地图及其他空间数据,实时监测闪电数据更新情况,将最近的闪电形成地图元素并显示,纳入统计分析模块中;统计分析模块通过时间和空间分布分析算法,根据用户选择的条件,将闪电的分布特征图及其相关数据形成气象产品。
优选地,所述实时监测算法如下所示:
A.DotNetFramework中的文件系统监测接口FileSystemWatcher用来监控指定文件夹中数据文件的IO操作;FileSystemWatcher既可以监控本地文件夹,也可以监控监控网络共享文件夹。
B.FileSystemWatcher监测到文件有修改情况后,读取该文件名name和文件中的行数m,再到数据库中读取以name命名的表中的记录数n,若m和n数量相同,则无更新;
C.原始文件中的行文本是有规则的数据,包括行号、时间、经纬度、强度、陡度、省、市、县信息,也包括冗余和噪声数据;需要消除冗余和噪声数据形成规整的记录型数据;
D.形成规整的记录型数据后,导入闪电资料数据库中。
优选地,所述数据服务接口层为:
a.接口主要用于客户端请求闪电数据和地理元素数据,包括插入、更新、删除操作;
b.根据客户端的请求,将数据库中的闪电资料封装成业务实体,再将关系型数据模型转成XML数据模型;
c.数据服务接口与客户端通信通过使用XML消息处理启用数据交换和应用程序逻辑远程调用,使数据能够通过防火墙并在异类系统之间传输数据。
优选地,所述客户端业务层,其特征是:
1)客户端以主控监测线程向上层请求数据、向下显示数据,使用基于XML的SOAP协议来调用和传输远程数据服务;
2)请求数据完成后,需要加载地图资源和闪电资料,主要是GIS中点、线、面等基本要素,根据闪电的资料的字段进行分级渲染;
3)监测线程实时地向上层请求数据,查看是否有数据更新,若有更新,则将XML数据转换成GIS要素,叠加到地图上显示;
4)利用GIS专题图方法对闪电资料进行空间分布,以柱状、饼状图形式直观显示闪电的分布特征,以及统计闪电的强度分布情况;
5)将一定地区条件的闪电资料进行时、日、月统计,对闪电进行时间特征分析;
6)最终将闪电的时空分布特征等资料形成气象产品。
本发明提供的技术方案的有益效果是:
基于GIS的海量雷电数据时空分析方法是利用最新计算机科学技术和手段,结合地理信息系统(GIS),通过建立雷电实时监测网络系统来获取雷电发生的信息源,研究信息源的数据质量控制技术和方法,构建和维护数据库,采用数据挖掘方法来处理和分析数据,形成集雷电查询、闪电数据时空分析、雷电业务处理等功能于一体的分析方法,最后通过共享网络来发布雷电共享产品,实现雷电业务服务的根本目标。
附图说明
图1是基于GIS的海量雷电数据时空分析系统总体架构图;
图2是基于GIS的海量雷电数据时空分析方法的服务端工作流程;
图3是数据服务接口层工作流程;
图4是基于GIS的海量雷电数据时空分析方法的客户端工作流程;
图5是闪电数据监测工作流程;
图6是闪电资料空间查询流程图;
图7是闪电时域分析的工作流程图;
图8是基于GIS的海量雷电数据时空分析原理图。
具体实施方式
如图8所示,本发明为解决闪电的数据监控、存储及显示问题,结合雷电数据处理的实际情况,主要包括四个模块:服务端数据监控模块、客户端配置模块、GIS操作功能模块、闪电定位显示、闪电资料查询模块等。
①服务端数据监控模块
主要实现将闪电定位监测网数据采集至本地服务器监测站中,通过实时监测算法更新本地数据,通过消躁和预处理方法将原始数据导入闪电资料GIS数据库中,形成闪电数据资源层。实现对闪电资料数据库的插入、删除、修改等操作,并且数据服务接口与客户端通信通过使用XML消息处理启用数据交换和应用程序逻辑远程调用,使数据能够通过防火墙,并在异类系统之间传输数据。
②客户端配置模块
主要实现以主控监测线程为核心,向上层请求数据,向下显示数据,使用基于XML的SOAP协议来调用和传输远程数据服务。配置服务器IP、端口、用户名、密码等必要信息,通过参数进行远程访问并获取数据。
③GIS操作功能模块
实现基于Arc Engine 9.2的COM组件技术的GIS的基本地图操作功能。主要是地图的放大、缩小、漫游、测距、图层的显示,在地图上能够标注检测单位,并且加入相应类型的图层中。
④闪电定位显示模块
主要实现实时地检查雷电资料数据库是否有最新的闪电记录,在GIS地图上实时显示当天的闪电(用不同符号标注正闪、负闪)。并且可以显示当天的闪电、临近三小时之内的闪电,以及发生闪电的具体经纬度、时间、省份、地区县市等。
⑤闪电资料查询模块
主要实现闪电资料按时间段、电流强度、粗略圆圈地域内进行检索,统计计算出区域内闪电总次数、平均电流强度及闪电密度,并能在地图显示/清除检索出的雷电记录。
以下是本系统中的5个具体系统模块的具体实现方法:
1.在所述服务端数据监控模块中实现。其步骤包括:
A.闪电定位监测网将当日的闪电数据实时地传输到本地服务器磁盘中。存储的文件夹中包含大量原始数据文件(*.txt),文件名为当天的日期。例如,2010年10月13日的数据文件名为2010_10_13.txt;
B.DotNetFramework中的文件系统监测接口(FileSystemWatcher)可以用来监控指定文件夹中数据文件的IO操作,包括文件创建、修改、删除等常见操作;
C.FileSystemWatcher监测到文件有修改情况后,读取该文件名name和文件中的行数m,再到数据库中读取以name命名的表中的记录数n,若m和n数量相同,则无更新;若小于文本中记录数,则需更新最后m-n条记录;
D.原始文件中的行文本是有规则的数据,包括行号、时间、经纬度、强度、陡度、省、市、县等信息,也包括冗余和噪声数据,需要消除冗余和噪声数据形成规整的记录型数据。将形成的规整记录型数据封装成业务实体,导入闪电资料数据库中。
E.鉴于雷电资料处理系统的实际情况,决定对每天的闪电数据独立建表(DAY+日期),同时每年建一张闪电数据资料表(YEAR+年份)。新进入的数据同时进入两张表以满足不同的查询统计分析需求。
F.数据服务接口用于客户端请求闪电数据和地理元素数据,包括插入、更新、删除等操作,主要通过.net的web service实现功能。Web Service是一种建立在XML基础之上的使软件组件能通过互联网相互通信的规范。
G.根据客户端的请求,将数据库中的闪电资料封装成业务实体,再将关系型数据模型转成XML数据模型。
H.数据服务接口与客户端通信通过使用XML消息处理启用数据交换和应用程序逻辑远程调用,使数据能够通过防火墙,并在异类系统之间传输数据。
2.在所述的客户端配置模块中实现。其步骤包括:
A.客户端启动时,为了设置整个系统运行的参数,主要包括远程参数和本地参数。远程参数主要包括:服务器IP、端口、数据库、用户名以及密码。
B.设置本地参数主要是为了方便客户端程序运行,主要包括监测线程数、地图目录、初始位置等参数;
C.从ini配置文件中保存并加载程序参数,保存程序正常运行。
3.所述的GIS操作功能模块中实现。其步骤包括:
A.GIS操作主要功能是对点、线、面图层的控制,用户可以控制行政区域和闪电符号图层的显示与隐藏,主要是基于Arc Engine 9.2组件式开发;
B.另外还包括地图的放大、缩小、漫游、测距等基本GIS功能。
4.所述的闪电定位显示模块中实现。其步骤包括:
A.进入该模块能实时的检查雷电资料数据库是否有最新的闪电记录,创建当日闪电数据点图层,在GIS地图上实时显示当天的闪电(用不同符号标注正闪、负闪)。
B.根据闪电的正负强度,将闪电分类渲染成不同颜色的符号,并且可以显示当天的闪电,以列表形式展示闪电的具体经纬度、时间、省份、地区县市等。
C.监测主线程在当日24点时,将当日闪电数据点图层删除,然后重复监测下一日的数据。
5.所述的闪电资料查询模块中实现。其步骤包括:
A.基于Arc Engine 9.2组件,开发交互式图形查询。主要实现输入起始时间和结束时间,选择要查询的电流强度等级,选择进行圆形、矩形还是任意图形进行查询,并对相应区域的闪电进行时域分析。
B.经纬度查询主要实现输入起始时间和结束时间,输入中心点经纬度,选择要查询的电流强度等级,选择进行圆形还是矩形图形进行查询,并对相应区域的闪电进行时域分析。
C.GIS专题图查询主要实现以市或县为单位,以点密度图、柱状或饼状图的形式分析闪电空间分布特征。具体内容包括:
(1)基于Arc Engine 9.2组件式开发。GIS专题图是根据字段信息进行分级符号渲染,点密度图模块实现对图层的点密度图渲染。能设定所选的图层整体背景颜色和区域边界线的颜色及线宽;应能选择色带、选择点符号、设定点符号的尺寸及颜色、设定一个点符号所代表的数目。
(2)图表图模块可以饼状图、柱状图渲染图层。渲染前,先将各个市或县行政区域与闪电点图层作空间交集操作,求出相应区域i的闪电总数mi,并总数mi添加到各个市或县Count字段中。
(3)渲染时,再需要选择图层、设定符号尺寸、选择色带及渲染字段;
(4)最后将专题渲染图形成气象产品,供气象工作人员共享和查看。
D.行政区域查询主要实现在地图上选择某个行政区域,突出其边界区域,并以同样的方式查询该区域内的闪电资料信息,并对相应区域的闪电进行时域分析。具体内容包括:
(1)查询相应条件的闪电数据,根据其地理位置信息形成临时所有点图层,作为被比较图层。
(2)遍历行政区域中市或县图层,以相应行政区域作为要素创建临时条件图层。
(3)将临时所有点图层与条件图层作空间相交运算,得出的点图层,则是相应行政区域的闪电信息。再将闪电要素根据正负强度进行渲染,得出最终美观结果。
(4)闪电点图层中的所有图元都包含时间、经纬度、强度等字段信息,所以再对闪电进行时、日、月等时域统计分析。另外,还包括强度概率分布统计分析,跨度可分为:0-20KA,20-40KA,40-80KA,80-100KA,100KA以上5级。
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明的实施方式作进一步地详细描述:
本实施例提供了一种基于GIS的海量雷电数据时空分析方法,结合地理信息系统(GIS)技术,研究雷电信息源的数据质量控制方法,构建和维护雷电空间数据库,并建立雷电实时定位监测系统来获取雷电发生的信息源,以空间要素形式实时地呈现闪电的定位分布,预测雷电的最新趋势。另外,仅依靠实时定位监测的空间表现方式是不够的,必须采用更加交互式方法来统计和分析历史闪电数据,包括任意形状空间分析、闪电密度分析、专题图分析等方法。该发明对于海量雷电数据具有很好的监控和统计分析能力。图1为系统总体架构图。
如图2所示,提供了基于GIS的海量雷电数据时空分析方法的服务端工作流程,包括以下步骤:
步骤10地面高精度监测网把经过预处理的闪电数据实时地通过通讯系统送到中心数据处理站实时进行交汇处理,可全天候、长期、连续运行并记录雷电发生的时间、位置、强度、极性和定位算法等指标数据。如表1,雷电监测网中数据格式;
表1高精度雷电监测定位系统探测参量与指标
步骤20DotNetFramework中的文件系统监测接口(FileSystemWatcher)可以用来监控指定文件夹中数据文件的IO操作,包括文件创建、修改、删除等常见操作。FileSystemWatcher既可以监控本地文件夹,也可以监控监控网络共享文件夹。通过它可以实时地监控气象部门服务器中原始数据文件(*.txt),重点监测以当天时间命名的文件的操作情况,例如,2010年10月13日的数据文件名为2010_10_13.txt;
步骤30FileSystemWatcher监测到文件有修改情况后,读取该文件名name和文件中的行数m,再到数据库中读取以name命名的表中的记录数n,若m和n数量相同,则无更新;若小于文本中记录数,则需更新最后m-n条记录;
步骤40原始文件中的行文本是有规则的数据,包括行号、时间、经纬度、强度、陡度、省、市、县等信息,当然也包括冗余和噪声数据,需要消除冗余和噪声数据形成规整的记录型数据。如表2所示,闪电资料数据库字段设计;
表2闪电资料数据库字段
Figure BDA0000049624450000082
步骤50数据服务接口层提供服务端资源层和客户端业务层之间的数据交互,通过提供统一的数据服务接口,客户端业务层能够安全快速访问数据库并得到相应的数据。数据接口层使用基于XML和Web Service传输协议,实现跨平台、跨区域数据报传输。将实时和历史闪电数据通过Web Service传输到相应的防雷部门客户端。
如图3所示,提供了基于GIS的海量雷电数据时空分析方法的数据服务接口层工作流程,包括以下步骤:
步骤501客户端计算机上的基础结构将Web Service代理对象的方法参数序列化为XML形式的SOAP消息,以便能在网络中传输;
步骤502SoapFormatter方式的SOAP消息传输的方式其实是XML形式,其中包括了客户端的方法及参数等内容;
步骤503将SOAP消息再构造为XML形式的SOAP请求,只是否SOAP消息稍作修改,成为合法的网络传输格式的报文;
步骤504Web Service接收SOAP消息前,需要反序列化该XML形式的SOAP消息,同时将反序列化的XML作为参数传入;
步骤505执行Web Service方法,如果存在对数据层的访问,Web Service方法调用数据提供程序实现对数据层的访问并提交事务处理,如果需要返回结果集DataSet和输出参数则以XML格式返回。以上是数据请求的步骤,数据响应的步骤是重复步骤501-505。
如图4所示,提供了基于GIS的海量雷电数据时空分析方法的客户端工作流程,包括以下步骤:
步骤60即连接步骤50中的数据服务接口层,提供代理对象的方法及参数进行数据请求与响应;
步骤70客户端启动时,即主控线程运行时,为了设置整个系统运行的参数,主要包括远程参数和本地参数。远程参数主要包括:服务器IP、端口、数据库、用户名以及密码;本地参数主要是为了方便客户端程序运行,主要包括监测线程数、地图目录、初始位置等参数;
步骤80加载地图图层数据,并且实现包括地图的放大、缩小、漫游、测距等基本GIS功能,这些功能是GIS系统中最基本的功能;
步骤90检查雷电资料数据库是否有最新的闪电记录,创建当日闪电数据点图层,在GIS地图上实时显示当天的闪电(用不同符号标注正闪、负闪)。
如图5所示,提供了基于GIS的海量雷电数据时空分析方法的闪电数据监测工作流程,包括以下步骤:
步骤901程序启动时需要按事先配置,将地图图层数据加载显示,包括省、市、县等基本图层;
步骤902向数据服务接口请求当日表长,传输代理对象的方法参数到数据服务接口,主要用于判断当日是否有最新闪电信息;
步骤903Web Service方法调用数据提供程序实现对数据层的访问并提交事务处理,如果需要返回结果集以XML格式返回;
步骤903a判断数据库中闪电m与客户端闪电n是否匹配,若m和n数量相同,则无更新;若小于文本中记录数,则需更新最后m-n条记录;
步骤904再次向数据服务接口中的Web Service方法调用数据提供程序实现对数据层的访问并提交事务处理,如果需要返回最新结果集DataSet以XML格式返回。解析XML数据,再将闪电要素根据正负强度进行渲染显示,得出最终美观结果,并以报表形式列出闪电信息;
如图6所示,提供了基于GIS的海量雷电数据时空分析方法的闪电空间查询流程图工作流程,包括以下步骤:
步骤100闪电数据时空分析主要对闪电进行空间和时域分析,空间分析以空间查询和专题图的形式展开,时域分析以时间数值统计的形式展开。
步骤1001查询前,用户需要选择以下列何种方式进行空间查询,主要有3种:图形交互式、经纬度式和行政区域式;
步骤1002选择查询方式后,用户需要在地图上进行相应操作,根据操作生成临时条件图层。比如圆查询,用户在地图上拖动画圆,将圆作为Feature要素,生成面图层;
步骤1003临时条件图层的命名规则为临时条件图层.shp,方便程序作交集运算;
步骤1004将查询的闪电点图层作为被操作图层;
步骤1005基于Arcgis Engine 9.2空间分析功能包,将被操作图层和条件图层作交集运算;
步骤1006在基于Arc Engine 9.2组件式开发中,GIS专题图其实就是根据字段信息进行分级符号渲染,在此,主要有2种方式包括点密度图和图表图;
步骤1006a点密度图模块实现对图层的点密度图渲染,应能设定所选的图层整体背景颜色和区域边界线的颜色及线宽;应能选择色带、选择点符号、设定点符号的尺寸及颜色、设定一个点符号所代表的数目;
步骤1006a图表图模块可以以饼状图、柱状图渲染图层。渲染前,先将各个市或县行政区域与闪电点图层作空间交集操作,求出相应区域i的闪电总数mi,并总数mi添加到各个市或县Count字段中。
如图7所示,提供了基于GIS的海量雷电数据时空分析方法的闪电时域分析的工作流程,包括以下步骤:
步骤1007向数据服务接口中的Web Service方法调用数据提供程序实现对数据层的访问并提交事务处理,如果需要返回最新结果集DataSet以XML格式返回;
步骤1008解析XML数据,将闪电数据转存到LightList队列中,以便域统计分析;
步骤1009分别在时域0-23时、1-30日、1-12月等进行分类统计,分析闪电的时域分布特征,气象工作者可以根据数据来推测雷灾发生的重点时域。

Claims (4)

1.一种基于GIS的海量雷电数据时空分析方法,其特征在于包括以下几个步骤:
①采用服务端数据监控模块将闪电定位监测网数据采集至本地服务器监测站中,通过实时监测算法更新本地数据,通过消躁和预处理方法将原始雷电数据导入闪电资料GIS数据库中,形成闪电数据资源层;实时监测算法是开启间隔时间为1秒的实时监测线程,读取以当年时间为名称的文本文件记录总行数m,并与数据库当天表中的记录总数n作比较,若数量相同,则无更新;若文本文件记录总行数m小于文本中记录数n,则更新最后m-n条记录,其中m和n都为大于1的自然数;
②数据服务接口层提供服务端资源层和客户端业务层之间的数据交互,通过提供统一的数据服务接口,客户端业务层访问数据库并得到相应的数据;数据接口层使用基于XML和Web Service传输协议;将实时及历史闪电数据通过WebService传输到相应的防雷部门客户端;
③客户端业务层中通过主控线程加载GIS地图及其他空间数据,实时监测闪电数据更新情况,将最近的闪电形成地图元素并显示,纳入统计分析模块中;统计分析模块通过时间和空间分布分析算法,根据用户选择的条件,将闪电的分布特征图及其相关数据形成气象产品。
2.如权利要求1所述的基于GIS的海量雷电数据时空分析方法,其特征在于所述实时监测算法如下所示:
A.DotNetFramework中的文件系统监测接口FileSystemWatcher用来监控指定文件夹中数据文件的IO操作;FileSystemWatcher既可以监控本地文件夹,也可以监控监控网络共享文件夹。
B.FileSystemWatcher监测到文件有修改情况后,读取该文件名name和文件中的行数m,再到数据库中读取以name命名的表中的记录数n,若m和n数量相同,则无更新;
C.原始文件中的行文本是有规则的数据,包括行号、时间、经纬度、强度、陡度、省、市、县信息,也包括冗余和噪声数据;需要消除冗余和噪声数据形成规整的记录型数据;
D.形成规整的记录型数据后,导入闪电资料数据库中。
3.如权利要求1所述的基于GIS的海量雷电数据时空分析方法,其特征在于所述数据服务接口层为:
a.接口主要用于客户端请求闪电数据和地理元素数据,包括插入、更新、删除操作;
b.根据客户端的请求,将数据库中的闪电资料封装成业务实体,再将关系型数据模型转成XML数据模型;
c.数据服务接口与客户端通信通过使用XML消息处理启用数据交换和应用程序逻辑远程调用,使数据能够通过防火墙并在异类系统之间传输数据。
4.如权利要求1所述的基于GIS的海量雷电数据时空分析方法,其特征在于所述客户端业务层,其特征是:
1)客户端以主控监测线程向上层请求数据、向下显示数据,使用基于XML的SOAP协议来调用和传输远程数据服务;
2)请求数据完成后,需要加载地图资源和闪电资料,主要是GIS中点、线、面等基本要素,根据闪电的资料的字段进行分级渲染;
3)监测线程实时地向上层请求数据,查看是否有数据更新,若有更新,则将XML数据转换成GIS要素,叠加到地图上显示;
4)利用GIS专题图方法对闪电资料进行空间分布,以柱状、饼状图形式直观显示闪电的分布特征,以及统计闪电的强度分布情况;
5)将一定地区条件的闪电资料进行时、日、月统计,对闪电进行时间特征分析;
6)最终将闪电的时空分布特征等资料形成气象产品。
CN2011100575363A 2011-03-10 2011-03-10 基于gis的海量雷电数据时空分析方法 Pending CN102147807A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011100575363A CN102147807A (zh) 2011-03-10 2011-03-10 基于gis的海量雷电数据时空分析方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011100575363A CN102147807A (zh) 2011-03-10 2011-03-10 基于gis的海量雷电数据时空分析方法

Publications (1)

Publication Number Publication Date
CN102147807A true CN102147807A (zh) 2011-08-10

Family

ID=44422072

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011100575363A Pending CN102147807A (zh) 2011-03-10 2011-03-10 基于gis的海量雷电数据时空分析方法

Country Status (1)

Country Link
CN (1) CN102147807A (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102520464A (zh) * 2011-12-08 2012-06-27 南京成风大气信息技术有限公司 区域积涝预报系统及其预报方法
CN102880920A (zh) * 2012-09-29 2013-01-16 上海市电力公司 一种雷电风险预警信息处理方法
CN103761332A (zh) * 2014-02-13 2014-04-30 国家电网公司 雷电信息综合快速分析定位系统
CN103838861A (zh) * 2014-03-19 2014-06-04 广东威创视讯科技股份有限公司 一种基于三维gis动态显示信息的方法和显示系统
CN103926472A (zh) * 2014-04-03 2014-07-16 国家电网公司 新一代电网雷电定位监测web应用平台
CN104281973A (zh) * 2013-07-02 2015-01-14 江苏省农业科学院 基于WebGIS的飞虱发育进程展示系统及方法
CN104950187A (zh) * 2014-11-27 2015-09-30 国网山东省电力公司应急管理中心 一种基于电网gis的雷电分析预警方法及系统
CN105760671A (zh) * 2016-02-19 2016-07-13 中国南方电网有限责任公司 基于noaa/lpi雷电潜势预报指数的本地化算法
CN106060017A (zh) * 2016-05-19 2016-10-26 上海承蓝科技股份有限公司 一种数据管控的云平台及方法
CN108228630A (zh) * 2016-12-15 2018-06-29 上海海万信息科技股份有限公司 一种基于触发响应式的文件读取监控和管理系统
CN110987079A (zh) * 2019-12-19 2020-04-10 安徽天玄智能科技有限公司 安全环境和智能雷电在线监测预警系统、方法
CN111308241A (zh) * 2020-02-28 2020-06-19 安徽中普防雷科技有限公司 基于gis平台的防雷设施在线安全监测方法及装置
CN111344710A (zh) * 2017-09-26 2020-06-26 沙特阿拉伯石油公司 使用基于机器学习的模型进行成本有效的热力学流体特性预测的方法
CN111341085A (zh) * 2017-08-09 2020-06-26 绿铜能源科技有限公司 用于从电力监控器通过无线系统提供波形的系统和方法
CN111897877A (zh) * 2020-08-12 2020-11-06 浪潮软件股份有限公司 基于分布式思想的高性能高可靠数据共享系统及方法
CN112632206A (zh) * 2020-12-24 2021-04-09 广东电网有限责任公司广州供电局 闪电特征分析方法、装置、计算机设备和存储介质
CN113656743A (zh) * 2021-08-12 2021-11-16 贵州省建筑设计研究院有限责任公司 基于气象大数据的建筑年预计雷击大地次数精准计算方法
CN114638596A (zh) * 2022-05-09 2022-06-17 广州城市信息研究所有限公司 一种自然资源业务流程审查方法、系统、设备和介质
CN115203227A (zh) * 2022-09-14 2022-10-18 三体智慧网络科技(苏州)有限公司 基于Web GIS的要素专题图层自动更新方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101252466A (zh) * 2008-04-11 2008-08-27 北京泰得思达科技发展有限公司 一种环境自动监测网络集成系统的数据库管理软件
CN101645078A (zh) * 2009-09-11 2010-02-10 中南大学 一种变化信息采集与时空数据更新一体化的系统与方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101252466A (zh) * 2008-04-11 2008-08-27 北京泰得思达科技发展有限公司 一种环境自动监测网络集成系统的数据库管理软件
CN101645078A (zh) * 2009-09-11 2010-02-10 中南大学 一种变化信息采集与时空数据更新一体化的系统与方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《中国优秀硕士学位论文全文数据库 基础科学辑》 20090715 朱伟 基于GIS的雷电预警信息综合服务应用平台设计与实现 第三,四章 1-4 , *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102520464B (zh) * 2011-12-08 2013-06-12 南京成风大气信息技术有限公司 区域积涝预报系统及其预报方法
CN102520464A (zh) * 2011-12-08 2012-06-27 南京成风大气信息技术有限公司 区域积涝预报系统及其预报方法
CN102880920A (zh) * 2012-09-29 2013-01-16 上海市电力公司 一种雷电风险预警信息处理方法
CN104281973A (zh) * 2013-07-02 2015-01-14 江苏省农业科学院 基于WebGIS的飞虱发育进程展示系统及方法
CN103761332A (zh) * 2014-02-13 2014-04-30 国家电网公司 雷电信息综合快速分析定位系统
CN103761332B (zh) * 2014-02-13 2017-01-18 国家电网公司 雷电信息综合快速分析定位系统
CN103838861B (zh) * 2014-03-19 2018-04-20 广东威创视讯科技股份有限公司 一种基于三维gis动态显示信息的方法和显示系统
CN103838861A (zh) * 2014-03-19 2014-06-04 广东威创视讯科技股份有限公司 一种基于三维gis动态显示信息的方法和显示系统
CN103926472A (zh) * 2014-04-03 2014-07-16 国家电网公司 新一代电网雷电定位监测web应用平台
CN104950187A (zh) * 2014-11-27 2015-09-30 国网山东省电力公司应急管理中心 一种基于电网gis的雷电分析预警方法及系统
CN104950187B (zh) * 2014-11-27 2016-11-09 国网山东省电力公司应急管理中心 一种基于电网gis的雷电分析预警方法及系统
CN105760671A (zh) * 2016-02-19 2016-07-13 中国南方电网有限责任公司 基于noaa/lpi雷电潜势预报指数的本地化算法
CN106060017A (zh) * 2016-05-19 2016-10-26 上海承蓝科技股份有限公司 一种数据管控的云平台及方法
CN108228630A (zh) * 2016-12-15 2018-06-29 上海海万信息科技股份有限公司 一种基于触发响应式的文件读取监控和管理系统
CN111341085A (zh) * 2017-08-09 2020-06-26 绿铜能源科技有限公司 用于从电力监控器通过无线系统提供波形的系统和方法
US11431601B2 (en) 2017-08-09 2022-08-30 Verdigris Technologies, Inc. System and methods for providing waveforms over wireless systems from power monitors
CN111344710A (zh) * 2017-09-26 2020-06-26 沙特阿拉伯石油公司 使用基于机器学习的模型进行成本有效的热力学流体特性预测的方法
CN110987079A (zh) * 2019-12-19 2020-04-10 安徽天玄智能科技有限公司 安全环境和智能雷电在线监测预警系统、方法
CN111308241A (zh) * 2020-02-28 2020-06-19 安徽中普防雷科技有限公司 基于gis平台的防雷设施在线安全监测方法及装置
CN111897877A (zh) * 2020-08-12 2020-11-06 浪潮软件股份有限公司 基于分布式思想的高性能高可靠数据共享系统及方法
CN111897877B (zh) * 2020-08-12 2024-03-26 浪潮软件股份有限公司 基于分布式思想的高性能高可靠数据共享系统及方法
CN112632206A (zh) * 2020-12-24 2021-04-09 广东电网有限责任公司广州供电局 闪电特征分析方法、装置、计算机设备和存储介质
CN112632206B (zh) * 2020-12-24 2022-12-16 广东电网有限责任公司广州供电局 闪电特征分析方法、装置、计算机设备和存储介质
CN113656743A (zh) * 2021-08-12 2021-11-16 贵州省建筑设计研究院有限责任公司 基于气象大数据的建筑年预计雷击大地次数精准计算方法
CN114638596A (zh) * 2022-05-09 2022-06-17 广州城市信息研究所有限公司 一种自然资源业务流程审查方法、系统、设备和介质
CN114638596B (zh) * 2022-05-09 2022-09-02 广州城市信息研究所有限公司 一种自然资源业务流程审查方法、系统、设备和介质
CN115203227A (zh) * 2022-09-14 2022-10-18 三体智慧网络科技(苏州)有限公司 基于Web GIS的要素专题图层自动更新方法

Similar Documents

Publication Publication Date Title
CN102147807A (zh) 基于gis的海量雷电数据时空分析方法
WO2022012285A1 (zh) 一种多源融合的多平台能源信息管理系统
CN108446293A (zh) 一种基于城市多源异构数据构建城市画像的方法
WO2017206484A1 (zh) 地理数据呈现方法及装置
CN110321443B (zh) 三维实景模型数据库构建方法、装置及数据服务系统
Loo et al. “Mapping” smart cities
CN108694244A (zh) 一种基于三维数据的电网综合应用平台
Yang et al. An improved artificial bee colony algorithm for optimal land-use allocation
CN112115198A (zh) 一种城市遥感智能服务平台
CN112148708B (zh) 面向电网规划的可视化应用系统
CN102156739A (zh) 海量闪电数据的gis平台处理方法
CN111275275B (zh) 一种配电网负荷时空特性可视化分析方法
CN111862292A (zh) 输电线路走廊的数据渲染方法、装置和计算机设备
CN103824157B (zh) 基于泛树分摊模型的分层分户图管理系统
CN103714124B (zh) 超大规模低压数据处理方法
CN108846072A (zh) 一种基于可视化分析的数据实现封装技术
CN108121707B (zh) 一种城乡建设大数据智能监管系统
Van der Borght et al. How urban spatial expansion influences CO2 emissions in Latin American countries
Roick et al. A technical framework for visualizing spatio-temporal quality metrics of volunteered geographic information
CN103761332A (zh) 雷电信息综合快速分析定位系统
CN111190953A (zh) 一种基于物联网的土地资源信息管理系统
CN110728454A (zh) 一种个体出行分析系统
CN114443787B (zh) 大气污染特征识别方法和装置
CN102254090A (zh) 采用核密度估计的闪电密度分布及ng值估计方法
Lee et al. In‐place query driven big data platform: Applications to post processing of environmental monitoring

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110810