CN104933236A - 一种空气质量模拟系统 - Google Patents
一种空气质量模拟系统 Download PDFInfo
- Publication number
- CN104933236A CN104933236A CN201510305757.6A CN201510305757A CN104933236A CN 104933236 A CN104933236 A CN 104933236A CN 201510305757 A CN201510305757 A CN 201510305757A CN 104933236 A CN104933236 A CN 104933236A
- Authority
- CN
- China
- Prior art keywords
- computing
- script
- simulation
- user
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004088 simulation Methods 0.000 title claims abstract description 36
- 238000013515 script Methods 0.000 claims abstract description 27
- 238000004364 calculation method Methods 0.000 claims abstract description 13
- 238000012544 monitoring process Methods 0.000 claims abstract description 11
- 238000000034 method Methods 0.000 claims description 14
- 239000012159 carrier gas Substances 0.000 claims 1
- 230000001133 acceleration Effects 0.000 abstract description 2
- 238000012805 post-processing Methods 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 239000002253 acid Substances 0.000 description 1
- 239000008277 atmospheric particulate matter Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000001311 chemical methods and process Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000008021 deposition Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种空气质量模拟系统，其硬件包括Web服务器、计算系统、监控系统和展示系统；所述计算系统、监控系统和展示系统均与Web服务器连接；其模拟包括以下步骤：步骤一，数据准备；步骤二，用户进行模拟参数，系统生成脚本；步骤三，系统根据超算的配置，将脚本提交至计算集群；步骤五，计算完成后根据预设的路径自动同步计算结果；步骤六，数据展示；该空气质量模拟系统，解决了现有技术中运行时技术门槛高、操作复杂、需要人工干预的问题加速模式运行速度、无人值守、自动化的情形。
Description
技术领域
本发明涉及空气质量检测应用技术领域，具体为一种空气质量模拟系统。
背景技术
铝CMAQ是美国环保署(USEPA)开发的第三代区域空气质量模式。CMAQ模式秉承“一个大气(One Atmosphere)”的理念，将对流层大气作为一个整体，使用一套各个模块相容的大气控制方程，对环境大气中的物理、化学过程以及不同物种的相关作用过程进行周密的考虑，适用于光化学烟雾、区域酸沉降、大气颗粒物污染等多尺度多物种的复杂大气环境的模拟，为空气质量预报、区域环境规划以调控提供支持。
用CMAQ进行空气质量模拟的计算量一般较大，因此需要在高性能计算集群上进行并行计算。在现在有的操作方式中，用户通常需要使用远程字符终端连接到高性能计算集群系统，并在命令行环境下执行一系列操作才能完成这一数值模拟过程，一般包含如下几个流程：准备CMAQ所需要的数据文件，该数据通常需要从多个不同的来源获取，如气象资料需要从美国国家海洋和大气管理局(NOAA)的网站上获取，排放清单数据需要由用户自行编制。准备运行脚本，根据模型仿真的具体需要，设置模型仿真的时间、范围、分辨率等基本参数。提交计算请求，针对计算集群上所运行的队列系统，设定计算节点、任务并行方式、准备任务提交脚本。监控计算流程，分析集群生成的日志信息，分析运行中出现的错误信息，若计算结束则同步计算结果至本地。对计算结果进行后处理操作，抽取所需要数据生成表格或图片。
现有模式运行需要手工撰写各种脚本驱动模式运行，且提交至运算服务器时无法及时Get运行状态，运行后的结果处理工作也需要脚本参与。
发明内容
本发明的目的在于提供一种空气质量模拟系统，进而弥补现有技术的不足。
为实现上述目的，本发明提供如下技术方案：一种空气质量模拟系统，其硬件包括Web服务器、计算系统、监控系统和展示系统；所述计算系统、监控系统和展示系统均与Web服务器连接。
一种空气质量模拟系统，其模拟包括以下步骤：步骤一，数据准备；步骤二，用户进行模拟参数，系统生成脚本；步骤三，系统根据超算的配置，将脚本提交至计算集群；步骤五，计算完成后根据预设的路径自动同步计算结果；步骤六，数据展示。
在步骤一中，系统自动从NOAA网站上下载气象数据并自主准备排放清单；统维护自动运行的脚本，每隔指定步长去网站检查基础数据更新情况，若发现数据已经更新，则自动同步回本地，并将该日的状态设置为可计算；步骤四，在集群计算过程中，监控运行状态若有出错信息推送给用户。
在步骤二中，用户在Web页面上使用拖拽的方式划定仿真区域，仿真时间；并且可以根据实际需要设置两层或三层范围的嵌套模拟，外层空间可以对内层提供边界数据结果。此种情景下需要顺序的进行三层仿真的运行。
在步骤三中，系统根据超算的配置，将脚本提交至计算集群。
针对不同计算集群运行的队列系统，生成对应的任务提交脚本；例如在使用Torque的系统中，需要设定需要的计算节点数目、日志输出路径、所依赖的并行库等信息；脚本生成完毕之后，待用户确认后，便将脚本提交至计算集群开始计算。
在步骤四中，在集群计算过程中，监控运行状态若有出错信息推送给用户；在计算过程中，系统监控计算状态，如计算速度、预计完成时间、消息日志等信息。
在步骤五中，集群计算完成后，系统将数据同步至本地，并根据用户需求进行后处理工作。
在步骤六中，数据展示；系统基于Html5中的canvas绘图动态将结果渲染在网页上，并提供报表方式的数据展示。
进一步，在所述的步骤四中，若在运行时出现错误信息，则会根据用户之前设定报警方式及时告知用户。
与现有技术相比，本发明的有益效果是：该空气质量模拟系统，解决了现有技术中运行时技术门槛高、操作复杂、需要人工干预的问题加速模式运行速度、无人值守、自动化的情形。
附图说明
图1为本发明整体结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1，本发明提供一种技术方案：一种空气质量模拟系统，其硬件包括Web服务器1、计算系统2、监控系统3和展示系统4；所述计算系统2、监控系统3和展示系统4均与Web服务器1连接。
一种空气质量模拟系统，其模拟包括以下步骤：步骤一，数据准备；步骤二，用户进行模拟参数，系统生成脚本；步骤三，系统根据超算的配置，将脚本提交至计算集群；步骤五，计算完成后根据预设的路径自动同步计算结果；步骤六，数据展示。
在步骤一中，系统自动从NOAA网站上下载气象数据并自主准备排放清单；统维护自动运行的脚本，每隔指定步长去网站检查基础数据更新情况，若发现数据已经更新，则自动同步回本地，并将该日的状态设置为可计算；步骤四，在集群计算过程中，监控运行状态若有出错信息推送给用户。
在步骤二中，用户在Web页面上使用拖拽的方式划定仿真区域，仿真时间；并且可以根据实际需要设置两层或三层范围的嵌套模拟，外层空间可以对内层提供边界数据结果。此种情景下需要顺序的进行三层仿真的运行。
在步骤三中，系统根据超算的配置，将脚本提交至计算集群。
针对不同计算集群运行的队列系统，生成对应的任务提交脚本；例如在使用Torque的系统中，需要设定需要的计算节点数目、日志输出路径、所依赖的并行库等信息；脚本生成完毕之后，待用户确认后，便将脚本提交至计算集群开始计算。
在步骤四中，在集群计算过程中，监控运行状态若有出错信息推送给用户；在计算过程中，系统监控计算状态，如计算速度、预计完成时间、消息日志等信息。
在步骤五中，集群计算完成后，系统将数据同步至本地，并根据用户需求进行后处理工作。
在步骤六中，数据展示；系统基于Html5中的canvas绘图动态将结果渲染在网页上，并提供报表方式的数据展示。
进一步，在所述的步骤四中，若在运行时出现错误信息，则会根据用户之前设定报警方式(邮件、短信、微信等)及时告知用户。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。
Claims (3)
1.一种空气质量模拟系统，其硬件包括Web服务器、计算系统、监控系统和展示系统；其特征在于：所述计算系统、监控系统和展示系统均与Web服务器连接。
2.一种空气质量模拟系统，其模拟包括以下步骤：步骤一，数据准备；步骤二，用户进行模拟参数，系统生成脚本；步骤三，系统根据超算的配置，将脚本提交至计算集群；步骤五，计算完成后根据预设的路径自动同步计算结果；步骤六，数据展示；其特征在于：
在步骤一中，系统自动从NOAA网站上下载气象数据并自主准备排放清单；统维护自动运行的脚本，每隔指定步长去网站检查基础数据更新情况，若发现数据已经更新，则自动同步回本地，并将该日的状态设置为可计算；步骤四，在集群计算过程中，监控运行状态若有出错信息推送给用户；
在步骤二中，用户在Web页面上使用拖拽的方式划定仿真区域，仿真时间；并且可以根据实际需要设置两层或三层范围的嵌套模拟，外层空间可以对内层提供边界数据结果；
在步骤三中，系统根据超算的配置，将脚本提交至计算集群；
针对不同计算集群运行的队列系统，生成对应的任务提交脚本；例如在使用Torque的系统中，需要设定需要的计算节点数目、日志输出路径、所依赖的并行库等信息；脚本生成完毕之后，待用户确认后，便将脚本提交至计算集群开始计算；
在步骤四中，在集群计算过程中，监控运行状态若有出错信息推送给用户；在计算过程中，系统监控计算状态，如计算速度、预计完成时间、消息日志等信息；
在步骤五中，集群计算完成后，系统将数据同步至本地，并根据用户需求进行后处理工作；
在步骤六中，数据展示；系统基于Html5中的canvas绘图动态将结果渲
染在网页上，并提供报表方式的数据展示。
3.根据权利要求1所述的一种空气质量模拟系统，其特征在于：在所述的步骤四中，若在运行时出现错误信息，则会根据用户之前设定报警方式及时告知用户。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510305757.6A CN104933236A (zh) | 2015-06-01 | 2015-06-01 | 一种空气质量模拟系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510305757.6A CN104933236A (zh) | 2015-06-01 | 2015-06-01 | 一种空气质量模拟系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104933236A true CN104933236A (zh) | 2015-09-23 |
Family
ID=54120402
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510305757.6A Pending CN104933236A (zh) | 2015-06-01 | 2015-06-01 | 一种空气质量模拟系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104933236A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107577486A (zh) * | 2017-09-29 | 2018-01-12 | 广州数鹏通科技有限公司 | 气象信息绘图处理方法、装置、计算机设备和存储介质 |
| CN109814765A (zh) * | 2017-11-22 | 2019-05-28 | 广州数鹏通科技有限公司 | 气象图像比对方法、装置、计算机设备和存储介质 |
-
2015
- 2015-06-01 CN CN201510305757.6A patent/CN104933236A/zh active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107577486A (zh) * | 2017-09-29 | 2018-01-12 | 广州数鹏通科技有限公司 | 气象信息绘图处理方法、装置、计算机设备和存储介质 |
| CN107577486B (zh) * | 2017-09-29 | 2020-12-04 | 广州数鹏通科技有限公司 | 气象信息绘图处理方法、装置、计算机设备和存储介质 |
| CN109814765A (zh) * | 2017-11-22 | 2019-05-28 | 广州数鹏通科技有限公司 | 气象图像比对方法、装置、计算机设备和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110795219B (zh) | 适用于多种计算框架的资源调度方法及系统 | |
| US20200090085A1 (en) | Digital twin graph | |
| EP3032442B1 (en) | Modeling and simulation of infrastructure architecture for big data | |
| CN112334881A (zh) | 用于提供针对数据库到云计算系统的迁移的推荐的框架 | |
| CN104145257A (zh) | 用于被连接设备的语义缓存云服务 | |
| Xhafa et al. | Processing and analytics of big data streams with yahoo! s4 | |
| US10719375B2 (en) | Systems and method for event parsing | |
| Yang et al. | An implementation of real-time air quality and influenza-like illness data storage and processing platform | |
| PH12019000172A1 (en) | Generating an execution script for configuration of a system | |
| CN110275927A (zh) | 一种基于MySQL的流式实时数据同步系统 | |
| CN113282795A (zh) | 数据结构图生成及更新方法、装置、电子设备及存储介质 | |
| CN114691050B (zh) | 基于kubernetes的云原生存储方法、装置、设备及介质 | |
| CN114416703A (zh) | 数据完整性自动监控方法、装置、设备及介质 | |
| CN103914307A (zh) | 一种基于可复用库的交互界面快速实现方法 | |
| CN114610923B (zh) | 一种大数据处理方法、装置、设备及介质 | |
| EP3021266A1 (en) | Lean product modeling systems and methods | |
| CN110764433A (zh) | 一种基于v-rep平台的集群无人机系统并行仿真方法 | |
| CN113010598A (zh) | 面向遥感大数据处理的动态自适应分布式协同工作流系统 | |
| CN111950048A (zh) | 开发视图和机理视图构架产品样机模型的映射方法及装置 | |
| CN107533329A (zh) | 多学科工程系统中交叉学科数据验证检查的方法与系统 | |
| CN104933236A (zh) | 一种空气质量模拟系统 | |
| Wen et al. | K8sSim: A simulation tool for Kubernetes schedulers and its applications in scheduling algorithm optimization | |
| CN113177088B (zh) | 一种材料辐照损伤多尺度模拟大数据管理系统 | |
| CN112632293B (zh) | 行业图谱的构建方法、装置、电子设备及存储介质 | |
| CN113626163A (zh) | 一种轻量级分布式增量自调度方法、系统、设备和介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150923 |
|
| WD01 | Invention patent application deemed withdrawn after publication |