CN113032212A - 气象数据的全网监视方法、系统、计算机设备及存储介质 - Google Patents

气象数据的全网监视方法、系统、计算机设备及存储介质 Download PDF

Info

Publication number
CN113032212A
CN113032212A CN202110303775.6A CN202110303775A CN113032212A CN 113032212 A CN113032212 A CN 113032212A CN 202110303775 A CN202110303775 A CN 202110303775A CN 113032212 A CN113032212 A CN 113032212A
Authority
CN
China
Prior art keywords
data
radar
network
information
host
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110303775.6A
Other languages
English (en)
Other versions
CN113032212B (zh
Inventor
张永华
杨玉红
张毅
沈平
郭捷
郑晓志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Meteorological Public Service Center (guangdong Meteorological Film And Television Publicity Center)
Guangdong Meteorological Observation Data Center (guangdong Meteorological Technology And Equipment Center Guangdong Meteorological Science And Technology Training Center)
Original Assignee
Guangdong Meteorological Public Service Center (guangdong Meteorological Film And Television Publicity Center)
Guangdong Meteorological Observation Data Center (guangdong Meteorological Technology And Equipment Center Guangdong Meteorological Science And Technology Training Center)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Meteorological Public Service Center (guangdong Meteorological Film And Television Publicity Center), Guangdong Meteorological Observation Data Center (guangdong Meteorological Technology And Equipment Center Guangdong Meteorological Science And Technology Training Center) filed Critical Guangdong Meteorological Public Service Center (guangdong Meteorological Film And Television Publicity Center)
Priority to CN202110303775.6A priority Critical patent/CN113032212B/zh
Publication of CN113032212A publication Critical patent/CN113032212A/zh
Application granted granted Critical
Publication of CN113032212B publication Critical patent/CN113032212B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00—Computer-aided design [CAD]
    • G06F30/10—Geometric CAD
    • G06F30/18—Network design, e.g. design based on topological or interconnect aspects of utility systems, piping, heating ventilation air conditioning [HVAC] or cabling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00—Computer-aided design [CAD]
    • G06F30/20—Design optimisation, verification or simulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/0213—Standardised network management protocols, e.g. simple network management protocol [SNMP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/0677—Localisation of faults
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0811—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking connectivity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route

Abstract

本申请涉及一种气象数据的全网监视方法、系统、计算机设备及存储介质，其中该方法包括：根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型；通过信息处理及入库模型获取观测数据的数据信息，通过对所述数据信息进行统计分析，得到观测数据的监视信息；通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息；通过网络设备状态信息采集模型实时获取网络设备的运行状态信息；通过网络连通性探测模型实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。本发明实现了对气象观测数据的全网全流程一体化监视。

Description

气象数据的全网监视方法、系统、计算机设备及存储介质
技术领域
本发明涉及气象观测技术领域，特别是涉及一种气象数据的全网监视方法、系统、计算机设备及存储介质。
背景技术
气象观测数据是开展灾害性天气监测、预警、预报和服务的重要支撑，动态监视数据处理时效及时发现和解决数据处理过程中可能存在的异常，优化数据流程，确保气象观测数据能在最短时间内进入预报业务服务平台是气象信息网络常规运行监控业务的主要任务。长期以来，国家气象信息部门先后开发了9210系统、新一代国内气象通信系统和气象信息共享系统(China Integrated Meteorological Information Service System，简称CIMISS)，其中都包括省级数据传输监视模块，依托这三大系统，各省级气象信息部门也争相研发数据传输监视系统。然而，随着气象事业的发展，实时观测资料的种类越来越多，时效要求也越来越高，现有的气象观测数据传输监视方式已不能满足需要。
目前，现有的气象观测数据传输监视系统普遍存在一些问题，包括：其一，通过系统用户只能得知数据传输状态(例如：及时、逾限或缺报等状态)，如果传输发生异常则无法知道异常发生的原因，若想知道原因则需要通过繁琐的检查。其二，通过系统用户仅能得知数据状态，无法得知传输相应数据的网络状态。其三，针对上述第二点，即使通过网络监视系统得到网络状态，也无法获得传输相应数据的网络设备(接口)状态。其四，现有的气象观测系统也无法在异常情况发生下判断探测设备是否正常的生成了观测数据。
发明内容
基于此，有必要针对上述至少一个技术问题，提供一种气象数据的全网监视方法、系统、计算机设备及存储介质。
一种气象数据的全网监视方法，所述方法包括：
根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型；
通过信息处理及入库模型获取观测数据的数据信息，所述数据信息包括数据完整性、到报时间及更新时间，通过对所述数据信息进行统计分析，得到观测数据的监视信息，所述监视信息包括及时率、逾限率、缺报率及更正率；
通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息，所述状态信息包括对应主机的CPU、内存、磁盘利用率、传输程序状态及FTP服务状态，并对传输模型中每一个主机节点进行状态标记；
通过网络设备状态信息采集模型实时获取网络设备的运行状态信息，所述运行状态信息包括CPU、内存使用率，接口状态、转发率及丢包率，并对传输模型中每一个网络设备节点进行状态标记；
通过网络连通性探测模型实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。
在其中一个实施例中，所述通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息的步骤还包括：
对于Windows系统主机，通过主机本地代理程序采集主机和文件状态信息；
对于Linux及AIX系统主机，通过远程主机监视利用SSH和Telnet远程采集主机和文件状态信息。
在其中一个实施例中，所述通过网络连通性探测模型实时获取网络连通性信息的步骤还包括：
通过网络连通性探测模型获取网络探测基本参数，并分析ping命令返回信息；
根据所述ping命令返回信息判断当前网络的连通状态；
若检测到当前网络不通，则利用tracert命令返回信息对照关键路由节点确定可能的网络故障点。
在其中一个实施例中，所述通过网络设备状态信息采集模型实时获取网络设备的运行状态信息的步骤还包括：
根据对象标识符和接口配置得到配置参数，并通过SNMP协议程序获取远程网络设备的运行状态信息。
在其中一个实施例中，所述通过信息处理及入库模型获取观测数据的数据信息的步骤还包括：
通过信息处理及入库模型收集主机及网络数据状态信息并写入节目表中；
根据所述节目表判断文件是否存在过期、及时、逾限或缺报的状态，并将判断结果写入所述节目表中。
在其中一个实施例中，所述根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型的步骤还包括：
所述雷达链路标识包含雷达站标识、省级雷达数据服务虚拟主机标识、省级雷达数据接收主机、省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器和雷达数据传输主机；
其中，省级雷达数据服务虚拟主机标识与雷达数据服务主机标识、雷达数据服务接口、雷达数据库服务接口相关联；省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器分别与各级路由器相关联。
一种气象数据的全网监视系统，所述系统包括：
关联模块，所述关联模块用于根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型；
信息入库模块，所述信息入库模块用于通过信息处理及入库模型获取观测数据的数据信息，所述数据信息包括数据完整性、到报时间及更新时间，通过对所述数据信息进行统计分析，得到观测数据的监视信息，所述监视信息包括及时率、逾限率、缺报率及更正率；
状态信息模块，所述状态信息模块用于通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息，所述状态信息包括对应主机的CPU、内存、磁盘利用率、传输程序状态及FTP服务状态，并对传输模型中每一个主机节点进行状态标记；
设备信息模块，所述设备信息模块用于通过网络设备状态信息采集模型实时获取网络设备的运行状态信息，所述运行状态信息包括CPU、内存使用率，接口状态、转发率及丢包率，并对传输模型中每一个网络设备节点进行状态标记；
网络信息模块，所述网络信息模块用于通过网络连通性探测模型实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。
在其中一个实施例中，在所述关联模块中所述雷达链路标识包含雷达站标识、省级雷达数据服务虚拟主机标识、省级雷达数据接收主机、省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器和雷达数据传输主机；
所述关联模块还用于将省级雷达数据服务虚拟主机标识与雷达数据服务主机标识、雷达数据服务接口、雷达数据库服务接口相关联；以及将省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器分别与各级路由器相关联。
一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述任意一项方法的步骤。
一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任意一项方法的步骤。
上述气象数据的全网监视方法、系统、计算机设备及存储介质先通过将数据与整个传输过程中各个关键节点相关联，然后再分别收集主机、网络和数据状态信息进而构成了一体化监视策略，实现了全网全流程一体化的监视效果。此外，通过本方案中建立的四个技术模型能够在系统运行的过程中实时、精准的发现全网故障点并及时主动提出问题，改变了传统监视模型中单一故障告警且无法准确定位故障点的问题，有效地提高了在气象监测领域中进行故障排查的效率，节约了不必要的人力资源成本。
附图说明
图1为一个实施例中广东省某雷达站探测数据全网监视的应用场景示意图；
图2为一个实施例中气象数据的全网监视方法的流程示意图；
图3为另一个实施例中气象数据的全网监视方法的流程示意图；
图4为再一个实施例中气象数据的全网监视方法的流程示意图；
图5为又一个实施例中气象数据的全网监视方法的流程示意图；
图6为一个实施例中广东省某雷达数据传输一体化的传输模型示意图；
图7为一个实施例中远程监控代理的流程示意图；
图8为一个实施例中网络连通性探测的流程示意图；
图9为一个实施例中网络设备状态信息采集的流程示意图；
图10为一个实施例中信息处理和入库的流程示意图；
图11为一个实施例中气象数据的全网监视系统的结构框图；
图12为一个实施例中全网监视系统的具体构架示意图；
图13为一个实施例中全网监视系统的监控展现示意图；
图14为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
目前，现有的气象观测数据传输监视系统普遍存在一些问题，包括：其一，通过系统用户只能得知数据传输状态(例如：及时、逾限或缺报等状态)，如果传输发生异常则无法知道异常发生的原因，若想知道原因则需要通过繁琐的检查。其二，通过系统用户仅能得知数据状态，无法得知传输相应数据的网络状态。其三，针对上述第二点，即使通过网络监视系统得到网络状态，也无法获得传输相应数据的网络设备(接口)状态。其四，现有的气象观测系统也无法在异常情况发生下判断探测设备是否正常的生成了观测数据。
基于此，本发明提供了一种气象数据的全网监视方法。具体地，为实现省级气象观测数据传输流程全网监视的目标，提出了一种全网全流程监视模型，以广东省某雷达站探测数据全网监视为例进行说明，可参考图1所示。需要说明的是，在本文中描述的雷达数据具体是指代多普勒天气雷达数据。通过实时监测数据流经三个主机节点、三个网络节点状态实现全网监视。其中，三个主机节点为：雷达站数据传输服务器、省级数据接收服务器和数据服务节点(包括目录、数据库和接口)；三个网络节点为：雷达站、市级、省级路由器。将观测数据与网络链路相对应、网络链路由网络设备、主机等构成的思路，建立了数据-链路模型、链路-网络设备-主机模型。在该方案中通过将数据与整个传输过程中各个关键节点相关联，然后再分别收集主机、网络和数据状态信息进而构成了一体化监视策略，实现了全网全流程一体化的监视效果。
可以理解的是，在本实施例中的应用场景中是以多普勒天气雷达数据为例进行说明的，而在实际的应用中具体的气象数据并不仅仅只是多普勒天气雷达数据，还可以包括地面自动站、区域站、风廓线等气象观测数据。
在一个实施例中，如图2所示，提供了一种气象数据的全网监视方法，该方法包括：
步骤202，根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型；
步骤204，通过信息处理及入库模型获取观测数据的数据信息，通过对数据信息进行统计分析，得到观测数据的监视信息；
步骤206，通过主机及文件状态信息收集模型实时获取观测数据在传输过程中所有关键主机节点的状态信息，并对传输模型中每一个主机节点进行状态标记；
步骤208，通过网络设备状态信息采集模型实时获取网络设备的运行状态信息，并对传输模型中每一个网络设备节点进行状态标记；
步骤210，通过网络连通性探测模型实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。
在本实施例中，提供了一种气象数据的全网监视方法，在本方法中首先需要根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，并将观测数据与传输过程中的关键节点进行关联以建立传输模型。
在一个实施例中，根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型的步骤还包括：
雷达链路标识包含雷达站标识、省级雷达数据服务虚拟主机标识、省级雷达数据接收主机、省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器和雷达数据传输主机；其中，省级雷达数据服务虚拟主机标识与雷达数据服务主机标识、雷达数据服务接口、雷达数据库服务接口相关联；省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器分别与各级路由器相关联。
具体地，可参考图6所示的广东某雷达数据传输一体化监视模型示意图，由某雷达链路ID(ZQRAD_LINKID)和某雷达数据ID(ZQRAD_DATAID)，建立数据与网络链路的对应关系。某雷达链路ID(ZQRAD_LINKID)包含某雷达站ID(ZQRAD_STAID)、省级某雷达数据服务虚拟主机ID(ZQRAD_PVSHOSTID)、省级某雷达数据接收主机(ZQRAD_XYDSRV)、省级某雷达虚拟路由器(ZQRAD_PVRID)、市级某雷达虚拟路由器(ZQRAD_CVRID)、某雷达站虚拟路由器(ZQRAD_SVRID)和某雷达数据传输主机(ZQRAD_DHOSTID)。其中，省级某雷达数据服务虚拟主机ID(ZQRAD_PVSHOSTID)与某雷达数据服务主机ID(ZQRAD_SHOSTID)、某雷达数据服务接口(ZQRAD_SIFID)、某雷达数据库服务接口(ZQRAD_SDBID)关联；省级某雷达虚拟路由器(ZQRAD_PVRID)、市级某雷达虚拟路由器(ZQRAD_CVRID)、某雷达站虚拟路由器(ZQRAD_SVRID)又分别与各级主(A)、备(B)路由器关联。这样就将数据与整个传输过程中各个关键节点相关联，再分别收集主机、网络和数据状态信息，构成完整的一体化监视模型。
接着，分别设计四个技术模型，各个模型分别用来完成各类关键节点监视信息的采集与处理，具体包括：
信息处理及入库模型，该模型用于获取观测数据的数据信息，数据信息包括数据完整性、到报时间及更新时间等，通过对所述数据信息进行统计分析，得到观测数据的监视信息，监视信息包括及时率、逾限率、缺报率及更正率等。
主机及文件状态信息收集模型，该模型用于实时获取观测数据在传输过程中所有关键主机节点的状态信息，状态信息包括对应主机的CPU、内存、磁盘利用率、传输程序状态及FTP服务状态等，并对传输模型中每一个主机节点进行状态标记。
网络设备状态信息采集模型，该模型用于实时获取网络设备的运行状态信息，运行状态信息包括CPU、内存使用率，接口状态、转发率及丢包率等，并对传输模型中每一个网络设备节点进行状态标记。
网络连通性探测模型，该模型用于实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。
在本实施例中，通过将数据与整个传输过程中各个关键节点相关联，然后再分别收集主机、网络和数据状态信息进而构成了一体化监视策略，实现了全网全流程一体化的监视效果。此外，通过本方案中建立的四个技术模型能够在系统运行的过程中实时、精准的发现全网故障点并及时主动提出问题，改变了传统监视模型中单一故障告警且无法准确定位故障点的问题，有效地提高了在气象监测领域中进行故障排查的效率，节约了不必要的人力资源成本。
在一个实施例中，如图3所示，提供了一种气象数据的全网监视方法，该方法中通过主机及文件状态信息收集模型实时获取观测数据在传输过程中所有关键主机节点的状态信息的步骤还包括：
步骤302，对于Windows系统主机，通过主机本地代理程序采集主机和文件状态信息；
步骤304，对于Linux及AIX系统主机，通过远程主机监视利用SSH和Telnet远程采集主机和文件状态信息。
在本实施例中，对于Windows系统主机和文件状态信息收集过程，通过开发主机本地代理程序采集状态信息，主要流程包括主机性能采集、文件监控、文件名规整和消息发送。对于Linux及AIX系统主机，开发远程主机监视代理，利用SSH和Telnet技术远程采集主机和文件状态信息。
具体地，参考图7所示的远程监控代理的示意图，主机代理程序分为客户端和服务端两个版本。在客户端实现了主机服务器CPU、内存、磁盘等状态获取，以及通过监控数据目录获取雷达基数据和产品的文件信息，并定时将获取到的信息以消息的形式发送到中心的消息中间件(ActiveMQ)。在服务端对应Linux和AIX系统的远程监控单元，通过远程SSH或Telnet连接到服务器上执行命令，解析返回的信息，获取主机状态信息和资料数据信息。在Linux系统中，代理程序通过在服务器上执行vmstat、df、free等命令获取主机状态，通过ls命令扫描制定目录下的数据，将获取到的信息直接进行入库。在AIX系统中，代理程序通过FTP连接方式扫描指定目录下各个子目录的资料，并将资料信息入库。
主机代理程序采集到的信息存入主机状态表如下表所示：
编号 字段 类型 描述信息
1 HostID Varchar2(20) 主机ID
2 TIME Date 状态采集时间
3 CYMD number(10) 年月日
4 CHMS number(10) 时分秒
5 HostCPU_P number(5,2) CPU使用率
6 HostMEM_T number(20) 主机总内存
7 HostMEM_U number(20) 主机已使用内存
8 HostMEM_P number(5,2) 主机内存使用率
9 HostDisk1 number(20) 主机磁盘1总空间
10 HostDisk1_P number(5,2) 主机磁盘1使用率
11 HostDisk2 number(20) 主机磁盘2总空间
12 HostDisk2_P number(5,2) 主机磁盘2使用率
13 HostDisk3 number(20) 主机磁盘3总空间
14 HostDisk3_P number(5,2) 主机磁盘3使用率
在一个实施例中，如图4所示，提供了一种气象数据的全网监视方法，该方法中通过网络连通性探测模型实时获取网络连通性信息的步骤还包括：
步骤402，通过网络连通性探测模型获取网络探测基本参数，并分析ping命令返回信息；
步骤404，根据ping命令返回信息判断当前网络的连通状态；
步骤406，若检测到当前网络不通，则利用tracert命令返回信息对照关键路由节点确定可能的网络故障点。
在本实施例中，网络连通性探测主要通过ping和tracert技术实现，其实现的过程可参考图8所示。具体地，先获取基本网络参数，接着分析ping命令返回信息，并判断当前网络的连通状态。若不通，则利用tracert命令返回信息，对照关键路由节点，确定可能的网络故障点。最后，将采集信息写入网络连通状态表，该表如下所示：
Figure BDA0002987313930000101
在一个实施例中，提供了一种气象数据的全网监视方法，该方法中通过网络设备状态信息采集模型实时获取网络设备的运行状态信息的步骤还包括：根据对象标识符和接口配置得到配置参数，并通过SNMP协议程序获取远程网络设备的运行状态信息。
在本实施例中，网络设备状态信息采集主要运用SNMP v2C协议完成，其实现过程如图9所示。首先，根据对象标识符(Object Identifier，OID)和接口(Interface，IF)配置得到配置参数。然后，开发SNMP协议程序获取远程网络设备(开启SNMP协议)状态信息，如CPU、内存使用率，接口状态(正常与否，down/up)转发率、丢包率等。其中，Tracert基本状态表如下表所示：
Figure BDA0002987313930000111
Figure BDA0002987313930000121
PING基本状态表如下表所示：
编号 字段 类型 描述信息
1 LINKID Varchar2(20) 链路ID
2 TIME Date Ping的时间
3 CYMD number(10) 年月日
4 CHMS number(10) 时分秒
5 DHOSTID Varchar2(20) 目标主机ID
6 DHOSTIP Varchar2(20) 目标主机IP
7 AVDELAY Varchar2(20) 网络平均延时
8 MAXDELAY Varchar2(20) 网络最大延时
9 MINDELAY Varchar2(20) 网络最小延时
10 LOSTP Varchar2(20) 丢包数
11 SENDP Varchar2(20) 发包数
12 LPRATE Varchar2(20) 丢包百分率
在一个实施例中，如图5所示，提供了一种气象数据的全网监视方法，该方法中通过信息处理及入库模型获取观测数据的数据信息的步骤还包括：
步骤502，通过信息处理及入库模型收集主机及网络数据状态信息并写入节目表中；
步骤504，根据节目表判断文件是否存在过期、及时、逾限或缺报的状态，并将判断结果写入节目表中。
在本实施例中，主机、网络和数据状态信息收集到之后，依据图10所示的流程完成信息处理和入库。具体的流程包括根据节目表判断文件过期、判断文件及时、逾限或缺报等状态，并将最后的判断结果插入对应数据表存储。其中，雷达数据表如下表所示：
Figure BDA0002987313930000122
Figure BDA0002987313930000131
应该理解的是，虽然图2-5的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2-5中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中，如图11所示，提供了一种气象数据的全网监视系统1100，该系统包括：
关联模块1101，所述关联模块用于根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型；
信息入库模块1102，所述信息入库模块用于通过信息处理及入库模型获取观测数据的数据信息，所述数据信息包括数据完整性、到报时间及更新时间，通过对所述数据信息进行统计分析，得到观测数据的监视信息，所述监视信息包括及时率、逾限率、缺报率及更正率；
状态信息模块1103，所述状态信息模块用于通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息，所述状态信息包括对应主机的CPU、内存、磁盘利用率、传输程序状态及FTP服务状态，并对传输模型中每一个主机节点进行状态标记；
设备信息模块1104，所述设备信息模块用于通过网络设备状态信息采集模型实时获取网络设备的运行状态信息，所述运行状态信息包括CPU、内存使用率，接口状态、转发率及丢包率，并对传输模型中每一个网络设备节点进行状态标记；
网络信息模块1105，所述网络信息模块用于通过网络连通性探测模型实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。
在本实施例中提供了一种气象数据的全网监视系统1100，该系统的具体构架可参考图12所示，具体包括数据采集、数据处理和数据存储三层。数据采集层，通过主机、网络和数据代理采集数据传输流程中的监视信息；通过消息中间件ActiveMQ捕获转发消息，数据处理层负责对各类监视信息进行分析处理；数据存储层以ORACLE数据表为载体，将结果插入数据表供监视系统前端调取展示。
整个系统展现可参考图13所示，该系统可以宏观展现全省综合气象观测站网各类探测设备数量、布局及其实时运行状态(包括观测节点状态、网络状态、路由器端口状态，全链路主机运行状态、接收服务器状态)全局把握全省气象装备在线运行情况，有助于无人值守全省集中统一监控业务高效实施。此外，还可以通过点击报警点，3D可视化监控系统可以自动关联进入该故障点现场，对自动定位故障详情进行可视化呈现，实现全网在线探测设备运行状态从宏观到微观的自动关联展示。
在一个实施例中，状态信息模块1103还用于：对于Windows系统主机，通过主机本地代理程序采集主机和文件状态信息；对于Linux及AIX系统主机，通过远程主机监视利用SSH和Telnet远程采集主机和文件状态信息。
在一个实施例中，网络信息模块1105还用于：通过网络连通性探测模型获取网络探测基本参数，并分析ping命令返回信息；根据所述ping命令返回信息判断当前网络的连通状态；若检测到当前网络不通，则利用tracert命令返回信息对照关键路由节点确定可能的网络故障点。
在一个实施例中，设备信息模块1104还用于：根据对象标识符和接口配置得到配置参数，并通过SNMP协议程序获取远程网络设备的运行状态信息。
在一个实施例中，信息入库模块还用于：通过信息处理及入库模型收集主机及网络数据状态信息并写入节目表中；根据所述节目表判断文件是否存在过期、及时、逾限或缺报的状态，并将判断结果写入所述节目表中。
在一个实施例中，在关联模块1101中所述雷达链路标识包含雷达站标识、省级雷达数据服务虚拟主机标识、省级雷达数据接收主机、省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器和雷达数据传输主机；
关联模块1101还用于将省级雷达数据服务虚拟主机标识与雷达数据服务主机标识、雷达数据服务接口、雷达数据库服务接口相关联；以及将省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器分别与各级路由器相关联。
关于气象数据的全网监视系统的具体限定可以参见上文中对于气象数据的全网监视方法的限定，在此不再赘述。
在一个实施例中，提供了一种计算机设备，其内部结构图可以如图14所示。该计算机设备包括通过系统总线连接的处理器、存储器以及网络接口。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种气象数据的全网监视方法。
本领域技术人员可以理解，图14中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以上各个方法实施例中的步骤。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以上各个方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种气象数据的全网监视方法，其特征在于，所述方法包括：
根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型；
通过信息处理及入库模型获取观测数据的数据信息，所述数据信息包括数据完整性、到报时间及更新时间，通过对所述数据信息进行统计分析，得到观测数据的监视信息，所述监视信息包括及时率、逾限率、缺报率及更正率；
通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息，所述状态信息包括对应主机的CPU、内存、磁盘利用率、传输程序状态及FTP服务状态，并对传输模型中每一个主机节点进行状态标记；
通过网络设备状态信息采集模型实时获取网络设备的运行状态信息，所述运行状态信息包括CPU、内存使用率，接口状态、转发率及丢包率，并对传输模型中每一个网络设备节点进行状态标记；
通过网络连通性探测模型实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。
2.根据权利要求1所述的气象数据的全网监视方法，其特征在于，所述通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息的步骤还包括：
对于Windows系统主机，通过主机本地代理程序采集主机和文件状态信息；
对于Linux及AIX系统主机，通过远程主机监视利用SSH和Telnet远程采集主机和文件状态信息。
3.根据权利要求1所述的气象数据的全网监视方法，其特征在于，所述通过网络连通性探测模型实时获取网络连通性信息的步骤还包括：
通过网络连通性探测模型获取网络探测基本参数，并分析ping命令返回信息；
根据所述ping命令返回信息判断当前网络的连通状态；
若检测到当前网络不通，则利用tracert命令返回信息对照关键路由节点确定可能的网络故障点。
4.根据权利要求1所述的气象数据的全网监视方法，其特征在于，所述通过网络设备状态信息采集模型实时获取网络设备的运行状态信息的步骤还包括：
根据对象标识符和接口配置得到配置参数，并通过SNMP协议程序获取远程网络设备的运行状态信息。
5.根据权利要求1所述的气象数据的全网监视方法，其特征在于，所述通过信息处理及入库模型获取观测数据的数据信息的步骤还包括：
通过信息处理及入库模型收集主机及网络数据状态信息并写入节目表中；
根据所述节目表判断文件是否存在过期、及时、逾限或缺报的状态，并将判断结果写入所述节目表中。
6.根据权利要求1-5任一项所述的气象数据的全网监视方法，其特征在于，所述根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型的步骤还包括：
所述雷达链路标识包含雷达站标识、省级雷达数据服务虚拟主机标识、省级雷达数据接收主机、省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器和雷达数据传输主机；
其中，省级雷达数据服务虚拟主机标识与雷达数据服务主机标识、雷达数据服务接口、雷达数据库服务接口相关联；省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器分别与各级路由器相关联。
7.一种气象数据的全网监视系统，其特征在于，所述系统包括：
关联模块，所述关联模块用于根据雷达数据标识和雷达链路标识，建立观测数据与网络链路的对应关系，将观测数据与传输过程中的关键节点进行关联以建立传输模型；
信息入库模块，所述信息入库模块用于通过信息处理及入库模型获取观测数据的数据信息，所述数据信息包括数据完整性、到报时间及更新时间，通过对所述数据信息进行统计分析，得到观测数据的监视信息，所述监视信息包括及时率、逾限率、缺报率及更正率；
状态信息模块，所述状态信息模块用于通过主机及文件状态信息收集模型实时获取所述观测数据在传输过程中所有关键主机节点的状态信息，所述状态信息包括对应主机的CPU、内存、磁盘利用率、传输程序状态及FTP服务状态，并对传输模型中每一个主机节点进行状态标记；
设备信息模块，所述设备信息模块用于通过网络设备状态信息采集模型实时获取网络设备的运行状态信息，所述运行状态信息包括CPU、内存使用率，接口状态、转发率及丢包率，并对传输模型中每一个网络设备节点进行状态标记；
网络信息模块，所述网络信息模块用于通过网络连通性探测模型实时获取网络连通性信息，并对传输模型中的每一条网络链路进行标记。
8.根据权利要求7所述的气象数据的全网监视系统，其特征在于，在所述关联模块中所述雷达链路标识包含雷达站标识、省级雷达数据服务虚拟主机标识、省级雷达数据接收主机、省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器和雷达数据传输主机；
所述关联模块还用于将省级雷达数据服务虚拟主机标识与雷达数据服务主机标识、雷达数据服务接口、雷达数据库服务接口相关联；以及将省级雷达虚拟路由器、市级雷达虚拟路由器、雷达站虚拟路由器分别与各级路由器相关联。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
CN202110303775.6A 2021-03-22 2021-03-22 气象数据的全网监视方法、系统、计算机设备及存储介质 Active CN113032212B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110303775.6A CN113032212B (zh) 2021-03-22 2021-03-22 气象数据的全网监视方法、系统、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110303775.6A CN113032212B (zh) 2021-03-22 2021-03-22 气象数据的全网监视方法、系统、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN113032212A true CN113032212A (zh) 2021-06-25
CN113032212B CN113032212B (zh) 2022-07-26

Family

ID=76472505

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110303775.6A Active CN113032212B (zh) 2021-03-22 2021-03-22 气象数据的全网监视方法、系统、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN113032212B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114978737A (zh) * 2022-05-31 2022-08-30 北京万云科技开发有限公司 一种多普勒天气雷达数据的综合管理系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104778548A (zh) * 2015-04-14 2015-07-15 中国气象局气象探测中心 一种综合气象观测系统运行监控综合评估方法
CN105407011A (zh) * 2015-10-26 2016-03-16 贵州电网公司信息通信分公司 一种it基础平台监控指标采集系统及采集方法
US20160359695A1 (en) * 2015-06-04 2016-12-08 Cisco Technology, Inc. Network behavior data collection and analytics for anomaly detection
CN106383765A (zh) * 2016-08-31 2017-02-08 北京百分点信息科技有限公司 一种数据监控方法及装置
CN109061650A (zh) * 2018-08-10 2018-12-21 北京无线电测量研究所 基于阵列天气雷达的组网探测方法及系统
CN109446290A (zh) * 2018-10-19 2019-03-08 广东省气象探测数据中心 一种智能三维虚拟可视化气象装备综合保障方法
CN112444892A (zh) * 2020-10-15 2021-03-05 北京应用气象研究所 一种基于主被动探测手段的无人机监测作业平台及方法
CN112486776A (zh) * 2020-12-07 2021-03-12 中国船舶重工集团公司第七一六研究所 一种集群成员节点可用性监测设备及方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104778548A (zh) * 2015-04-14 2015-07-15 中国气象局气象探测中心 一种综合气象观测系统运行监控综合评估方法
US20160359695A1 (en) * 2015-06-04 2016-12-08 Cisco Technology, Inc. Network behavior data collection and analytics for anomaly detection
CN105407011A (zh) * 2015-10-26 2016-03-16 贵州电网公司信息通信分公司 一种it基础平台监控指标采集系统及采集方法
CN106383765A (zh) * 2016-08-31 2017-02-08 北京百分点信息科技有限公司 一种数据监控方法及装置
CN109061650A (zh) * 2018-08-10 2018-12-21 北京无线电测量研究所 基于阵列天气雷达的组网探测方法及系统
CN109446290A (zh) * 2018-10-19 2019-03-08 广东省气象探测数据中心 一种智能三维虚拟可视化气象装备综合保障方法
CN112444892A (zh) * 2020-10-15 2021-03-05 北京应用气象研究所 一种基于主被动探测手段的无人机监测作业平台及方法
CN112486776A (zh) * 2020-12-07 2021-03-12 中国船舶重工集团公司第七一六研究所 一种集群成员节点可用性监测设备及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114978737A (zh) * 2022-05-31 2022-08-30 北京万云科技开发有限公司 一种多普勒天气雷达数据的综合管理系统
CN114978737B (zh) * 2022-05-31 2023-10-24 北京万云科技开发有限公司 一种多普勒天气雷达数据的综合管理系统

Also Published As

Publication number Publication date
CN113032212B (zh) 2022-07-26

Similar Documents

Publication Publication Date Title
CN102158360A (zh) 一种基于时间因子因果关系定位的网络故障自诊断方法
CN101808351B (zh) 业务影响分析方法和系统
Nováczki An improved anomaly detection and diagnosis framework for mobile network operators
CN106980071A (zh) 基于电网gis可视化抢修系统及其工作方法
CN111579923B (zh) 一种配电网故障诊断系统及方法
CN109617732B (zh) 一种电力无线专网一体化混合组网及综合管理方法
CN112291075B (zh) 网络故障定位方法、装置、计算机设备及存储介质
CN101668025B (zh) 一种链路层网络拓扑发现方法及装置
CN110209723A (zh) 一种基于物联网大数据的设备信息采集系统
CN105813092B (zh) 一种基于话单的楼宇网络覆盖优化方法和装置
CN109391923A (zh) 一种基于5g架构的建筑能耗管理方法及系统
CN114070742A (zh) 电力监控系统网络拓扑识别方法及平台
CN113032212B (zh) 气象数据的全网监视方法、系统、计算机设备及存储介质
CN113946497A (zh) 一种适用于多云平台资源统一智能监控告警的方法
CN105306254B (zh) 自动气象站的监控云平台系统及方法
CN105207835B (zh) 一种无线局域网的网元工作状态的判定方法及装置
CN110941558A (zh) 一种智慧办公远程运维的方法及系统
CN113890820A (zh) 一种数据中心网络故障节点诊断方法及系统
CN113902583A (zh) 利用低压网络设备数据的配网侧运维方法及系统
CN114257438B (zh) 基于蜜罐的电力监控系统管理方法、装置和计算机设备
WO2022160698A1 (zh) 计量自动化系统的通信方法、系统、装置和计算机设备
CN115603447A (zh) 一种用电监测方法和系统
CN113946941A (zh) 一种配电站房物联采集模型的生成方法及装置
CN104125082B (zh) 用于电力系统通讯网络的监测方法、装置及系统
CN107454617B (zh) 一种实时观测基站设备数据指标的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant