CN109660455B - 机巡数据存储方法、装置、系统、网关设备和存储介质 - Google Patents

机巡数据存储方法、装置、系统、网关设备和存储介质 Download PDF

Info

Publication number
CN109660455B
CN109660455B CN201811590030.7A CN201811590030A CN109660455B CN 109660455 B CN109660455 B CN 109660455B CN 201811590030 A CN201811590030 A CN 201811590030A CN 109660455 B CN109660455 B CN 109660455B
Authority
CN
China
Prior art keywords
storage server
machine patrol
data
storage
patrol data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811590030.7A
Other languages
English (en)
Other versions
CN109660455A (zh
Inventor
陈彬
衡星辰
王志英
张文瀚
田磊
张世良
甘莹
穆文杰
任昊文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Southern Power Grid Digital Platform Technology Guangdong Co ltd
China Southern Power Grid Co Ltd
Southern Power Grid Digital Grid Research Institute Co Ltd
Original Assignee
China Southern Power Grid Co Ltd
Southern Power Grid Digital Grid Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Southern Power Grid Co Ltd, Southern Power Grid Digital Grid Research Institute Co Ltd filed Critical China Southern Power Grid Co Ltd
Priority to CN201811590030.7A priority Critical patent/CN109660455B/zh
Publication of CN109660455A publication Critical patent/CN109660455A/zh
Application granted granted Critical
Publication of CN109660455B publication Critical patent/CN109660455B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • H04L67/1023Server selection for load balancing based on a hash applied to IP addresses or costs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/66Arrangements for connecting between networks having differing types of switching systems, e.g. gateways
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及一种机巡数据存储方法、装置、系统、网关设备和存储介质。所述方法包括:接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。采用本方法能够既能够实现全网统一管理机巡数据又能够节约带宽成本。

Description

机巡数据存储方法、装置、系统、网关设备和存储介质
技术领域
本申请涉及电力技术领域,特别是涉及一种机巡数据存储方法、装置、系统、网关设备和存储介质。
背景技术
随着无人机技术的发展,利用无人机开展电力线路安全巡检已得到越来越多的重视,成为当前电网巡检技术的一个重要发展趋势。无人机输电线路巡检具有巡检成本低、投资小、智能化、自动化的特点,同时在巡检过程中会生产大量的原始数据,缺陷数据、缺陷报告,其中原始数据有可见光照片、视频,红外照片、视频,紫外照片、视频等。这些机巡数据的数据量大,增长快,重要性,数据访问热度不同,获取数据延迟性等特性,可以在不同价值的硬件产品上存储不同特性数据。
现有的机巡数据的存储位置较为分散,为了便于全网的统一管理,一种方式是将所有的机巡数据的收集到一起,例如,收集到同一位置的存储服务器或者存储服务器中。但由于机巡数据的数据量较大,这种方式传输带宽消耗较大,带宽成本高。因此,如何既能够实现全网统一管理机巡数据又能够节约带宽成本成为一个亟待解决的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种既能够实现全网统一管理机巡数据又能够节约带宽成本的机巡数据存储方法、装置、系统、网关设备和存储介质。
一种机巡数据存储方法,该方法包括:
接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,上述的机巡数据存储方法还包括:
根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群;
若需要发送给第二存储服务器集群,则向第二存储服务器集群侧网关设备发送目标机巡数据和第二存储指示信息;
第二存储指示信息用于指示第二存储服务器集群侧网关设备确定存储目标机巡数据的第二存储服务器,并指示第二存储服务器存储目标机巡数据,指示第二存储服务器将目标机巡数据的元数据、目标机巡数据的来源信息,第二存储服务器的信息和目标机巡数据在第二存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群,包括:
在第一存储服务器集群为区域级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应区域的公共数据检测规则,检测目标机巡数据是否是公共数据;
在目标机巡数据是公共数据时,确定目标机巡数据需要发送给第二存储服务器集群。
在其中一个实施例中,上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群,包括:
在第一存储服务器集群为网级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应的数据分发规则,检测目标机巡数据是否是需要向区域级存储服务器分发的数据;
在目标机巡数据是需要向区域级存储服务器分发的数据时,确定目标机巡数据需要发送给第二存储服务器集群。
一种机巡数据存储装置,该装置包括:
接收模块,用于接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
处理模块,用于提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
发送模块,用于向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
一种机巡数据存储系统,该系统包括:区域级网关设备、区域级存储服务器集群、网级网关设备、网级存储服务器集群和网级应用服务器;
区域级网关设备用于接收第一机巡数据,提取第一机巡数据的元数据,根据第一机巡数据的元数据,确定区域级存储服务器集群存储第一机巡数据的第三存储服务器,向第三存储服务器发送第三存储指示信息,其中,第一机巡数据为区域级存储服务器集群所对应区域的机巡设备的机巡数据;
网级网关设备用于接收第二机巡数据,提取第二机巡数据的元数据,根据第二机巡数据的元数据确定网级存储服务器集群中存储第二机巡数据的第四存储服务器,向第四存储服务器发送第四存储指示信息,其中,第二机巡数据为网级存储服务器集群所对应的机巡设备的机巡数据;
第三存储服务器用于根据第三存储指示信息存储第一机巡数据,将第一机巡数据的元数据、第三存储服务器的信息和第一机巡数据在第三存储服务器的存储位置信息,发送给网级应用服务器;
第四存储服务器用于根据第四存储指示信息存储第二机巡数据,将第二机巡数据的元数据、第四存储服务器的信息和第二机巡数据在第四存储服务器的存储位置信息,发送给网级应用服务器;
网级应用服务器用于对第一机巡数据的元数据、第三存储服务器的信息和第一机巡数据在第三存储服务器的存储位置信息进行绑定存储,还用于对第二机巡数据的元数据、第四存储服务器的信息和第二机巡数据在第四存储服务器的存储位置信息进行绑定存储。
在其中一个实施例中,上述的区域级网关设备还用于根据第一标机巡数据的元数据检测第一机巡数据是否需要发送给网级存储服务器集群,若是,则向网级网关设备发送第一机巡数据和第五存储指示信息;
上述的网级网关设备还用于根据第二标机巡数据的元数据检测是否需要将第二机巡数据下发给区域级存储服务器集群,若是,则向区域级网关设备发送第二机巡数据和第六存储指示信息;
上述的区域级网关设备还用于根据第二机巡数据的元数据确定区域级存储服务器集群中存储第二机巡数据的第五存储服务器,并将第六存储指示信息转发给第五存储服务器;
上述的网级网关设备还用于根据第一机巡数据的元数据确定网级存储服务器集群中存储第一机巡数据的第六存储服务器,并将第五存储指示信息转发给第六存储服务器;
第六存储服务器用于根据第五存储指示信息存储第一机巡数据,并将第一机巡数据的元数据、第一机巡数据的采集区域信息、第六存储服务器的信息和第一机巡数据在第六存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储;
第五存储服务器用于根据第六存储指示信息存储第二机巡数据,并将第二机巡数据的元数据、第四存储服务器的信息和第二机巡数据在第四存储服务器的存储位置信息,第五存储服务器的信息和第二机巡数据在第五存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,上述的网级应用服务器用于将存储的第一机巡数据的两条记录数据和第二机巡数据的两条记录数据分别合并为一条记录数据。
一种网关设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:
接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
上述机巡数据存储方法、装置、系统、网关设备和存储介质,在接收目标机巡数据,是根据提取到的目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,该第一存储服务器为第一存储服务器集群中的存储服务器,向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。该方案中,机巡数据可以保存在本地的存储服务器中,只需要将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息这些数据量较小的数据发送给网级应用服务器,由网级应用服务器进行绑定存储,如此,可以基于网级应用服务器中记录的信息进行全网统一管理机巡数据,又不需要传输数据量较大的机巡数据,能够节约带宽成本。
附图说明
图1为一个实施例中机巡数据存储方法的应用环境图;
图2为一个实施例中机巡数据存储方法的流程示意图;
图3为一个实施例中的省级的机巡数据存储步骤的流程示意图;
图4为一个实施例中的网级的机巡数据存储步骤的流程示意图;
图5为一个实施例中机巡数据存储装置的结构框图;
图6为一个实施例中机巡数据存储系统的结构框图;
图7为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
需要说明的是,本发明实施例所涉及的术语“第一\第二\第三”仅仅是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序。应该理解“第一\第二\第三”区分的对象在适当情况下可以互换,以使这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。术语“或者/和”,描述关联对象的关联关系,表示可以存在三种关系,例如,A或者/和B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或者”的关系。
图1为一个实施例中机巡数据存储方法的应用环境图。参见图1所示,该机巡数据存储方法应用于机巡数据存储系统。该机巡数据存储系统包括区域级网关设备102、网级网关设备104、区域级存储服务器集群106、网级存储服务器集群108和网级应用服务器110。区域级网关设备102、网级网关设备104、区域级存储服务器集群106、网级存储服务器集群108和网级应用服务器110之间通过网络进行通信。对于同一区域的区域级网关设备102和区域级存储服务器集群106之间可以基于局域网进行通信,网级网关设备104、网级存储服务器集群108和网级应用服务器110可以基于局域网进行通信。区域级网关设备102和网级网关设备104通过公网进行通信。区域级存储服务器集群106和网级存储服务器集群108可以分别包括多个存储服务器。网级应用服务器110可以用独立的服务器或者是多个服务器组成的服务器集群来实现。其中,区域的具体划分方式可以根据实际需要设定,例如,以省或者市为单位进行划分,具体地,区域级网关设备102可以是省级网关设备,区域级存储服务器集群106可以是省级存储服务器集群,其中,同一区域的区域级存储服务器集群106和区域级网关设备102的数量至少为1,不同区域采用不同的区域级存储服务器集群106和区域级网关设备102。
在一个实施例中,如图2所示,提供了一种机巡数据存储方法,以该方法应用于图1中的区域级网关设备102或者网级网关设备104中的任意一个网关设备为例进行说明,包括以下步骤:
步骤202,接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
这里,第一存储服务器集群可以是任意一个区域级存储服务器集群,也可以是网级存储服务器集群。第一存储服务器集群中可以包括多个存储服务器。
这里,机巡数据可以包括机巡设备的原始数据、缺陷数据和缺陷报告等中的一种或者多种。
步骤204,提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
这里,元数据可以包括数据属性信息或者/和请求参数等。其中,数据属性信息可以包括数据大小或者/和数据格式等信息。
具体地,可以预先建立元数据和存储服务器的对应关系,网关设备在提取到目标机巡数据的元数据时,根据该对应关系查询与目标机巡数据的元数据对应的存储服务器,则该与目标机巡数据的元数据对应的存储服务器为第一存储服务器。
步骤206,向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
这里,第一存储服务器的信息可以是第一存储服务器的标识信息,也可以是第一存储服务器的归属信息,例如,归属于那个区域,或者可以是第一存储服务器的属性信息。
这里,存储位置信息可以是存储路径信息或者存储目录信息。
本领域技术人员应该可以理解,发送给网级应用服务器一般是指经区域级网关设备和网级网关设备转发给网级应用服务器,或者经网级网关设备转发给网级应用服务器。
具体地,网关设备向第一存储服务器发送第一存储指示信息,第一存储服务器接收到该第一存储指示信息后存储目标机巡数据,在完成目标机巡数据的存储时,将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息发送给网级应用服务器,网级应用服务器对目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息进行绑定存储。
上述机巡数据存储方法中,在接收目标机巡数据,是根据提取到的目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,该第一存储服务器为第一存储服务器集群中的存储服务器,向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。该方案中,机巡数据可以保存在本地的存储服务器中,只需要将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息这些数据量较小的数据发送给网级应用服务器,由网级应用服务器进行绑定存储,如此,可以基于网级应用服务器中记录的信息进行全网统一管理机巡数据,又不需要传输数据量较大的机巡数据,能够节约带宽成本。
考虑到有时一些区域级的机巡数据,例如,公共数据是需要向网级上报的,而一些网级的机巡数据需要下发给区域级。为此,在其中一个实施例中,本发明的机巡数据存储方法还可以包括步骤:根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群;若需要发送给第二存储服务器集群,则向第二存储服务器集群侧网关设备发送目标机巡数据和第二存储指示信息。其中,第二存储指示信息用于指示第二存储服务器集群侧网关设备确定存储目标机巡数据的第二存储服务器,并指示第二存储服务器存储目标机巡数据,指示第二存储服务器将目标机巡数据的元数据、目标机巡数据的来源信息,第二存储服务器的信息和目标机巡数据在第二存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
这里,目标机巡数据的来源信息可以是采集目标机巡数据的区域信息,也可以是存储目标机巡数据的服务器的信息。
这里,第二存储服务器集群和第一存储服务器集群为不同级别的存储服务器集群,例如,在第一存储服务器集群为区域级存储服务器集群时,第二存储服务器集群为网级存储服务器集群,在第一存储服务器集群为网存储服务器集群时,第二存储服务器集群为区域级存储服务器集群。
本实施例中,对目标机巡数据优先进行本地存储,只有在判定需要发送给第二存储服务器集群,才进行目标机巡数据的传输,可以尽可能的节约带宽,同时,在网级应用服务器还记录着目标机巡数据的来源信息,可以便于实现数据的溯源。
在其中一个实施例中,在第一存储服务器集群为区域级存储服务器集群,上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群,可以包括:根据目标机巡数据的元数据,以及第一存储服务器集群对应区域的公共数据检测规则,检测目标机巡数据是否是公共数据;在目标机巡数据是公共数据时,确定目标机巡数据需要发送给第二存储服务器集群。
其中,公共数据检测规则可以根据实际需要设定,具体地,公共数据检测规则可以包括若干个筛选条件,满足这些筛选条件中的一个或者多个筛选条件的元数据对应的机巡数据确定为公共数据,其中,筛选条件可以根据实际情况设定。
采用本实施例中的方案,区域级的公共数据全部存储在网级存储服务器集群,可以提升公共数据调度的透明度。
在其中一个实施例中,在第一存储服务器集群为网级存储服务器集群时,上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群,可以包括:根据目标机巡数据的元数据,以及第一存储服务器集群对应的数据分发规则,检测目标机巡数据是否是需要向区域级存储服务器分发的数据;在目标机巡数据是需要向区域级存储服务器分发的数据时,确定目标机巡数据需要发送给第二存储服务器集群。
其中,数据分发规则可以根据实际需要设定,具体地,数据分发规则可以包括若干个筛选条件,筛选条件可以根据实际情况设定。满足这些筛选条件中的一个或者多个筛选条件的元数据对应的机巡数据确定为需要向区域级下发的机巡数据,即确定目标机巡数据需要发送给第二存储服务器集群。
采用本实施例中的方案,可以实现网级数据统一分发,提升分发效率。
以下结合图3,以将上述实施例方案应用于省级网关设备为例,且在下述描述中是以省级网关设备、省级存储服务器集群、网级网关设备、网级存储服务器集群和网级应用服务器之间的交互为例对本发明方案进行说明,但这并不构成对本发明方案的限定。如图3所示,省级的机巡数据的存储方法包括以下过程:
(1)上传机巡数据到省级网关设备,省级网关设备提取该机巡数据的数据属性和请求参数,作为该机巡数据的元数据,根据预先设置的存储规则池,按照本地采集数据优先在本地存储的原则,确定该机巡数据的存储服务器的IP(Internet Protocol Address,互联网协议地址)信息,其中,存储规则池预先设置了一些关联关系,例如,元数据与存储服务器的IP信息的关联关系。具体的关联关系可以根据实际需要设置,例如,以省级存储服务器集群包括存储服务器A和存储服务器B为例,数据量小于预设数据量阈值的机巡数据存储在存储服务器A,数据量不小于预设数据量阈值的机巡数据存储在存储服务器B,或者,视频类型和图片类型的机巡数据存储在存储服务器A,其他类型的机巡数据存储在存储服务器B。
(2)本省机巡设备采集的原始数据、缺陷数据和缺陷报告等机巡数据都存储到本省的省级存储服务器集群中。
(3)省级存储服务器集群把机巡数据的元数据、存储服务器的信息、存储地址信息发送网级应用服务器,生成有全网唯一标识的记录,统一保存。
(4)各省级根据网级要求,通过预先建立的存储规则,由本省的省级网关设备分发,把网级需要的机巡数据发送到网级存储服务器集群。这里,存储规则可以根据实际需要设定。
(5)网级存储服务器集群把机巡数据的元数据、机巡数据采集的省级信息、存储服务器的信息、存储地址信息发送网级应用服务器,生成有全网唯一标识的记录,统一保存。
以下结合图4,以将上述实施例方案应用于网级网关设备为例,且在下述描述中是以省级网关设备、省级存储服务器集群、网级网关设备、网级存储服务器集群和网级应用服务器之间的交互为例对本发明方案进行说明。但这并不构成对本发明方案的限定。如图4所示,网级的机巡数据的存储方法包括以下过程:
(1)上传机巡数据到网级网关设备,网级网关设备提取该机巡数据的数据属性和请求参数的元数据,作为该数据的元数据,根据预先设置的存储规则池,按照本地采集数据优先在本地存储的原则,确定该机巡数据的存储服务器的IP信息。具体地,可以参见上述的省级的机巡数据的存储方法的过程(1),在此不予赘述。
(2)由网级本部的机巡设备采集的原始数据、缺陷数据和缺陷报告等机巡数据存储到网级存储服务器集群。
(3)存储到网级存储服务器集群中的机巡数据,根据网级要求,通过自定义存储规则,再由网级网关设备分发到省级存储服务器集群存储。
(4)网级存储服务器把机巡数据的元数据、存储服务器的信息、存储地址信息、分发到省级的存储服务器的信息和存储地址信息等信息发送网级应用服务器,生成有全网唯一标识的记录,统一保存。
应该理解的是,虽然图2的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图5所示,提供了一种机巡数据存储装置,包括:接收模块502、处理模块504和发送模块506,其中:
接收模块502,用于接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
处理模块504,用于提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
发送模块506,用于向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,处理模块504还可以用于根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群;发送模块506还用于在目标机巡数据需要发送给第二存储服务器集群时,向第二存储服务器集群侧网关设备发送目标机巡数据和第二存储指示信息;第二存储指示信息用于指示第二存储服务器集群侧网关设备确定存储目标机巡数据的第二存储服务器,并指示第二存储服务器存储目标机巡数据,指示第二存储服务器将目标机巡数据的元数据、目标机巡数据的来源信息,第二存储服务器的信息和目标机巡数据在第二存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,处理模块504可以在第一存储服务器集群为区域级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应区域的公共数据检测规则,检测目标机巡数据是否是公共数据,在目标机巡数据是公共数据时,确定目标机巡数据需要发送给第二存储服务器集群。
在其中一个实施例中,处理模块504可以在第一存储服务器集群为网级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应的数据分发规则,检测目标机巡数据是否是需要向区域级存储服务器分发的数据;在目标机巡数据是需要向区域级存储服务器分发的数据时,确定目标机巡数据需要发送给第二存储服务器集群。
关于机巡数据存储装置的具体限定可以参见上文中对于机巡数据存储方法的限定,在此不再赘述。上述机巡数据存储装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,如图6所示,提供了一种机巡数据存储系统,该系统包括:区域级网关设备602、区域级存储服务器集群604、网级网关设备606、网级存储服务器集群608和网级应用服务器610;
其中,区域级网关设备602的数目和区域级存储服务器集群604的数目均与区域个数相匹配,例如,有7个省,则区域级网关设备602的数目和区域级存储服务器集群604可以均为7。术语“区域级\网级”仅仅是区别类似的对象。区域级网关设备602和区域级存储服务器集群604可以分别是省级网关设备602和省级存储服务器集群604,但也不限于按照省进行区域划分的方式。
区域级网关设备602用于接收第一机巡数据,提取第一机巡数据的元数据,根据第一机巡数据的元数据,确定本地的区域级存储服务器集群604存储第一机巡数据的第三存储服务器,向第三存储服务器发送第三存储指示信息,其中,第一机巡数据为区域级存储服务器集群604所对应区域的机巡设备的机巡数据;
这里,第三存储服务器是区域级网关设备602同一区域的区域级存储服务器集群604中的一个存储服务器。这里,第三存储指示信息可以类似于上述实施例中的第一存储指示信息,仅是用于描述目的,用不同命名进行区分。
网级网关设备606用于接收第二机巡数据,提取第二机巡数据的元数据,根据第二机巡数据的元数据确定网级存储服务器集群608中存储第二机巡数据的第四存储服务器,向第四存储服务器发送第四存储指示信息,其中,第二机巡数据为网级存储服务器集群608所对应的机巡设备的机巡数据;
这里,第四存储指示信息也可以类似于上述实施例中的第一存储指示信息,仅是用于描述目的,用不同命名进行区分。上述的第一机巡数据和第二机巡数据可以类似于上述实施例中的目标机巡数据,仅是用于描述目的,用不同命名进行区分。
第三存储服务器用于根据第三存储指示信息存储第一机巡数据,将第一机巡数据的元数据、第三存储服务器的信息和第一机巡数据在第三存储服务器的存储位置信息,发送给网级应用服务器610;
第四存储服务器用于根据第四存储指示信息存储第二机巡数据,将第二机巡数据的元数据、第四存储服务器的信息和第二机巡数据在第四存储服务器的存储位置信息,发送给网级应用服务器610;
网级应用服务器用于对第一机巡数据的元数据、第三存储服务器的信息和第一机巡数据在第三存储服务器的存储位置信息进行绑定存储,还用于对第二机巡数据的元数据、第四存储服务器的信息和第二机巡数据在第四存储服务器的存储位置信息进行绑定存储。
本实施例的机巡数据存储系统中,网级应用服务器610存储有各个区域级存储服务器集群604和网级存储服务器集群608中存储的机巡数据的相关记录信息,可以基于网级应用服务器610中记录的数据进行全网统一管理机巡数据,同时,各区域和网级对应的机巡数据分别在本地存储,仅是将元数据、存储服务器的信息和存储位置信息等数据量较小的数据传输给网级应用服务器610,能够有效节约带宽成本。
在其中一个实施例中,上述的区域级网关设备602还可以用于根据第一标机巡数据的元数据检测第一机巡数据是否需要发送给网级存储服务器集群,若是,则向网级网关设备606发送第一机巡数据和第五存储指示信息;
上述的网级网关设备606还用于根据第二标机巡数据的元数据检测是否需要将第二机巡数据下发给区域级存储服务器集群,若是,则向区域级网关设备602发送第二机巡数据和第六存储指示信息;
这里,第五存储指示信息和第六存储指示信息可以类似于上述实施例中的第二存储指示信息,仅是用于描述目的,用不同命名进行区分。
上述的区域级网关设备602还用于根据第二机巡数据的元数据确定本地的区域级存储服务器集群604中存储第二机巡数据的第五存储服务器,并将第六存储指示信息转发给第五存储服务器;
这里,第五存储服务器是区域级网关设备602同一区域的区域级存储服务器集群604中的一个存储服务器。
上述的网级网关设备606还用于根据第一机巡数据的元数据确定网级存储服务器集群608中存储第一机巡数据的第六存储服务器,并将第五存储指示信息转发给第六存储服务器;
第六存储服务器用于根据第五存储指示信息存储第一机巡数据,并将第一机巡数据的元数据、第一机巡数据的采集区域信息、第六存储服务器的信息和第一机巡数据在第六存储服务器的存储地址信息,发送给网级应用服务器610进行绑定存储;
第五存储服务器用于根据第六存储指示信息存储第二机巡数据,并将第二机巡数据的元数据、第四存储服务器的信息和第二机巡数据在第四存储服务器的存储位置信息,第五存储服务器的信息和第二机巡数据在第五存储服务器的存储地址信息,发送给网级应用服务器610进行绑定存储。
本实施例的机巡数据存储系统可以实现区域级的部分数据(公共数据)的透明调度,以及网级数据统一分发。
在其中一个实施例中,上述的网级应用服务器610还可以用于将存储的第一机巡数据的两条记录数据和第二机巡数据的两条记录数据分别合并为一条记录数据。
其中,数据合并方式可是将滤除两条记录数据的重复数据后,将剩余数据合并为一条记录数据,如此,可以节约网级应用服务器610的内存。例如,对于第一机巡数据需要发送给网级存储服务器集群的情况,网级应用服务器610记录的第一条数据是“第一机巡数据的元数据、第三存储服务器的信息和第一机巡数据在第三存储服务器的存储位置信息”,记录的第二条数据是“第一机巡数据的元数据、第一机巡数据的采集区域信息、第六存储服务器的信息和第一机巡数据在第六存储服务器的存储地址信息”,这两条记录数据可以合并为“第一机巡数据的元数据、第三存储服务器的信息、第一机巡数据在第三存储服务器的存储位置信息、第一机巡数据的采集区域信息、第六存储服务器的信息和第一机巡数据在第六存储服务器的存储地址信息”这一条记录数据。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是网关设备,其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种机巡数据存储方法。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种网关设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:
接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,处理器执行计算机程序时还实现以下步骤:根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群;若需要发送给第二存储服务器集群,则向第二存储服务器集群侧网关设备发送目标机巡数据和第二存储指示信息;第二存储指示信息用于指示第二存储服务器集群侧网关设备确定存储目标机巡数据的第二存储服务器,并指示第二存储服务器存储目标机巡数据,指示第二存储服务器将目标机巡数据的元数据、目标机巡数据的来源信息,第二存储服务器的信息和目标机巡数据在第二存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,处理器执行计算机程序实现上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群的步骤时,具体实现以下步骤:在第一存储服务器集群为区域级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应区域的公共数据检测规则,检测目标机巡数据是否是公共数据;在目标机巡数据是公共数据时,确定目标机巡数据需要发送给第二存储服务器集群。
在其中一个实施例中,处理器执行计算机程序实现上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群的步骤时,具体实现以下步骤:在第一存储服务器集群为网级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应的数据分发规则,检测目标机巡数据是否是需要向区域级存储服务器分发的数据;在目标机巡数据是需要向区域级存储服务器分发的数据时,确定目标机巡数据需要发送给第二存储服务器集群。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
接收目标机巡数据,目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
提取目标机巡数据的元数据,根据目标机巡数据的元数据确定存储目标机巡数据的第一存储服务器,第一存储服务器为第一存储服务器集群中的存储服务器;
向第一存储服务器发送第一存储指示信息,第一存储指示信息用于指示第一存储服务器存储目标机巡数据,并指示第一存储服务器将目标机巡数据的元数据、第一存储服务器的信息和目标机巡数据在第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,计算机程序被处理器执行时还实现以下步骤:根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群;若需要发送给第二存储服务器集群,则向第二存储服务器集群侧网关设备发送目标机巡数据和第二存储指示信息;第二存储指示信息用于指示第二存储服务器集群侧网关设备确定存储目标机巡数据的第二存储服务器,并指示第二存储服务器存储目标机巡数据,指示第二存储服务器将目标机巡数据的元数据、目标机巡数据的来源信息,第二存储服务器的信息和目标机巡数据在第二存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
在其中一个实施例中,计算机程序被处理器执行实现上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群的步骤时,具体实现以下步骤:在第一存储服务器集群为区域级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应区域的公共数据检测规则,检测目标机巡数据是否是公共数据;在目标机巡数据是公共数据时,确定目标机巡数据需要发送给第二存储服务器集群。
在其中一个实施例中,计算机程序被处理器执行实现上述的根据目标机巡数据的元数据检测目标机巡数据是否需要发送给第二存储服务器集群的步骤时,具体实现以下步骤:在第一存储服务器集群为网级存储服务器集群时,根据目标机巡数据的元数据,以及第一存储服务器集群对应的数据分发规则,检测目标机巡数据是否是需要向区域级存储服务器分发的数据;在目标机巡数据是需要向区域级存储服务器分发的数据时,确定目标机巡数据需要发送给第二存储服务器集群。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种机巡数据存储方法,其特征在于,所述方法包括:
接收目标机巡数据,所述目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
提取所述目标机巡数据的元数据,根据所述目标机巡数据的元数据确定存储所述目标机巡数据的第一存储服务器,所述第一存储服务器为所述第一存储服务器集群中的存储服务器;
向所述第一存储服务器发送第一存储指示信息,所述第一存储指示信息用于指示所述第一存储服务器存储所述目标机巡数据,并指示所述第一存储服务器将所述目标机巡数据的元数据、所述第一存储服务器的信息和所述目标机巡数据在所述第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储;
所述方法还包括:
根据所述目标机巡数据的元数据检测所述目标机巡数据是否需要发送给第二存储服务器集群;
若需要发送给第二存储服务器集群,则向第二存储服务器集群侧网关设备发送所述目标机巡数据和第二存储指示信息;
所述第二存储指示信息用于指示所述第二存储服务器集群侧网关设备确定存储所述目标机巡数据的第二存储服务器,并指示所述第二存储服务器存储所述目标机巡数据,指示所述第二存储服务器将所述目标机巡数据的元数据、所述目标机巡数据的来源信息、所述第二存储服务器的信息和所述目标机巡数据在所述第二存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
2.根据权利要求1所述的机巡数据存储方法,其特征在于,所述根据所述目标机巡数据的元数据检测所述目标机巡数据是否需要发送给第二存储服务器集群,包括:
在所述第一存储服务器集群为区域级存储服务器集群时,根据所述目标机巡数据的元数据,以及所述第一存储服务器集群对应区域的公共数据检测规则,检测所述目标机巡数据是否是公共数据;
在所述目标机巡数据是公共数据时,确定所述目标机巡数据需要发送给第二存储服务器集群。
3.根据权利要求1所述的机巡数据存储方法,其特征在于,所述根据所述目标机巡数据的元数据检测所述目标机巡数据是否需要发送给第二存储服务器集群,包括:
在所述第一存储服务器集群为网级存储服务器集群时,根据所述目标机巡数据的元数据,以及所述第一存储服务器集群对应的数据分发规则,检测所述目标机巡数据是否是需要向区域级存储服务器分发的数据;
在所述目标机巡数据是需要向区域级存储服务器分发的数据时,确定所述目标机巡数据需要发送给第二存储服务器集群。
4.一种机巡数据存储装置,其特征在于,所述装置包括:
接收模块,用于接收目标机巡数据,所述目标机巡数据为第一存储服务器集群对应的机巡设备的机巡数据;
处理模块,用于提取所述目标机巡数据的元数据,根据所述目标机巡数据的元数据确定存储所述目标机巡数据的第一存储服务器,所述第一存储服务器为所述第一存储服务器集群中的存储服务器;
发送模块,用于向所述第一存储服务器发送第一存储指示信息,所述第一存储指示信息用于指示所述第一存储服务器存储所述目标机巡数据,并指示所述第一存储服务器将所述目标机巡数据的元数据、所述第一存储服务器的信息和所述目标机巡数据在所述第一存储服务器的存储位置信息,发送给网级应用服务器进行绑定存储;
所述处理模块,还用于根据所述目标机巡数据的元数据检测所述目标机巡数据是否需要发送给第二存储服务器集群;
所述发送模块,还用于在所述目标机巡数据需要发送给第二存储服务器集群,则向第二存储服务器集群侧网关设备发送所述目标机巡数据和第二存储指示信息;
所述第二存储指示信息用于指示所述第二存储服务器集群侧网关设备确定存储所述目标机巡数据的第二存储服务器,并指示所述第二存储服务器存储所述目标机巡数据,指示所述第二存储服务器将所述目标机巡数据的元数据、所述目标机巡数据的来源信息,所述第二存储服务器的信息和所述目标机巡数据在所述第二存储服务器的存储地址信息,发送给网级应用服务器进行绑定存储。
5.根据权利要求4所述的装置,其特征在于,所述处理模块,还用于在所述第一存储服务器集群为区域级存储服务器集群时,根据所述目标机巡数据的元数据,以及所述第一存储服务器集群对应区域的公共数据检测规则,检测所述目标机巡数据是否是公共数据;在所述目标机巡数据是公共数据时,确定所述目标机巡数据需要发送给第二存储服务器集群。
6.根据权利要求4所述的装置,其特征在于,所述处理模块,还用于在所述第一存储服务器集群为网级存储服务器集群时,根据所述目标机巡数据的元数据,以及所述第一存储服务器集群对应的数据分发规则,检测所述目标机巡数据是否是需要向区域级存储服务器分发的数据;在所述目标机巡数据是需要向区域级存储服务器分发的数据时,确定所述目标机巡数据需要发送给第二存储服务器集群。
7.一种机巡数据存储系统,其特征在于,所述系统包括:区域级网关设备、区域级存储服务器集群、网级网关设备、网级存储服务器集群和网级应用服务器;
所述区域级网关设备用于接收第一机巡数据,提取所述第一机巡数据的元数据,根据所述第一机巡数据的元数据,确定所述区域级存储服务器集群存储所述第一机巡数据的第三存储服务器,向所述第三存储服务器发送第三存储指示信息,其中,所述第一机巡数据为所述区域级存储服务器集群所对应区域的机巡设备的机巡数据;
所述网级网关设备用于接收第二机巡数据,提取所述第二机巡数据的元数据,根据所述第二机巡数据的元数据确定所述网级存储服务器集群中存储所述第二机巡数据的第四存储服务器,向所述第四存储服务器发送第四存储指示信息,其中,所述第二机巡数据为所述网级存储服务器集群所对应的机巡设备的机巡数据;
所述第三存储服务器用于根据所述第三存储指示信息存储所述第一机巡数据,将所述第一机巡数据的元数据、所述第三存储服务器的信息和所述第一机巡数据在所述第三存储服务器的存储位置信息,发送给所述网级应用服务器;
所述第四存储服务器用于根据所述第四存储指示信息存储所述第二机巡数据,将所述第二机巡数据的元数据、所述第四存储服务器的信息和所述第二机巡数据在所述第四存储服务器的存储位置信息,发送给所述网级应用服务器;
所述网级应用服务器用于对所述第一机巡数据的元数据、所述第三存储服务器的信息和所述第一机巡数据在所述第三存储服务器的存储位置信息进行绑定存储,还用于对所述第二机巡数据的元数据、所述第四存储服务器的信息和所述第二机巡数据在所述第四存储服务器的存储位置信息进行绑定存储;
所述区域级网关设备还用于根据所述第一机巡数据的元数据检测所述第一机巡数据是否需要发送给所述网级存储服务器集群,若是,则向所述网级网关设备发送所述第一机巡数据和第五存储指示信息;
所述网级网关设备还用于根据所述第二机巡数据的元数据检测是否需要将所述第二机巡数据下发给所述区域级存储服务器集群,若是,则向所述区域级网关设备发送所述第二机巡数据和第六存储指示信息;
所述区域级网关设备还用于根据所述第二机巡数据的元数据确定所述区域级存储服务器集群中存储所述第二机巡数据的第五存储服务器,并将所述第六存储指示信息转发给所述第五存储服务器;
所述网级网关设备还用于根据所述第一机巡数据的元数据确定所述网级存储服务器集群中存储所述第一机巡数据的第六存储服务器,并将所述第五存储指示信息转发给所述第六存储服务器;
所述第六存储服务器用于根据所述第五存储指示信息存储所述第一机巡数据,并将所述第一机巡数据的元数据、所述第一机巡数据的采集区域信息、所述第六存储服务器的信息和所述第一机巡数据在所述第六存储服务器的存储地址信息,发送给所述网级应用服务器进行绑定存储;
所述第五存储服务器用于根据所述第六存储指示信息存储所述第二机巡数据,并将所述第二机巡数据的元数据、所述第四存储服务器的信息和所述第二机巡数据在所述第四存储服务器的存储位置信息,所述第五存储服务器的信息和所述第二机巡数据在所述第五存储服务器的存储地址信息,发送给所述网级应用服务器进行绑定存储。
8.根据权利要求7所述的机巡数据存储系统,其特征在于,所述网级应用服务器用于将存储的所述第一机巡数据的两条记录数据和所述第二机巡数据的两条记录数据分别合并为一条记录数据。
9.一种网关设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至3中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至3中任一项所述的方法的步骤。
CN201811590030.7A 2018-12-25 2018-12-25 机巡数据存储方法、装置、系统、网关设备和存储介质 Active CN109660455B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811590030.7A CN109660455B (zh) 2018-12-25 2018-12-25 机巡数据存储方法、装置、系统、网关设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811590030.7A CN109660455B (zh) 2018-12-25 2018-12-25 机巡数据存储方法、装置、系统、网关设备和存储介质

Publications (2)

Publication Number Publication Date
CN109660455A CN109660455A (zh) 2019-04-19
CN109660455B true CN109660455B (zh) 2021-06-22

Family

ID=66116019

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811590030.7A Active CN109660455B (zh) 2018-12-25 2018-12-25 机巡数据存储方法、装置、系统、网关设备和存储介质

Country Status (1)

Country Link
CN (1) CN109660455B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021081892A1 (zh) * 2019-10-31 2021-05-06 深圳市大疆创新科技有限公司 一种数据处理方法、系统、设备及存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104679486B (zh) * 2013-11-28 2019-05-28 华为技术有限公司 一种图形数据的处理方法、装置及系统
CN105335309B (zh) * 2014-05-30 2018-09-11 华为技术有限公司 一种数据传输方法及计算机
CN105245569A (zh) * 2015-08-31 2016-01-13 上海七牛信息技术有限公司 断点上传方法及系统
CN108984310A (zh) * 2018-08-21 2018-12-11 郑州云海信息技术有限公司 一种对象数据的构建方法和装置

Also Published As

Publication number Publication date
CN109660455A (zh) 2019-04-19

Similar Documents

Publication Publication Date Title
CN109165136B (zh) 终端运行数据的监控方法、终端设备及介质
CN110309125B (zh) 数据校验方法、电子装置及存储介质
CN107704360B (zh) 监控数据的处理方法、设备、服务器及存储介质
CN109460343A (zh) 基于日志的系统异常监控方法、装置、设备及存储介质
CN103023693B (zh) 一种行为日志数据管理系统及方法
CN102355368B (zh) 一种网络设备的故障处理方法及系统
CN110309109B (zh) 数据监控方法、装置、计算机设备及存储介质
CN111208748A (zh) 基于物联网的联动控制方法、系统和计算机设备
CN110222535B (zh) 区块链配置文件的处理装置、方法及存储介质
CN110198347B (zh) 一种基于区块链的预警方法及分控服务器
CN112019605B (zh) 数据流的数据分发方法和系统
CN112486915B (zh) 数据存储方法及装置
CN103716384A (zh) 跨数据中心实现云存储数据同步的方法和装置
CN103248522B (zh) 一种性能数据的上报方法及装置
CN109660455B (zh) 机巡数据存储方法、装置、系统、网关设备和存储介质
CN108063685B (zh) 日志分析方法及装置
CN112685270A (zh) 一种系统监控日志的采集方法、装置、电子设备及介质
CN114205641A (zh) 一种视频数据处理方法及装置
CN104007942A (zh) 日志的打印控制方法和打印控制装置
CN115883590A (zh) 一种光磁电融合的媒资数据分布式存储与管理方法、装置
CN103812688A (zh) 一种告警确定方法及装置
CN112217657A (zh) 基于sd-wan系统的数据传输方法、数据处理方法、设备和介质
CN104022917B (zh) 云桥监控方法
CN108255937B (zh) 基于sdn的资源清理方法、装置、存储介质和计算机设备
CN105591833A (zh) 一种基于规则引擎的流量采集方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 510000 No. 11 Kexiang Road, Science City, Luogang District, Guangzhou City, Guangdong Province

Applicant after: CHINA SOUTHERN POWER GRID Co.,Ltd.

Applicant after: Southern Power Grid Digital Grid Research Institute Co.,Ltd.

Address before: 510000 No. 11 Kexiang Road, Science City, Luogang District, Guangzhou City, Guangdong Province

Applicant before: CHINA SOUTHERN POWER GRID Co.,Ltd.

Applicant before: DINGXIN INFORMATION TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address

Address after: 510000 No. 11 Kexiang Road, Science City, Luogang District, Guangzhou City, Guangdong Province

Patentee after: CHINA SOUTHERN POWER GRID Co.,Ltd.

Country or region after: Zhong Guo

Patentee after: Southern Power Grid Digital Grid Research Institute Co.,Ltd.

Address before: 510000 No. 11 Kexiang Road, Science City, Luogang District, Guangzhou City, Guangdong Province

Patentee before: CHINA SOUTHERN POWER GRID Co.,Ltd.

Country or region before: Zhong Guo

Patentee before: Southern Power Grid Digital Grid Research Institute Co.,Ltd.

CP03 Change of name, title or address
TR01 Transfer of patent right

Effective date of registration: 20240320

Address after: 518101, 3rd Floor, Building 40, Baotian Industrial Zone, Chentian Community, Xixiang Street, Bao'an District, Shenzhen City, Guangdong Province

Patentee after: China Southern Power Grid Digital Platform Technology (Guangdong) Co.,Ltd.

Country or region after: Zhong Guo

Address before: 510000 No. 11 Kexiang Road, Science City, Luogang District, Guangzhou City, Guangdong Province

Patentee before: CHINA SOUTHERN POWER GRID Co.,Ltd.

Country or region before: Zhong Guo

Patentee before: Southern Power Grid Digital Grid Research Institute Co.,Ltd.

TR01 Transfer of patent right