CN111427959A - 一种数据存储方法及装置 - Google Patents

一种数据存储方法及装置 Download PDF

Info

Publication number
CN111427959A
CN111427959A CN202010231885.1A CN202010231885A CN111427959A CN 111427959 A CN111427959 A CN 111427959A CN 202010231885 A CN202010231885 A CN 202010231885A CN 111427959 A CN111427959 A CN 111427959A
Authority
CN
China
Prior art keywords
data
stored
storage server
data storage
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010231885.1A
Other languages
English (en)
Other versions
CN111427959B (zh
Inventor
陈啸
谭玉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Basipingyun Technology Co ltd
Original Assignee
Beijing Basipingyun Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Basipingyun Technology Co ltd filed Critical Beijing Basipingyun Technology Co ltd
Priority to CN202010231885.1A priority Critical patent/CN111427959B/zh
Publication of CN111427959A publication Critical patent/CN111427959A/zh
Application granted granted Critical
Publication of CN111427959B publication Critical patent/CN111427959B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G06F16/1824—Distributed file systems implemented using Network-attached Storage [NAS] architecture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请提供了一种数据存储方法及装置，应用于数据存储服务器，所述数据存储服务器是由多级存储节点组成的；已存储数据是按照各个已存储数据之间的从属关系存储在对应的存储节点中的；该数据存储方法包括：所述数据存储服务器接收客户端上传的待存储数据；所述数据存储服务器分别计算待存储数据和每个已存储数据的从属关系；所述数据存储服务器根据所述从属关系，确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中。本申请提供的数据存储方法缩短了对数据存储服务器中的数据操作的所需时间，提高了数据管理和维护的效率。

Description

一种数据存储方法及装置
技术领域
本申请涉及数据处理领域，具体而言，涉及一种数据存储方法及装置。
背景技术
在计算机技术发展迅速的今天，每个科技企业都掌握着大量与企业业务、产品相关的数据，随着数据的积累，后期的数据维护的难度就在逐步提升，便捷、高效的数据存储方式成为了企业发展道路上的一道难关。
在现有技术中，数据的配置管理都是通过客户端在业务、产品等相关服务器中直接采集信息，发送至服务端后进行数据库存储操作，但无法查看到业务、产品等相关服务器与应用软件之间的关系，运维工作人员在做日常操作时，操作难度大，一旦发生故障，就需要运维人员针对数据库中的信息进行一一分析，然后才能进行操作。消耗了管理人员的大量精力与时间，对于数据的维护效率底下。
发明内容
有鉴于此，本申请的目的在于提供一种数据存储方法及装置，用于解决现有技术中数据存储后再操作难度大的问题。
第一方面，本申请实施例提供了一种数据存储方法，应用于数据存储服务器，所述数据存储服务器是由多级存储节点组成的；已存储数据是按照各个已存储数据之间的从属关系存储在对应的存储节点中的；该数据存储方法包括：
所述数据存储服务器接收客户端上传的待存储数据；
所述数据存储服务器分别计算待存储数据和每个已存储数据的从属关系；
所述数据存储服务器根据所述从属关系，确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中。
在某些实施例中，该方法还包括：
客户端对待采集数据进行第一次采集后的预定时间内，对待采集数据进行第二次采集；
若第一次采集到的数据内容和第二次采集到的数据内容是相同的，则将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器。
在某些实施例中，将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器，包括：
所述客户端将第一次采集到的数据内容或第二次采集到的数据内容中的一个进行数据标准化处理，得到标准化后的数据内容；
所述客户端将所述标准化后的数据内容作为待存储数据上传至数据存储服务器。
在某些实施例中，所述数据存储服务器分别计算待存储数据和每个已存储数据的从属关系，包括：
根据所述待存储数据中的业务信息，生成所述待存储数据的业务标识；所述业务信息包括业务地域、产品类型和服务类型；
将所述待存储数据的业务标识与每个已存储数据的业务标识进行比对，确认所述待存储数据和每个已存储数据的从属关系。
在某些实施例中，所述数据存储服务器根据所述从属关系，确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中之后，还包括：
当所述数据存储服务器监测到访问数据库功能发生故障时，根据发生故障的数据所在的存储节点生成告警信息；
所述数据存储服务器将所述告警信息发送到运维客户端，以使运维客户端对该告警信息中携带的存储节点进行数据维护。
第二方面，本申请实施例提供了一种数据存储装置，应用于数据存储服务器，所述数据存储服务器是由多级存储节点组成的；已存储数据是按照各个已存储数据之间的从属关系存储在对应的存储节点中的；该数据存储装置包括：
接收模块，用于接收客户端上传的待存储数据；
计算模块，用于分别计算待存储数据和每个已存储数据的从属关系；
存储模块，用于根据所述从属关系，确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中。
在某些实施例中，还包括：
采集模块，用于客户端对待采集数据进行第一次采集后的预定时间内，对待采集数据进行第二次采集；
检验模块，用于若第一次采集到的数据内容和第二次采集到的数据内容是相同的，则将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器。
在某些实施例中，检验模块，包括：
处理单元，用于所述客户端将第一次采集到的数据内容或第二次采集到的数据内容中的一个进行数据标准化处理，得到标准化后的数据内容；
上传单元，用于所述客户端将所述标准化后的数据内容作为待存储数据上传至数据存储服务器。
在某些实施例中，计算模块，包括：
生成单元，用于根据所述待存储数据中的业务信息，生成所述待存储数据的业务标识；所述业务信息包括业务地域、产品类型和服务类型；
比对单元，用于将所述待存储数据的业务标识与每个已存储数据的业务标识进行比对，确认所述待存储数据和每个已存储数据的从属关系。
在某些实施例中，还包括：
告警模块，用于当所述数据存储服务器监测到访问数据库功能发生故障时，根据发生故障的数据所在的存储节点生成告警信息；所述数据存储服务器将所述告警信息发送到运维客户端，以使运维客户端对该告警信息中携带的存储节点进行数据维护。
第三方面，本申请实施例提供了一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面及其实施例中任一项所述的方法的步骤。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行上述第一方面及其实施例中任一项所述的方法的步骤。
本申请实施例提出的一种数据存储方法及装置，通过计算客户端上传的待存储数据和数据存储服务器中的每个已存储数据的从属关系，来确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中，使得运维人员可以通过存储节点间的从属关系快速获取需要的数据，不需要对所有的数据进行逐个分析，缩短了对数据存储服务器中的数据操作的所需时间，提高了数据管理和维护的效率。
为使本申请的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为本申请实施例提供的一种数据存储方法的流程示意图；
图2为本申请实施例提供的一种树状结构的存储空间的示意图；
图3为本申请实施例提供的一种监测告警方法的流程示意图；
图4为本申请实施例提供的一种数据存储装置的结构示意图；
图5为本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
现有技术中，配置管理都是通过客户端在服务器直接采集信息，发送至服务端后进行数据库存储操作，但无法查看到服务器与应用软件之间的关系，运维工作人员在做日常操作时，非常不便捷，需要管理人员针对服务器信息进行一一分析，然后才能进行操作。消耗了管理人员的大量精力与时间。
本申请实施例提供了一种数据存储方法，应用于数据存储服务器，上述数据存储服务器是由多级存储节点组成的；已存储数据是按照各个已存储数据之间的从属关系存储在对应的存储节点中的；如图1所示，该数据存储方法包括以下步骤：
步骤S101、上述数据存储服务器接收客户端上传的待存储数据；
步骤S102、上述数据存储服务器分别计算待存储数据和每个已存储数据的从属关系；
步骤S103、上述数据存储服务器根据上述从属关系，确定存储上述待存储数据所使用的存储节点，并将上述待存储数据存储在上述确定的存储节点中。
具体地，数据存储服务器是一个自动化的服务树系统，该系统具备以下功能：服务器硬件、应用服务、网络信息等数据的采集，服务关联关系分析和数据检查。所谓服务树系统是指该数据存储服务器中存储的数据是按照数据间的从属关系存储在树状分布的存储节点中的。由于该服务树系统数据存储的特点，用户可以快速获取所需数据，以及可以利用该数据存储的特点进行数据管理、监控告警、财务账单分账等事项。
该数据存储服务器是通过设置在各业务服务器中的客户端来进行数据采集，并上传只数据存储服务器来进行存储的。
所述存储节点是在数据存储服务器的数据库中树状结构的存储空间中的一级存储空间，如图2所示，该数据库中存在多个存储节点，每一个存储节点都有与其相关联的子节点或父节点，这些存储节点都是根据各存储节点中的数据间的从属关系生成的。
当数据存储服务器接收到来自客户端上传的待存储数据时，通过服务关联关系分析功能计算待存储数据与数据存储服务器中的每个已存储数据的从属关系，也就是要确认待存储数据是属于某一现有的存储节点，还是需要在某一现有的存储节点下新建存储节点以存储该待存储数据，又或者是需要新建最高级存储节点提供给该待存储数据进行存储。
确定了待存储数据的存储节点后，如果该存储节点是现有的，则直接将待存储数据存入对应的存储节点；如果该存储节点是不存在的，则按照从属关系为待存储数据创建对应的存储节点，在创建时需要根据从属关系创建好现有存储节点与待存储数据对应的存储节点间的各级存储节点，以保证数据树系统的完整性。
数据存储服务器中的存储节点呈树状结构多级延伸，在进行整体数据展示的时候，可以以树状的形式进行展示，也可以采用多层次饼状图等其他能够表现存储节点之间的从属关系的方式进行展示。
在一可选的实施例中，该方法还包括：
步骤104、客户端对待采集数据进行第一次采集后的预定时间内，对待采集数据进行第二次采集；
步骤105、若第一次采集到的数据内容和第二次采集到的数据内容是相同的，则将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器。
具体地，为了避免客户端采集数据时发生功能故障导致的数据损坏或缺失，客户端在采集数据时对同一数据进行多次采集来进行数据校验。
这里以连续两次采集为例，在对待采集数据进行第一次采集后，先将第一次采集到的数据内容进行缓存，并在预定时间内对同一待采集数据再次采集，将第二次采集到的数据内容与缓存的第一次采集到的数据内容进行比对校验，如果两次采集到的数据内容是完全相同的，则说明客户端对于该待采集数据的采集未发生采集功能故障，将两次采集到的数据内容中任一次的数据内容上床给数据存储服务器进行存储。
若通过比对校验发现第二次采集到的数据内容与第一次采集到的数据内容不同，则说明客户端对于该待采集数据的采集发生了采集功能故障，由于可能是第一次采集到的数据内容存在数据损坏或缺失，也可能是第二次采集到的数据内容存在数据损坏或缺失，又或者是两次采集到的数据内容都存在数据损坏或缺失，因此将两次采集到的数据内容都放弃，重新对待采集数据进行数据采集。
在上传数据存储服务器时可能会出现上报错误的情况，则将待存储数据在客户端本地缓存，待数据存储服务器恢复正常后，逐步恢复上报，避免同步上报并发量太大从而影响数据存储服务器稳定性，从而保障数据采集的准确度。
在一可选的实施例中，步骤105包括：
步骤1051、上述客户端将第一次采集到的数据内容或第二次采集到的数据内容中的一个进行数据标准化处理，得到标准化后的数据内容；
步骤1052、上述客户端将上述标准化后的数据内容作为待存储数据上传至数据存储服务器。
具体地，由于各客户端所在的业务服务器采集的数据存在大量的差异化，不同业务服务器的硬件信息、应用软件信息和网络信息的格式都不尽相同。为此在上传给数据存储服务器之前需要针对待存储数据进行统一的标准格式化，以减少在数据存储服务器进行数据分析入库时导致的数据准确度下降。
在客户端确定了上传数据存储服务器的数据内容后，客户端对该数据内容进行数据格式标准化处理，转换成方便数据存储服务器处理的预设数据格式，然后将标准化处理后的数据内容作为待存储数据上传给数据存储服务器。
在一可选的实施例中，步骤S102，包括：
根据上述待存储数据中的业务信息，生成上述待存储数据的业务标识；上述业务信息包括业务地域、产品类型和服务类型；
将上述待存储数据的业务标识与每个已存储数据的业务标识进行比对，确认上述待存储数据和每个已存储数据的从属关系。
具体地，待存储数据和已存储数据的从属关系实际上也就是待存储数据对应的存储节点与现有存储节点的从属关系。
服务类型是表现业务上待存储数据与数据存储服务器中的已存储数据在服务上的从属关系的信息，例如：待存储数据α的服务类型为“business”：“bp/oc/pd”，其中，business是服务类型的名称，bp/oc/pd是表示该待存储数据α是属于一级服务项bp下的二级服务项oc下的三级服务项pd下的数据，将该服务类型标签化后可展示为如下形式：
-bp
-oc
-pd。
业务地域是表现业务中待存储数据与数据存储服务器中的已存储数据的具体数据位置上的从属关系的信息，例如：上述待存储数据α的业务地域为“location”：“Beijing/idc2/rock2”，其中，location是业务地域的名称，Beijing/idc2/rock2是表示该待存储数据α在所属业务中的具体数据位置，将该业务地域连同上述的服务类型标签化后可展示为如下形式：
Figure BDA0002429525210000091
而产品类型则是表示待存储数据是属于哪一个或多个应用的数据的信息。可根据实际需求设定添加规则，进行自动添加。
在一可选的实施例中，步骤S103之后，如图3所示，还包括：
步骤S106、当上述数据存储服务器监测到访问数据库功能发生故障时，根据发生故障的数据所在的存储节点生成告警信息；
步骤S107、上述数据存储服务器将上述告警信息发送到运维客户端，以使运维客户端对该告警信息中携带的存储节点进行数据维护。
具体地，以步骤S101至步骤S103的方法建立的服务树系统为基础可以实现数据管理、监控告警、财务账单分账等具体应用，在本实施例中以监控告警应用举例说明。
在监控到数据存储服务器的访问数据库功能发生故障时，数据存储服务器根据故障点的具体存储节点来生成告警信息，运维客户端通过读取告警信息中的故障点的具体存储节点信息快速获取故障点，对故障点的存储节点进行针对性的数据修复，省去了对数据存储服务器中的全部数据进行逐一故障排查的时间，提高了数据维护的效率。
本申请实施例还提供了一种数据存储装置，应用于数据存储服务器，上述数据存储服务器是由多级存储节点组成的；已存储数据是按照各个已存储数据之间的从属关系存储在对应的存储节点中的；如图4所示，该数据存储装置包括：
接收模块30，用于接收客户端上传的待存储数据；
计算模块31，用于分别计算待存储数据和每个已存储数据的从属关系；
存储模块32，用于根据上述从属关系，确定存储上述待存储数据所使用的存储节点，并将上述待存储数据存储在上述确定的存储节点中。
在一可选的实施例中，还包括：
采集模块33，用于客户端对待采集数据进行第一次采集后的预定时间内，对待采集数据进行第二次采集；
检验模块34，用于若第一次采集到的数据内容和第二次采集到的数据内容是相同的，则将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器。
在一可选的实施例中，检验模块34，包括：
处理单元341，用于上述客户端将第一次采集到的数据内容或第二次采集到的数据内容中的一个进行数据标准化处理，得到标准化后的数据内容；
上传单元342，用于上述客户端将上述标准化后的数据内容作为待存储数据上传至数据存储服务器。
在一可选的实施例中，计算模块31，包括：
生成单元311，用于根据上述待存储数据中的业务信息，生成上述待存储数据的业务标识；上述业务信息包括业务地域、产品类型和服务类型；
比对单元312，用于将上述待存储数据的业务标识与每个已存储数据的业务标识进行比对，确认上述待存储数据和每个已存储数据的从属关系。
在一可选的实施例中，还包括：
告警模块35，用于当上述数据存储服务器监测到访问数据库功能发生故障时，根据发生故障的数据所在的存储节点生成告警信息；上述数据存储服务器将上述告警信息发送到运维客户端，以使运维客户端对该告警信息中携带的存储节点进行数据维护。
对应于图5中的一种数据存储方法，本申请实施例还提供了一种计算机设备400，如图4所示，该设备包括存储器401、处理器402及存储在该存储器401上并可在该处理器402上运行的计算机程序，其中，上述处理器402执行上述计算机程序时实现上述一种数据存储方法。
具体地，上述存储器401和处理器402能够为通用的存储器和处理器，这里不做具体限定，当处理器402运行存储器401存储的计算机程序时，能够执行上述一种数据存储方法，解决了现有技术中数据存储后再操作难度大的问题。
对应于图1中的一种数据存储方法，本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述一种数据存储方法的步骤。
具体地，该存储介质能够为通用的存储介质，如移动磁盘、硬盘等，该存储介质上的计算机程序被运行时，能够执行上述一种数据存储方法，解决了现有技术中数据存储后再操作难度大的问题，本申请实施例提出的一种数据存储方法及装置，通过计算客户端上传的待存储数据和数据存储服务器中的每个已存储数据的从属关系，来确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中，使得运维人员可以通过存储节点间的从属关系快速获取需要的数据，不需要对所有的数据进行逐个分析，缩短了对数据存储服务器中的数据操作的所需时间，提高了数据管理和维护的效率。
在本申请所提供的实施例中，应该理解到，所揭露方法和装置，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请提供的实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释，此外，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
最后应说明的是：以上所述实施例，仅为本申请的具体实施方式，用以说明本申请的技术方案，而非对其限制，本申请的保护范围并不局限于此，尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围。都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种数据存储方法，其特征在于，应用于数据存储服务器，所述数据存储服务器是由多级存储节点组成的；已存储数据是按照各个已存储数据之间的从属关系存储在对应的存储节点中的；该数据存储方法包括：
所述数据存储服务器接收客户端上传的待存储数据；
所述数据存储服务器分别计算待存储数据和每个已存储数据的从属关系；
所述数据存储服务器根据所述从属关系，确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中。
2.根据权利要求1所述的方法，其特征在于，还包括：
客户端对待采集数据进行第一次采集后的预定时间内，对待采集数据进行第二次采集；
若第一次采集到的数据内容和第二次采集到的数据内容是相同的，则将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器。
3.根据权利要求2所述的方法，其特征在于，将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器，包括：
所述客户端将第一次采集到的数据内容或第二次采集到的数据内容中的一个进行数据标准化处理，得到标准化后的数据内容；
所述客户端将所述标准化后的数据内容作为待存储数据上传至数据存储服务器。
4.根据权利要求1所述的方法，其特征在于，所述数据存储服务器分别计算待存储数据和每个已存储数据的从属关系，包括：
根据所述待存储数据中的业务信息，生成所述待存储数据的业务标识；所述业务信息包括业务地域、产品类型和服务类型；
将所述待存储数据的业务标识与每个已存储数据的业务标识进行比对，确认所述待存储数据和每个已存储数据的从属关系。
5.根据权利要求1所述的方法，其特征在于，所述数据存储服务器根据所述从属关系，确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中之后，还包括：
当所述数据存储服务器监测到访问数据库功能发生故障时，根据发生故障的数据所在的存储节点生成告警信息；
所述数据存储服务器将所述告警信息发送到运维客户端，以使运维客户端对该告警信息中携带的存储节点进行数据维护。
6.一种数据存储装置，其特征在于，应用于数据存储服务器，所述数据存储服务器是由多级存储节点组成的；已存储数据是按照各个已存储数据之间的从属关系存储在对应的存储节点中的；该数据存储装置包括：
接收模块，用于接收客户端上传的待存储数据；
计算模块，用于分别计算待存储数据和每个已存储数据的从属关系；
存储模块，用于根据所述从属关系，确定存储所述待存储数据所使用的存储节点，并将所述待存储数据存储在所述确定的存储节点中。
7.根据权利要求6所述的装置，其特征在于，还包括：
采集模块，用于客户端对待采集数据进行第一次采集后的预定时间内，对待采集数据进行第二次采集；
检验模块，用于若第一次采集到的数据内容和第二次采集到的数据内容是相同的，则将第一次采集到的数据内容或第二次采集到的数据内容中的一个作为待存储数据上传给数据存储服务器。
8.根据权利要求6所述的装置，其特征在于，还包括：
告警模块，用于当所述数据存储服务器监测到访问数据库功能发生故障时，根据发生故障的数据所在的存储节点生成告警信息；所述数据存储服务器将所述告警信息发送到运维客户端，以使运维客户端对该告警信息中携带的存储节点进行数据维护。
9.一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现上述权利要求1-5中任一项所述的方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时执行上述权利要求1-5中任一项所述的方法的步骤。
CN202010231885.1A 2020-03-27 2020-03-27 一种数据存储方法及装置 Active CN111427959B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010231885.1A CN111427959B (zh) 2020-03-27 2020-03-27 一种数据存储方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010231885.1A CN111427959B (zh) 2020-03-27 2020-03-27 一种数据存储方法及装置

Publications (2)

Publication Number Publication Date
CN111427959A true CN111427959A (zh) 2020-07-17
CN111427959B CN111427959B (zh) 2024-04-23

Family

ID=71549072

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010231885.1A Active CN111427959B (zh) 2020-03-27 2020-03-27 一种数据存储方法及装置

Country Status (1)

Country Link
CN (1) CN111427959B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112084250A (zh) * 2020-09-15 2020-12-15 深圳市宝能投资集团有限公司 数据存储方法、数据查询方法和电子设备
CN114357085A (zh) * 2022-03-15 2022-04-15 国网浙江省电力有限公司绍兴供电公司 基于区块链的财务数据存储方法、装置及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102970029A (zh) * 2012-11-06 2013-03-13 北京广利核系统工程有限公司 一种高安全性数字量信号采集电路
CN104199747A (zh) * 2014-08-15 2014-12-10 中国船舶重工集团公司第七0九研究所 基于健康管理的高可用系统实现方法及系统
CN104636084A (zh) * 2015-01-21 2015-05-20 广东电网有限责任公司电力科学研究院 一种对电力大数据进行合理高效分布存储的装置和方法
CN105677915A (zh) * 2016-02-29 2016-06-15 浪潮通用软件有限公司 一种基于引擎的分布式业务数据存取方法
CN107241233A (zh) * 2017-08-01 2017-10-10 南京南瑞集团公司 一种多信道遥测数据双机协同采集方法
CN109271097A (zh) * 2017-12-28 2019-01-25 新华三大数据技术有限公司 数据处理方法、数据处理装置和服务器
CN109714402A (zh) * 2018-12-12 2019-05-03 胡书恺 一种冗余数据采集系统及其运行使用方法
CN110110006A (zh) * 2019-04-15 2019-08-09 平安普惠企业管理有限公司 数据管理方法及相关产品

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102970029A (zh) * 2012-11-06 2013-03-13 北京广利核系统工程有限公司 一种高安全性数字量信号采集电路
CN104199747A (zh) * 2014-08-15 2014-12-10 中国船舶重工集团公司第七0九研究所 基于健康管理的高可用系统实现方法及系统
CN104636084A (zh) * 2015-01-21 2015-05-20 广东电网有限责任公司电力科学研究院 一种对电力大数据进行合理高效分布存储的装置和方法
CN105677915A (zh) * 2016-02-29 2016-06-15 浪潮通用软件有限公司 一种基于引擎的分布式业务数据存取方法
CN107241233A (zh) * 2017-08-01 2017-10-10 南京南瑞集团公司 一种多信道遥测数据双机协同采集方法
CN109271097A (zh) * 2017-12-28 2019-01-25 新华三大数据技术有限公司 数据处理方法、数据处理装置和服务器
CN109714402A (zh) * 2018-12-12 2019-05-03 胡书恺 一种冗余数据采集系统及其运行使用方法
CN110110006A (zh) * 2019-04-15 2019-08-09 平安普惠企业管理有限公司 数据管理方法及相关产品

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112084250A (zh) * 2020-09-15 2020-12-15 深圳市宝能投资集团有限公司 数据存储方法、数据查询方法和电子设备
CN114357085A (zh) * 2022-03-15 2022-04-15 国网浙江省电力有限公司绍兴供电公司 基于区块链的财务数据存储方法、装置及存储介质
CN114357085B (zh) * 2022-03-15 2022-06-03 国网浙江省电力有限公司绍兴供电公司 基于区块链的财务数据存储方法、装置及存储介质

Also Published As

Publication number Publication date
CN111427959B (zh) 2024-04-23

Similar Documents

Publication Publication Date Title
CN113176978B (zh) 基于日志文件的监控方法、系统、设备及可读存储介质
US7437281B1 (en) System and method for monitoring and modeling system performance
US20180143891A1 (en) Testing and improving performance of mobile application portfolios
KR101557854B1 (ko) 이용통계데이터의 이상 자동 탐지 시스템 및 그 방법 그리고 이에 적용되는 장치
CN112328631A (zh) 一种生产故障分析方法、装置、电子设备及存储介质
CN111427959A (zh) 一种数据存储方法及装置
CN111143325B (zh) 一种数据采集的监测方法、监测装置及可读存储介质
CN114202256A (zh) 架构升级预警方法、装置、智能终端及可读存储介质
CN110069382B (zh) 软件监控方法、服务器、终端设备、计算机设备及介质
CN112445518A (zh) 版本发布平台的管理方法、装置、设备及存储介质
CN117112656A (zh) 一种科技志愿服务管理的一体化信息智能管理系统及方法
CN114637739B (zh) 数据库管控方法、系统、计算机设备及计算机存储介质
CN114202250A (zh) 一种企业评估系统、方法及电子设备
CN109828884B (zh) 加挂服务数据处理方法、系统、计算机设备及存储介质
CN113076434A (zh) 一种电力质量监督信息的报送方法和系统
CN112561385A (zh) 风险监控方法及系统
CN113221151A (zh) 基于区块链的数据处理方法、装置及存储介质
CN112667281A (zh) 一种配置信息处理方法及装置
CN112364121A (zh) 问卷pdf的自动创建方法、装置、存储介质及计算机设备
JP2007041828A (ja) Ｓｌａ達成状況判定方法
CN115048439B (zh) 数据转换方法、装置、电子设备及存储介质
US11983188B2 (en) Systems, devices, and methods for network and obsolescence management
CN112417085A (zh) 报文对比方法、装置、计算机设备及存储介质
CN114331653A (zh) 一种往来台账数据的处理方法及装置
CN113127578A (zh) 一种实体引用处理方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant