CN114089921A - 电力系统数据存储方法、装置、计算机设备和存储介质 - Google Patents

电力系统数据存储方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN114089921A
CN114089921A CN202111424272.0A CN202111424272A CN114089921A CN 114089921 A CN114089921 A CN 114089921A CN 202111424272 A CN202111424272 A CN 202111424272A CN 114089921 A CN114089921 A CN 114089921A
Authority
CN
China
Prior art keywords
change information
data
data change
target
message queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111424272.0A
Other languages
English (en)
Inventor
杨荣霞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Southern Power Grid Big Data Service Co ltd
Original Assignee
China Southern Power Grid Big Data Service Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Southern Power Grid Big Data Service Co ltd filed Critical China Southern Power Grid Big Data Service Co ltd
Priority to CN202111424272.0A priority Critical patent/CN114089921A/zh
Publication of CN114089921A publication Critical patent/CN114089921A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • G06F3/0607Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0656Data buffering arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06Energy or water supply

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Water Supply & Treatment (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及一种电力系统数据存储方法、装置、计算机设备、存储介质和计算机程序产品。本方法包括:获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中;从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存;其中,分区为服务器中存储与分布式消息队列对应的数据变动信息的存储区域;按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中。本方法能保障数据变动信息是按照产生先后顺序写入至目标存储器,从而能够提高电力系统的数据存储的准确度和效率。

Description

电力系统数据存储方法、装置、计算机设备和存储介质
技术领域
本申请涉及电力系统技术领域,特别是涉及一种电力系统数据存储方法、装置、计算机设备、存储介质和计算机程序产品。
背景技术
随着电力系统技术的快速发展,需要对电力系统中各业务系统的数据信息进行处理分析,电力系统中各不同的业务系统的数据都将写入目标存储器。目前,电力系统数据趋向于数据量大、数据类型多、变更频繁、实时分析的时效性高等特征变化,在存储电力系统中的各业务系统的数据时,当获取到数据变动信息时,将数据变动信息发送至分布式消息队列,分布式消息队列将数据变动信息存储至对应的分布式存储系统的服务器中;再逐次通过分布式消息队列读取数据变动信息,将数据变动信息写入目标存储器。但是,一个分布式消息队列对应分布式存储系统中的多个服务器,由于网络原因等因素的影响,将导致将数据变动信息存储至目标存储器的顺序与将数据变动信息存储至对分布式存储系统中的服务器中的顺序不一致,从而导致在将数据变动信息写入目标存储器时,写入顺序混乱,进而降低电力系统数据存储的准确度和效率。
因此,如何提高电力系统的数据存储的准确度和效率,是本领域技术人员目前需要解决的技术问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高电力系统的数据存储的准确度和效率的电力系统数据存储方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
第一方面,本申请提供了一种电力系统数据存储。所述方法包括:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中;
从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存;其中,所述分区为所述服务器中存储与所述分布式消息队列对应的数据变动信息的存储区域;
按照所述缓存中各所述数据变动信息的写入顺序,将各所述数据变动信息存储至目标存储器中。
在其中一个实施例中,所述获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中,包括:
获取所述电力系统中所述目标业务系统的所述数据变动信息,并确定出与所述数据变动信息对应的数据标识;其中,所述数据标识表示所述数据变动信息的产生顺序;
将所述数据变动信息及与所述数据变动信息对应的数据标识发送给所述分布式消息队列;
通过所述分布式消息队列将所述数据变动信息和对应的数据标识写入对应的分布式存储系统的服务器中。
在其中一个实施例中,所述从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存,包括:
从所述分布式消息队列的各所述分区中分别获取一个所述数据变动信息,并利用与获取到的各所述数据变动信息对应的数据标识,确定出待处理数据集合;
根据所述待处理数据集合中的各所述数据标识,确定出最早产生的目标数据变动信息,并将所述目标数据变动信息写入所述缓存;
从与所述目标数据变动信息对应的分区中获取一个所述数据变动信息,并利用新获取的所述数据变动信息的数据标识更新所述待处理数据集合,返回所述根据所述待处理数据集合中的各所述数据标识,确定出最早产生的目标数据变动信息,并将所述目标数据变动信息写入所述缓存的步骤。
在其中一个实施例中,所述根据所述待处理数据集合中的各所述数据标识,确定出最早产生的目标数据变动信息,并将所述目标数据变动信息写入所述缓存,包括:
比较所述待处理数据集合中各所述数据标识的大小,确定出最小数据标识;
将与所述最小数据标识对应的数据变动信息确定为最早产生的所述目标数据变动信息;
将所述目标数据变动信息写入所述缓存。
在其中一个实施例中,所述方法还包括:
判断当前是否满足停止缓存的停止条件;其中,所述停止条件包括:所述缓存中的各所述目标数据变动信息的产生时间均早于所述待处理数据集合中的各所述数据变动信息的产生时间,和/或所述缓存中的所述目标数据变动信息的数据量达到预设值;
若未满足所述停止条件,则返回所述从与所述目标数据变动信息对应的分区中获取一个所述数据变动信息的步骤;
若满足所述停止条件,则结束进程。
在其中一个实施例中,所述将所述数据变动信息及与所述数据变动信息对应的数据标识发送给所述分布式消息队列,包括:
设置多个分布式消息队列,并确定各所述分布式消息队列与数据变动信息的数据类型的对应关系;
确定出所述数据变动信息的目标数据类型,并利用所述目标数据类型和所述对应关系,确定出对应的目标分布式消息队列;
将所述数据变动信息及与所述数据变动信息对应的数据标识发送给所述目标分布式消息队列。
第二方面,本申请还提供了一种电力系统数据存储装置。所述装置包括:
发送模块,用于获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中;
比较模块,用于从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存;其中,所述分区为所述服务器中存储与所述分布式消息队列对应的数据变动信息的存储区域;
存储模块,用于按照所述缓存中各所述数据变动信息的写入顺序,将各所述数据变动信息存储至目标存储器中。
第三方面,本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中;
从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存;其中,所述分区为所述服务器中存储与所述分布式消息队列对应的数据变动信息的存储区域;
按照所述缓存中各所述数据变动信息的写入顺序,将各所述数据变动信息存储至目标存储器中。
第四方面,本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中;
从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存;其中,所述分区为所述服务器中存储与所述分布式消息队列对应的数据变动信息的存储区域;
按照所述缓存中各所述数据变动信息的写入顺序,将各所述数据变动信息存储至目标存储器中。
第五方面,本申请还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现以下步骤:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中;
从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存;其中,所述分区为所述服务器中存储与所述分布式消息队列对应的数据变动信息的存储区域;
按照所述缓存中各所述数据变动信息的写入顺序,将各所述数据变动信息存储至目标存储器中。
上述电力系统数据存储方法、装置、计算机设备、存储介质和计算机程序产品,在获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中之后,通过从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存,也就是通过分布式消息队列将数据变动信息按照产生顺序进行调整并按照产生顺序写入缓存中,再将各数据变动信息存储至目标存储器中,因此本方法能保障数据变动信息是按照产生先后顺序写入至目标存储器,从而能够提高电力系统的数据存储的准确度和效率。
附图说明
图1为一个实施例中电力系统数据存储方法的应用环境图;
图2为一个实施例中电力系统数据存储方法的流程示意图;
图3a至3k为另一个实施例中电力系统数据存储方法的过程示意图;
图4为一个实施例中电力系统数据存储装置的结构框图;
图5为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供的电力系统数据存储方法,可以应用于如图1所示的应用环境中;该应用环境包括电力系统102和处理终端104,且电力系统102与处理终端104通信连接;处理终端104获取电力系统102的目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中;然后从分布式消息队列的各分区中获取数据变动信息,根据数据变动信息的产生顺序依次将数据变动信息写入缓存,再按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中,以实现按照产生顺序向目标存储器中写入数据变动信息。其中,处理终端104可以具体为终端设备或者服务器;其中,终端设备可以但不限于是各种个人计算机、笔记本电脑以及设置有处理器的电力设备,服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种电力系统数据存储方法,以该方法应用于图1中的终端设备为例进行说明,包括以下步骤:
步骤202,获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中。
可以理解的是,在电力系统中,针对不同的业务需求,分别设置有对应的业务系统;数据变动信息为表示在业务系统内进行操作导致对应的数据信息发生变化的信息,数据信息发生变化包括与业务系统对应的数据库、数据库中的表以及表中的行列值的新增、删除、修改等变化;例如,新增10月份的账单为一个数据变动信息,又如,删除一台编号为1的设备也对应产生一个数据变动信息,本实施例对数据变动信息的具体内容不做限定。具体的,日志中一般包括数据变动的所有细节,因此本实施例通过分析电力系统的关系型数据库的日志,获取与目标业务系统对应的数据变动信息。
在获取到数据变动信息后,将数据变动信息转换为预设格式的数据信息,并将数据信息发送给分布式消息队列,分布式消息队列在获取到预设格式的数据信息后,按照对应的方式进行解析得出对应的数据变动信息,再将数据变动信息写入对应的分布式存储系统中的服务器中,也就是通过分布式存储系统将获取到的各数据变动信息分散存储在多个独立的服务器中。
步骤204,从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存;其中,分区为服务器中存储与分布式消息队列对应的数据变动信息的存储区域。
其中,分布式消息队列的分区指的是分布式存储系统中存储对应的分布式消息队列的数据信息的存储区域,一个分布式消息队列一般对应有多个分区。例如,在分布式存储系统中,服务器1中存储分布式消息队列的存储区域为分区1,服务器2中存储分布式消息队列的存储区域为分区2,服务器3中存储分布式消息队列的存储区域为分区3。
具体的,从分布式消息队列的各分区分别获取预先存储的数据变动信息,然后确定出获取的数据变动信息的产生顺序,按照数据变动信息的产生顺序将各数据变动信息进行排序,再依次将各数据变动信息写入缓存。
步骤206,按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中。
具体的,由于各数据变动信息是按照产生顺序依次写入缓存,因此数据变动信息写入缓存中的写入顺序也就是数据变动信息的产生顺序。在将缓存中的数据变动信息存储至目标存储器中时,可以是在每次将数据变动信息写入缓存中后,便将该数据变动信息写入目标存储器中,也可以是在将一定数量的数据变动信息写入缓存中后,再将这一定数量的数据变动信息写入目标存储器中。
另外,在将缓存中的数据变动信息存储至目标存储器中时,利用当前数据变动信息修改目标存储器中的目标数据信息;例如,假设目标存储器中当前存储的目标数据信息为A,当前数据变动信息为将A修改为B,将当前数据信息存储至目标存储器,即将目标存储器中存储的目标数据信息修改为B。
上述电力系统数据存储方法,在获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中之后,通过从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存,也就是通过分布式消息队列将数据变动信息按照产生顺序进行调整并按照产生顺序写入缓存中,再将各数据变动信息存储至目标存储器中,因此本方法能保障数据变动信息是按照产生先后顺序写入至目标存储器,从而能够提高电力系统的数据存储的准确度和效率。
在上述实施例的基础上,本实施例对技术方案作了进一步的说明和优化,具体的,本实施例中,获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中,包括:
获取电力系统中目标业务系统的数据变动信息,并确定出与数据变动信息对应的数据标识;其中,数据标识表示数据变动信息的产生顺序;
将数据变动信息及与数据变动信息对应的数据标识发送给分布式消息队列;
通过分布式消息队列将数据变动信息和对应的数据标识写入对应的分布式存储系统的服务器中。
具体的,在本实施例中,在获取到电力系统中目标业务系统的数据变动信息后,进一步确定出与数据变动信息对应的数据标识,数据标识是与数据变动信息的产生顺序对应设置的、依次自增的数据,各数据标识与各数据变动信息一一对应,即利用数据标识表示对应的数据变动信息,例如,在第一时刻产生的数据变动信息的数据标识为1,在下一时刻产生的数据变动信息的数据标识为2,以此类推,确定出与各数据变动信息分别对应的数据标识,利用数据标识便捷直观地比较各数据变动信息的产生顺序。
对应的,将数据变动信息以及与数据变动信息对应的数据标识一并发送给分布式消息队列,分布式消息队列在接收到数据变动信息及对应的数据标识后,将数据变动信息及对应的数据标识按照预设规则写入对应的分布式存储系统的服务器中。
在实际操作中,分布式消息队列在每次接收到数据变动信息及对应的数据标识后,按照轮询顺序,将数据变动信息及对应的数据标识以轮询(RR,Round Robin)的方式轮流写入分布式存储系统中的服务器,以将各数据变动信息及对应的数据标识均衡地存储于各服务器中。更具体的,每个分布式消息队列可以指定多个服务器,在该分布式消息队列在接收到数据变动信息及对应的数据标识后,以轮询的方式将数据变动信息及对应的数据标识写入对应的分布式存储系统的指定的多个服务器中。
可见,本实施例通过将数据变动信息和对应的数据标识以轮询的方式写入对应的分布式存储系统的服务器中,能够均衡分布式存储系统中各服务器的存储量,提升分布式存储系统的效率,减少数据倾斜。
作为一种优选的实施方式,从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存,包括:
从分布式消息队列的各分区中分别获取一个数据变动信息,并利用与获取到的各数据变动信息对应的数据标识,确定出待处理数据集合。
具体的,在本实施例中,首先从分布式消息队列的各分区中分别获取一个数据变动信息,对数据变动信息进行解析,确定出与各数据变动信息分别对应的数据标识,利用各数据标识确定出待处理数据集合。可以理解的是,由于数据标识和数据变动信息一一对应,因此待处理数据集合也就是需要处理的数据变动信息的集合。
根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存;
从与目标数据变动信息对应的分区中获取一个数据变动信息,并利用新获取的数据变动信息的数据标识更新待处理数据集合,返回根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存的步骤。
具体的,根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存;在将目标数据变动信息写入缓存中后,确定出与目标数据变动信息对应的分区,从该分区中再次获取一个数据变动信息,并利用新获取的数据变动信息的数据标识更新待处理数据集合,再返回根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存的步骤。
也就是说,根据待处理数据集合中的各数据标识确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存中,并从目标数据变动信息对应的分区中获取新的数据变动信息,不断利用新获取的数据变动信息对应的数据标识更新待处理数据集合,因此能够不断将数据变动信息按照产生顺序写入缓存中。
作为一种优选的实施方式,根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存,包括:
比较待处理数据集合中各数据标识的大小,确定出最小数据标识;
将与最小数据标识对应的数据变动信息确定为最早产生的目标数据变动信息;
将目标数据变动信息写入缓存。
可以理解的是,由于数据标识是随数据变动信息产生顺序递增产生,因此数据标识的数值越小,表示与该数据标识对应的数据变动信息的产生顺序越靠前(越早);数据标识的数值越大,表示与该数据标识对应的数据变动信息的产生顺序越靠后(越晚);因此本实施例中,通过比较待处理数据集合中各数据标识的大小,确定出最小数据标识,该最小数据标识对应的数据变动信息即为最早产生的目标数据变动信息,因此确定出最早产生的目标数据变动信息,将目标数据变动信息写入缓存。
可见,本实施例通过为各数据变动信息设置对应的数据标识,利用数据标识表示数据变动信息的产生顺序,因此能够通过比较数据标识的大小的方式,便捷将各数据变动信息按照产生顺序写入缓存。
在上述实施例的基础上,本实施例对技术方案作了进一步的说明和优化,具体的,本实施例中,方法还包括:
判断当前是否满足停止缓存的停止条件;其中,停止条件包括:缓存中的各目标数据变动信息的产生时间均早于待处理数据集合中的各数据变动信息的产生时间,和/或缓存中的目标数据变动信息的数据量达到预设值;
若未满足停止条件,则返回从与目标数据变动信息对应的分区中获取一个数据变动信息的步骤;
若满足停止条件,则结束进程。
具体的,在本实施例中,可以是在从与目标数据变动信息对应的分区中获取一个数据变动信息,并利用新获取的数据变动信息的数据标识更新待处理数据集合之后,将待处理数据集合对应的数据标识分别与缓存中的各数据变动信息的数据标识进行大小比较,判断缓存中的各目标数据变动信息的产生时间是否均早于待处理数据集合中的各数据变动信息的产生时间;若缓存中的各目标数据变动信息的产生时间均早于待处理数据集合中的各数据变动信息的产生时间,则表示当前满足停止条件,表示当前不需要再将数据变动信息存储至缓存中,因此结束进程;若缓存中的存在目标数据变动信息的产生时间晚于待处理数据集合中的各数据变动信息的产生时间,则表示当前还需继续将数据变动信息写入缓存中,因此返回从与目标数据变动信息对应的分区中获取一个数据变动信息的步骤。
另外,也可以是在根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存之后,确定出写入缓存中的目标数据变动信息的数据量,判断该数据量是否达到预设值,预设值根据实际需求设置,本实施例对此不做限定。若写入缓存中的目标数据变动信息的数据量达到预设值,则表示当前满足停止条件,则表示当前不需要再将数据变动信息存储至缓存中,因此结束进程;若写入缓存中的目标数据变动信息的数据量未达到预设值,则表示当前还需继续将数据变动信息写入缓存中,因此返回从与目标数据变动信息对应的分区中获取一个数据变动信息的步骤。
可见,本实施例通过设置停止条件,在满足停止条件时停止缓存,因此本方法能按照实际需求向目标存储器中存储对应所需的数据变动信息。
在上述实施例的基础上,本实施例对技术方案作了进一步的说明和优化,具体的,本实施例中,将数据变动信息及与数据变动信息对应的数据标识发送给分布式消息队列,包括:
设置多个分布式消息队列,并确定各分布式消息队列与数据变动信息的数据类型的对应关系;
确定出数据变动信息的目标数据类型,并利用目标数据类型和对应关系,确定出对应的目标分布式消息队列;
将数据变动信息及与数据变动信息对应的数据标识发送给目标分布式消息队列。
具体的,根据电力系统数据的数据量大、数据类型多等特征,本实施例设置多个分布式消息队列,并确定各分布式消息队列与数据变动信息的数据类型的对应关系;其中,数据类型指的是数据变动信息对应的类型,如电压数据、电流数据、设备信息等,本实施例对数据类型的具体内容不做限定;一个分布式消息队列可以对应一个或多个数据类型,本实施例对此也不做限定。例如,设置三个分布式消息队列分别存储电压数据、电流数据以及设备信息;在获取到电力系统的变动数据信息之后,确定出变动数据信息的目标数据类型,假设为电压数据;再依据分布式消息队列和数据类型的对应关系,确定出与目标数据类型对应的目标分布式消息队列,即确定出用于存储电压数据的目标分布式消息队列;再将数据变动信息及与数据变动信息对应的数据标识发送给目标分布式消息队列。更具体的,在实际操作中,每个分布式消息队列均对应分布式存储系统,一个分布式消息队列可以对应分布式存储系统中指定的预设数量的服务器,分布式消息队列将接收到的数据变动信息存储至分布式存储系统中对应的服务器中。
本实施例通过设置多个分布式消息队列,并利用各分布式消息队列存储对应数据类型的数据变动信息,因此能够进一步保障数据存储过程的有序性和可靠性,避免出现数据错乱的情况。
为了使本技术领域的人员更好地理解本申请中的技术方案,下面结合实际应用场景对本申请实施例中的技术方案进行详细说明。参考图3a至3k所示的一种电力系统数据存储方法的过程示意图,具体步骤如下:
获取电力系统中目标业务系统的数据变动信息,并确定出与数据变动信息对应的数据标识;其中,数据标识表示数据变动信息的产生顺序;
将数据变动信息及与数据变动信息对应的数据标识发送给分布式消息队列;
通过分布式消息队列将数据变动信息和对应的数据标识写入对应的分布式存储系统的服务器中;即将数据变动信息和对应的数据标识存储至分布式存储系统的不同分区中;本实施例中,分布式消息队列的各分区中存储数据变动信息的示意图如图3a所示;假设分布式消息队列包括三个分区,即分区1,分区2和分区3,各分区分别按照队列顺序存储数据变动信息,以数据标识表示各分区中存储的数据变动信息;
从各个分区中按照队列顺序pop队首的数据变动信息,得到待处理数据集合{2,1,6};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3b所示;
确定出待处理数据集合中的最小值1,将1输出到排序结果数组[1]进行缓存;从最小值1所在分区(分区2)pop队首的数据变动信息,得到待处理数据集合{2,3,6};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3c所示;
确定出待处理数据集合中的最小值2,将2输出到排序结果数组[1,2]进行缓存;从最小值2所在分区(分区1)pop队首的数据变动信息,得到待处理数据集合{4,3,6};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3d所示;
确定出待处理数据集合中的最小值3,将3输出到排序结果数组[1,2,3]进行缓存;从最小值3所在分区(分区2)pop队首的数据变动信息,得到待处理数据集合{4,7,6};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3e所示;
确定出待处理数据集合中的最小值4,将4输出到排序结果数组[1,2,3,4]进行缓存;从最小值4所在分区(分区1)pop队首的数据变动信息,得到待处理数据集合{5,7,6};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3f所示;
确定出待处理数据集合中的最小值5,将5输出到排序结果数组[1,2,3,4,5]进行缓存;从最小值5所在分区(分区1)pop队首的数据变动信息,得到待处理数据集合{12,7,6};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3g所示;
确定出待处理数据集合中的最小值6,将6输出到排序结果数组[1,2,3,4,5,6]进行缓存;从最小值6所在分区(分区3)pop队首的数据变动信息,得到待处理数据集合{12,7,8};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3h所示;
确定出待处理数据集合中的最小值7,将7输出到排序结果数组[1,2,3,4,5,6,7]进行缓存;从最小值7所在分区(分区2)pop队首的数据变动信息,得到待处理数据集合{12,14,8};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3i所示;
确定出待处理数据集合中的最小值8,将8输出到排序结果数组[1,2,3,4,5,6,7,8]进行缓存;从最小值8所在分区(分区3)pop队首的数据变动信息,得到待处理数据集合{12,14,10};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3j所示;
确定出待处理数据集合中的最小值10,将10输出到排序结果数组[1,2,3,4,5,6,7,8,10]进行缓存;从最小值10所在分区(分区3)pop队首的数据变动信息,得到待处理数据集合{12,14,18};此时分布式消息队列的各分区中存储数据变动信息的数据分布如图3k所示;
假设预设值为9,确定出此时缓存中的目标数据变动信息的数据量达到预设值,因此结束进程,停止缓存;然后按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中。
可见,上述电力系统数据存储方法,在获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中之后,通过从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存,也就是通过分布式消息队列将数据变动信息按照产生顺序进行调整并按照产生顺序写入缓存中,再将各数据变动信息存储至目标存储器中,因此本方法能保障数据变动信息是按照产生先后顺序写入至目标存储器,从而能够提高电力系统的数据存储的准确度和效率。
应该理解的是,虽然如上的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的电力系统数据存储方法的电力系统数据存储装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个电力系统数据存储装置实施例中的具体限定可以参见上文中对于电力系统数据存储方法的限定,在此不再赘述。
在一个实施例中,如图4所示,提供了一种电力系统数据存储装置,包括:发送模块402、比较模块404和存储模块406,其中:
发送模块402,用于获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中;
比较模块404,用于从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存;其中,分区为服务器中存储与分布式消息队列对应的数据变动信息的存储区域;
存储模块406,用于按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中。
本发明实施例提供的一种电力系统数据存储装置,具有与上述一种电力系统数据存储方法相同的有益效果。
在其中一个实施例中,发送模块包括:
第一获取子模块,用于获取电力系统中目标业务系统的数据变动信息,并确定出与数据变动信息对应的数据标识;其中,数据标识表示数据变动信息的产生顺序;
发送子模块,用于将数据变动信息及与数据变动信息对应的数据标识发送给分布式消息队列;
写入子模块,用于通过分布式消息队列将数据变动信息和对应的数据标识写入对应的分布式存储系统的服务器中。
在其中一个实施例中,比较模块包括:
第二获取子模块,用于从分布式消息队列的各分区中分别获取一个数据变动信息,并利用与获取到的各数据变动信息对应的数据标识,确定出待处理数据集合;
确定子模块,用于根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存;
更新子模块,用于从与目标数据变动信息对应的分区中获取一个数据变动信息,并利用新获取的数据变动信息的数据标识更新待处理数据集合,返回根据待处理数据集合中的各数据标识,确定出最早产生的目标数据变动信息,并将目标数据变动信息写入缓存的步骤。
在其中一个实施例中,确定子模块包括:
比较单元,用于比较待处理数据集合中各数据标识的大小,确定出最小数据标识;
第一确定单元,用于将与最小数据标识对应的数据变动信息确定为最早产生的目标数据变动信息;
写入单元,用于将目标数据变动信息写入缓存。
在其中一个实施例中,装置还包括:
判断模块,用于判断当前是否满足停止缓存的停止条件;其中,停止条件包括:缓存中的各目标数据变动信息的产生时间均早于待处理数据集合中的各数据变动信息的产生时间,和/或缓存中的目标数据变动信息的数据量达到预设值;
第一执行模块,用于若未满足停止条件,则返回从与目标数据变动信息对应的分区中获取一个数据变动信息的步骤;
第二执行模块,用于若满足停止条件,则结束进程。
在其中一个实施例中,发送子模块包括:
设置单元,用于设置多个分布式消息队列,并确定各分布式消息队列与数据变动信息的数据类型的对应关系;
第二确定单元,用于确定出数据变动信息的目标数据类型,并利用目标数据类型和对应关系,确定出对应的目标分布式消息队列;
发送单元,用于将数据变动信息及与数据变动信息对应的数据标识发送给目标分布式消息队列。
上述电力系统数据存储装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种电力系统数据存储方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图5中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中;
从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存;其中,分区为服务器中存储与分布式消息队列对应的数据变动信息的存储区域;
按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中。
本发明实施例提供的一种计算机设备,具有与上述一种电力系统数据存储方法相同的有益效果。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中;
从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存;其中,分区为服务器中存储与分布式消息队列对应的数据变动信息的存储区域;
按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中。
本发明实施例提供的一种计算机可读存储介质,具有与上述一种电力系统数据存储方法相同的有益效果。
在一个实施例中,提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现以下步骤:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将数据变动信息写入对应的分布式存储系统的服务器中;
从分布式消息队列的各分区中获取数据变动信息,并按照数据变动信息的产生顺序,依次将数据变动信息写入缓存;其中,分区为服务器中存储与分布式消息队列对应的数据变动信息的存储区域;
按照缓存中各数据变动信息的写入顺序,将各数据变动信息存储至目标存储器中。
本发明实施例提供的一种计算机程序产品,具有与上述一种电力系统数据存储方法相同的有益效果。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。

Claims (10)

1.一种电力系统数据存储方法,其特征在于,包括:
获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中;
从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存;其中,所述分区为所述服务器中存储与所述分布式消息队列对应的数据变动信息的存储区域;
按照所述缓存中各所述数据变动信息的写入顺序,将各所述数据变动信息存储至目标存储器中。
2.根据权利要求1所述的方法,其特征在于,所述获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中,包括:
获取所述电力系统中所述目标业务系统的所述数据变动信息,并确定出与所述数据变动信息对应的数据标识;其中,所述数据标识表示所述数据变动信息的产生顺序;
将所述数据变动信息及与所述数据变动信息对应的数据标识发送给所述分布式消息队列;
通过所述分布式消息队列将所述数据变动信息和对应的数据标识写入对应的分布式存储系统的服务器中。
3.根据权利要求2所述的方法,其特征在于,所述从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存,包括:
从所述分布式消息队列的各所述分区中分别获取一个所述数据变动信息,并利用与获取到的各所述数据变动信息对应的数据标识,确定出待处理数据集合;
根据所述待处理数据集合中的各所述数据标识,确定出最早产生的目标数据变动信息,并将所述目标数据变动信息写入所述缓存;
从与所述目标数据变动信息对应的分区中获取一个所述数据变动信息,并利用新获取的所述数据变动信息的数据标识更新所述待处理数据集合,返回所述根据所述待处理数据集合中的各所述数据标识,确定出最早产生的目标数据变动信息,并将所述目标数据变动信息写入所述缓存的步骤。
4.根据权利要求3所述的方法,其特征在于,所述根据所述待处理数据集合中的各所述数据标识,确定出最早产生的目标数据变动信息,并将所述目标数据变动信息写入所述缓存,包括:
比较所述待处理数据集合中各所述数据标识的大小,确定出最小数据标识;
将与所述最小数据标识对应的数据变动信息确定为最早产生的所述目标数据变动信息;
将所述目标数据变动信息写入所述缓存。
5.根据权利要求3或4所述的方法,其特征在于,所述方法还包括:
判断当前是否满足停止缓存的停止条件;其中,所述停止条件包括:所述缓存中的各所述目标数据变动信息的产生时间均早于所述待处理数据集合中的各所述数据变动信息的产生时间,和/或所述缓存中的所述目标数据变动信息的数据量达到预设值;
若未满足所述停止条件,则返回所述从与所述目标数据变动信息对应的分区中获取一个所述数据变动信息的步骤;
若满足所述停止条件,则结束进程。
6.根据权利要求2所述的方法,其特征在于,所述将所述数据变动信息及与所述数据变动信息对应的数据标识发送给所述分布式消息队列,包括:
设置多个分布式消息队列,并确定各所述分布式消息队列与数据变动信息的数据类型的对应关系;
确定出所述数据变动信息的目标数据类型,并利用所述目标数据类型和所述对应关系,确定出对应的目标分布式消息队列;
将所述数据变动信息及与所述数据变动信息对应的数据标识发送给所述目标分布式消息队列。
7.一种电力系统数据存储装置,其特征在于,所述装置包括:
发送模块,用于获取电力系统中目标业务系统的数据变动信息,并通过分布式消息队列将所述数据变动信息写入对应的分布式存储系统的服务器中;
比较模块,用于从所述分布式消息队列的各分区中获取所述数据变动信息,并按照所述数据变动信息的产生顺序,依次将所述数据变动信息写入缓存;其中,所述分区为所述服务器中存储与所述分布式消息队列对应的数据变动信息的存储区域;
存储模块,用于按照所述缓存中各所述数据变动信息的写入顺序,将各所述数据变动信息存储至目标存储器中。
8.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
10.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
CN202111424272.0A 2021-11-26 2021-11-26 电力系统数据存储方法、装置、计算机设备和存储介质 Pending CN114089921A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111424272.0A CN114089921A (zh) 2021-11-26 2021-11-26 电力系统数据存储方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111424272.0A CN114089921A (zh) 2021-11-26 2021-11-26 电力系统数据存储方法、装置、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN114089921A true CN114089921A (zh) 2022-02-25

Family

ID=80305154

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111424272.0A Pending CN114089921A (zh) 2021-11-26 2021-11-26 电力系统数据存储方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN114089921A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115102911A (zh) * 2022-07-29 2022-09-23 上海电气风电集团股份有限公司 数据采集方法、装置、电子设备及可读储存介质
CN115617912A (zh) * 2022-10-31 2023-01-17 深圳曼顿科技有限公司 空开数据管理方法、装置、终端设备以及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050102469A1 (en) * 2003-11-12 2005-05-12 Ofir Zohar Distributed task queues in a multiple-port storage system
US20070244571A1 (en) * 2005-10-28 2007-10-18 Invensys Systems, Inc. Sequence of events recorder facility for an industrial process control environment
US20200310651A1 (en) * 2019-03-29 2020-10-01 Atlassian Pty Ltd System and method for consistent mirroring in a cluster
CN112069265A (zh) * 2020-09-11 2020-12-11 中国工商银行股份有限公司 配置数据的同步方法、业务数据系统、计算机系统和介质
US20210064450A1 (en) * 2019-08-30 2021-03-04 Chicago Mercantile Exchange Inc. Distributed threaded streaming platform reader

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050102469A1 (en) * 2003-11-12 2005-05-12 Ofir Zohar Distributed task queues in a multiple-port storage system
US20070244571A1 (en) * 2005-10-28 2007-10-18 Invensys Systems, Inc. Sequence of events recorder facility for an industrial process control environment
US20200310651A1 (en) * 2019-03-29 2020-10-01 Atlassian Pty Ltd System and method for consistent mirroring in a cluster
US20210064450A1 (en) * 2019-08-30 2021-03-04 Chicago Mercantile Exchange Inc. Distributed threaded streaming platform reader
CN112069265A (zh) * 2020-09-11 2020-12-11 中国工商银行股份有限公司 配置数据的同步方法、业务数据系统、计算机系统和介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115102911A (zh) * 2022-07-29 2022-09-23 上海电气风电集团股份有限公司 数据采集方法、装置、电子设备及可读储存介质
CN115617912A (zh) * 2022-10-31 2023-01-17 深圳曼顿科技有限公司 空开数据管理方法、装置、终端设备以及存储介质
CN115617912B (zh) * 2022-10-31 2023-06-06 深圳曼顿科技有限公司 空开数据管理方法、装置、终端设备以及存储介质

Similar Documents

Publication Publication Date Title
CN114089921A (zh) 电力系统数据存储方法、装置、计算机设备和存储介质
CN115470156A (zh) 基于rdma的内存使用方法、系统、电子设备和存储介质
CN116991800A (zh) 文件获取系统、方法、装置、计算机设备和存储介质
CN115168499B (zh) 数据库表的分片方法、装置、计算机设备和存储介质
CN113111078B (zh) 资源数据处理方法、装置、计算机设备和存储介质
CN114138196A (zh) 电力系统数据存储方法、装置、计算机设备和存储介质
CN117453759B (zh) 业务数据处理方法、装置、计算机设备和存储介质
CN116910115A (zh) 客群查询方法、装置、计算机设备和存储介质
CN110442447B (zh) 基于消息队列的负载均衡方法、装置和计算机设备
CN117112206A (zh) 交易资源隔离方法、装置、计算机设备和存储介质
CN117556107A (zh) 报送数据生成方法、装置、计算机设备和存储介质
CN118094024A (zh) 虚拟资源推送方法、装置、计算机设备和存储介质
CN116884133A (zh) 智能预约叫号方法、装置、计算机设备和存储介质
CN116738000A (zh) 数据存储关系的处理方法、装置、电子设备及存储介质
CN114666008A (zh) 数据传输方法、装置、计算机设备和存储介质
CN117439769A (zh) 页面访问方法、装置、计算机设备和存储介质
CN118113530A (zh) 芯片故障定位方法、装置、计算机设备和存储介质
CN117455501A (zh) 请求处理方法、装置、计算机设备和存储介质
CN116546103A (zh) 分布式业务的处理方法、装置、设备、存储介质和产品
CN116860435A (zh) 核函数优先级确定方法、装置、计算机设备和存储介质
CN114092064A (zh) 电力大数据加工批处理系统及方法、装置、设备和介质
CN117149404A (zh) 探测任务资源分配方法、装置、计算机设备和存储介质
CN117056220A (zh) 批量作业的测试方法、装置、计算机设备和存储介质
CN116128616A (zh) 资源风险试算的数据处理的计算方法、装置、计算机设备
CN116866419A (zh) 信息推送方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination