CN114840562A - 业务数据的分布式缓存方法、装置、电子设备及存储介质 - Google Patents
业务数据的分布式缓存方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN114840562A CN114840562A CN202210776511.7A CN202210776511A CN114840562A CN 114840562 A CN114840562 A CN 114840562A CN 202210776511 A CN202210776511 A CN 202210776511A CN 114840562 A CN114840562 A CN 114840562A
- Authority
- CN
- China
- Prior art keywords
- data
- service
- cached
- service data
- node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 230000001360 synchronised effect Effects 0.000 claims description 13
- 238000013507 mapping Methods 0.000 claims description 12
- 230000003139 buffering effect Effects 0.000 claims description 3
- 238000005516 engineering process Methods 0.000 abstract description 4
- 238000004590 computer program Methods 0.000 description 13
- 230000009286 beneficial effect Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 238000013467 fragmentation Methods 0.000 description 1
- 238000006062 fragmentation reaction Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2094—Redundant storage or storage space
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/217—Database tuning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/80—Database-specific techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了业务数据的分布式缓存方法、装置、电子设备及可读存储介质,应用于金融科技技术领域,所述业务数据的分布式缓存方法包括:获取待缓存业务数据;依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。本申请解决了现有技术中分布式缓存业务数据的缓存利用率低的技术问题。
Description
技术领域
本申请涉及金融科技技术领域,尤其涉及一种业务数据的分布式缓存方法、装置、电子设备及可读存储介质。
背景技术
随着大数据时代的不断发展,为了减轻数据库的压力,适用于高并发环境下的分布式缓存技术得到了广泛的应用,其中,不依赖于第三方组件且设有集群模式的Redis(Remote Dictionary Server,远程字典服务)更是成为了分布式缓存技术的主流,目前,Redis通常由一个服务端实现管控,多个客户端节点进行业务数据的分布式缓存,以提升响应速度和存储容量需求,在业务数据产生后,需要对数据库进行访问,进而进行缓存,但是,不同的业务数据中存在共享数据,例如,假设业务数据A为前一客户进行存款时的业务数据,业务数据B为当前客户进行存款时的业务数据,其存在相同的业务流程数据,倘若在不同客户进行存款业务时,均通过访问数据库获取业务流程数据,则将导致增加对数据库的访问次数,与此同时,业务流程数据将被重复存储,所以,当前分布式缓存业务数据的缓存利用率低。
发明内容
本申请的主要目的在于提供一种业务数据的分布式缓存方法、装置、电子设备及可读存储介质,旨在解决现有技术中分布式缓存业务数据的缓存利用率低的技术问题。
为实现上述目的,本申请提供一种业务数据的分布式缓存方法,所述业务数据的分布式缓存方法包括:
获取待缓存业务数据;
依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;
判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;
若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
为实现上述目的,本申请还提供一种业务数据的分布式缓存装置,所述业务数据的分布式缓存装置包括:
业务数据获取模块,用于获取待缓存业务数据;
缓存节点确定模块,用于依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;
业务数据判断模块,用于判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;
业务数据缓存模块,用于若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
本申请还提供一种电子设备,所述电子设备包括:缓存器、处理器以及缓存在所述缓存器上并可在所述处理器上运行的所述业务数据的分布式缓存方法的程序,所述业务数据的分布式缓存方法的程序被处理器执行时可实现如上述的业务数据的分布式缓存方法的步骤。
本申请还提供一种计算机可读存储介质,所述计算机可读存储介质上缓存有实现业务数据的分布式缓存方法的程序,所述业务数据的分布式缓存方法的程序被处理器执行时实现如上述的业务数据的分布式缓存方法的步骤。
本申请还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述的业务数据的分布式缓存方法的步骤。
本申请提供了一种业务数据的分布式缓存方法、装置、电子设备及可读存储介质,也即,获取待缓存业务数据;依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。由于待缓存业务数据可通过数据对象标识确定存储的缓存主节点和缓存从节点,进而可保证访问业务数据的响应速度,与此同时,缓存从节点的设置使得分布式系统具备容错机制,也即,当某一缓存主节点宕机时,不会影响Redis集群的正常工作,而由于待缓存业务数据在存储至分布式缓存系统前,会判别待缓存业务数据是否为业务复用数据,也即,若待缓存业务数据为不同业务数据的共享数据,则不对待缓存业务数据进行重复存储,进而当不同的业务之间存在共享数据时,调用分布式系统中的同一份数据,实现了避免共享数据冗余存储的目的,与此同时,也不会增加对数据库的访问次数,所以克服了现有技术中对共享的业务流程数据进行重复存储的技术缺陷,所以,提升了分布式缓存业务数据的缓存利用率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请业务数据的分布式缓存方法基于Redis的分布式集群示意图;
图2为本申请业务数据的分布式缓存方法第一实施例的流程示意图;
图3为本申请业务数据的分布式缓存方法第二实施例的流程示意图;
图4为本申请实施例中业务数据的分布式缓存方法涉及的硬件运行环境的设备结构示意图。
本申请目的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其它实施例,均属于本发明保护的范围。
实施例一
首先,应当理解的是,当前市场上通常有两种基于Redis的分布式缓存解决方案,其中,添置中心化的codis-proxy(Redis代理服务)的codis方案凭借着延时低的优势成为了主流,参照图1,图1为表示基于Redis的分布式集群示意图,其中,客户端包括一致性哈希的数据分片(一致性Hash的sharding),“代理节点(proxy)1”、“代理节点(proxy)2”以及“代理节点(proxy)3”均为代理集群中的代理节点,缓存节点具体包括主节点(master)和从节点(slave),其中,缓存节点和客户端通过网络通信的形式连接形成,缓存节点可以为接入网络中的任意形式的计算设备,不同缓存节点缓存的客户端数据不一样,具体通过“proxy”进行识别,共同服务于客户端需要进行缓存的业务数据,目前,通常情况下缓存业务数据均通过对服务器进行访问,进而缓存整个业务数据,但是,对于不同的业务数据而言,其存在部分可共享的业务流程数据,例如,一些计算的可复用中间数据等等或不同交易业务中的关联数据,倘若分别对业务数据进行缓存,将会导致部分可共享的业务流程数据被重复存储,进而导致当前分布式系统中的一部分存储空间浪费,所以,对于分布式缓存业务数据的缓存利用率亟需提升。
本申请实施例提供一种业务数据的分布式缓存方法,在本申请业务数据的分布式缓存方法的第一实施例中,参照图2,所述业务数据的分布式缓存方法包括:
步骤S10,获取待缓存业务数据;
步骤S20,依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;
在本实施例中,需要说明的是,目前众多行业都需要业务系统拥有处理高并发请求的业务数据的能力,为了提高响应速度,通常会将一些业务数据保存至内存中,而非直接从后端数据库中读取,例如,数据库中使用频率较高的业务的热点数据、固定不变的静态数据、变化频率较低的准静态数据以及读取频率远远大于写入频率的业务数据等等,缓存这些数据能够减少对数据库的访问次数,从而提升业务系统的整体性能,所以,所述待缓存业务数据为数据库中等待缓存的业务数据,具体可以为业务热点数据、静态数据以及准静态数据等等。
另外地,需要说明的是,当缓存主节点收到待缓存业务数据的缓存请求时,缓存请求中携带着待缓存业务数据的数据对象标识,其中,所述数据对象标识用于标识待缓存业务数据的缓存编号,也即,所述数据对象标识为待缓存业务数据的key,通过数据对象标识,可得到待缓存业务数据对应的缓存节点,在一种可实施的方式中,假设数据对象标识为“abc”和value为“A”的待缓存业务数据需缓存至Redis分布式集群中的任意一个节点,则通过待缓存业务数据的数据对象标识可将待缓存业务数据存储至Redis分布式集群中唯一对应的缓存主节点。
另外地,需要说明的是,所述目标缓存主节点用于缓存所述待缓存业务数据,具体可以为部署于Redis分布式集群中的任意一个节点,所述目标缓存从节点为所述目标缓存主节点的备份缓存节点,用于在目标缓存主节点发生故障后仍能保证业务的正常运行,其中,所述目标缓存从节点对应着唯一的目标缓存主节点,所述目标缓存主节点可对应一个或多个目标缓存从节点,在一种可实施的方式中,所述目标缓存主节点可支持读写,所述目标缓存从节点仅支持读不支持写,对于Redis分布式集群的任一部署了目标缓存从节点的目标缓存主节点而言,当目标缓存主节点缓存的业务数据发生变化时,目标缓存从节点缓存的业务数据也会同步随之变化。
作为一种示例,步骤S10至步骤S20包括:依据获取的用户输入的待缓存业务数据的缓存请求,获取待缓存业务数据,其中,所述获取缓存请求的方式可以为通过自身的命令行接口获取、自身的显示界面获取或通过监测触发获取等方式,例如,假设监测到业务数据B的使用频率大于预设使用频率阈值,则将业务数据B作为业务热点数据,进而直接获取业务数据B;通过所述待缓存业务数据的数据对象标识,在所述Redis分布式集群中选取缓存所述待缓存业务数据的缓存主节点和缓存从节点。
其中,所述依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点的步骤包括:
步骤A10,依据预设哈希算法,计算所述数据对象标识对应的数据哈希值;
步骤A20,以所述数据哈希值为索引,在预设哈希映射表中查询对应的缓存主节点;
步骤A30,将所述缓存主节点作为所述目标缓存主节点,以及将所述目标缓存主节点对应的缓存从节点作为目标缓存从节点。
在本实施例中,需要说明的是,所述预设哈希算法用于定位缓存所述待缓存业务数据的缓存主节点,所述数据哈希值为所述待缓存业务数据的哈希值,其中,不同待缓存业务数据的哈希值具有唯一性,在一种可实施的方式中,所述预设哈希算法的具体公式如下:
另外地,需要说明的是,缓存主节点均有唯一的节点标识,所述节点标识用于计算所述缓存主节点的哈希值,所述预设哈希映射表设置于代理节点proxy的预设存储区域,用于表征所述缓存主节点的哈希值和所述数据哈希值之间的映射关系。
作为一种示例,步骤A10至步骤A30的步骤包括:将所述数据对象标识输入预设哈希算法模型,得到所述待缓存业务数据的数据哈希值,其中,所述预设哈希算法模型设置有预设哈希算法;以所述数据哈希值为索引,在预设哈希映射表中查询对应的缓存主节点,其中,所述索引可以为向量;将所述缓存主节点作为所述目标缓存主节点,以及将所述目标缓存主节点对应的缓存从节点作为目标缓存从节点。
其中,在所述以所述数据哈希值为索引,在预设哈希映射表中查询对应的缓存主节点的步骤之前,所述业务数据的分布式缓存方法还包括:
步骤B10,扫描至少一个缓存主节点的节点标识,依据所述节点标识,确定各所述缓存主节点对应的节点哈希槽区和所述节点哈希槽区对应的至少一个数据哈希值;
步骤B20,依据各所述数据哈希值和所述节点哈希槽区之间的对应关系,建立所述预设哈希映射表。
在本实施例中,需要说明的是,codis方案采用数据分片的哈希槽来进行数据存储和数据读取,共有16384个哈希槽,当业务数据需要缓存时,通过CRC16算法校验决定所述业务数据缓存至哪一个具体的哈希槽,当缓存主节点的数量固定时,哈希槽均匀分布,例如,假设缓存主节点的数量为3个,则第一个缓存主节点包含0至5500号哈希槽,第二个缓存主节点包含5501至11000号哈希槽,第三个缓存主节点包含11001至16383号哈希槽,所以,所述节点哈希槽区为所述缓主节点对应的哈希槽范围。
作为一种示例,步骤B10至步骤B20包括:扫描分布式集群中至少一个缓存主节点的节点标识,将所述节点标识输入预设哈希槽算法模型,得到各所述缓存主节点对应的节点哈希槽区和所述节点哈希槽区对应的至少一个数据哈希值,其中,所述预设哈希槽算法模型设置有预设哈希槽算法;依据各所述数据哈希值和所述节点哈希槽区之间的对应关系,建立所述预设哈希映射表,其中,所述对应关系可以为一一对应关系或一对多的对应关系,例如,所述节点哈希槽区为X-Y,若数据哈希值x、y和z均位于X-Y,则数据哈希值x、y和z对应着同一节点哈希槽区。
步骤S30,判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;
步骤S40,若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
在本实施例中,需要说明的是,分布式缓存中缓存的业务数据类型存在多种,以金融行业为例,具体包括系统级参数、Session级共享数据、跨交易的业务共享数据以及业务热点数据等,其中,系统级参数在分布式平台启动时便加载至分布式缓存,使得运行多个实例时可从分布式缓存快速访问,Session级共享数据为不同实例之间的中间数据,例如,假设用户进行取款业务,其在账户信息查询实例中就会涉及到余额数据,那么在用户进行取款需判断余额是否充足时,便可直接从分布式缓存中访问Session级共享数据,跨交易的共享数据为不同业务交易中可共享的数据,业务热点数据为访问频率很高的业务数据,但是,对于共享数据而言,由于可以被不同交易主体和交易业务,也即,存在复用性,所以无需反复存储至分布式缓存,进而所述业务复用数据为可复用的业务数据。
作为一种示例,步骤S30至步骤S40包括:判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;若所述目标缓存主节点和所述目标缓存从节点中存在所述待缓存业务数据,则通过检测所述待缓存业务数据是否为可复用的业务数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
其中,所述通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点的步骤包括:
步骤C10,依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据;
步骤C20,若是,则不将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点;
步骤C30,若否,则将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
作为一种示例,步骤C10至步骤C30包括:依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据;若检测到所述待缓存业务数据为业务复用数据,则不将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点;若检测到所述待缓存业务数据不为业务复用数据,则将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
其中,若所述待缓存业务数据不为业务复用数据,则将所述待缓存业务数据较长时间存储至分布式缓存,若所述待缓存业务数据为业务复用数据,则在关联业务完成后在分布式缓存中直接自动删除或设置定时删除策略,与此同时,在功能层面上,缓存的分布式写根据分布式算法将缓存信息自动分布到缓存主节点上,以API的方式提供,方便业务代码使用,缓存的分布式读根据分布式算法自动从缓存主节点将缓存信息读取,也以API的方式提供。
其中,所述待缓存业务数据包括第一类型待缓存业务数据,所述依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据的步骤包括:
步骤D10,获取所述目标缓存主节点的中间状态数据集;
步骤D20,检测所述中间状态数据集是否存在与所述第一类型待缓存业务数据一致的中间状态数据;
步骤D30,若存在,则不将所述第一类型待缓存业务数据作为所述业务复用数据;
步骤D40,若不存在,则将所述第一类型待缓存业务数据作为所述业务复用数据。
在本实施例中,需要说明的是,所述第一类型待缓存业务数据为等待缓存的业务中间状态数据,所述中间状态数据集为目标缓存主节点中缓存的中间状态数据的集合。
作为一种示例,步骤D10至步骤D40包括:获取目标缓存主节点中缓存的中间状态数据的集合;检测所述目标缓存主节点中缓存的中间状态数据的集合是否存在与等待缓存的业务中间状态数据一致的中间状态数据;若所述目标缓存主节点中缓存的中间状态数据的集合存在与等待缓存的业务中间状态数据一致的中间状态数据,则不将所述等待缓存的业务中间状态数据作为所述业务复用数据;若所述目标缓存主节点中缓存的中间状态数据的集合不存在与等待缓存的业务中间状态数据一致的中间状态数据,则将所述等待缓存的业务中间状态数据作为所述业务复用数据。
其中,在所述判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据的步骤之后,所述业务数据的分布式缓存方法还包括:
步骤E10,若不存在,则检测所述待缓存业务数据是否为业务复用数据;
步骤E20,若是,则将所述待缓存业务数据缓存至所述目标缓存主节点的关联存储区间;
步骤E30,获取所述关联存储区间的业务复用数据表,依据所述业务复用数据表,生成数据更新指令;
步骤E40,依据所述数据更新指令,更新所述目标缓存主节点对应的同步缓存主节点的关联存储区间。
在本实施例中,需要说明的是,面对高并发的应用场景,通过集群环境下的分布式数据缓存,能够有效降低数据库层的访问负载量,以提高系统性能,但是,由于业务数据是分布式缓存,即使设置有缓存从节点,导致仍可能存在节点退出或失效时数据的损失,尤其是对于业务复用数据来说,其通过访问缓存直接读取能够大大降低数据库的访问压力,所以,在不同的缓存主节点中备份或同步缓存业务复用数据是十分必要的。
另外地,需要说明的是,关联存储区间用于表征目标缓存主节点缓存业务复用数据的缓存区域,同步缓存主节点为Redis集群中备份或同步目标缓存主节点缓存的业务复用数据的缓存节点,具体可以为一个或多个,业务复用数据集为同步缓存主节点需同步的业务复用数据的数据单位列表(slot表),其中,数据单位列表为Redis节点的最小数据存储单位,具体可以为哈希槽等,数据更新指令用于更新缓存主节点的关联存储区间,在一种可实施的方式中,当检测到目标缓存主节点的关联存储区间缓存了业务复用数据,则通过获取的目标缓存主节点的节点信息和关联存储区间的业务复用数据表,建立目标缓存主节点和同步缓存主节点的连接关系,以控制更新缓存主节点的关联存储区间,其中,节点信息可以为地址信息以及端口信息等等。
作为一种示例,步骤E10至步骤E40包括:若所述目标缓存主节点和所述目标缓存从节点中不存在所述待缓存业务数据,则检测所述待缓存业务数据是否为业务复用数据;若所述待缓存业务数据为业务复用数据,则将所述待缓存业务数据缓存至关联存储区间;获取所述目标缓存主节点的地址信息以及所述关联存储区间的业务复用数据表,依据所述目标缓存主节点的地址信息,连接所述目标缓存主节点和同步缓存主节点,生成复用数据同步指令;依据所述所述目标缓存主节点的地址信息,将所述业务复用数据表由所述目标缓存主节点发送至同步缓存主节点,以供所述同步缓存主节点根据所述业务复用数据表,同步所述同步缓存主节点的业务复用数据表。由于目标缓存主节点为部署于Redis分布式集群中的任意一个节点,进而当Redis分布式集群中任一节点缓存业务复用数据时,均可在同步缓存主节点进行同步缓存,既克服了现有同步机制中缓存主节点之间对所有缓存的业务数据进行同步,导致同步数据冗余的技术缺陷,又规避了业务复用数据可能出现的损失情况,所以,为提升分布式缓存业务数据的缓存利用率奠定了基础。
在一种可实施的方式中,若所述待缓存业务数据不为业务复用数据,则将所述缓存业务数据缓存至所述目标缓存主节点的非关联存储区间,其中,非关联存储区间为所述目标缓存主节点缓存非业务复用数据的缓存区域。
本申请实施例提供了一种业务数据的分布式缓存方法,也即,获取待缓存业务数据;依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。由于待缓存业务数据可通过数据对象标识确定存储的缓存主节点和缓存从节点,进而可保证访问业务数据的响应速度,与此同时,缓存从节点的设置使得分布式系统具备容错机制,也即,当某一缓存主节点宕机时,不会影响Redis集群的正常工作,而由于待缓存业务数据在存储至分布式缓存系统前,会判别待缓存业务数据是否为业务复用数据,也即,若待缓存业务数据为不同业务数据的共享数据,则不对待缓存业务数据进行重复存储,进而当不同的业务之间存在共享数据时,调用分布式系统中的同一份数据,实现了避免共享数据冗余存储的目的,与此同时,也不会增加对数据库的访问次数,所以克服了现有技术中对共享的业务流程数据进行重复存储的技术缺陷,所以,提升了分布式缓存业务数据的缓存利用率。
实施例二
进一步地,参照图3,在本申请另一实施例中,与上述实施例一相同或相似的内容,可以参考上文介绍,后续不再赘述。在此基础上,所述待缓存业务数据包括第二类型待缓存业务数据,所述依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据的步骤包括:
步骤F10,依据所述第二类型待缓存业务数据对应的业务标识号,获取至少一个缓存主节点共同构建的业务关联数据集;
步骤F20,检测所述业务关联数据集中是否存在与所述第二类型待缓存业务数据一致的业务关联数据;
步骤F30,若存在,则不将所述第二类型待缓存业务数据作为所述业务复用数据;
步骤F40,若不存在,则将所述第二类型待缓存业务数据作为所述业务复用数据。
在本实施例中,需要说明的是,所述第二类型待缓存业务数据为等待缓存的业务关联数据,所述业务标识号用于标识不同的业务,所述业务关联数据集为分布式集群中缓存的业务关联数据的集合。
作为一种示例,步骤F10至步骤F40包括:依据所述等待缓存的业务关联数据对应的业务标识号,获取至少一个缓存主节点共同构建的业务关联数据集;检测所述业务关联数据集中是否存在与所述是等待缓存的业务关联数据一致的业务关联数据;若所述业务关联数据集中存在与所述等待缓存的业务关联数据一致的业务关联数据,则不将所述等待缓存的业务关联数据作为可复用的业务数据;若所述业务关联数据集中不存在与所述等待缓存的业务关联数据一致的业务关联数据,则将所述等待缓存的业务关联数据作为可复用的业务数据。
本申请实施例提供了一种业务复用数据判别方法,也即,依据所述第二类型待缓存业务数据对应的业务标识号,获取至少一个缓存主节点共同构建的业务关联数据集;检测所述业务关联数据集中是否存在与所述第二类型待缓存业务数据一致的业务关联数据;若存在,则不将所述第二类型待缓存业务数据作为所述业务复用数据;若不存在,则将所述第二类型待缓存业务数据作为所述业务复用数据。相比于只将中间状态数据作为复用数据,本方法可通过业务数据的业务标识号,判别第二类型待缓存业务数据是否为业务复用数据,进而当检测到第二类型待缓存业务数据为业务复用数据时,可避免重复缓存第二类型待缓存业务数据,也即,避免了将关联业务中的可共享数据重复缓存,所以,为进一步提升分布式缓存业务数据的缓存利用率奠定了基础。
实施例三
本申请实施例还提供一种业务数据的分布式缓存装置,所述业务数据的分布式缓存装置包括:
业务数据获取模块,用于获取待缓存业务数据;
缓存节点确定模块,用于依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;
业务数据判断模块,用于判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;
业务数据缓存模块,用于若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
可选地,所述业务数据缓存模块还用于:
依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据;
若是,则不将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点;
若否,则将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
可选地,所述待缓存业务数据包括第一类型待缓存业务数据,所述业务数据缓存模块还用于:
获取所述目标缓存主节点的中间状态数据集;
检测所述中间状态数据集是否存在与所述第一类型待缓存业务数据一致的中间状态数据;
若存在,则不将所述第一类型待缓存业务数据作为所述业务复用数据;
若不存在,则将所述第一类型待缓存业务数据作为所述业务复用数据。
可选地,所述待缓存业务数据包括第二类型待缓存业务数据,所述业务数据缓存模块还用于:
依据所述第二类型待缓存业务数据对应的业务标识号,获取至少一个缓存主节点共同构建的业务关联数据集;
检测所述业务关联数据集中是否存在与所述第二类型待缓存业务数据一致的业务关联数据;
若存在,则不将所述第二类型待缓存业务数据作为所述业务复用数据;
若不存在,则将所述第二类型待缓存业务数据作为所述业务复用数据。
可选地,所述缓存节点确定模块还用于:
依据预设哈希算法,计算所述数据对象标识对应的数据哈希值;
以所述数据哈希值为索引,在预设哈希映射表中查询对应的缓存主节点;
将所述缓存主节点作为所述目标缓存主节点,以及将所述目标缓存主节点对应的缓存从节点作为目标缓存从节点。
可选地,所述业务数据的分布式缓存装置还用于:
扫描至少一个缓存主节点的节点标识,依据所述节点标识,确定各所述缓存主节点对应的节点哈希槽区和所述节点哈希槽区对应的至少一个数据哈希值;
依据各所述数据哈希值和所述节点哈希槽区之间的对应关系,建立所述预设哈希映射表。
可选地,所述业务数据的分布式缓存装置还用于:
若不存在,则检测所述待缓存业务数据是否为业务复用数据;
若是,则将所述待缓存业务数据缓存至所述目标缓存主节点的关联存储区间;
获取所述关联存储区间的业务复用数据表,依据所述业务复用数据表,生成数据更新指令;
依据所述数据更新指令,更新所述目标缓存主节点对应的同步缓存主节点的关联存储区间。
本发明提供的业务数据的分布式缓存装置,采用上述实施例中的业务数据的分布式缓存方法,解决了分布式缓存业务数据的缓存利用率低的技术问题。与现有技术相比,本发明实施例提供的业务数据的分布式缓存装置的有益效果与上述实施例提供的业务数据的分布式缓存方法的有益效果相同,且该业务数据的分布式缓存装置中的其他技术特征与上述实施例方法公开的特征相同,在此不做赘述。
实施例四
本发明实施例提供一种电子设备,电子设备包括:至少一个处理器;以及,与至少一个处理器通信连接的缓存器;其中,缓存器缓存有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行上述实施例一中的业务数据的分布式缓存方法。
下面参考图4,其示出了适于用来实现本公开实施例的电子设备的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图4示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图4所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等),其可以根据缓存在只读缓存器(ROM)中的程序或者从缓存装置加载到随机访问缓存器(RAM)中的程序而执行各种适当的动作和处理。在RAM中,还缓存有电子设备操作所需的各种程序和数据。处理装置、ROM以及RAM通过总线彼此相连。输入/输出(I/O)接口也连接至总线。
通常,以下系统可以连接至I/O接口:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置;包括例如磁带、硬盘等的缓存装置;以及通信装置。通信装置可以允许电子设备与其他设备进行无线或有线通信以交换数据。虽然图中示出了具有各种系统的电子设备,但是应理解的是,并不要求实施或具备所有示出的系统。可以替代地实施或具备更多或更少的系统。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置从网络上被下载和安装,或者从缓存装置被安装,或者从ROM被安装。在该计算机程序被处理装置执行时,执行本公开实施例的方法中限定的上述功能。
本发明提供的电子设备,采用上述实施例中的业务数据的分布式缓存方法,解决了分布式缓存业务数据的缓存利用率低的技术问题。与现有技术相比,本发明实施例提供的电子设备的有益效果与上述实施例提供的业务数据的分布式缓存方法的有益效果相同,且该电子设备中的其他技术特征与上述实施例方法公开的特征相同,在此不做赘述。
应当理解,本公开的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式的描述中,具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
实施例五
本实施例提供一种计算机可读存储介质,具有缓存在其上的计算机可读程序指令,计算机可读程序指令用于执行上述实施例一中的业务数据的分布式缓存方法。
本发明实施例提供的计算机可读存储介质例如可以是U盘,但不限于电、磁、光、电磁、红外线、或半导体的系统、系统或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问缓存器(RAM)、只读缓存器(ROM)、可擦式可编程只读缓存器(EPROM或闪存)、光纤、便携式紧凑磁盘只读缓存器(CD-ROM)、光缓存器件、磁缓存器件、或者上述的任意合适的组合。在本实施例中,计算机可读存储介质可以是任何包含或缓存程序的有形介质,该程序可以被指令执行系统、系统或者器件使用或者与其结合使用。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读存储介质可以是电子设备中所包含的;也可以是单独存在,而未装配入电子设备中。
上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被电子设备执行时,使得电子设备:获取待缓存业务数据;依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,模块的名称在某种情况下并不构成对该单元本身的限定。
本发明提供的计算机可读存储介质,缓存有用于执行上述业务数据的分布式缓存方法的计算机可读程序指令,解决了分布式缓存业务数据的缓存利用率低的技术问题。与现有技术相比,本发明实施例提供的计算机可读存储介质的有益效果与上述实施例提供的业务数据的分布式缓存方法的有益效果相同,在此不做赘述。
实施例六
本申请还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述的业务数据的分布式缓存方法的步骤。
本申请提供的计算机程序产品解决了分布式缓存业务数据的缓存利用率低的技术问题。与现有技术相比,本发明实施例提供的计算机程序产品的有益效果与上述实施例提供的业务数据的分布式缓存方法的有益效果相同,在此不做赘述。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利处理范围内。
Claims (10)
1.一种业务数据的分布式缓存方法,其特征在于,所述业务数据的分布式缓存方法包括:
获取待缓存业务数据;
依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;
判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;
若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
2.如权利要求1所述业务数据的分布式缓存方法,其特征在于,所述通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点的步骤包括:
依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据;
若是,则不将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点;
若否,则将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
3.如权利要求2所述业务数据的分布式缓存方法,其特征在于,所述待缓存业务数据包括第一类型待缓存业务数据,
所述依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据的步骤包括:
获取所述目标缓存主节点的中间状态数据集;
检测所述中间状态数据集是否存在与所述第一类型待缓存业务数据一致的中间状态数据;
若存在,则不将所述第一类型待缓存业务数据作为所述业务复用数据;
若不存在,则将所述第一类型待缓存业务数据作为所述业务复用数据。
4.如权利要求2所述业务数据的分布式缓存方法,其特征在于,所述待缓存业务数据包括第二类型待缓存业务数据,
所述依据所述待缓存业务数据的数据类型,检测所述待缓存业务数据是否为业务复用数据的步骤包括:
依据所述第二类型待缓存业务数据对应的业务标识号,获取至少一个缓存主节点共同构建的业务关联数据集;
检测所述业务关联数据集中是否存在与所述第二类型待缓存业务数据一致的业务关联数据;
若存在,则不将所述第二类型待缓存业务数据作为所述业务复用数据;
若不存在,则将所述第二类型待缓存业务数据作为所述业务复用数据。
5.如权利要求3或4中任一所述业务数据的分布式缓存方法,其特征在于,所述依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点的步骤包括:
依据预设哈希算法,计算所述数据对象标识对应的数据哈希值;
以所述数据哈希值为索引,在预设哈希映射表中查询对应的缓存主节点;
将所述缓存主节点作为所述目标缓存主节点,以及将所述目标缓存主节点对应的缓存从节点作为目标缓存从节点。
6.如权利要求5中所述业务数据的分布式缓存方法,其特征在于,在所述以所述数据哈希值为索引,在预设哈希映射表中查询对应的缓存主节点的步骤之前,所述业务数据的分布式缓存方法还包括:
扫描至少一个缓存主节点的节点标识,依据所述节点标识,确定各所述缓存主节点对应的节点哈希槽区和所述节点哈希槽区对应的至少一个数据哈希值;
依据各所述数据哈希值和所述节点哈希槽区之间的对应关系,建立所述预设哈希映射表。
7.如权利要求6所述业务数据的分布式缓存方法,其特征在于,在所述判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据的步骤之后,所述业务数据的分布式缓存方法还包括:
若不存在,则检测所述待缓存业务数据是否为业务复用数据;
若是,则将所述待缓存业务数据缓存至所述目标缓存主节点的关联存储区间;
获取所述关联存储区间的业务复用数据表,依据所述业务复用数据表,生成数据更新指令;
依据所述数据更新指令,更新所述目标缓存主节点对应的同步缓存主节点的关联存储区间。
8.一种业务数据的分布式缓存装置,其特征在于,所述业务数据的分布式缓存装置包括:
业务数据获取模块,用于获取待缓存业务数据;
缓存节点确定模块,用于依据所述待缓存业务数据的数据对象标识,确定所述待缓存业务数据对应的目标缓存主节点和目标缓存从节点;
业务数据判断模块,用于判断所述目标缓存主节点和所述目标缓存从节点中是否存在所述待缓存业务数据;
业务数据缓存模块,用于若存在,则通过检测所述待缓存业务数据是否为业务复用数据,确定是否将所述待缓存业务数据缓存至所述目标缓存主节点和所述目标缓存从节点。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的缓存器;其中,
所述缓存器缓存有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至7中任一项所述的业务数据的分布式缓存方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上缓存有实现业务数据的分布式缓存方法的程序,所述实现业务数据的分布式缓存方法的程序被处理器执行以实现如权利要求1至7中任一项所述业务数据的分布式缓存方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210776511.7A CN114840562B (zh) | 2022-07-04 | 2022-07-04 | 业务数据的分布式缓存方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210776511.7A CN114840562B (zh) | 2022-07-04 | 2022-07-04 | 业务数据的分布式缓存方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114840562A true CN114840562A (zh) | 2022-08-02 |
CN114840562B CN114840562B (zh) | 2022-11-01 |
Family
ID=82574695
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210776511.7A Active CN114840562B (zh) | 2022-07-04 | 2022-07-04 | 业务数据的分布式缓存方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114840562B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115545639A (zh) * | 2022-09-16 | 2022-12-30 | 北京信大融金教育科技有限公司 | 金融业务处理方法、装置、电子设备及存储介质 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030229900A1 (en) * | 2002-05-10 | 2003-12-11 | Richard Reisman | Method and apparatus for browsing using multiple coordinated device sets |
CN101859389A (zh) * | 2009-04-09 | 2010-10-13 | 广东电子工业研究院有限公司 | 一种物品通关信息采集方法及其系统 |
CN102137125A (zh) * | 2010-01-26 | 2011-07-27 | 复旦大学 | 在分布式网络系统中处理跨任务数据的方法 |
CN103019960A (zh) * | 2012-12-03 | 2013-04-03 | 华为技术有限公司 | 分布式缓存方法及系统 |
CN109756511A (zh) * | 2019-02-02 | 2019-05-14 | 珠海金山网络游戏科技有限公司 | 一种数据处理方法及装置、一种计算设备及存储介质 |
CN109815256A (zh) * | 2018-12-21 | 2019-05-28 | 聚好看科技股份有限公司 | 一种数据处理方法、装置、电子设备和存储介质 |
CN109947796A (zh) * | 2019-04-12 | 2019-06-28 | 北京工业大学 | 一种分布式数据库系统查询中间结果集的缓存方法 |
CN111723113A (zh) * | 2020-06-19 | 2020-09-29 | 深圳前海微众银行股份有限公司 | 业务数据的分布式缓存方法、装置、终端设备及存储介质 |
CN112925946A (zh) * | 2021-02-26 | 2021-06-08 | 中国铁塔股份有限公司 | 一种业务数据存储方法、装置及电子设备 |
CN114116790A (zh) * | 2020-08-27 | 2022-03-01 | 华为技术有限公司 | 数据处理的方法及装置 |
CN114390069A (zh) * | 2022-01-30 | 2022-04-22 | 青岛海尔科技有限公司 | 基于分布式缓存的数据访问方法与系统、设备及存储介质 |
-
2022
- 2022-07-04 CN CN202210776511.7A patent/CN114840562B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030229900A1 (en) * | 2002-05-10 | 2003-12-11 | Richard Reisman | Method and apparatus for browsing using multiple coordinated device sets |
CN101859389A (zh) * | 2009-04-09 | 2010-10-13 | 广东电子工业研究院有限公司 | 一种物品通关信息采集方法及其系统 |
CN102137125A (zh) * | 2010-01-26 | 2011-07-27 | 复旦大学 | 在分布式网络系统中处理跨任务数据的方法 |
CN103019960A (zh) * | 2012-12-03 | 2013-04-03 | 华为技术有限公司 | 分布式缓存方法及系统 |
CN109815256A (zh) * | 2018-12-21 | 2019-05-28 | 聚好看科技股份有限公司 | 一种数据处理方法、装置、电子设备和存储介质 |
CN109756511A (zh) * | 2019-02-02 | 2019-05-14 | 珠海金山网络游戏科技有限公司 | 一种数据处理方法及装置、一种计算设备及存储介质 |
CN109947796A (zh) * | 2019-04-12 | 2019-06-28 | 北京工业大学 | 一种分布式数据库系统查询中间结果集的缓存方法 |
CN111723113A (zh) * | 2020-06-19 | 2020-09-29 | 深圳前海微众银行股份有限公司 | 业务数据的分布式缓存方法、装置、终端设备及存储介质 |
CN114116790A (zh) * | 2020-08-27 | 2022-03-01 | 华为技术有限公司 | 数据处理的方法及装置 |
CN112925946A (zh) * | 2021-02-26 | 2021-06-08 | 中国铁塔股份有限公司 | 一种业务数据存储方法、装置及电子设备 |
CN114390069A (zh) * | 2022-01-30 | 2022-04-22 | 青岛海尔科技有限公司 | 基于分布式缓存的数据访问方法与系统、设备及存储介质 |
Non-Patent Citations (3)
Title |
---|
ANSHUJ GARG 等: "Catalyst: GPU-assisted rapid memory deduplication in virtualization environments", 《VEE "17: PROCEEDINGS OF THE 13TH ACM SIGPLAN/SIGOPS INTERNATIONAL CONFERENCE ON VIRTUAL EXECUTION ENVIRONMENTS》 * |
徐波: "面向数据中心的Docker容器在线迁移系统", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 * |
戴华东 等: "分布式共享存储系统中的存储管理及优化技术", 《计算机工程》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115545639A (zh) * | 2022-09-16 | 2022-12-30 | 北京信大融金教育科技有限公司 | 金融业务处理方法、装置、电子设备及存储介质 |
CN115545639B (zh) * | 2022-09-16 | 2024-01-09 | 北京信大融金教育科技有限公司 | 金融业务处理方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114840562B (zh) | 2022-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111078147B (zh) | 一种缓存数据的处理方法、装置、设备及存储介质 | |
CN111309732B (zh) | 数据处理方法、装置、介质和计算设备 | |
JP2019212336A (ja) | 分散キャッシュクラスタ管理 | |
CN110597739A (zh) | 一种配置的管理方法、系统及设备 | |
CN111124475B (zh) | 存储管理的方法、电子设备和计算机可读存储介质 | |
CN114780252B (zh) | 数据仓库系统的资源管理方法及装置 | |
CN105069152B (zh) | 数据处理方法及装置 | |
CN107861691B (zh) | 一种多控存储系统的负载均衡方法和装置 | |
CN113094430B (zh) | 一种数据处理方法、装置、设备以及存储介质 | |
CN110633046A (zh) | 一种分布式系统的存储方法、装置、存储设备及存储介质 | |
CN113806300B (zh) | 数据存储方法、系统、装置、设备及存储介质 | |
WO2023066182A1 (zh) | 文件处理方法、装置、设备及存储介质 | |
CN114840562B (zh) | 业务数据的分布式缓存方法、装置、电子设备及存储介质 | |
CN111338834B (zh) | 数据存储方法和装置 | |
KR101175505B1 (ko) | N?스크린 환경에서 네트워크 기반 파일 시스템을 이용한 사용자 데이터 저장환경 제공 시스템 | |
CN110795495A (zh) | 数据处理方法、装置、电子设备及计算机可读介质 | |
US11157456B2 (en) | Replication of data in a distributed file system using an arbiter | |
CN109165078B (zh) | 一种虚拟分布式服务器及其访问方法 | |
CN115545639B (zh) | 金融业务处理方法、装置、电子设备及存储介质 | |
CN111176715A (zh) | 一种信息调用方法及服务器 | |
WO2023273564A1 (zh) | 虚拟机内存管理方法、装置、存储介质及电子设备 | |
CN115113798B (zh) | 一种应用于分布式存储的数据迁移方法、系统及设备 | |
CN115981559A (zh) | 分布式数据存储方法、装置、电子设备和可读介质 | |
US11121981B1 (en) | Optimistically granting permission to host computing resources | |
CN112506583A (zh) | 一种实例控制方法、装置、设备、存储介质以及程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |