CN112925796A - 一种写一致性控制方法、装置、设备及存储介质 - Google Patents

一种写一致性控制方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN112925796A
CN112925796A CN202110341255.4A CN202110341255A CN112925796A CN 112925796 A CN112925796 A CN 112925796A CN 202110341255 A CN202110341255 A CN 202110341255A CN 112925796 A CN112925796 A CN 112925796A
Authority
CN
China
Prior art keywords
distributed lock
target
write
data
write operation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110341255.4A
Other languages
English (en)
Inventor
曾利辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Construction Bank Corp
Original Assignee
China Construction Bank Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Construction Bank Corp filed Critical China Construction Bank Corp
Priority to CN202110341255.4A priority Critical patent/CN112925796A/zh
Publication of CN112925796A publication Critical patent/CN112925796A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2365Ensuring data consistency and integrity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061Improving I/O performance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/465Distributed object oriented systems

Abstract

本发明实施例涉及自动程序设计技术领域,公开了一种写一致性控制方法、装置、设备及存储介质,所述方法包括:接收数据写入请求,其中,所述数据写入请求中包含写入方标识;获取所述写入方标识的目标分布式锁;基于所述目标分布式锁判断是否执行所述数据写入请求对应的写操作。本发明实施例提供的方法通过在接收到数据写入请求时,根据写入方标识的目标分布式锁判断是否执行所述数据写入请求对应的写操作,实现了在非关系型数据库内设置统一的写一致性控制标准,实现了并发写的统一标准和流程,简化了写一致性的控制方式,提高了写一致性控制的复用性。

Description

一种写一致性控制方法、装置、设备及存储介质
技术领域
本发明实施例涉及自动程序设计技术领域,尤其涉及一种写一致性控制方法、装置、设备及存储介质。
背景技术
在使用高速缓存系统时,如果进行并发读写需要外部系统实现。也就是说,现有的应用项目,全部是根据其业务特点,整合在其业务逻辑中进行实现。这种方式有如下缺点:(1)每个应用都有自己的实现方法,每个实现方法各不相同,项目间无法复用;(2)与项目紧密耦合,耦合度高,分拆困难;(3)实现方式不灵活,针对业务提出的个性化需求,需要不断修改代码。
发明内容
本发明实施例提供了一种写一致性控制方法、装置、设备及存储介质,以实现并发写的统一标准和流程,简化写一致性的控制方式,提高写一致性控制的复用性。
第一方面,本发明实施例提供了一种写一致性控制方法,包括:
接收数据写入请求,其中,数据写入请求中包含写入方标识;
获取写入方标识的目标分布式锁;
基于目标分布式锁判断是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,获取写入方标识的目标分布式锁,包括:
申请一分布式锁作为写入方标识的目标分布式锁,并根据写入方标识确定目标分布式锁对应的目标分布式锁标识。
可选的,在上述方案的基础上,基于目标分布式锁判断是否执行数据写入请求对应的写操作,包括:
判断是否已存在与目标分布式锁相同的写入分布式锁;
若不存在,则基于目标分布式锁执行数据写入请求对应的写操作;
若存在,则基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,还包括:
若不存在,则将目标分布式锁与目标分布式锁标识对应存储。
可选的,在上述方案的基础上,基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作,包括:
获取数据写入请求中目标写入标识对应的关联分布式锁;
判断目标分布式锁与关联分布式锁是否一致;
根据判断结果确定是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,判断目标分布式锁与关联分布式锁是否一致,包括:
获取关联分布式锁的关联分布式锁标识;
当目标分布式锁标识与关联分布式锁标识一致时,判定目标分布式锁与关联分布式锁一致;
当目标分布式锁标识与关联分布式锁标识不一致时,判定目标分布式锁与关联分布式锁不一致。
可选的,在上述方案的基础上,根据判断结果确定是否执行数据写入请求对应的写操作,包括:
当目标分布式锁与关联分布式锁不一致时,不执行写操作;
当目标分布式锁与关联分布式锁一致时,基于目标分布式锁执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,基于目标分布式锁执行数据写入请求对应的写操作,包括:
获取数据写入请求中包含的目标写入标识、目标原值和目标更新值;
基于目标写入标识和目标原值判断是否基于目标更新值执行写操作。
可选的,在上述方案的基础上,基于目标写入标识和目标原值判断是否基于目标更新值执行写操作,包括:
获取目标写入标识对应的关联原值;
将目标原值和关联原值进行比对;
根据比对结果判断是否基于目标更新值执行写操作。
可选的,在上述方案的基础上,根据比对结果判断是否基于目标更新值执行写操作,包括:
当目标原值与关联原值一致时,基于目标更新值执行写操作;
当目标原值与关联原值不一致时,不执行写操作。
可选的,在上述方案的基础上,基于目标更新值执行写操作,包括:
将目标写入标识对应的关联原值更新为目标更新值。
可选的,在上述方案的基础上,还包括:
释放写入方标识的目标分布式锁。
第二方面,本发明实施例还提供了一种写一致性控制装置,包括:
写入请求接收模块,用于接收数据写入请求,其中,数据写入请求中包含写入方标识;
分布式锁获取模块,用于获取写入方标识的目标分布式锁;
写操作执行模块,用于基于目标分布式锁判断是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,分布式锁获取模块具体用于:
申请一分布式锁作为写入方标识的目标分布式锁,并根据写入方标识确定目标分布式锁对应的目标分布式锁标识。
可选的,在上述方案的基础上,写操作执行模块包括:
分布式锁判断子模块,用于判断是否已存在与目标分布式锁相同的写入分布式锁;
分布式锁不存在子模块,用于若不存在,则基于目标分布式锁执行数据写入请求对应的写操作;
分布式锁存在子模块,用于若存在,则基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,装置还包括分布式锁标识存储模块,用于:
若不存在,则将目标分布式锁与目标分布式锁标识对应存储。
可选的,在上述方案的基础上,分布式锁存在子模块包括:
关联分布式锁单元,用于获取数据写入请求中目标写入标识对应的关联分布式锁;
一致性判断单元,用于判断目标分布式锁与关联分布式锁是否一致;
写操作执行判断单元,用于根据判断结果确定是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,一致性判断单元包括:
关联分布式锁标识子单元,用于获取关联分布式锁的关联分布式锁标识;
一致性判定子单元,用于当目标分布式锁标识与关联分布式锁标识一致时,判定目标分布式锁与关联分布式锁一致;
不一致判定子单元,用于当目标分布式锁标识与关联分布式锁标识不一致时,判定目标分布式锁与关联分布式锁不一致。
可选的,在上述方案的基础上,写操作执行判断单元包括:
分布式锁不一致子单元,用于当目标分布式锁与关联分布式锁不一致时,不执行写操作;
分布式锁一致子单元,用于当目标分布式锁与关联分布式锁一致时,基于目标分布式锁执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
获取数据写入请求中包含的目标写入标识、目标原值和目标更新值;
基于目标写入标识和目标原值判断是否基于目标更新值执行写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
获取目标写入标识对应的关联原值;
将目标原值和关联原值进行比对;
根据比对结果判断是否基于目标更新值执行写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
当目标原值与关联原值一致时,基于目标更新值执行写操作;
当目标原值与关联原值不一致时,不执行写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
将目标写入标识对应的关联原值更新为目标更新值。
可选的,在上述方案的基础上,装置还包括分布式锁释放模块,用于:
释放写入方标识的目标分布式锁。
第三方面,本发明实施例还提供了一种计算机设备,设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如本发明任意实施例所提供的写一致性控制方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的写一致性控制方法。
本发明实施例通过接收数据写入请求,其中,数据写入请求中包含写入方标识;获取写入方标识的目标分布式锁;基于目标分布式锁判断是否执行数据写入请求对应的写操作,通过在接收到数据写入请求时,根据写入方标识的目标分布式锁判断是否执行数据写入请求对应的写操作,实现了在非关系型数据库内设置统一的写一致性控制标准,实现了并发写的统一标准和流程,简化了写一致性的控制方式,提高了写一致性控制的复用性。
附图说明
图1是本发明实施例一所提供的一种写一致性控制方法的流程示意图;
图2是本发明实施例二所提供的一种写一致性控制方法的流程示意图;
图3是本发明实施例三所提供的一种写一致性控制方法的流程示意图;
图4是本发明实施例四所提供的一种写一致性控制方法的流程示意图;
图5是本发明实施例五所提供的一种写一致性控制装置的结构示意图;
图6是本发明实施例六所提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一所提供的一种写一致性控制方法的流程示意图。本实施例可适用于对非关系性数据库进行写一致性的控制时的情形。该方法可以由写一致性控制装置执行,该写一致性控制装置可以采用软件和/或硬件的方式实现,例如,该写一致性控制装置可配置于计算机设备中。如图1所示,该方法包括:
S110、接收数据写入请求,其中,数据写入请求中包含写入方标识。
在本实施例中,数据写入请求可以为应用方发起的,用于写入数据的请求。以扣款应用为例,写入扣款后的余额,以替代扣款前的余额,实现扣款应用的余额更新。可以理解的是,写一致性控制装置可以通过非关系型数据库的并发访问接口接收数据写入请求。
可选的,写入方根据其标识、目标原值和目标更新值生成数据写入请求,并将数据写入请求发送至写一致性控制装置,写一致性控制装置接收到数据写入方发起的数据写入请求后,对数据写入请求进行解析,得到数据写入请求中包含的写入方标识、目标原值和目标更新值,基于写入方标识、目标原值和目标更新值执行写操作。其中,写入方标识可以为写入数据的应用方标识。
以扣款应用为例,扣款应用将其应用标识作为写入方标识,将扣款前余额(即当前余额)作为目标原值,将扣款后余额作为目标更新值,根据其标识、目标原值和目标更新值生成数据写入请求,并将数据写入请求发送至写一致性控制装置,写一致性控制装置接收到扣款应用发起的数据写入请求后,对数据写入请求进行解析,得到数据写入请求中包含的写入方标识、目标原值和目标更新值,基于写入方标识、目标原值和目标更新值执行写操作,即扣款操作。
S120、获取写入方标识的目标分布式锁。
在本实施例中,基于分布式锁实现同一时刻针对同一数据仅有一个数据写入方执行写入操作,实现写一致性的控制。整体来说,当接收到数据写入方发起的数据写入请求后,为数据写入方分配一分布式锁作为写入方标识的目标分布式锁,基于目标分布式锁判断当前的数据写入方是否为被允许写入的数据写入方,以判断是否执行数据写入请求对应的数据写入操作。其中,目标分布式锁的分配可以基于数据写入请求中包含的目标写入标识(即非关系型数据库中的k)确定。
在本发明的一种实施方式中,获取写入方标识的目标分布式锁,包括:申请一分布式锁作为写入方标识的目标分布式锁,并根据写入方标识确定目标分布式锁对应的目标分布式锁标识。可选的,在接收到数据写入请求后,申请一分布式锁作为目标分布式锁,并基于写入方标识确定目标分布式锁标识,基于目标分布式锁和目标分布式锁标识判断当前的数据写入方是否为被允许写入的数据写入方,以判断是否执行数据写入请求对应的数据写入操作。
S130、基于目标分布式锁判断是否执行数据写入请求对应的写操作。
整体上说,当目标分布式锁对应的数据写入方为当前数据写入请求对应的数据写入方时,判定当前的数据写入方为被允许写入的数据写入方,进而判定可以执行数据写入请求对应的数据写入操作;当目标分布式锁对应的数据写入方不是前数据写入请求对应的数据写入方时,判定当前的数据写入方不是被允许写入的数据写入方,进而判定不可以执行数据写入请求对应的数据写入操作。
在本发明的一种实施方式中,基于目标分布式锁判断是否执行数据写入请求对应的写操作,包括:判断是否已存在与目标分布式锁相同的写入分布式锁;若不存在,则基于目标分布式锁执行数据写入请求对应的写操作;若存在,则基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作。可以理解的是,写一致性控制装置每接收到一数据写入请求,就为数据写入请求分配一分布式锁,并确定分布式锁的分布式标识,将分布式锁作为写入分布式锁,将分布式锁标识作为写入分布式锁标识,将写入分布式锁和写入分布式锁标识关联存储,当数据写入请求执行完成后,将写入分布式锁释放,即清除写入分布式锁和写入分布式锁标识的存储。因此,在接收到数据写入请求时,可以直接判断是否已存在与目标分布式锁相同的写入分布式锁;当已存在与目标分布式锁相同的写入分布式锁时,表明在此数据发起请求之前,已有数据写入方发起相关的数据写入请求,因此需要判断当前数据写入方是否为之前的数据写入方,以判定是否可以执行相应的写操作,即基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作;当不存在与目标分布式锁相同的写入分布式锁时,表明在此数据发起请求之前,没有数据写入方发起相关的数据写入请求,因此可以直接基于目标分布式锁执行数据写入请求对应的写操。
本发明实施例通过接收数据写入请求,其中,数据写入请求中包含写入方标识;获取写入方标识的目标分布式锁;基于目标分布式锁判断是否执行数据写入请求对应的写操作,通过在接收到数据写入请求时,根据写入方标识的目标分布式锁判断是否执行数据写入请求对应的写操作,实现了在非关系型数据库内设置统一的写一致性控制标准,实现了并发写的统一标准和流程,简化了写一致性的控制方式,提高了写一致性控制的复用性。
在上述方案的基础上,还包括:释放写入方标识的目标分布式锁。可以理解的是,在对数据写入请求相应完成(未执行写操作或执行写操作)后,数据写入请求执行完毕,及时释放写入方标识的目标分布式锁,以减少分布式锁的占用。
实施例二
图2是本发明实施例二所提供的一种写一致性控制方法的流程示意图。本实施例在上述实施例的基础上,对不存在与目标分布式锁相同的写入分布式锁时,基于目标分布式锁执行数据写入请求对应的写操作进行了优化。如图2所示,该方法包括:
S210、接收数据写入请求,其中,数据写入请求中包含写入方标识。
S220、获取写入方标识的目标分布式锁。
S230、判断是否已存在与目标分布式锁相同的写入分布式锁。
S240、若不存在,则获取数据写入请求中包含的目标写入标识、目标原值和目标更新值。
在本实施例中,对不存在与目标分布式锁相同的写入分布式锁时,基于目标分布式锁执行数据写入请求对应的写操作进行了具体化,即对执行数据写入请求对应的写操作进行了具体化。
在上述方案的基础上,为进一步保证数据写入的准确性,获取数据写入请求中的目标写入标识和目标原值。其中,目标写入标识可以理解为非关系型数据库中的k值,目标原值可以理解为非关系型数据库中k对应的value值。判断目标原值是否为非关系型数据库中目标写入标识对应的value值,基于判断结果判定是否执行相应的写操作。
S250、基于目标写入标识和目标原值判断是否基于目标更新值执行写操作。
在本实施例中,通过目标写入标识中目标原值十分更改判断在数据写入方获取目标原值至更新目标原值期间是否存在其他数据写入方对目标原值进行了更新,进而判定是否执行写操作。
一个实施例中,基于目标写入标识和目标原值判断是否基于目标更新值执行写操作,包括:获取目标写入标识对应的关联原值;将目标原值和关联原值进行比对;根据比对结果判断是否基于目标更新值执行写操作。即查询非关系型数据库中目标写入标识实际对应的值作为关联原值,判断目标原值和关联原值是否一致,以判断执行写操作是否会导致更新错误。
具体的,根据比对结果判断是否基于目标更新值执行写操作,包括:当目标原值与关联原值一致时,基于目标更新值执行写操作;当目标原值与关联原值不一致时,不执行写操作。可以理解的是,若目标原值为非关系型数据库中目标写入标识对应的value值,表明未存在其他数据写入方进行数据更新,可以执行写操作;若目标原值不为非关系型数据库中目标写入标识对应的value值,表明在数据写入方获取目标原值至更新目标原值期间存在其他数据写入方对目标原值进行了更新,直接执行写操作可能会导致更新错误,因此不执行写操作。
可选的,基于目标更新值执行写操作,包括:将目标写入标识对应的关联原值更新为目标更新值。示例性的,假设目标写入标识为标识1,目标原值为100,目标更新值为98,则基于目标更新值执行写操作具体为:将非关系型数据库中标识1对应的value值由100更新为98。
在上述方案的基础上,还包括:若不存在,则将目标分布式锁与目标分布式锁标识对应存储。当不存在与目标分布式锁相同的写入分布式锁时,将目标分布式锁与目标分布式锁标识对应存储,以在再次接收到数据写入请求时,基于存储的目标分布式锁和目标分布式锁标识判断是否执行相应的写操作。可以理解的是,在数据写入请求处理完毕后,释放目标分布式锁,相应删除存储的目标分布式锁和目标分布式锁标识,避免对后续数据写入请求产生影响。
本发明实施例在上述实施例的基础上,对不存在与目标分布式锁相同的写入分布式锁时,基于目标分布式锁执行数据写入请求对应的写操作进行了具体化,通过获取所述数据写入请求中包含的目标写入标识、目标原值和目标更新值;基于所述目标写入标识和所述目标原值判断是否基于所述目标更新值执行写操作,进一步保证了数据写入的准确性。
实施例三
图3是本发明实施例三所提供的一种写一致性控制方法的流程示意图。本实施例在上述实施例的基础上,对存在与目标分布式锁相同的写入分布式锁时,基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作进行了优化。如图3所示,该方法包括:
S310、接收数据写入请求,其中,数据写入请求中包含写入方标识。
S320、获取写入方标识的目标分布式锁。
S330、判断是否已存在与目标分布式锁相同的写入分布式锁。
S340、若存在,则获取数据写入请求中目标写入标识对应的关联分布式锁。
在本实施例中,对存在与目标分布式锁相同的写入分布式锁时,基于目标分布式锁执行数据写入请求对应的写操作进行了具体化,。
在上述方案的基础上,为保证数据写入的准确性,当存在与目标分布式锁相同的写入分布式锁时,将与目标分布式锁相同的写入分布式锁作为关联分布式锁,基于目标分布式锁与关联分布式锁判断是否执行数据写入请求对应的写操作。其中,与目标分布式锁相同的写入分布式锁可以理解为目标分布式锁的分布式锁id与写入分布式锁的分布式锁id相同。
S350、判断目标分布式锁与关联分布式锁是否一致。
整体来说,当目标分布式锁与关联分布式锁一致时,表明该数据处理方为被允许执行写操作的数据处理方,可以执行相应的写操作;当目标分布式锁与关联分布式锁不一致时,表明该数据处理方为不被允许执行写操作的数据处理方,拒绝执行相应的写操作。
在本发明的一种实施方式中,判断目标分布式锁与关联分布式锁是否一致,包括:获取关联分布式锁的关联分布式锁标识;当目标分布式锁标识与关联分布式锁标识一致时,判定目标分布式锁与关联分布式锁一致;当目标分布式锁标识与关联分布式锁标识不一致时,判定目标分布式锁与关联分布式锁不一致。可选的,可以基于关联分布式锁对应的关联分布式锁标识,以及目标分布式锁对应的目标分布式锁标识是否一致判断目标分布式锁与关联分布式锁是否一致。具体的,当目标分布式锁标识与关联分布式锁标识一致时,判定目标分布式锁与关联分布式锁一致;当目标分布式锁标识与关联分布式锁标识不一致时,判定目标分布式锁与关联分布式锁不一致。其中,目标分布式锁标识可以理解为目标分布式锁对应的value(基于数据写入方确定的),关联分布式锁标识可以理解为关联分布式锁对应的value。
S360、根据判断结果确定是否执行数据写入请求对应的写操作。
可选的,根据判断结果确定是否执行数据写入请求对应的写操作,包括:当目标分布式锁与关联分布式锁不一致时,不执行写操作;当目标分布式锁与关联分布式锁一致时,基于目标分布式锁执行数据写入请求对应的写操作。
在本发明的一种实施方式中,基于目标分布式锁执行数据写入请求对应的写操作,包括:获取数据写入请求中包含的目标写入标识、目标原值和目标更新值;基于目标写入标识和目标原值判断是否基于目标更新值执行写操作。其中,目标写入标识可以理解为非关系型数据库中的k值,目标原值可以理解为非关系型数据库中k对应的value值。判断目标原值是否为非关系型数据库中目标写入标识对应的value值,基于判断结果判定是否执行相应的写操作。
在上述方案的基础上,基于目标写入标识和目标原值判断是否基于目标更新值执行写操作,包括:获取目标写入标识对应的关联原值;将目标原值和关联原值进行比对;根据比对结果判断是否基于目标更新值执行写操作。
一个实施例中,根据比对结果判断是否基于目标更新值执行写操作,包括:当目标原值与关联原值一致时,基于目标更新值执行写操作;当目标原值与关联原值不一致时,不执行写操作。
可选的,基于目标更新值执行写操作,包括:将目标写入标识对应的关联原值更新为目标更新值。
更加具体的执行写操作的判断和实现可参照上述实施例中写操作的判断和实现,在此不再赘述。
本发明实施例在上述实施例的基础上,将存在与目标分布式锁相同的写入分布式锁时,基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作进行了优化,通过获取所述数据写入请求中目标写入标识对应的关联分布式锁;判断所述目标分布式锁与所述关联分布式锁是否一致;根据判断结果确定是否执行所述数据写入请求对应的写操作,实现了基于分布式锁的写一致性控制,并发写的统一标准和流程,简化了写一致性的控制方式,提高了写一致性控制的复用性。
实施例四
图4是本发明实施例四所提供的一种写一致性控制方法的流程示意图。本实施例在上述实施例的基础上,提供了一种优选实施例。
如图4所示,本发明实施例提供的写一致性控制方法主要包括:
1、在本实施例中,非关系型数据库的并发访问接口接收到的数据写入请求需要包含三个参数:一个唯一标识K(即数据写入方标识),一个原值V(即目标原值),目标值A(即目标更新值)。
2、在执行数据写入请求对应更新之前先获取非关系型数据库的分布式锁(即目标分布式锁)。
3、分布式锁根据记录的id(即分布式锁)和value(分布式锁标识)进行设定,根据id获取目标分布式锁,如果目标分布式锁存在还需要比较value是否一致。只有id和value都一致才能认为是同一个分布式锁。
4、获取非关系型数据库分布式锁成功后,就执行更新,先通过k(即目标写入标识)获取非关系型数据库中的记录的value(即关联原值),和原值v进行比较是否一致,如果一致则执行更新,如果执行不一致则更新失败。
5、如果获取非关系型数据库分布式锁失败就放弃更新,返回失败。
6、释放非关系型数据库的分布式锁。
7、返回结果给客户端。
本发明实施例对于使用非关系型数据库(如redis)作为存储的系统,实现了执行并发更新时统一的标准,避免写一致性控制的重复实现。通过对非关系型数据库内基于分布式锁的写一致性控制,实现了并发写统一标准和流程,同时简化了实现方式,做到了项目的复用。
实施例五
图5是本发明实施例五所提供的一种写一致性控制装置的结构示意图。该写一致性控制装置可以采用软件和/或硬件的方式实现,例如该写一致性控制装置可以配置于计算机设备中。如图5所示,该装置包括写入请求接收模块510、分布式锁获取模块520和写操作执行模块530,其中:
写入请求接收模块510,用于接收数据写入请求,其中,数据写入请求中包含写入方标识;
分布式锁获取模块520,用于获取写入方标识的目标分布式锁;
写操作执行模块530,用于基于目标分布式锁判断是否执行数据写入请求对应的写操作。
本发明实施例通过写入请求接收模块510接收数据写入请求,其中,数据写入请求中包含写入方标识;分布式锁获取模块520获取写入方标识的目标分布式锁;写操作执行模块530基于目标分布式锁判断是否执行数据写入请求对应的写操作,通过在接收到数据写入请求时,根据写入方标识的目标分布式锁判断是否执行数据写入请求对应的写操作,实现了在非关系型数据库内设置统一的写一致性控制标准,实现了并发写的统一标准和流程,简化了写一致性的控制方式,提高了写一致性控制的复用性。
可选的,在上述方案的基础上,分布式锁获取模块520具体用于:
申请一分布式锁作为写入方标识的目标分布式锁,并根据写入方标识确定目标分布式锁对应的目标分布式锁标识。
可选的,在上述方案的基础上,写操作执行模块530包括:
分布式锁判断子模块,用于判断是否已存在与目标分布式锁相同的写入分布式锁;
分布式锁不存在子模块,用于若不存在,则基于目标分布式锁执行数据写入请求对应的写操作;
分布式锁存在子模块,用于若存在,则基于目标分布式锁和写入分布式锁判断是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,装置还包括分布式锁标识存储模块,用于:
若不存在,则将目标分布式锁与目标分布式锁标识对应存储。
可选的,在上述方案的基础上,分布式锁存在子模块包括:
关联分布式锁单元,用于获取数据写入请求中目标写入标识对应的关联分布式锁;
一致性判断单元,用于判断目标分布式锁与关联分布式锁是否一致;
写操作执行判断单元,用于根据判断结果确定是否执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,一致性判断单元包括:
关联分布式锁标识子单元,用于获取关联分布式锁的关联分布式锁标识;
一致性判定子单元,用于当目标分布式锁标识与关联分布式锁标识一致时,判定目标分布式锁与关联分布式锁一致;
不一致判定子单元,用于当目标分布式锁标识与关联分布式锁标识不一致时,判定目标分布式锁与关联分布式锁不一致。
可选的,在上述方案的基础上,写操作执行判断单元包括:
分布式锁不一致子单元,用于当目标分布式锁与关联分布式锁不一致时,不执行写操作;
分布式锁一致子单元,用于当目标分布式锁与关联分布式锁一致时,基于目标分布式锁执行数据写入请求对应的写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
获取数据写入请求中包含的目标写入标识、目标原值和目标更新值;
基于目标写入标识和目标原值判断是否基于目标更新值执行写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
获取目标写入标识对应的关联原值;
将目标原值和关联原值进行比对;
根据比对结果判断是否基于目标更新值执行写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
当目标原值与关联原值一致时,基于目标更新值执行写操作;
当目标原值与关联原值不一致时,不执行写操作。
可选的,在上述方案的基础上,分布式锁不存在子模块或分布式锁一致子单元具体用于:
将目标写入标识对应的关联原值更新为目标更新值。
可选的,在上述方案的基础上,装置还包括分布式锁释放模块,用于:
释放写入方标识的目标分布式锁。
本发明实施例所提供的写一致性控制装置可执行本发明任意实施例所提供的写一致性控制方法,具备执行方法相应的功能模块和有益效果。
实施例六
图6是本发明实施例六所提供的一种计算机设备的结构示意图。图6是本发明实施例六所提供的计算机设备的结构示意图。图6示出了适于用来实现本发明实施方式的示例性计算机设备612的框图。图6显示的计算机设备612仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图6所示,计算机设备612以通用计算设备的形式表现。计算机设备612的组件可以包括但不限于:一个或者多个处理器616,系统存储器628,连接不同系统组件(包括系统存储器628和处理器616)的总线618。
总线618表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器616或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
计算机设备612典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机设备612访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
系统存储器628可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)630和/或高速缓存存储器632。计算机设备612可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储装置634可以用于读写不可移动的、非易失性磁介质(图6未显示,通常称为“硬盘驱动器”)。尽管图6中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线618相连。存储器628可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块642的程序/实用工具640,可以存储在例如存储器628中,这样的程序模块642包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块642通常执行本发明所描述的实施例中的功能和/或方法。
计算机设备612也可以与一个或多个外部设备614(例如键盘、指向设备、显示器624等)通信,还可与一个或者多个使得用户能与该计算机设备612交互的设备通信,和/或与使得该计算机设备612能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口622进行。并且,计算机设备612还可以通过网络适配器620与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器620通过总线618与计算机设备612的其它模块通信。应当明白,尽管图中未示出,可以结合计算机设备612使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理器616通过运行存储在系统存储器628中的程序,从而执行各种功能应用以及数据处理,例如实现本发明实施例所提供的写一致性控制方法,该方法包括:
接收数据写入请求,其中,数据写入请求中包含写入方标识;
获取写入方标识的目标分布式锁;
基于目标分布式锁判断是否执行数据写入请求对应的写操作。
当然,本领域技术人员可以理解,处理器还可以实现本发明任意实施例所提供的写一致性控制方法的技术方案。
实施例七
本发明实施例七还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明实施例所提供的写一致性控制方法,该方法包括:
接收数据写入请求,其中,数据写入请求中包含写入方标识;
获取写入方标识的目标分布式锁;
基于目标分布式锁判断是否执行数据写入请求对应的写操作。
当然,本发明实施例所提供的一种计算机可读存储介质,其上存储的计算机程序不限于如上的方法操作,还可以执行本发明任意实施例所提供的写一致性控制方法的相关操作。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (15)

1.一种写一致性控制方法,其特征在于,包括:
接收数据写入请求,其中,所述数据写入请求中包含写入方标识;
获取所述写入方标识的目标分布式锁;
基于所述目标分布式锁判断是否执行所述数据写入请求对应的写操作。
2.根据权利要求1所述的方法,其特征在于,所述获取所述写入方标识的目标分布式锁,包括:
申请一分布式锁作为所述写入方标识的目标分布式锁,并根据所述写入方标识确定所述目标分布式锁对应的目标分布式锁标识。
3.根据权利要求2所述的方法,其特征在于,基于所述目标分布式锁判断是否执行所述数据写入请求对应的写操作,包括:
判断是否已存在与所述目标分布式锁相同的写入分布式锁;
若不存在,则基于所述目标分布式锁执行所述数据写入请求对应的写操作;
若存在,则基于所述目标分布式锁和所述写入分布式锁判断是否执行所述数据写入请求对应的写操作。
4.根据权利要求3所述的方法,其特征在于,还包括:
若不存在,则将所述目标分布式锁与所述目标分布式锁标识对应存储。
5.根据权利要求3所述的方法,其特征在于,所述基于所述目标分布式锁和所述写入分布式锁判断是否执行所述数据写入请求对应的写操作,包括:
获取所述数据写入请求中目标写入标识对应的关联分布式锁;
判断所述目标分布式锁与所述关联分布式锁是否一致;
根据判断结果确定是否执行所述数据写入请求对应的写操作。
6.根据权利要求5所述的方法,其特征在于,所述判断所述目标分布式锁与所述关联分布式锁是否一致,包括:
获取所述关联分布式锁的关联分布式锁标识;
当所述目标分布式锁标识与所述关联分布式锁标识一致时,判定所述目标分布式锁与所述关联分布式锁一致;
当所述目标分布式锁标识与所述关联分布式锁标识不一致时,判定所述目标分布式锁与所述关联分布式锁不一致。
7.根据权利要求5所述的方法,其特征在于,所述根据判断结果确定是否执行所述数据写入请求对应的写操作,包括:
当所述目标分布式锁与所述关联分布式锁不一致时,不执行所述写操作;
当所述目标分布式锁与所述关联分布式锁一致时,基于所述目标分布式锁执行所述数据写入请求对应的写操作。
8.根据权利要求3或7所述的方法,其特征在于,所述基于所述目标分布式锁执行所述数据写入请求对应的写操作,包括:
获取所述数据写入请求中包含的目标写入标识、目标原值和目标更新值;
基于所述目标写入标识和所述目标原值判断是否基于所述目标更新值执行写操作。
9.根据权利要求8所述的方法,其特征在于,所述基于所述目标写入标识和所述目标原值判断是否基于所述目标更新值执行写操作,包括:
获取所述目标写入标识对应的关联原值;
将所述目标原值和所述关联原值进行比对;
根据比对结果判断是否基于所述目标更新值执行写操作。
10.根据权利要求9所述的方法,其特征在于,所述根据比对结果判断是否基于所述目标更新值执行写操作,包括:
当所述目标原值与所述关联原值一致时,基于所述目标更新值执行写操作;
当所述目标原值与所述关联原值不一致时,不执行写操作。
11.根据权利要求10所述的方法,其特征在于,所述基于所述目标更新值执行写操作,包括:
将所述目标写入标识对应的关联原值更新为所述目标更新值。
12.根据权利要求1所述的方法,其特征在于,还包括:
释放所述写入方标识的目标分布式锁。
13.一种写一致性控制装置,其特征在于,包括:
写入请求接收模块,用于接收数据写入请求,其中,所述数据写入请求中包含写入方标识;
分布式锁获取模块,用于获取所述写入方标识的目标分布式锁;
写操作执行模块,用于基于所述目标分布式锁判断是否执行所述数据写入请求对应的写操作。
14.一种计算机设备,其特征在于,所述设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-12中任一所述的写一致性控制方法。
15.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-12中任一所述的写一致性控制方法。
CN202110341255.4A 2021-03-30 2021-03-30 一种写一致性控制方法、装置、设备及存储介质 Pending CN112925796A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110341255.4A CN112925796A (zh) 2021-03-30 2021-03-30 一种写一致性控制方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110341255.4A CN112925796A (zh) 2021-03-30 2021-03-30 一种写一致性控制方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN112925796A true CN112925796A (zh) 2021-06-08

Family

ID=76176571

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110341255.4A Pending CN112925796A (zh) 2021-03-30 2021-03-30 一种写一致性控制方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN112925796A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113535746A (zh) * 2021-09-13 2021-10-22 环球数科集团有限公司 一种非关系型数据通过随机序列读写后控制一致性的方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113535746A (zh) * 2021-09-13 2021-10-22 环球数科集团有限公司 一种非关系型数据通过随机序列读写后控制一致性的方法
CN113535746B (zh) * 2021-09-13 2021-11-23 环球数科集团有限公司 一种非关系型数据通过随机序列读写后控制一致性的方法

Similar Documents

Publication Publication Date Title
CN109213611B (zh) 跨进程通讯方法、装置、终端及存储介质
CN111382123B (zh) 文件存储方法、装置、设备及存储介质
CN111324441A (zh) 运行环境的切换方法、装置、计算机设备和存储介质
CN111818145B (zh) 一种文件传输方法、装置、系统、设备及存储介质
CN113971037A (zh) 应用处理方法、装置、电子设备及存储介质
CN115202686A (zh) 虚拟化系统的升级方法、装置、电子设备及存储介质
CN114090113B (zh) 数据源处理插件动态加载的方法、装置、设备及存储介质
CN109033456B (zh) 一种条件查询方法、装置、电子设备和存储介质
CN110716960A (zh) 一种数据库查询方法、装置、设备及存储介质
WO2021147773A1 (zh) 数据处理方法、装置、电子设备及计算机可读存储介质
CN112925796A (zh) 一种写一致性控制方法、装置、设备及存储介质
CN107181802B (zh) 智能硬件控制方法和装置、服务器、存储介质
CN111124291A (zh) 分布式存储系统的数据存储处理方法、装置、电子设备
CN111970349B (zh) 基于远程过程调用的通讯系统、方法、装置、设备及介质
CN111405015B (zh) 一种数据处理方法、装置、设备及存储介质
CN111262727B (zh) 服务的扩容方法、装置、设备及存储介质
CN114036218A (zh) 一种数据模型切换方法、装置、服务器和存储介质
CN112988192A (zh) 版本更新方法、装置、电子设备及存储介质
CN114138367A (zh) 一种自助设备上的业务实现方法、装置、设备及存储介质
CN113673872A (zh) 一种补货处理方法、装置、存储介质及电子设备
CN113760465A (zh) 一种事务执行方法、装置、服务器、设备和存储介质
CN112416422A (zh) 一种开发版本文件提交方法、装置、设备及存储介质
CN112084114A (zh) 用于测试接口的方法和装置
CN113760631A (zh) 页面加载时长确定方法、装置、设备和存储介质
CN111046430B (zh) 数据处理方法及装置、存储介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination