CN118069700A - 数据核验方法、装置、计算机设备、存储介质 - Google Patents
数据核验方法、装置、计算机设备、存储介质 Download PDFInfo
- Publication number
- CN118069700A CN118069700A CN202410372143.9A CN202410372143A CN118069700A CN 118069700 A CN118069700 A CN 118069700A CN 202410372143 A CN202410372143 A CN 202410372143A CN 118069700 A CN118069700 A CN 118069700A
- Authority
- CN
- China
- Prior art keywords
- service
- verification rule
- verification
- cache
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 71
- 238000013524 data verification Methods 0.000 title claims abstract description 56
- 238000012795 verification Methods 0.000 claims abstract description 190
- 238000005192 partition Methods 0.000 claims abstract description 82
- 238000004590 computer program Methods 0.000 claims abstract description 26
- 230000008569 process Effects 0.000 claims description 13
- 230000004048 modification Effects 0.000 claims description 7
- 238000012986 modification Methods 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 5
- 230000004044 response Effects 0.000 claims description 5
- 238000012545 processing Methods 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 230000008520 organization Effects 0.000 description 3
- 238000010276 construction Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及一种数据核验方法、装置、计算机设备、存储介质和计算机程序产品,涉及大数据数据处理技术领域。所述方法包括:响应于数据核验请求,基于所述数据核验请求从缓存数据库中获取业务场景编号与业务核验规则,其中;在获取所述业务核验规则的情况下,判断所述业务核验规则对应的缓存分区的工作状态,所述缓存分区的工作状态至少包括写入状态、锁定状态、空闲状态;在所述缓存分区的工作状态为空闲状态的情况下,基于所述业务核验规则对数据进行核验的同时,将所述缓存分区的工作状态修改为锁定状态;在得到所述数据核验结果后,将所述缓存分区的工作状态修改为空闲状态。采用本方法能够提升查询的性能。
Description
技术领域
本申请涉及大数据数据处理技术领域,特别是涉及一种数据核验方法、装置、计算机设备、存储介质和计算机程序产品。
背景技术
近年来,监管机构对银行的数据规范提出了越来越高的要求,在监管机构发布的各个规范文档中,对数据都做了质量要求管理,同时,监管机构也会发布单独的核验规则文档来对数据质量进行一定的规范约束,所以在监管报送应用系统的建设中,在系统中需要处理的核验规则越来越多。
目前,业务系统在调用核验微服务的时候,每笔业务数据都会调用一次核验微服务,核验微服务每次都需要从数据库中将相关核验规则查询加载到内存中,跟业务数据进行规则的匹配,同时将核验的结果日志插入到数据库中,难以满足查询性能需求。
发明内容
基于此,有必要针对上述技术问题,提供了一种数据核验方法、装置、计算机设备、存储介质和计算机程序产品。本申请技术方案中对数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
第一方面,本申请提供了一种数据核验方法。所述方法包括:
响应于数据核验请求,基于所述数据核验请求从缓存数据库中获取业务场景编号与业务核验规则,其中,所述缓存数据库包括采用下述方式得到:各业务场景包括业务场景编号,基于不同的业务场景制定对应的业务核验规则,并将所述业务场景编号、所述业务核验规则以键值对的形式存储至缓存数据库;
在获取所述业务核验规则的情况下,判断所述业务核验规则对应的缓存分区的工作状态,所述缓存分区的工作状态至少包括写入状态、锁定状态、空闲状态;
在所述缓存分区的工作状态为空闲状态的情况下,基于所述业务核验规则对数据进行核验的同时,将所述缓存分区的工作状态修改为锁定状态;
在得到所述数据核验结果后,将所述缓存分区的工作状态修改为空闲状态。
在其中一个实施例中,所述业务核验规则的更改过程,包括:
定期获取预置时长内缓存数据库中的业务核验规则,判断是否存在新的业务核验规则,在存在所述新的业务核验规则的情况下,获取所述新的业务核验规则对应的业务场景编号,基于所述业务场景编号对业务核验规则进行修改。
在其中一个实施例中,所述获取所述新的业务核验规则对应的业务场景编号之后,所述方法还包括:
将所述业务场景编号所在的缓存分区的工作状态更改为写入状态,在所述业务核验规则进行修改后,将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
在其中一个实施例中,所述定期获取预置时长内缓存数据库中的业务核验规则包括:
获取各所述业务核验规则的产生时间,基于所述预设时长,得到所述业务核验规则的结束时间;
基于所述结束时间,获取预缓存数据库中的业务核验规则。
在其中一个实施例中,所述将所述业务场景编号所在的缓存分区的工作状态更改为写入状态之后,所述方法还包括:
将所述缓存分区中存储的原业务核验规则删除,将新的业务核验规则写入缓存分区;
在所述新的业务核验规则写入成功后,结束本次数据写入,并将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
第二方面,本申请还提供了一种数据核验装置,所述装置包括:
响应模块,用于响应于数据核验请求,基于所述数据核验请求从缓存数据库中获取业务场景编号与业务核验规则,其中,所述缓存数据库包括采用下述方式得到:各业务场景包括业务场景编号,基于不同的业务场景制定对应的业务核验规则,并将所述业务场景编号、所述业务核验规则以键值对的形式存储至缓存数据库;
判断模块,用于在获取所述业务核验规则的情况下,判断所述业务核验规则对应的缓存分区的工作状态,所述缓存分区的工作状态至少包括写入状态、锁定状态、空闲状态;
修改模块,用于在所述缓存分区的工作状态为空闲状态的情况下,基于所述业务核验规则对数据进行核验的同时,将所述缓存分区的工作状态修改为锁定状态;
结束模块,用于在得到所述数据核验结果后,将所述缓存分区的工作状态修改为空闲状态。
在其中一个实施例中,所述业务核验规则的更改过程,包括:
定期获取预置时长内缓存数据库中的业务核验规则,判断是否存在新的业务核验规则,在存在所述新的业务核验规则的情况下,获取所述新的业务核验规则对应的业务场景编号,基于所述业务场景编号对业务核验规则进行修改。
在其中一个实施例中,所述获取所述新的业务核验规则对应的业务场景编号之后,所述装置还包括:
将所述业务场景编号所在的缓存分区的工作状态更改为写入状态,在所述业务核验规则进行修改后,将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
在其中一个实施例中,所述定期获取预置时长内缓存数据库中的业务核验规则包括:
获取各所述业务核验规则的产生时间,基于所述预设时长,得到所述业务核验规则的结束时间;
基于所述结束时间,获取预缓存数据库中的业务核验规则。
在其中一个实施例中,所述将所述业务场景编号所在的缓存分区的工作状态更改为写入状态之后,所述装置还包括:
将所述缓存分区中存储的原业务核验规则删除,将新的业务核验规则写入缓存分区;
在所述新的业务核验规则写入成功后,结束本次数据写入,并将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
第三方面,本公开还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现数据核验方法的步骤。
第四方面,本公开还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现数据核验方法的步骤。
第五方面,本公开还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现数据核验方法的步骤。
上述数据核验方法,至少包括以下有益效果:
本公开提供的实施例方案,设置缓存数据库用于存放业务场景编号与业务核验规则,当业务数据增多的时候,每条业务数据都需要做规则校验从而每条核验规则都需要调用一次核验微服务的时候,微服务不必多次查询数据库中的核验规则信息,同时满足当核验规则更新的时候,能够及时的生效,作用于业务数据的校验。可以在大数据量的报送业务的情况下,提升查询的性能,满足业务报送系统的响应需求。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
为了更清楚地说明本公开实施例或传统技术中的技术方案,下面将对实施例或传统技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中数据核验方法的应用环境图;
图2为一个实施例中数据核验方法的流程示意图;
图3为一个实施例中数据核验方法的流程示意图;
图4为一个实施例中数据核验方法的示意图;
图5为一个实施例中数据核验装置的结构框图;
图6为一个实施例中数据核验装置的结构框图;
图7为一个实施例中计算机设备的内部结构图;
图8为一个实施例中一种服务器的内部结构图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。术语“包括”、“包含”或者其任何其它变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、产品或者设备不仅包括那些要素,而且还包括没有明确列出的其它要素,或者是还包括为这种过程、方法、产品或者设备所固有的要素。在没有更多限制的情况下,并不排除在包括所述要素的过程、方法、产品或者设备中还存在另外的相同或等同要素。例如若使用到第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
本公开实施例提供一种数据核验方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上,也可以放在云上或其他网络服务器上。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备,物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在本公开的一些实施例中,如图2所示,提供了一种数据核验方法,以该方法应用于图1中的服务器对业务核验规则进行处理为例进行说明。可以理解的是,该方法可以应用于服务器,还可以应用于包括终端和服务器的系统,并通过终端和服务器的交互实现。具体的一个实施例中,所述方法可以包括以下步骤:
S202:响应于数据核验请求,基于所述数据核验请求从缓存数据库中获取业务场景编号与业务核验规则,其中,所述缓存数据库包括采用下述方式得到:各业务场景包括业务场景编号,基于不同的业务场景制定对应的业务核验规则,并将所述业务场景编号、所述业务核验规则以键值对的形式存储至缓存数据库。
定义缓存,缓存可以采用key-value(键值数据库)的形式,键值数据库是一种非关系数据库,可以使用简单的键值方法来存储数据。该数据库将数据存储为键值对集合,其中键作为唯一标识符。键和值都可以是从简单对象到复杂复合对象的任何内容,键值数据库是高度可分区的,并且允许以其他类型的数据库无法达到的水平进行水平扩展。其中key值为业务场景编号,value值为该场景下具体的核验规则,不同的场景下,有不同的业务核验规则,核验的字段内容也不一样,该结构满足了不同场景核验不同数据规则的校验。
数据核验规则中可以包括用户信息、业务信息,业务场景编号可以使用数字、字母等表示,业务核验规则与业务场景编号相对应。核验规则有不同的核验场景,不同场景下的核验规则各有不同,所以缓存的数据结构采用key-value的map结构。Key值用来存放场景信息,value值用来存放对应的核验规则信息。
S204:在获取所述业务核验规则的情况下,判断所述业务核验规则对应的缓存分区的工作状态,所述缓存分区的工作状态至少包括写入状态、锁定状态、空闲状态。
Java的并发包中的读写锁,在读锁锁定的时候,可以进行写锁的获取与释放,在写锁的锁定的时候,不能进行读锁的获取,即不能进行核验规则的读取,暂停核验规则的校验处理。同时在程序的最后,即使程序抛出异常,也会进行锁的释放,以保证使用锁的安全性。
缓存的安全读写的操作是采用java的读写锁来控制的,该读写锁除了保证写操作对读操作的可见性以及并发性的提升之外,读写锁能简化读写交互场景的编程方式。当核验微服务被调用的时候,进行读锁的锁定,同时在java的try{}代码块中进行数据的业务核验逻辑的校验,在finally{}代码块中进行读锁的释放。
写入状态可以当前已进入锁定状态,在进行业务核验规则写入中,锁定状态表示当前核验微服务不可使用,空闲状态表示当前核验微服务可使用。
S206:在所述缓存分区的工作状态为空闲状态的情况下,基于所述业务核验规则对数据进行核验的同时,将所述缓存分区的工作状态修改为锁定状态。
S208:在得到所述数据核验结果后,将所述缓存分区的工作状态修改为空闲状态。
针对更新核验规则缓存的时候存在核验规则缓存正在被读被使用的场景进行,从而造成核验结果不正确的情况,使用了java的读写锁来保证当缓存的更新的时候,所有的该缓存的读和写都被锁住,从而保证核验规则校验结果的正确性。
具体地,图4为一个实施例中数据核验方法的示意图。为了提升嵌入在业务系统的多个环节的核验效率,提升核验微服务核验效率的同时,保证使用的安全性,可以在核验微服务中合理设计缓存结构,保证锁的使用安全性等提升核验的安全使用效率。业务系统在调用单笔核验或批量核验之后,可以从缓存数据库中获取业务场景编号与业务核验规则,同时读写锁可以进行写锁的获取与释放,在写锁的锁定的时候,不能进行读锁的获取,即不能进行核验规则的读取,暂停核验规则的校验处理。定时器定时对缓存进行更新,缓存的更新是可以使用spring的schedule定时配置来设置5分钟启动一次,更新的时候使用java的读写锁来保证安全性。
上述数据核验方法中,设置缓存数据库用于存放业务场景编号与业务核验规则,当业务数据增多的时候,每条业务数据都需要做规则校验从而每条核验规则都需要调用一次核验微服务的时候,微服务不必多次查询数据库中的核验规则信息,同时满足当核验规则更新的时候,能够及时的生效,作用于业务数据的校验。可以在大数据量的报送业务的情况下,提升查询的性能,满足业务报送系统的响应需求。
在本公开的一些实施例中,所述业务核验规则的更改过程,包括:
定期获取预置时长内缓存数据库中的业务核验规则,判断是否存在新的业务核验规则,在存在所述新的业务核验规则的情况下,获取所述新的业务核验规则对应的业务场景编号,基于所述业务场景编号对业务核验规则进行修改。
缓存中的检核规则设置可以为5分钟更新一次,在5分钟内,所有调用检核微服务的报送数据优先在检核缓存中查找检核规则进行检核规则的检核,缓存的更新是使用spring的schedule定时配置来设置5分钟启动一次,更新的时候使用java的读写锁来保证安全性。可以判断是否存在新的业务核验规则,在存在新的业务核验规则的情况下,获取新的业务核验规则对应的业务场景编号,基于业务场景编号对业务核验规则进行修改。
在本公开的一些实施例中,图3为一个实施例中数据核验方法的流程示意图,所述获取所述新的业务核验规则对应的业务场景编号之后,所述方法还包括:
S302:将所述业务场景编号所在的缓存分区的工作状态更改为写入状态,在所述业务核验规则进行修改后,将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
缓存的安全读写的操作是采用java的读写锁来控制的,该读写锁除了保证写操作对读操作的可见性以及并发性的提升之外,读写锁能简化读写交互场景的编程方式。当检核微服务被调用的时候,进行读锁的锁定,同时在java的try{}代码块中进行数据的业务检核逻辑的校验,在finally{}代码块中进行读锁的释放。
在本公开的一些实施例中,所述定期获取预置时长内缓存数据库中的业务核验规则包括:
获取各所述业务核验规则的产生时间,基于所述预设时长,得到所述业务核验规则的结束时间;
基于所述结束时间,获取预缓存数据库中的业务核验规则。
不同的业务核验规则的产生时间、更新时间不同,可以基于业务核验规则的产生时间、预设时长,得到业务核验规则的结束时间,基于结束时间,获取预缓存数据库中的业务核验规则。
在本公开的一些实施例中,所述将所述业务场景编号所在的缓存分区的工作状态更改为写入状态之后,所述方法还包括:
将所述缓存分区中存储的原业务核验规则删除,将新的业务核验规则写入缓存分区;
在所述新的业务核验规则写入成功后,结束本次数据写入,并将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
数据写入过程中,依次顺序访问各缓存分区以监测是否存在写锁定或空闲状态的缓存分区,即写入线程在寻找写锁定或空闲状态的缓存分区时,任意设置一缓存分区作为起点,然后按照顺序循环依次访问,具体的,各缓存分区构建和初始化完成后一般即为空闲状态,由于同时只存在一组写锁定状态的缓存分区,在进行数据写入时,写入线程按照从起始点开始的顺序依次访问各缓存分区,首先起始点的空闲状态缓存分别被置为写锁定状态以进行数据写入,当起始点的缓存分区写满后,起始点的下一缓存分区被置为写锁定状态,写入线程直接转入下一缓存分区继续数据的写入,直至该缓存分区写满,依次循环实现数据的写入。
应该理解的是,虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本公开实施例还提供了一种用于实现上述所涉及的针对数据核验方法的数据核验装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的数据核验装置实施例中的具体限定可以参见上文中对于数据核验方法的限定,在此不再赘述。
所述装置可以包括使用了本说明书实施例所述方法的系统(包括分布式系统)、软件(应用)、模块、组件、服务器、客户端等并结合必要的实施硬件的装置。基于同一创新构思,本公开实施例提供的一个或多个实施例中的装置如下面的实施例所述。由于装置解决问题的实现方案与方法相似,因此本说明书实施例具体的装置的实施可以参见前述方法的实施,重复之处不再赘述。以下所使用的,术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
在一个实施例中,如图5所示,提供了一种数据核验装置500,所述装置可以为前述服务器,或者集成于所述服务器的模块、组件、器件、单元等。该装置500可以包括:
响应模块502,用于响应于数据核验请求,基于所述数据核验请求从缓存数据库中获取业务场景编号与业务核验规则,其中,所述缓存数据库包括采用下述方式得到:各业务场景包括业务场景编号,基于不同的业务场景制定对应的业务核验规则,并将所述业务场景编号、所述业务核验规则以键值对的形式存储至缓存数据库;
判断模块504,用于在获取所述业务核验规则的情况下,判断所述业务核验规则对应的缓存分区的工作状态,所述缓存分区的工作状态至少包括写入状态、锁定状态、空闲状态;
修改模块506,用于在所述缓存分区的工作状态为空闲状态的情况下,基于所述业务核验规则对数据进行核验的同时,将所述缓存分区的工作状态修改为为锁定状态;
结束模块508,用于在得到所述数据核验结果后,将所述缓存分区的工作状态修改为为空闲状态。
在其中一个实施例中,所述业务核验规则的更改过程,包括:
定期获取预置时长内缓存数据库中的业务核验规则,判断是否存在新的业务核验规则,在存在所述新的业务核验规则的情况下,获取所述新的业务核验规则对应的业务场景编号,基于所述业务场景编号对业务核验规则进行修改。
在其中一个实施例中,图6为一个实施例中数据核验装置的结构框图,所述获取所述新的业务核验规则对应的业务场景编号之后,所述装置还包括:
变更模块602,用于将所述业务场景编号所在的缓存分区的工作状态更改为写入状态,在所述业务核验规则进行修改后,将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
在其中一个实施例中,所述定期获取预置时长内缓存数据库中的业务核验规则包括:
获取各所述业务核验规则的产生时间,基于所述预设时长,得到所述业务核验规则的结束时间;
基于所述结束时间,获取预缓存数据库中的业务核验规则。
在其中一个实施例中,所述将所述业务场景编号所在的缓存分区的工作状态更改为写入状态之后,所述装置还包括:
将所述缓存分区中存储的原业务核验规则删除,将新的业务核验规则写入缓存分区;
在所述新的业务核验规则写入成功后,结束本次数据写入,并将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
上述针对数据核验装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储业务核验规则。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种数据核验方法。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图8所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现数据核验方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图7、图8中示出的结构,仅仅是与本公开方案相关的部分结构的框图,并不构成对本公开方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现本公开任一实施例所述的方法。
在一个实施例中,提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现本公开任一实施例所述的方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本公开所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本公开所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本公开所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本公开的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本公开专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本公开构思的前提下,还可以做出若干变形和改进,这些都属于本公开的保护范围。因此,本公开的保护范围应以所附权利要求为准。
Claims (13)
1.一种数据核验方法,其特征在于,所述方法包括:
响应于数据核验请求,基于所述数据核验请求从缓存数据库中获取业务场景编号与业务核验规则,其中,所述缓存数据库包括采用下述方式得到:各业务场景包括业务场景编号,基于不同的业务场景制定对应的业务核验规则,并将所述业务场景编号、所述业务核验规则以键值对的形式存储至缓存数据库;
在获取所述业务核验规则的情况下,判断所述业务核验规则对应的缓存分区的工作状态,所述缓存分区的工作状态至少包括写入状态、锁定状态、空闲状态;
在所述缓存分区的工作状态为空闲状态的情况下,基于所述业务核验规则对数据进行核验的同时,将所述缓存分区的工作状态修改为锁定状态;
在得到所述数据核验结果后,将所述缓存分区的工作状态修改为空闲状态。
2.根据权利要求1所述的方法,其特征在于,所述业务核验规则的更改过程,包括:
定期获取预置时长内缓存数据库中的业务核验规则,判断是否存在新的业务核验规则,在存在所述新的业务核验规则的情况下,获取所述新的业务核验规则对应的业务场景编号,基于所述业务场景编号对业务核验规则进行修改。
3.根据权利要求2所述的方法,其特征在于,所述获取所述新的业务核验规则对应的业务场景编号之后,所述方法还包括:
将所述业务场景编号所在的缓存分区的工作状态更改为写入状态,在所述业务核验规则进行修改后,将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
4.根据权利要求2所述的方法,其特征在于,所述定期获取预置时长内缓存数据库中的业务核验规则包括:
获取各所述业务核验规则的产生时间,基于预设时长,得到所述业务核验规则的结束时间;
基于所述结束时间,获取预缓存数据库中的业务核验规则。
5.根据权利要求3所述的方法,其特征在于,所述将所述业务场景编号所在的缓存分区的工作状态更改为写入状态之后,所述方法还包括:
将所述缓存分区中存储的原业务核验规则删除,将新的业务核验规则写入缓存分区;
在所述新的业务核验规则写入成功后,结束本次数据写入,并将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
6.一种数据核验装置,其特征在于,所述装置包括:
响应模块,用于响应于数据核验请求,基于所述数据核验请求从缓存数据库中获取业务场景编号与业务核验规则,其中,所述缓存数据库包括采用下述方式得到:各业务场景包括业务场景编号,基于不同的业务场景制定对应的业务核验规则,并将所述业务场景编号、所述业务核验规则以键值对的形式存储至缓存数据库;
判断模块,用于在获取所述业务核验规则的情况下,判断所述业务核验规则对应的缓存分区的工作状态,所述缓存分区的工作状态至少包括写入状态、锁定状态、空闲状态;
修改模块,用于在所述缓存分区的工作状态为空闲状态的情况下,基于所述业务核验规则对数据进行核验的同时,将所述缓存分区的工作状态修改为锁定状态;
结束模块,用于在得到所述数据核验结果后,将所述缓存分区的工作状态修改为空闲状态。
7.根据权利要求6所述的装置,其特征在于,所述业务核验规则的更改过程,包括:
定期获取预置时长内缓存数据库中的业务核验规则,判断是否存在新的业务核验规则,在存在所述新的业务核验规则的情况下,获取所述新的业务核验规则对应的业务场景编号,基于所述业务场景编号对业务核验规则进行修改。
8.根据权利要求7所述的装置,其特征在于,所述获取所述新的业务核验规则对应的业务场景编号之后,所述装置还包括:
变更模块,用于将所述业务场景编号所在的缓存分区的工作状态更改为写入状态,在所述业务核验规则进行修改后,将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
9.根据权利要求7所述的装置,其特征在于,所述定期获取预置时长内缓存数据库中的业务核验规则包括:
获取各所述业务核验规则的产生时间,基于预设时长,得到所述业务核验规则的结束时间;
基于所述结束时间,获取预缓存数据库中的业务核验规则。
10.根据权利要求8所述的装置,其特征在于,所述将所述业务场景编号所在的缓存分区的工作状态更改为写入状态之后,所述装置还包括:
将所述缓存分区中存储的原业务核验规则删除,将新的业务核验规则写入缓存分区;
在所述新的业务核验规则写入成功后,结束本次数据写入,并将所述业务场景编号所在的缓存分区的工作状态更改为空闲状态。
11.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至5中任一项所述的方法的步骤。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的方法的步骤。
13.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至5中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410372143.9A CN118069700A (zh) | 2024-03-29 | 2024-03-29 | 数据核验方法、装置、计算机设备、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410372143.9A CN118069700A (zh) | 2024-03-29 | 2024-03-29 | 数据核验方法、装置、计算机设备、存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118069700A true CN118069700A (zh) | 2024-05-24 |
Family
ID=91099004
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410372143.9A Pending CN118069700A (zh) | 2024-03-29 | 2024-03-29 | 数据核验方法、装置、计算机设备、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118069700A (zh) |
-
2024
- 2024-03-29 CN CN202410372143.9A patent/CN118069700A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9778991B2 (en) | Exporting and importing database tables in a multi-user database environment | |
CN106776795B (zh) | 基于Hbase数据库的数据写入方法及装置 | |
CN109614270A (zh) | 基于Hbase的数据读写方法、装置、设备及存储介质 | |
CN115686881A (zh) | 数据处理方法、装置和计算机设备 | |
CN116226202A (zh) | 多维数据库查询方法、装置、计算机设备和存储介质 | |
US10127270B1 (en) | Transaction processing using a key-value store | |
CN116708245A (zh) | 一种接口控制方法、装置、计算机设备 | |
CN118069700A (zh) | 数据核验方法、装置、计算机设备、存储介质 | |
CN114756293A (zh) | 业务处理方法、装置、计算机设备和存储介质 | |
CN117112206B (zh) | 交易资源隔离方法、装置、计算机设备和存储介质 | |
CN116541137A (zh) | 事务处理方法、装置、计算机设备、存储介质和程序产品 | |
CN117435185A (zh) | 代码生成方法、装置、计算机设备和存储介质 | |
CN116049129A (zh) | 分布式文件写入方法、装置、计算机设备、系统 | |
CN117439769A (zh) | 页面访问方法、装置、计算机设备和存储介质 | |
CN117667421A (zh) | 分布式锁的实现方法、装置、计算机设备和存储介质 | |
CN117311930A (zh) | 任务调度方法、装置、设备、存储介质和程序产品 | |
CN118152079A (zh) | 任务编排调度方法、装置、计算机设备、存储介质和产品 | |
CN118276977A (zh) | 应用程序的程序功能启用方法、装置和计算机设备 | |
CN116894044A (zh) | 数据管理方法、装置、计算机设备和存储介质 | |
CN116821143A (zh) | 一种数据更新方法及装置 | |
CN117350805A (zh) | 一种订单管理方法及装置 | |
CN118555180A (zh) | 服务接入方法、装置、电子设备和计算机可读存储介质 | |
CN114915573A (zh) | 测试方法、装置、设备、存储介质和程序产品 | |
CN114647630A (zh) | 文件同步、信息生成方法、装置、计算机设备和存储介质 | |
CN115408405A (zh) | 表单处理方法、装置、计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |