CN113986943A - 一种基于场景数据戳的数据一致性验证方法、装置及介质 - Google Patents

一种基于场景数据戳的数据一致性验证方法、装置及介质 Download PDF

Info

Publication number
CN113986943A
CN113986943A CN202111616655.8A CN202111616655A CN113986943A CN 113986943 A CN113986943 A CN 113986943A CN 202111616655 A CN202111616655 A CN 202111616655A CN 113986943 A CN113986943 A CN 113986943A
Authority
CN
China
Prior art keywords
data
scene
stamp
configuration
scenario
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111616655.8A
Other languages
English (en)
Other versions
CN113986943B (zh
Inventor
李艳峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CHANJET INFORMATION TECHNOLOGY CO LTD
Original Assignee
CHANJET INFORMATION TECHNOLOGY CO LTD
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CHANJET INFORMATION TECHNOLOGY CO LTD filed Critical CHANJET INFORMATION TECHNOLOGY CO LTD
Priority to CN202111616655.8A priority Critical patent/CN113986943B/zh
Publication of CN113986943A publication Critical patent/CN113986943A/zh
Application granted granted Critical
Publication of CN113986943B publication Critical patent/CN113986943B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2308Concurrency control
    • G06F16/2315Optimistic concurrency control
    • G06F16/2322Optimistic concurrency control using timestamps
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2365Ensuring data consistency and integrity

Abstract

本发明提出了一种基于场景数据戳的数据一致性验证方法、装置及介质,该方法包括:用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;将所述操作数据及生成的第一场景数据戳发送至所述用户;将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器基于原始操作数据生成第二场景数据戳,并判断所述第一、二场景数据戳是否一致,如果是,则验证通过。本发明基于场景生成场景数据戳,用于数据一致性的验证,提高了数据验证效率。

Description

一种基于场景数据戳的数据一致性验证方法、装置及介质
技术领域
本发明涉及人工智能技术领域,具体涉及一种基于场景数据戳的数据一致性验证方法、装置及介质。
背景技术
现有技术中,随着软件系统多用户并发的场景出现,为了达成多用户操作相同或者相关数据一致性的目标,出现了各种技术手段来减少或者避免问题不一致的产生。
比如,现有技术中的一种方式为:互斥式的操作悲观锁,达到操作时锁定状态的产生,其从操作出发,未考虑数据内容的相关性,锁定范围大,不易扩展。
比如,现有技术中的另一种方式为:时间戳、版本号式的乐观锁判断,实现也较简单,在现实中使用传统一个实体一个时间戳或者版本号时,数据的任何改变都会引发时间戳、版本号的改变。从而产生大量的一致性误判。
比如,使用时间戳进行数据一致性验证时,是利用了数据库的机制,任何数据列的改变都会引发时间戳的改变,由于时间戳发生改变,导致执行上述判断时结果为否,退出流程,导致验证失败。这种方式在一定程度上能够解决数据一致性验证的需要。但是,随着业务的不断复杂和升级,数据之间的关联性不断加强,数据被修改的几率越来越大,用户在做业务时,被这种数据一致性验证打断的概率也越来越大。影响了数据处理的效率。
且在现有技术中,无法基于应用场景进行数据的一致性验证,无法在不同的场景中同时对数据进行操作并基于场景进行一致验证,导致数据库更新效率较低。
发明内容
本发明针对上述现有技术中一个或多个技术缺陷,提出了如下技术方案。
一种基于场景数据戳的数据一致性验证方法,该方法包括:
请求步骤,用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;
生成步骤,从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;
发送步骤,将所述操作数据及生成的第一场景数据戳发送至所述用户;
验证步骤,将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果是,则验证通过。
更进一步地,所述场景数据戳的内容至少包括:使用场景ID和数据一致性戳。
更进一步地,所述用户将操作数据的N个使用场景ID发送至所述数据戳生成器,所述数据戳生成器基于N个使用场景ID获取对应的N个场景配置方案,所述数据戳生成器对所述N个场景配置方案进行解析得到对应的N个场景配置数据,所述数据戳生成器基于所述N个场景配置数据分别对所述操作数据生成N个不同的第一场景数据戳,其中,N≥2。
更进一步地,所述N个场景配置数据分别用于确定生成N个不同的第一场景数据戳的所述操作数据中的字段,将每一个场景配置数据确定的所述操作数据中的字段中的数据进行哈希计算得到每一个场景数据戳中的数据一致性戳。
更进一步地,将所述N个不同的第一场景数据戳和操作数据发送至所述用户,所述用户基于当前的M个使用场景对所述操作数据进行操作得到M个处理完毕后的操作数据,然后将所述M个处理完毕后的操作数据及对应的M个第一场景数据戳发送至数据戳验证器,所述数据戳验证器对M个第一场景数据戳进行解析得到M个使用场景ID,所述数据戳验证器基于M个使用场景ID获取对应的M个场景配置方案,并对所述M个场景配置方案进行解析得到对应的M个场景配置数据,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据后基于所述M个场景配置数据分别生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过。
更进一步地,在对应的使用场景下验证通过后,数据戳验证器的调用方将对应使用场景的处理完毕后的操作数据进行保存。
本发明还提出了一种基于场景数据戳的数据一致性验证装置,该装置包括:
请求单元,用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;
生成单元,从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;
发送单元,将所述操作数据及生成的第一场景数据戳发送至所述用户;
验证单元,将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果是,则验证通过。
更进一步地,所述场景数据戳的内容至少包括:使用场景ID和数据一致性戳。
更进一步地,所述用户将操作数据的N个使用场景ID发送至所述数据戳生成器,所述数据戳生成器基于N个使用场景ID获取对应的N个场景配置方案,所述数据戳生成器对所述N个场景配置方案进行解析得到对应的N个场景配置数据,所述数据戳生成器基于所述N个场景配置数据分别对所述操作数据生成N个不同的第一场景数据戳,其中,N≥2。
更进一步地,所述N个场景配置数据分别用于确定生成N个不同的第一场景数据戳的所述操作数据中的字段,将每一个场景配置数据确定的所述操作数据中的字段中的数据进行哈希计算得到每一个场景数据戳中的数据一致性戳。
更进一步地,将所述N个不同的第一场景数据戳和操作数据发送至所述用户,所述用户基于当前的M个使用场景对所述操作数据进行操作得到M个处理完毕后的操作数据,然后将所述M个处理完毕后的操作数据及对应的M个第一场景数据戳发送至数据戳验证器,所述数据戳验证器对M个第一场景数据戳进行解析得到M个使用场景ID,所述数据戳验证器基于M个使用场景ID获取对应的M个场景配置方案,并对所述M个场景配置方案进行解析得到对应的M个场景配置数据,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据后基于所述M个场景配置数据分别生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过。
更进一步地,在对应的使用场景下验证通过后,数据戳验证器的调用方将对应使用场景的处理完毕后的操作数据进行保存。
本发明还提出了一种计算机可读存储介质,所述存储介质上存储有计算机程序代码,当所述计算机程序代码被计算机执行时执行上述之任一的方法。
本发明的技术效果在于:本发明的一种基于场景数据戳的数据一致性验证方法、装置及存储介质,该方法包括:请求步骤S101,用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;生成步骤S102,从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;发送步骤S103,将所述操作数据及生成的第一场景数据戳发送至所述用户;验证步骤S104,将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果是,则验证通过。本发明中,通过获取的场景配置方案对所述操作数据生成第一场景数据戳,在用户处理完毕操作数据后将其和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器基于原始操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果一致,则验证通过,即,本发明中提出了基于场景生成场景数据戳,用于数据一致性的验证,从而在非场景方案中的实体属性字段即使发生改变也会被忽略,大大减少了数据一致性验证的数据处理量,同时又不需要将该场景数据戳存储持久化,避免了版本号需要持久化占用存储空间和其它维护性问题的产生,解决了现有技术中的对时间戳、版本号式的乐观锁判断复杂、效率低的问题,达到了与业务无关的数据被修改后,不影响数据一致性验证的目的;本发明中,在一致性校验中不考虑业务无关的字段的数据一致性,从而提高了数据一致性校验的效率;本发明中,支持操作数在不同的多个场景中进行处理,并采用对应不同场景的场景数据戳分别进行数据的校验,继续刚才的例子,可以两个用户可以对员工数据进行同时处理,提高了数据处理的效率;本发明中,用户可以同时在两个及以上的场景中对数据进行操作,数据操作完毕后,验证器基于所述M个场景配置数据分别对所述M个处理完毕后的操作数据生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过,提高了数据验证的效率,解决了现有技术中无法对数据同时进行多个场景操作的缺陷,本发明中,多个场景同时操作时,数据验证通过后,服务器中的数据基于操作场景更新数据对应的字段,更新完毕后,由于不需要保存第一、二数据戳,节约了存储资源。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显。
图1是根据本发明的实施例的一种基于场景数据戳的数据一致性验证方法的流程图。
图2是根据本发明的实施例的一种基于场景数据戳的数据一致性验证装置的结构图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1示出了本发明的一种基于场景数据戳的数据一致性验证方法,该方法包括:
请求步骤S101,用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;
生成步骤S102,从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;
发送步骤S103,将所述操作数据及生成的第一场景数据戳发送至所述用户;
验证步骤S104,将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果是,则验证通过。在验证通过时,所述数据戳验证器的调用方将所述用户处理完毕后的操作数据提交持久化操作。
本发明中,通过获取的场景配置方案对所述操作数据生成第一场景数据戳,在用户处理完毕操作数据后将其和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器基于原始的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果一致,则验证通过,即,本发明中提出了基于场景生成场景数据戳,用于数据一致性的验证,从而在非场景方案中的实体属性字段即使发生改变也会被忽略,大大减少了数据一致性验证的数据处理量,同时又不需要将该场景数据戳存储持久化,避免了版本号需要持久化占用存储空间和其它维护性问题的产生,解决了现有技术中的对时间戳、版本号式的乐观锁判断复杂、效率低的问题,达到了与业务无关的数据被修改后,不影响数据一致性验证的目的,即在客户在处理完业务数据以后,第二场景数据戳是在提交数据持久化时从数据源中的获取的原始操作数据生成的,也就是说,第一场景数据戳和第二场景数据戳是基于同一个数据源生成的,只是生成的时间不相同,从而第一、二场景数据戳用于判断在客户从获取数据至对数据进行操作完毕这段时间内,来源数据在这个时间段内是否被修改,如果修改了,处理完毕的操作的数据是不允许提交的,这是本发明的一个重要发明点。
在一个实施例中,所述场景数据戳的内容至少包括:使用场景ID和数据一致性戳,比如使用场景为计算工资场景,ID为GZ,另一个使用场景为工龄调整,ID为GL,操作数标识可以是表示员工基本数据的标识YG,通过标识YG可以获取员工的基本数据,所述基本数据为一个数据表,包括多个字段,如姓名、性别、身份证号、基本工资、绩效工资、奖金、个人所得税、养老保险、公积金等等,本发明的另一个场景可以是数据源是一个上游的来源数据,基于来源数据来生成下游的数据,在下游数据保存时,也需要验证来源数据进行数据一致性验证,判断场景方案中的数据是否发生了改变,如果发生了改变,下游数据是不允许持久化的。当然不仅限于此类场景,只要涉及到对数据操作修改的场景都在本发明的保护之内。
比如在场景为计算工资时,获取ID为GZ的场景配置方案,在此方案下,字段性别、工龄等可以是非场景字段,因为这些字段与员工的工资不是很相关,可以在一致性校验中不考虑这些字段的一致性,比如,仅需要考虑员工姓名及身份证号的一致性即可,从而提高了数据一致性校验的效率,这是本发明的重要发明点之另一。
在一个实施例中,所述用户将操作数据的N个使用场景ID发送至所述数据戳生成器,所述数据戳生成器基于N个使用场景ID获取对应的N个场景配置方案,所述数据戳生成器对所述N个场景配置方案进行解析得到对应的N个场景配置数据,所述数据戳生成器基于所述N个场景配置数据分别对所述操作数据生成N个不同的第一场景数据戳,其中,N≥2,配置数据可以指定哪些字段参与一致性校验的配置,比如指定姓名、身份证号参与一致性计算,其他字段不参与。
本发明中,支持操作数在不同的多个场景中进行处理,并采用对应不同场景的场景数据戳分别进行数据的校验,继续刚才的例子,可以两个用户可以对员工数据进行同时处理,一个用户计算工资,使用的场景ID为GZ,另一个用户计算员工的工龄,使用的场景ID为GL,比如在GZ的场景下,生成场景数据戳时可以不考虑性别、工龄等非场景字段;比如在GL的场景下,生成场景数据戳时可以不考虑基本工资、绩效工资、奖金、个人所得税、养老保险、公积金等非场景字段。
在一个实施例中,所述N个场景配置数据分别用于确定生成N个不同的第一场景数据戳的所述操作数据中的字段,将每一个场景配置数据确定的所述操作数据中的字段中的数据进行哈希计算得到每一个场景数据戳中的数据一致性戳。比如在工资字段中,仅将姓名、身份证号字段中的数据进行哈希计算得到数据一致性戳,而其他字段不参与哈希计算,降低了一致性验证的数据计算量,且不用保存时间戳及数据版本,提高了数据共享操作的效率,这是本发明的一个重要发明点。
在一个实施例中,将所述N个不同的第一场景数据戳和操作数据发送至所述用户,所述用户基于当前的M个使用场景对所述操作数据进行操作得到M个处理完毕后的操作数据,然后将所述M个处理完毕后的操作数据及对应的M个第一场景数据戳发送至数据戳验证器,所述数据戳验证器对M个第一场景数据戳进行解析得到M个使用场景ID,所述数据戳验证器基于M个使用场景ID获取对应的M个场景配置方案,并对所述M个场景配置方案进行解析得到对应的M个场景配置数据,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据后基于所述M个场景配置数据分别生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过。
本发明中,用户可以同时在两个及以上的场景中对数据进行操作,比如,一个用户在GZ场景中对数据进行操作,另一个用户同时在GL场景中进行数据操作,数据操作完毕后,验证器基于再从数据源中获取操作数并基于所述M个场景配置数据分别生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过,提高了数据验证的效率,解决了现有技术中无法对数据同时进行多个场景操作的缺陷,这是本发明的另一个重要发明点。
在一个实施例,在对应的使用场景下验证通过后,数据戳验证器的调用方将对应使用场景的处理完毕后的操作数据进行保存,一个优选的方式,多个场景操作时,数据验证通过后,服务器中的数据基于操作场景更新数据对应的字段,比如,在GZ场景下操作后的数据,更新时仅更新基本工资、绩效工资、奖金、个人所得税、养老保险、公积金等工资相关的字段,在GL场景下操作后的数据,更新时仅更新工龄的字段,提高了数据更新的效率,更新完毕后,不保存第一、二数据戳,节约了存储资源,这是本发明的另一个重要发明点。
图2示出了本发明的一种基于场景数据戳的数据一致性验证装置,该装置包括:
请求单元201,用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;
生成单元202,从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;
发送单元203,将所述操作数据及生成的第一场景数据戳发送至所述用户;
验证单元204,将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果是,则验证通过。在验证通过时,所述数据戳验证器的调用方将所述用户处理完毕后的操作数据提交持久化操作。
本发明中,通过获取的场景配置方案对所述操作数据生成第一场景数据戳,在用户处理完毕操作数据后将其和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器基于原始的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果一致,则验证通过,即,本发明中提出了基于场景生成场景数据戳,用于数据一致性的验证,从而在非场景方案中的实体属性字段即使发生改变也会被忽略,大大减少了数据一致性验证的数据处理量,同时又不需要将该场景数据戳存储持久化,避免了版本号需要持久化占用存储空间和其它维护性问题的产生,解决了现有技术中的对时间戳、版本号式的乐观锁判断复杂、效率低的问题,达到了与业务无关的数据被修改后,不影响数据一致性验证的目的,即在客户在处理完业务数据以后,第二场景数据戳是在提交数据持久化时从数据源中的获取的原始操作数据生成的,也就是说,第一场景数据戳和第二场景数据戳是基于同一个数据源生成的,只是生成的时间不相同,从而第一、二场景数据戳用于判断在客户从获取数据至对数据进行操作完毕这段时间内,来源数据在这个时间段内是否被修改,如果修改了,处理完毕的操作的数据是不允许提交的,这是本发明的一个重要发明点。
在一个实施例中,所述场景数据戳的内容至少包括:使用场景ID和数据一致性戳,比如使用场景为计算工资场景,ID为GZ,另一个使用场景为工龄调整,ID为GL,操作数标识可以是表示员工基本数据的标识YG,通过标识YG可以获取员工的基本数据,所述基本数据为一个数据表,包括多个字段,如姓名、性别、身份证号、基本工资、绩效工资、奖金、个人所得税、养老保险、公积金等等,本发明的另一个场景可以是数据源是一个上游的来源数据,基于来源数据来生成下游的数据,在下游数据保存时,也需要验证来源数据进行数据一致性验证,判断场景方案中的数据是否发生了改变,如果发生了改变,下游数据是不允许持久化的。当然不仅限于此类场景,只要涉及到对数据操作修改的场景都在本发明的保护之内。
比如在场景为计算工资时,获取ID为GZ的场景配置方案,在此方案下,字段性别、工龄等可以是非场景字段,因为这些字段与员工的工资不是很相关,可以在一致性校验中不考虑这些字段的一致性,比如,仅需要考虑员工姓名及身份证号的一致性即可,从而提高了数据一致性校验的效率,这是本发明的重要发明点之另一。
在一个实施例中,所述用户将操作数据的N个使用场景ID发送至所述数据戳生成器,所述数据戳生成器基于N个使用场景ID获取对应的N个场景配置方案,所述数据戳生成器对所述N个场景配置方案进行解析得到对应的N个场景配置数据,所述数据戳生成器基于所述N个场景配置数据分别对所述操作数据生成N个不同的第一场景数据戳,其中,N≥2,配置数据可以指定哪些字段参与一致性校验的配置,比如指定姓名、身份证号参与一致性计算,其他字段不参与。
本发明中,支持操作数在不同的多个场景中进行处理,并采用对应不同场景的场景数据戳分别进行数据的校验,继续刚才的例子,可以两个用户可以对员工数据进行同时处理,一个用户计算工资,使用的场景ID为GZ,另一个用户计算员工的工龄,使用的场景ID为GL,比如在GZ的场景下,生成场景数据戳时可以不考虑性别、工龄等非场景字段;比如在GL的场景下,生成场景数据戳时可以不考虑基本工资、绩效工资、奖金、个人所得税、养老保险、公积金等非场景字段。
在一个实施例中,所述N个场景配置数据分别用于确定生成N个不同的第一场景数据戳的所述操作数据中的字段,将每一个场景配置数据确定的所述操作数据中的字段中的数据进行哈希计算得到每一个场景数据戳中的数据一致性戳。比如在工资字段中,仅将姓名、身份证号字段中的数据进行哈希计算得到数据一致性戳,而其他字段不参与哈希计算,降低了一致性验证的数据计算量,且不用保存时间戳及数据版本,提高了数据共享操作的效率,这是本发明的一个重要发明点。
在一个实施例中,将所述N个不同的第一场景数据戳和操作数据发送至所述用户,所述用户基于当前的M个使用场景对所述操作数据进行操作得到M个处理完毕后的操作数据,然后将所述M个处理完毕后的操作数据及对应的M个第一场景数据戳发送至数据戳验证器,所述数据戳验证器对M个第一场景数据戳进行解析得到M个使用场景ID,所述数据戳验证器基于M个使用场景ID获取对应的M个场景配置方案,并对所述M个场景配置方案进行解析得到对应的M个场景配置数据,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据后基于所述M个场景配置数据分别生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过。
本发明中,用户可以同时在两个及以上的场景中对数据进行操作,比如,一个用户在GZ场景中对数据进行操作,另一个用户同时在GL场景中进行数据操作,数据操作完毕后,验证器基于再从数据源中获取操作数并基于所述M个场景配置数据分别生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过,提高了数据验证的效率,解决了现有技术中无法对数据同时进行多个场景操作的缺陷,这是本发明的另一个重要发明点。
在一个实施例,在对应的使用场景下验证通过后,数据戳验证器的调用方将对应使用场景的处理完毕后的操作数据进行保存,一个优选的方式,多个场景操作时,数据验证通过后,服务器中的数据基于操作场景更新数据对应的字段,比如,在GZ场景下操作后的数据,更新时仅更新基本工资、绩效工资、奖金、个人所得税、养老保险、公积金等工资相关的字段,在GL场景下操作后的数据,更新时仅更新工龄的字段,提高了数据更新的效率,更新完毕后,删除第一、二数据戳,节约了存储资源,这是本发明的另一个重要发明点。
本发明一个实施例中提出了一种基于场景数据戳的数据一致性验证设备,所述设备包括处理器和存储器,所述处理器与所述处理器通过总线连接,所述存储器上存储有计算机程序,所述处理器执行所述存储器上的计算机程序时实现上述的方法,该设备可以是台式计算机、服务器、笔记本、智能终端等等。
本发明一个实施例中提出了一种计算机存储介质,所述计算机存储介质上存储有计算机程序,当所述计算机存储介质上的计算机程序被处理器执行时实现上述的方法,该计算机存储介质可以是硬盘、DVD、CD、闪存等等存储器。
本发明的为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质 中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的装置。
最后所应说明的是:以上实施例仅以说明而非限制本发明的技术方案,尽管参照上述实施例对本发明进行了详细说明,本领域的普通技术人员应当理解:依然可以对本发明进行修改或者等同替换,而不脱离本发明的精神和范围的任何修改或局部替换,其均应涵盖在本发明的权利要求范围当中。

Claims (10)

1.一种基于场景数据戳的数据一致性验证方法,其特征在于,该方法包括:
请求步骤,用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;
生成步骤,从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;
发送步骤,将所述操作数据及生成的第一场景数据戳发送至所述用户;
验证步骤,将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果是,则验证通过。
2.根据权利要求1所述的方法,其特征在于,所述场景数据戳的内容至少包括:使用场景ID和数据一致性戳。
3.根据权利要求2所述的方法,其特征在于,所述用户将操作数据的N个使用场景ID发送至所述数据戳生成器,所述数据戳生成器基于N个使用场景ID获取对应的N个场景配置方案,所述数据戳生成器对所述N个场景配置方案进行解析得到对应的N个场景配置数据,所述数据戳生成器基于所述N个场景配置数据分别对所述操作数据生成N个不同的第一场景数据戳,其中,N≥2。
4.根据权利要求3所述的方法,其特征在于,所述N个场景配置数据分别用于确定生成N个不同的第一场景数据戳的所述操作数据中的字段,将每一个场景配置数据确定的所述操作数据中的字段中的数据进行哈希计算得到每一个场景数据戳中的数据一致性戳。
5.根据权利要求4所述的方法,其特征在于,将所述N个不同的第一场景数据戳和操作数据发送至所述用户,所述用户基于当前的M个使用场景对所述操作数据进行操作得到M个处理完毕后的操作数据,然后将所述M个处理完毕后的操作数据及对应的M个第一场景数据戳发送至数据戳验证器,所述数据戳验证器对M个第一场景数据戳进行解析得到M个使用场景ID,所述数据戳验证器基于M个使用场景ID获取对应的M个场景配置方案,并对所述M个场景配置方案进行解析得到对应的M个场景配置数据,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据,然后基于所述M个场景配置数据分别生成M个不同的第二场景数据戳,分别判断每一个所述第一场景数据戳与对应的所述第二场景数据戳是否一致,如果是,则在对应的使用场景下验证通过。
6.一种基于场景数据戳的数据一致性验证装置,其特征在于,该装置包括:
请求单元,用户发送需要操作的数据标识以及操作数据的使用场景ID至数据戳生成器;
生成单元,从数据源中基于所述数据标识获取对应的操作数据,并基于所述使用场景ID获取场景配置方案,基于所述配置方案对所述操作数据生成第一场景数据戳;
发送单元,将所述操作数据及生成的第一场景数据戳发送至所述用户;
验证单元,将所述用户处理完毕后的操作数据和所述第一场景数据戳发送至数据戳验证器,所述数据戳验证器再从数据源中基于所述数据标识获取对应的操作数据生成第二场景数据戳,并判断所述第一场景数据戳与所述第二场景数据戳是否一致,如果是,则验证通过。
7.根据权利要求6所述的装置,其特征在于,场景数据戳的内容至少包括:使用场景ID和数据一致性戳。
8.根据权利要求7所述的装置,其特征在于,所述用户将操作数据的N个使用场景ID发送至所述数据戳生成器,所述数据戳生成器基于N个使用场景ID获取对应的N个场景配置方案,所述数据戳生成器对所述N个场景配置方案进行解析得到对应的N个场景配置数据,所述数据戳生成器基于所述N个场景配置数据分别对所述操作数据生成N个不同的第一场景数据戳,其中,N≥2。
9.根据权利要求8所述的装置,其特征在于,所述N个场景配置数据分别用于确定生成N个不同的第一场景数据戳的所述操作数据中的字段,将每一个场景配置数据确定的所述操作数据中的字段中的数据进行哈希计算得到每一个场景数据戳中的数据一致性戳。
10.一种计算机存储介质,所述计算机存储介质上存储有计算机程序,其特征在于,当所述计算机存储介质上的计算机程序被处理器执行时实现权利要求1-5任一项所述的方法。
CN202111616655.8A 2021-12-28 2021-12-28 一种基于场景数据戳的数据一致性验证方法、装置及介质 Active CN113986943B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111616655.8A CN113986943B (zh) 2021-12-28 2021-12-28 一种基于场景数据戳的数据一致性验证方法、装置及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111616655.8A CN113986943B (zh) 2021-12-28 2021-12-28 一种基于场景数据戳的数据一致性验证方法、装置及介质

Publications (2)

Publication Number Publication Date
CN113986943A true CN113986943A (zh) 2022-01-28
CN113986943B CN113986943B (zh) 2022-04-22

Family

ID=79734661

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111616655.8A Active CN113986943B (zh) 2021-12-28 2021-12-28 一种基于场景数据戳的数据一致性验证方法、装置及介质

Country Status (1)

Country Link
CN (1) CN113986943B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060075391A1 (en) * 2004-10-05 2006-04-06 Esmonde Laurence G Jr Distributed scenario generation
CN104486337A (zh) * 2014-12-12 2015-04-01 北京国双科技有限公司 数据有效性验证方法及装置
CN106846506A (zh) * 2017-01-25 2017-06-13 腾讯科技(深圳)有限公司 一种基于信息标识码进行信息验证的方法及系统
CN109189669A (zh) * 2018-08-03 2019-01-11 平安科技(深圳)有限公司 业务场景的测试方法、电子装置及可读存储介质
CN110909065A (zh) * 2019-12-06 2020-03-24 光大兴陇信托有限责任公司 一种多数据源智能调用方法
CN111818068A (zh) * 2020-07-14 2020-10-23 绿盟科技集团股份有限公司 微场景案例的编排验证方法、装置、介质及计算机设备
CN112183456A (zh) * 2020-10-19 2021-01-05 北京深睿博联科技有限责任公司 基于样本生成和域适应的多场景运动目标检测方法及装置
CN112905492A (zh) * 2021-04-06 2021-06-04 浙江网商银行股份有限公司 验证方法及装置
CN113485894A (zh) * 2021-07-14 2021-10-08 深信服科技股份有限公司 一种数据采集方法、装置、设备及可读存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060075391A1 (en) * 2004-10-05 2006-04-06 Esmonde Laurence G Jr Distributed scenario generation
CN104486337A (zh) * 2014-12-12 2015-04-01 北京国双科技有限公司 数据有效性验证方法及装置
CN106846506A (zh) * 2017-01-25 2017-06-13 腾讯科技(深圳)有限公司 一种基于信息标识码进行信息验证的方法及系统
CN109189669A (zh) * 2018-08-03 2019-01-11 平安科技(深圳)有限公司 业务场景的测试方法、电子装置及可读存储介质
CN110909065A (zh) * 2019-12-06 2020-03-24 光大兴陇信托有限责任公司 一种多数据源智能调用方法
CN111818068A (zh) * 2020-07-14 2020-10-23 绿盟科技集团股份有限公司 微场景案例的编排验证方法、装置、介质及计算机设备
CN112183456A (zh) * 2020-10-19 2021-01-05 北京深睿博联科技有限责任公司 基于样本生成和域适应的多场景运动目标检测方法及装置
CN112905492A (zh) * 2021-04-06 2021-06-04 浙江网商银行股份有限公司 验证方法及装置
CN113485894A (zh) * 2021-07-14 2021-10-08 深信服科技股份有限公司 一种数据采集方法、装置、设备及可读存储介质

Also Published As

Publication number Publication date
CN113986943B (zh) 2022-04-22

Similar Documents

Publication Publication Date Title
US10275347B2 (en) System, method and computer program product for managing caches
US10346380B2 (en) Test data generation and scale up for database testing using unique common factor sequencing
CN108846753B (zh) 用于处理数据的方法和装置
US9998450B2 (en) Automatically generating certification documents
CN110837505A (zh) 状态数据存储方法、状态数据同步方法、设备和存储介质
WO2021195618A1 (en) System and method for integration and validation
WO2023045617A1 (zh) 一种交易数据处理方法、装置、设备以及介质
CN111046245A (zh) 多源异构数据源融合计算方法、系统、设备和存储介质
CN113986943B (zh) 一种基于场景数据戳的数据一致性验证方法、装置及介质
CN107423041B (zh) 用于实现应用程序编程接口配置和调用的方法和设备
CN112256978B (zh) 一种基于数据模型的数据处理方法、装置、介质
CN111966650B (zh) 一种运维大数据共享数据表的处理方法、装置及存储介质
CN109389271B (zh) 应用性能管理方法及系统
CN114064477A (zh) 推荐策略测试方法、装置、计算机设备及存储介质
CN106470132B (zh) 水平权限测试方法及装置
CN115701591A (zh) 业务流程测试方法、装置、介质及电子设备
CN116107801A (zh) 交易处理方法及相关产品
CN112597036B (zh) 一种通用测试挡板方法及装置
US20180268013A1 (en) Elastic data storage system
CN109933573B (zh) 数据库业务更新方法、装置及系统
CN111563091B (zh) 非往返式的批量更新MongoDB的方法及系统
CN116366353A (zh) 基于x86平台的业务登录方法、装置、介质及平台
CN116910135A (zh) 一种数据流自动富化的方法和装置
CN111598560A (zh) 基于存储服务的数据修改方法、装置和存储服务器
CN114035985A (zh) 一种微服务架构下数据传输方法、装置、服务器及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant