CN113050949A - 基于java的防止父子依赖job执行后数据错乱的方法及系统 - Google Patents
基于java的防止父子依赖job执行后数据错乱的方法及系统 Download PDFInfo
- Publication number
- CN113050949A CN113050949A CN202110316898.3A CN202110316898A CN113050949A CN 113050949 A CN113050949 A CN 113050949A CN 202110316898 A CN202110316898 A CN 202110316898A CN 113050949 A CN113050949 A CN 113050949A
- Authority
- CN
- China
- Prior art keywords
- job
- parent
- child
- execution
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000004806 packaging method and process Methods 0.000 claims abstract description 17
- 230000001419 dependent effect Effects 0.000 claims description 6
- 238000012795 verification Methods 0.000 claims description 6
- 238000012856 packing Methods 0.000 claims description 5
- 238000013524 data verification Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 8
- 238000011144 upstream manufacturing Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 230000007246 mechanism Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000000376 reactant Substances 0.000 description 1
- 230000000246 remedial effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/40—Transformation of program code
- G06F8/41—Compilation
- G06F8/43—Checking; Contextual analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
- G06F8/71—Version control; Configuration management
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Retry When Errors Occur (AREA)
Abstract
本发明提供了一种基于JAVA的防止父子依赖JOB执行后数据错乱的方法及系统，包括：步骤S1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖；步骤S2：将多项数据Check规则通过组ID关联配置成组，并包装成数据校验Job；步骤S3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复执行步骤S3，直至执行结束。
Description
技术领域
本发明涉及区块链技术领域，具体地，涉及一种基于JAVA的防止父子依赖JOB执行后数据错乱的方法及系统，更为具体地，涉及基于JAVA的防止父子依赖JOB执行后数据错乱的解决方案。
背景技术
大数据作为时下最火热的IT行业的词汇，随之而来的数据仓库、数据安全、数据分析、数据挖掘等等围绕大数据的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。随着大数据时代的来临，大数据分析也应运而生。
现有技术中，大量的数据需要录入到标准的表格中，由于延迟、录入失败等原因，将导致原始数据与表格中的目标数据不一致，这是就需要对数据进行检测，保证目标数据与原始数据的一致性。
专利文献CN112199184A(申请号：202011203431.X)公开了一种跨语言任务调度方法、装置、设备及可读存储介质，该方法包括获取具有任务依赖关系的上游任务和下游任务；分配上游任务给上游节点，分配下游任务给下游节点；上游节点与下游节点对应不同编程语言；利用任务依赖关系，确定数据交换规则；在上游节点和下游节点之间，建立远程过程调用对应的通讯连接；利用通讯连接并结合数据交换规则，在上游节点和下游节点之间，进行跨语言的实时数据传输。该专利可满足分布式任务的调度和计算的情况下，便省去了单独存储中间结果数据，减少系统存储IO开销，能够加快任务执行效率。本发明JOB调度部分是仅基于JAVA的父子Job二次开发，语言范围小于该专利的“跨语言”范围。该专利注重在上游节点和下游节点之间，进行跨语言的实时数据传输，本发明着重父子Job间的调度机制的完备性，并未涉及“实时数据传输”，且包含把数据校验规则封装成Job的部分，意在解决“父子依赖JOB执行后数据错乱”的问题，即侧重点不同。
专利文献CN109828979A(申请号：201910100217.2)公开了一种数据一致性检测方法,属于大数据处理技术领域，实现了目标数据与原始数据的一致性检测。包括如下步骤：S1：主机接收原始数据和目标数据；S2：主机设定检测节点；S3：主机根据检测节点，提取原始数据与目标数据中对应的数据，进行数据数量比较,判断数据一致性，若数量一致，则该检测节点对应的原始数据与目标数据一致，若数量不一致，则该检测节点对应的原始数据与目标数据不一致，返回步骤S2。本发明数据校验部分，重在通过二次开发，将数据校验规则封装成Job，并通过父子Job的配置，达到防止父子依赖JOB执行后数据错乱的效果。该专利仅支持根据目标数据和原始数据的数量一致性校验，判断数据的一致性。所以本发明和该专利切入点不同。
发明内容
针对现有技术中的缺陷，本发明的目的是提供一种基于JAVA的防止父子依赖JOB执行后数据错乱的方法及系统。
根据本发明提供的一种基于JAVA的防止父子依赖JOB执行后数据错乱的方法，包括：
步骤S1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖；
步骤S2：将多项数据Check规则通过组ID关联配置成组，并包装成数据校验Job；
步骤S3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复执行步骤S3，直至执行结束。
优选地，所述封装后的Job中间件包括：封装后的Job中间件支持父子Job多层依赖的配置与执行；
所述父子Job多层依赖的配置与执行包括：执行父Job，在可配置的等待时间后，判断父Job执行情况，当父Job执行成功，则执行子Job；当父Job执行失败或执行中时，则不执行子Job。
优选地，所述封装后的Job中间件还包括父子Job在依赖关系的基础上，支持Job重试，以及支持父Job取消，则子Job也取消。
优选地，所述步骤S2中数据校验Job支持通过页面配置数据校验规则和执行顺序以及支持将多项数据校验规则关联到一个Job名，多对一封装成一个Job，依次执行数据校验规则。
优选地，所述步骤S3包括：任何一项数据校验规则执行失败，则对应Job执行失败，并发出告警信息；
所述告警信息包括执行失败的校验规则名、期望值和实际值。
根据本发明提供的一种基于JAVA的防止父子依赖JOB执行后数据错乱的系统，包括：
模块M1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖；
模块M2：将多项数据Check规则通过组ID关联配置成组，并包装成数据校验Job；
模块M3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复触发模块M3执行，直至执行结束。
优选地，所述封装后的Job中间件包括：封装后的Job中间件支持父子Job多层依赖的配置与执行；
所述父子Job多层依赖的配置与执行包括：执行父Job，在可配置的等待时间后，判断父Job执行情况，当父Job执行成功，则执行子Job；当父Job执行失败或执行中时，则不执行子Job。
优选地，所述封装后的Job中间件还包括父子Job在依赖关系的基础上，支持Job重试，以及支持父Job取消，则子Job也取消。
优选地，所述模块M2中数据校验Job支持通过页面配置数据校验规则和执行顺序以及支持将多项数据校验规则关联到一个Job名，多对一封装成一个Job，依次执行数据校验规则。
优选地，所述模块M3包括：任何一项数据校验规则执行失败，则对应Job执行失败，并发出告警信息；
所述告警信息包括执行失败的校验规则名、期望值和实际值。
与现有技术相比，本发明具有如下的有益效果：
1、本发明通过JAVA+React Ant Design框架，对Job中间件的二次开发，解决父子Job依赖问题；
2、本发明通过JAVA将数据校验规则封装为Job，并和业务Job间隔配置为父子Job，从而解决父子依赖Job批量处理数据后，数据易错乱的问题；
3、本发明精准的告警机制，更是能在第一时间帮助技术人员评估后续处理方案，起到双保险作用；
4、本发明将多元化Check规则包装成Job，扩展性会很灵活；
5、本发明确保前一个业务Job执行后的数据校验均无问题，再执行下一个Job，该机制最大程度规避了前一个业务Job处理错误的基础上，后续Job的处理错上加错的情况。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1为防止父子依赖Job执行后数据错乱的执行流程；
图2为基于JAVA的防止父子依赖JOB执行后数据错乱的系统架构图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明，但不以任何形式限制本发明。应当指出的是，对本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变化和改进。这些都属于本发明的保护范围。
实施例1
根据本发明提供的一种基于JAVA的防止父子依赖JOB执行后数据错乱的方法，如图1所示，包括：
步骤S1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖；
步骤S2：将多项数据Check规则通过组ID关联配置成组，并包装成数据校验Job；
步骤S3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复执行步骤S3，直至执行结束。
具体地，所述封装后的Job中间件包括：封装后的Job中间件支持父子Job多层依赖的配置与执行；
所述父子Job多层依赖的配置与执行包括：执行父Job，在可配置的等待时间后，判断父Job执行情况，当父Job执行成功，则执行子Job；当父Job执行失败或执行中时，则不执行子Job。
具体地，所述封装后的Job中间件还包括父子Job在依赖关系的基础上，支持Job重试，以及支持父Job取消，则子Job也取消。
具体地，所述步骤S2中数据校验Job支持通过页面配置数据校验规则和执行顺序以及支持将多项数据校验规则关联到一个Job名，多对一封装成一个Job，依次执行数据校验规则。
具体地，所述步骤S3包括：任何一项数据校验规则执行失败，则对应Job执行失败，并发出告警信息；
所述告警信息包括执行失败的校验规则名、期望值和实际值。
根据本发明提供的一种基于JAVA的防止父子依赖JOB执行后数据错乱的系统，如图2所示，包括：
模块M1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖；
模块M2：将多项数据Check规则通过组ID关联配置成组，并包装成数据校验Job；
模块M3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复触发模块M3执行，直至执行结束。
具体地，所述封装后的Job中间件包括：封装后的Job中间件支持父子Job多层依赖的配置与执行；
所述父子Job多层依赖的配置与执行包括：执行父Job，在可配置的等待时间后，判断父Job执行情况，当父Job执行成功，则执行子Job；当父Job执行失败或执行中时，则不执行子Job。
具体地，所述封装后的Job中间件还包括父子Job在依赖关系的基础上，支持Job重试，以及支持父Job取消，则子Job也取消。
具体地，所述模块M2中数据校验Job支持通过页面配置数据校验规则和执行顺序以及支持将多项数据校验规则关联到一个Job名，多对一封装成一个Job，依次执行数据校验规则。
具体地，所述模块M3包括：任何一项数据校验规则执行失败，则对应Job执行失败，并发出告警信息；
所述告警信息包括执行失败的校验规则名、期望值和实际值。
实施例2
实施例2是实施例1的优选例
本发明通过封装，扩展Job中间件功能，使之支持父子Job依赖；将业务Job对应的一套套数据Check规则包成Job，并支持动态化配置。
用户只需配置数据Check规则，以及业务Job和数据Check Job的依赖关系，触发时间点和参数，即可灵活规避有先后依赖顺序业务要求的Job执行后数据错乱的问题。
本发明提供的一种基于JAVA的防止父子依赖JOB执行后数据错乱的方法，包括：
步骤1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖。
步骤2：将多项数据Check规则，通过组ID关联配置成组，然后包装成一个数据校验Job。
步骤3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复执行步骤S3，直至执行结束。
例如：按业务Job顺序，一个业务Job1执行成功后，执行数据校验Job1，执行成功后，执行业务Job2，执行成功后，执行数据校验Job2，......的顺序置配；数据校验Job1是业务Job1的子Job，同时也是业务Job2的父Job。
步骤4：配置各数据校验规则的告警信息。当步骤3涉及的数据校验Job执行失败，即发出相关告警信息。。
所述步骤1包含如下子步骤：
步骤1.1：通过封装，使Job中间件支持父子Job多层依赖的配置&执行。。
步骤1.2：父Job执行成功后，支持可配置的等待时间后，执行子Job。
步骤1.3：在子Job到了配置的触发时间点，判断父Job执行失败或执行中时，不执行子Job。
步骤1.4：判断如果父Job执行失败，告警提醒。
步骤1.5：父子Job均可在依赖关系的基础上，支持Job重试。
步骤1.6：支持父Job取消，则子Job取消。
步骤2包括：将多元化Check规则包装成Job，扩展性会很灵活。具体包含如下子步骤：
步骤2.1：支持通过页面配置SQL获取数据A和数据B，通过+-*/运算，和>、>＝、<、<＝、＝、！＝等逻辑判断，作为数据校验规则，并支持执行顺序的配置。
步骤2.2：支持将多项数据校验规则，关联到一个Job名，多对一封装成一个Job，依次执行数据校验规则。
步骤2.3：关联到Job中的数据校验规则，前一项执行成功，执行下一项；任何一项数据校验规则执行失败，对应Job执行失败，并告警提醒执行失败的校验规则名、期望值、实际值。
所述步骤3确保前一个业务Job执行后的数据校验均无问题，再执行下一个Job，该机制最大程度规避了前一个业务Job处理错误的基础上，后续Job的处理错上加错的情况。
步骤4，支持精准告警，能帮助技术人员第一时间定位到相关某一项数据校验规则未通过，及时而又准确的作出后续补救措施。
执行流程说明：
配置好数据校验规则和父子Job依赖关系后，在到达业务Job触发时间，相关业务的最上层父Job就会开始并行执行。
以业务A Job链路举例，正常执行流程如下：
业务A Job1是业务A的最上层父Job。执行成功后，会自动触发业务A数据校验Job1执行。
业务A数据校验Job1执行时，会按前期配置的数据校验规则顺序，依次校验相关数据。
业务A数据校验Job1中的数据校验规则均校验通过后，会自动触发业务A Job2，后续执行流程同业务A Job1及业务A数据校验Job1。
失败的执行流程如下：
如果业务A Job1执行失败，则会告警，暂停执行。
在技术人员排查解决问题后，人工触发重新执行业务A Job1。期间，即使到了子Job执行时间，只要父Job执行失败或还在执行中，子Job就会等待不执行。
在执行业务A数据校验Job1时，任何一项数据校验不通过，均会告警校验不通过的数据校验名称、期望值和实际值，便于支持技术人员第一时间迅速定位问题。在技术人员排查解决问题后，人工触发重新执行业务A数据校验Job1。
业务B的Job链路、业务C的Job链路，直到业务M的Job链路，执行流程均同业务A的Job链路执行流程。多项业务的Job链路，只要不相互影响数据处理，即可并行执行，提升处理效率。
本领域技术人员知道，除了以纯计算机可读程序代码方式实现本发明提供的系统、装置及其各个模块以外，完全可以通过将方法步骤进行逻辑编程来使得本发明提供的系统、装置及其各个模块以逻辑门、开关、专用集成电路、可编程逻辑控制器以及嵌入式微控制器等的形式来实现相同程序。所以，本发明提供的系统、装置及其各个模块可以被认为是一种硬件部件，而对其内包括的用于实现各种程序的模块也可以视为硬件部件内的结构；也可以将用于实现各种功能的模块视为既可以是实现方法的软件程序又可以是硬件部件内的结构。
以上对本发明的具体实施例进行了描述。需要理解的是，本发明并不局限于上述特定实施方式，本领域技术人员可以在权利要求的范围内做出各种变化或修改，这并不影响本发明的实质内容。在不冲突的情况下，本申请的实施例和实施例中的特征可以任意相互组合。
Claims (10)
1.一种基于JAVA的防止父子依赖JOB执行后数据错乱的方法，其特征在于，包括：
步骤S1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖；
步骤S2：将多项数据Check规则通过组ID关联配置成组，并包装成数据校验Job；
步骤S3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复执行步骤S3，直至执行结束。
2.根据权利要求1所述的基于JAVA的防止父子依赖JOB执行后数据错乱的方法，其特征在于，所述封装后的Job中间件包括：封装后的Job中间件支持父子Job多层依赖的配置与执行；
所述父子Job多层依赖的配置与执行包括：执行父Job，在可配置的等待时间后，判断父Job执行情况，当父Job执行成功，则执行子Job；当父Job执行失败或执行中时，则不执行子Job。
3.根据权利要求1所述的基于JAVA的防止父子依赖JOB执行后数据错乱的方法，其特征在于，所述封装后的Job中间件还包括父子Job在依赖关系的基础上，支持Job重试，以及支持父Job取消，则子Job也取消。
4.根据权利要求1所述的基于JAVA的防止父子依赖JOB执行后数据错乱的方法，其特征在于，所述步骤S2中数据校验Job支持通过页面配置数据校验规则和执行顺序以及支持将多项数据校验规则关联到一个Job名，多对一封装成一个Job，依次执行数据校验规则。
5.根据权利要求1所述的基于JAVA的防止父子依赖JOB执行后数据错乱的方法，其特征在于，所述步骤S3包括：任何一项数据校验规则执行失败，则对应Job执行失败，并发出告警信息；
所述告警信息包括执行失败的校验规则名、期望值和实际值。
6.一种基于JAVA的防止父子依赖JOB执行后数据错乱的系统，其特征在于，包括：
模块M1：对Job中间件进行封装，使封装后的Job中间件支持父子Job依赖；
模块M2：将多项数据Check规则通过组ID关联配置成组，并包装成数据校验Job；
模块M3：Job中间件按业务Job顺序依次执行业务Job，当当前业务Job执行成功后，则执行相应的数据校验Job，相应的数据校验Job执行成功后，下一个业务Job继承当前数据校验Job，重复触发模块M3执行，直至执行结束。
7.根据权利要求6所述的基于JAVA的防止父子依赖JOB执行后数据错乱的系统，其特征在于，所述封装后的Job中间件包括：封装后的Job中间件支持父子Job多层依赖的配置与执行；
所述父子Job多层依赖的配置与执行包括：执行父Job，在可配置的等待时间后，判断父Job执行情况，当父Job执行成功，则执行子Job；当父Job执行失败或执行中时，则不执行子Job。
8.根据权利要求6所述的基于JAVA的防止父子依赖JOB执行后数据错乱的系统，其特征在于，所述封装后的Job中间件还包括父子Job在依赖关系的基础上，支持Job重试，以及支持父Job取消，则子Job也取消。
9.根据权利要求6所述的基于JAVA的防止父子依赖JOB执行后数据错乱的系统，其特征在于，所述模块M2中数据校验Job支持通过页面配置数据校验规则和执行顺序以及支持将多项数据校验规则关联到一个Job名，多对一封装成一个Job，依次执行数据校验规则。
10.根据权利要求6所述的基于JAVA的防止父子依赖JOB执行后数据错乱的系统，其特征在于，所述模块M3包括：任何一项数据校验规则执行失败，则对应Job执行失败，并发出告警信息；
所述告警信息包括执行失败的校验规则名、期望值和实际值。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110316898.3A CN113050949A (zh) | 2021-03-23 | 2021-03-23 | 基于java的防止父子依赖job执行后数据错乱的方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110316898.3A CN113050949A (zh) | 2021-03-23 | 2021-03-23 | 基于java的防止父子依赖job执行后数据错乱的方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113050949A true CN113050949A (zh) | 2021-06-29 |
Family
ID=76515166
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110316898.3A Pending CN113050949A (zh) | 2021-03-23 | 2021-03-23 | 基于java的防止父子依赖job执行后数据错乱的方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113050949A (zh) |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103246574A (zh) * | 2012-02-10 | 2013-08-14 | 阿里巴巴集团控股有限公司 | 数据准确性的校验方法及装置 |
| CN103873343A (zh) * | 2012-12-11 | 2014-06-18 | 镇江金钛软件有限公司 | 资源管理方法、客户端及系统 |
| CN104239148A (zh) * | 2013-06-06 | 2014-12-24 | 腾讯科技（深圳）有限公司 | 一种分布式任务调度方法及装置 |
| CN104462243A (zh) * | 2014-11-19 | 2015-03-25 | 上海烟草集团有限责任公司 | 一种结合数据校验的etl调度系统及方法 |
| CN104965754A (zh) * | 2015-03-31 | 2015-10-07 | 腾讯科技（深圳）有限公司 | 任务调度方法及任务调度装置 |
| CN108319495A (zh) * | 2017-01-16 | 2018-07-24 | 阿里巴巴集团控股有限公司 | 任务处理方法及装置 |
| CN109359939A (zh) * | 2018-09-26 | 2019-02-19 | 中国平安人寿保险股份有限公司 | 业务数据校验方法、装置、计算机设备和存储介质 |
| CN109815013A (zh) * | 2019-01-02 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 业务数据处理方法、装置、计算机设备和存储介质 |
| CN110019123A (zh) * | 2017-11-10 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 一种数据迁移方法和装置 |
| CN110019158A (zh) * | 2017-11-13 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 一种监控数据质量的方法和装置 |
| CN110874275A (zh) * | 2018-08-31 | 2020-03-10 | 北京京东尚科信息技术有限公司 | 数据校验方法、系统、电子设备及可读存储介质 |
| CN111026737A (zh) * | 2019-11-05 | 2020-04-17 | 深圳前海微众银行股份有限公司 | 一种任务处理方法及装置 |
| CN111722847A (zh) * | 2020-06-18 | 2020-09-29 | 国网电子商务有限公司 | 一种基于规则引擎的数据校验方法及装置 |
| CN112445874A (zh) * | 2020-12-10 | 2021-03-05 | 腾讯科技（深圳）有限公司 | 一种节点信息校验方法、装置、设备及存储介质 |
-
2021
- 2021-03-23 CN CN202110316898.3A patent/CN113050949A/zh active Pending
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103246574A (zh) * | 2012-02-10 | 2013-08-14 | 阿里巴巴集团控股有限公司 | 数据准确性的校验方法及装置 |
| CN103873343A (zh) * | 2012-12-11 | 2014-06-18 | 镇江金钛软件有限公司 | 资源管理方法、客户端及系统 |
| CN104239148A (zh) * | 2013-06-06 | 2014-12-24 | 腾讯科技（深圳）有限公司 | 一种分布式任务调度方法及装置 |
| CN104462243A (zh) * | 2014-11-19 | 2015-03-25 | 上海烟草集团有限责任公司 | 一种结合数据校验的etl调度系统及方法 |
| CN104965754A (zh) * | 2015-03-31 | 2015-10-07 | 腾讯科技（深圳）有限公司 | 任务调度方法及任务调度装置 |
| CN108319495A (zh) * | 2017-01-16 | 2018-07-24 | 阿里巴巴集团控股有限公司 | 任务处理方法及装置 |
| CN110019123A (zh) * | 2017-11-10 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 一种数据迁移方法和装置 |
| CN110019158A (zh) * | 2017-11-13 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 一种监控数据质量的方法和装置 |
| CN110874275A (zh) * | 2018-08-31 | 2020-03-10 | 北京京东尚科信息技术有限公司 | 数据校验方法、系统、电子设备及可读存储介质 |
| CN109359939A (zh) * | 2018-09-26 | 2019-02-19 | 中国平安人寿保险股份有限公司 | 业务数据校验方法、装置、计算机设备和存储介质 |
| CN109815013A (zh) * | 2019-01-02 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 业务数据处理方法、装置、计算机设备和存储介质 |
| CN111026737A (zh) * | 2019-11-05 | 2020-04-17 | 深圳前海微众银行股份有限公司 | 一种任务处理方法及装置 |
| CN111722847A (zh) * | 2020-06-18 | 2020-09-29 | 国网电子商务有限公司 | 一种基于规则引擎的数据校验方法及装置 |
| CN112445874A (zh) * | 2020-12-10 | 2021-03-05 | 腾讯科技（深圳）有限公司 | 一种节点信息校验方法、装置、设备及存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 张海波: "《智慧图书馆技术及应用》", 31 May 2020, 河北科学技术出版社, pages: 76 - 78 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111414172B (zh) | 应用软件自动部署发布系统及方法 | |
| US11467952B2 (en) | API driven continuous testing systems for testing disparate software | |
| CN112130880B (zh) | 微服务的发布方法、装置、计算机设备及存储介质 | |
| US9104806B2 (en) | Tracking of code base and defect diagnostic coupling with automated triage | |
| CN108804215B (zh) | 一种任务处理方法、装置以及电子设备 | |
| JPH0644242B2 (ja) | コンピュータ・システムにおける問題解決方法 | |
| US20170123873A1 (en) | Computing hardware health check | |
| CN114064208A (zh) | 检测应用服务状态的方法、装置、电子设备及存储介质 | |
| CN112596784B (zh) | 一种迭代版本部署方法及装置 | |
| Stadler et al. | Software failure modes and effects analysis | |
| WO2023231704A1 (zh) | 算法运行方法、装置、设备、存储介质 | |
| CN116010066A (zh) | 一种rpa机器人及实现方法 | |
| CN111767218B (zh) | 一种用于持续集成的自动化测试方法、设备及存储介质 | |
| CN113050949A (zh) | 基于java的防止父子依赖job执行后数据错乱的方法及系统 | |
| CN116599881A (zh) | 云平台租户建模测试的方法、装置、设备及存储介质 | |
| CN115408271A (zh) | 一站式闭环测试方法、系统、设备及介质 | |
| CN115952227A (zh) | 数据采集系统及方法、电子设备和存储介质 | |
| CN112765188B (zh) | 配置信息处理方法、配置管理系统、电子设备及存储介质 | |
| CN115525568A (zh) | 代码覆盖率的巡检方法、装置、计算机设备及存储介质 | |
| CN111367796B (zh) | 应用程序调试方法及装置 | |
| CN114020317A (zh) | 一种基于DevOps的项目质量保证系统及方法 | |
| Godunov et al. | Baget real-time operating system family (features, comparison, and future development) | |
| CN110618943A (zh) | 安防服务测试方法、装置、电子设备及可读存储介质 | |
| CN105677515A (zh) | 一种数据库联机备份方法及系统 | |
| CN115545677B (zh) | 基于自动化用例执行情况的上线流程规范检测方法和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |