CN113515362A - 数据处理方法、装置、计算机设备和存储介质 - Google Patents
数据处理方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN113515362A CN113515362A CN202110788661.5A CN202110788661A CN113515362A CN 113515362 A CN113515362 A CN 113515362A CN 202110788661 A CN202110788661 A CN 202110788661A CN 113515362 A CN113515362 A CN 113515362A
- Authority
- CN
- China
- Prior art keywords
- data
- workflow
- layer
- cache
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/544—Buffers; Shared memory; Pipes
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明属于计算机技术领域，具体提供一种数据处理方法、装置、计算机设备和存储介质，旨在解决在面对来自不同系统的大量数据需要进行导入工作时，需要人工对各个系统数据进行操作等问题。为此目的，本发明的方法包括：创建用于数据处理的工作流，为工作流创建定时任务；当定时任务启动时，执行所述工作流。应用本发明的方法，配置出一套完整的操作流作为任务，能通过定时器触发任务执行，从而提高数据导入的效率和准确性。
Description
技术领域
本发明属于计算机技术领域，具体提供一种数据处理方法、装置、计算机设备和存储介质。
背景技术
随着大数据的发展，系统数据越来越多，在很多场景下需要导入来自不同系统的大量数据，目前通用的做法是需要人工对各个系统数据进行操作。而数据质量的检查，数据清洗，数据导入流程，数据分层导入等问题，都需要操作人员非常熟悉才能胜任。因此，如何能够快速、准确地导入各系统数据，已经成为本领域亟待解决的问题。
相应地，本领域需要一种新的方案来解决上述问题。
发明内容
本发明旨在解决上述技术问题，即，解决在面对来自不同系统的大量数据需要进行导入工作时，需要人工对各个系统数据进行操作的问题。
在第一方面，本发明提供一种数据处理方法，所述方法包括：
步骤102，创建用于数据处理的工作流，为工作流创建定时任务；
步骤104，当定时任务启动时，执行所述工作流；
所述工作流包括：
步骤A：清空数据缓冲层ODS的相关表和缓存数据层cache的相关表；
步骤B：读取待导入数据文件中的数据并写入所述数据缓冲层ODS；
步骤C：将数据缓冲层ODS的数据进行加工后写入所述缓存数据层cache；
步骤E：将所述缓存数据层cache的数据写入全量数据层DW，
数据缓冲层ODS、缓存数据层cache、全量数据层DW分别是将数据库进行分层设计后的数据层。
在上述数据处理方法的一个实施方式中，所述步骤A之前包括：
判断前置条件是否满足；
若满足前置条件，则判断所述数据文件是否已存在：
若已存在，则判断所述数据文件是否已执行；
若所述数据文件未被执行，则对数据文件进行重命名并进行预处理。
在上述数据处理方法的一个实施方式中，在所述数据文件中的数据是全量数据时，在所述步骤C和所述步骤E之间还包括：
步骤D：清空全量数据层DW的相关表。
在上述数据处理方法的一个实施方式中，所述步骤F之后，包括：
对所述全量数据层DW中的数据进行去重和/或折叠处理；
移动所述数据文件至指定目录，所述目录用于放置已完成的数据文件；
记录所述数据文件为已执行状态。
在上述数据处理方法的一个实施方式中，为整个所述工作流设置对应的一个定时任务，或者所述工作流的每个步骤对应设置一个定时任务，当其上节点的定时任务完成时，触发下一节点的定时任务。
根据本发明的第二方面，还提供了一种数据处理装置，该装置包括：
创建单元，创建用于数据处理的工作流，为工作流创建定时任务；
执行单元，当定时任务启动时，执行所述工作流；
所述工作流包括：
步骤A：清空数据缓冲层ODS的相关表和缓存数据层cache的相关表；
步骤B：读取待导入数据文件中的数据并写入所述数据缓冲层ODS；
步骤C：将数据缓冲层ODS的数据进行加工后写入所述缓存数据层cache；
步骤E：将所述缓存数据层cache的数据写入全量数据层DW，
数据缓冲层ODS、缓存数据层cache、全量数据层DW分别是将数据库进行分层设计后的数据层。
在上述数据处理装置的一个实施方式中，所述装置包括：
所述步骤A之前包括：
判断前置条件是否满足；
若满足前置条件，则判断所述数据文件是否已存在：
若已存在，则判断所述数据文件是否已执行；
若所述数据文件未被执行，则对数据文件进行重命名并进行预处理。
在上述数据处理装置的一个实施方式中，在所述数据文件中的数据是全量数据时，在所述步骤C和所述步骤E之间还包括：
步骤D：清空全量数据层DW的相关表；
所述步骤F之后，包括：
对所述全量数据层DW中的数据进行去重和/或折叠处理；
移动所述数据文件至指定目录，所述目录用于放置已完成的数据文件；
记录所述数据文件为已执行状态。
在上述数据处理装置的一个实施方式中，所述创建单元为整个所述工作流设置对应的一个定时任务，或者所述工作流的每个步骤对应设置一个定时任务，当其上节点的定时任务完成时，触发下一节点的定时任务。
根据本发明的第三方面，还提供了一种计算机设备，包括处理器和存储装置，所述存储装置适于存储多条程序代码，所述程序代码适于由所述处理器加载并运行以执行上述任一实施例所述的数据处理方法。
根据本发明的第四方面，还提供了一种存储介质，所述存储介质适于存储多条程序代码，所述程序代码适于由处理器加载并运行以执行上述任一实施例所述的数据处理方法。
在采用上述技术方案的情况下，本发明设计了一套完备的数据导入处理工作流，将该数据导入处理工作流作为任务，为该工作流创建定时任务，当定时任务启动时，执行该工作流。解决了人工一步步操作的工作，全部由定时触发，工作流执行，并且制定了一套数据处理标准流程，便于统一管理维护。
附图说明
下面结合附图来描述本发明的优选实施方式，附图中：
图1是根据本发明的实施例的数据处理方法的主要步骤流程图。
图2是根据本发明的实施例的工作流的流程图。
图3是根据本发明的实施例的数据处理装置组成结构的示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图，对本发明实施例的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部实施例。基于本发明的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
首先阅读图1，图1是本发明的实施例的数据处理方法的主要步骤流程图。如图1所示，本发明的数据处理方法包括：
步骤102：创建用于数据处理的工作流，为工作流创建定时任务；
步骤104：当定时任务启动时，执行该工作流.
参考图2，在本实施例中，设计了一套标准的数据导入工作流，该工作流可以包括下列步骤：
步骤A：清空数据缓冲层ODS的相关表和缓存数据层cache的相关表；
步骤B：读取待导入数据文件中的数据并写入所述数据缓冲层ODS；
步骤C：将数据缓冲层ODS的数据进行加工后写入所述缓存数据层cache；
步骤E：将所述缓存数据层cache的数据写入全量数据层DW，
数据缓冲层ODS、缓存数据层cache、全量数据层DW分别是将数据库进行分层设计后的数据层。
在本实施例中，根据具体的加工过程，可将数据库分层设计，包括ods、cache、dw、target。总体策略是铺底数据采用手工导入方式。导入的增量数据通过调度完成，定时执行工作流的方式实现。对于数据库的原始数据层，以csv文件格式存储在服务器指定目录下，文件通常使用ASCII文件分割符(十六进制：1C)分隔或使用|分隔，文件需符合csv文件规范，增量数据文件名中要包含日期。对于ODS层，存储增量数据使用MergeTree表引擎即可。对于cache层，存储数据加工后的待写入dw层的数据使用MergeTree表引擎即可。对于DW层，存储加工后的结果数据使用Replicated*MergeTree表引擎。对于target层，存储宽表数据使用Replicated*MergeTree表引擎。对于数据直写类，即结果表数据直接做累加处理，数据的补跑原则是只需补跑缺失的增量数据。对于清表重写类，即结果表数据每次插入新数据前先清空老数据，再重新插入新数据。其补跑原则是补跑最近一次的增量数据。对于数据去重类，即结果表数据增加后根据去重键去除重复数据，默认保留后插入的。其补跑原则是从最早一次缺失的数据开始按顺序补跑每次的增量数据直到最近一次。对于数据拉链类，即结果表数据符合拉链规范，使用开始日期和结束日期做标记，结束时间是20991231表示有效数据。其补跑原则是从最早一次缺失的数据开始按顺序补跑每次的增量数据直到最近一次。
本领域技术人员应理解，图2所示仅是工作流的一个示例，在很多场景下，所述步骤A之前可以包括：
判断前置条件是否满足；
若满足前置条件，则判断所述数据文件是否已存在；
若已存在，则判断所述数据文件是否已执行；
若所述数据文件未被执行，则对数据文件进行重命名并进行预处理。
此处前置条件可以是“是否日切”，比如前日的任务是否已全部成功完成。若满足日切，则进一步判断需要导入的数据文件是否已存在，若已存在，在需要判断之前是否已经执行过。若不存在，则不需要判断是否已经执行过。为了标记文件，可以对数据文件进行重命名，该命名规则可以是自定义格式，如补充个temp后缀，文件系统使用完后，再移动到指定目录下，并恢复原名。
在另一场景下，当导入的数据文件中的数据是全量数据时，在所述步骤C和所述步骤E之间还可以包括：
步骤D：清空全量数据层DW的相关表。
应理解，若每次执行的是增量数据，则不清空全量数据层DW的相关表，直接追加数据即可。
在另一实施例中，上述步骤F之后还可以包括：
对所述全量数据层DW中的数据进行去重和/或折叠处理；
移动所述数据文件至指定目录，所述目录用于放置已完成的数据文件：
记录所述数据文件为已执行状态。任务执行完成后，增量文件恢复原文件名并移动到指定的备份目录下。为避免文件重复读入，已完成的文件的文件名写入指定文件中作为标记，扫描文件时先判定是否已完成。
在本实施例中，数据加工使用工作流方式，shell作为节点，使用SQL语句(函数、分组、排序、join连接等)完成。增量文件扫描采用定时多次扫描的方案，增量文件采用固定文件名前缀+日期的格式进行查找。增量文件被任务锁定后，做改名处理，避免任务重复。清空表数据采用SQL命令(truncate)。文件导入数据库采用clickhouse导入csv文件的指令
具体实施时，可以为工作流设置全局变量，方便管理和后期维护。
为整个所述工作流设置对应的一个定时任务，或者所述工作流的每个步骤对应设置一个定时任务，当其上节点的定时任务完成时，触发下一节点的定时任务。为工作流创建定时器，作为时间调度。使用依赖节点，将依赖关系的工作流在指定的时间内是否成功作为前置条件。
上述实施例设计了一套完备的数据导入处理工作流，将该数据导入处理工作流作为任务，为该工作流创建定时任务，当定时任务启动时，执行该工作流。解决了人工一步步操作的工作，全部由定时触发，工作流执行，并且制定了一套数据处理标准流程，便于统一管理维护。
如图3所示，根据本发明的实施例的数据处理装置300，包括：
创建单元302，创建用于数据处理的工作流，为工作流创建定时任务；
执行单元304，当定时任务启动时，执行所述工作流；
所述工作流包括：
步骤A：清空数据缓冲层ODS的相关表和缓存数据层cache的相关表；
步骤B：读取待导入数据文件中的数据并写入所述数据缓冲层ODS；
步骤C：将数据缓冲层ODS的数据进行加工后写入所述缓存数据层cache；
步骤E：将所述缓存数据层cache的数据写入全量数据层DW，
数据缓冲层ODS、缓存数据层cache、全量数据层DW分别是将数据库进行分层设计后的数据层。
其中，创建单元302为整个所述工作流设置对应的一个定时任务，或者所述工作流的每个步骤对应设置一个定时任务，当其上节点的定时任务完成时，触发下一节点的定时任务。
进一步，本发明还提供了一种计算机设备，该计算机设备包括处理器和存储装置，存储装置可以被配置成存储并执行上述方法实施例的数据处理方法的程序，处理器可以被配置成用于执行存储装置中的程序，该程序包括但不限于执行上述方法实施例的数据处理方法的程序。为了便于说明，仅示出了与本发明实施例相关的部分，具体技术细节未揭示的，请参照本发明实施例方法部分。该数据处理设备可以是包括各种电子设备形成的控制装置设备。
进一步，本发明还提供了一种存储介质，该存储介质可以被配置成存储执行上述方法实施例的数据处理方法的程序，该程序可以由处理器加载并运行来实现上述数据处理方法的方法。为了便于说明，仅示出了与本发明实施例相关的部分，具体技术细节未揭示的，请参照本发明实施例方法部分。该存储介质可以是包括各种电子设备形成的存储装置设备，可选地，本发明实施例中存储介质是非暂时性的计算机可读存储介质。
本领域技术人员应该能够意识到，结合本文中所公开的实施例描述的各示例的方法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明电子硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以电子硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等序数词仅用于区别类似的对象，而不是用于描述或表示特定的顺序或先后次序。应该理解这样使用的数据在适当的情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
需要说明的是，在本申请的描述中，术语“A和/或B”表示所有可能的A与B的组合，比如只是A、只是B或者A和B。
至此，已经结合附图所示的优选实施方式描述了本发明的技术方案，但是，本领域技术人员容易理解的是，本发明的保护范围显然不局限于这些具体实施方式。在不偏离本发明的原理的前提下，本领域技术人员可以对相关技术特征作出等同的更改或替换，这些更改或替换之后的技术方案都将落入本发明的保护范围之内。
Claims (11)
1.一种数据处理方法，其特征在于，包括如下步骤：
步骤102，创建用于数据处理的工作流，为工作流创建定时任务；
步骤104，当定时任务启动时，执行所述工作流；
所述工作流包括：
步骤A：清空数据缓冲层ODS的相关表和缓存数据层cache的相关表；
步骤B：读取待导入数据文件中的数据并写入所述数据缓冲层ODS；
步骤C：将数据缓冲层ODS的数据进行加工后写入所述缓存数据层cache；
步骤E：将所述缓存数据层cache的数据写入全量数据层DW，
数据缓冲层ODS、缓存数据层cache、全量数据层DW分别是将数据库进行分层设计后的数据层。
2.根据权利要求1所述的方法，其特征在于，所述步骤A之前包括：
判断前置条件是否满足；
若满足前置条件，则判断所述数据文件是否已存在；
若已存在，则判断所述数据文件是否已执行；
若所述数据文件未被执行，则对数据文件进行重命名并进行预处理。
3.根据权利要求2所述的方法，其特征在于，在所述数据文件中的数据是全量数据时，在所述步骤C和所述步骤E之间还包括：
步骤D：清空全量数据层DW的相关表。
4.根据权利要求1至3中任一项所述的方法，其特征在于，所述步骤F之后，包括：
对所述全量数据层DW中的数据进行去重和/或折叠处理；
移动所述数据文件至指定目录，所述目录用于放置已完成的数据文件；
记录所述数据文件为已执行状态。
5.根据权利要求1至4中任一项所述的方法，其特征在于，为整个所述工作流设置对应的一个定时任务，或者所述工作流的每个步骤对应设置一个定时任务，当其上节点的定时任务完成时，触发下一节点的定时任务。
6.一种数据处理装置，其特征在于，包括：
创建单元，创建用于数据处理的工作流，为工作流创建定时任务；
执行单元，当定时任务启动时，执行所述工作流；
所述工作流包括：
步骤A：清空数据缓冲层ODS的相关表和缓存数据层cache的相关表；
步骤B：读取待导入数据文件中的数据并写入所述数据缓冲层ODS；
步骤C：将数据缓冲层ODS的数据进行加工后写入所述缓存数据层cache；
步骤E：将所述缓存数据层cache的数据写入全量数据层DW，
数据缓冲层ODS、缓存数据层cache、全量数据层DW分别是将数据库进行分层设计后的数据层。
7.根据权利要求6所述的数据处理装置，其特征在于，所述装置包括：
所述步骤A之前包括：
判断前置条件是否满足；
若满足前置条件，则判断所述数据文件是否已存在；
若已存在，则判断所述数据文件是否已执行；
若所述数据文件未被执行，则对数据文件进行重命名并进行预处理。
8.根据权利要求7所述的数据处理装置，其特征在于，在所述数据文件中的数据是全量数据时，在所述步骤C和所述步骤E之间还包括：
步骤D：清空全量数据层DW的相关表；
所述步骤F之后，包括：
对所述全量数据层DW中的数据进行去重和/或折叠处理；
移动所述数据文件至指定目录，所述目录用于放置已完成的数据文件；
记录所述数据文件为已执行状态。
9.根据权利要求6至8中任一项所述的数据处理装置，其特征在于，所述创建单元为整个所述工作流设置对应的一个定时任务，或者所述工作流的每个步骤对应设置一个定时任务，当其上节点的定时任务完成时，触发下一节点的定时任务。
10.一种计算机设备，包括处理器和存储装置，所述存储装置适于存储多条程序代码，其特征在于，所述程序代码适于由所述处理器加载并运行以执行权利要求1至5中任一项所述的数据处理方法。
11.一种存储介质，所述存储介质适于存储多条程序代码，其特征在于，所述程序代码适于由处理器加载并运行以执行权利要求1至5中任一项所述的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110788661.5A CN113515362B (zh) | 2021-07-12 | 2021-07-12 | 数据处理方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110788661.5A CN113515362B (zh) | 2021-07-12 | 2021-07-12 | 数据处理方法、装置、计算机设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113515362A true CN113515362A (zh) | 2021-10-19 |
| CN113515362B CN113515362B (zh) | 2023-10-20 |
Family
ID=78067611
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110788661.5A Active CN113515362B (zh) | 2021-07-12 | 2021-07-12 | 数据处理方法、装置、计算机设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113515362B (zh) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1990007161A1 (de) * | 1988-12-22 | 1990-06-28 | Grau Gmbh & Co. | Verfahren und vorrichtung zum betreiben eines automatischen datenträgerarchivs |
| US20090327854A1 (en) * | 2008-06-30 | 2009-12-31 | Yahoo!, Inc. | Analysis of Database Performance Reports for Graphical Presentation of Summary Results |
| CN102711139A (zh) * | 2012-04-24 | 2012-10-03 | 华为终端有限公司 | 一种数据流量统计方法及终端 |
| CN104933112A (zh) * | 2015-06-04 | 2015-09-23 | 浙江力石科技股份有限公司 | 分布式互联网交易信息存储处理方法 |
| US20160274805A1 (en) * | 2015-03-16 | 2016-09-22 | Hitachi-Lg Data Storage, Inc. | Data archive system |
| CN107436898A (zh) * | 2016-05-27 | 2017-12-05 | 北京京东尚科信息技术有限公司 | 定期清除数据库数据的方法和系统 |
| CN107566434A (zh) * | 2016-07-01 | 2018-01-09 | 北京京东尚科信息技术有限公司 | 一种分布式系统中缓存数据读写方法及系统 |
| CN109189764A (zh) * | 2018-09-20 | 2019-01-11 | 北京桃花岛信息技术有限公司 | 一种基于Hive的高校数据仓库分层设计方法 |
| CN109800233A (zh) * | 2019-01-24 | 2019-05-24 | 博云视觉科技(青岛)有限公司 | 一种大数据融合搜索方法 |
| CN110442651A (zh) * | 2019-08-13 | 2019-11-12 | 焦点科技股份有限公司 | 一种基于kettle实现excel数据自动上传并触发调度的方法 |
-
2021
- 2021-07-12 CN CN202110788661.5A patent/CN113515362B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1990007161A1 (de) * | 1988-12-22 | 1990-06-28 | Grau Gmbh & Co. | Verfahren und vorrichtung zum betreiben eines automatischen datenträgerarchivs |
| US20090327854A1 (en) * | 2008-06-30 | 2009-12-31 | Yahoo!, Inc. | Analysis of Database Performance Reports for Graphical Presentation of Summary Results |
| CN102711139A (zh) * | 2012-04-24 | 2012-10-03 | 华为终端有限公司 | 一种数据流量统计方法及终端 |
| US20160274805A1 (en) * | 2015-03-16 | 2016-09-22 | Hitachi-Lg Data Storage, Inc. | Data archive system |
| CN104933112A (zh) * | 2015-06-04 | 2015-09-23 | 浙江力石科技股份有限公司 | 分布式互联网交易信息存储处理方法 |
| CN107436898A (zh) * | 2016-05-27 | 2017-12-05 | 北京京东尚科信息技术有限公司 | 定期清除数据库数据的方法和系统 |
| CN107566434A (zh) * | 2016-07-01 | 2018-01-09 | 北京京东尚科信息技术有限公司 | 一种分布式系统中缓存数据读写方法及系统 |
| CN109189764A (zh) * | 2018-09-20 | 2019-01-11 | 北京桃花岛信息技术有限公司 | 一种基于Hive的高校数据仓库分层设计方法 |
| CN109800233A (zh) * | 2019-01-24 | 2019-05-24 | 博云视觉科技(青岛)有限公司 | 一种大数据融合搜索方法 |
| CN110442651A (zh) * | 2019-08-13 | 2019-11-12 | 焦点科技股份有限公司 | 一种基于kettle实现excel数据自动上传并触发调度的方法 |
Non-Patent Citations (4)
| Title |
|---|
| "New Methods for the Cross-Section of Returns", THE REVIEW OF FINANCIAL STUDIES, vol. 33, no. 5 * |
| ERIN, WILSON;SARAH, JANSSENS;DORA, NG;BRIAN, JOLLY;DAVID G, HEWETT;MICHAEL, BECKMANN: "Trainee Performance in Loop Electrosurgical Excision Procedure (LEEP) After Simulation Training.", JOURNAL OF LOWER GENITAL TRACT DISEASE * |
| 张丽君;: "LDAP目录与关系数据库之间数据同步技术的研究", 内蒙古石油化工, no. 23 * |
| 李书涛, 黄志武, 蒋新华: "内燃机车状态检测信息数据库设计", 长沙铁道学院学报, no. 02 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113515362B (zh) | 2023-10-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102262544B (zh) | 软件升级的方法和装置 | |
| US10417180B1 (en) | Fast recovery of backup cloud gateway following crash without garbage collection | |
| CN107193615B (zh) | 项目代码信息的更新部署方法及装置 | |
| CN102360410B (zh) | 一种文件系统的用户操作发现方法和装置 | |
| US9026496B1 (en) | Efficient building of restore list | |
| WO2014100492A2 (en) | Main-memory database checkpointing | |
| CN101923566A (zh) | 一种基于触发器的数据增量抽取方法 | |
| CN103530150A (zh) | 一种Linux操作系统远程更新的方法 | |
| CN107479881B (zh) | 差异代码的同步方法、存储介质、电子设备及系统 | |
| CN111752640A (zh) | 基于云服务的计算机软件免安装方法、装置及系统 | |
| CN105224527A (zh) | 适用于多种目的表更新方式的通用etl方法 | |
| US9037539B2 (en) | Data synchronization | |
| CN107179965B (zh) | 数据库恢复方法及装置 | |
| CN114281779A (zh) | 数据同步方法、装置、计算机设备及存储介质 | |
| CN105320577A (zh) | 一种数据备份和恢复方法、系统及装置 | |
| CN103257971A (zh) | 终端和文件管理方法 | |
| CN104820625A (zh) | 一种面向信息管理系统的数据记录、备份及恢复方法 | |
| CN113419897B (zh) | 一种文件处理方法、装置、电子设备及其存储介质 | |
| CN106603289A (zh) | 一种lmt配置文件平滑升级方法 | |
| CN108664255B (zh) | 一种软件升级方法及装置 | |
| CN113515362A (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
| CN113468143A (zh) | 数据迁移方法、系统、计算设备及存储介质 | |
| CN115080076B (zh) | 一种云手机软件管理方法 | |
| CN106599006A (zh) | 一种数据恢复方法和装置 | |
| CN110851293B (zh) | 一种信息系统联动处理的系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |