CN112287021A - 数据实时同步参数的生成、同步方法及装置、存储介质、终端 - Google Patents
数据实时同步参数的生成、同步方法及装置、存储介质、终端 Download PDFInfo
- Publication number
- CN112287021A CN112287021A CN202010670352.3A CN202010670352A CN112287021A CN 112287021 A CN112287021 A CN 112287021A CN 202010670352 A CN202010670352 A CN 202010670352A CN 112287021 A CN112287021 A CN 112287021A
- Authority
- CN
- China
- Prior art keywords
- database
- final
- database information
- parameter
- synchronization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 60
- 238000013515 script Methods 0.000 claims abstract description 63
- 238000013507 mapping Methods 0.000 claims abstract description 35
- 230000008569 process Effects 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 12
- 230000006870 function Effects 0.000 claims description 12
- 230000000007 visual effect Effects 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 9
- 238000012986 modification Methods 0.000 claims description 8
- 230000004048 modification Effects 0.000 claims description 8
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 5
- 238000012423 maintenance Methods 0.000 abstract description 10
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000012800 visualization Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000011084 recovery Methods 0.000 description 3
- 238000013481 data capture Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/38—Creation or generation of source code for implementing user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Stored Programmes (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种数据实时同步参数的生成、同步方法及装置、存储介质、终端，数据实时同步参数的生成方法包括：至少获取用户输入的源数据库信息以及目标数据库信息，所述源数据库信息以及目标数据库信息包括数据库类型；根据所述数据库类型以及第一映射关系确定实际参数模板，所述参数模板包括多种参数；至少结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件；根据所述数据库类型以及第二映射关系确定最终数据库执行脚本，所述最终参数文件和所述最终数据库执行脚本用于供数据库同步工具调用。本发明技术方案能够实现数据库同步软件部署的和维护的便捷性。
Description
技术领域
本发明涉及计算机技术领域，尤其涉及一种数据实时同步参数的生成、同步方法及装置、存储介质、终端。
背景技术
Oracle Golden Gate(简称OGG，又称灾难备份或者灾备)软件是一种基于日志的结构化数据复制软件，它通过解析源数据库在线日志或归档日志获得数据的增量变化，再将这些变化应用到目标数据库，从而实现源数据库与目标数据库同步，也即能够实现Oracle数据库的异构同步。
但是，在医疗领域，医疗行业数据环境复杂，特定条件较多，定制化需求较多，在OGG部署过程中，需要修改参数多且复杂；并且需要部署人员通过比较完整的学习如何运用和部署等相关知识才能进行部署工作，学习成本高，部署过程中出错率较高，大幅增加了现场部署、运维的工作量。
发明内容
本发明解决的技术问题是如何实现OGG软件部署的和维护的便捷性。
为解决上述技术问题，本发明实施例提供一种数据实时同步参数的生成方法，数据实时同步参数的生成方法包括：至少获取用户输入的源数据库信息以及目标数据库信息，所述源数据库信息以及目标数据库信息包括数据库类型；根据所述数据库类型以及第一映射关系确定实际参数模板，所述参数模板包括多种参数；至少结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件；数据库执行脚本根据所述数据库类型以及第二映射关系确定最终数据库执行脚本，所述最终参数文件和所述最终数据库执行脚本用于供数据库同步工具调用。
可选的，所述至少获取用户输入的源数据库信息以及目标数据库信息包括：获取用户输入的源数据库信息和目标数据库信息；获取所述用户在可视化界面选择的特殊配置，所述特殊配置是指预先封装完成的具有业务执行功能的代码。
可选的，所述至少获取用户输入的源数据库信息以及目标数据库信息之后还包括：将所述特殊配置对应的代码加入所述实际参数模板对应的位置。
可选的，所述特殊配置具备的业务功能包括：对无主键数据处理、捕获数据变化进程、同步修改状态、生成数据库同步工具启动服务的参数脚本、生成环境参数、数据转换操作、配置Kafka参数文件和多进程参数处理。
可选的，所述结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件包括：将所述源数据库信息以及目标数据库信息与所述实际参数模板中的参数进行匹配，并将匹配后的所述源数据库信息以及目标数据库信息中的值填入所述实际参数模板对应的位置，以得到所述最终参数文件。
可选的，所述结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件包括：将所述源数据库信息以及目标数据库信息与所述实际参数模板中的参数进行匹配，并将匹配后的所述源数据库信息以及目标数据库信息中的值填入所述实际参数模板对应的位置，以得到中间参数文件；将所述中间参数文件呈现在可视化界面；获取所述用户在可视化界面对所述中间参数文件的修改数据，以得到所述最终参数文件。
为解决上述技术问题，本发明实施例还公开了一种同步方法，同步方法包括：在指定路径调用最终参数文件和最终数据库执行脚本，所述指定路径存储有所述最终参数文件和所述最终数据库执行脚本；将源数据库中的数据同步至目标数据库。
本发明实施例还公开了一种数据实时同步参数的生成装置，同步脚本生成装置包括：输入获取模块，用以至少获取用户输入的源数据库信息以及目标数据库信息，所述源数据库信息以及目标数据库信息包括数据库类型；实际参数模板确定模块，用以根据所述数据库类型以及第一映射关系确定实际参数模板，所述参数模板包括多种参数；最终参数文件确定模块，用以至少结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件；最终数据库执行脚本确定模块，用以数据库执行脚本根据所述数据库类型以及第二映射关系确定最终数据库执行脚本，所述最终参数文件和所述最终数据库执行脚本用于供数据库同步工具调用。
本发明实施例还公开了一种存储介质，其上存储有计算机程序，所述计算机程序运行时执行所述数据实时同步参数的生成方法的步骤，或者所述的同步方法的步骤。
本发明实施例还公开了一种终端，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行所述数据实时同步参数的生成方法的步骤，或者所述同步方法的步骤。
与现有技术相比，本发明实施例的技术方案具有以下有益效果：
本发明技术方案通过预先设置参数模板、参数模板与数据库类型之间的映射关系以及数据库执行脚本与数据库类型之间的映射关系，使得用户仅需输入简单参数，如源数据库信息以及目标数据库信息，就能够获得实际应用环境可用的实际参数模板以及数据库执行脚本，进而在部署数据库同步工具时可以直接调用该实际参数模板以及数据库执行脚本，部署过程简便易操作，尤其在同步数据环境复杂、需求较多的情况下，能够显著地降低部署和运维的工作量，提高了运维效率。
进一步地，本发明技术方案获取用户输入的源数据库信息和目标数据库信息；获取所述用户在可视化界面选择的特殊配置，所述特殊配置是指预先封装完成的具有业务执行功能的代码。本发明技术方案通过用户在可视化界面进行简单配置，能够自动化创建满足不同需求的参数模板在生产环境中，从而能够应用于不同数据环境，适用范围广。
附图说明
图1是本发明实施例一种数据实时同步参数的生成方法的流程图；
图2是本发明实施例另一种数据实时同步参数的生成方法的流程图
图3是图1所示步骤S103的一种具体实施方式的流程图；
图4是本发明实施例一种同步方法的流程图；
图5是本发明实施例一种数据实时同步参数的生成装置的结构示意图。
具体实施方式
如背景技术中所述，在医疗领域，医疗行业数据环境复杂，特定条件较多，定制化需求较多，在OGG部署过程中，需要修改参数多且复杂，学习成本高，部署过程中出错率较高，大幅增加了现场部署、运维的工作量。
本发明技术方案通过预先设置参数模板、参数模板与数据库类型之间的映射关系以及数据库执行脚本与数据库类型之间的映射关系，使得用户仅需输入简单参数，如源数据库信息以及目标数据库信息，就能够获得实际应用环境可用的实际参数模板以及数据库执行脚本，进而在部署数据库同步工具时可以直接调用该实际参数模板以及数据库执行脚本，部署过程简便易操作，尤其在同步数据环境复杂、需求较多的情况下，能够显著地降低部署和运维的工作量。
为使本发明的上述目的、特征和优点能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。
图1是本发明实施例一种数据实时同步参数的生成方法的流程图。
需要指出的是，本实施例中各个步骤的序号并不代表对各个步骤的执行顺序的限定。
图1所示的数据实时同步参数的生成方法的各个步骤可以由计算机设备来执行，例如，手机、计算机、平板电脑等。具体地，所述数据实时同步参数的生成方法可以包括以下步骤：
步骤S101：至少获取用户输入的源数据库信息以及目标数据库信息，所述源数据库信息以及目标数据库信息包括数据库类型；
步骤S102：根据所述数据库类型以及第一映射关系确定实际参数模板，所述参数模板包括多种参数；
步骤S103：至少结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件；
步骤S104：根据所述数据库类型以及第二映射关系确定最终数据库执行脚本，所述最终参数文件和所述最终数据库执行脚本用于供数据库同步工具调用。
用户可以在可视化界面输入源数据库信息以及目标数据库信息，那么在步骤S101的具体实施中，可以获取可视化界面传入的内容。其中，源数据库信息可以是表征源数据库的相关配置信息；目标数据库信息可以是表征目标数据库的相关配置信息，所述源数据库信息以及目标数据库信息至少包括数据库类型。
具体而言，所述源数据库信息还可以包括系统环境、进程名称、数据恢复管理(Parnassus Data Recovery Manager,prm)存放路径、数据库名称、数据库用户名、数据库用户密码、数据库实例名、数据库字符集；目标数据库信息还可以包括系统环境、进程名称、prm存放路径、数据库名称、数据库用户名、数据库用户密码、数据库实例名、数据库字符集、大数据(big data)配置文件名称。
进一步地，所述源数据库信息还可以包括表清单，所述表清单可以是源数据库所需配置的表清单列表。
可以理解的是，源数据库信息以及目标数据库信息所包含的具体内容可以由用户根据实际的应用环境进行选择和配置，本发明实施例对此不作限制。
相应地，在预先设置参数模板时，参数模板所包含的具体参数也可以是根据实际的应用环境来配置的。在步骤S102的具体实施中，参数模板与数据库类型之间具备映射关系，也即第一映射关系，那么一旦确定用户输入的数据库类型，就能够根据该映射关系确定当前应用环境可用的参数模板，也即实际参数模板。
本实施例中，参数模板中多种参数的一部分参数的值是预先配置好的，剩余参数的值则需要根据用户的输入来确定。进而在步骤S103中，结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件，最终参数文件中多个参数的值均已确定。
数据库同步工具在对源数据库和目标数据库进行数据同步操作时，需要执行开启和/或关闭数据库的动作，为了实现开启和/或关闭数据库，需要数据库执行脚本。数据库执行脚本的功能是开启和/或关闭数据库。
本实施例中所称的数据库同步工具能够对源数据库和目标数据库进行数据同步，具体可以是OGG工具，也可以是其他任意可实施的能够对数据库执行数据同步的工具，本发明实施例对此不作限制。
本实施例中所称数据库执行脚本能够对数据库执行业务操作，例如开启和/或关闭数据库，也可以是查询数据库等，具体可以是SQL执行脚本，也可以是其他任意可实施的计算机语言编写的脚本，本发明实施例对此不作限制。
本发明实施例可以预先设置第二映射关系，也即数据库执行脚本与数据库类型之间的映射关系。故而在步骤S104的具体实施中，可以根据用户输入的数据库类型确定最终数据库执行脚本。至此，OGG根据运行所需的参数(最终参数文件和最终数据库执行脚本)均已完成配置。
具体地，最终参数文件和最终数据库执行脚本可以存储至指定的路径，例如可以打包存储至指定路径的文件夹。该文件夹的指定路径可以是由用户预先设置的。
本实施例中，通过预先设置参数模板、参数模板与数据库类型之间的映射关系以及数据库执行脚本与数据库类型之间的映射关系，使得用户仅需输入简单参数，如源数据库信息以及目标数据库信息，就能够获得实际应用环境可用的实际参数模板以及数据库执行脚本，进而在部署数据库同步工具时可以直接调用该实际参数模板以及数据库执行脚本，部署过程简便易操作，尤其在同步数据环境复杂、需求较多的情况下，能够显著地降低部署和运维的工作量。
在本发明一个具体实施例中，请参照图2，图1所示步骤S101可以包括以下步骤：
步骤S201：获取用户输入的源数据库信息和目标数据库信息；
步骤S202：获取所述用户在可视化界面选择的特殊配置，所述特殊配置是指预先封装完成的具有业务执行功能的代码。
本实施例中，除了获取用户输入的源数据库信息和目标数据库信息之外，还可以获取用户选择的特殊配置。具体而言，可以预先将具有业务执行功能的代码进行封装，并形成模块，在可视化界面中提供该模块的选项供用户进行选择。如果用户勾选了某个特殊配置，则获取该特殊配置对应的封装好的代码。
由于特殊配置具有业务执行功能，并能够提供对外接口，因此通过提供特殊配置，可以实现用户个性化需求的定制，提升用户体验。
在一个具体实施例中，所述特殊配置具备的业务功能包括：对无主键数据处理、捕获数据变化进程、同步修改状态、生成数据库同步工具启动服务的参数脚本、生成环境参数、数据转换操作、配置Kafka参数文件和多进程参数处理。
在一个具体的例子中，主键表处理模块(No Key Table Module)能够基于数据表中没有主键情况下对参数进行特殊处理；数据捕获模块能够基于表数据在同步的过程中，对数据的变化进程捕获：获取修改前、修改后数据，源数据库删除数据(物理删除)，同步后在目标服务器修改其状态(逻辑删除)；MGR服务模块(MGR Module)：生成OGG自身启动服务的参数脚本；DG(DataGuard灾备库)参数模块(DG Module)：基于生产库是DG库的环境生成特殊参数；一键转换Schema模块(Change Schema Module)能够基于需要适应不同数据库类型，定制化转换数据库Schema的转换操作；KAFKA数据捕获模块(Kafka Module)：基于大数据环境配置Kafka参数文件；初始化多进程模块(InitRange Module)：基于初始化时数据量较大的表，进行多进程参数处理。
本发明实施例通过用户在可视化界面进行简单配置，能够自动化创建满足不同需求的参数模板在生产环境中，从而能够应用于不同数据环境，适用范围广。
在本发明一个具体实施例中，继续参照图2，图1所示步骤S101之后可以包括以下步骤：步骤S203：将所述特殊配置对应的代码加入所述实际参数模板对应的位置。
本实施例中，参数模板中预留有特殊配置对应的代码的位置。为了方便数据库同步工具方便调用特殊配置对应的代码，可以将特殊配置对应的代码加入实际参数模板对应的位置。数据库同步工具运行时，可以直接从实际参数模板中调用特殊配置对应的代码，以执行特殊配置具备的业务功能，无需工作人员进行额外的代码编写工作，使得OGG的部署更加简便快捷。
在本发明一个具体实施例中，继续参照图2，图1所示步骤S103可以包括以下步骤：步骤S204：将所述源数据库信息以及目标数据库信息与所述实际参数模板中的参数进行匹配，并将匹配后的所述源数据库信息以及目标数据库信息中的值填入所述实际参数模板对应的位置，以得到所述最终参数文件。
本实施例中，参数模板中预留有源数据库信息以及目标数据库信息对应的参数的位置。在将源数据库信息以及目标数据库信息中的值填入所述实际参数模板时，可以将用户输入的信息与参数模板中的参数进行匹配。例如，源数据库信息包括数据库名称，那么通过与参数模板中的参数进行匹配，可以得到匹配的参数是“数据库名称”，那么将源数据库信息所包含的数据库名称填入该匹配的参数对应的值的位置即可。
至此，最终参数文件中各个参数均具有对应的值。
本发明一个可选实施例中，请参照图3，图1所示步骤S103可以包括以下步骤：
步骤S301：将所述源数据库信息以及目标数据库信息与所述实际参数模板中的参数进行匹配，并将匹配后的所述源数据库信息以及目标数据库信息中的值填入所述实际参数模板对应的位置，以得到中间参数文件；
步骤S302：所述中间参数文件呈现在可视化界面；
步骤S303：获取所述用户在可视化界面对所述中间参数文件的修改数据，以得到所述最终参数文件。
与前述实施例不同的是，除了根据源数据库信息以及目标数据库信息确定实际参数模板中各个参数的值之外，还可以提供给用户修改的机会，并根据用户的修改数据获得最终参数文件。
具体而言，在初步获得实际参数模板中各个参数的值之后，得到中间参数模板；该中间参数模板可以呈现在可视化界面中，并能够被用户进行编辑和修改，以获得用户的修改数据。利用用户的修改数据对中间参数模板中对应的参数的值进行更新，以得到最终参数文件。
本发明实施例通过设置对中间参数文件进行修改的功能，可以满足特殊环境的要求，同时还能够使用户能够及时发现问题并更正，保证最终生成的最终参数文件和数据库执行脚本的准确性，进而保证后续OGG同步的准确性。
请参照图4，所述同步方法可以包括以下步骤：
步骤S401：在指定路径调用最终参数文件和最终数据库执行脚本，所述指定路径存储有所述最终参数文件和所述最终数据库执行脚本；
步骤S402：将源数据库中的数据同步至目标数据库。
本实施例中，同步方法的执行主体可以是数据库同步工具。
数据库同步工具通过在指定路径调用最终参数文件和最终数据库执行脚本，可以实现对源数据库和目标数据库中数据的同步。其中，源数据库和目标数据库的相关信息体现在最终参数文件中。
关于形成最终参数文件和数据库执行脚本的具体实施例请参照前述实施例，此处不再赘述。
请参照图5，所述数据实时同步参数的生成装置50可以包括输入获取模块501、实际参数模板确定模块502、最终参数文件确定模块503和最终数据库执行脚本确定模块504。
其中，输入获取模块501用以至少获取用户输入的源数据库信息以及目标数据库信息，所述源数据库信息以及目标数据库信息包括数据库类型；
实际参数模板确定模块502用以根据所述数据库类型以及第一映射关系确定实际参数模板，所述参数模板包括多种参数；
最终参数文件确定模块503用以至少结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件；
最终数据库执行脚本确定模块504用以数据库执行脚本根据所述数据库类型以及第二映射关系确定最终数据库执行脚本，所述最终参数文件和所述最终数据库执行脚本用于供数据库同步工具调用。
本发明实施例通过预先设置参数模板、参数模板与数据库类型之间的映射关系以及数据库执行脚本与数据库类型之间的映射关系，使得用户仅需输入简单参数，如源数据库信息以及目标数据库信息，就能够获得实际应用环境可用的实际参数模板以及数据库执行脚本，进而在部署数据库同步工具时可以直接调用该实际参数模板以及数据库执行脚本，部署过程简便易操作，尤其在同步数据环境复杂、需求较多的情况下，能够显著地降低部署和运维的工作量，提高了运维效率。
关于所述数据实时同步参数的生成装置50的工作原理、工作方式的更多内容，可以参照图1至图4中的相关描述，这里不再赘述。
本发明实施例还公开了一种同步装置，所述同步装置包括：调用模块，用以在指定路径调用最终参数文件和最终数据库执行脚本，所述指定路径存储有所述最终参数文件和所述最终数据库执行脚本；同步模块，用以将源数据库中的数据同步至目标数据库。
关于所述同步装置的工作原理、工作方式的更多内容，可以参照图1至图4中的相关描述，这里不再赘述。
本发明实施例还公开了一种存储介质，所述存储介质为计算机可读存储介质，其上存储有计算机程序，所述计算机程序运行时可以执行图1-图4中所示方法的步骤。所述存储介质可以包括ROM、RAM、磁盘或光盘等。所述存储介质还可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器等。
本发明实施例还公开了一种终端，所述终端可以包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序。所述处理器运行所述计算机程序时可以执行图1-图4中所示方法的步骤。所述用户设备包括但不限于手机、计算机、平板电脑等终端设备。
虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。
Claims (11)
1.一种数据实时同步参数的生成方法，其特征在于，包括：
至少获取用户输入的源数据库信息以及目标数据库信息，所述源数据库信息以及目标数据库信息包括数据库类型；
根据所述数据库类型以及第一映射关系确定实际参数模板，所述参数模板包括多种参数，所述第一映射关系包括多个参数模板与多个数据库类型之间的映射关系；
至少结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件；
根据所述数据库类型以及第二映射关系确定最终数据库执行脚本，所述最终参数文件和所述最终数据库执行脚本用于供数据库同步工具调用，所述第二映射关系包括多个数据库执行脚本与多个数据库类型之间的映射关系。
2.根据权利要求1所述的数据实时同步参数的生成方法，其特征在于，所述至少获取用户输入的源数据库信息以及目标数据库信息包括：
获取用户输入的源数据库信息和目标数据库信息；
获取所述用户在可视化界面选择的特殊配置，所述特殊配置是指预先封装完成的具有业务执行功能的代码。
3.根据权利要求2所述的数据实时同步参数的生成方法，其特征在于，所述至少获取用户输入的源数据库信息以及目标数据库信息之后还包括：
将所述特殊配置对应的代码加入所述实际参数模板对应的位置。
4.根据权利要求2所述的数据实时同步参数的生成方法，其特征在于，所述特殊配置具备的业务功能包括：对无主键数据处理、捕获数据变化进程、同步修改状态、生成数据库同步工具启动服务的参数脚本、生成环境参数、数据转换操作、配置Kafka参数文件和多进程参数处理。
5.根据权利要求1所述的数据实时同步参数的生成方法，其特征在于，所述结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件包括：
将所述源数据库信息以及目标数据库信息与所述实际参数模板中的参数进行匹配，并将匹配后的所述源数据库信息以及目标数据库信息中的值填入所述实际参数模板对应的位置，以得到所述最终参数文件。
6.根据权利要求1所述的数据实时同步参数的生成方法，其特征在于，所述结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件包括：
将所述源数据库信息以及目标数据库信息与所述实际参数模板中的参数进行匹配，并将匹配后的所述源数据库信息以及目标数据库信息中的值填入所述实际参数模板对应的位置，以得到中间参数文件；
将所述中间参数文件呈现在可视化界面；
获取所述用户在可视化界面对所述中间参数文件的修改数据，以得到所述最终参数文件。
7.一种基于权利要求1-6任一项所述数据实时同步参数的生成方法的同步方法，其特征在于，包括：
在指定路径调用最终参数文件和最终数据库执行脚本，所述指定路径存储有所述最终参数文件和所述最终数据库执行脚本；
将源数据库中的数据同步至目标数据库。
8.一种数据实时同步参数的生成装置，其特征在于，包括：
输入获取模块，用以至少获取用户输入的源数据库信息以及目标数据库信息，所述源数据库信息以及目标数据库信息包括数据库类型；
实际参数模板确定模块，用以根据所述数据库类型以及第一映射关系确定实际参数模板，所述参数模板包括多种参数，所述第一映射关系包括多个参数模板与多个数据库类型之间的映射关系；
最终参数文件确定模块，用以至少结合所述源数据库信息以及目标数据库信息以及所述实际参数模板形成最终参数文件；
最终数据库执行脚本确定模块，用以数据库执行脚本根据所述数据库类型以及第二映射关系确定最终数据库执行脚本，所述最终参数文件和所述最终数据库执行脚本用于供数据库同步工具调用，所述第二映射关系包括多个数据库执行脚本与多个数据库类型之间的映射关系。
9.一种基于权利要求1-6任一项所述数据实时同步参数的生成方法的同步装置，其特征在于，包括：
调用模块，用以在指定路径调用最终参数文件和最终数据库执行脚本，所述指定路径存储有所述最终参数文件和所述最终数据库执行脚本；
同步模块，用以将源数据库中的数据同步至目标数据库。
10.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序运行时执行权利要求1至6中任一项所述数据实时同步参数的生成方法的步骤，或者权利要求7所述的同步方法的步骤。
11.一种终端，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器运行所述计算机程序时执行权利要求1至6中任一项所述数据实时同步参数的生成方法的步骤，或者权利要求7所述的同步方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010670352.3A CN112287021B (zh) | 2020-07-13 | 2020-07-13 | 数据实时同步参数的生成、同步方法及装置、存储介质、终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010670352.3A CN112287021B (zh) | 2020-07-13 | 2020-07-13 | 数据实时同步参数的生成、同步方法及装置、存储介质、终端 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112287021A true CN112287021A (zh) | 2021-01-29 |
| CN112287021B CN112287021B (zh) | 2024-04-05 |
Family
ID=74420633
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010670352.3A Active CN112287021B (zh) | 2020-07-13 | 2020-07-13 | 数据实时同步参数的生成、同步方法及装置、存储介质、终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112287021B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114928620A (zh) * | 2022-05-31 | 2022-08-19 | 曙光信息产业股份有限公司 | 用户信息同步方法、装置、设备、存储介质和程序产品 |
Citations (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20050149582A1 (en) * | 2003-12-29 | 2005-07-07 | Wissmann Joseph T. | Method and system for synchronization of copies of a database |
| US20080114841A1 (en) * | 2006-11-14 | 2008-05-15 | Lambert Daniel T | System and method for interfacing with event management software |
| CN107301250A (zh) * | 2017-07-27 | 2017-10-27 | 南京南瑞集团公司 | 一种多源数据库协同备份方法 |
| CN107844519A (zh) * | 2017-10-09 | 2018-03-27 | 平安科技（深圳）有限公司 | 电子装置、数据库查询脚本生成方法及存储介质 |
| CN107908631A (zh) * | 2017-07-25 | 2018-04-13 | 平安科技（深圳）有限公司 | 数据处理方法、装置、存储介质和计算机设备 |
| CN108009087A (zh) * | 2017-11-29 | 2018-05-08 | 广州品唯软件有限公司 | 数据库测试方法、装置及计算机可读存储介质 |
| CN108763387A (zh) * | 2018-05-20 | 2018-11-06 | 湖北九州云仓科技发展有限公司 | 异构平台的大数据融合方法、电子设备、存储介质及系统 |
| CN109033193A (zh) * | 2018-06-16 | 2018-12-18 | 温州职业技术学院 | 一种数据库结构及其数据同步方法 |
| CN109597814A (zh) * | 2018-12-06 | 2019-04-09 | 广州万惠信息技术咨询服务有限公司 | 一种后台管理信息系统的在线快速交付系统 |
| CN109614446A (zh) * | 2018-11-23 | 2019-04-12 | 金色熊猫有限公司 | 数据同步方法、装置、电子设备及存储介质 |
| CN109933571A (zh) * | 2019-01-23 | 2019-06-25 | 平安科技（深圳）有限公司 | 数据库设计文档生成方法、装置及计算机可读存储介质 |
| CN109977099A (zh) * | 2019-03-16 | 2019-07-05 | 平安城市建设科技(深圳)有限公司 | 数据库部署方法、用户设备、存储介质及装置 |
| CN110032558A (zh) * | 2019-04-12 | 2019-07-19 | 重庆天蓬网络有限公司 | 一种数据同步方法、装置、系统及存储介质 |
| CN110147411A (zh) * | 2019-05-20 | 2019-08-20 | 平安科技（深圳）有限公司 | 数据同步方法、装置、计算机设备及存储介质 |
| CN110209705A (zh) * | 2019-04-25 | 2019-09-06 | 深圳壹账通智能科技有限公司 | 数据查询方法、装置、计算机设备、计算机存储介质 |
| CN110866065A (zh) * | 2019-10-15 | 2020-03-06 | 深圳市中博科创信息技术有限公司 | 一种数据交换系统、交换方法及存储介质 |
| CN111061469A (zh) * | 2019-11-06 | 2020-04-24 | 贝壳技术有限公司 | Web前端源代码生成方法、装置、存储介质及处理器 |
| CN111125065A (zh) * | 2019-12-24 | 2020-05-08 | 阳光人寿保险股份有限公司 | 可视化数据同步方法、系统、终端和计算机可读存储介质 |
| CN111324647A (zh) * | 2020-01-21 | 2020-06-23 | 北京东方金信科技有限公司 | 一种生成etl代码的方法及装置 |
| CN111339071A (zh) * | 2020-02-21 | 2020-06-26 | 苏宁云计算有限公司 | 一种多源异构数据的处理方法及装置 |
| CN111367883A (zh) * | 2020-02-25 | 2020-07-03 | 平安科技（深圳）有限公司 | 数据同步方法、装置、设备及计算机可读存储介质 |
| CN111400280A (zh) * | 2020-03-13 | 2020-07-10 | 普元信息技术股份有限公司 | 大数据环境下实现数据加密同步优化处理的系统及其方法 |
-
2020
- 2020-07-13 CN CN202010670352.3A patent/CN112287021B/zh active Active
Patent Citations (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20050149582A1 (en) * | 2003-12-29 | 2005-07-07 | Wissmann Joseph T. | Method and system for synchronization of copies of a database |
| US20080114841A1 (en) * | 2006-11-14 | 2008-05-15 | Lambert Daniel T | System and method for interfacing with event management software |
| CN107908631A (zh) * | 2017-07-25 | 2018-04-13 | 平安科技（深圳）有限公司 | 数据处理方法、装置、存储介质和计算机设备 |
| CN107301250A (zh) * | 2017-07-27 | 2017-10-27 | 南京南瑞集团公司 | 一种多源数据库协同备份方法 |
| CN107844519A (zh) * | 2017-10-09 | 2018-03-27 | 平安科技（深圳）有限公司 | 电子装置、数据库查询脚本生成方法及存储介质 |
| CN108009087A (zh) * | 2017-11-29 | 2018-05-08 | 广州品唯软件有限公司 | 数据库测试方法、装置及计算机可读存储介质 |
| CN108763387A (zh) * | 2018-05-20 | 2018-11-06 | 湖北九州云仓科技发展有限公司 | 异构平台的大数据融合方法、电子设备、存储介质及系统 |
| CN109033193A (zh) * | 2018-06-16 | 2018-12-18 | 温州职业技术学院 | 一种数据库结构及其数据同步方法 |
| CN109614446A (zh) * | 2018-11-23 | 2019-04-12 | 金色熊猫有限公司 | 数据同步方法、装置、电子设备及存储介质 |
| CN109597814A (zh) * | 2018-12-06 | 2019-04-09 | 广州万惠信息技术咨询服务有限公司 | 一种后台管理信息系统的在线快速交付系统 |
| CN109933571A (zh) * | 2019-01-23 | 2019-06-25 | 平安科技（深圳）有限公司 | 数据库设计文档生成方法、装置及计算机可读存储介质 |
| CN109977099A (zh) * | 2019-03-16 | 2019-07-05 | 平安城市建设科技(深圳)有限公司 | 数据库部署方法、用户设备、存储介质及装置 |
| CN110032558A (zh) * | 2019-04-12 | 2019-07-19 | 重庆天蓬网络有限公司 | 一种数据同步方法、装置、系统及存储介质 |
| CN110209705A (zh) * | 2019-04-25 | 2019-09-06 | 深圳壹账通智能科技有限公司 | 数据查询方法、装置、计算机设备、计算机存储介质 |
| CN110147411A (zh) * | 2019-05-20 | 2019-08-20 | 平安科技（深圳）有限公司 | 数据同步方法、装置、计算机设备及存储介质 |
| CN110866065A (zh) * | 2019-10-15 | 2020-03-06 | 深圳市中博科创信息技术有限公司 | 一种数据交换系统、交换方法及存储介质 |
| CN111061469A (zh) * | 2019-11-06 | 2020-04-24 | 贝壳技术有限公司 | Web前端源代码生成方法、装置、存储介质及处理器 |
| CN111125065A (zh) * | 2019-12-24 | 2020-05-08 | 阳光人寿保险股份有限公司 | 可视化数据同步方法、系统、终端和计算机可读存储介质 |
| CN111324647A (zh) * | 2020-01-21 | 2020-06-23 | 北京东方金信科技有限公司 | 一种生成etl代码的方法及装置 |
| CN111339071A (zh) * | 2020-02-21 | 2020-06-26 | 苏宁云计算有限公司 | 一种多源异构数据的处理方法及装置 |
| CN111367883A (zh) * | 2020-02-25 | 2020-07-03 | 平安科技（深圳）有限公司 | 数据同步方法、装置、设备及计算机可读存储介质 |
| CN111400280A (zh) * | 2020-03-13 | 2020-07-10 | 普元信息技术股份有限公司 | 大数据环境下实现数据加密同步优化处理的系统及其方法 |
Non-Patent Citations (2)
| Title |
|---|
| 李苒;段同乐;刘伯华;: "中间件技术在异构数据库同步中的应用", 计算机与网络, no. 09, 12 May 2008 (2008-05-12), pages 47 - 49 * |
| 蒋敏;董亚波;鲁东明;: "一种基于Agent的数据同步方法", 江南大学学报(自然科学版), no. 06, 30 December 2005 (2005-12-30), pages 52 - 55 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114928620A (zh) * | 2022-05-31 | 2022-08-19 | 曙光信息产业股份有限公司 | 用户信息同步方法、装置、设备、存储介质和程序产品 |
| CN114928620B (zh) * | 2022-05-31 | 2024-03-12 | 曙光信息产业股份有限公司 | 用户信息同步方法、装置、设备、存储介质和程序产品 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112287021B (zh) | 2024-04-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102167879B1 (ko) | 테스트 방법, 시스템, 기기 및 판독 가능 저장매체 | |
| US11461542B2 (en) | Providing asynchronous general user interface (GUI) input | |
| US10732611B2 (en) | System and method for generating machining control data of numerical control machine tool | |
| US20160283353A1 (en) | Automated software testing | |
| US20170177466A1 (en) | Volume testing | |
| US11126938B2 (en) | Targeted data element detection for crowd sourced projects with machine learning | |
| US11714625B2 (en) | Generating applications for versatile platform deployment | |
| WO2019056494A1 (zh) | 图表生成方法、装置、计算机设备和存储介质 | |
| CN108388623B (zh) | Er关系生成方法、装置、计算机设备及存储介质 | |
| CN112506854B (zh) | 页面模板文件的存储和页面生成方法、装置、设备及介质 | |
| US20220292056A1 (en) | Method and apparatus for modifying file name, and storage medium | |
| CN109840201B (zh) | Ui测试方法、装置、电子设备及计算机可读存储介质 | |
| CN112287021A (zh) | 数据实时同步参数的生成、同步方法及装置、存储介质、终端 | |
| KR101689984B1 (ko) | 프로그래머블 컨트롤러, 프로그래머블 컨트롤러 시스템 및 실행 에러 정보 작성 방법 | |
| JP6452882B1 (ja) | ウェブブラウザの操作を伴う業務プロセスを自動化するためのシステム、方法及びプログラム | |
| CN112685487B (zh) | 在浏览器环境下通过IndexedDB模拟关系型数据库的方法和装置 | |
| CN110659030B (zh) | Unity项目编译方法、系统、计算机设备及存储介质 | |
| CN115469849B (zh) | 一种业务处理系统、方法、电子设备和存储介质 | |
| US10678681B2 (en) | Method and device for automatic testing | |
| CN114840190A (zh) | 代码生成方法、装置、计算机设备及存储介质 | |
| CN112486847B (zh) | 错误复现的方法、装置、系统、设备以及存储介质 | |
| CN105808595A (zh) | 一种规范文件的数据库生成方法及装置 | |
| CN112507671B (zh) | 用于调整文本间距的方法、装置、以及可读介质 | |
| CN117785164A (zh) | 面向低代码平台的生成业务接口的方法、相关装置 | |
| CN112307108A (zh) | 一种基于简单配置方式的数据抽取方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |