CN109634972A - 一种数据同步时使用rowid定位的方法 - Google Patents
一种数据同步时使用rowid定位的方法 Download PDFInfo
- Publication number
- CN109634972A CN109634972A CN201811338611.1A CN201811338611A CN109634972A CN 109634972 A CN109634972 A CN 109634972A CN 201811338611 A CN201811338611 A CN 201811338611A CN 109634972 A CN109634972 A CN 109634972A
- Authority
- CN
- China
- Prior art keywords
- data
- rowid
- value
- tables
- synchronous
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开一种数据同步时使用ROWID定位的方法，包括以下步骤：步骤S1、同步新增数据时，指定目的端数据表中ROWID值，使得源端数据表的ROWID值与目的端数据表的ROWID值一一对应；步骤S2、同步修改数据时，通过匹配ROWID值的方式进行数据修改操作的定位，并完成数据修改操作的同步。本发明提供的数据同步时使用ROWID定位的方法，通过指定目的端数据表ROWID值的方式，利用ROWID列默认是表的聚集主键优势，使用ROWID值绑定实现修改操作同步的批量操作，数据同步性能高、效率高。
Description
技术领域
本发明涉及数据同步技术领域，具体涉及一种数据同步时使用ROWID定位的方法。
背景技术
在数据同步时,通常使用参数绑定批量执行，以加快执行速度。但是有一些数据表没有主键，在同步无主键的数据表时性能往往是很差的,因为数据表没有主键,就无法使用主键绑定批量执行,只能单行执行,造成同步性能低。而且,由于目的端数据表同样也没有主键,因此同步的SQL在数据库中的执行效率同样非常的低.
现有技术中对于没有主键的数据表通常采用两种同步方式，一种是通过全列匹配的方式修改数据，还有一种是在目的端数据表上额外添加一个ROWID映射列来存放源端的ROWID值，然后通过匹配ROWID映射列来同步数据修改操作。第一种方式由于需要全列匹配，因此同步性能很差；第二种方式会破坏目的端数据表的表结构,并且还需要为ROWID映射列额外的建立索引，较为费时，效率低下。
发明内容
本发明的目的在于克服上述技术不足，提供一种数据同步时使用ROWID定位的方法，解决现有技术中数据表没有主键时，数据同步性能差、需要建立索引、效率低下的技术问题。
为达到上述技术目的，本发明的技术方案提供一种数据同步时使用ROWID定位的方法，包括以下步骤：
步骤S1、同步新增数据时，指定目的端数据表中ROWID值，使得源端数据表的ROWID值与目的端数据表的ROWID值一一对应；
步骤S2、同步修改数据时，通过匹配ROWID值的方式进行数据修改操作的定位，并完成数据修改操作的同步。
与现有技术相比，本发明的有益效果包括：通过指定目的端数据表ROWID值的方式，使得源端数据表的ROWID值与目的端数据表的ROWID值一一对应，由于ROWID是表的聚集主键，相当于一个隐形的主键。同步数据修改操作时，即可将ROWID值当做主键，根据ROWID值进行定位，使用ROWID值绑定实现修改操作同步的批量操作。
附图说明
图1是本发明提供的数据同步时使用ROWID定位的方法的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
实施例1：
如图1所示，本发明的实施例1提供了一种数据同步时使用ROWID定位的方法，包括以下步骤：
步骤S1、同步新增数据时，指定目的端数据表中ROWID值，使得源端数据表的ROWID值与目的端数据表的ROWID值一一对应；
步骤S2、同步修改数据时，通过匹配ROWID值的方式进行数据修改操作的定位，并完成数据修改操作的同步。
在目的端数据库上,数据表中的记录是用ROWID来组织的,ROWID值具有唯一性，并且提供了允许在插入数据时自定义ROWID值的功能。本发明利用ROWID值的唯一性，提供了一种数据同步时使用ROWID定位的方法，通过指定目的端数据表中ROWID值的方式，使得源端数据表的ROWID值与目的端数据表的ROWID值一一对应，从而使得ROWID值成为一个隐形的主键，通过ROWID值来定位目的端数据表中与待同步的数据修改操作相应的位置，通过绑定ROWID值来批量执行数据修改操作的同步，不需要在数据表上额外创建主键或索引，也不会改变目的端数据表的结构，数据同步性能高、效率高。
具体的，本发明的应用需要目的数据库提供插入数据时，允许为每行数据指定ROWID值的功能。
优选的，所述指定目的端数据表中ROWID值具体为：
通过INSRT操作指定目的端数据表中ROWID值。
通过INSRT操作指定目的段数据表中ROWID值，方便快捷，使得ROWID值成为联系源端数据表与目的端数据表的纽带，通过ROWID值即可快速定位到源端数据表与目的端数据表的相应位置，从而使得数据修改操作可以通过绑定ROWID值实现批量执行，提高同步效率。
优选的，所述步骤S2具体为：
根据所述数据修改操作所关联的数据在源端数据表中的ROWID值，定位至所述目的端数据表中ROWID值所在对应位置，在所述目的端数据表的对应位置执行所述数据修改操作，完成数据修改操作的同步。
将目的端数据表中ROWID值指定为与源端数据表一一对应后，ROWID值就成为了隐形的主键，可以用来联系源端数据表和目的端数据表，通过ROWID值即可快速定位到源端数据表与目的端数据表的相应位置，从而使得数据修改操作可以通过绑定ROWID值实现批量执行，提高同步效率。
实施例2：
本发明的实施例1提供了一种计算机存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现以上任一实施例所述的数据同步时使用ROWID定位的方法。
本发明提供的计算机存储介质，用于实现上述数据同步时使用ROWID定位的方法，因此，上述数据同步时使用ROWID定位的方法具备的技术效果，计算机存储介质同样具备，在此不再赘述。
以上所述本发明的具体实施方式，并不构成对本发明保护范围的限定。任何根据本发明的技术构思所做出的各种其他相应的改变与变形，均应包含在本发明权利要求的保护范围内。
Claims (4)
1.一种数据同步时使用ROWID定位的方法，其特征在于，包括以下步骤：
步骤S1、同步新增数据时，指定目的端数据表中ROWID值，使得源端数据表的ROWID值与目的端数据表的ROWID值一一对应；
步骤S2、同步修改数据时，通过匹配ROWID值的方式进行数据修改操作的定位，并完成数据修改操作的同步。
2.根据权利要求1所述的数据同步时使用ROWID定位的方法，其特征在于，所述指定目的端数据表中ROWID值具体为：
通过INSERT操作指定目的端数据表中ROWID值。
3.根据权利要求1所述的数据同步时使用ROWID定位的方法，其特征在于，所述步骤S2具体为：
根据所述数据修改操作所关联的数据在源端数据表中的ROWID值，定位至所述目的端数据表中ROWID值所在对应位置，在所述目的端数据表的对应位置执行所述数据修改操作，完成数据修改操作的同步。
4.一种计算机存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-4任一所述的数据同步时使用ROWID定位的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811338611.1A CN109634972A (zh) | 2018-11-12 | 2018-11-12 | 一种数据同步时使用rowid定位的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811338611.1A CN109634972A (zh) | 2018-11-12 | 2018-11-12 | 一种数据同步时使用rowid定位的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109634972A true CN109634972A (zh) | 2019-04-16 |
Family
ID=66067710
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811338611.1A Pending CN109634972A (zh) | 2018-11-12 | 2018-11-12 | 一种数据同步时使用rowid定位的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109634972A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113190281A (zh) * | 2021-04-08 | 2021-07-30 | 武汉达梦数据库股份有限公司 | 一种基于rowid区间的初始化装载方法与装置 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101187888A (zh) * | 2007-12-11 | 2008-05-28 | 浪潮电子信息产业股份有限公司 | 一种异构环境中复制数据库数据的方法 |
| US20090172051A1 (en) * | 2007-12-31 | 2009-07-02 | Bill Huffman | Online incremental database dump |
| CN102375890A (zh) * | 2011-11-02 | 2012-03-14 | 杭州合众信息工程有限公司 | 一种数据库无主键源端表的数据同步方法 |
| CN102752372A (zh) * | 2012-06-18 | 2012-10-24 | 天津神舟通用数据技术有限公司 | 一种基于文件的数据库同步方法 |
| CN106815326A (zh) * | 2016-12-28 | 2017-06-09 | 中国民航信息网络股份有限公司 | 一种检测无主键数据表一致性的系统及方法 |
| CN107678888A (zh) * | 2017-09-30 | 2018-02-09 | 北京九桥同步软件有限公司 | 数据库数据备份方法及装置 |
-
2018
- 2018-11-12 CN CN201811338611.1A patent/CN109634972A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101187888A (zh) * | 2007-12-11 | 2008-05-28 | 浪潮电子信息产业股份有限公司 | 一种异构环境中复制数据库数据的方法 |
| US20090172051A1 (en) * | 2007-12-31 | 2009-07-02 | Bill Huffman | Online incremental database dump |
| CN102375890A (zh) * | 2011-11-02 | 2012-03-14 | 杭州合众信息工程有限公司 | 一种数据库无主键源端表的数据同步方法 |
| CN102752372A (zh) * | 2012-06-18 | 2012-10-24 | 天津神舟通用数据技术有限公司 | 一种基于文件的数据库同步方法 |
| CN106815326A (zh) * | 2016-12-28 | 2017-06-09 | 中国民航信息网络股份有限公司 | 一种检测无主键数据表一致性的系统及方法 |
| CN107678888A (zh) * | 2017-09-30 | 2018-02-09 | 北京九桥同步软件有限公司 | 数据库数据备份方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| NOPRIANTO等: "Server for SQLite database：Multithreaded HTTP server with synchronized database access and JSON data-interchange", 《2017 19TH INTERNATIONAL CONFERENCE ON ADVANCED COMMUNICATION TECHNOLOGY(ICACT)》 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113190281A (zh) * | 2021-04-08 | 2021-07-30 | 武汉达梦数据库股份有限公司 | 一种基于rowid区间的初始化装载方法与装置 |
| CN113190281B (zh) * | 2021-04-08 | 2022-05-17 | 武汉达梦数据库股份有限公司 | 一种基于rowid区间的初始化装载方法与装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111339041B (zh) | 文件解析入库、文件生成方法及装置 | |
| JP6225261B2 (ja) | データを記憶する方法及び装置 | |
| CN105354036B (zh) | 数据库操作代码生成方法及装置 | |
| CN104216961B (zh) | 一种数据处理方法和装置 | |
| CN103778251B (zh) | 面向大规模rdf图数据的sparql并行查询方法 | |
| US11188535B2 (en) | Distributed join operation processing method, apparatus, device, and storage medium | |
| CN111078672B (zh) | 数据库的数据对比方法及装置 | |
| CN103927314B (zh) | 一种数据批量处理的方法和装置 | |
| CN105930325B (zh) | 一种文件报表比对差异的逆向分析方法及装置 | |
| CN107526733A (zh) | 一种拉链表数据存储方法和装置 | |
| CN103970833A (zh) | 一种基于日志的异构数据库同步系统中双向同步数据循环的解决方法 | |
| CN106777387B (zh) | 一种基于HBase的物联网大数据存取方法 | |
| CN103761102B (zh) | 一种统一数据服务平台及其实现方法 | |
| CN105095425A (zh) | 一种数据库的跨库结转方法及装置 | |
| CN109885614A (zh) | 一种数据同步的方法和装置 | |
| CN105608142A (zh) | 一种Json数据的存储方法及装置 | |
| WO2005015438A3 (en) | Meta model for an enterprise service architecture | |
| CN105100195A (zh) | 一种数据传输方法及其装置 | |
| CN109634972A (zh) | 一种数据同步时使用rowid定位的方法 | |
| CN107423321B (zh) | 适用大批量小文件云存储的方法及其装置 | |
| TWI539309B (zh) | 資料庫轉換的同步系統及其方法 | |
| CN103914293B (zh) | 生成页面的方法及服务器 | |
| CN104615459A (zh) | 一种MoCA设备参数配置方法及装置 | |
| US20120254105A1 (en) | Synchronizing Records Between Databases | |
| CN103186610A (zh) | 数据同步方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB03 | Change of inventor or designer information | ||
| CB03 | Change of inventor or designer information |
Inventor after: Sun Feng Inventor after: Fu Quan Inventor before: Sun Feng Inventor before: Fu Quan Inventor before: Yang Chun |
|
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Applicant after: Wuhan dream database Co.,Ltd. Address before: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Applicant before: WUHAN DAMENG DATABASE Co.,Ltd. |
|
| CB03 | Change of inventor or designer information | ||
| CB03 | Change of inventor or designer information |
Inventor after: Sun Feng Inventor before: Sun Feng Inventor before: Fu Quan |
|
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190416 |