CN103442042B - 增量数据同步方法及系统 - Google Patents
增量数据同步方法及系统 Download PDFInfo
- Publication number
- CN103442042B CN103442042B CN201310354160.1A CN201310354160A CN103442042B CN 103442042 B CN103442042 B CN 103442042B CN 201310354160 A CN201310354160 A CN 201310354160A CN 103442042 B CN103442042 B CN 103442042B
- Authority
- CN
- China
- Prior art keywords
- server end
- synchronous
- mobile terminal
- data
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Mobile Radio Communication Systems (AREA)
Abstract
本发明公开一种增量数据同步方法，包括下行同步步骤，该下行同步步骤具体包括：S101、当服务器端进行数据操作时，服务器端更新服务器端同步表中；S102、当接收到移动终端发送的同步请求时，服务器端查询并判断用户标识是否属于所述相关用户标识以及判断是否存在大于所述上次下行同步时间的新增时间撮；S103、当判定用户标识属于相关用户标识且存在大于上次下行同步时间的新增时间撮时，服务器端将与新增时间撮对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端；S104、移动终端根据接收到的操作记录和增量数据执行相应的数据操作。本发明还公开一种增量数据同步系统。
Description
技术领域
本发明涉及数据处理领域，尤其涉及一种增量数据同步方法及系统。
背景技术
随着移动互联网的普及和应用程序版以及数据内容本更新的频繁，移动终端在进行数据同步和更新时，由于无法做到有针对性的选择信息进行同步，使得在同步更新时耗费网络流量并且受有限带宽局限，导致高成本、耗费资源与时间。
发明内容
为解决上述问题，本发明采用的一个技术方案是：
提供一种增量数据同步方法，包括将服务器端的增量数据同步至移动终端的下行同步步骤，该下行同步步骤具体包括：S101、当服务器端进行数据操作时，服务器端将操作记录插入到服务器端同步表中以更新服务器端同步表，所述服务器端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；S102、当接收到移动终端发送的包含用户标识和上次下行同步时间的同步请求时，服务器端查询并判断用户标识是否属于所述相关用户标识以及判断是否存在大于所述上次下行同步时间的新增时间戳；S103、当判定用户标识属于相关用户标识且存在大于上次下行同步时间的新增时间戳时，服务器端将与新增时间戳对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端；S104、移动终端根据接收到的操作记录和增量数据执行相应的数据操作。
其中，所述增量数据同步方法还包括将移动终端的增量数据同步至服务器端的上行同步步骤，该上行同步步骤具体包括：S201、当移动终端进行数据操作时，移动终端更新移动终端同步表，所述移动终端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；S202、移动终端发送用户标识、以及与新增时间戳对应的操作记录和增量数据和发送至服务器端，所述新增时间戳为大于上次上行同步时间的时间戳；S203、服务器端根据接收到的上行同步数据包中的操作记录和增量数据执行相应的数据操作，然后执行步骤S101进行服务器端同步表更新。
本发明采用的另一个技术方案是：
提供一种增量数据同步系统，包括服务器端以及与服务器端通信连接的至少一个移动终端，所述服务器端包含下行同步模块，所述下行同步模块用于将服务器端的增量数据同步至移动终端；所述下行同步模块具体包括：第一更新模块，用于当服务器端进行数据操作时，将操作记录插入到服务器端同步表中以更新服务器端同步表，所述服务器端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；第一判断模块，用于当接收到移动终端发送的包含用户标识和上次下行同步时间的同步请求时，查询并判断用户标识是否属于所述相关用户标识以及判断是否存在大于所述上次下行同步时间的新增时间戳；以及第一发送模块，用于当所述第一判断模块判定用户标识属于相关用户标识且存在大于上次下行同步时间的新增时间戳时，将与新增时间戳对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端；所述移动终端包含下行同步操作模块，所述下行同步操作模块具体包括：请求模块，用于发送所述包含用户标识和上次下行同步时间的同步请求至服务器端；以及第一操作模块，用于根据接收到的下行同步数据包中的操作记录和增量数据执行相应的数据操作。
其中，所述移动终端还包含上行同步模块，所述上行同步模块用于将移动终端的增量数据同步至服务器端；所述上行同步模块具体包括：第二更新模块，用于当移动终端进行数据操作时，更新移动终端同步表，所述移动终端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；第二发送模块，用于发送用户标识、以及与新增时间戳对应的操作记录和增量数据至服务器端，所述新增时间戳为大于上次上行同步时间的时间戳；所述服务器端还包括上行同步操作模块，用于根据接收到的操作记录和增量数据执行相应的数据操作，并将操作记录插入到服务器端同步表中。
本发明的增量数据同步系统及方法，当服务器端或移动终端进行数据操作时，将每个同步事务中对所述数据表操作的操作记录更新至同步表，同时记载每个同步事务影响的用户标识以及赋予同步事务以时间戳。当移动终端向服务器端申请下行同步时，服务器端判断时间戳中是否存在大于服务器端发送的上次下行同步时间，并当存在时将符合要求的时间戳对应的同步事务的操作记录和增量数据同步至移动终端，同样地，移动终端在于服务器端通信连接时，将大于上次上行同步时间的时间戳对应的同步事务的操作记录和增量数据同步至服务器端，服务器端执行操作记录并更新服务器端同步表。
区别于现有技术，本发明根据时间戳和上次同步时间，实现将服务器端增量数据下行同步至移动终端，以及实现将移动终端增量数据上行同步至服务器端，从而避免了全部数据的扫描与无选择性的数据同步，提高数据同步效率节省流量。
附图说明
图1是本发明一实施方式中一种增量数据同步系统的架构图；
图2是下行同步模块的结构框图；
图3是下行同步操作模块的结构框图；
图4是上行同步模块的结构框图；
图5是上行同步操作模块的结构框图；
图6是本发明一实施方式中将服务器端的增量数据同步至移动终端的下行同步步骤的执行流程图；
图7是本发明一实施方式中将移动终端的增量数据同步至服务器端的上行同步步骤的执行流程图。
主要元件符号说明
增量数据同步系统 100；
移动终端 10；
服务器端 20；
下行同步模块 21；
第一更新模块 211；
第一判断模块 212；
第一发送模块 213；
请求模块 111；
下行操作模块 112；
下行同步操作模块 11；
第一映射模块 1121；
第一操作模块 1122；
上行同步模块 12；
第二更新模块 121；
第二发送模块 122；
上行同步操作模块 22；
第二映射模块 221；
第二操作模块 222。
具体实施方式
为详细说明本发明的技术内容、构造特征、所实现目的及效果，以下结合实施方式并配合附图详予说明。
请参阅图1，是本发明一实施方式中一种增量数据同步系统的架构图。该增量数据同步系统100包括服务器端20以及与服务器端20通信连接的至少一个移动终端10。
所述服务器端20连接有数据库30，用户通过登录用户标识获取权限与服务器端20进行通信连接，并通过服务器端20对数据库30的数据进行操作。用户标识是每个用户的唯一编号，例如QQ号。
具体地，在一实施方式中，所述移动终端10通过WEB登录用户标识，然后对数据库30的数据表进行操作，为方便描述，我们将被操作的数据表命名为操作表。在另一实施方式中，所述移动终端10装载有客户端程序，所述移动终端10通过运行客户端程序登录用户标识，然后对数据表进行操作得到操作表。
所述服务器端20包含下行同步模块21，所述下行同步模块21用于将服务器端20的增量数据同步至移动终端10。
请参阅图2，是下行同步模块的结构框图。所述下行同步模块21具体包括第一更新模块211、第一判断模块212、第一发送模块213。
第一更新模块211用于当服务器端20进行数据操作时，将操作记录插入到服务器端同步表中以更新服务器端同步表，所述服务器端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识。
第一判断模块212用于当接收到移动终端10发送的包含用户标识和上次下行同步时间的同步请求时，查询并判断用户标识是否属于所述相关用户标识以及判断是否存在大于所述上次下行同步时间的新增时间戳。
第一发送模块213用于当所述第一判断模块212判定用户标识属于相关用户标识且存在大于上次下行同步时间的新增时间戳时，将与新增时间戳对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端10。
所述移动终端10包含下行同步操作模块11，请参图3，是下行同步操作模块的结构框图，所述下行同步操作模块11具体包括请求模块111和下行操作模块112。
请求模块111用于发送所述包含用户标识和上次下行同步时间的同步请求至服务器端20。
下行操作模块112用于根据接收到的下行同步数据包中的操作记录和增量数据执行相应的数据操作。
在本实施方式中，所述操作记录包括操作表名、服务器端操作表ID，所述操作记录还包括服务器端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型。所述下行操作模块112具体包括第一映射模块1121及第一操作模块1122。所述操作类型包括增加、删除、修改。
第一映射模块1121用于根据同步映射表将操作记录中的服务器端操作表ID替换为客户端操作表ID。
第一操作模块1122用于查找到客户端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据对查找到的操作表进行数据操作。
下面结合一具体实例对下行同步方案进行说明，请参阅表一，是对数据库中时间管理系统的事件表，记载有事件名称以及与事件名称对应的事件发起人的用户标识。在本实例中，用户标识“人员1”对事件表操作，新增“开会”事件，对应该“开会”的事件ID为“1003”
表一服务器端事件表
| 事件ID | 事件名称 | 事件发起人 |
| 1001 | 上班 | 人员1 |
| 1002 | 下班 | 人员1 |
| 1003(新增) | 开会 | 人员1 |
请参阅表二，是服务器端与事件表相关的事件人员表，记录有与事件ID对应关系人的用户标识，即相关用户标识。在本实例中，用户标识“人员1”对事件人员表操作，新增“开会”事件下的两个关系人，以及对应每个联系人分别新增事件人员ID。所述“事件ID”和“事件人员ID”即为客户端操作表ID。所述事件ID和事件人员ID分别对应同步事务ID下的事件表和事件人员表。
表二服务器端事件人员表
| 事件人员ID | 事件ID | 关系人 |
| 2001(新增) | 1003 | 人员1(参会人员) |
| 2002(新增) | 1003 | 人员2(参会人员) |
请参阅表三，是服务器端同步表的同步主表，当执行上述数据操作后，建立同步表中的同步事务ID，同步表记载有同步事务ID以及进行操作的时间戳和操作记录。在本实例将同步表分为三部分描述，包括同步主表以及同步从表。同步主表中记载有同步事务ID和相应的时间戳，还记载有客户端唯一标识，非移动终端添加同步主表时这个字段留空。客户端唯一标识是与移动终端唯一对应的标识，因为一个用户标识可以在多个移动终端登陆，因此在服务器端20返回数据时应返回至用户标识所登录的移动终端，即返回至具有客户端唯一标识的移动终端。
表三服务器端同步主表
| 同步事务ID(自增) | 时间戳 | 客户端唯一标识 |
| 3001 | 2010-1-1 00:00:00 | |
| 3002 | 2010-1-1 00:00:01 |
请参阅表四，是服务器端同步表的同步从表，记载有与同步事务ID相应的操作表名、服务器端操作表ID、操作类型。另外同步表还包括服务器端操作表ID下被操作数据主键ID、操作时间、同步状态，此处表中省略。操作数据主键ID是本条数据在表中的唯一主键，当前只记录一个操作数据主键ID就可以不记录本条完整的数据信息，之后通过操作数据主键ID在同步时就可以找到对应的数据来生成同步数据包。
表四服务器端同步从表
| 同步事务ID | 操作类型 | 操作表名 | 服务器端操作表ID |
| 3001 | 新增 | 事件表 | 1003 |
| 3001 | 新增 | 事件人员表 | 2001 |
| 3001 | 新增 | 事件人员表 | 2002 |
当接收到以用户标识“人员1”登录的移动终端发送的包含上次同步时间2009-1-100:00:00的同步请求时，判定“人员1”相关用户标识且存在大于上次下行同步时间的新增时间戳2010-1-1 00:00:00，服务器端将与新增时间戳2010-1-1 00:00:00对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端具体地，根据同步从表可以知道操作了哪几张表，然后就可以把事件表，事件人员表的相关数据都发送到移动终端。
在本实例中，操作方式是新增，即是是把增量数据发送到移动终端，移动终端根据同步映射将服务器端操作表ID替换为客户端操作表ID，将对应客户端操作表ID的数据表进行新增操作。请参阅表五，为本实例的同步映射表，同步映射表记载有服务器端操作表ID与移动终端操作表ID的映射关系，还记载有与服务器端操作表ID对应的操作表明及列名。
表五同步映射表
| 服务器端操作表ID | 移动终端操作表ID | 操作表名 | 列名 |
| 1003 | 3 | 事件表 | 事件ID |
| 2001 | 21 | 事件人员表 | 事件人员ID |
| 2002 | 22 | 事件人员表 | 事件人员ID |
请参阅表六和表七，跟据同步映射表在表六移动终端事件表中新增“开会”对应的事件ID，并将相应的数据更新至移动终端事件表，同理，根据同步映射表在表七移动终端事件人员表中增加与新增的两个参会人员分别相应的事件人员ID，并将相应的数据更新至移动终端事件人员表。
表六移动终端事件表
| 事件ID | 事件名称 | 事件发起人 |
| 1 | 上班 | 人员1 |
| 2 | 下班 | 人员1 |
| 3(新增) | 开会 | 人员1 |
表七移动终端事件人员表
| 事件人员ID | 事件ID | 关系人 |
| 21(新增) | 3 | 人员1(参会人员) |
| 22(新增) | 3 | 人员2(参会人员) |
通过上述方案，可将服务器端20的增量数据同步至相关用户标识登录的移动终端10，从而实现增量数据的下行同步。
下面对将移动终端的增量数据同步至服务器的方案加以阐述。
所述移动终端10还包含上行同步模块12，所述上行同步模块12用于将移动终端10的增量数据同步至服务器端20。请参阅图4，是上行同步模块的结构框图。所述上行同步模块12具体包括第二更新模块121和第二发送模块122。
第二更新模块121用于当移动终端10进行数据操作时，更新移动终端同步表，与服务器端同步表类似，所述移动终端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识。
第二发送模块122用于发送用户标识、以及与新增时间戳对应的操作记录和增量数据至服务器端20，所述新增时间戳为大于上次上行同步时间的时间戳。
所述服务器端20还包括上行同步操作模块22，用于根据接收到的操作记录和增量数据执行相应的数据操作，并通知将操作记录插入到服务器端同步表中。
所述移动终端同步表中的操作记录包括操作表名、客户端操作表ID，所述操作记录还包括客户端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型。请参阅图5，是上行同步操作模块的结构框图，所述上行同步操作模块22具体包括第二映射模块221及第二操作模块222。
第二映射模块221用于根据同步映射表将接收到的操作记录中的客户端操作表ID替换为服务器端操作表ID。
第二操作模块222用于查找到服务器端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据，对查找到的操作表进行数据操作。
所述第二操作模块222还用于当增量数据的数据操作完成后，通知所述第一更新模块211将操作记录插入到服务器端同步表中。
通过上述方案，可将移动终端10的增量数据同步至服务器端20，从而实现增量数据的上行同步。
接下来阐述本发明一种增量数据同步方法的技术方案，该增量数据同步方法运行于所述增量数据同步系统100中，该方法包括将移动终端的增量数据同步至服务器端的下行同步步骤。请参阅图6，是本发明一实施方式中将服务器端的增量数据同步至移动终端的下行同步步骤的执行流程图。该下行同步步骤包括如下步骤：
步骤S101、当服务器端进行数据操作时，服务器端将操作记录插入到服务器端同步表中以更新服务器端同步表，所述服务器端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；
步骤S102、当接收到移动终端发送的包含用户标识和上次下行同步时间的同步请求时，服务器端查询并判断用户标识是否属于所述相关用户标识以及判断是否存在大于所述上次下行同步时间的新增时间戳；
步骤S103、当判定用户标识属于相关用户标识且存在大于上次下行同步时间的新增时间戳时，服务器端将与新增时间戳对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端；
步骤S104、移动终端根据接收到的操作记录和增量数据执行相应的数据操作。
其中，所述操作记录包括操作表名、服务器端操作表ID，所述操作记录还包括服务器端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型；所述步骤S104具体包括：
步骤S1041、移动终端根据同步映射表将操作记录中的服务器端操作表ID替换为客户端操作表ID；
步骤S1042、移动终端查找到客户端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据对查找到的操作表进行数据操作。
请参阅图7，是本发明一实施方式中将移动终端的增量数据同步至服务器端的上行同步步骤的执行流程图。所述的一种增量数据同步方法，还包括将移动终端的增量数据同步至服务器端的上行同步步骤，该上行同步步骤具体包括：
步骤S201、当移动终端进行数据操作时，移动终端更新移动终端同步表，所述移动终端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；
步骤S202、移动终端发送用户标识、以及与新增时间戳对应的操作记录和增量数据和发送至服务器端，所述新增时间戳为大于上次上行同步时间的时间戳；
步骤S203、服务器端根据接收到的上行同步数据包中的操作记录和增量数据执行相应的数据操作，并将操作记录插入到服务器端同步表中。
其中，所述操作记录包括操作表名、客户端操作表ID，所述操作记录还包括客户端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型；所述步骤S203具体包括步骤：
步骤S2031、服务器端根据同步映射表将接收到的操作记录中的客户端操作表ID替换为服务器端操作表ID；
步骤S2032、服务器端查找到服务器端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据对查找到的操作表进行数据操作，然后执行步骤S101，以将操作记录插入到服务器端同步表中。
本发明的增量数据同步系统及方法，当服务器端或移动终端进行数据操作时，将每个同步事务中对所述数据表操作的操作记录更新至同步表，同时记载每个同步事务影响的用户标识以及赋予同步事务以时间戳。当移动终端向服务器端申请下行同步时，服务器端判断时间戳中是否存在大于服务器端发送的上次下行同步时间，并当存在时将符合要求的时间戳对应的同步事务的操作记录和增量数据同步至移动终端，同样地，移动终端在于服务器端通信连接时，将大于上次上行同步时间的时间戳对应的同步事务的操作记录和增量数据同步至服务器端，服务器端执行操作记录并更新服务器端同步表。
区别于现有技术，本发明根据时间戳和上次同步时间，实现将服务器端增量数据下行同步至移动终端，以及实现将移动终端增量数据上行同步至服务器端，从而避免了全部数据的扫描与无选择性的数据同步，提高数据同步效率节省流量。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (8)
1.一种增量数据同步方法，其特征在于，包括将服务器端的增量数据同步至移动终端的下行同步步骤，该下行同步步骤具体包括：
S101、用户通过登录用户标识获取权限与服务器端进行通信连接，当通过服务器端进行数据操作时，服务器端将操作记录插入到服务器端同步表中以更新服务器端同步表，所述服务器端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；
S102、当接收到移动终端发送的包含用户标识和上次下行同步时间的同步请求时，服务器端查询并判断用户标识是否属于所述相关用户标识以及判断是否存在大于所述上次下行同步时间的新增时间戳；
S103、当判定用户标识属于相关用户标识且存在大于上次下行同步时间的新增时间戳时，服务器端将与新增时间戳对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端；
S104、移动终端根据接收到的操作记录和增量数据执行相应的数据操作。
2.根据权利要求1所述的一种增量数据同步方法，其特征在于，所述操作记录包括操作表名、服务器端操作表ID，所述操作记录还包括服务器端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型，所述步骤S104具体包括：
S1041、移动终端根据同步映射表将操作记录中的服务器端操作表ID替换为客户端操作表ID；
S1042、移动终端查找到客户端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据对查找到的操作表进行数据操作。
3.根据权利要求1或2所述的一种增量数据同步方法，其特征在于，还包括将移动终端的增量数据同步至服务器端的上行同步步骤，该上行同步步骤具体包括：
S201、当移动终端进行数据操作时，移动终端更新移动终端同步表，所述移动终端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；
S202、移动终端发送用户标识、以及与新增时间戳对应的操作记录和增量数据和发送至服务器端，所述新增时间戳为大于上次上行同步时间的时间戳；
S203、服务器端根据接收到的上行同步数据包中的操作记录和增量数据执行相应的数据操作，然后执行步骤S101进行服务器端同步表更新。
4.根据权利要求3所述的一种增量数据同步方法，其特征在于，所述操作记录包括操作表名、客户端操作表ID，所述操作记录还包括客户端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型；所述步骤S203具体包括步骤：
S2031、服务器端根据同步映射表将接收到的操作记录中的客户端操作表ID替换为服务器端操作表ID；
S2032、服务器端查找到服务器端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据对查找到的操作表进行数据操作，然后执行步骤S101进行服务器端同步表更新。
5.一种增量数据同步系统，其特征在于，包括服务器端以及与服务器端通信连接的至少一个移动终端，所述服务器端包含下行同步模块，所述下行同步模块用于将服务端的增量数据同步至移动终端；
所述下行同步模块具体包括：
第一更新模块，用于用户通过登录用户标识获取权限与服务器端进行通信连接，当通过服务器端进行数据操作时，将操作记录插入到服务器端同步表中以更新服务器端同步表，所述服务器端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；
第一判断模块，用于当接收到移动终端发送的包含用户标识和上次下行同步时间的同步请求时，查询并判断用户标识是否属于所述相关用户标识以及判断是否存在大于所述上次下行同步时间的新增时间戳；以及
第一发送模块，用于当所述第一判断模块判定用户标识属于相关用户标识且存在大于上次下行同步时间的新增时间戳时，将与新增时间戳对应的操作记录和增量数据打包为下行同步数据包并发送至移动终端；
所述移动终端包含下行同步操作模块，所述下行同步操作模块具体包括：
请求模块，用于发送所述包含用户标识和上次下行同步时间的同步请求至服务器端；以及
第一操作模块，用于根据接收到的下行同步数据包中的操作记录和增量数据执行相应的数据操作。
6.根据权利要求5所述的一种增量数据同步系统，其特征在于，所述操作记录包括操作表名、服务器端操作表ID，所述操作记录还包括服务器端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型；所述第一操作模块具体包括：
第一映射模块，用于根据同步映射表将操作记录中的服务器端操作表ID替换为客户端操作表ID；
第一操作模块，用于查找到客户端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据对查找到的操作表进行数据操作。
7.根据权利要求5或6所述的一种增量数据同步系统，其特征在于，所述移动终端还包含上行同步模块，所述上行同步模块用于将移动终端的增量数据同步至服务器端；
所述上行同步模块具体包括：
第二更新模块，用于当移动终端进行数据操作时，更新移动终端同步表，所述移动终端同步表记载有同步事务ID、时间戳、操作记录以及相关用户标识；
第二发送模块，用于发送用户标识、以及与新增时间戳对应的操作记录和增量数据至服务器端，所述新增时间戳为大于上次上行同步时间的时间戳；
所述服务器端还包括上行同步操作模块，用于根据接收到的操作记录和增量数据执行相应的数据操作，并将操作记录插入到服务器端同步表中。
8.根据权利要求7所述的一种增量数据同步系统，其特征在于，所述操作记录包括操作表名、客户端操作表ID，所述操作记录还包括客户端操作表ID下被操作数据主键ID、操作时间、同步状态、以及操作类型；所述上行同步操作模块具体包括：
第二映射模块，用于根据同步映射表将接收到的操作记录中的客户端操作表ID替换为服务器端操作表ID；
第二操作模块，用于查找到服务器端操作表ID对应的操作表，根据操作类型和与操作数据主键ID相应的增量数据对查找到的操作表进行数据操作，并通知所述第一更新模块更新服务器端同步表。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310354160.1A CN103442042B (zh) | 2013-08-14 | 2013-08-14 | 增量数据同步方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310354160.1A CN103442042B (zh) | 2013-08-14 | 2013-08-14 | 增量数据同步方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103442042A CN103442042A (zh) | 2013-12-11 |
| CN103442042B true CN103442042B (zh) | 2017-01-04 |
Family
ID=49695707
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310354160.1A Active CN103442042B (zh) | 2013-08-14 | 2013-08-14 | 增量数据同步方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103442042B (zh) |
Families Citing this family (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103841180B (zh) * | 2014-01-17 | 2018-07-03 | 北京京东尚科信息技术有限公司 | 一种基于操作指令的网络数据同步方法、装置、终端设备和服务器 |
| CN103793500A (zh) * | 2014-01-23 | 2014-05-14 | 浪潮集团山东通用软件有限公司 | 基于增量的主数据同步方法 |
| CN103902663A (zh) * | 2014-03-10 | 2014-07-02 | 联想(北京)有限公司 | 文件同步方法和装置 |
| CN103970854B (zh) * | 2014-05-05 | 2017-05-17 | 神华集团有限责任公司 | Sap ecc端与sap bw端之间增量凭证信息同步方法 |
| CN104270424B (zh) * | 2014-09-17 | 2018-11-27 | 深圳创维数字技术有限公司 | 一种数据库同步方法、服务器及系统 |
| CN104580454A (zh) * | 2014-12-31 | 2015-04-29 | 乐视网信息技术（北京）股份有限公司 | 一种数据同步方法、装置及系统 |
| JP6611594B2 (ja) * | 2015-03-16 | 2019-11-27 | キヤノン株式会社 | データの同期を行う情報処理装置、データ同期方法およびプログラム |
| EP3070619B1 (en) | 2015-03-16 | 2023-08-16 | Canon Kabushiki Kaisha | Information processing apparatuses performing synchronization of data and data synchronization methods |
| CN104967653B (zh) * | 2015-03-23 | 2018-04-06 | 腾讯科技（深圳）有限公司 | 数据同步拉取、下发方法和装置 |
| CN106209948B (zh) * | 2015-05-07 | 2019-07-05 | 阿里巴巴集团控股有限公司 | 一种数据推送方法及装置 |
| CN105007310A (zh) * | 2015-06-30 | 2015-10-28 | 深圳走天下科技有限公司 | 信息同步方法、装置和系统 |
| CN105302895B (zh) * | 2015-10-21 | 2018-11-27 | 浪潮通用软件有限公司 | 一种数据缓存同步方法、服务器和客户端 |
| CN106886528A (zh) * | 2015-12-16 | 2017-06-23 | 天脉聚源（北京）科技有限公司 | 一种文件增量同步方法及系统 |
| CN106250476B (zh) * | 2016-07-29 | 2020-11-20 | 国网湖北省电力有限公司信息通信公司 | 一种更新和同步白名单的方法、装置和系统 |
| CN106209608B (zh) * | 2016-09-14 | 2020-01-14 | Oppo广东移动通信有限公司 | 一种聊天信息区别同步的方法及装置 |
| WO2018058633A1 (zh) * | 2016-09-30 | 2018-04-05 | 深圳市华傲数据技术有限公司 | 基于增量的数据处理方法及装置 |
| CN108322492B (zh) * | 2017-01-16 | 2021-09-17 | 医渡云（北京）技术有限公司 | 医疗数据同步方法及装置 |
| CN106911788B (zh) * | 2017-03-08 | 2020-06-23 | 海信视像科技股份有限公司 | 一种服务器向终端发送操作记录的方法及装置、终端 |
| CN107741994B (zh) * | 2017-11-09 | 2021-09-07 | 校脸科技（北京）有限公司 | 一种数据更新方法及装置 |
| CN108536752B (zh) * | 2018-03-13 | 2021-11-09 | 北京信安世纪科技有限公司 | 一种数据同步方法、装置和设备 |
| CN110413684B (zh) * | 2018-04-25 | 2023-05-02 | 杭州海康存储科技有限公司 | 一种数据库同步方法、装置及系统 |
| CN109684327B (zh) * | 2018-11-23 | 2021-04-13 | 武汉达梦数据库有限公司 | 一种数据库外部链接的数据获取方法 |
| CN109471906A (zh) * | 2018-11-28 | 2019-03-15 | 立旃（上海）科技有限公司 | 基于区块链的说明书存入取出方法及装置 |
| CN113569547A (zh) * | 2020-04-28 | 2021-10-29 | 北京国双科技有限公司 | 警务系统测试方法及相关装置 |
| CN112231152A (zh) * | 2020-12-11 | 2021-01-15 | 北京国导科技有限公司 | 数据同步方法、远程服务器、客户端以及系统 |
| CN113206891B (zh) * | 2021-05-31 | 2022-10-14 | 浙江大华技术股份有限公司 | 元数据上报的调度方法、存储系统、调度装置及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101102577A (zh) * | 2006-07-07 | 2008-01-09 | 中兴通讯股份有限公司 | 无线通信基站系统前后台数据库表数据增量同步方法 |
| CN101110706A (zh) * | 2007-07-23 | 2008-01-23 | 中兴通讯股份有限公司 | 一种配置数据同步方法 |
| CN102638578A (zh) * | 2012-03-29 | 2012-08-15 | 深圳市高正软件有限公司 | 一种基于移动设备的数据同步方法及系统 |
| CN102857570A (zh) * | 2012-09-13 | 2013-01-02 | 清华大学 | 文件的云同步方法及云存储服务器 |
-
2013
- 2013-08-14 CN CN201310354160.1A patent/CN103442042B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101102577A (zh) * | 2006-07-07 | 2008-01-09 | 中兴通讯股份有限公司 | 无线通信基站系统前后台数据库表数据增量同步方法 |
| CN101110706A (zh) * | 2007-07-23 | 2008-01-23 | 中兴通讯股份有限公司 | 一种配置数据同步方法 |
| CN102638578A (zh) * | 2012-03-29 | 2012-08-15 | 深圳市高正软件有限公司 | 一种基于移动设备的数据同步方法及系统 |
| CN102857570A (zh) * | 2012-09-13 | 2013-01-02 | 清华大学 | 文件的云同步方法及云存储服务器 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103442042A (zh) | 2013-12-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103442042B (zh) | 增量数据同步方法及系统 | |
| CN102710554B (zh) | 分布式消息系统和分布式消息系统的服务状态检测方法 | |
| CN109542865A (zh) | 分布式集群系统配置文件同步方法、装置、系统及介质 | |
| CN106294713A (zh) | 基于增量日志解析的数据同步方法和数据同步装置 | |
| CN108965469B (zh) | 区块链网络成员动态管理方法、装置、设备及存储介质 | |
| CA2751149C (en) | Method and apparatus for tracking device management data changes | |
| CN103179099B (zh) | 一种接入开放网站平台的统一认证方法和一种网站平台 | |
| CN103379019B (zh) | 微博中的消息推送方法及装置、系统 | |
| WO2014096954A3 (en) | A method and device to connect to a wireless network | |
| CN110391974A (zh) | 一种消息同步方法、服务端、终端及系统 | |
| US9596304B2 (en) | Distributed server election with imperfect clock synchronization | |
| CN105634778A (zh) | 实现vnf实例化的方法、系统及nfvo和vnfm | |
| CN103440142A (zh) | 基于gprs远程升级及动态加载方法 | |
| CN106611001A (zh) | 虚拟机数据库表数据一致性的校验方法、装置及系统 | |
| CN104301428A (zh) | 一种数据同步方法及服务器 | |
| CN105991592A (zh) | 同人身份维护方法、装置及服务器 | |
| CN117271147A (zh) | 一种数据同步处理方法和装置 | |
| CN104506893A (zh) | 一种信息更新方法、云端服务器及crm服务器 | |
| CN102256211B (zh) | M2m终端基于群组实现应用的方法和系统 | |
| CN102647432A (zh) | 一种认证信息传输方法、装置及认证中间件 | |
| CN107402826B (zh) | 一种以异步方式进行远程过程调用的方法及装置 | |
| CN107741994A (zh) | 一种数据更新方法及装置 | |
| CN103152428A (zh) | 云平台上节点间进行服务通信的方法 | |
| CN107786661B (zh) | 信息同步方法 | |
| CN107734034B (zh) | 服务器对接系统、方法、计算机可读存储介质及前置机 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |