CN115361399A - 一种多终端数据同步方法、装置及系统 - Google Patents

Abstract

本发明公开了一种多终端数据同步方法、装置及系统，属于互联网技术领域。所述多终端数据同步方法包括数据上传步骤和数据下载步骤。所述数据上传步骤包括：将作业数据存入本地数据库；按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID；将所述云端自增ID与本地数据库中对应的作业数据进行关联。所述数据下载步骤包括：向云服务器发送下载请求；接收云服务器根据所述下载请求返回的作业数据。本发明采用双ID设计的方式保证了数据的唯一性。

Description

一种多终端数据同步方法、装置及系统

技术领域

本发明属于互联网技术领域，特别是涉及一种多终端数据同步方法、装置及系统。

背景技术

在一些需要离线作业的场景，如隧道、涵洞等无公网环境下作业时，需要从平台拉取基础数据，待到离线作业完成之后再将数据统一上传至平台。在数据的同步过程中如何保证本地的数据以及平台的数据能正常显示及各表间关联关系一致才是最重要的。如果仅是在线环境，软件开发者仅采用数据库的主键唯一约束即可实现数据的唯一性，但在离线环境以及多终端作业的情况下就不能仅靠数据库的唯一性来实现数据的唯一性。

目前行业内离线作业环境一般采用GUID（globally unique IDentifier）生成唯一ID来保证唯一性，但GUID对于环境本身有依赖，不同终端、设备间生成的GUID可能会重复，在一些极限情况下会有生成的GUID冲突的情况。同时，GUID 长度是128bit(16字节(128位)) 会增加数据及索引的占有量，显著增加数据库的成本开销，对数据库的性能会有很大的影响，降低了数据库查询性能。

发明内容

本发明的目的在于克服现有技术的不足，提供一种多终端数据同步方法、装置及系统。

本发明的目的是通过以下技术方案来实现的：

根据本发明的第一方面，一种多终端数据同步方法，包括数据上传步骤和数据下载步骤；

所述数据上传步骤包括：

将作业数据存入本地数据库；

按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；

将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID；

将所述云端自增ID与本地数据库中对应的作业数据进行关联；

所述数据下载步骤包括：

向云服务器发送下载请求；

接收云服务器根据所述下载请求返回的作业数据。

进一步地，将作业数据存入本地数据库，包括：

获取作业数据；

判断是否存在本地数据库，若不存在本地数据库，则创建本地数据库；

将所述作业数据逐条存入本地数据库。

进一步地，将作业数据上传云服务器时，若作业数据上传失败，则为该作业数据设置未上传标识。

进一步地，作业数据成功上传云服务器后，判断是否存在与该作业数据关联的数据表，若存在与该作业数据关联的数据表，则将该作业数据对应的云端自增ID写入该数据表。

进一步地，采用Long类型来存储本地自增ID和云端自增ID。

进一步地，若接收云服务器根据所述下载请求返回的作业数据时有其他客户端正在上传作业数据，则云服务器返回的数据为云服务器接收到下载请求以前已经成功上传的作业数据。

进一步地，所述方法还包括：

在作业数据下载完成时根据云服务器返回的当前时间戳更新本地数据库中相应的同步时间戳；

其中，所述同步时间戳用于记录对应表的同步时间，以便云服务器根据接收到的下载请求中的同步时间戳返回相应的作业数据。

进一步地，所述方法还包括：

检测作业数据是否异常，并在检测到作业数据异常时采用导出数据库机制将所述本地数据库进行备份。

根据本发明的第二方面，一种多终端数据同步装置，包括：

数据存储模块，用于将作业数据存入本地数据库，以及按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；

数据上传模块，用于将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID，以及将所述云端自增ID与本地数据库中对应的作业数据进行关联；

数据下载模块，用于向云服务器发送下载请求，接收云服务器根据所述下载请求返回的作业数据。

根据本发明的第三方面，一种多终端数据同步系统，包括：

客户端，用于将作业数据存入本地数据库，按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID；将所述云端自增ID与本地数据库中对应的作业数据进行关联；向云服务器发送下载请求，接收云服务器根据所述下载请求返回的作业数据；

云服务器，用于在接收到成功上传的作业数据时按照接收到的作业数据的顺序为作业数据生成云端自增ID，并将该云端自增ID返回给对应的客户端；根据来自客户端的下载请求向客户端返回相应的作业数据。

本发明的有益效果是：本发明采用本地双ID的设计方式，客户端存储的表结构中会有一个本地自增ID和一个云端自增ID。在作业数据上传时采用单条上传的方式，并利用数据库的自增ID不重复的机制生成云端自增ID，使得作业数据与云端自增ID一一对应，从而保证了数据的唯一性。

附图说明

图1为本发明中多终端数据同步方法的一个实施例的流程图；

图2为本发明中多终端数据同步装置的一个实施例的组成框图；

图3为本发明中多终端数据同步系统的一个实施例的组成框图。

具体实施方式

下面将结合实施例，对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

参阅图1-图3，本发明提供一种多终端数据同步方法、装置及系统：

本发明的第一方面提供了一种多终端数据同步方法，如图1所示，所述方法包括数据上传步骤和数据下载步骤。

所述数据上传步骤包括步骤S100～步骤S400，以下详细说明。

S100.客户端将作业数据存入本地数据库。

在一些实施例中，将作业数据存入本地数据库，包括：

S110.客户端获取作业数据。

一般的，所述客户端可以自行采集作业数据，也可以是其他数据采集设备将作业数据发送给客户端。

S120.客户端判断是否存在本地数据库，若不存在本地数据库，则创建本地数据库。

即，判断客户端中是否已经存在本地数据库，如果客户端中不存在本地数据库，则在客户端中新建本地数据库。

本实施例中本地数据库的类型不限，可以是SqlLite，也可以是一些其他的数据库。

S130.客户端将所述作业数据逐条存入本地数据库。

S200.客户端按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID。

本实施例中，利用数据库的自增ID不重复的机制为每条作业数据设置本地自增ID。

S300.将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID。

本实施例中在上传作业数据时采用单条上传的方式，单条上传的好处是作业数据可以一一对应起来，当一条作业数据上传失败时可停止此表继续上传，从而避免造成本地数据已上传但云端自增ID更新失败的问题，保证了本地数据表间的关联关系不变。

由于在没有网络的情况下云端自增ID的字段为空，无法操作，因此云端自增ID只用于维护多表关联外键，本地作业数据的交互使用本地自增ID。

在一些实施例中，云服务器根据接收到作业数据的先后顺序为每条接收到的作业数据生成云端自增ID，即云服务器通过数据库的自增ID不重复的机制来控制云端自增ID的唯一性，并将云端自增ID通过API返回对应的客户端。例如，当A手机和B手机同时上传作业数据时，云服务器返回给A手机的云端自增ID为1、3、5，云服务器返回给B手机的云端自增ID为2、4、6，因此，即使多个客户端同时上传作业数据，生成的每个云端自增ID也具有唯一性。

在一些实施例中，将作业数据上传云服务器时，若作业数据上传失败，则为该作业数据设置未上传标识。一般的，作业数据上传失败理论上只存在于网络异常时，通过为上传失败的作业数据设置未上传标识，便于网络正常时再次上传，直到上传成功为止，可有效避免数据遗漏。此外，也可以为上传成功的作业数据设置相应的标识。

S400.客户端将所述云端自增ID与本地数据库中对应的作业数据进行关联。

本实施例中，客户端和云服务器采用Long类型来存储本地自增ID和云端自增ID，使得数据库主键及主键索引所占的空间较小，从而提升了数据查询时索引的命中效率和查询速度。

在一些实施例中，作业数据成功上传云服务器后，判断是否存在与该作业数据关联的数据表，若存在与该作业数据关联的数据表，则将该作业数据对应的云端自增ID写入该数据表。

所述数据下载步骤包括步骤S500～步骤S600，以下详细说明。

S500.客户端向云服务器发送下载请求。

S600.客户端接收云服务器根据所述下载请求返回的作业数据。

若客户端接收云服务器根据所述下载请求返回的作业数据时有其他客户端正在上传作业数据，则云服务器返回的数据为云服务器接收到下载请求以前已经成功上传的作业数据。例如，目前云服务器的数据库存在数据1、数据2、数据3和数据4，此时其他客户端还在上传作业数据，但云服务器只返回数据1、数据2、数据3、数据4以及相应的时间戳，下次再触发下载时会从数据4之后开始同步，可以确保不会出现数据丢失。

在一些实施例中，所述方法还包括：客户端在作业数据下载完成时根据云服务器返回的当前时间戳更新本地数据库中相应的同步时间戳；其中，所述同步时间戳用于记录对应表的同步时间，以便云服务器根据接收到的下载请求中的同步时间戳返回相应的作业数据。

本地数据库的每个表都会有自己的同步时间戳（初始值一般为0），客户端需要下载数据时需要拿着目标表所对应的同步时间戳通过api接口从云服务器请求数据，云服务器会返回创建时间（表中的每条作业数据会都有创建时间，创建时间可以为作业数据的采集时间）大于客户端所发同步时间戳的作业数据（即，以前未下载过的作业数据），同时会返回当前时间戳，客户端在作业数据成功下载完成后利用该当前时间戳更新对应的同步时间戳。在作业数据下载中途失败时，对应表的同步时间戳不会更新，仍保持上次成功下载作业数据时的同步时间戳。

在一些实施例中，所述方法还包括：检测作业数据是否异常，并在检测到作业数据异常时采用导出数据库机制将所述本地数据库进行备份，可有效避免数据丢失。

数据异常一般是程序不完善造成的，比如说拉取云服务器端数据时在本地没有把主外键关系构建正确，导致查询时数据展示的不正确，亦或者同步的接口发生错误了导致数据没有正确的推送到云服务器。如果是上传时接口报错，或者接口返回成功的标志但数据还没有上传，则需要拿到客户端的数据库文件来手动交由开发人员上传(因为接口返回成功标志的话本地的这条数据的状态也会更新为“已上传”状态，这种情况下再次点击“同步”按钮程序不会把该条数据重新上传)。

本发明的第二方面提供了一种多终端数据同步装置，如图2所示，所述装置包括数据存储模块、数据上传模块和数据下载模块。

数据存储模块，用于将作业数据存入本地数据库，以及按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID。本实施例中，所述数数据存储模块可用于执行图1所示的步骤S100-步骤S200，关于所述数据叠加模块的具体描述可参对所述步骤S100-步骤S200的描述。

数据上传模块，用于将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID，以及将所述云端自增ID与本地数据库中对应的作业数据进行关联。本实施例中，所述数据上传模块可用于执行图1所示的步骤S300-步骤S400，关于所述数据叠加模块的具体描述可参对所述步骤S300-步骤S400的描述。

数据下载模块，用于向云服务器发送下载请求，接收云服务器根据所述下载请求返回的作业数据。本实施例中，所述数据上传模块可用于执行图1所示的步骤S500-步骤S600，关于所述数据叠加模块的具体描述可参对所述步骤S500-步骤S600的描述。

本发明的第三方面提供了一种多终端数据同步系统，如图3所示，所述系统包括客户端和云服务器。

所述客户端用于将作业数据存入本地数据库，按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID；将所述云端自增ID与本地数据库中对应的作业数据进行关联。所述客户端还用于向云服务器发送下载请求，接收云服务器根据所述下载请求返回的作业数据。

所述云服务器用于在接收到成功上传的作业数据时按照接收到的作业数据的顺序为作业数据生成云端自增ID，并将该云端自增ID返回给对应的客户端。所述云服务器还用于根据来自客户端的下载请求向客户端返回相应的作业数据。

以上所述仅是本发明的优选实施方式，应当理解本发明并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围，则都应在本发明所附权利要求的保护范围内。

Claims (10)

1.一种多终端数据同步方法，其特征在于，包括数据上传步骤和数据下载步骤；

所述数据上传步骤包括：

将作业数据存入本地数据库；

按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；

将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID；

将所述云端自增ID与本地数据库中对应的作业数据进行关联；

所述数据下载步骤包括：

向云服务器发送下载请求；

接收云服务器根据所述下载请求返回的作业数据。

2.根据权利要求1所述的一种多终端数据同步方法，其特征在于，将作业数据存入本地数据库，包括：

获取作业数据；

判断是否存在本地数据库，若不存在本地数据库，则创建本地数据库；

将所述作业数据逐条存入本地数据库。

3.根据权利要求1所述的一种多终端数据同步方法，其特征在于，将作业数据上传云服务器时，若作业数据上传失败，则为该作业数据设置未上传标识。

4.根据权利要求1所述的一种多终端数据同步方法，其特征在于，作业数据成功上传云服务器后，判断是否存在与该作业数据关联的数据表，若存在与该作业数据关联的数据表，则将该作业数据对应的云端自增ID写入该数据表。

5.根据权利要求1所述的一种多终端数据同步方法，其特征在于，采用Long类型来存储本地自增ID和云端自增ID。

6.根据权利要求1所述的一种多终端数据同步方法，其特征在于，若接收云服务器根据所述下载请求返回的作业数据时有其他客户端正在上传作业数据，则云服务器返回的数据为云服务器接收到下载请求以前已经成功上传的作业数据。

7.根据权利要求1所述的一种多终端数据同步方法，其特征在于，所述方法还包括：

在作业数据下载完成时根据云服务器返回的当前时间戳更新本地数据库中相应的同步时间戳；

其中，所述同步时间戳用于记录对应表的同步时间，以便云服务器根据接收到的下载请求中的同步时间戳返回相应的作业数据。

8.根据权利要求1所述的一种多终端数据同步方法，其特征在于，所述方法还包括：

检测作业数据是否异常，并在检测到作业数据异常时采用导出数据库机制将所述本地数据库进行备份。

9.一种多终端数据同步装置，其特征在于，包括：

数据存储模块，用于将作业数据存入本地数据库，以及按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；

数据上传模块，用于将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID，以及将所述云端自增ID与本地数据库中对应的作业数据进行关联；

数据下载模块，用于向云服务器发送下载请求，接收云服务器根据所述下载请求返回的作业数据。

10.一种多终端数据同步系统，其特征在于，包括：

客户端，用于将作业数据存入本地数据库，按照作业数据存入本地数据库的顺序为作业数据生成本地自增ID；将作业数据逐条上传云服务器，并接收作业数据上传成功时云服务器为作业数据生成的云端自增ID；将所述云端自增ID与本地数据库中对应的作业数据进行关联；向云服务器发送下载请求，接收云服务器根据所述下载请求返回的作业数据；

云服务器，用于在接收到成功上传的作业数据时按照接收到的作业数据的顺序为作业数据生成云端自增ID，并将该云端自增ID返回给对应的客户端；根据来自客户端的下载请求向客户端返回相应的作业数据。

Images