CN110069505B - 离线数据处理方法及离线数据更新装置 - Google Patents

Abstract

本发明公开了一种离线数据处理方法及离线数据更新装置，相应的方法的热更新策略包括：检查本地只读数据库文件的缓存；如果所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则以服务器端相应的只读数据库文件更新并加载对应的本地只读数据库文件，否则加载本地缓存的只读数据库文件。本发明在有课程需要更新时，只需要重新制作相应修改课程的数据库文件，并通过数据下发将只读数据库文件下发给客户端，客户端获得新的只读数据库文件后替换原有的本地只读数据库文件，即可实现对数据库的热更新，从而解决了现有技术中在每次有课程更新时就需要重新发布应用的问题。

Description

离线数据处理方法及离线数据更新装置

技术领域

本发明涉及一种离线课程数据加载技术领域，特别涉及一种离线数据处理方法及离线数据更新装置。

背景技术

通常情况下客户端数据库设计是把所有的数据内容制作到一个数据库文件中，但这种常规的设计会导致我们业务中的离线课程内容每次有课程更新都必须重新发布应用。

发明内容

有鉴于离线课程内容每次有课程更新都必须重新发布应用的问题，本发明提供了一种离线数据处理方法。

本发明提供了一种离线数据处理方法，包括：

步骤A，检查本地只读数据库文件的缓存；

步骤B，如果所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则以服务器端相应的只读数据库文件更新并加载对应的本地只读数据库文件，否则加载本地缓存的只读数据库文件。

优选地，，步骤A还包括：

判断本地只读数据库文件的缓存是否存在，如果存在，则执行步骤B。

优选地，步骤B还包括：

步骤B1，检查下载的所述只读数据库文件是否在有效时间内；

步骤B2，如果在有效时间内，则通过网络查询并下载服务器端的相应只读数据库文件，否则加载本地旧有的只读数据库文件

优选地，步骤B还包括：比较下载的只读数据库文件与本地的只读数据库文件的格式版本是否相同；如果不同，则确定上次从服务器端下载只读数据库文件的时间与当前时间之间的时间间隔，并在所述时间间隔小于预定的时间间隔时执行步骤B1和B2；如果相同，则加载本地旧有的只读数据库文件。

优选地，步骤B还包括：如果所述时间间隔大于预定的时间间隔、或所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则对下载的只读数据库文件进行校验；如果通过校验，则用下载的只读数据库文件替换本地旧有的只读数据库文件并加载更新后的本地数据库文件。

优选地，步骤B还包括：如果校验不通过，则删除下载的只读数据库文件，并执行步骤A。

优选地，所述时间间隔由服务器下发到客户端。

优选地，所述客户端与服务器之间的交互信息包括数据库标识字段、数据库格式版本字段、数据库数据版本字段、校验字段、数据库文件下载地址字段、附加数据字段、有效时间字段和时间间隔字段；其中，数据库标识字段是每个只读数据库的唯一标识；数据库格式版本字段是数据库的版本，只有数据库版本一致才会热更新本地数据库；数据库数据版本字段是数据库的数据版本，只有数据库数据版本字段比本地版本高才会更新；校验字段用于数据库文件的校验以保证数据库文件下载正确；数据库文件下载地址字段是数据库文件的下载地址；附加数据字段是附加数据；有效时间字段是数据的有效时间；时间间隔字段是更新数据库的查询间隔。

本发明还提供一种离线数据更新装置，与服务器端对接，其包括：

存储模块，其配置为缓存本地只读数据库文件；

数据处理模块，其配置为当缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则从服务器端下载相应的只读数据库文件，更新并加载对应的本地只读数据库文件；否则，加载本地缓存的只读数据库文件。

本发明还提供一种离线数据更新装置，与至少一终端对接，用于放置只读数据库文件；并且

当终端的本地只读数据库文件的版本低于该只读数据库文件的版本，则根据终端的请求，向终端推送相应的只读数据库文件，以用于更新并加载对应的终端的本地只读数据库文件。

通过上述技术方案，本发明在有课程需要更新时，只需要重新制作相应修改课程的数据库文件，并通过数据下发将只读数据库文件下发给客户端，客户端获得新的只读数据库文件后替换原有的本地只读数据库文件，即可实现对数据库的热更新，从而解决了现有技术中在每次有课程更新时就需要重新发布应用的问题。

附图说明

图1是本发明的流程图。

具体实施方式

为使本领域技术人员更好的理解本发明的技术方案，下面结合附图和具体实施方式对本发明作详细说明。

为了解决上述技术问题，本发明提供了一种离线数据处理方法，在该方法中本发明将客户端的数据库按照只读和读写进行内容划分，并且对于只读内容又按照不同科目的课程将只读数据库内容制作成不同的只读数据库文件，然后通过数据下发实现各个只读数据库文件的热更新。作为数据的一种，下文将以课程数据，及相应的数据内容为例，对本发明进行详细描述。

基础数据存储在基础数据表中。对web端用户(如通过PC端浏览器)而言，该基础数据存储在服务器端，客户端可直接访问。对移动端用户(如通过手机APP)而言，该基础数据库需要在客户端APP内存储。

对于移动端用户而言，由于基础数据库进行了分库,所以数据的加载及更新都是按照每个库来进行。课程基础数据库属于只读数据库,所以可以通过热更新来更新相应数据。当移动客户端加载基础数据库时,先去服务器端的数据下发系统查询是否有新更新的数据库,如果有新数据库则下载相应数据库,并在本地替换数据库。

下文中，关于本发明的离线数据处理方法，执行主体包括但不限于用户一侧的终端、服务器端。

在一个实施例中，本发明中的离线数据处理方法，对只读数据库中的每个数据库分别采用单独的热更新策略进行更新，所述热更新策略包括：

步骤A，检查本地只读数据库文件的缓存；

步骤B，如果所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则以服务器端相应的只读数据库文件更新并加载对应的本地只读数据库文件，否则加载本地缓存的只读数据库文件。

通过上述技术方案，本发明在有课程需要更新时，只需要重新制作相应修改课程的数据库文件，并通过数据下发将只读数据库文件下发给客户端，客户端获得新的只读数据库文件后替换原有的本地只读数据库文件，即可实现对数据库的热更新，从而解决了现有技术中在每次有课程更新时就需要重新发布应用的问题。

优选地，步骤A还包括：判断本地只读数据库文件的缓存是否存在，如果存在，则执行步骤B，否则直接通过网络查询并下载服务器端的相应只读数据库文件。如果没有本地缓存，则表明需要下载新的只读数据库文件，然后加载。

优选地，步骤B还包括：步骤B1，客户端检查下载的所述只读数据库文件是否在有效时间内；步骤B2，如果在有效时间内，则通过网络查询并下载服务器端的相应只读数据库文件，否则加载本地旧有的只读数据库文件。有效时间是指课程在指定的时间内才允许用户使用。如果在非有效时间，那么不会下载更新的课程，只有在合法的时间段内，才会下载更新的课程。

优选地，步骤B还包括：比较下载的只读数据库文件与本地的只读数据库文件的格式版本是否相同；如果不同，则确定上次从服务器端下载只读数据库文件的时间与当前时间之间的时间间隔，并在所述时间间隔小于预定的时间间隔时执行步骤B1和B2；如果相同，则加载本地旧有的只读数据库文件。优选地，所述时间间隔由服务器下发到客户端。通过时间间隔的设定，可以避免客户端频繁地请求下载更新，从而降低服务器的压力，起到节约资源的目的。

优选地，步骤B还包括：如果所述时间间隔大于预定的时间间隔、或所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则对下载的只读数据库文件进行校验；如果通过校验，则用下载的只读数据库文件替换本地旧有的只读数据库文件并加载更新后的本地数据库文件；如果校验不通过，则删除下载的只读数据库文件，并执行步骤A。例如，校验可以采用MD5校验。

优选地，所述客户端与服务器之间的交互信息包括数据库标识字段、数据库格式版本字段、数据库数据版本字段、校验字段、数据库文件下载地址字段、附加数据字段、有效时间字段和时间间隔字段；

其中，数据库标识字段是每个只读数据库的唯一标识；

数据库格式版本字段是数据库的版本，只有数据库版本一致才会热更新本地数据库；

数据库数据版本字段是数据库的数据版本，只有数据库数据版本字段比本地版本高才会更新；

校验字段用于数据库文件的校验以保证数据库文件下载正确；

数据库文件下载地址字段是数据库文件的下载地址；

附加数据字段是附加数据；有效时间字段是数据的有效时间；

时间间隔字段是更新数据库的查询间隔。

下面，结合图1对本发明的更新流程进行示例性说明。

步骤1，在客户端需要加载数据库文件时，客户端会检查本地相关数据库文件数据下发的缓存。如果缓存存在就执行步骤3检查数据库格式版本，如果缓存不存在，就会通过步骤2获取数据下发内容。

步骤2，网络查询相应数据下发的内容，获得数据下发内容后，需要检查数据下发内容是否在有效时间内，如果不在有效时间，就加载本地旧有的数据库文件；如果在有效时间内，就同检查数据下发缓存一样执行步骤3检查数据库格式版本。

步骤3，检查数据下发的格式版本是否与本地数据库格式版本相同，如果不相同则去判断本地数据下发查询间隔，如果间隔小于上次更新时间间隔，则执行步骤2查询数据下发内容，如果间隔大于上次更新时间间隔则执行步骤5，判断数据库文件是否已下载。

步骤4，检查数据下发的数据版本是否大于本地数据库数据版本，如果不大于则去判断本地数据下发查询间隔，如果间隔小于上次更新时间间隔，则执行步骤2查询数据下发内容，如果间隔大于上次更新时间间隔则执行步骤5，判断数据库文件是否已下载。

步骤5，检查数据库下载文件是否已存在，如果文件不存在则下载相应的数据库文件，由于网络质量不可控，为了加快加载速度，而不是等待文件下载完成，这时会加载本地旧有的数据库文件，在后台下载数据库文件直到完成，下次执行步骤1更新数据库文件，如果已存在则执行步骤6校验文件。

步骤6，对数据库已经下载的文件进行MD5校验，如果校验不成功，则删除下载文件，重新下载数据库文件，然后加载本地旧有的数据库文件，等待下载完成，下次执行步骤1更新数据库文件，如果校验成功则替换原先旧有数据库，并加载新的数据库文件，完成数据库的热更新过程。

以下从本发明的离线数据处理方法应用于一种远程课程数据(系统)处理场景下为例，包括分库策略、热更新策略，对本发明进行示例性说明。

本发明的分库策略如下：按照客户端对数据的使用情况，先将数据库分为只读部分和可写部分。并且将原先一部分可写部分内容进行切分，将可写内容中的只读部分合并到只读表中或者单独建表使其成为只读库的一部分。这样我们就最小化了可写数据库并且最大化了只读数据库。然后我们根据只读数据库的内容，将其按照课程和功能进行切分，切分为基础只读数据库和课程只读数据库。对于不同的课程我们又按照课程树结构将其切分为不同课程的只读数据库。这样我们客户端的数据库类型可分为可写数据库，基础只读数据库和课程内容数据库。对于课程数据库，由于分库带来的多个库中有相同的数据结构，我们为所有课程数据库中的每个课程内容数据构建了唯一Id以帮助客户端和服务器端识别对应的课程内容，消除了分库带来的客户端数据容易混淆问题。同时在客户端载入相应课程数据库时，我们在编程时带采用了同一的数据结构，使代码的复用率得到提高，并且通过使用次数优先原则构建每个课程数据库的连接缓存。使客户端在使用数据库的时候可以快速的载入常用的课程数据库。

多库热更新的过程为：由于将只读数据库分为多个库，如果采用统一热更新所有的只读数据库，会浪费用户的流量，而且失去了数据库可定制的能力。所以我们采用了对每个独立数据库单独热更新的策略。我们为每个独立数据库分配了一个数据下发系统中的唯一Id，这样对于每个数据库，我们可以单独配置数据下发内容，对每个数据库文件进行单独的热更新。

本发明还提供一种离线数据更新装置，与服务器端对接，其包括：

存储模块，其配置为缓存本地只读数据库文件；

数据处理模块，其配置为当缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则从服务器端下载相应的只读数据库文件，更新并加载对应的本地只读数据库文件；否则，加载本地缓存的只读数据库文件。

本发明还提供一种离线数据更新装置，与至少一终端对接，用于放置只读数据库文件；并且

当终端的本地只读数据库文件的版本低于该只读数据库文件的版本，则根据终端的请求，向终端推送相应的只读数据库文件，以用于更新并加载对应的终端的本地只读数据库文件。

应当理解的是，本领域技术人员结合上文的详细介绍，可以得到本发明的实施例的离线数据更新装置的模块化架构，也可以依据本领域技术常识对本发明的实施例的离线数据更新装置做不超出本发明所要求保护范围内的变化扩展，因此，本申请不再在说明书附图中以附图形式赘述相应的模块化架构。

以上实施例仅为本发明的示例性实施例，不用于限制本发明，本发明的保护范围由权利要求书限定。本领域技术人员可以在本发明的实质和保护范围内，对本发明做出各种修改或等同替换，这种修改或等同替换也应视为落在本发明的保护范围内。

Claims (7)

1.一种离线数据处理方法，其特征在于，所述方法对只读数据库中的每个数据库分别采用单独的热更新策略进行更新，所述热更新策略包括：

步骤A，检查本地只读数据库文件的缓存；

步骤B，如果所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则以服务器端相应的只读数据库文件更新并加载对应的本地只读数据库文件，否则加载本地缓存的只读数据库文件；其中，

步骤B还包括：

步骤B1，检查下载的所述只读数据库文件是否在有效时间内；

步骤B2，如果在有效时间内，则通过网络查询并下载服务器端的相应只读数据库文件，否则加载本地旧有的只读数据库文件；

所述步骤B还包括：

比较下载的只读数据库文件与本地的只读数据库文件的格式版本是否相同；

如果不同，则确定上次从服务器端下载只读数据库文件的时间与当前时间之间的时间间隔，并在所述时间间隔小于预定的时间间隔时执行步骤B1和B2；

如果相同，则加载本地旧有的只读数据库文件；

所述步骤B还包括：

如果所述时间间隔大于预定的时间间隔、或所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则对下载的只读数据库文件进行校验；

如果通过校验，则用下载的只读数据库文件替换本地旧有的只读数据库文件并加载更新后的本地数据库文件。

2.根据权利要求1所述的离线数据处理方法，其特征在于，步骤A还包括：

判断本地只读数据库文件的缓存是否存在，如果存在，则执行步骤B。

3.根据权利要求1所述的离线数据处理方法，其特征在于，步骤B还包括：

如果校验不通过，则删除下载的只读数据库文件，并执行步骤A。

4.根据权利要求1所述的离线数据处理方法，其特征在于，所述时间间隔由服务器下发到客户端。

5.根据权利要求4所述的离线数据处理方法，其特征在于，所述客户端与服务器之间的交互信息包括数据库标识字段、数据库格式版本字段、数据库数据版本字段、校验字段、数据库文件下载地址字段、附加数据字段、有效时间字段和时间间隔字段。

6.一种离线数据更新装置，与服务器端对接，对只读数据库中的每个数据库分别采用单独的热更新策略进行更新，其包括：

存储模块，其配置为缓存本地只读数据库文件；

数据处理模块，其配置为当缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则从服务器端下载相应的只读数据库文件，更新并加载对应的本地只读数据库文件；否则，加载本地缓存的只读数据库文件；其中，

所述数据处理模块进一步配置为：

检查下载的所述只读数据库文件是否在有效时间内；

如果在有效时间内，则通过网络查询并下载服务器端的相应只读数据库文件，否则加载本地旧有的只读数据库文件；

所述数据处理模块进一步配置为：

比较下载的只读数据库文件与本地的只读数据库文件的格式版本是否相同；

如果不同，则确定上次从服务器端下载只读数据库文件的时间与当前时间之间的时间间隔，并在所述时间间隔小于预定的时间间隔时执行：检查下载的所述只读数据库文件是否在有效时间内；如果在有效时间内，则通过网络查询并下载服务器端的相应只读数据库文件，否则加载本地旧有的只读数据库文件；

如果相同，则加载本地旧有的只读数据库文件；

所述数据处理模块进一步配置为：

如果所述时间间隔大于预定的时间间隔、或所述缓存的本地只读数据库文件的版本低于服务器端的相应只读数据库文件的版本，则对下载的只读数据库文件进行校验；

如果通过校验，则用下载的只读数据库文件替换本地旧有的只读数据库文件并加载更新后的本地数据库文件。

7.一种离线数据更新装置，与至少一终端对接，所述终端包括如权利要求6所述的离线数据更新装置，用于放置只读数据库文件；并且

当终端的本地只读数据库文件的版本低于该只读数据库文件的版本，则根据终端的请求，向终端推送相应的只读数据库文件，以用于更新并加载对应的终端的本地只读数据库文件。

Images