CN107463511B - 一种基于多级缓存的数据国际化实现方法及装置 - Google Patents

Abstract

本发明涉及一种基于多级缓存的数据国际化实现方法及装置，所述的方法包括：S1，支撑系统应用服务器定时将主数据库中的全量配置数据写入分布式缓存中，并同步更新分布式缓存中配置数据的版本号；S2，web应用启动后，web应用服务器定时将最新版本号的分布式缓存中的配置数据写入本地缓存；S3，web应用服务器从本地缓存中读取配置数据进行国际化。本发明使用了分布式缓存和本地缓存两级缓存，分布式缓存主要负责配置数据的加载和更新，本地缓存主要负责配置数据的同步更新和使用，将数据的更新和使用进行解耦，在本地缓存中进行数据的国际化，由于本地缓存不受网络影响，因此数据的国际化操作以及查询会更快。

Description

一种基于多级缓存的数据国际化实现方法及装置

技术领域

本发明涉及数据缓存技术领域，具体涉及一种多级缓存的数据国际化实现方法及装置。

背景技术

联通国际公司为了更好的面对后续海外分公司以及香港本部的移动业务扩展需要，同时适应互联网的发展和IT技术的变革，提升基础资源和业务能力的扩展性，实现企业级的服务化和能力开放，因此有必要建设一套符合公司国际化发展的电信业务模式的云化BSS支撑系统。

在联通国际公司国际化的背景下，支撑系统必然要面临国际化的问题，因此软件开发时，要使它能同时应对世界不同地区和国家的访问，并针对不同地区和国家的访问，提供相应的、符合来访者阅读习惯的页面或数据。对于支撑系统动态产生的配置数据，软件应能根据当前所在的国家或地区的文化习惯进行显示。

目前采用了数据库配置多语言的方式来实现，由于整个BSS支撑系统涉及大量的配置数据，许多业务都会和配置数据进行关联。比如查询产品的名称，可能一个查询就包括几千条数据，每条数据都需要进行产品名称的翻译，因此性能要求比较高。

发明内容

本发明提供了一种基于多级缓存的数据国际化实现方法及装置，提高了数据国际化速度。

本发明解决上述技术问题的技术方案如下：一种基于多级缓存的数据国际化实现方法，包括：

S1，支撑系统应用服务器定时将主数据库中的全量配置数据写入分布式缓存中，并同步更新分布式缓存中全量配置数据的版本号；

S2，web应用启动后，web应用服务器定时将最新版本号的分布式缓存中的全量配置数据写入本地缓存；

S3，web应用服务器从本地缓存中读取全量配置数据，根据全量配置数据对页面内容中需要国际化的内容进行国际化。

本发明的有益效果为：使用了分布式缓存和本地缓存，分布式缓存主要负责配置数据的加载和更新，本地缓存主要负责配置数据的同步更新和使用，将数据的更新和使用进行解耦，在本地缓存中进行数据的国际化，由于本地缓存不受网络影响，因此数据的国际化操作以及查询会更快。

在上述技术方案的基础上，本发明还可以作如下改进。

进一步的，所述分布式缓存采用Redis集群分布式缓存，所述本地缓存采用ehcache，所述步骤S1具体包括：

支撑系统应用服务器定时将主数据库中不同时间段的全量配置数据按照轮询规则写入Redis集群的Redis数据库中。

所述进一步的有益效果为：分布式缓存采用Redis集群，Redis数据库属于非关系型数据库，存储量大，且使用Redis集群，能够存储的数据量非常大。

进一步的，所述步骤S2具体包括：

S21，为web应用服务器配置启动线程和定时线程；

S22，当web应用启动时，启动线程对本地缓存中全量配置数据的版本号初始化；

S23，当web应用启动后，定时线程每隔预设时间将本地缓存中全量配置数据的版本号与redis集群中全量配置数据的最新版本号进行比对，若不一致，则从Redis集群中读取最新版本号对应的全量配置数据，写入本地缓存。

所述进一步的有益效果为：web应用服务器利用启动线程和定时线程，能够及时将分布式缓存中更新的配置数据及时更新到本地缓存，保证了配置数据更新的实时性。

进一步的，所述步骤S3具体包括：

S31，Web应用服务器获取页面内容，并检测页面内容中是否有需要国际化的内容；

S32，若有，则根据全量配置数据将需要国际化的内容转化为国际化值。

进一步的，所述全量配置数据为国际化映射表，所述国际化映射表中包括需要国际化的内容和国际化值的对应关系，所述步骤S31具体包括：

Web应用服务器获取页面内容，检测页面内容中是否存在预设模式的内容，若存在，则该内容为需要国际化的内容；

所述步骤S32具体包括：

提取该需要国际化的内容，并从所述国际化映射表中找到该需要国际化的内容对应的国际化值，并利用该国际化值替换页面中需要国际化的内容。

为解决本发明的技术问题，还可以提供一种基于多级缓存的数据国际化实现装置，包括支撑系统应用服务器、主数据库、分布式缓存和web应用服务器；

所述支撑系统应用服务器，用于定时将主数据库中全量配置数据写入分布式缓存中，并同步更新分布式缓存中全量配置数据的版本号；

所述web应用服务器，用于当web应用启动后，定时将最新版本号的分布式缓存中的全量配置数据写入本地缓存；以及用于从本地缓存中读取全量配置数据，根据全量配置数据对页面内容中需要国际化的内容进行国际化。

进一步的，所述分布式缓存采用Redis集群分布式缓存，所述本地缓存采用ehcache，所述支撑系统应用服务器具体用于：

支撑系统应用服务器定时将主数据库中不同时间段的全量配置数据按照轮询规则写入Redis集群的Redis数据库中。

进一步的，所述web应用服务器中包括启动线程和定时线程；

所述启动线程，用于当web应用启动时，对本地缓存中全量配置数据数据的版本号初始化；

所述定时线程，用于当web应用启动后，每隔预设时间将本地缓存中全量配置数据数据的版本号与redis集群中全量配置数据的最新版本号进行比对，若不一致，则从Redis集群中读取最新版本号对应的全量配置数据，写入本地缓存。

进一步的，所述web应用服务器中包括检测单元和国际化单元；

所述检测单元，用于检测页面内容中是否有需要国际化的内容；

所述国际化单元，用于若页面内容中有需要国际化的内容，则根据全量配置数据将需要国际化的内容转化为国际化值。

进一步的，所述全量配置数据为国际化映射表，所述国际化映射表中包括需要国际化的内容和国际化值的对应关系，所述检测单元具体用于：

Web应用服务器获取页面内容，检测页面内容中是否存在预设模式的内容，若存在，则该内容为需要国际化的内容；

所述国际化单元具体用于：

提取该需要国际化的内容，并从所述国际化映射表中找到该需要国际化的内容对应的国际化值，并利用该国际化值替换页面中需要国际化的内容。

附图说明

图1为本发明一个实施例的基于多级缓存的数据国际化实现方法流程图；

图2为本发明另一个实施例的基于多级缓存的数据国际化实现方法流程图；

图3为本发明另一个实施例中将配置数据写入Red i s缓存的示意图；

图4为本发明另一个实施例中将配置数据从Red i s缓存写入本地缓存的示意图；

图5为web应用服务器对页面内容国际化方法流程图；

图6为本发明一个实施例的基于多级缓存的数据国际化实现装置框图示意图；

图8为web应用服务器对页面内容国际化的框图。

具体实施方式

以下结合附图对本发明的原理和特征进行描述，所举实例只用于解释本发明，并非用于限定本发明的范围。

参见图1，为本发明实施例1的基于多级缓存的数据国际化实现方法，包括：

S1，支撑系统应用服务器定时将主数据库中的全量配置数据写入分布式缓存中，并同步更新分布式缓存中全量配置数据的版本号；

S2，web应用启动后，web应用服务器定时将最新版本号的分布式缓存中的全量配置数据写入本地缓存；

S3，web应用服务器从本地缓存中读取全量配置，根据全量配置数据对页面内容中需要国际化的内容进行国际化。

整个BSS支撑系统涉及大量的配置数据，许多业务都会和配置数据进行关联，在配置数据国际化的过程中，比如，不同地区和国家的客户端查询一个产品的名称，针对不同的地区和国家，需要将产品的名称逐一进行翻译，面对大量的配置数据，都需要进行翻译，因此性能要求比较高。

本实施例为了解决性能问题，采用多级缓存来实现，主要采用的是两级缓存，即分布式缓存和本地化缓存，具体实现时，支撑系统应用服务器定时会将主数据库中的全量配置数据写入分布式缓存中，支撑系统应用服务器每天定时，比如，凌晨30分，将主数据库中的全量配置数据写入分布式缓存中，其中，支撑系统产生的所有的配置数据均存储于主数据库中，并同步更新分布式缓存中全量配置数据的版本号。当web应用启动后，web应用服务器会定时将最新版本号的分布式缓存中的全量配置数据写入本地缓存，实现本地缓存的全量配置数据的同步更新，web应用服务器从本地缓存中读取全量配置数据进行国际化，由于web应用服务器访问分布式缓存需要网络，当访问量较大时，访问速度会受到网络带宽的限制，而本地缓存不依赖于网络，因此，当web应用服务器从本地缓存中读取配置数据进行国际化时，速度会非常快。本地化缓存保证了配置数据国际化翻译的效率，因为所有的国际化数据都和web应用在同一个java虚拟机的内存中，没有IO的损耗问题。

参见图2，为实施例2的基于多级缓存的数据国际化实现方法，包括：

S1’，支撑系统应用服务器定时将主数据库中全量配置数据按照预定规则写入redis集群中；

S2’，当web应用启动时，启动线程对本地缓存中全量配置数据的版本号初始化；

S3’，当web应用启动后，定时线程每隔预设时间将本地缓存中全量配置数据的版本号与redis集群中全量配置数据的最新版本号进行比对，若不一致，则从Redis集群中读取最新版本号对应的全量配置数据，写入本地缓存；

S4’，web应用服务器从本地缓存中读取全量配置数据，根据全量配置数据对页面内容中需要国际化的内容进行国际化。

本实施例中，分布式缓存采用Redis集群分布式缓存，本地缓存采用ehcache缓存。参见图3，在支撑系统的业务不断开发的过程中，配置数据量也会不断增加，开发人员可以手动触发将临时增加的配置数据写入Redis集群中，但临时增加的配置数据有可能会因为网络状况而没有成功写入Redis集群中。由于主数据库中存储有支撑系统所有的配置数据，因此，支撑系统应用服务器会定时将主数据库中全量的配置数据按照预定规则写入Redis集群中。具体将配置数据写入Redis集群中时，可以将支撑系统在不同时间段产生的配置数据写入Redis集群的Redis数据库中，或者将不同时间段的主数据库中的全量配置数据写入Redis数据库中，并对Redis数据库的版本号进行标记更新。另外，Redis集群中包括多个Redis数据库，将不同时间段的全量配置数据写入Redis集群的某一个redis数据库中的同时，将该时间段的全量配置数据在另外的Redis数据库中进行备份，避免Redis数据库发生崩溃时配置数据的丢失。

参见图4，当web应用启动时，web应用服务器的启动线程对本地缓存中全量配置数据的版本号初始化，当本地缓存中没有版本号时，请求读取最新版本的分布式缓存中的全量配置数据，将分布式缓存中的全量配置数据写入本地缓存，同时，将分布式缓存中全量配置数据的最新版本号也写入本地缓存。

当web应用启动后，web应用服务器的定时线程会每隔预设时间，比如，每隔30分钟，将本地缓存中全量配置数据的版本号与分布式缓存的最新版本号进行比对，如果本地缓存中全量配置数据的版本号与分布式缓存的最新版本号不一致，则表明分布式缓存中的配置数据发生了变化，因此，定时线程从分布式缓存中读取配置数据写入本地缓存，实现本地缓存的数据同步。

本实施例使用了分布式缓存和本地缓存量级缓存，分布式缓存主要负责配置数据的加载和更新，本地缓存主要负责配置数据的同步更新和使用，将数据的更新和使用进行解耦，在本地缓存中进行数据的国际化，由于本地缓存不受网络影响，因此数据的国际化操作以及查询会更快。

参见图5，为实施例3的数据国家化流程图，包括：

S31，Web应用服务器获取页面内容，检测页面内容中是否存在预设模式的内容，若存在，则该内容为需要国际化的内容；

S32，提取该需要国际化的内容，并从所述国际化映射表中找到该需要国际化的内容对应的国际化值，并利用该国际化值替换页面中需要国际化的内容。

具体的，web应用服务器获取需要显示的页面内容，并检测页面内容中是否存在预设模式的内容，比如，页面中带有大括号或者中括号等标识符的内容，若存在，则这些内容是需要进行国际化的。Web应用服务器从页面内容中提取需要国际化的内容，并从本地缓存中获取配置数据，配置数据为为国际化映射表，所述国际化映射表中包括需要国际化的内容和国际化值的对应关系。因此，根据需要国际化的内容从国际化映射表中找到该需要国际化的内容对应的国际化值，并利用该国际化值替换页面中需要国际化的内容，web应用服务器将国际化后的页面进行显示。比如，将中文语言国际化为英语，下面为一个中文和对应英文的国际化映射表：

假设中文语言是zh_CN，英文语言是en_US

参见图6，为实施例4的基于多级缓存的数据国际化实现装置，包括支撑系统应用服务器、主数据库、分布式缓存和web应用服务器；

所述支撑系统应用服务器，用于定时将主数据库中的全量配置数据写入分布式缓存中，并同步更新分布式缓存中数据的版本号；

所述web应用服务器，用于当web应用启动后，定时将最新版本号的分布式缓存中的配置数据写入本地缓存；以及用于从本地缓存中读取配置数据进行国际化。

其中，分布式缓存采用Redis分布式缓存，所述本地缓存采用ehcache缓存。更具体的说，Redis分布式缓存采用Redis集群，支撑系统应用服务器每隔一段时间将主数据库中全量配置数据按照预定规则写入redis集群中。web应用服务器中包括启动线程和定时线程；启动线程，用于当web应用启动时，对本地缓存中全量配置数据的版本号初始化；定时线程，用于当web应用启动后，每隔预设时间将本地缓存中全量配置数据的版本号与redis集群中配置数据的最新版本号进行比对，若不一致，则从Redis集群中读取最新版本号对应的配置数据，写入本地缓存，实现本地缓存数据的同步更新，并采用本地缓存中的配置数据对页面内容进行国际化。

参见图7，web应用服务器中包括检测单元和国际化单元，所述检测单元，用于检测页面内容中是否有需要国际化的内容；

所述国际化单元，用于若页面内容中有需要国际化的内容，则根据全量配置数据将需要国际化的内容转化为国际化值。

其中，所述全量配置数据为国际化映射表，所述国际化映射表中包括需要国际化的内容和国际化值的对应关系，所述检测单元具体用于：

Web应用服务器获取页面内容，检测页面内容中是否存在预设模式的内容，若存在，则该内容为需要国际化的内容；

所述国际化单元具体用于：

提取该需要国际化的内容，并从所述国际化映射表中找到该需要国际化的内容对应的国际化值，并利用该国际化值替换页面中需要国际化的内容。

本发明提供了一种基于多级缓存的数据国际化实现方法及装置，使用了分布式缓存和本地缓存量级缓存，分布式缓存主要负责配置数据的加载和更新，本地缓存主要负责配置数据的同步更新和使用，将数据的更新和使用进行解耦，在本地缓存中进行数据的国际化，由于本地缓存不受网络影响，因此数据的国际化操作以及查询会更快；分布式缓存采用Redis集群，Redis数据库属于非关系型数据库，存储量大，且使用Redis集群，能够存储的数据量非常大；web应用服务器利用启动线程和定时线程，能够及时将分布式缓存中更新的配置数据及时更新到本地缓存，保证了配置数据更新的实时性。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于多级缓存的数据国际化实现方法，其特征在于，包括：

S1，支撑系统应用服务器定时将主数据库中的全量配置数据写入分布式缓存中，并同步更新分布式缓存中全量配置数据的版本号；

S2，web应用启动后，web应用服务器定时将最新版本号的分布式缓存中的全量配置数据写入本地缓存；

S3，web应用服务器从本地缓存中读取全量配置数据，根据全量配置数据对页面内容中需要国际化的内容进行国际化。

2.如权利要求1所述的基于多级缓存的数据国际化实现方法，其特征在于，所述分布式缓存采用Redis集群分布式缓存，所述本地缓存采用ehcache，所述步骤S1具体包括：

支撑系统应用服务器定时将主数据库中不同时间段的全量配置数据按照轮询规则写入Redis集群的Redis数据库中。

3.如权利要求2所述的基于多级缓存的数据国际化实现方法，其特征在于，所述步骤S2具体包括：

S21，为web应用服务器配置启动线程和定时线程；

S22，当web应用启动时，启动线程对本地缓存中全量配置数据的版本号初始化；

S23，当web应用启动后，定时线程每隔预设时间将本地缓存中全量配置数据的版本号与redis集群中全量配置数据的最新版本号进行比对，若不一致，则从Redis集群中读取最新版本号对应的全量配置数据，写入本地缓存。

4.如权利要求3所述的基于多级缓存的数据国际化实现方法，其特征在于，所述步骤S3具体包括：

S31，Web应用服务器获取页面内容，并检测页面内容中是否有需要国际化的内容；

S32，若有，则根据全量配置数据将需要国际化的内容转化为国际化值。

5.如权利要求4所述的基于多级缓存的数据国际化实现方法，其特征在于，所述全量配置数据为国际化映射表，所述国际化映射表中包括需要国际化的内容和国际化值的对应关系，所述步骤S31具体包括：

Web应用服务器获取页面内容，检测页面内容中是否存在预设模式的内容，若存在，则该内容为需要国际化的内容；

所述步骤S32具体包括：

提取该需要国际化的内容，并从所述国际化映射表中找到该需要国际化的内容对应的国际化值，并利用该国际化值替换页面中需要国际化的内容。

6.一种基于多级缓存的数据国际化实现装置，包括支撑系统应用服务器、主数据库、分布式缓存和web应用服务器；

所述支撑系统应用服务器，用于定时将主数据库中的全量配置数据写入分布式缓存中，并同步更新分布式缓存中全量配置数据的版本号；

所述web应用服务器，用于当web应用启动后，定时将最新版本号的分布式缓存中的全量配置数据写入本地缓存；以及用于从本地缓存中读取全量配置数据，根据全量配置数据对页面内容中需要国际化的内容进行国际化。

7.如权利要求6所述的基于多级缓存的数据国际化实现装置，其特征在于，所述分布式缓存采用Redis集群分布式缓存，所述本地缓存采用ehcache，所述支撑系统应用服务器具体用于：

支撑系统应用服务器定时将主数据库中不同时间段的全量配置数据按照轮询规则写入Redis集群的Redis数据库中。

8.如权利要求7所述的基于多级缓存的数据国际化实现装置，其特征在于，所述web应用服务器中包括启动线程和定时线程；

所述启动线程，用于当web应用启动时，对本地缓存中全量配置数据的版本号初始化；

所述定时线程，用于当web应用启动后，每隔预设时间将本地缓存中全量配置数据的版本号与redis集群中全量配置数据的最新版本号进行比对，若不一致，则从Redis集群中读取最新版本号对应的全量配置数据，写入本地缓存。

9.如权利要求8所述的基于多级缓存的数据国际化实现装置，其特征在于，所述web应用服务器中包括检测单元和国际化单元；

所述检测单元，用于检测页面内容中是否有需要国际化的内容；

所述国际化单元，用于若页面内容中有需要国际化的内容，则根据全量配置数据将需要国际化的内容转化为国际化值。

10.如权利要求9所述的基于多级缓存的数据国际化实现装置，其特征在于，所述全量配置数据为国际化映射表，所述国际化映射表中包括需要国际化的内容和国际化值的对应关系，所述检测单元具体用于：

Web应用服务器获取页面内容，检测页面内容中是否存在预设模式的内容，若存在，则该内容为需要国际化的内容；

所述国际化单元具体用于：

提取该需要国际化的内容，并从所述国际化映射表中找到该需要国际化的内容对应的国际化值，并利用该国际化值替换页面中需要国际化的内容。

Images