CN108470054A - 一种数据访问方法及系统 - Google Patents

Abstract

本发明公开了一种数据访问方法及系统，涉及网页交互领域。该方法包括：获取请求端发出的访问数据的访问请求，并根据访问请求得到数据的统一资源定位符；调用lua脚本根据统一资源定位符从发布数据存储redis中获取数据的加载资源；当获取成功时，将加载资源进行拼装处理，并返回给请求端。本发明提供的一种数据访问方法及系统，通过获取访问任意数据的统一资源定位符，并调用lua脚本根据该统一资源定位符从发布数据存储redis中获取加载该数据的加载资源，并进行处理后返回给请求端，能够减少对服务api的调用，增加对缓存的调用，能够提高页面的响应速度。

Description

一种数据访问方法及系统

技术领域

本发明涉及网页交互领域，尤其涉及一种数据访问方法及系统。

背景技术

目前，在网站设计中，页面静态化是减轻网站压力，提高网站访问速度的常用方案。常用的页面静态化技术手段有通过CMS(Content Management System，内容管理系统)实现动静分离。

而CMS是基于关系型数据库提供api接口，调用api请求数据库中的数据，在高并发环境下存在系统响应慢的问题。

发明内容

本发明所要解决的技术问题是针对现有技术的不足，提供一种数据访问方法及系统。

本发明解决上述技术问题的技术方案如下：

一种数据访问方法，包括：

获取请求端发出的访问数据的访问请求，并根据所述访问请求得到所述数据的统一资源定位符；

调用lua脚本根据所述统一资源定位符从发布数据存储redis中获取所述数据的加载资源；

当获取成功时，对所述加载资源进行拼装处理，并返回给所述请求端。

本发明的有益效果是：本发明提供的一种数据访问方法，通过获取访问任意数据的统一资源定位符，并调用lua脚本根据该统一资源定位符从发布数据存储redis中获取加载该数据的加载资源，并进行处理后返回给请求端，能够减少对服务api的调用，增加对缓存的调用，能够提高页面的响应速度。

在上述技术方案的基础上，本发明还可以做如下改进。

进一步地，还包括：

当获取失败时，调用api从元数据存储mysql中获取所述数据的加载资源，并对所述加载资源进行拼装处理，返回给所述请求端。

采用上述进一步方案的有益效果是：当没能从发布数据存储redis中成功获取请求的加载资源时，再通过调用api从元数据存储mysql中获取该数据的加载资源，并进行处理后返回给请求端，能够保证当请求缓存中的加载资源出错时，也能及时地从数据库中获取相应的加载资源，提高系应用过程中的稳定性。

进一步地，所述调用lua脚本根据所述统一资源定位符从发布数据存储redis中获取所述数据的加载资源，具体包括：

调用所述lua脚本根据所述统一资源定位符从从发布数据存储redis中获取所述数据的加载资源；

当获取失败时，调用所述lua脚本根据所述统一资源定位符从主发布数据存储redis中获取所述数据的加载资源。

采用上述进一步方案的有益效果是：通过首先从从发布数据存储redis中获取数据的加载资源，当请求失败时，再从主发布数据存储redis中获取数据的加载资源，能够将请求分散在多个从发布数据存储redis中进行响应，能够使后台系统处理高并发量的访问请求，并当从发布数据存储redis中数据错误时，例如，主从同步时数据中断等，及时地从主发布数据存储redis中获取数据的加载资源能够提高系应用过程中的稳定性，防止出现页面访问、加载失败的情况。

进一步地，所述获取请求端发出的访问数据的访问请求之前，还包括：

对所述数据的加载资源和统一资源定位符进行关联，并存储在主发布数据存储redis；

所述主发布数据存储redis将关联后的所述加载资源和所述统一资源定位符同步到从发布数据存储redis中；

将关联后的所述加载资源和所述统一资源定位符存储到元数据存储mysql中。

进一步地，所述对所述数据的加载资源和统一资源定位符进行关联之前，还包括：

搭建内容管理系统及应用数据管理系统；

通过所述内容管理系统及所述应用数据管理系统配置所述数据，并生成所述数据的加载资源和统一资源定位符。

本发明解决上述技术问题的另一种技术方案如下：

一种数据访问系统，包括：

获取单元，用于获取请求端发出的访问数据的访问请求，并根据所述访问请求得到所述数据的统一资源定位符；

lua调用单元，用于调用lua脚本根据所述统一资源定位符从发布数据存储redis中获取所述数据的加载资源；

第一处理单元，用于当获取成功时，对所述加载资源进行拼装处理，并返回给所述请求端。

进一步地，还包括：

api调用单元，用于调用api从元数据存储mysql中获取所述数据的加载资源，并对所述加载资源进行拼装处理，返回给所述请求端。

进一步地，所述lua调用单元具体用于调用所述lua脚本根据所述统一资源定位符从从发布数据存储redis中获取所述数据的加载资源，并当获取失败时，调用所述lua脚本根据所述统一资源定位符从主发布数据存储redis中获取所述数据的加载资源。

进一步地，还包括：

第二处理单元，用于对所述数据的加载资源和统一资源定位符进行关联，并存储在主发布数据存储redis，所述主发布数据存储redis用于将关联后的所述加载资源和所述统一资源定位符同步到从发布数据存储redis中；

所述第二处理单元还用于将关联后的所述加载资源和所述统一资源定位符存储到元数据存储mysql中。

进一步地，还包括：

建模单元，用于搭建内容管理系统及应用数据管理系统，并通过所述内容管理系统及所述应用数据管理系统配置所述数据，并生成所述数据的加载资源和统一资源定位符。

本发明的有益效果是：本发明提供的一种数据访问系统，通过获取单元获取访问任意数据的统一资源定位符，并通过lua调用单元调用lua脚本根据该统一资源定位符从发布数据存储redis中获取加载该数据的加载资源，并通过第一处理单元进行处理后返回给请求端，能够减少对服务api的调用，增加对缓存的调用，能够提高页面的响应速度。

本发明附加的方面的优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明实践了解到。

附图说明

图1为本发明一种数据访问方法的一个实施例提供的流程示意图；

图2为本发明一种数据访问方法的另一实施例提供的结构框架图；

图3为本发明一种数据访问系统的一个实施例提供的架构框架图。

具体实施方式

以下结合附图对本发明的原理和特征进行描述，所举实施例只用于解释本发明，并非用于限定本发明的范围。

如图1所示，为本发明一种数据访问方法的一个实施例提供的流程示意图，该方法中请求端访问的是基于CMS开发的动静分离系统，例如，该系统可以将静态资源部署在nginx上，后台项目部署到应用服务器上，根据一定规则静态资源的请求全部请求nginx服务器，达到动静分离的目标。该方法包括：

S11，获取请求端发出的访问数据的访问请求，并根据访问请求得到数据的统一资源定位符。

需要说明的是，请求端可以为用户使用的手机、电脑等，例如，当用户使用手机访问网页时，需要请求加载网页的页面，那么就会向网页提供者的服务器发送访问请求，请求加载网页内容，访问请求中会包含请求的内容的地址，即统一资源定位符。

具体地，数据指的是访问网页时需要加载的静态资源等，例如，对于购物网站来说，数据指的可以是商品的图片、文字介绍等。

S12，调用lua脚本根据统一资源定位符从发布数据存储redis中获取数据的加载资源。

例如，nginx服务器获取到统一资源定位符后，lua脚本将统一资源定位符作为key从发布数据存储redis中获取数据的加载资源。

S13，当获取成功时，对加载资源进行拼装处理，并返回给请求端。

例如，可以通过lua在请求端进行部分核心数据和模板的封装，生成html文件返回给用户的浏览器，可以降低api的调用量，提升相应效率。

本实施例提供的一种数据访问方法，通过获取访问任意数据的统一资源定位符，并调用lua脚本根据该统一资源定位符从发布数据存储redis中获取加载该数据的加载资源，并进行处理后返回给请求端，能够减少对服务api的调用，增加对缓存的调用，能够提高页面的响应速度。

如图2所示，为本发明一种数据访问方法的另一实施例提供的结构框架图，该方法包括：

S11，获取请求端发出的访问数据的访问请求，并根据访问请求得到数据的统一资源定位符。

需要说明的是，本实施例中与上述实施例相同步骤的说明及优选实施方式可以参照上述实施例，在此不再赘述。

S12，调用lua脚本根据统一资源定位符从发布数据存储redis中获取数据的加载资源。

S13，当获取成功时，对加载资源进行拼装处理，并返回给请求端。

优选地，还包括：

S14，当获取失败时，调用api从元数据存储mysql中获取数据的加载资源，并对加载资源进行拼装处理，返回给请求端。

例如，可以直接调用暴露的api从元数据存储mysql中获取数据的加载资源。

需要说明的是，获取失败指的是未能成功从发布数据存储redis中获取数据的加载资源，可能是数据存储时发生错误、数据丢失等。

优选地，步骤S12中，具体可以包括：

S121，调用lua脚本根据统一资源定位符从从发布数据存储redis中获取数据的加载资源。

S122，当获取失败时，调用lua脚本根据统一资源定位符从主发布数据存储redis中获取数据的加载资源。

优选地，步骤S11之前，还可以包括：

S01，搭建内容管理系统及应用数据管理系统。

S02，通过内容管理系统及应用数据管理系统配置数据，并生成数据的加载资源和统一资源定位符。

需要说明的是，配置的数据的格式应该符合请求端统一资源定位符请求数据时所需的数据规范。

例如，对于一个商品网页的商品来说，将商品的介绍、属性、图片等存储到对应的模板中，得到加载资源，再获取该加载资源的地址，根据地址生成统一资源定位符，当有请求端请求加载该商品时，根据该商品的统一资源定位符调用该商品的加载资源，进行处理后返回给请求端，在请求端加载该商品。

S03，对数据的加载资源和统一资源定位符进行关联，并存储在主发布数据存储redis。

优选地，还可以将CMS中的原始数据和模板数据组装成聚合数据同步到主发布数据存储Redis，以便请求端展示系统获取进行展示。

S04，主发布数据存储redis将关联后的加载资源和统一资源定位符同步到从发布数据存储redis中。

需要说明的是，从发布数据存储redis的数量可以根据实际需求设置为多个。

例如，可以设置一个主发布数据存储redis和两个从发布数据存储redis，当数据存储在主发布数据存储redis中后，可以及时地同步给这两个从发布数据存储redis。

S05，将关联后的加载资源和统一资源定位符存储到元数据存储mysql中。

例如，对于商品网页一般需要：请求端访问的URL、分类、轮播图、商品数据等，这些数据可以按照相应的维度存储在CMS系统的元数据存储mysql中。

本实施例提供的一种数据访问方法，通过获取访问任意数据的统一资源定位符，并调用lua脚本通过首先从从发布数据存储redis中获取数据的加载资源，当请求失败时，再从主发布数据存储redis中获取数据的加载资源，能够将请求分散在多个从发布数据存储redis中进行响应，能够使后台系统处理高并发量的访问请求，并当从发布数据存储redis中数据错误时，例如，主从同步时数据中断等，及时地从主发布数据存储redis中获取数据的加载资源能够提高系应用过程中的稳定性，防止出现页面访问、加载失败的情况。

并当没能从发布数据存储redis中成功获取请求的加载资源时，再通过调用api从元数据存储mysql中获取该数据的加载资源，并进行处理后返回给请求端，能够保证当请求缓存中的加载资源出错时，也能及时地从数据库中获取相应的加载资源，进一步提高系应用过程中的稳定性。

并在获取到相应的加载资源后进行处理返回给请求端，能够减少对服务api的调用，增加对缓存的调用，能够提高页面的响应速度。

如图3所示，为本发明一种数据访问系统的一个实施例提供的架构框架图，该系统包括：

获取单元1，用于获取请求端0发出的访问数据的访问请求，并根据访问请求得到数据的统一资源定位符；

lua调用单元2，用于调用lua脚本根据统一资源定位符从发布数据存储redis8中获取数据的加载资源；

第一处理单元3，用于当获取成功时，对加载资源进行拼装处理，并返回给请求端0。

优选地，该系统还可以包括：

api调用单元4，用于调用api从元数据存储mysql9中获取数据的加载资源，并对加载资源进行拼装处理，返回给请求端0。

优选地，lua调用单元2具体用于调用lua脚本根据统一资源定位符从从发布数据存储redis8中获取数据的加载资源，并当获取失败时，调用lua脚本根据统一资源定位符从主发布数据存储redis7中获取数据的加载资源。

优选地，该系统还可以包括：

第二处理单元5，用于对数据的加载资源和统一资源定位符进行关联，并存储在主发布数据存储redis7，主发布数据存储redis7用于将关联后的加载资源和统一资源定位符同步到从发布数据存储redis8中；

第二处理单元5还用于将关联后的加载资源和统一资源定位符存储到元数据存储mysql9中。

优选地，该系统还可以包括：

建模单元6，用于搭建内容管理系统及应用数据管理系统，并通过内容管理系统及应用数据管理系统配置数据，并生成数据的加载资源和统一资源定位符。

本实施例提供的一种数据访问系统，通过获取单元获取访问任意数据的统一资源定位符，并通过lua调用单元调用lua脚本根据该统一资源定位符从发布数据存储redis8中获取加载该数据的加载资源，并通过第一处理单元进行处理后返回给请求端0，能够减少对服务api的调用，增加对缓存的调用，能够提高页面的响应速度。

读者应理解，在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。

作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种数据访问方法，其特征在于，包括：

获取请求端发出的访问数据的访问请求，并根据所述访问请求得到所述数据的统一资源定位符；

调用lua脚本根据所述统一资源定位符从发布数据存储redis中获取所述数据的加载资源；

当获取成功时，对所述加载资源进行拼装处理，并返回给所述请求端。

2.根据权利要求1所述的数据访问方法，其特征在于，还包括：

当获取失败时，调用api从元数据存储mysql中获取所述数据的加载资源，并对所述加载资源进行拼装处理，返回给所述请求端。

3.根据权利要求1所述的数据访问方法，其特征在于，所述调用lua脚本根据所述统一资源定位符从发布数据存储redis中获取所述数据的加载资源，具体包括：

调用所述lua脚本根据所述统一资源定位符从从发布数据存储redis中获取所述数据的加载资源；

当获取失败时，调用所述lua脚本根据所述统一资源定位符从主发布数据存储redis中获取所述数据的加载资源。

4.根据权利要求1至3中任一项所述的数据访问方法，其特征在于，所述获取请求端发出的访问数据的访问请求之前，还包括：

对所述数据的加载资源和统一资源定位符进行关联，并存储在主发布数据存储redis；

所述主发布数据存储redis将关联后的所述加载资源和所述统一资源定位符同步到从发布数据存储redis中；

将关联后的所述加载资源和所述统一资源定位符存储到元数据存储mysql中。

5.根据权利要求4所述的数据访问方法，其特征在于，所述对所述数据的加载资源和统一资源定位符进行关联之前，还包括：

搭建内容管理系统及应用数据管理系统；

通过所述内容管理系统及所述应用数据管理系统配置所述数据，并生成所述数据的加载资源和统一资源定位符。

6.一种数据访问系统，其特征在于，包括：

获取单元，用于获取请求端发出的访问数据的访问请求，并根据所述访问请求得到所述数据的统一资源定位符；

lua调用单元，用于调用lua脚本根据所述统一资源定位符从发布数据存储redis中获取所述数据的加载资源；

第一处理单元，用于当获取成功时，对所述加载资源进行拼装处理，并返回给所述请求端。

7.根据权利要求6所述的数据访问系统，其特征在于，还包括：

api调用单元，用于调用api从元数据存储mysql中获取所述数据的加载资源，并对所述加载资源进行拼装处理，返回给所述请求端。

8.根据权利要求6所述的数据访问系统，其特征在于，所述lua调用单元具体用于调用所述lua脚本根据所述统一资源定位符从从发布数据存储redis中获取所述数据的加载资源，并当获取失败时，调用所述lua脚本根据所述统一资源定位符从主发布数据存储redis中获取所述数据的加载资源。

9.根据权利要求6至8中任一项所述的数据访问系统，其特征在于，还包括：

第二处理单元，用于对所述数据的加载资源和统一资源定位符进行关联，并存储在主发布数据存储redis，所述主发布数据存储redis用于将关联后的所述加载资源和所述统一资源定位符同步到从发布数据存储redis中；

所述第二处理单元还用于将关联后的所述加载资源和所述统一资源定位符存储到元数据存储mysql中。

10.根据权利要求9所述的数据访问系统，其特征在于，还包括：

建模单元，用于搭建内容管理系统及应用数据管理系统，并通过所述内容管理系统及所述应用数据管理系统配置所述数据，并生成所述数据的加载资源和统一资源定位符。