CN105205168B - 一种基于Redis数据库的曝光系统及其操作方法 - Google Patents

Abstract

本发明提供一种基于Redis数据库的曝光系统及其操作方法，系统包括Nginx服务器、曝光记录服务器、Redis数据库、统计服务器及RDBMS数据库，其中曝光记录服务器包括曝光记录模块及曝光补偿模块，记录服务器包括曝光统计模块和查询模块，在Redis数据库中曝光信息丢失时，曝光补偿模块将曝光记录模块中的曝光日志同步至Redis数据库中，恢复所丢失的报表信息。本发明提供的曝光系统具有高并发、易扩展、占用内存小、数据库压力小的优点。

Description

一种基于Redis数据库的曝光系统及其操作方法

技术领域

本发明属于互联网展示效果监控领域，具体涉及一种基于Redis数据库的曝光系统。

背景技术

曝光系统是互联网企业对广告投放效果监测的关键。曝光系统做的不好，会给企业带来巨大的经济损失。导致企业无法监控公司投放广告效果，从而无法做出准确的决定。而现在的互联网企业网站访问量巨大且快速增长，投放广告的数据也急剧增长，给企业广告投放检测带来了巨大挑战。

对于广告投放效果监测的曝光系统，现有技术主要有以下几种：

(1)RDBMS数据库：曝光系统在接到曝光请求时，直接将广告展现信息存入RDBMS数据库，然后通过曝光系统统计服务器统计广告展示的各种报表。在曝光请求量不大的情况，可以实现快速的记录曝光记录，曝光系统统计也可以及时的统计出广告投放效果的各种报表。但当曝光请求增大时，这种方案依赖于RDBMS数据库的性能，而RDBMS数据库在大量并发请求下读写都会变的很慢，无法及时响应曝光请求导致曝光请求数据丢失。这种方案也无法很好的扩展，因为扩展后还是依赖于数据库的性能。这种法案也无法应对机房网络异常或者数据库服务器异常导致数据丢失问题。

(2)服务器内存：曝光系统在接到曝光请求时，将广告展现信息存到曝光系统的服务器内存中，每隔一段时间将数据同步到数据库或者Redis数据库中，然后曝光系统统计服务器等待每个曝光系统实例都同步数据后进行报表数据的统计。这种方案可以一定程度解决曝光系统对RDBMS数据库的性能的依赖，但曝光系统的统计需要等待所有的曝光系统实例同步完数据后才能执行统计报表，特别是当一些曝光系统实例出现问题，或导致存在内存中广告展示信息丢失，也会导致曝光系统的统计无法执行。

(3)记录日志：曝光系统在接到曝光请求时，将广告展现信息存到曝光系统的服务器的文件系统中，每隔一段时间将日志同步到曝光系统统计服务器。曝光系统统计需要等待每个曝光系统实例都同步完数据后报表数据的统计。这种方案可以解决广告展示信息丢失的问题，也可以处理高并发的曝光请求并快速的记录广告展示信息。但曝光系统统计需要等待每个曝光系统实例都同步完数据才能计算报表，有时会出现同步异常导致报表统计无法执行。也无法保障报表计算的实时性。

发明内容

(一)要解决的技术问题

鉴于上述问题，本发明的目的在于提供一种基于Redis数据库的曝光系统，其具有高并发、易扩展、占用内存小、数据库压力小的优点。

(二)技术方案

本发明提供一种基于Redis数据库的曝光系统，包括Nginx服务器、曝光记录服务器、Redis数据库、统计服务器及RDBMS数据库，其中：

Nginx服务器用于将曝光请求分发给所述曝光记录服务器，曝光记录服务器用于处理曝光请求，得到曝光信息，并根据曝光信息生成曝光日志，同时，将曝光信息存储到Redis数据库；

统计服务器用于从Redis数据库获取曝光信息，根据曝光信息计算出报表数据，并将报表数据存储于所述RDBMS数据库中。

本发明还提供一种用于曝光系统的操作方法，包括：

S1，Nginx服务器将曝光请求分发给曝光记录服务器；

S2，曝光记录服务器处理曝光请求，得到曝光信息，并根据曝光信息生成曝光日志，同时，将曝光信息存储到Redis数据库；

S3，统计服务器从Redis数据库获取曝光信息，根据曝光信息计算出报表数据，并将报表数据存储于RDBMS数据库中。

(三)有益效果

本发明提供的基于Redis数据库的曝光系统，可以在曝光信息丢失的情况，通过将曝光日志同步至Redis数据库，恢复所丢失的报表信息，可以较好的解决高并发曝光系统占用大量内存和对数据库压力大，难于扩展的问题；同时，可以帮助广告投放者及时监测广告投放效果，帮助公司发现投放效果不好的广告，并调整广告投放的策略，并可以监督广告提供商的统计广告效果，在一定程度上可以减少恶意广告展示的消费，降低广告费用的开销。

附图说明

图1是本发明实施例提供的曝光系统的拓扑图。

图2是本发明实施例提供的曝光系统的运行流程图。

具体实施方式

本发明提供一种基于Redis数据库的曝光系统，包括Nginx服务器、曝光记录服务器、Redis数据库、统计服务器及RDBMS数据库，其中曝光记录服务器包括曝光记录模块及曝光补偿模块，记录服务器包括曝光统计模块和查询模块，在Redis数据库中曝光信息丢失时，曝光补偿模块将曝光记录模块中的曝光日志同步至Redis数据库中，恢复所丢失的报表信息。本发明提供的曝光系统具有高并发、易扩展、占用内存小、数据库压力小的优点。

根据本发明的一种实施方式，曝光系统包括Nginx服务器、曝光记录服务器、Redis数据库、统计服务器及RDBMS数据库，其中：

Nginx服务器用于将曝光请求分发给曝光记录服务器，曝光记录服务器用于处理所述曝光请求，得到曝光信息，并根据曝光信息生成曝光日志，同时，将曝光信息存储到Redis数据库；

统计服务器用于从Redis数据库获取曝光信息，根据曝光信息计算出报表数据，并将报表数据存储于RDBMS数据库中。

根据本发明的一种实施方式，曝光记录服务器包括曝光记录模块，其用于记录所述曝光日志，并将曝光日志对应的曝光信息存储到Redis数据库。

根据本发明的一种实施方式，曝光记录服务器包括曝光补偿模块，当系统异常导致Redis数据库中曝光信息丢失时，曝光补偿模块将曝光信息对应的曝光日志同步至所述Redis数据库中，Redis数据库根据该曝光日志获取相应的曝光信息。

根据本发明的一种实施方式，统计服务器包括曝光统计模块，用于定时从Redis数据库获取曝光信息，并根据曝光信息分析广告展示效果，生成报表数据。

根据本发明的一种实施方式，统计服务器包括查询模块，用于从RDBMS数据库查询报表数据，并对报表数据进行展示。

本发明还提供一种用于曝光系统的操作方法，包括：

S1，Nginx服务器将曝光请求分发给曝光记录服务器；

S2，曝光记录服务器处理曝光请求，得到曝光信息，并根据曝光信息生成曝光日志，同时，将曝光信息存储到Redis数据库；

S3，统计服务器从Redis数据库获取曝光信息，根据曝光信息计算出报表数据，并将报表数据存储于RDBMS数据库中。

根据本发明的一种实施方式，曝光记录服务器包括曝光记录模块，其中，在步骤S2中，曝光记录模块记录所述曝光日志，并将曝光日志对应的曝光信息存储到Redis数据库。

根据本发明的一种实施方式，曝光记录服务器包括曝光补偿模块，其中，步骤S2还包括，当系统异常导致Redis数据库中曝光信息丢失时，曝光补偿模块将曝光信息对应的曝光日志同步至Redis数据库中，Redis数据库根据该曝光日志获取相应的曝光信息。

根据本发明的一种实施方式，统计服务器包括曝光统计模块，其中，在步骤S3中，曝光统计模块定时从Redis数据库获取曝光信息，并根据曝光信息分析广告展示效果，生成报表数据。

根据本发明的一种实施方式，统计服务器包括查询模块，其中，操作方法还包括：

S4，查询模块从RDBMS数据库查询报表数据，并对报表数据进行展示。

为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明进一步详细说明。

图1是本发明实施例提供的曝光系统的拓扑图，曝光系统包括Nginx服务器、展示记录服务器(即曝光记录服务器)、Redis数据库、统计服务器及RDBMS数据库。

如图1所示，广告通过终端展示给用户时，会触发曝光请求，该请求会通过网络到达一个机房的Nginx服务器，Nginx服务器将该曝光请求分发给展示记录服务器，展示记录服务器用于处理曝光请求，得到曝光信息，并根据曝光信息生成曝光日志，同时，将曝光信息存储到Redis数据库；统计服务器用于从Redis数据库获取曝光信息，根据曝光信息计算出报表数据，其中报表数据包括广告展示的点击量、展示量、消费金额、ROI、地域报告、时段报告等，并将报表数据存储于RDBMS数据库中。

其中，展示记录服务器包括曝光记录模块及曝光补偿模块，记录服务器包括曝光统计模块和查询模块，如图2所示，图2是本发明实施例提供的曝光系统的运行流程图：

曝光记录模块，用于快速及时的处理大量的曝光请求，不仅要准确的记录曝光信息而且需要考虑高并发和快速响应的特性，为此，曝光记录模块涉及两个操作，记录曝光日志、存放曝光信息到Redis，两个操作都非常快，而且只是一次简单的Set Redis操作，这样就可以充分利用Redis的高并发性及时处理高并发的曝光请求，而记录的曝光日志，一是可以用来校验曝光报表的准确性，二是可以在系统出现异常时补充数据，保证系统的稳定性。

曝光补偿模块，用于补偿曝光信息，虽然使用Redis的主从等策略保证系统的稳定性，但无法确保曝光记录模块和Redis数据库的网络100％正常，因此设计了曝光补偿模块，在系统出现异常导致曝光信息丢失时，通过曝光补偿模块去曝光记录服务器拿去曝光日志，然后将曝光日志补偿到Redis重新计算丢失的曝光信息。

曝光统计模块，用于是计算各种广告展示的效果的报表数据，而该模块的数据源是从Redis数据库读取，可以保证统计工作的快速执行，可以将统计计算工作分配到不同的服务器，快速计算出各种曝光报表，为查询模块提供数据。

查询模块，用于展示各种曝光报表，广告投放者可以根据报表对广告投放策略进行调整以便达到更好的投放效果。

综上所述，本发明提供的曝光系统不会占用应用服务器额外内存，因此不会占用大量内存，曝光记录服务器只是将曝光信息按照广告位或者关键词缓存到Redis服务器中，记录曝光展示的服务器不需读写数据库，曝光记录服务器处理每个曝光请求只需要记录该曝光信息，并缓存到Redis数据库，不会对RDBMS数据库带来压力，并具有良好的扩展性。而Redis数据库具有高并发实时可用性，从而保证了记录服务器可以再处理较高并发的广告曝光请求的同时保证了各种数据的及时高效的处理，使系统具有处理高并发曝光请求的能力。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于Redis数据库的曝光系统，其特征在于，包括Nginx服务器、曝光记录服务器、Redis数据库、统计服务器及RDBMS数据库，其中：

所述Nginx服务器用于将曝光请求分发给所述曝光记录服务器，所述曝光记录服务器用于处理所述曝光请求，得到曝光信息，并根据所述曝光信息生成曝光日志，同时，将所述曝光信息存储到所述Redis数据库；

所述统计服务器用于从所述Redis数据库获取曝光信息，根据所述曝光信息分析广告展示效果，以及根据所述曝光信息计算出报表数据，并将所述报表数据存储于所述RDBMS数据库中。

2.根据权利要求1所述的曝光系统，其特征在于，所述曝光记录服务器包括曝光记录模块，其用于记录所述曝光日志，并将所述曝光日志对应的曝光信息存储到所述Redis数据库。

3.根据权利要求1所述的曝光系统，其特征在于，所述曝光记录服务器包括曝光补偿模块，当系统异常导致所述Redis数据库中曝光信息丢失时，所述曝光补偿模块将所述曝光信息对应的曝光日志同步至所述Redis数据库中，所述Redis数据库根据该曝光日志获取相应的曝光信息。

4.根据权利要求1所述的曝光系统，其特征在于，所述统计服务器包括曝光统计模块，用于定时从所述Redis数据库获取曝光信息，并根据所述曝光信息分析广告展示效果，生成报表数据。

5.根据权利要求1所述的曝光系统，其特征在于，所述统计服务器包括查询模块，用于从所述RDBMS数据库查询报表数据，并对所述报表数据进行展示。

6.一种用于权利要求1所述曝光系统的操作方法，其特征在于，包括：

S1，Nginx服务器将曝光请求分发给曝光记录服务器；

S2，曝光记录服务器处理所述曝光请求，得到曝光信息，并根据所述曝光信息生成曝光日志，同时，将所述曝光信息存储到Redis数据库；

S3，统计服务器从所述Redis数据库获取曝光信息，根据所述曝光信息分析广告展示效果，以及根据所述曝光信息计算出报表数据，并将所述报表数据存储于所述RDBMS数据库中。

7.根据权利要求6所述的操作方法，其特征在于，所述曝光记录服务器包括曝光记录模块，其中，在所述步骤S2中：

所述曝光记录模块记录所述曝光日志，并将所述曝光日志对应的曝光信息存储到所述Redis数据库。

8.根据权利要求6所述的操作方法，其特征在于，所述曝光记录服务器包括曝光补偿模块，其中，所述步骤S2还包括：

当系统异常导致所述Redis数据库中曝光信息丢失时，所述曝光补偿模块将所述曝光信息对应的曝光日志同步至所述Redis数据库中，所述Redis数据库根据该曝光日志获取相应的曝光信息。

9.根据权利要求6所述的操作方法，其特征在于，所述统计服务器包括曝光统计模块，其中，在所述步骤S3中：

所述曝光统计模块定时从所述Redis数据库获取曝光信息，并根据所述曝光信息分析广告展示效果，生成报表数据。

10.根据权利要求6所述的操作方法，其特征在于，所述统计服务器包括查询模块，其中，所述操作方法还包括：

S4，所述查询模块从所述RDBMS数据库查询报表数据，并对所述报表数据进行展示。