CN115964409A - 一种系统访问数据的管理方法、装置、设备及存储介质 - Google Patents

Abstract

本发明公开了一种系统访问数据的管理方法、装置、设备及存储介质。该方法包括通过政务服务系统中各个业务模块的埋点获取各个业务模块的用户访问行为数据；将用户访问行为数据经分布式存储集群存入分布式搜索集群中；确定当前处理业务的类型，在当前处理业务的类型为复杂业务时，通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据；在当前处理业务的类型为非复杂业务时，从分布式搜索集群中获取当前处理业务对应的目标数据。本发明实施例的技术方案提供一种新的系统访问数据的管理方法，使管理人员更好掌握系统情况，便于优化升级系统以提升用户满意度。

Description

一种系统访问数据的管理方法、装置、设备及存储介质

技术领域

本发明涉及互联网管理技术领域，尤其涉及一种系统访问数据的管理方法、装置、设备及存储介质。

背景技术

政务服务系统作为面向公众的开放性服务平台，访问用户量巨大，因此对于政务服务平台的运行性能、服务性能及安全性能等要求较高。现有技术通过对用户访问行为数据统计分析以实现对政务服务系统的优化升级和运行维护等，但存在如下一些问题：用户访问行为数据并发量和数据量大，导致管理人员无法灵活统计用户对系统的访问情况，以掌握系统运行情况、提升用户满意度，让项目开发和运营相关人员更了解系统，更好的优化升级等。

发明内容

本发明提供了一种系统访问数据的管理方法、装置、设备及存储介质，以提供一种新的系统访问数据的管理方法，使管理人员更好掌握系统情况，便于优化升级系统以提升用户满意度。

根据本发明的一方面，提供了一种系统访问数据的管理方法，包括：

通过政务服务系统中各个业务模块的埋点获取所述各个业务模块的用户访问行为数据；

将所述用户访问行为数据经分布式存储集群存入分布式搜索集群中；

确定当前处理业务的类型，在所述当前处理业务的类型为复杂业务时，通过分布式计算引擎从所述分布式存储集群中获取所述当前处理业务对应的目标数据；

在所述当前处理业务的类型为非复杂业务时，从所述分布式搜索集群中获取所述当前处理业务对应的目标数据。

根据本发明的另一方面，提供了一种系统访问数据的管理装置，包括：

访问行为数据获取模块，用于通过政务服务系统的各个业务模块的埋点获取所述各个业务模块的用户访问行为数据；

访问行为数据存储模块，用于将所述用户访问行为数据经分布式存储集群存入分布式搜索集群中；

复杂业务数据获取模块，用于确定当前处理业务的类型，在所述当前处理业务的类型为复杂业务时，通过分布式计算引擎从所述分布式存储集群中获取所述当前处理业务对应的目标数据；

非复杂业务数据获取模块，用于在所述当前处理业务的类型为非复杂业务时，从所述分布式搜索集群中获取所述当前处理业务对应的目标数据。

根据本发明的另一方面，提供了一种电子设备，所述电子设备包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例所述的系统访问数据的管理方法。

根据本发明的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本发明任一实施例所述的系统访问数据的管理方法。

本发明实施例的技术方案，通过政务服务系统中各个业务模块的埋点获取各个业务模块的用户访问行为数据；将用户访问行为数据经分布式存储集群存入分布式搜索集群中；确定当前处理业务的类型，在当前处理业务的类型为复杂业务时，通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据；在当前处理业务的类型为非复杂业务时，从分布式搜索集群中获取当前处理业务对应的目标数据，解决了现有技术中由于用户访问行为数据并发量和数据量大导致管理人员无法灵活统计用户对系统的访问情况的问题，提供一种新的系统访问数据的管理方法，使管理人员更好掌握系统情况，便于优化升级系统以提升用户满意度。

应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一提供的一种系统访问数据的管理方法的流程图；

图2a为本发明实施例二提供的另一种系统访问数据的管理方法的流程图；

图2b为本发明实施例二提供的一种图表界面示意图；

图2c为本发明实施例二提供一种个性化信息推荐界面示意图；

图2d为本发明实施例二提供的一种系统访问数据的管理方法的具体应用流程图；

图3为本发明实施例三提供的一种系统访问数据的管理装置的结构示意图；

图4是实现本发明实施例的系统访问数据的管理方法的电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“目标”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例一

图1为本发明实施例一提供的一种系统访问数据的管理方法的流程图，本实施例可适用于对政务服务系统的访问数据进行监测管理的情况，该方法可以由系统访问数据的管理装置来执行，该系统访问数据的管理装置可以采用硬件和/或软件的形式实现，该系统访问数据的管理装置可配置于政务服务系统对应的服务器或服务器集群中。如图1所示，该方法包括：

S110、通过政务服务系统中各个业务模块的埋点获取各个业务模块的用户访问行为数据。

其中，业务模块例如可以指信息发布、办事指南、表单下载、部门打分、业务评议、投诉中心、网上预约、网上咨询、用户注册和在线填报等功能模块。用户访问行为数据可以指用户访问业务模块的频率、时长、以及用户在政务服务系统的其他点击和浏览行为等数据。

在本实施例中，可以通过在政务服务系统中各个业务模块的埋点采集用户访问行为数据。这样设置的好处在于，可以更全面地获取用户访问行为数据。

S120、将用户访问行为数据经分布式存储集群存入分布式搜索集群中。

其中，分布式存储集群典型的可以是kafka集群。分布式搜索集群典型的可以是es集群。

在本实施例中，由于用户访问行为数据的并发量大，可以先使用一个消息中间件(如kafka集群)对用户访问行为数据进行处理后再存入分布式搜索集群。

在一个可选实施方式中，将用户访问行为数据经分布式存储集群存入分布式搜索集群中，可以包括：将用户访问行为数据存入分布式存储集群中；将分布式存储集群中存储的用户访问行为数据进行格式转换，得到转换后数据；根据转换后数据的日期，建立分布式索引；对应于分布式索引将转换后数据存入分布式搜索集群中。

其中，典型的可以通过logstash对分布式存储集群中的用户访问行为数据进行格式转换。分布式索引典型的可以指es索引。

本实施例中，可以将并发量大的用户访问行为数据存入分布式存储集群，通过logstash进行格式转换后得到处理后的用户访问行为数据。进一步可以根据处理后用户访问行为数据的日期，为同一日期的数据建立对应的分布式索引，从而根据分布式索引将转换后数据对应存入分布式搜索集群中。这样设置的好处在于，可以对数据量和并发量巨大的用户访问行为数据进行更规范和准确的管理，为政府服务系统的开发人员和运营人员了解系统提供更好的基础。

S130、确定当前处理业务的类型，在当前处理业务的类型为复杂业务时，通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据。

其中，分布式计算引擎典型的可以指flink。目标数据可以指当前处理业务需要的用户访问行为数据。

在本实施例中，若当前处理业务需要进行复杂统计、分析和计算，可以确定为复杂业务，可以通过分布式计算引擎直接对接分布式存储集群获取当前处理业务对应的用户访问行为数据作为目标数据。

S140、在当前处理业务的类型为非复杂业务时，从分布式搜索集群中获取当前处理业务对应的目标数据。

在本实施例中，对于非复杂业务，可以直接从分布式搜索集群中获取当前处理业务对应的用户访问行为数据。

本发明实施例的技术方案，通过政务服务系统中各个业务模块的埋点获取各个业务模块的用户访问行为数据；将用户访问行为数据经分布式存储集群存入分布式搜索集群中；确定当前处理业务的类型，在当前处理业务的类型为复杂业务时，通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据；在当前处理业务的类型为非复杂业务时，从分布式搜索集群中获取当前处理业务对应的目标数据的技术手段，解决现有技术中由于用户访问行为数据并发量和数据量大导致管理人员无法灵活统计用户对系统的访问情况的问题，提供一种新的系统访问数据的管理方法，使管理人员更好掌握系统情况，便于优化升级系统以提升用户满意度。

在上述技术方案的基础上，系统访问数据的管理方法还可以包括：通过分布式计算引擎从分布式存储集群获取用户的请求地址；通过分布式计算引擎的设定时间窗口对请求地址进行监测，确定异常请求地址并进行管理。

其中，用户的请求地址可以指访问政务服务系统的IP(Internet Protocol，网际互连协议)地址。设定时间窗口可以指flink计算数据的一个时间段。异常请求地址可以指存在异常情况的用户的请求地址。

本实施例中，可以通过分布式计算引擎对接分布式存储集群，获取用户的请求地址，进而在分布式计算引擎的设定时间窗口内对用户的请求地址进行安全监测以确定异常请求地址并对其进行管理。

可选的，通过分布式计算引擎的设定时间窗口对请求地址进行监测，确定异常请求地址并进行管理，可以包括：在设定时间窗口内，对同一请求地址的访问次数进行统计计算，得到每个请求地址的访问次数；将访问次数超过预设阈值的请求地址确定为异常请求地址；将异常请求地址反馈至政务服务系统的防爬虫系统进行黑名单管理。

具体的，可以通过分布式计算引擎在设定时间窗口内对同一请求地址的访问次数进行统计，若同一请求地址的访问次数超过预设阈值，则可以将其确定为异常请求地址，并将该异常请求地址反馈至政务服务系统的放爬虫系统进行黑名单管理。这样设置的好处在于，可以实时监测访问政务服务系统的流量，以保障系统的安全。

实施例二

图2a为本发明实施例二提供的另一种系统访问数据的管理方法的流程图，本实施例在上述实施例的基础上，在通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据和从分布式搜索集群中获取当前处理业务对应的目标数据之后分别增加操作。如图2a所示，该方法包括：

S210、通过政务服务系统中各个业务模块的埋点获取各个业务模块的用户访问行为数据。

S220、将用户访问行为数据经分布式存储集群存入分布式搜索集群中。

S230、确定当前处理业务的类型，在当前处理业务的类型为复杂业务时，通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据。

S240、通过分布式计算引擎对目标数据进行统计分析得到关键指标统计报表。

其中，关键指标统计可以指用户对政务服务系统的某个业务功能的访问次数、访问频率和热门访问时间段等指标。

在本实施例中，通过分布式计算引擎，可以对目标数据进行快速统计分析，得到复杂细致的关键指标统计报表。这样设置的好处在于，可以适用复杂的计算逻辑，全面分析用户，提升统计查询性能。

S250、将关键指标统计报表通过关系型数据库管理系统进行展示。

其中，关系型数据库管理系统典型的可以指mysql。

本实施例中，可以将关键指标统计报表等统计结果入库mysql，由mysql查询统计结果展示。

S260、在当前处理业务的类型为非复杂业务时，从分布式搜索集群中获取当前处理业务对应的目标数据。

S270、通过可视化平台对目标数据进行分析生成图表并展示。

其中，可视化平台典型的可以指kibana。

在本实施例中，可以搭配kibana查询得到当前处理的非复杂业务对应的目标数据，进而分析生成图表展示。示例性的，图2b为本发明实施例二提供的一种图表界面示意图。

在上述技术方案的基础上，系统访问数据的管理方法还可以包括：从可视化配置界面获取推荐规则，推荐规则由管理人员根据关键指标统计报表或图表在可视化配置界面设定；按照推荐规则进行个性化信息推荐。

示例性的，图2c为本发明实施例二提供一种个性化信息推荐界面示意图。管理人员可以自主设定推荐规则。

这样设置的好处在于，可以为管理人员根据与用户访问行为数据对应的关键指标统计报表或者图表自主设定推荐规则的可行性，从而提升用户体验感。

本发明实施例的技术方案，通过政务服务系统中各个业务模块的埋点获取各个业务模块的用户访问行为数据；将用户访问行为数据经分布式存储集群存入分布式搜索集群中；确定当前处理业务的类型，在当前处理业务的类型为复杂业务时，通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据；通过分布式计算引擎对目标数据进行统计分析得到关键指标统计报表；将关键指标统计报表通过关系型数据库管理系统进行展示；在当前处理业务的类型为非复杂业务时，从分布式搜索集群中获取当前处理业务对应的目标数据；通过可视化平台对目标数据进行分析生成图表并展示的技术手段，解决现有技术中由于用户访问行为数据并发量和数据量大导致管理人员无法灵活统计用户对系统的访问情况的问题，提供一种新的系统访问数据的管理方法，便于管理人员查看系统受访问情况，便于优化升级系统以提升用户满意度，还提升系统的统计查询性能。

示例性的，图2d为本发明实施例二提供的一种系统访问数据的管理方法的具体应用流程图。规划用户行为埋点；通过采集日志的组件filebeat采集用户点击和浏览等用户访问行为数据；利用kafka集群的高可用、高并发和支持快捷横向扩展等特点接收日志信息(即用户访问行为数据)，可以有很好的性能，也能很好的满足后期接入更多的系统带来的并发要求；利用logstash转换数据格式，把用户访问行为数据输入到es集群；es集群按日期存储数据(可以理解成一天有一个单独的数据集合，便于关闭前期数据和分天统计数据等)；通过kibana直连es集群，使运营可以可视化操作，自定义表单报表；复杂的业务需求通过flink计算来实现，目前规划的数据流有两个方向，一个是计算关键指标用于图表展示，另一个是监控系统流量，发现异常IP，流向防护系统。

实施例三

图3为本发明实施例三提供的一种系统访问数据的管理装置的结构示意图。如图3所示，该装置包括：访问行为数据获取模块310、访问行为数据存储模块320、复杂业务数据获取模块330和非复杂业务数据获取模块340。其中：

访问行为数据获取模块310，用于通过政务服务系统的各个业务模块的埋点获取所述各个业务模块的用户访问行为数据；

访问行为数据存储模块320，用于将所述用户访问行为数据经分布式存储集群存入分布式搜索集群中；

复杂业务数据获取模块330，用于确定当前处理业务的类型，在所述当前处理业务的类型为复杂业务时，通过分布式计算引擎从所述分布式存储集群中获取所述当前处理业务对应的目标数据；

非复杂业务数据获取模块340，用于在所述当前处理业务的类型为非复杂业务时，从所述分布式搜索集群中获取所述当前处理业务对应的目标数据。

本发明实施例的技术方案，通过政务服务系统中各个业务模块的埋点获取各个业务模块的用户访问行为数据；将用户访问行为数据经分布式存储集群存入分布式搜索集群中；确定当前处理业务的类型，在当前处理业务的类型为复杂业务时，通过分布式计算引擎从分布式存储集群中获取当前处理业务对应的目标数据；在当前处理业务的类型为非复杂业务时，从分布式搜索集群中获取当前处理业务对应的目标数据，解决现有技术中由于用户访问行为数据并发量和数据量大导致管理人员无法灵活统计用户对系统的访问情况的问题，提供一种新的系统访问数据的管理方法，使管理人员更好掌握系统情况，便于优化升级系统以提升用户满意度。

可选的，访问行为数据存储模块320，具体可以用于：

将所述用户访问行为数据存入所述分布式存储集群中；

将所述分布式存储集群中存储的所述用户访问行为数据进行格式转换，得到转换后数据；

根据所述转换后数据的日期，建立分布式索引；

对应于所述分布式索引将所述转换后数据存入所述分布式搜索集群中。

可选的，所述系统访问数据的管理装置，还包括，统计报表展示模块，用于在所述当前处理业务的类型为复杂业务时，通过分布式计算引擎从所述分布式存储集群中获取所述当前处理业务对应的目标数据之后：

通过所述分布式计算引擎对所述目标数据进行统计分析得到关键指标统计报表；

将所述关键指标统计报表通过关系型数据库管理系统进行展示。

可选的，所述系统访问数据的管理装置，还包括，图表展示模块，用于在所述当前处理业务的类型为非复杂业务时，从所述分布式搜索集群中获取所述当前处理业务对应的目标数据之后：

通过可视化平台对所述目标数据进行分析生成图表并展示。

可选的，所述系统访问数据的管理装置，还包括，个性化信息推荐模块，用于：

从可视化配置界面获取推荐规则，所述推荐规则由管理人员根据所述关键指标统计报表或所述图表在所述可视化配置界面设定；

按照所述推荐规则进行个性化信息推荐。

可选的，所述系统访问数据的管理装置，还包括，异常请求地址管理模块，具体包括：

用户请求地址获取子单元，用于通过所述分布式计算引擎从所述分布式存储集群获取用户的请求地址；

异常请求地址管理子单元，用于通过所述分布式计算引擎的设定时间窗口对所述请求地址进行监测，确定异常请求地址并进行管理。

可选的，异常请求地址管理子单元，具体可以用于：

在设定时间窗口内，对同一请求地址的访问次数进行统计计算，得到每个请求地址的访问次数；

将所述访问次数超过预设阈值的请求地址确定为所述异常请求地址；

将所述异常请求地址反馈至所述政务服务系统的防爬虫系统进行黑名单管理。

本发明实施例所提供的系统访问数据的管理装置可执行本发明任意实施例所提供的系统访问数据的管理方法，具备执行方法相应的功能模块和有益效果。

本申请技术方案中对用户访问行为数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。

实施例四

图4示出了可以用来实施本发明的实施例的电子设备400的结构示意图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本发明的实现。

如图4所示，电子设备400包括至少一个处理器401，以及与至少一个处理器401通信连接的存储器，如只读存储器(ROM)402、随机访问存储器(RAM)403等，其中，存储器存储有可被至少一个处理器执行的计算机程序，处理器401可以根据存储在只读存储器(ROM)402中的计算机程序或者从存储单元408加载到随机访问存储器(RAM)403中的计算机程序，来执行各种适当的动作和处理。在RAM 403中，还可存储电子设备400操作所需的各种程序和数据。处理器401、ROM 402以及RAM 403通过总线404彼此相连。输入/输出(I/O)接口405也连接至总线404。

电子设备400中的多个部件连接至I/O接口405，包括：输入单元406，例如键盘、鼠标等；输出单元407，例如各种类型的显示器、扬声器等；存储单元408，例如磁盘、光盘等；以及通信单元409，例如网卡、调制解调器、无线通信收发机等。通信单元409允许电子设备400通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

处理器401可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器401的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器401执行上文所描述的各个方法和处理，例如系统访问数据的管理方法。

在一些实施例中，系统访问数据的管理方法可被实现为计算机程序，其被有形地包含于计算机可读存储介质，例如存储单元408。在一些实施例中，计算机程序的部分或者全部可以经由ROM 402和/或通信单元409而被载入和/或安装到电子设备400上。当计算机程序加载到RAM 403并由处理器401执行时，可以执行上文描述的系统访问数据的管理方法的一个或多个步骤。备选地，在其他实施例中，处理器401可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行系统访问数据的管理方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器，使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本发明的上下文中，计算机可读存储介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。备选地，计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互，可以在电子设备上实施此处描述的系统和技术，该电子设备具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)、区块链网络和互联网。

计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务中，存在的管理难度大，业务扩展性弱的缺陷。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本发明的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (10)

1.一种系统访问数据的管理方法，其特征在于，包括：

通过政务服务系统中各个业务模块的埋点获取所述各个业务模块的用户访问行为数据；

将所述用户访问行为数据经分布式存储集群存入分布式搜索集群中；

确定当前处理业务的类型，在所述当前处理业务的类型为复杂业务时，通过分布式计算引擎从所述分布式存储集群中获取所述当前处理业务对应的目标数据；

在所述当前处理业务的类型为非复杂业务时，从所述分布式搜索集群中获取所述当前处理业务对应的目标数据。

2.根据权利要求1所述的方法，其特征在于，将所述用户访问行为数据经分布式存储集群存入分布式搜索集群中，包括：

将所述用户访问行为数据存入所述分布式存储集群中；

将所述分布式存储集群中存储的所述用户访问行为数据进行格式转换，得到转换后数据；

根据所述转换后数据的日期，建立分布式索引；

对应于所述分布式索引将所述转换后数据存入所述分布式搜索集群中。

3.根据权利要求1所述的方法，其特征在于，在所述当前处理业务的类型为复杂业务时，通过分布式计算引擎从所述分布式存储集群中获取所述当前处理业务对应的目标数据之后，还包括：

通过所述分布式计算引擎对所述目标数据进行统计分析得到关键指标统计报表；

将所述关键指标统计报表通过关系型数据库管理系统进行展示。

4.根据权利要求1所述的方法，其特征在于，在所述当前处理业务的类型为非复杂业务时，从所述分布式搜索集群中获取所述当前处理业务对应的目标数据之后，还包括：

通过可视化平台对所述目标数据进行分析生成图表并展示。

5.根据权利要求3或4所述的方法，其特征在于，还包括：

从可视化配置界面获取推荐规则，所述推荐规则由管理人员根据所述关键指标统计报表或所述图表在所述可视化配置界面设定；

按照所述推荐规则进行个性化信息推荐。

6.根据权利要求1所述的方法，其特征在于，还包括：

通过所述分布式计算引擎从所述分布式存储集群获取用户的请求地址；

通过所述分布式计算引擎的设定时间窗口对所述请求地址进行监测，确定异常请求地址并进行管理。

7.根据权利要求6所述的方法，其特征在于，通过所述分布式计算引擎的设定时间窗口对所述请求地址进行监测，确定异常请求地址并进行管理，包括：

在设定时间窗口内，对同一请求地址的访问次数进行统计计算，得到每个请求地址的访问次数；

将所述访问次数超过预设阈值的请求地址确定为所述异常请求地址；

将所述异常请求地址反馈至所述政务服务系统的防爬虫系统进行黑名单管理。

8.一种系统访问数据的管理装置，其特征在于，包括：

访问行为数据获取模块，用于通过政务服务系统的各个业务模块的埋点获取所述各个业务模块的用户访问行为数据；

访问行为数据存储模块，用于将所述用户访问行为数据经分布式存储集群存入分布式搜索集群中；

复杂业务数据获取模块，用于确定当前处理业务的类型，在所述当前处理业务的类型为复杂业务时，通过分布式计算引擎从所述分布式存储集群中获取所述当前处理业务对应的目标数据；

非复杂业务数据获取模块，用于在所述当前处理业务的类型为非复杂业务时，从所述分布式搜索集群中获取所述当前处理业务对应的目标数据。

9.一种电子设备，其特征在于，所述电子设备包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-7中任一项所述的系统访问数据的管理方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的系统访问数据的管理方法。

Images