CN114449030A - 一种互联网服务系统、方法、电子设备及存储介质 - Google Patents

Abstract

本发明提供了一种互联网服务系统、方法、电子设备及存储介质，其系统包括：服务模块、脚本模块和处理模块；脚本模块包括：配置管理模块和存储模块；配置管理模块分别与服务模块、存储模块和处理模块连接。服务模块接收外部输入的请求报文和/或配置更新报文，并将报文转发至配置管理模块；配置管理模块根据配置更新报文，向存储模块写入数据；配置管理模块根据请求报文，读取存储模块中的数据，并将数据发送至处理模块。本发明提供的系统，通过设置脚本模块，使得系统能够可以处理高并发非阻塞的处理各种请求。通过设置配置管理模块和存储模块，使得系统能够实现热加载更新无需重启进程，解决了现有技术中更新过程影响服务进程的缺陷。

Description

一种互联网服务系统、方法、电子设备及存储介质

技术领域

本发明涉及信息技术领域技术领域，具体涉及一种互联网服务系统、方法、电子设备及存储介质。

背景技术

nginx做为一个高性能的互联网(http)服务，在互联网很多高并发，低延时的场景上面都有有应用，对于高并发的应用，任何重启、更新nginx都会影响到不少请求，nginx目前是提供一种配置热加载的方式，主要实现是通过进程控制来不断根据新配置生成新的服务进程，逐步关闭旧配置进程的方式实现平滑配置更新生效，这种方式可以保障在更新配置生效的过程中所有服务的请求可用性不会被影响，但是这种方式在更新过程中，有一小段时间nginx的进程数会翻倍，导致内存、cpu等资源利用率上涨。所以，在某些场景下，例如当前设备资源消耗负载特别高、配置更新特别频繁等，会影响到请求的服务质量。因此，在互联网高并发，对质量要求特别高的场景下，通过nginx默认的热加载更新，并不能满足。目前的解决方案大部分是选择请求低峰时段，设备分批更新来减少对服务请求的影响，但是不能克服现有配置加载方式带来的更新过程影响服务进程的缺陷。

发明内容

因此，本发明要解决的技术问题在于克服现有技术中更新过程影响服务进程的缺陷，从而提供一种互联网服务系统、方法、电子设备及存储介质。

根据第一方面，本发明公开了一种互联网服务系统，包括：服务模块、脚本模块和处理模块；所述脚本模块包括：配置管理模块和存储模块；所述服务模块与所述配置管理模块连接；所述配置管理模块与所述存储模块连接；所述配置管理模块与所述处理模块连接；所述服务模块接收外部输入的请求报文和/或外部输入的配置更新报文，并将所述请求报文和/或所述配置更新报文转发至所述配置管理模块；所述配置管理模块根据所述服务模块转发的所述配置更新报文，向所述存储模块写入数据；所述配置管理模块根据所述服务模块转发的请求报文，读取所述存储模块中的数据，并将所述存储模块中的数据发送至所述处理模块。

可选地，所述互联网服务系统还包括：第一输入接口和第二输入接口；所述第一输入接口设置在所述配置管理模块上，接收所述服务模块转发的配置更新报文；所述第二输入接口设置在所述配置管理模块上，接收所述服务模块转发的请求报文。

可选地，所述互联网服务系统还包括：第三输入接口和第四输入接口；所述第三输入接口设置在所述服务模块上，接收外部输入的请求报文；所述第四输入接口设置在所述服务模块上，接收外部输入的配置更新报文。

根据第二方面，本发明公开了一种互联网服务方法，包括：获取服务模块转发的请求报文和外部输入的配置更新报文；根据所述配置更新报文，向存储模块写入数据；根据所述请求报文，读取存储模块中的配置数据，并将所述配置数据发送至处理模块。

可选地，所述根据所述配置更新报文，向存储模块写入数据，包括：根据所述配置更新报文，遍历所述存储模块内存储的配置信息，获取与所述配置更新报文对应的第一配置信息；根据所述配置更新报文，获取第一配置参数；根据所述第一配置参数和所述第一配置信息，更新所述存储模块内存储的配置参数。

可选地，所述根据所述请求报文，读取存储模块中的配置数据，包括：根据所述请求报文，获取与所述请求报文对应的第二配置信息；根据所述第二配置信息，遍历所述存储模块内存储的配置信息，获取与所述第二配置信息对应的第二配置参数。

可选地，所述将所述配置数据发送至处理模块，包括：根据所述请求报文，将所述第二配置信息发送至对应的处理模块。

根据第三方面，本发明公开了一种互联网服务装置，包括：报文接收模块，用于获取服务模块转发的请求报文和外部输入的配置更新报文；数据写入模块，用于根据所述配置更新报文，向存储模块写入数据；配置发送模块，用于根据所述请求报文，读取存储模块中的配置数据，并将所述配置数据发送至处理模块。

根据第四方面，本发明公开了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行如第二方面及第二方面任一可选实施方式所述的互联网服务方法的步骤。

根据第五方面，本发明公开了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如第二方面及第二方面任一可选实施方式所述的互联网服务方法的步骤。

本发明技术方案，具有如下优点：

1.本发明提供的互联网服务系统，通过设置脚本模块，使得互联网服务系统能够具备框架，进而可以处理高并发非阻塞的处理各种请求。通过设置配置管理模块和存储模块，使得互联网服务系统能够实现热加载更新无需重启进程，解决了现有技术中更新过程影响服务进程的缺陷。

2.本发明公开的互联网服务方法，通过获取服务模块转发的请求报文和外部输入的配置更新报文,随后根据配置更新报文，向存储模块写入数据，使得配置数据可以实时更新，避免了更新配置数据的过程影响处理进程。通过根据请求报文，读取存储模块中的配置数据，并将配置数据发送至处理模块，使得处理模块在进行处理时可以获取到最新的配置数据。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例中互联网服务系统的一个具体示例的原理框图；

图2为本发明实施例中互联网服务系统的另一个具体示例的原理框图；

图3为本发明实施例中互联网服务方法的一个具体示例的流程图；

图4为本发明实施例中互联网服务装置的一个具体示例的原理框图；

图5为本发明实施例中电子设备的一个具体示例图。

具体实施方式

下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。

在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，还可以是两个元件内部的连通，可以是无线连接，也可以是有线连接。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

此外，下面所描述的本发明不同实施方式中所涉及的技术特征只要彼此之间未构成冲突就可以相互结合。

本发明公开了一种互联网服务系统，如图1所示，包括：服务模块1、脚本模块2和处理模块3；

所述脚本模块2包括：配置管理模块21和存储模块22；

所述服务模块1与所述配置管理模块21连接；所述配置管理模块21与所述存储模块22连接；所述配置管理模块21与所述处理模块3连接；

所述服务模块1接收外部输入的请求报文和/或外部输入的配置更新报文，并将所述请求报文和/或所述配置更新报文转发至所述配置管理模块21；

所述配置管理模块21根据所述服务模块1转发的所述配置更新报文，向所述存储模块22写入数据；

所述配置管理模块21根据所述服务模块1转发的请求报文，读取所述存储模块22中的数据，并将所述存储模块22中的数据发送至所述处理模块3。

本发明提供的互联网服务系统，通过设置脚本模块，使得互联网服务系统能够具备框架，进而可以处理高并发非阻塞的处理各种请求。通过设置配置管理模块和存储模块，使得互联网服务系统能够实现热加载更新无需重启进程，解决了现有技术中更新过程影响服务进程的缺陷。

作为本发明的一种可选地实施方式，如图2所示，互联网服务系统还包括：第一输入接口211和第二输入接口212；

所述第一输入接口211设置在所述配置管理模块21上，接收所述服务模块1转发的配置更新报文；

所述第二输入接口212设置在所述配置管理模块21上，接收所述服务模块1转发的请求报文。

作为本发明的一种可选地实施方式，如图2所示，互联网服务系统还包括：第三输入接口11和第四输入接口12；

所述第三输入接口11设置在所述服务模块1上，接收外部输入的请求报文；

所述第四输入接口12设置在所述服务模块1上，接收外部输入的配置更新报文。

本发明还公开了一种互联网服务方法，如图3所示，包括如下步骤：

步骤S1，获取服务模块转发的请求报文和外部输入的配置更新报文。

示例性地，服务模块可以为nginx系统，可以在增加nginx系统中增加第三方插件nginx-lua模块实现互联网服务方法，nginx-lua模块能够通过编写lua代码，处理请求逻辑。

其中，ngx_lua将Lua嵌入Nginx，可以让Nginx执行Lua脚本，并且高并发、非阻塞的处理各种请求。Lua内建协程，这样就可以很好的将异步回调转换成顺序调用的形式。ngx_lua在Lua中进行的IO操作都会委托给Nginx的事件模型，从而实现非阻塞调用。开发者可以采用串行的方式编写程序，ngx_lua会自动的在进行阻塞的IO操作时中断，保存上下文；然后将IO操作委托给Nginx事件处理机制，在IO操作完成后，ngx_lua会恢复上下文，程序继续执行，这些操作都是对用户程序透明的。每个Nginx Worker进程持有一个Lua解释器或者LuaJIT实例，被这个Worker处理的所有请求共享这个实例。每个请求的Context会被Lua轻量级的协程分割，从而保证各个请求是独立的。ngx_lua采用“one-coroutine-per-request”的处理模型，对于每个用户请求，ngx_lua会唤醒一个协程用于执行用户代码处理请求，当请求处理完成这个协程会被销毁。每个协程都有一个独立的全局环境，继承于全局共享的、只读的公共数据comman data。所以，被用户代码注入全局空间的任何变量都不会影响其他请求的处理，并且这些变量在请求处理完成后会被释放，这样就保证所有的用户代码都运行在一个沙箱sandbox，这个沙箱与请求具有相同的生命周期。得益于Lua协程的支持，ngx_lua在处理10000个并发请求时只需要很少的内存。根据测试，ngx_lua处理每个请求只需要2KB的内存，如果使用LuaJIT则会更少。所以ngx_lua非常适合用于实现可扩展的、高并发的服务。

步骤S2，根据所述配置更新报文，向存储模块写入数据。

具体地，根据所述配置更新报文，向存储模块写入数据的过程，可以首先根据所述配置更新报文，遍历所述存储模块内存储的配置信息，获取与所述配置更新报文对应的第一配置信息；随后根据所述配置更新报文，获取第一配置参数；最后根据所述第一配置参数和所述第一配置信息，更新所述存储模块内存储的配置参数。

示例性地，根据所述配置更新报文，向存储模块写入数据的过程，针对nginx系统，可以利用第三方插件nginx-lua模块的特性，用lua语言编写一个配置管理的模块。特别地，通过封装一个http接口，实现配置的设置，接口通过发送json来传递设置配置信息，配置信息中包括所需更改的服务名称server_name和数值value。当接口触发设置配置后，配置信息会存入存储模块中。

特别地，针对其他服务系统，可以通过增加其他插件模块实现，本发明对此不作限定。

步骤S3，根据所述请求报文，读取存储模块中的配置数据，并将所述配置数据发送至处理模块。

具体地，根据所述请求报文，读取存储模块中的配置数据的过程，可以首先根据所述请求报文，获取与所述请求报文对应的第二配置信息，随后根据所述第二配置信息，遍历所述存储模块内存储的配置信息，获取与所述第二配置信息对应的第二配置参数。

具体地，将所述配置数据发送至处理模块的过程，可以通过根据所述请求报文，将所述第二配置信息发送至对应的处理模块。

示例性地，根据所述请求报文，读取存储模块中的配置数据，并将所述配置数据发送至处理模块的过程，针对nginx系统，可以利用第三方插件nginx-lua模块的特性，用lua语言编写一个配置管理的模块。特别地，请求报文中中包括所需进行的服务名称server_name和数值value。当收到请求时，会自动触发lua逻辑的入口，并且会分析出请求所属的server_name，因此当进入lua入口后，通过调用存储模块中的数据，找到匹配server_name的配置项，读取对应的配置项，在请求过程中使用配置项，实现配置生效。

作为本发明的一种可选地实施方式，针对nginx系统，由于nginx-lua模块只支持直接操作nginx的少部分变量/配置项，对很多配置都不能直接修改，所以要实现在配置管理模块这个层面来管理修改更多的配置，则需要通过二次开发，将nginx配置项转为可以放到配置管理模块直接修改的配置项。以配置项proxy_connect_timeout举例，该配置项作用是设置上游服务的连接超时时间，比如我们想把超时时间设置为100秒，一般使用nginx自身配置项来是修改conf文件中的proxy_connect_timeout变量的值(配置举例如下)，但是需要reload nginx可以对nginx涉及的参数通过二次开发，将其都管理到上述的配置管理模块中，实现nginx的配置统一由lua代码的配置模块进行管理。

示例性地，以另一个配置项proxy_connect_timeout为例，该配置项的作用为设置上游服务的连接超时时间。在常规nginx系统中，具体生效代码可以为位于nginx服务系统架构中/src/http/ngx_http_upstream.c函数中的ngx_http_upstream_init函数，因此，需要在该函数中调用set_proxy_connect_timeout函数，使得该配置能够在正常工作的进程中生效。其中set_proxy_connect_timeout的作用是将配置管理模块中的参数设置到真正生效的变量中，主要逻辑包括首先读取配置管理模块中对应server_name的proxy_connect_timeout配置信息，随后将信息设置到最终生效的变量中。特别地，lua逻辑和nginx的c逻辑，可以通过luaffi技术实现，本发明对此不作限定。

本发明公开的互联网服务方法，通过获取服务模块转发的请求报文和外部输入的配置更新报文,随后根据配置更新报文，向存储模块写入数据，使得配置数据可以实时更新，避免了更新配置数据的过程影响处理进程。通过根据请求报文，读取存储模块中的配置数据，并将配置数据发送至处理模块，使得处理模块在进行处理时可以获取到最新的配置数据。

本发明还公开了一种互联网服务装置，如图4所示，包括：

报文接收模块101，用于获取服务模块转发的请求报文和外部输入的配置更新报文；具体内容可以参见本发明方法实施例中步骤S1的相关描述，此处不再赘述。

数据写入模块102，用于根据所述配置更新报文，向存储模块写入数据；具体内容可以参见本发明方法实施例中步骤S2的相关描述，此处不再赘述。

配置发送模块103，用于根据所述请求报文，读取存储模块中的配置数据，并将所述配置数据发送至处理模块；具体内容可以参见本发明方法实施例中步骤S3的相关描述，此处不再赘述。

本发明公开的互联网服务装置，通过获取服务模块转发的请求报文和外部输入的配置更新报文,随后根据配置更新报文，向存储模块写入数据，使得配置数据可以实时更新，避免了更新配置数据的过程影响处理进程。通过根据请求报文，读取存储模块中的配置数据，并将配置数据发送至处理模块，使得处理模块在进行处理时可以获取到最新的配置数据。

本发明实施例还提供了一种电子设备，如图5所示，该电子设备可以包括处理器201和存储器202，其中处理器201和存储器202可以通过总线或者其他方式连接，图5中以通过总线连接为例。

处理器201可以为中央处理器(Central Processing Unit，CPU)。处理器201还可以为其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。

存储器202作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块，如本发明实施例中的互联网服务方法对应的程序指令/模块。处理器201通过运行存储在存储器202中的非暂态软件程序、指令以及模块，从而执行处理器的各种功能应用以及数据处理，即实现上述方法实施例中的互联网服务方法。

存储器202可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储处理器201所创建的数据等。此外，存储器202可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器202可选包括相对于处理器201远程设置的存储器，这些远程存储器可以通过网络连接至处理器201。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

一个或者多个模块存储在存储器202中，当被处理器201执行时，执行如图3所示实施例中的互联网服务方法。

虽然关于示例实施例及其优点已经详细说明，但是本领域技术人员可以在不脱离本发明的精神和所附权利要求限定的保护范围的情况下对这些实施例进行各种变化、替换和修改，这样的修改和变型均落入由所附权利要求所限定的范围之内。对于其他例子，本领域的普通技术人员应当容易理解在保持本发明保护范围内的同时，工艺步骤的次序可以变化。

此外，本发明的应用范围不局限于说明书中描述的特定实施例的工艺、机构、制造、物质组成、手段、方法及步骤。从本发明的公开内容，作为本领域的普通技术人员将容易地理解，对于目前已存在或者以后即将开发出的工艺、机构、制造、物质组成、手段、方法或步骤，其中它们执行与本发明描述的对应实施例大体相同的功能或者获得大体相同的结果，依照本发明可以对它们进行应用。因此，本发明所附权利要求旨在将这些工艺、机构、制造、物质组成、手段、方法或步骤包含在其保护范围内。

Claims (10)

1.一种互联网服务系统，其特征在于，包括：服务模块、脚本模块和处理模块；

所述脚本模块包括：配置管理模块和存储模块；

所述服务模块与所述配置管理模块连接；所述配置管理模块与所述存储模块连接；所述配置管理模块与所述处理模块连接；

所述服务模块接收外部输入的请求报文和/或外部输入的配置更新报文，并将所述请求报文和/或所述配置更新报文转发至所述配置管理模块；

所述配置管理模块根据所述服务模块转发的所述配置更新报文，向所述存储模块写入数据；

所述配置管理模块根据所述服务模块转发的请求报文，读取所述存储模块中的数据，并将所述存储模块中的数据发送至所述处理模块。

2.根据权利要求1所述的互联网服务系统，其特征在于，还包括：第一输入接口和第二输入接口；

所述第一输入接口设置在所述配置管理模块上，接收所述服务模块转发的配置更新报文；

所述第二输入接口设置在所述配置管理模块上，接收所述服务模块转发的请求报文。

3.根据权利要求1所述的互联网服务系统，其特征在于，还包括：第三输入接口和第四输入接口；

所述第三输入接口设置在所述服务模块上，接收外部输入的请求报文；

所述第四输入接口设置在所述服务模块上，接收外部输入的配置更新报文。

4.一种互联网服务方法，其特征在于，包括：

获取服务模块转发的请求报文和外部输入的配置更新报文；

根据所述配置更新报文，向存储模块写入数据；

根据所述请求报文，读取存储模块中的配置数据，并将所述配置数据发送至处理模块。

5.根据权利要求4所述的互联网服务方法，其特征在于，所述根据所述配置更新报文，向存储模块写入数据，包括：

根据所述配置更新报文，遍历所述存储模块内存储的配置信息，获取与所述配置更新报文对应的第一配置信息；

根据所述配置更新报文，获取第一配置参数；

根据所述第一配置参数和所述第一配置信息，更新所述存储模块内存储的配置参数。

6.根据权利要求4所述的互联网服务方法，其特征在于，所述根据所述请求报文，读取存储模块中的配置数据，包括：

根据所述请求报文，获取与所述请求报文对应的第二配置信息；

根据所述第二配置信息，遍历所述存储模块内存储的配置信息，获取与所述第二配置信息对应的第二配置参数。

7.根据权利要求6所述的互联网服务方法，其特征在于，所述将所述配置数据发送至处理模块，包括：

根据所述请求报文，将所述第二配置信息发送至对应的处理模块。

8.一种互联网服务装置，其特征在于，包括：

报文接收模块，用于获取服务模块转发的请求报文和外部输入的配置更新报文；

数据写入模块，用于根据所述配置更新报文，向存储模块写入数据；

配置发送模块，用于根据所述请求报文，读取存储模块中的配置数据，并将所述配置数据发送至处理模块。

9.一种电子设备，其特征在于，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行如权利要求4-7任一所述的互联网服务方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求4-7中任一项所述的互联网服务方法的步骤。

Images