CN110535964B - 基于Paas连接器实现的数据处理方法及装置 - Google Patents

Abstract

本发明实施例提出基于Paas连接器实现的数据处理方法及装置、存储介质，其中，所述方法包括：通过连接器在租户网络和Paas服务网络间建立数据传输链路；通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例。采用本发明实施例，可以避免大量占用租户的内网IP地址，且可以使租户网络和Paas网络实现互通。

Description

基于Paas连接器实现的数据处理方法及装置

技术领域

本发明涉及数据处理技术领域，尤其涉及一种基于Paas连接器实现的数据处理方法及装置、存储介质。

背景技术

目前大部分Paas服务都是在租户内网创建Paas服务实例，这会导致与自己的VDC业务耦合相当高，而且占用租户的内网IP地址，租户所在的内网网络和Paas网络分别是各自的二层平面，无法互通。然而，对这些问题，相关技术中并未存在有效的解决方案。

发明内容

本发明实施例提供一种基于Paas连接器实现的数据处理方法，以解决现有技术中的一个或多个技术问题。

第一方面，本发明实施例提供了一种基于Paas连接器实现的数据处理方法，所述方法包括：

通过连接器在租户网络和Paas服务网络间建立数据传输链路；

通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例。

一实施方式中，在所述通过连接器在租户网络和Paas服务网络间建立数据传输链路之前，所述方法还包括：

通过Paas服务管理指令集中的指令，创建连接器架构模型；

根据所述连接器架构模型，生成所述连接器。

一实施方式中，所述以端口映射方式访问在所述Paas服务网络创建的Paas服务实例，包括：

将Paas服务实例实际IP地址通过端口映射的方式映射到租户网络的虚拟IP地址，以实现对所述Paas服务实例的访问。

一实施方式中，所述数据传输链路至少包括用于主备故障切换的链路；

通过所述数据传输链路进行数据传输的过程中，若检测到所述主备故障切换的链路的一条链路发生故障，则自动切换到所述主备故障切换的链路的另一条链路。

一实施方式中，所述数据传输链路至少包括用于负载均衡的链路；

通过所述数据传输链路进行数据传输的过程中，根据负载均衡算法自动平衡流量，根据该算法把流量分配到所述负载均衡的链路的两条或多条链路上。

第二方面，本发明实施例提供了一种基于Paas连接器实现的数据处理装置，其特征在于，所述装置包括：

链路建立单元，用于通过连接器在租户网络和Paas服务网络间建立数据传输链路；

数据访问单元，用于通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例。

一实施方式中，所述装置还包括连接器创建单元，用于：

通过Paas服务管理指令集中的指令，创建连接器架构模型；

根据所述连接器架构模型，生成所述连接器。

一实施方式中，所述数据访问单元，进一步用于：

将Paas服务实例实际IP地址通过端口映射的方式映射到租户网络的虚拟IP地址，以实现对所述Paas服务实例的访问。

一实施方式中，所述数据传输链路至少包括用于主备故障切换的链路；

所述装置还包括主备故障切换单元，用于：

通过所述数据传输链路进行数据传输的过程中，若检测到所述主备故障切换的链路的一条链路发生故障，则自动切换到所述主备故障切换的链路的另一条链路。

一实施方式中，所述数据传输链路至少包括用于负载均衡的链路；

所述装置还包括负载均衡单元，用于：

通过所述数据传输链路进行数据传输的过程中，根据负载均衡算法自动平衡流量，根据该算法把流量分配到所述负载均衡的链路的两条或多条链路上。

第三方面，本发明实施例提供了一种基于Paas连接器实现的数据处理装置，所述装置的功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块。

在一个可能的设计中，所述装置的结构中包括处理器和存储器，所述存储器用于存储支持所述装置执行任一上述基于Paas连接器实现的数据处理方法的程序，所述处理器被配置为用于执行所述存储器中存储的程序。所述装置还可以包括通信接口，用于与其他设备或通信网络通信。

第四方面，本发明实施例提供了一种计算机可读存储介质，用于存储基于Paas连接器实现的数据处理装置所用的计算机软件指令，其包括用于执行任一上述信息处理方法所涉及的程序。

上述技术方案中的一个技术方案具有如下优点或有益效果：

本发明实施例中，通过连接器在租户网络和Paas服务网络间建立数据传输链路；通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例。采用本发明实施例，可以避免大量占用租户的内网IP地址，且可以使租户网络和Paas网络实现互通。

上述概述仅仅是为了说明书的目的，并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外，通过参考附图和以下的详细描述，本发明进一步的方面、实施方式和特征将会是容易明白的。

附图说明

在附图中，除非另外规定，否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解，这些附图仅描绘了根据本发明公开的一些实施方式，而不应将其视为是对本发明范围的限制。

图1示出根据本发明实施例的基于Paas连接器实现的数据处理方法的流程图。

图2示出相关技术中数据处理架构的示意图。

图3示出根据本发明实施例的基于Paas连接器的数据处理架构的示意图。

图4示出根据本发明实施例的基于Paas连接器实现的数据处理装置的结构框图。

图5示出根据本发明实施例的基于Paas连接器实现的数据处理装置的结构框图。

具体实施方式

在下文中，仅简单地描述了某些示例性实施例。正如本领域技术人员可认识到的那样，在不脱离本发明的精神或范围的情况下，可通过各种不同方式修改所描述的实施例。因此，附图和描述被认为本质上是示例性的而非限制性的。

图1示出根据本发明实施例的基于Paas连接器实现的数据处理方法的流程图。如图1所示，该流程包括：

步骤101、通过连接器在租户网络和Paas服务网络间建立数据传输链路。

一示例中，连接器的创建，是根据连接器架构模型，生成的该连接器。可以通过Paas服务管理指令集(如Paas服务管理程序)中的指令(如程序代码)，创建连接器架构模型。

步骤102、通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例。

一示例中，将Paas服务实例实际IP地址通过端口映射的方式映射到租户网络的虚拟IP地址，以实现对所述Paas服务实例的访问。

连接器是一条高可用，支持负载均衡，支持横向扩展的链路。目前大部分云厂商的Paas服务实例都会有一些问题，比如：占用VDC中的IP地址；对于Paas实例放在Paas服务网络里，租户网络和Paas分别是各自的二层平面，无法互通。采用本发明实施例，解决了租户能够访问Paas服务的问题，帮助租户节约IP地址，支持横向扩展，解决性能不够的问题。

一实施方式中，所述数据传输链路至少包括用于主备故障切换的链路。通过所述数据传输链路进行数据传输的过程中，若检测到所述主备故障切换的链路的一条链路发生故障，则自动切换到所述主备故障切换的链路的另一条链路。采用主备故障切换，当Paas服务的其中一台出现问题，导致当前的业务无法正常工作。也就是说，可以检测后端服务的健壮性，如果后端服务出现不可用，则自动切换到可用链路上。

一实施方式中，所述数据传输链路至少包括用于负载均衡的链路。通过所述数据传输链路进行数据传输的过程中，根据负载均衡算法(如默认可以采用round-robin算法)自动平衡流量，根据该算法把流量分配到所述负载均衡的链路的两条或多条链路上，以避免一条链路负载很重，另一条无负载的现象。

应用示例：

图2示出相关技术中数据处理架构的示意图，与之对比的，图3示出根据本发明实施例的基于Paas连接器的数据处理架构的示意图。如图2所示的架构是将虚拟机通过数据库中间件与Paas数据库连接并提供主备故障切换，当active和backup这两条链路中的一条链路出现故障，则将数据切换到另一条链路上。这种架构会大量占用租户的内网IP地址，存储于租户侧的Paas服务实例比较少的情况可以容忍，但是一旦随着业务的增长，对Paas服务实例的需求量也就越来越大，同时也会消耗大量的租户IP地址。如图3所示的架构是通过连接器将虚拟机接入由至少包括两层网络架构的Paas管理网(或称为Paas网络)，所述两层网络架构分别为Paas服务网络和Paas服务监管网络。由Paas服务管理程序自动化的创建和管理连接器的架构模型，比如，创建步骤可以包括：由Keepalived实现连接器中LVS的高可用并创建出连接器的虚拟IP地址，并对连接器的LVS进行配置，对连接器的Haproxy实现负载均衡，然后再对该Haproxy进行配置，主要包括对后端Paas数据库服务进行负载均衡，设置主备角色以用于主备故障切换。通过主备故障切换检测后端健康状态的关键动作，如果一条链路发现链路故障，则通过主备故障切换，可以切换到未发生故障的另一条链路。这样连接器的链路就创建完成了。其中，LVS由LVS-01和LVS-02构成，作为该连接器的两个组件。Haproxy由Haproxy-01和Haproxy-02构成，作为该连接器中支持虚拟主机的代理软件。

其中，虚拟机为租户申请的虚拟机，采用vmware虚拟化技术来实现；连接器为用于连通租户网络和Paas网络的组件，是一条高可用、支持负载均衡、支持横向扩展且共享的链路，并提供连接Paas服务的Ip地址和端口，不同的Paas服务共用一个IP地址，使用不同的端口区别不同的服务实例；Paas服务管理程序用于管控Paas服务和连接器链路。虚拟IP地址为虚拟IP地址，可以基于虚拟路由器冗余协议实现，该协议为实现路由器冗余的协议，最新协议在RFC3768中定义，在示例中可以使用keepalived软件实现。LVS是一个虚拟的服务器集群，与Nginx工作在网络体系第七层不同，LVS工作在网络体系第四层，采用IP负载均衡技术和基于内容请求分发技术。Haproxy是一款高可用性、负载均衡基于TCP(四层)和HTTP(七层)应用的代理软件，支持虚拟主机。Paas数据库为云数据库，可以包括MySQL数据库、Redis数据库。

本示例中，如果用户虚拟机已经存在，并且里面跑有app，该app需要使用Paas数据库服务，则用户可以通过服务管理程序程序创建出该连接器，并提供虚拟IP地址(简称VIP)，可以将Paas服务实例实际IP地址通过端口映射的方式映射到租户网络的该虚拟IP地址，以实现对所述Paas服务实例的访问。

需要指出的是：构成Paas网络两层架构的Paas服务网络和Paas服务监管网络，可以通过Nat-Gateway相连接，且通过GPN将Paas服务网络和Paas服务监管网络封装到一个隧道中，以通过所述隧道在多个站点网络间传输数据；所述数据，至少包括所述Paas服务实例执行情况的监控和日志管理数据。租户为使用云环境的多个用户，这些用户的资源彼此隔离。

Paas服务网络是Paas网络中的Paas服务基础网络，可以通过连接器的端口映射把得到的Paas服务数据库实例加入到该网络中，也就是说，通过创建的该连接器，先把在租户内网创建的Paas服务实例加入到连接器里，然后通过该连接器做租户和Paas服务的流量转发并进行访问。把网关地址指向Nat-Gateway，从而可以把监控和日志流量(至少包括所述Paas服务实例执行情况的监控和日志管理数据)从Paas服务网络并通过Nat-Gateway转发到Paas服务监管网络中。连接器除了可以接入租户到Paas网络中，还可以实现主备故障切换，当active和backup这两条链路中的一条链路出现故障，则将数据切换到另一条链路上。

图4示出根据本发明实施例的基于Paas连接器实现的数据处理装置的结构框图，所述装置包括：链路建立单元21，用于通过连接器在租户网络和Paas服务网络间建立数据传输链路；数据访问单元22，用于通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例。

一实施方式中，所述装置还包括连接器创建单元，用于：通过Paas服务管理指令集中的指令，创建连接器架构模型；根据所述连接器架构模型，生成所述连接器。

一实施方式中，所述数据访问单元，进一步用于：将Paas服务实例实际IP地址通过端口映射的方式映射到租户网络的虚拟IP地址，以实现对所述Paas服务实例的访问。

一实施方式中，所述数据传输链路至少包括用于主备故障切换的链路；所述装置还包括主备故障切换单元，用于：通过所述数据传输链路进行数据传输的过程中，若检测到所述主备故障切换的链路的一条链路发生故障，则自动切换到所述主备故障切换的链路的另一条链路。

一实施方式中，所述数据传输链路至少包括用于负载均衡的链路；所述装置还包括负载均衡单元，用于：通过所述数据传输链路进行数据传输的过程中，根据负载均衡算法(如默认可以采用round-robin算法)自动平衡流量，根据该算法把流量分配到所述负载均衡的链路的两条或多条链路上，以避免一条链路负载很重，另一条无负载的现象。

本发明实施例各装置中的各模块的功能可以参见上述方法中的对应描述，在此不再赘述。

图5示出根据本发明实施例的基于Paas连接器实现的数据处理装置的结构框图。如图5所示，该装置包括：存储器910和处理器920，存储器910内存储有可在处理器920上运行的计算机程序。处理器920执行计算机程序时实现上述实施例中的自动驾驶方法。存储器910和处理器920的数量可以为一个或多个。

该装置还包括：通信接口930，用于与外界设备进行通信，进行数据交互传输。

存储器910可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。

如果存储器910、处理器920和通信接口930独立实现，则存储器910、处理器920和通信接口930可以通过总线相互连接并完成相互间的通信。总线可以是工业标准体系结构(ISA，Industry Standard Architecture)总线、外部设备互连(PCI，PeripheralComponent)总线或扩展工业标准体系结构(EISA，Extended Industry StandardComponent)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

可选的，在具体实现上，如果存储器910、处理器920及通信接口930集成在一块芯片上，则存储器910、处理器920及通信接口930可以通过内部接口完成相互间的通信。

本发明实施例提供了一种计算机可读存储介质，其存储有计算机程序，该程序被处理器执行时实现上述实施例中任一所述的方法。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读存储介质中。所述存储介质可以是只读存储器，磁盘或光盘等。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到其各种变化或替换，这些都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (8)

1.一种基于Paas连接器实现的数据处理方法，其特征在于，所述方法包括：

通过连接器在租户网络和Paas服务网络间建立数据传输链路；

通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例；

其中，所述通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例，包括：将Paas服务实例实际IP地址通过端口映射的方式映射到所述租户网络的虚拟IP地址，以实现对所述Paas服务实例的访问。

2.根据权利要求1所述的方法，其特征在于，在所述通过连接器在租户网络和Paas服务网络间建立数据传输链路之前，所述方法还包括：

通过Paas服务管理指令集中的指令，创建连接器架构模型；

根据所述连接器架构模型，生成所述连接器。

3.根据权利要求1或2所述的方法，其特征在于，所述数据传输链路至少包括用于主备故障切换的链路；

通过所述数据传输链路进行数据传输的过程中，若检测到所述主备故障切换的链路的一条链路发生故障，则自动切换到所述主备故障切换的链路的另一条链路。

4.根据权利要求1或2所述的方法，其特征在于，所述数据传输链路至少包括用于负载均衡的链路；

通过所述数据传输链路进行数据传输的过程中，根据负载均衡算法自动平衡流量，根据该算法把流量分配到所述负载均衡的链路的两条或多条链路上。

5.一种基于Paas连接器实现的数据处理装置，其特征在于，所述装置包括：

链路建立单元，用于通过连接器在租户网络和Paas服务网络间建立数据传输链路；

数据访问单元，用于通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例；

其中，所述通过所述数据传输链路，以端口映射方式访问在所述Paas服务网络创建的Paas服务实例，包括：将Paas服务实例实际IP地址通过端口映射的方式映射到所述租户网络的虚拟IP地址，以实现对所述Paas服务实例的访问。

6.根据权利要求5所述的装置，其特征在于，所述装置还包括连接器创建单元，用于：

通过Paas服务管理指令集中的指令，创建连接器架构模型；

根据所述连接器架构模型，生成所述连接器。

7.根据权利要求5或6所述的装置，其特征在于，所述数据传输链路至少包括用于主备故障切换的链路；

所述装置还包括主备故障切换单元，用于：

通过所述数据传输链路进行数据传输的过程中，若检测到所述主备故障切换的链路的一条链路发生故障，则自动切换到所述主备故障切换的链路的另一条链路。

8.根据权利要求5或6所述的装置，其特征在于，所述数据传输链路至少包括用于负载均衡的链路；

所述装置还包括负载均衡单元，用于：

通过所述数据传输链路进行数据传输的过程中，根据负载均衡算法自动平衡流量，根据该算法把流量分配到所述负载均衡的链路的两条或多条链路上。

Images