CN114756378A - 单机系统改造方法及装置 - Google Patents

Abstract

本发明公开了一种单机系统改造方法及装置，涉及分布式技术领域，其中该方法包括：对单机系统的任务执行程序进行解析，获取待执行的任务全集；按照配置参数，触发任务执行；当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；当分布式集群中的执行节点通过RPC服务接口接收所述任务执行请求后，对所述任务执行请求进行解析，得到所述任务执行请求中包含的任务信息，基于反射机制，拉起处理相应任务信息的服务对所述任务信息对应的任务进行处理。本发明可以有效降低在单机系统改分布式集群过程中的软件改造成本及硬件资源成本，提升系统的可靠性和健壮性。

Description

单机系统改造方法及装置

技术领域

本发明涉及分布式技术领域，尤其涉及一种单机系统改造方法及装置。

背景技术

本部分旨在为权利要求书中陈述的本发明实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

目前，分布式集群系统的应用已经非常普及，但仍存在一些存量系统，比如银行中使用的自动化测试系统或批处理任务系统等，因为改造成本大，依然保留着单机部署形态。单机部署方式，在跑批系统性能遇到瓶颈时，只能采用增加服务器、拆分任务的方案。但这种方案缺少对资源的有效管理，成本相对偏高；且系统在可靠性、健壮性方面有待提高。

具体而言，单机系统存在如下缺点：

1、服务器性能使用率不均衡，维护成本高。单机系统下，任务固定部署在一台服务器上。随着业务的演变发展，任务对任务节点的性能损耗会有增强或减弱，需要周期性对任务节点部署的任务数量进行调整，维护成本较大。

2、成本高。因单机资源无法得到充分利用，相对分布式架构，面对同等规模的业务量，单机架构需要更多的硬件资源。

3、可靠性差。单机系统下，若节点发生故障，其上部署的所有任务将无法执行，影响整体成功率。

可见，单机部署系统因其架构所限，面对日益增长的高并发请求、大数量处理的需求，在健壮性、运行性能、计算机资源利用率等方面的缺点展现的日益明显，阻碍了业务的运行和发展。

发明内容

本发明实施例提供一种单机系统改造方法，用以有效降低在单机系统改分布式集群过程中的软件改造成本及硬件资源成本，提升系统的可靠性和健壮性，该方法包括：

对单机系统的任务执行程序进行解析，获取待执行的任务全集；

按照配置参数，触发任务执行；

当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；

当分布式集群中的执行节点通过RPC服务接口接收所述任务执行请求后，对所述任务执行请求进行解析，得到所述任务执行请求中包含的任务信息，基于反射机制，拉起处理相应任务信息的服务对所述任务信息对应的任务进行处理。

本发明实施例还提供一种单机系统改造装置，用以有效降低在单机系统改分布式集群过程中的软件改造成本及硬件资源成本，提升系统的可靠性和健壮性，该装置包括：

任务管理模块，用于对单机系统的任务执行程序进行解析，获取待执行的任务全集；

任务管理模块，还用于按照配置参数，触发任务执行；

任务管理模块，还用于当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；

分布式集群模块，用于当分布式集群中的执行节点通过RPC服务接口接收所述任务执行请求后，对所述任务执行请求进行解析，得到所述任务执行请求中包含的任务信息，基于反射机制，拉起处理相应任务信息的服务对所述任务信息对应的任务进行处理。

本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述单机系统改造方法。

本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述单机系统改造方法。

本发明实施例还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，所述计算机程序被处理器执行时实现上述单机系统改造方法。

本发明实施例中，对单机系统的任务执行程序进行解析，获取待执行的任务全集；按照配置参数，触发任务执行；当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；分布式集群中的执行节点通过RPC服务接口接收任务执行请求，当接收到任务执行请求后，对任务执行请求进行解析，得到其中包含的任务信息；之后基于反射机制，拉起处理相应任务信息的服务对任务信息对应的任务进行处理。上述方法，与现有技术相比，具有如下优势：

1、将改造成本控制在最低。通过外围封装，在不改动原有代码架构的基础上，在分布式集群的节点上增加RPC服务即可实现分布式集群与单机系统的通信，这样通过外围基于Web Service的改造便可完成相关改造，有效降低在单机系统改分布式集群过程中的软件改造成本及硬件资源成本。

2、改造策略简单可行，由单机系统接收任务，之后调用分布式集群中的处理资源对任务进行处理，可以将现有的单机系统和分布式集群无缝对接。

3、负载均衡能力增强。通过设置配置参数，可以对任务的执行进行控制，从而达到服务器性能的充分利用。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1为本发明实施例中一种单机系统改造方法的流程图；

图2为本发明实施例中另一种单机系统改造方法的流程图；

图3为本发明实施例中另一种单机系统改造方法的流程图；

图4为本发明实施例中一种单机系统改造装置的结构示意图；

图5为本发明实施例中一种计算机设备的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。

本发明实施例提供了一种单机系统改造方法，该方法应用于如图1所示的改造系统。参见图1，该改造系统中包括任务管理模块和分布式集群，任务管理模块用于对单机系统中的任务进行管理；分布式集群由调度模块和任务集群构成，集群中的每台服务器都为一个独立的任务节点且能力相同，节点根据调度指令完成任务执行。通过调度模块，可以将任务指令随机分配给集群中的任务节点，降低了任务与服务器的耦合，增强了系统的可靠性；此外，调度模块还可以实现任务集群的负载均衡，提升了集群的整体资源利用率。

具体的，调度模块可以采用图1中所示的负载均衡技术。负载均衡是集群技术(Cluster)的一种应用。负载均衡可以将工作任务分摊到多个处理单元，从而提高并发处理能力。

目前最常见的负载均衡应用是Web负载均衡。根据实现的原理不同，常见的web负载均衡技术包括：DNS轮询、IP负载均衡和CDN。其中IP负载均衡可以使用硬件设备或软件方式来实现。本发明实施例中，可以采用上述任一种负载均衡技术来分配任务。

通过分布式集群中的负载均衡调用各个节点的资源处理单机系统的任务，从而使单机系统借助分布式集群具备接收并处理大批量任务的能力。

如图2所示，该方法包括如下步骤201至步骤204：

步骤201、对单机系统的任务执行程序进行解析，获取待执行的任务全集。

得到的待执行的任务全集中包含任务的各项信息，如任务名称、执行该项任务所需要的服务等。

本发明实施例中，在对单机系统的任务执行程序进行解析，获取待执行的任务全集之前，如图3所示，还可以执行如下步骤301：

步骤301、构建任务管理资源池；

在执行步骤301之后，步骤201对单机系统的任务执行程序进行解析，获取待执行的任务全集，可以执行为如下步骤2011：

2011、对单机系统的任务执行程序进行解析，获取待执行的任务全集，将任务全集放入任务管理资源池中；

之后，步骤202按照配置参数，触发任务执行，可以执行为如下步骤2021：

步骤2021、按照配置参数，触发任务管理资源池中的任务执行。

在另一种实现方式中，在将任务全集放入任务管理资源池中之后，还可以通过系统缓存管理任务管理资源池。

通过建立任务管理资源池，实现了对待执行任务进行全局管理及“原子化粒度”管理，方便了对于任务的执行与调度。

步骤202、按照配置参数，触发任务执行。

具体的，配置参数包括任务触发时机和单次请求任务数量；任务触发时机包括任务触发时刻和任务触发周期。

配置任务触发时机后，当到达任务触发时刻，或者与上一次任务开始时间间隔一个任务触发周期时，触发任务执行。比如说，当配置了任务触发时刻为9点、10点、11点和12点，则到达上述时刻后，任务开始执行；再如，配置了任务触发周期为2小时，系统开机就启动任务执行，比如系统开机时间为9点，那么9点触发任务执行，11点触发任务执行、13点触发任务执行，触发任务的时刻依次按照任务触发周期类推。

由于单次请求的所有任务将分配给分布式集群中的同一个任务节点执行，为了避免任务节点超负荷，单次请求的任务数量可以根据分布式集群中任务节点可执行的最大任务数量设置，比如说，分布式集群中包含A、B和C三个节点，A节点可执行的最大任务数量为4个，B节点可执行的最大任务数量为8个，C节点可执行的最大任务数量为12个，则可以将单次请求任务数量设置为4个，从而避免A节点超负荷运行。

本发明实施例中，任务管理模块具备一定的任务执行管理功能，除了对任务执行的时间配置、运行周期配置等基础配置能力外，还可以实现对单批次执行任务数量的管理，来控制单节点一次请求过程中执行的案例数量，该项功能可以结合负载均衡策略和服务器实际性能进行灵活配置，以达到服务器性能的充分利用。

步骤203、当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求。

在设置了单次请求任务数量的情况下，当触发任务执行后，调取任务全集中与单次请求任务数量等量的任务，向分布式集群发起任务执行请求。

其中，任务执行请求中包含调取的所有任务的任务信息。

步骤204、当分布式集群中的执行节点通过RPC服务接口接收任务执行请求后，对任务执行请求进行解析，得到任务执行请求中包含的任务信息，基于反射机制，拉起处理相应任务信息的服务对任务信息对应的任务进行处理。

在分布式集群的每个节点上部署RPC服务层，对外，能够提供唯一消费者服务接口，统一处理节点接收的任务执行请求，对内，能够根据消费者的任务执行请求，根据反射机制，拉起对应的服务，执行相应的任务。

本发明实施例的整个分布式改造策略中，任务管理模块和RPC服务接口两者相互呼应，前者完成待执行任务的管理，并通过服务请求发起任务执行请求，后者将单机服务转换为RPC服务，以接收任务管理模块的任务执行请求，奠定了分布式调用的基础，两者协同完成工作。

本发明实施例中，对单机系统的任务执行程序进行解析，获取待执行的任务全集；按照配置参数，触发任务执行；当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；分布式集群中的执行节点通过RPC服务接口接收任务执行请求，当接收到任务执行请求后，对任务执行请求进行解析，得到其中包含的任务信息；之后基于反射机制，拉起处理相应任务信息的服务对任务信息对应的任务进行处理。上述方法，与现有技术相比，具有如下优势：

1、将改造成本控制在最低。通过外围封装，在不改动原有代码架构的基础上，在分布式集群的节点上增加RPC服务即可实现分布式集群与单机系统的通信，这样通过外围基于Web Service的改造便可完成相关改造，有效降低在单机系统改分布式集群过程中的软件改造成本及硬件资源成本。

2、改造策略简单可行，由单机系统接收任务，之后调用分布式集群中的处理资源对任务进行处理，可以将现有的单机系统和分布式集群无缝对接。

3、负载均衡能力增强。通过设置配置参数，可以对任务的执行进行控制，从而达到服务器性能的充分利用。

本发明实施例中还提供了一种单机系统改造装置，如下面的实施例所述。由于该装置解决问题的原理与单机系统改造方法相似，因此该装置的实施可以参见单机系统改造方法的实施，重复之处不再赘述。

如图4所示，该装置400包括任务管理模块401和分布式集群模块402。

任务管理模块401，用于对单机系统的任务执行程序进行解析，获取待执行的任务全集；

任务管理模块401，还用于按照配置参数，触发任务执行；

任务管理模块401，还用于当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；

分布式集群模块402，用于当分布式集群中的执行节点通过RPC服务接口接收任务执行请求后，对任务执行请求进行解析，得到任务执行请求中包含的任务信息，基于反射机制，拉起处理相应任务信息的服务对任务信息对应的任务进行处理。

在本发明实施例的一种实现方式中，任务管理模块，还用于：

构建任务管理资源池；

任务管理模块，用于：

对单机系统的任务执行程序进行解析，获取待执行的任务全集，将任务全集放入任务管理资源池中；

按照配置参数，触发任务管理资源池中的任务执行。

在本发明实施例的一种实现方式中，

任务管理模块，还用于通过系统缓存管理任务管理资源池。

在本发明实施例的一种实现方式中，配置参数包括任务触发时机和单次请求任务数量；任务触发时机包括任务触发时刻和任务触发周期；

任务管理模块，用于：

当到达任务触发时刻，或者与上一次任务开始时间间隔一个任务触发周期时，触发任务执行；

当触发任务执行后，调取任务全集中与单次请求任务数量等量的任务，向分布式集群发起任务执行请求，任务执行请求中包含调取的所有任务的任务信息。

本发明实施例中，对单机系统的任务执行程序进行解析，获取待执行的任务全集；按照配置参数，触发任务执行；当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；分布式集群中的执行节点通过RPC服务接口接收任务执行请求，当接收到任务执行请求后，对任务执行请求进行解析，得到其中包含的任务信息；之后基于反射机制，拉起处理相应任务信息的服务对任务信息对应的任务进行处理。上述方法，与现有技术相比，具有如下优势：

1、将改造成本控制在最低。通过外围封装，在不改动原有代码架构的基础上，在分布式集群的节点上增加RPC服务即可实现分布式集群与单机系统的通信，这样通过外围基于Web Service的改造便可完成相关改造，有效降低在单机系统改分布式集群过程中的软件改造成本及硬件资源成本。

2、改造策略简单可行，由单机系统接收任务，之后调用分布式集群中的处理资源对任务进行处理，可以将现有的单机系统和分布式集群无缝对接。

3、负载均衡能力增强。通过设置配置参数，可以对任务的执行进行控制，从而达到服务器性能的充分利用。

本发明实施例还提供一种计算机设备，图5为本发明实施例中计算机设备的示意图，该计算机设备能够实现上述实施例中的单机系统改造方法中全部步骤，该计算机设备具体包括如下内容：

处理器(processor)501、存储器(memory)502、通信接口(CommunicationsInterface)503和通信总线504；

其中，所述处理器501、存储器502、通信接口503通过所述通信总线504完成相互间的通信；所述通信接口503用于实现相关设备之间的信息传输；

所述处理器501用于调用所述存储器502中的计算机程序，所述处理器执行所述计算机程序时实现上述实施例中的单机系统改造方法。

本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述单机系统改造方法。

本发明实施例还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，所述计算机程序被处理器执行时实现上述单机系统改造方法。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (11)

1.一种单机系统改造方法，其特征在于，所述方法包括：

对单机系统的任务执行程序进行解析，获取待执行的任务全集；

按照配置参数，触发任务执行；

当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；

当分布式集群中的执行节点通过RPC服务接口接收所述任务执行请求后，对所述任务执行请求进行解析，得到所述任务执行请求中包含的任务信息，基于反射机制，拉起处理相应任务信息的服务对所述任务信息对应的任务进行处理。

2.根据权利要求1所述的方法，其特征在于，在对单机系统的任务执行程序进行解析，获取待执行的任务全集之前，所述方法还包括：

构建任务管理资源池；

对单机系统的任务执行程序进行解析，获取待执行的任务全集，包括：

对单机系统的任务执行程序进行解析，获取待执行的任务全集，将所述任务全集放入所述任务管理资源池中；

按照配置参数，触发任务执行，包括：

按照配置参数，触发任务管理资源池中的任务执行。

3.根据权利要求2所述的方法，其特征在于，在将所述任务全集放入所述任务管理资源池中之后，所述方法还包括：

通过系统缓存管理所述任务管理资源池。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述配置参数包括任务触发时机和单次请求任务数量；所述任务触发时机包括任务触发时刻和任务触发周期；

按照配置参数，触发任务执行，包括：

当到达任务触发时刻，或者与上一次任务开始时间间隔一个任务触发周期时，触发任务执行；

当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求，包括：

当触发任务执行后，调取任务全集中与单次请求任务数量等量的任务，向分布式集群发起任务执行请求，所述任务执行请求中包含调取的所有任务的任务信息。

5.一种单机系统改造装置，其特征在于，所述装置包括：

任务管理模块，用于对单机系统的任务执行程序进行解析，获取待执行的任务全集；

任务管理模块，还用于按照配置参数，触发任务执行；

任务管理模块，还用于当触发任务执行后，调取任务全集中的任务，向分布式集群发起任务执行请求；

分布式集群模块，用于当分布式集群中的执行节点通过RPC服务接口接收所述任务执行请求后，对所述任务执行请求进行解析，得到所述任务执行请求中包含的任务信息，基于反射机制，拉起处理相应任务信息的服务对所述任务信息对应的任务进行处理。

6.根据权利要求5所述的装置，其特征在于，所述任务管理模块，还用于：

构建任务管理资源池；

任务管理模块，用于：

对单机系统的任务执行程序进行解析，获取待执行的任务全集，将所述任务全集放入所述任务管理资源池中；

按照配置参数，触发任务管理资源池中的任务执行。

7.根据权利要求6所述的装置，其特征在于，

任务管理模块，还用于通过系统缓存管理所述任务管理资源池。

8.根据权利要求5至7任一项所述的装置，其特征在于，所述配置参数包括任务触发时机和单次请求任务数量；所述任务触发时机包括任务触发时刻和任务触发周期；

任务管理模块，用于：

当到达任务触发时刻，或者与上一次任务开始时间间隔一个任务触发周期时，触发任务执行；

当触发任务执行后，调取任务全集中与单次请求任务数量等量的任务，向分布式集群发起任务执行请求，所述任务执行请求中包含调取的所有任务的任务信息。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至4任一所述方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至4任一所述方法。

11.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序，所述计算机程序被处理器执行时实现权利要求1至4任一所述方法。

Images