CN107273206A - 一种基于业务及数据量控制的优先级调度方法 - Google Patents

Abstract

一种基于业务及数据量控制的优先级调度方法，涉及电力系统信息技术应用领域。目前，每接到一个业务系统接入需求就定制开发一个接口，造成接口技术单一但接口数量繁多。本发明收到外部业务系统的请求后，统一接口平台划分为多个子任务进行查询，并定义每一个子任务优先级；优先级为最高级的子任务进入特殊线程池执行，非最高级的子任务进入普通池执行，当特殊线程池的执行线程达到最大值时，最高优先级的任务可进入普通池执行，若此时普通线程池的执行线程也达到最大值，则这个最高优先级的任务进入应急线程池执行，若三个线程池都达到最大执行数量，后续任务处于等待状态。本技术方案避免系统拥塞，确保关键业务优先执行、低优先级业务平稳完成。

Description

一种基于业务及数据量控制的优先级调度方法

技术领域

本发明涉及电力系统信息技术应用领域，尤其涉及一种基于业务及数据量控制的优先级调度方法。

背景技术

在电力行业的数据交互领域，相关的业务系统数据交互接口发展各有特点，用电信息采集系统同对用电信息采集系统有数据需求的外部业务系统数据交互接口在技术路线方面主要采用中间库、WebService或两者混合搭配的方式，由于接口建设前期缺乏总体规划，未充分考虑接口服务复用问题，每接到一个业务系统接入需求就定制开发一个接口，最终造成接口技术单一但接口数量繁多。为了解决这些问题，用电信息采集系统建设了一套适用于多业务需求的统一接口平台。由于用电信息采集系统为外部业务系统提供数据服务时，统一接口平台的资源有限，不可能同时处理所有数据请求。而各个业务系统发起的连接数和要获取数据量完全不同，统一接口平台无法预知将要发起的交互业务请求数量。为解决这些矛盾亟需一种基于流量控制的动态优先级调度方法。

发明内容

本发明要解决的技术问题和提出的技术任务是对现有技术方案进行完善与改进，提供一种基于业务及数据量控制的优先级调度方法，以达到合理分配有限资源的目的。为此，本发明采取以下技术方案。

一种基于业务及数据量控制的优先级调度方法，其特征在于包括以下步骤：

1）准备步骤：给外部业务系统的需求制定等级，分为重要、一般两个级别；给统一接口平台划分线程池，分为特殊线程池、普通线程池、应急线程池，并设定各线程池的最高并发数；

2）收到外部业务系统的请求后，统一接口平台根据此次调用的数据类型、数据量划分为多个子任务进行查询，并定义每一个子任务优先级，每个外部业务系统的需求至少包含一个优先级最高的子任务，若外部业务系统的需求级别为重要，则所有子任务的优先级都是最高级，每个子任务占用一个线程池的并发线程；

3）优先级为最高级的子任务进入特殊线程池执行，非最高级的子任务进入普通池执行，当特殊线程池的执行线程达到最大值时，最高优先级的任务可进入普通池执行，若此时普通线程池的执行线程也达到最大值，则这个最高优先级的任务进入应急线程池执行，若三个线程池都达到最大执行数量，后续任务处于等待状态。

本技术方案通过对线程池进行等级划分，按实时流量对线程进行分配和调度，避免系统拥塞，确保关键业务优先执行、低优先级业务平稳完成。对外部业务系统的请求优先级排序，并设计多类别的线程池分别进行管理，线程池之间互不干扰；其次根据接口任务量动态调整任务优先级，限制一个任务请求能同时开启的线程数量，避免线程池被单次请求占用过多，堵塞其它业务请求。同时，每个外部业务系统的需求至少包含一个优先级最高的子任务，使得每个外部业务系统的查询得到及时响应，提高响应速度，即便在系统繁忙的时候，也能及时告诉对应的外部业务系统，查询需求正在处理。

作为对上述技术方案的进一步完善和补充，本发明还包括以下附加技术特征。

进一步的，特殊线程池执行任务级别为最高级的任务，并发数量设为100；普通线程池执行所有级别的任务，并发数量设为200；当普通线程池和特殊线程池都达到最高并发数,应急线程池只执行最高级别的任务，并发数设为50。并发数量根据实际情况进行设定。

进一步的，当多个同级外部业务系统同时请求时，创建的线程并列，使得多个外部业务系统所创建的子任务线程交叉执行。以避免等待时间过长的情况发生。

进一步的，一般查询在创建具有优先级的任务线程时，每次请求的第一个子任务优先级最高，后续子任务优先级次之。使平台及时响应每一外部业务系统的请求，同时执行先来后到的原则，避免等待、执行时间过长。

有益效果：

(1) 使得接口服务平台有限的资源合理利用。根据业务重要性的不同，优先满足重要性高的系统数据需求。

(2) 将请求按数据类型或数据量划分，使得任务可并发执行。

(3) 给每一个子任务指定线程优先级，解决了平台资源容易被一个或几个大数据量请求占用，后续其它系统请求长时间得不到响应问题，极大提高了统一接口平台的资源利用率和需求响应速度。

附图说明

图1是本发明的流程图。

具体实施方式

以下结合说明书附图对本发明的技术方案做进一步的详细说明。

本技术方案为一种基于流量控制的动态优先级调度方法，通过对线程池进行等级划分，按实时流量对线程进行分配和调度，避免系统拥塞，确保关键业务优先执行、低优先级业务平稳完成。

本发明首先对外部业务系统的请求优先级排序，并设计多类别的线程池分别进行管理，线程池之间互不干扰；其次根据接口任务量动态调整任务优先级，限制一个任务请求能同时开启的线程数量，避免线程池被单次请求占用过多，堵塞其它业务请求。

本发明包括准备步骤及后序的优级级调度步骤：

一、准备步骤为:

11）给外部业务系统的需求制定等级，分为重要、一般两个级别。其中重要级别的需求为数据实时性要求比较高的系统需求，可以在业务系统向平台提出需求时进行标记；非重要级别的业务系统需求即为一般级别。

12）给统一接口平台划分线程池，分为特殊线程池、普通线程池、应急线程池。特殊线程池执行任务级别为最高级的任务，并发数量设为100；普通线程池执行所有级别的任务，并发数量设为200；当普通线程池和特殊线程池都达到最高并发数,应急线程池只执行最高级别的任务，并发数设为50。

二、优级级调度步骤，如图1所示：

21）收到外部业务系统的请求后，判断外部业务系统需求等级；

22）当外部业务系统需求等级为重要时，统一接口平台根据此次调用的数据类型、数据量划分为多个子任务，所有子任务的优先级都是最高级，每个子任务占用一个线程池的并发线程；

23）当外部业务系统需求等级为一般时，统一接口平台根据此次调用的数据类型、数据量划分为多个子任务，并定义每一个子任务优先级，每个外部业务系统的需求至少包含一个优先级最高的子任务；

24）判断子任务的优先级是否为最高级；若为最高级的子任务进入特殊线程池执行，若非最高级的子任务进入普通池执行；

25）当特殊线程池的执行线程达到最大值时，最高优先级的任务可进入普通池执行，若此时普通线程池的执行线程也达到最大值，则这个最高优先级的任务进入应急线程池执行，若三个线程池都达到最大执行数量，后续任务处于等待状态。

为了使多个外部业务系统都能及时响应，当多个同级外部业务系统同时请求时，创建的线程并列，使得多个外部业务系统所创建的子任务线程交叉执行。

为了使平台及时响应每一外部业务系统的请求，避免等待、执行时间过长。一般查询在创建具有优先级的任务线程时，每次请求的第一个子任务优先级最高，后续子任务优先级次之。

以上图1所示的一种基于业务及数据量控制的优先级调度方法是本发明的具体实施例，已经体现出本发明实质性特点和进步，可根据实际的使用需要，在本发明的启示下，对其进行形状、结构等方面的等同修改，均在本方案的保护范围之列。

Claims (4)

1.一种基于业务及数据量控制的优先级调度方法，其特征在于包括以下步骤：

1）准备步骤：给外部业务系统的需求制定等级，分为重要、一般两个级别；给统一接口平台划分线程池，分为特殊线程池、普通线程池、应急线程池，并设定各线程池的最高并发数；

2）收到外部业务系统的请求后，判断外部业务系统需求的等级，统一接口平台根据此次调用的数据类型、数据量划分为多个子任务进行查询，并定义每一个子任务优先级，每个外部业务系统的需求至少包含一个优先级最高的子任务，若外部业务系统的需求为重要等级，则所有子任务的优先级都是最高级，每个子任务占用一个线程池的并发线程；

3）优先级为最高级的子任务进入特殊线程池执行，非最高级的子任务进入普通池执行，当特殊线程池的执行线程达到最大值时，最高优先级的任务可进入普通池执行，若此时普通线程池的执行线程也达到最大值，则这个最高优先级的任务进入应急线程池执行，若三个线程池都达到最大执行数量，后续任务处于等待状态。

2.根据权利要求1所述的一种基于业务及数据量控制的优先级调度方法，其特征在于：特殊线程池执行任务级别为最高级的任务，并发数量设为100；普通线程池执行所有级别的任务，并发数量设为200；当普通线程池和特殊线程池都达到最高并发数,应急线程池只执行最高级别的任务，并发数设为50。

3.根据权利要求2所述的一种基于业务及数据量控制的优先级调度方法，其特征在于：当多个同级外部业务系统同时请求时，创建的线程并列，使得多个外部业务系统所创建的子任务线程交叉执行。

4.根据权利要求1所述的一种基于业务及数据量控制的优先级调度方法，其特征在于：一般查询在创建具有优先级的任务线程时，每次请求的第一个子任务优先级最高，后续子任务优先级次之。