CN107015855B

CN107015855B - 一种支持时间策略的异步服务集中调度方法及装置

Info

Publication number: CN107015855B
Application number: CN201710148513.0A
Authority: CN
Inventors: 马文东
Original assignee: Weimeng Chuangke Network Technology China Co Ltd
Current assignee: Weimeng Chuangke Network Technology China Co Ltd
Priority date: 2017-03-14
Filing date: 2017-03-14
Publication date: 2020-10-30
Anticipated expiration: 2037-03-14
Also published as: CN107015855A

Abstract

本发明实施例提供一种支持时间策略的异步服务集中调度方法及装置，建立一个任务表，所述任务表中保存待执行业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略，所述方法包括：启动核心调度进程，轮询任务表中符合时间策略的任务；针对每一个符合时间策略的任务,匹配当前任务的执行协议；启动独立的处理进程，根据执行任务需要的扩展信息执行相应操作，同时锁定任务表中的当前任务；当前任务执行完毕后，从任务表中删除该任务。上述技术方案具有如下有益效果：本发明将零散的服务进程集中起来统一管理调度，业务逻辑清晰，效率更高，管理成本较低，支持多种数据传输协议，支持按照时间策略调用，灵活性好。

Description

一种支持时间策略的异步服务集中调度方法及装置

技术领域

本发明涉及互联网技术领域，尤其涉及一种支持时间策略的异步服务集中调度方法及装置。

背景技术

在日常应用中，经常会遇到诸如注册账户时发送欢迎邮件、管理后台通过一些审核时批量发送私信等场景，此时采用的技术方案往往有以下两种：

1、通过串行逻辑实现，所有逻辑都处理完毕后再返回执行成功，此时终端用户等待的时间较长，如果中间出现异常，补偿机制的实现也很繁琐。比如注册账户成功后直接发送邮件，如果发送邮件处理时间较长，后面的程序则无法继续执行，用户需要等待很久的时间才能看到注册成功的提示。

2、通过任务计划去实现，针对不同的业务单独开发相应的服务。其开发成本较高，且随着业务的增多，需要开启的守护进程也会增多，十分消耗服务器资源，日常维护也很困难。比如，批量审核用户信息后，需要给所有用户发送私信，此时因为发送的私信数量很大，处理时间可能是数分钟或数小时，不可能等待发送完毕再返回操作成功的提示，此时往往将要发送的私信写入数据库，然后开发相应的服务进程监控数据库，在有数据时进行发送操作。

在实际应用中，这类需要异步处理的应用场景十分常见，而大多采用的技术方案是针对每种应用场景都开发相应的服务进程，不但占用资源较多，而且维护起来十分不便。

发明内容

本发明实施例提供一种支持时间策略的异步服务集中调度方法及装置，以提供一种有效的支持时间策略的异步服务集中调度技术方案，以解决现有技术的不足。

一方面，本发明实施例提供了一种支持时间策略的异步服务集中调度方法，建立一个任务表，所述任务表中保存待执行业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略，所述方法包括：

启动核心调度进程，轮询任务表中符合时间策略的任务；

针对每一个符合时间策略的任务,匹配当前任务的执行协议；

启动独立的处理进程，根据执行任务需要的扩展信息执行相应操作，同时锁定任务表中的当前任务；并在当前任务执行完毕后，从任务表中删除该任务。

另一方面，本发明实施例提供了一种支持时间策略的异步服务集中调度装置，所述装置包括：

任务存储单元，用于建立一个任务表，所述任务表中保存待执行业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略；

任务调度单元，用于启动核心调度进程，轮询任务表中符合时间策略的任务；

协议匹配单元，用于针对每一个符合时间策略的任务，匹配当前任务的执行协议；

任务执行单元，用于启动独立的处理进程，根据执行任务需要的扩展信息执行相应操作，同时锁定任务表中的当前任务；

任务删除单元，用于在当前任务执行完毕后，从任务表中删除该任务。

上述技术方案具有如下有益效果：1、本发明将零散的服务进程集中起来统一管理调度，业务逻辑清晰，不同任务的业务逻辑跟服务进程解耦，便于复用；2、本发明针对每个任务启动独立的进程并行处理，效率更高，管理成本较低；3、本发明将本地方法当做一种协议，可以支持多种数据传输协议；4、本发明考虑到不同任务可能需要在不同时间点、时间段执行，支持按照时间策略调用，灵活性好。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一种支持时间策略的异步服务集中调度方法的流程图；

图2为本发明实施例一种支持时间策略的异步服务集中调度装置的结构图；

图3为本发明的实施过程流程图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，为本发明实施例一种支持时间策略的异步服务集中调度方法流程图，其特征在于，所述方法包括：

101、建立一个任务表，所述任务表中保存待执行业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略；

102、启动核心调度进程，轮询任务表中符合时间策略的任务；

103、针对每一个符合时间策略的任务,匹配当前任务的执行协议；

104、启动独立的处理进程，根据执行任务需要的扩展信息执行相应操作，同时锁定任务表中的当前任务；

105、当前任务执行完毕后，从任务表中删除该任务。

优选的，所述执行协议包括：本地协议、HTTP协议、RPC协议或者需要自行开发业务逻辑的自定义扩展协议。

优选的，所述任务表中配置所述自定义扩展协议对应的业务逻辑的调用信息。

优选的，所述轮询任务表中符合时间策略的任务具体包括：核心调度进程在轮询时获取时间策略符合当前时间点的任务。

优选的，还包括：在某一业务的执行时间之前，根据业务需求向业务表中插入当前业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略。

对应于上述方法实施例，如图2所示，为本发明实施例一种支持时间策略的异步服务集中调度装置结构示意图，所述装置包括：

任务存储单元201，用于建立一个任务表，任务表中保存待执行业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略；

任务调度单元202，用于启动核心调度进程，轮询任务表中符合时间策略的任务；

协议匹配单元203，用于针对每一个符合时间策略的任务,匹配当前任务的执行协议；

任务执行单元204，用于启动独立的处理进程，根据执行任务需要的扩展信息执行相应操作，同时锁定任务表中的当前任务；

任务删除单元205，用于在当前任务执行完毕后，从任务表中删除该任务。

优选的，所述协议匹配单元匹配当前任务的执行协议，其执行协议包括：本地协议、HTTP协议、RPC协议或者需要自行开发业务逻辑的自定义扩展协议。

优选的，所述任务存储单元配置所述自定义扩展协议对应的业务逻辑的调用信息。

优选的，所述任务调度单元具体用于：核心调度进程在轮询时获取时间策略符合当前时间点的任务。

优选的，所述任务存储单元201在某一业务的执行时间之前，根据业务需求向业务表中插入当前业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略。

本发明实施例上述技术方案具有如下有益效果：

1、本发明将零散的服务进程集中起来统一管理调度，业务逻辑清晰；不同任务的业务逻辑跟服务进程解耦，便于复用；

2、现有技术每种业务场景都需要启动相应的服务进程，管理成本太高，而且消耗服务器资源，本发明针对每个任务启动独立的进程并行处理，效率更高，管理成本较低；

3、现有技术不支持多协议调用，仅支持调用本地方法，本发明将本地方法当做一种协议，可以支持多种数据传输协议；

4、现有技术不支持执行时间策略，轮询到相应任务就处理，本发明考虑到不同任务可能需要在不同时间点、时间段执行，支持按照时间策略调用，灵活性好。

以下结合应用实例对本发明实施例上述技术方案进行详细说明：

如图3所示，本发明可以支持以下操作：

1、多协议支持：考虑到有的任务是需要批量发私信，有的可能是调用一个接口，有的可能是调用远程服务，因此调度进程可以支持通过本地协议(调用本地方法)、HTTP协议、RPC协议来执行任务，而且支持的协议可以自由扩展，增加一个协议只需要开发该协议对应的业务逻辑即可；

2、时间策略支持：考虑的有的任务需要在特定的时间段内执行，比如批量审核信息后需要发送私信，为了避免骚扰用户，需要在用户非休息时间段内进行发私信操作，因此调度进程支持在轮询时只获取符合当前时间点的任务来执行；

3、并行执行：调度进程可能一次获取到多个需要执行的任务，有的任务可能只需要几分钟就执行完毕，而有的任务可能需要数个小时，为避免任务执行时等待，因此针对每一个任务，启动独立的进程进行处理，同时对当前任务加锁，以免再次被执行。在任务执行完毕后，从任务表中删除任务。

以下以现实生活场景举例

微博话题可以升级为超级话题，用户可以在页面申请开通某个话题为超级话题，管理员可以在后台看到该话题被多少人申请升级。当管理员将该话题审核为超级话题后，希望给参与申请的用户发送私信。而由于申请的用户较多，发私信要耗费大量时间，且希望不要在用户休息的时间发送私信，此时如果采用一般的方案，则在管理员审核通过后，将要接收私信的用户和私信内容保存到数据库或文件中，然后开发相应的服务监控数据库或文件，当获取到有内容时进行发私信操作。

另外一个场景，由于活动需要，运营人员需要在零点批量发送活动提醒，此时一般的方案为运营人员零点准时守在电脑旁，执行发提醒脚本或提前开发相应的服务，定时执行。

而采用本技术方案，则可以将两个场景当做两个待执行的任务，只需要开发相应协议的业务逻辑，在需要时配置到任务表中即可。比如第一个场景的需求，在管理员审核通过后，往任务表里插入一条给申请用户发送私信的任务，在扩展信息中保存当前的话题名称，选择相应的执行时间段，比如8:00～22:00，调度进程会在该时间段内轮询任务，调用发送私信的业务逻辑。对于第二个场景，则提前一天往任务表插入一条发送活动提醒的任务，选择HTTP协议，执行时间为0:00即可，调度进程会在0:00时获取到该任务，调用接口发送提醒。

应该明白，公开的过程中的步骤的特定顺序或层次是示例性方法的实例。基于设计偏好，应该理解，过程中的步骤的特定顺序或层次可以在不脱离本公开的保护范围的情况下得到重新安排。所附的方法权利要求以示例性的顺序给出了各种步骤的要素，并且不是要限于所述的特定顺序或层次。

在上述的详细描述中，各种特征一起组合在单个的实施方案中，以简化本公开。不应该将这种公开方法解释为反映了这样的意图，即，所要求保护的主题的实施方案需要比清楚地在每个权利要求中所陈述的特征更多的特征。相反，如所附的权利要求书所反映的那样，本发明处于比所公开的单个实施方案的全部特征少的状态。因此，所附的权利要求书特此清楚地被并入详细描述中，其中每项权利要求独自作为本发明单独的优选实施方案。

为使本领域内的任何技术人员能够实现或者使用本发明，上面对所公开实施例进行了描述。对于本领域技术人员来说；这些实施例的各种修改方式都是显而易见的，并且本文定义的一般原理也可以在不脱离本公开的精神和保护范围的基础上适用于其它实施例。因此，本公开并不限于本文给出的实施例，而是与本申请公开的原理和新颖性特征的最广范围相一致。

上文的描述包括一个或多个实施例的举例。当然，为了描述上述实施例而描述部件或方法的所有可能的结合是不可能的，但是本领域普通技术人员应该认识到，各个实施例可以做进一步的组合和排列。因此，本文中描述的实施例旨在涵盖落入所附权利要求书的保护范围内的所有这样的改变、修改和变型。此外，就说明书或权利要求书中使用的术语“包含”，该词的涵盖方式类似于术语“包括”，就如同“包括，”在权利要求中用作衔接词所解释的那样。此外，使用在权利要求书的说明书中的任何一个术语“或者”是要表示“非排它性的或者”。

本领域技术人员还可以了解到本发明实施例列出的各种说明性逻辑块(illustrative logical block)，单元，和步骤可以通过电子硬件、电脑软件，或两者的结合进行实现。为清楚展示硬件和软件的可替换性(interchangeability)，上述的各种说明性部件(illustrative components)，单元和步骤已经通用地描述了它们的功能。这样的功能是通过硬件还是软件来实现取决于特定的应用和整个系统的设计要求。本领域技术人员可以对于每种特定的应用，可以使用各种方法实现所述的功能，但这种实现不应被理解为超出本发明实施例保护的范围。

本发明实施例中所描述的各种说明性的逻辑块，或单元都可以通过通用处理器，数字信号处理器，专用集成电路(ASIC)，现场可编程门阵列或其它可编程逻辑装置，离散门或晶体管逻辑，离散硬件部件，或上述任何组合的设计来实现或操作所描述的功能。通用处理器可以为微处理器，可选地，该通用处理器也可以为任何传统的处理器、控制器、微控制器或状态机。处理器也可以通过计算装置的组合来实现，例如数字信号处理器和微处理器，多个微处理器，一个或多个微处理器联合一个数字信号处理器核，或任何其它类似的配置来实现。

本发明实施例中所描述的方法或算法的步骤可以直接嵌入硬件、处理器执行的软件模块、或者这两者的结合。软件模块可以存储于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或本领域中其它任意形式的存储媒介中。示例性地，存储媒介可以与处理器连接，以使得处理器可以从存储媒介中读取信息，并可以向存储媒介存写信息。可选地，存储媒介还可以集成到处理器中。处理器和存储媒介可以设置于ASIC中，ASIC可以设置于用户终端中。可选地，处理器和存储媒介也可以设置于用户终端中的不同的部件中。

在一个或多个示例性的设计中，本发明实施例所描述的上述功能可以在硬件、软件、固件或这三者的任意组合来实现。如果在软件中实现，这些功能可以存储与电脑可读的媒介上，或以一个或多个指令或代码形式传输于电脑可读的媒介上。电脑可读媒介包括电脑存储媒介和便于使得让电脑程序从一个地方转移到其它地方的通信媒介。存储媒介可以是任何通用或特殊电脑可以接入访问的可用媒体。例如，这样的电脑可读媒体可以包括但不限于RAM、ROM、EEPROM、CD-ROM或其它光盘存储、磁盘存储或其它磁性存储装置，或其它任何可以用于承载或存储以指令或数据结构和其它可被通用或特殊电脑、或通用或特殊处理器读取形式的程序代码的媒介。此外，任何连接都可以被适当地定义为电脑可读媒介，例如，如果软件是从一个网站站点、服务器或其它远程资源通过一个同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或以例如红外、无线和微波等无线方式传输的也被包含在所定义的电脑可读媒介中。所述的碟片(disk)和磁盘(disc)包括压缩磁盘、镭射盘、光盘、DVD、软盘和蓝光光盘，磁盘通常以磁性复制数据，而碟片通常以激光进行光学复制数据。上述的组合也可以包含在电脑可读媒介中。

以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims

1.一种支持时间策略的异步服务集中调度方法，其特征在于，建立一个任务表，所述任务表中保存待执行业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略，所述方法包括：

启动核心调度进程，轮询任务表中符合时间策略的任务；

针对每一个符合时间策略的任务,匹配当前任务的执行协议；

启动独立的处理进程，根据执行任务需要的扩展信息执行相应操作，同时锁定任务表中的当前任务；并

在当前任务执行完毕后，从任务表中删除该任务；

所述执行协议包括：本地协议、HTTP协议、RPC协议或者需要自行开发业务逻辑的自定义扩展协议；其中，所述本地协议通过调用本地方法实现。

2.如权利要求1所述支持时间策略的异步服务集中调度方法，其特征在于，所述任务表中配置所述自定义扩展协议对应的业务逻辑的调用信息。

3.如权利要求1所述支持时间策略的异步服务集中调度方法，其特征在于，所述轮询任务表中符合时间策略的任务具体包括：核心调度进程在轮询时获取时间策略符合当前时间点的任务。

4.如权利要求1所述支持时间策略的异步服务集中调度方法，其特征在于，还包括：在某一业务的执行时间之前，根据业务需求向业务表中插入当前业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略。

5.一种支持时间策略的异步服务集中调度装置，其特征在于，所述装置包括：

任务存储单元，用于建立一个任务表，所述任务表中保存待执行业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略；所述执行协议包括：本地协议、HTTP协议、RPC协议或者需要自行开发业务逻辑的自定义扩展协议；其中，所述本地协议通过调用本地方法实现；

协议匹配单元，用于针对每一个符合时间策略的任务,匹配当前任务的执行协议；

6.如权利要求5所述支持时间策略的异步服务集中调度装置，其特征在于，所述任务存储单元配置所述自定义扩展协议对应的业务逻辑的调用信息。

7.如权利要求5所述支持时间策略的异步服务集中调度装置，其特征在于，所述任务调度单元具体用于：核心调度进程在轮询时获取时间策略符合当前时间点的任务。

8.如权利要求5所述支持时间策略的异步服务集中调度装置，其特征在于，所述任务存储单元，还用于在某一业务的执行时间之前，根据业务需求向业务表中插入当前业务所对应任务的任务标识、执行协议、执行该任务需要的扩展信息、时间策略。