CN113839783A - 一种任务处理方法、装置及设备 - Google Patents
一种任务处理方法、装置及设备 Download PDFInfo
- Publication number
- CN113839783A CN113839783A CN202111134488.3A CN202111134488A CN113839783A CN 113839783 A CN113839783 A CN 113839783A CN 202111134488 A CN202111134488 A CN 202111134488A CN 113839783 A CN113839783 A CN 113839783A
- Authority
- CN
- China
- Prior art keywords
- password
- information
- task
- service node
- target service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 54
- 238000000034 method Methods 0.000 claims abstract description 47
- 230000002159 abnormal effect Effects 0.000 claims abstract description 17
- 230000015654 memory Effects 0.000 claims description 19
- 238000003860 storage Methods 0.000 claims description 8
- 238000009826 distribution Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 2
- 239000002699 waste material Substances 0.000 abstract description 6
- 230000006870 function Effects 0.000 description 18
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 101150096185 PAAS gene Proteins 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 230000007717 exclusion Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000000750 progressive effect Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 108010001267 Protein Subunits Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
- H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本说明书实施例提供了一种任务处理方法、装置及设备,可用于金融领域或其他领域。所述方法包括获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务;在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识;将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。利用本说明书实施例可以保证在基于队列的分布式任务处理模式中,不同服务节点获取同类任务时能获取到唯一不重复任务,进而可以减少资源浪费和任务处理的异常情况,提高服务的高可用性。
Description
技术领域
本申请涉及分布式架构领域,特别涉及一种任务处理方法、装置及设备。需要说明的是,本申请公开的任务处理方法、装置及设备可用于金融领域,也可用于除金融领域之外的任意领域,本申请对任务处理方法、装置及设备的应用领域不做限定。
背景技术
随着云化技术的不断深入应用,传统的JAVA类应用和功能逐步完成云上迁移,实现分布式架构的转型。为更好发挥分布式架构的多节点并发优势,传统服务功能已从原先的单节点模式转向为多节点并发模式,而且对于后端服务类功能往往会把待处理任务保存在数据库或者同等存储设备上,由分布式处理节点并发获取任务进行处理。然而,这种方式当个别服务节点出现异常下线时,往往需要人工介入处理。因此,在分布式架构模式下保障任务处理集群的高可用性变得越来越重要。
现有技术中,在基于PAAS集群的分布式架构环境中,容器可以实现自动重启。然而,这种方式在基于队列的分布式任务处理模式中,往往会出现同一个任务被不同节点重复执行,从而会导致资源的浪费和任务处理的异常。
因此,业内亟需一种可以解决上述技术问题的技术方案。
发明内容
本说明书实施例提供了一种任务处理方法、装置及设备,可以保证在基于队列的分布式任务处理模式中,不同服务节点获取同类任务时能获取到唯一不重复任务,进而可以减少资源浪费和任务处理的异常情况,提高服务的高可用性。
本说明书提供的一种任务处理方法、装置及设备是包括以下方式实现的。
一种任务处理方法,包括:获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务;在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识;将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。
一种任务处理装置,包括:第一获取模块,用于获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务;第二获取模块,用于在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识;分配模块,用于将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。
一种任务处理设备,包括至少一个处理器以及存储计算机可执行指令的存储器,所述处理器执行所述指令时实现本说明书实施例中任意一个方法实施例的步骤。
一种计算机可读存储介质,其上存储有计算机指令,所述指令被执行时实现本说明书实施例中任意一个方法实施例的步骤。
本说明书提供的一种任务处理方法、装置及设备。一些实施例中可以获取口令信息表;其中,口令信息表中包括每个口令对应的口令信息,口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务。还可以在确定口令信息表中存在可用口令的情况下,获取可用口令对应的口令标识,进一步,可以将可用口令对应的口令标识分配给目标服务节点,以使目标服务节点执行与所述口令标识对应的任务。由于在不同服务节点启动时为每个服务节点提供与任务标签信息对应的口令标识,从而可以保证在基于队列的分布式任务处理模式中,不同服务节点获取同类任务时能获取到唯一不重复任务,进而可以减少资源浪费和任务处理的异常情况,提高服务的高可用性。
附图说明
此处所说明的附图用来提供对本说明书的进一步理解,构成本说明书的一部分,并不构成对本说明书的限定。在附图中:
图1是本说明书提供的一种任务处理方法的一个实施例的流程示意图;
图2是本说明书提供的服务节点异常下线后任务处理的一个实施例的流程示意图;
图3是本说明书提供的一种任务处理装置的一个实施例的模块结构示意图;
图4是本说明书提供的一种任务处理服务器的一个实施例的硬件结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书中的一部分实施例,而不是全部的实施例。基于本说明书中的一个或多个实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书实施例保护的范围。
下面以一个具体的应用场景为例对本说明书实施方案进行说明。具体的,图1是本说明书提供的一种任务处理方法的一个实施例的流程示意图。虽然本说明书提供了如下述实施例或附图所示的方法操作步骤或装置结构,但基于常规或者无需创造性的劳动在所述方法或装置中可以包括更多或者部分合并后更少的操作步骤或模块单元。
本说明书提供的一种实施方案可以应用到客户端、服务器等中。所述客户端可以包括终端设备,如智能手机、平板电脑等。所述服务器可以包括单台计算机设备,也可以包括多个服务器组成的服务器集群,或者分布式系统的服务器结构等。
需要说明的是,下述实施例描述并不对基于本说明书的其他可扩展到的应用场景中的技术方案构成限制。具体的一种实施例如图1所示,本说明书提供的一种任务处理方法的一种实施例中,所述方法可以包括以下步骤。
S0:获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务。
其中,口令也可以称为数字口令。口令标识也可以称为口令序号。任务标签信息可以用于唯一标识每个任务。
一些实施场景中,在获取口令信息表前,可以先确定每个口令对应的口令信息和每个任务对应的任务标签信息。其中,口令信息中至少可以包括口令标识。一些实施场景中,口令标识可以决定具体某一队列中任务处理的并发数以及对应的任务标签信息。
一些实施场景中,所述任务标签信息可以通过下述方式确定:确定任务队列的任务并发数;获取一个随机数;利用所述随机数对所述任务并发数进行取模,获得每个任务对应的任务标签信息。
例如一些实施场景中,某一队列的任务在生成时则可以根据口令序号个数进行取模动态分配每个任务的唯一标签。例如,可以根据当前时间获得一个随机数(如17261),再用这个随机数对口令的个数进行取模,那么就可以确定每个任务的唯一标签。再如,某口令有N个(N>0),那么通过随机数取模后可以得到0,1,2,3....N-1个序号,进一步,可以在任务生成时,将0,1,2,3....N-1随机分配到每个任务作为每个任务的唯一标签。
一些实施场景中,在新增待处理任务时,可以根据口令数量(即任务并发数),由随机数进行取模进而获得任务标签信息。其中,任务标签信息可以随对应的任务保存。
一些实施场景中,在确定每个口令对应的口令信息和每个任务对应的任务标签信息后,可以将口令信息中口令标识与每个任务对应的任务标签信息进行关联。这样,后续可以根据口令标识查询到对应的任务,即找到各自能处理的任务。
一些实施场景中,在将口令信息中口令标识与每个任务对应的任务标签信息进行关联后,可以将所有口令信息存储到数据库或其他介质(如分布式缓存)中。一些实施场景中,可以利用数据库的行锁互斥作为口令的分发基础,也可以使用其它具备互斥功能的临界资源作为口令的分发基础,如Redis等分布式缓存等。
一些实施场景中,可以将所有口令信息存储到数据库中的口令信息表中。其中,口令信息表中每一行表示一条记录,每条记录可以表示一个口令信息,不同口令信息之间具备互斥功能。如表1所示,每个口令信息中可以包括口令名、口令标识、节点信息、时间信息等。
表1
口令名 | 口令标识 | 节点信息 | 时间信息 |
JOB | 0 | container1 | 2021/3/1 12:00 |
JOB | 1 | container2 | 2021/3/1 12:00 |
其中,口令名主要可以用于区分该口令是服务于哪个的任务队列。口令标识可以决定具体某一队列中任务处理的并发数以及对应的任务标签信息。节点信息可以用于保存当前获取到该口令的服务节点,例如,容器(如container1、container2)ID、宿主机IP等。时间信息主要可以包括更新时间戳。其中,更新时间戳可以在将可用口令对应的口令标识分配给目标服务节点后,根据目标服务节点反馈的时间信息进行首次更新,然后根据目标服务节点定时发送心跳信息的时间进行更新。其中,定时发送心跳信息可以用来判断口令当前是否是活跃且有效的。一些实施场景中,时间戳可以精确到秒级,例如:2021-03-01 12:00:10。当然,上述只是进行示例性说明,时间戳不限于上述举例,所属领域技术人员在本申请技术精髓的启示下,还可能做出其它变更,但只要其实现的功能和效果与本申请相同或相似,均应涵盖于本申请保护范围内。
一些实施场景中,可以从数据库或其他介质中获取口令信息表。
S2:在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识。
一些实施场景中,在获取口令信息表后,可以判断口令信息表中是否存在可用口令。
由于所述口令信息还可以包括节点信息、时间信息,一些实施场景中,所述口令信息表中存在可用口令的情况可以包括:口令信息中节点信息为空;或者,口令信息中时间信息对应的更新时间戳与当前时间大于预设时间间隔。
例如一些实施场景中,判断口令信息表中是否存在可用口令,可以包括:判断口令信息表中是否存在节点信息为空的口令信息或者是否存在时间信息中更新时间戳与当前时间大于预设时间间隔的口令信息,确认存在的情况下,可以将该口令信息对应的口令作为可用口令。其中,预设时间间隔可以根据实际场景设定,本说明书对此不做限定,例如,预设时间间隔可以根据口令刷新的频度进行相应调整,大于预设时间间隔可以说明该口令已长时间无人更新,即该口令信息对应的服务节点已经下线或不可用。
一些实施场景中,在确定口令信息表中存在可用口令的情况下,可以获取可用口令对应的口令标识。
一些实施场景中,所述获取所述可用口令对应的口令标识的过程中,可以包括:将所述口令信息表中所述可用口令对应的口令信息进行加锁处理。
例如一些实施场景中,在确定口令信息表中存在可用口令的情况下,可以对该条记录加上行级锁,这样可以保证该条记录不被其它进程抢占,从而可以形成互斥的效果。
一些实施场景中,在确定口令信息表中不存在可用口令的情况下,可以等待一段时间后,再次判断口令信息表中是否存在可用口令。
S4:将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。
一些实施场景中,在获取可用口令对应的口令标识后,可以将可用口令对应的口令标识分配给目标服务节点,以使目标服务节点执行与口令标识对应的任务。其中,目标服务节点可以表示发送获取口令请求的服务节点中的一个服务节点。服务节点可以用于处理任务。
一些实施场景中,当服务节点启动时,可以会先去申请数字口令(即发送获取口令请求)。
由于同一时间发送获取口令请求的服务节点可以包括多个,所以一些实施场景中,会出现多个服务节点同一时间一同抢占加上行级锁的可用口令。这样,就会存在抢占成功的服务节点,即获取到口令标识的目标服务节点,和未抢占成功的服务节点。
一些实施场景中,将所述可用口令对应的口令标识分配给目标服务节点后,还可以包括:接收所述目标服务节点发送的时间信息和节点信息;将所述时间信息和所述节点信息更新到所述口令信息表中。其中,将所述可用口令对应的口令标识分配给目标服务节点可以说明目标服务节点成功抢占加上行级锁的可用口令。
例如一些实施场景中,对于已获取到口令标识的目标服务节点,可以将当前进程的节点信息(例如可以包括容器信息和服务节点IP)更新到该口令标识对应的口令信息中,同时更新当前时间到时间戳,并释放锁。
一些实施场景中,对于未抢占成功的服务节点可以进行等待或直接返回,等待下次轮询进行口令获取。其中,对于等待的情况,如果目标服务节点已经获取到了口令且更新了时间信息和节点信息,则其他服务节点就无法获取到口令信息而退出,从而会处于空闲等待状态。处于空闲等待状态的服务节点,可以轮询尝试获取口令,等待有因为异常下线无人更新状态的口令序号空闲出来。
一些实施场景中,每个服务节点可以根据获取到的口令标识在任务表中获取对应任务标签信息的任务进行处理。
一些实施场景中,所述目标服务节点执行与所述口令标识对应的任务后,还可以包括:接收所述目标服务节点定时发送的心跳信息;基于所述心跳信息确定所述目标服务节点是否出现异常。
一些实施场景中,可以在目标服务节点中配置定时任务,这样,目标服务节点在获取到口令标识后,可以定时发送心跳信息,将口令的更新时间戳更新到最新时间。
一些实施场景中,在接收到目标服务节点定时发送的心跳信息后,可以基于心跳信息确定目标服务节点是否出现异常。
一些实施场景中,基于心跳信息确定目标服务节点是否出现异常,可以包括:判断目标服务节点对应的口令信息的时间信息中更新时间戳与当前时间是否大于预设时间间隔,即是否出现超时、逾期。如果出现超时、逾期,则可以说明该目标服务节点对应的口令信息的时间信息不再被更新,该目标服务节点出现异常不能继续提供服务。此时,该目标服务节点会自动下线,该目标服务节点对应的口令信息会重新开放给新上线或处于空闲等待状态的服务节点进行争抢。争抢到该口令信息的服务节点则可以继续处理对应的任务。
一些实施场景中,在根据所述心跳信息确定所述目标服务节点出现异常的情况下,可以将所述目标服务节点对应的口令标识分配给第一服务节点,以使所述第一服务节点执行与所述口令标识对应的任务。其中,第一服务节点可以表示发送获取口令请求且处于空闲等待状态的服务节点,还可以表示新上线的服务节点。
一些实施场景中,所述将所述目标服务节点对应的口令标识分配给第一服务节点后,还可以包括:接收所述第一服务节点发送的时间信息和节点信息;将所述时间信息和所述节点信息更新到所述口令信息表中。
一些实施场景中,第一服务节点执行与所述口令标识对应的任务后,还可以接收第一服务节点定时发送的心跳信息;基于心跳信息确定所述第一服务节点是否出现异常。
一些实施场景中,在某一任务处理完成后,可以根据任务标识和口令标识进行任务状态更新。其中,任务状态可以包括待处理、正在处理、处理完成等。
如图2所示是本说明书提供的服务节点异常下线后任务处理的一个实施例的流程示意图。其中,容器节点可以理解为是服务节点,数字口令表可以理解为数口令信息表,数字口令可以简称口令,口令0表示口令对应的口令标识为0。
本实施例中,在时刻1,容器节点1从数字口令信息表中获取到数字口令0,并正常执行口令0对应的任务,容器节点2在数字口令表中无可用口令情况下,处于空闲等待状态(即待命中),并定时询问是否可获取口令。其中,容器节点1获取到口令0后,会相应的更新数字口令表中相应信息,如节点信息(容器节点1)、时间信息等。容器节点1正常执行任务过程中,会定时更新口令0的时间戳。
在时刻2,容器节点1出现异常不能继续提供服务,此时,容器节点1失去口令0,不再进行时间戳的更新。这样口令0就会重新开放给处于待命中的容器节点2进行争抢。其中,处于待命中的容器节点2可以定时询问是否可获取口令。
在时刻3,容器节点1自动下线,容器节点2获得口令0的控制权,即获得口令0,开始处理与口令0对应的任务标签信息所对应的任务。相应的,容器节点2获取到口令0后,会相应的更新数字口令表中相应信息,如节点信息(容器节点2)、时间信息等。容器节点2正常执行任务过程中,会定时进行时间戳更新。
本说明书实施例,可以应用于基于PAAS集群的分布式架构环境中。这样,若出现服务节点异常,则PAAS集群可以删除异常服务节点,随机分配新服务节点接管原服务。其中,启动新服务节点时,会先申请口令介质,判断是否有可用口令,如果有则获取占用并更新时间戳,否则留空返回。
本说明书实施例中,服务节点启动后设置单独进程对当前获取到的口令进行定时刷新时间戳,可以保证能有效独占口令。
本说明书实施例,可以利用数据库的行锁互斥作为数字口令的分发基础,也可使用其它具备互斥功能的临界资源作为数字口令介质,如Redis等分布式缓存。
本说明书实施例,利用定时心跳机制可以保证口令有效。
本说明书实施例,根据各服务节点启动时对口令的动态分配,各服务节点可以获得不重复的口令,从而可实现对任务队列进行并发处理。
本说明书实施例,通过预先为每个任务分配任务标签信息,在不同服务节点启动时为每个服务节点提供与任务标签信息对应的口令标识,可以保证在基于队列的分布式任务处理模式中,不同服务节点获取同类任务时能获取到唯一不重复任务,从而减少资源浪费和任务处理的异常情况,提高服务的高可用性。
本说明书实施例,可以保证基于PAAS集群的分布式架构下多容器节点的服务功能互不干涉、无争抢的进行队列任务并发处理。同时,还可以充分利用PAAS集群的自恢复机制,保障服务连续、可用,而且可以在容器节点异常下线后,使重新分配的新增容器节点可以根据口令标识准确获取到之前异常容器节点的任务标签信息,继续处理该任务,从而保证服务处理不间断、服务高可用。
本说明书实施例,利用分布式架构模式充分发挥云上节点对异步任务处理的高可用性,一方面保证了服务的不死可用,持续不间断,另一方面可通过参数化进行动态的横向并发度提升。本说明书实施例,可以运用到所有基于PAAS集群的分布式架构模型上,为后台服务类功能提供较好的扩展性和运维稳定性。
当然,上述只是进行示例性说明,本说明书实施例不限于上述举例,所属领域技术人员在本申请技术精髓的启示下,还可能做出其它变更,但只要其实现的功能和效果与本申请相同或相似,均应涵盖于本申请保护范围内。
从以上的描述中,可以看出,本申请实施例可以获取口令信息表;其中,口令信息表中包括每个口令对应的口令信息,口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务。还可以在确定口令信息表中存在可用口令的情况下,获取可用口令对应的口令标识,进一步,可以将可用口令对应的口令标识分配给目标服务节点,以使目标服务节点执行与所述口令标识对应的任务。由于在不同服务节点启动时为每个服务节点提供与任务标签信息对应的口令标识,从而可以保证在基于队列的分布式任务处理模式中,不同服务节点获取同类任务时能获取到唯一不重复任务,进而可以减少资源浪费和任务处理的异常情况,提高服务的高可用性。
本说明书中上述方法的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参照即可,每个实施例重点说明的都是与其他实施例的不同之处。相关之处参见方法实施例的部分说明即可。
基于上述所述一种任务处理方法,本说明书一个或多个实施例还提供一种任务处理装置。所述的装置可以包括使用了本说明书实施例所述方法的系统(包括分布式系统)、软件(应用)、模块、组件、服务器、客户端等并结合必要的实施硬件的装置。基于同一创新构思,本说明书实施例提供的一个或多个实施例中的装置如下面的实施例所述。由于装置解决问题的实现方案与方法相似,因此本说明书实施例具体的装置的实施可以参见前述方法的实施,重复之处不再赘述。以下所使用的,术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
具体地,图3是本说明书提供的一种任务处理装置的一个实施例的模块结构示意图,如图3所示,本说明书提供的一种任务处理装置可以包括:第一获取模块120,第二获取模块122,分配模块124。
第一获取模块120,可以用于获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务;
第二获取模块122,可以用于在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识;
分配模块124,可以用于将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。
需要说明的,上述所述的装置根据方法实施例的描述还可以包括其他的实施方式,具体的实现方式可以参照相关方法实施例的描述,在此不作一一赘述。
本说明书还提供一种任务处理设备的实施例,包括处理器及用于存储处理器可执行指令的存储器,所述指令被所述处理器执行时实现包括以下步骤:获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务;在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识;将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。
需要说明的,上述所述的设备根据方法或装置实施例的描述还可以包括其他的实施方式。具体的实现方式可以参照相关方法实施例的描述,在此不作一一赘述。
本说明书所提供的方法实施例可以在移动终端、计算机终端、服务器或者类似的运算装置中执行。以运行在服务器上为例,图4是本说明书提供的一种任务处理服务器的一个实施例的硬件结构框图,该服务器可以是上述实施例中的任务处理装置或任务处理设备。如图4所示,服务器10可以包括一个或多个(图中仅示出一个)处理器100(处理器100可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器200、以及用于通信功能的传输模块300。本领域普通技术人员可以理解,图4所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,服务器10还可包括比图4中所示更多或者更少的组件,例如还可以包括其他的处理硬件,如数据库或多级缓存、GPU,或者具有与图4所示不同的配置。
存储器200可用于存储应用软件的软件程序以及模块,如本说明书实施例中的任务处理方法对应的程序指令/模块,处理器100通过运行存储在存储器200内的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器200可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器200可进一步包括相对于处理器100远程设置的存储器,这些远程存储器可以通过网络连接至计算机终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输模块300用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端的通信供应商提供的无线网络。在一个实例中,传输模块300包括一个网络适配器(Network Interface Controller,NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输模块300可以为射频(Radio Frequency,RF)模块,其用于通过无线方式与互联网进行通讯。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书提供的上述实施例所述的方法或装置可以通过计算机程序实现业务逻辑并记录在存储介质上,所述的存储介质可以计算机读取并执行,实现本说明书实施例所描述方案的效果。所述存储介质可以包括用于存储信息的物理装置,通常是将信息数字化后再以利用电、磁或者光学等方式的媒体加以存储。所述存储介质可以包括:利用电能方式存储信息的装置如,各式存储器,如RAM、ROM等;利用磁能方式存储信息的装置如,硬盘、软盘、磁带、磁芯存储器、磁泡存储器、U盘;利用光学方式存储信息的装置如,CD或DVD。当然,还有其他方式的可读存储介质,例如量子存储器、石墨烯存储器等等。
本说明书提供的上述任务处理方法或装置实施例可以在计算机中由处理器执行相应的程序指令来实现,如使用windows操作系统的c++语言在PC端实现、linux系统实现,或其他例如使用android、iOS系统程序设计语言在智能终端实现,以及基于量子计算机的处理逻辑实现等。
需要说明的是说明书上述所述的装置、设备、系统根据相关方法实施例的描述还可以包括其他的实施方式,具体的实现方式可以参照对应方法实施例的描述,在此不作一一赘述。
本申请中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参照即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于硬件+程序类实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
为了描述的方便,描述以上装置时以功能分为各种模块分别描述。当然,在实施本说明书一个或多个时可以把部分模块的功能在同一个或多个软件和/或硬件中实现,也可以将实现同一功能的模块由多个子模块或子单元的组合实现等。
本发明是参照根据本发明实施例的方法、装置、设备、系统的流程图和/或方框图来描述的。应理解可由计算机程序指令实现,可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
本领域技术人员应明白,本说明书一个或多个实施例可提供为方法、系统或计算机程序产品。因此,本说明书一个或多个实施例可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。
以上所述仅为本说明书一个或多个实施例的实施例而已,并不用于限制本本说明书一个或多个实施例。对于本领域技术人员来说,本说明书一个或多个实施例可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在权利要求范围之内。
Claims (11)
1.一种任务处理方法,其特征在于,包括:
获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务;
在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识;
将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。
2.根据权利要求1所述的方法,其特征在于,所述口令信息还包括节点信息、时间信息;
相应的,所述口令信息表中存在可用口令的情况包括:
口令信息中节点信息为空;或者,
口令信息中时间信息对应的更新时间戳与当前时间大于预设时间间隔。
3.根据权利要求1所述的方法,其特征在于,所述获取所述可用口令对应的口令标识的过程中,包括:
将所述口令信息表中所述可用口令对应的口令信息进行加锁处理。
4.根据权利要求1所述的方法,其特征在于,将所述可用口令对应的口令标识分配给目标服务节点后,还包括:
接收所述目标服务节点发送的时间信息和节点信息;
将所述时间信息和所述节点信息更新到所述口令信息表中。
5.根据权利要求1所述的方法,其特征在于,所述目标服务节点执行与所述口令标识对应的任务后,还包括:
接收所述目标服务节点定时发送的心跳信息;
基于所述心跳信息确定所述目标服务节点是否出现异常。
6.根据权利要求5所述的方法,其特征在于,还包括:
在根据所述心跳信息确定所述目标服务节点出现异常的情况下,将所述目标服务节点对应的口令标识分配给第一服务节点,以使所述第一服务节点执行与所述口令标识对应的任务。
7.根据权利要求6所述的方法,其特征在于,所述将所述目标服务节点对应的口令标识分配给第一服务节点后,还包括:
接收所述第一服务节点发送的时间信息和节点信息;
将所述时间信息和所述节点信息更新到所述口令信息表中。
8.根据权利要求1所述的方法,其特征在于,所述任务标签信息通过下述方式确定:
确定任务队列的任务并发数;
获取一个随机数;
利用所述随机数对所述任务并发数进行取模,获得每个任务对应的任务标签信息。
9.一种任务处理装置,其特征在于,包括:
第一获取模块,用于获取口令信息表;其中,所述口令信息表中包括每个口令对应的口令信息,所述口令信息至少包括与任务标签信息对应的口令标识,每个任务标签信息对应一个任务;
第二获取模块,用于在确定所述口令信息表中存在可用口令的情况下,获取所述可用口令对应的口令标识;
分配模块,用于将所述可用口令对应的口令标识分配给目标服务节点,以使所述目标服务节点执行与所述口令标识对应的任务。
10.一种任务处理设备,其特征在于,包括至少一个处理器以及存储计算机可执行指令的存储器,所述处理器执行所述指令时实现权利要求1-8中任意一项所述方法的步骤。
11.一种计算机可读存储介质,其特征在于,其上存储有计算机指令,所述指令被执行时实现权利要求1-8中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111134488.3A CN113839783A (zh) | 2021-09-27 | 2021-09-27 | 一种任务处理方法、装置及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111134488.3A CN113839783A (zh) | 2021-09-27 | 2021-09-27 | 一种任务处理方法、装置及设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113839783A true CN113839783A (zh) | 2021-12-24 |
Family
ID=78970567
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111134488.3A Pending CN113839783A (zh) | 2021-09-27 | 2021-09-27 | 一种任务处理方法、装置及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113839783A (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020140683A1 (zh) * | 2019-01-04 | 2020-07-09 | 深圳壹账通智能科技有限公司 | 任务调度方法、装置、计算机设备和存储介质 |
CN111782360A (zh) * | 2020-06-28 | 2020-10-16 | 中国工商银行股份有限公司 | 分布式任务调度方法及装置 |
CN112596885A (zh) * | 2020-12-25 | 2021-04-02 | 网易(杭州)网络有限公司 | 任务调度方法、装置、设备及存储介质 |
CN113064744A (zh) * | 2021-05-06 | 2021-07-02 | 腾讯科技(深圳)有限公司 | 任务处理方法、装置、计算机可读介质及电子设备 |
-
2021
- 2021-09-27 CN CN202111134488.3A patent/CN113839783A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020140683A1 (zh) * | 2019-01-04 | 2020-07-09 | 深圳壹账通智能科技有限公司 | 任务调度方法、装置、计算机设备和存储介质 |
CN111782360A (zh) * | 2020-06-28 | 2020-10-16 | 中国工商银行股份有限公司 | 分布式任务调度方法及装置 |
CN112596885A (zh) * | 2020-12-25 | 2021-04-02 | 网易(杭州)网络有限公司 | 任务调度方法、装置、设备及存储介质 |
CN113064744A (zh) * | 2021-05-06 | 2021-07-02 | 腾讯科技(深圳)有限公司 | 任务处理方法、装置、计算机可读介质及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110941481A (zh) | 资源调度方法、装置及系统 | |
CN107613025B (zh) | 一种基于消息队列顺序回复的实现方法和装置 | |
CN107018091B (zh) | 资源请求的调度方法和装置 | |
CN108446172B (zh) | 数据调取方法、装置、计算机设备和存储介质 | |
CN108170417B (zh) | 一种在mesos集群中集成高性能的作业调度框架的方法和装置 | |
CN110659131A (zh) | 任务处理方法、电子装置、计算机设备及存储介质 | |
CN108228197B (zh) | 一种在集群中安装软件的方法和装置 | |
CN113885794B (zh) | 基于多云存储的数据访问方法、装置、计算机设备及介质 | |
CN111163140A (zh) | 资源获取和分配的方法、装置和计算机可读存储介质 | |
CN111953809B (zh) | 一种管理资源地址的方法、装置、设备及系统 | |
CN113703929B (zh) | 一种任务调度方法、系统、计算设备和存储介质 | |
CN109819674B (zh) | 计算机存储介质、嵌入式调度方法及系统 | |
CN117453357A (zh) | 节点任务调度方法、装置、计算机设备及存储介质 | |
CN111930482A (zh) | 基于节点集群的任务处理方法、装置、设备及存储介质 | |
CN112416542A (zh) | 分布式任务系统、管理方法、装置和计算机设备 | |
CN108833532B (zh) | 基于物联网的服务处理方法、装置和系统 | |
CN109005071B (zh) | 一种决策部署方法和调度设备 | |
CN113839783A (zh) | 一种任务处理方法、装置及设备 | |
KR20210043654A (ko) | 자원 구성을 위한 방법, 장치 및 저장 매체 | |
CN114675954A (zh) | 任务调度方法及装置 | |
CN115426361A (zh) | 分布式客户端打包方法、装置、主服务器及存储介质 | |
CN111309467B (zh) | 任务分发方法及装置、电子设备及存储介质 | |
CN114979286A (zh) | 容器服务的访问控制方法、装置、设备及计算机存储介质 | |
CN114189439A (zh) | 一种自动扩容的方法及装置 | |
CN112445763B (zh) | 文件操作方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211224 |
|
RJ01 | Rejection of invention patent application after publication |