CN113867916A - 任务处理方法、装置及电子设备 - Google Patents

任务处理方法、装置及电子设备 Download PDF

Info

Publication number
CN113867916A
CN113867916A CN202111141621.8A CN202111141621A CN113867916A CN 113867916 A CN113867916 A CN 113867916A CN 202111141621 A CN202111141621 A CN 202111141621A CN 113867916 A CN113867916 A CN 113867916A
Authority
CN
China
Prior art keywords
task
processed
processing
target
message queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111141621.8A
Other languages
English (en)
Other versions
CN113867916B (zh
Inventor
刘崇
卓泽城
黄强
徐思琪
章文俊
洪赛丁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202111141621.8A priority Critical patent/CN113867916B/zh
Publication of CN113867916A publication Critical patent/CN113867916A/zh
Priority to EP22196817.5A priority patent/EP4113299A3/en
Priority to US17/951,094 priority patent/US20230020324A1/en
Application granted granted Critical
Publication of CN113867916B publication Critical patent/CN113867916B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G06F9/4887—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues involving deadlines, e.g. rate based, periodic
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5038—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the execution order of a plurality of tasks, e.g. taking priority or time dependency constraints into consideration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/50—Indexing scheme relating to G06F9/50
    • G06F2209/5021—Priority
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/548—Queue

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)
  • Debugging And Monitoring (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本公开提供了一种任务处理方法、装置及电子设备，涉及云计算和大数据技术领域，尤其涉及任务处理技术领域。具体实现方案为：获取待处理任务的任务处理请求，所述任务处理请求包括所述待处理任务的处理时间信息和所述待处理任务的业务类型；在所述待处理任务的处理时间信息满足触发条件的情况下，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，其中，一个所述消息队列对应一种业务类型；对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果。

Description

任务处理方法、装置及电子设备
技术领域
本公开涉及互联网技术领域，尤其涉及云计算和大数据技术领域，具体涉及一种任务处理方法、装置及电子设备。
背景技术
随着互联网技术的发展，任务处理是互连网项目中必不可少的一个流程。例如，在一些互联网项目中，某些任务需要在某时间定时执行，某些任务需要每间隔一定时长执行一次，某些任务的执行时间较长，需要能够灵活地查询它的处理结果和处理状态等。目前，针对互连网项目通常会构建单独的任务处理系统，以对该项目的任务进行在线或离线处理。
发明内容
本公开提供了一种任务处理方法、装置及电子设备。
根据本公开的第一方面，提供了一种任务处理方法，包括：
获取待处理任务的任务处理请求，所述任务处理请求包括所述待处理任务的处理时间信息和所述待处理任务的业务类型；
在所述待处理任务的处理时间信息满足触发条件的情况下，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，其中，一个所述消息队列对应一种业务类型；
对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果。
根据本公开的第二方面，提供了一种任务处理装置，包括：
第一获取模块，用于获取待处理任务的任务处理请求，所述任务处理请求包括所述待处理任务的处理时间信息和所述待处理任务的业务类型；
写入模块，用于在所述待处理任务的处理时间信息满足触发条件的情况下，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，其中，一个所述消息队列对应一种业务类型；
处理模块，用于对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果。
根据本公开的第三方面，提供了一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行第一方面所述的方法。
根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据第一方面所述的方法。
根据本公开的第五方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据第一方面所述的方法。
本公开实施例中，消息队列与待处理任务的业务类型对应，也即不同业务类型的待处理任务分别对应不同的消息队列，进而也就能够基于业务类型实现对待处理任务的分类管理和有效执行，通过一个任务处理装置就能够接收和处理不同业务类型的任务，相比于现有的一种业务类型需要构建一个特定的任务处理系统或装置，本公开能够有效节约系统资源，也提升了任务处理的开发效率。
应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案，不构成对本公开的限定。其中：
图1是本公开实施例提供的一种任务处理方法的流程图；
图2是本公开实施例提供的另一种任务处理方法的流程图；
图3是本公开实施例提供的一种任务处理装置的结构图；
图4是用来实现本公开实施例的任务处理方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
本公开实施例提供了一种任务处理方法。
请参照图1，图1是本公开实施例提供的一种任务处理方法的流程图，如图1所示，所述任务处理方法包括以下步骤：
步骤S101、获取待处理任务的任务处理请求，所述任务处理请求包括所述待处理任务的处理时间信息和所述待处理任务的业务类型。
需要说明地，本公开实施例所提供的任务处理方法可以是应用于任务处理平台，或者是任务处理系统，或者是任务处理装置等。为更好地理解，以下将以任务处理装置作为所述任务处理方法的执行主体来对本公开实施例进行具体的说明。
本公开实施例中，任务处理装置可以是特定的用于执行任务处理的电子设备，如计算机、手机等。可选地，所述任务处理装置包括任务创建接口，进而任务处理装置能够获取用户通过该任务创建接口上传或者创建的待处理任务，进而以获得待处理任务的任务处理请求。其中，用户在上传或者创建待处理任务时，可以是同时写入所述待处理任务的处理时间信息和业务类型。所述处理时间信息可以是指所述待处理任务需要被执行处理的时间，例如在某个时间点定时执行，或者每间隔一定时长执行一次等。所述业务类型可以是有多种分类情况，例如所述业务类型可以是与业务的紧急程度相关，如非常紧急业务、紧急业务和一般业务；或者，所述业务类型还可以是与业务的处理时间信息相关，如某个时间点定时执行的业务为一类，每间隔一定时长执行一次的业务为一类；或者，所述业务类型还可以是与业务所属的产业相关，如医疗业务、教育业务、房产业务等；当然，所述业务类型还可以是其他的可能情况，本公开不做具体限定。
步骤S102、在所述待处理任务的处理时间信息满足触发条件的情况下，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，其中，一个所述消息队列对应一种业务类型。
可选地，在所述任务处理装置获取到待处理任务的任务处理请求后，可以是基于所述待处理任务的处理时间信息，为所述待处理任务设定定时器，例如可以是为所述待处理任务写入一个定时进程，在到达所述待处理任务的处理时间时，则所述待处理任务的处理时间信息满足触发条件。进一步地，将所述待处理任务写入对应的消息队列中。
本公开实施例中，一个所述消息队列对应一种业务类型；也就是说，不同业务类型的待处理任务也就会被写入到不同的消息队列中。例如，所述业务类型分为非常紧急业务、紧急业务和一般业务，则对应的消息队列也就包括非常紧急业务消息队列、紧急业务消息队列和一般业务消息队列，若所述待处理任务的业务类型为非常紧急业务，则该待处理任务会被写入对应的非常紧急业务消息队列中，任务处理装置能够优先处理所述非常紧急业务消息队列中的任务，进而所述待处理任务也就能够被优先处理。
步骤S103、对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果。
本公开实施例中，在将待处理任务写入对应的消息队列后，任务处理装置能够对所述消息队列中的待处理任务执行任务处理，进而以获取所述待处理任务的任务处理结果。
可选地，任务处理装置可以通过执行器来对消息队列中的待处理任务执行任务处理，每个消息队列可以是对应一种执行器，用于将待处理任务传送至对应的执行器进行处理。其中，消息队列可以是按照待处理任务的处理时间先后顺序，将待处理任务发送至对应的执行器。执行器在接收到消息队列发送的待处理任务后，基于所述待处理任务的任务信息，对待处理任务执行相应的处理操作。
需要说明地，任务处理装置能够对执行器实现平行扩展，例如当消息队列中待处理任务数量较多的情况下，任务处理装置可以是增加执行器的数量，进而实现对执行器的扩展，避免因执行器数量不够而导致的任务处理不及时或处理效率低下等问题，提升任务处理装置的处理效率。另外，执行器还能够跨平台调用计算资源，例如可以是调用服务端的计算资源来实现对待处理任务的处理，以进一步提升对待处理任务的处理效率。
可选地，任务处理装置在获得待处理任务的任务处理结果后，能够将所述任务处理结果保存至数据库中，以方便后续对该待处理任务的任务处理结果进行查询。进一步地，还可以是将待同一待处理任务对应的处理过程状态、任务配置信息、处理时间信息、任务处理结果等关联并保存至数据库中，进而以方便用户能够从数据库中查询任务的处理结果、任务处理过程状态等信息。
需要说明地，所述任务处理结果可以是包括任务处理失败和任务处理成功，在所述任务处理结果包括任务处理失败的情况下，任务处理装置可以是将该待处理任务重新写入对应的消息队列中，以再次对该待处理任务执行任务处理。可选地，若某个待处理任务连续处理失败N次，则可以是停止将该待处理任务写入消息队列，也即停止对待处理任务的处理；其中，N为大于1的正整数。
本公开实施例中，任务处理装置在获取到待处理任务的任务处理请求后，当待处理任务的处理时间信息满足触发条件时，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，进而以通过执行器对所述消息队列中的待处理任务执行任务处理。其中，消息队列与待处理任务的业务类型对应，也即不同业务类型的待处理任务分别对应不同的消息队列，进而也就能够基于业务类型实现对待处理任务的分类管理和有效执行，通过一个任务处理装置就能够接收和处理不同业务类型的任务，相比于现有的一种业务类型需要构建一个特定的任务处理系统或装置，本公开能够有效节约系统资源，也提升了任务处理的开发效率。
可选地，上述图1所述实施例中的步骤S103还可以包括：
对所述消息队列中的待处理任务执行任务处理，并根据所述待处理任务的任务信息以及所述处理时间信息生成所述待处理任务的版本号；
获取所述待处理任务的任务处理结果，将所述任务处理结果与所述版本号关联并保存。
本公开中，任务处理装置在将待处理任务写入对应的消息队列中后，通过执行器对消息队列中的待处理任务执行任务处理，并能够在每次执行任务处理时，根据待处理任务对应的任务信息以及处理时间信息生成一个版本号(version ID)，在执行完对待处理任务的任务处理后，将所述待处理任务的任务处理结果与此次任务处理对应生成的版本号关联并保存至数据库中。
需要说明地，在对待处理任务执行任务处理时，每一次任务处理，都能够生成一个对应的版本号，进而对于执行了多次处理的待处理任务，也就会对应有多个版本号。这样，后续也就能够基于不同的版本号来查询待处理任务不同次的任务处理结果、处理过程状态等信息，使得用户能够更加直观明确地获知待处理任务多次的处理情况，对于任务处理结果多次都为失败的待处理任务，也就使得用户能够通过版本号来查询待处理任务每次的处理情况，以帮助用户查找失败原因，提升任务处理的成功率。
可选地，所述获取所述待处理任务的任务处理结果，将所述任务处理结果与所述版本号关联并保存之后，所述方法还包括：
获取针对目标待处理任务的结果查询请求，所述结果查询请求包括所述目标待处理任务的处理时间信息；
获取与所述目标待处理任务的处理时间信息匹配的目标版本号，基于所述目标版本号确定与所述结果查询请求匹配的目标任务处理结果。
其中，目标待处理任务是指需要查询任务处理结果的任一个待处理任务，并非特指。
可以理解地，在对待处理任务执行任务处理时，会基于待处理任务的任务信息以及处理时间信息来生成对应的版本号，所述处理时间信息可以是待处理任务执行任务处理时的时间。当获取到针对目标待处理任务的结果查询请求，也即需要对目标待处理任务某次的任务处理结果进行查询时，进而可以通过目标待处理任务的处理时间信息，来查找与该处理时间信息匹配的目标版本号，进而通过目标版本号获取对应的任务处理结果。这样，也就能够基于版本号来实现对某次任务处理结果的精准查询，提升任务处理结果的查询效率。
可选地，所述基于所述目标版本号确定与所述结果查询请求匹配的目标任务处理结果之后，所述方法还包括：
在所述目标任务处理结果不符合预设要求的情况下，根据所述目标版本号获取所述目标待处理任务的任务信息；
基于所述目标待处理任务的任务信息，将所述目标待处理任务重新写入对应的消息队列中，再次针对所述目标待处理任务执行任务处理。
可选地，所述目标任务处理结果不符合预设要求，可以是指该任务处理结果为失败，或者是不达标等。在这种情况下，基于目标任务处理结果对应的目标版本号，获取对应的目标待处理任务的任务信息，所述任务信息可以是待处理任务的配置信息，例如任务处理流程、任务处理要求、任务执行时效等。基于目标待处理任务的任务信息，将目标待处理任务重新写入对应的消息队列中，也即与目标待处理任务的业务类型对应的消息队列中，也就能够通过执行器再次针对所述目标待处理任务执行任务处理，以提升目标待处理任务的成功率，也能够实现对任务的有效管理。
本公开实施例中，在对所述消息队列中的待处理任务执行任务处理的过程中，当任务处理时长超过预设时长的情况下，停止对所述待处理任务的任务处理过程。这样，也就能够防止待处理任务的执行时间过长，导致执行器被全部占满而影响执行效率。
可选地，执行器的设计可以是采用起子进程的方式，当待处理任务的任务处理时长超过了一定时长时，执行器主进程可以强行停止待处理任务的处理进程，进而以实现对任务执行时长的有效控制，以保障执行的处理效率。
可选地，上述图1所述实施例的步骤102中，所述基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，包括：
基于所述待处理任务的业务类型，通过调度器将所述待处理任务写入对应的消息队列中；或者，
在所述待处理任务的任务处理结果不需要保存的情况下，基于所述待处理任务的业务类型，通过目标网络接口将所述待处理任务写入对应的消息队列中。
在本公开一种可选的实施方式中，任务处理装置可以是包括调度器，任务处理装置在获取到待处理任务的任务处理请求后，当待处理任务的处理时间信息满足触发时间时，通过调度器将所述待处理任务写入对应的消息队列中。本公开实施例中，不同业务类型的待处理任务对应不同的消息队列，通过调度器来将待处理任务写入对应的消息队列，也就能够对不同类型待处理任务的有序调度。
例如，任务处理装置可以是包括多个调度器，一个所述调度器用于对一种业务类型的待处理任务进行调度，也即用于将同一业务类型的待处理任务写入同一个消息队列中。进而，待处理任务的业务类型、调度器和消息队列三者之间是一一对应的，一种业务类型的待处理任务对应一个调度器和一个消息队列。这样，也就能够基于待处理任务的业务类型，通过对应的调度器将待处理任务写入对应的消息队列中，实现对待处理任务的分类调度，以确保对待处理任务的有序处理，提升处理效率。
可选地，所述基于所述待处理任务的业务类型，通过调度器将所述待处理任务写入对应的消息队列中，包括：
基于所述待处理任务的业务类型，通过调度器中的目标进程将所述待处理任务写入对应的消息队列中，其中，所述目标进程为与所述待处理任务的业务类型对应的进程。
需要说明地，一个调度器中可以是有多个进程，不同的进程用于实现对不同业务类型的待处理任务进行调度。例如，一个调度器中可以是包括定时任务调度进程、一次性异步任务调度进程、循环执行任务调度进程，分别用于对需定时执行的任务、一次性异步任务和需要每间隔一定时长执行一次的任务进行调度。假设待处理任务为需要每间隔一定时长执行一次的任务，则可以是通过调度器中的循环执行任务调度进程将该待处理任务写入对应的消息队列中，该对应的消息队列中的任务也即都是需要每间隔一定时长执行一次的任务。
本公开中，任务处理装置中的调度器对不同类型的待处理任务可以采用不同的进程来进行调度，能够提高对待处理任务的调度性能，保障对待处理任务的有序调度处理，避免因待处理任务过多而出现调度混乱。
其中，任务处理装置可以是包括多个调度器，每个调度器中包括多个进程，不同的进程对应不同的业务类型；多个调度器之间可以是通过管理器zookeeper实现分布式锁来保证调度器的高可用性。
可选地，本公开实施例还提供另一种处理方式，对于不需要保留任务处理结果的待处理任务，可以是通过网页服务器(web sever)提供的目标网络接口直接将待处理任务写入对应的消息队列中，也即不需要通过调度器进行调度写入，这样也就能够有效降低调度器的负载，避免所有的待处理任务都需要通过调度器进行调度写入而导致任务处理装置的效率低，进而以确保任务处理装置对待处理任务的高效处理。
为更好地理解本申请实施例提供的技术方案，请参照图2，图2是本公开实施例提供的另一种任务处理方法的流程图。图2中所示的web服务、调度器、消息队列、执行器和数据库可以是一种任务处理装置的内置模块或组件。如图2所示，用户可以是通过web服务的接口进行任务的创建，web服务将用户创建的任务传送到数据中间层(dbproxy)，数据层能够将获取到的任务写入任务表中；调度器可以是从数据中间层来获取任务，或者数据中间层将任务传送给调度器，其中，不同业务类型的任务可以是通过对应的调度器来处理；调度器将任务写入对应的消息队列中，不同业务类型的任务对应不同的消息队列；执行器从消息队列中获取任务，并对任务进行处理，将任务处理结果保存进数据库中。其中，任务处理装置可以是通过管理器zookeeper实现分布式锁来保证调度器的高可用性。另外，执行器还可以将任务处理结果通过数据中间层传送到web服务，用户可以通过web服务来查询任务处理结果，还可以通过web服务来执行任务暂停、任务删除、任务恢复、任务配置信息的修改等操作。本实施例中的任务处理方法可以参照上述图1所述方法实施例中的具体描述，并能达到相同的技术效果，此处不再赘述。
本公开实施例提供了一种任务处理装置。
请参照图3，图3是本公开实施例提供的一种任务处理装置的结构图，如图3所示，所述任务处理装置300包括：
第一获取模块301，用于获取待处理任务的任务处理请求，所述任务处理请求包括所述待处理任务的处理时间信息和所述待处理任务的业务类型；
写入模块302，用于在所述待处理任务的处理时间信息满足触发条件的情况下，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，其中，一个所述消息队列对应一种业务类型；
处理模块303，用于对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果。
可选地，所述处理模块303还用于：
对所述消息队列中的待处理任务执行任务处理，并根据所述待处理任务的任务信息以及所述处理时间信息生成所述待处理任务的版本号；
获取所述待处理任务的任务处理结果，将所述任务处理结果与所述版本号关联并保存。
可选地，所述任务处理装置300还包括：
第二获取模块，用于获取针对目标待处理任务的结果查询请求，所述结果查询请求包括所述目标待处理任务的处理时间信息；
确定模块，用于获取与所述目标待处理任务的处理时间信息匹配的目标版本号，基于所述目标版本号确定与所述结果查询请求匹配的目标任务处理结果。
可选地，所述任务处理装置300还包括：
第三获取模块，用于在所述目标任务处理结果不符合预设要求的情况下，根据所述目标版本号获取所述目标待处理任务的任务信息；
执行模块，用于基于所述目标待处理任务的任务信息，将所述目标待处理任务重新写入对应的消息队列中，再次针对所述目标待处理任务执行任务处理。
可选地，所述写入模块302还用于：
基于所述待处理任务的业务类型，通过调度器将所述待处理任务写入对应的消息队列中；或者，
在所述待处理任务的任务处理结果不需要保存的情况下，基于所述待处理任务的业务类型，通过目标网络接口将所述待处理任务写入对应的消息队列中。
可选地，所述写入模块302还用于：
基于所述待处理任务的业务类型，通过调度器中的目标进程将所述待处理任务写入对应的消息队列中，其中，所述目标进程为与所述待处理任务的业务类型对应的进程。
可选地，在对所述消息队列中的待处理任务执行任务处理的过程中，当任务处理时长超过预设时长的情况下，停止对所述待处理任务的任务处理过程。
需要说明地，本公开实施例提供的任务处理装置300能够实现上述图1和图2所述任务处理方法实施例的全部技术方案，因此至少能够实现上述图1和图2所述方法实施例的全部技术效果，此处不再赘述。
本公开的技术方案中，所涉及的用户个人信息的获取，存储和应用等，均符合相关法律法规的规定，且不违背公序良俗。
根据本公开的实施例，本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
图4示出了可以用来实施本公开的实施例的示例电子设备400的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图4所示，设备400包括计算单元401，其可以根据存储在只读存储器(ROM)402中的计算机程序或者从存储单元408加载到随机访问存储器(RAM)403中的计算机程序，来执行各种适当的动作和处理。在RAM 403中，还可存储设备400操作所需的各种程序和数据。计算单元401、ROM 402以及RAM 403通过总线404彼此相连。输入/输出(I/O)接口405也连接至总线404。
设备400中的多个部件连接至I/O接口405，包括：输入单元406，例如键盘、鼠标等；输出单元407，例如各种类型的显示器、扬声器等；存储单元408，例如磁盘、光盘等；以及通信单元409，例如网卡、调制解调器、无线通信收发机等。通信单元409允许设备400通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元401可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元401的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元401执行上文所描述的各个方法和处理，例如任务处理方法。例如，在一些实施例中，任务处理方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元408。在一些实施例中，计算机程序的部分或者全部可以经由ROM 402和/或通信单元409而被载入和/或安装到设备400上。当计算机程序加载到RAM 403并由计算单元401执行时，可以执行上文描述的任务处理方法的一个或多个步骤。备选地，在其他实施例中，计算单元401可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行任务处理方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，也可以为分布式系统的服务器，或者是结合了区块链的服务器。
应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。
上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。

Claims (17)

1.一种任务处理方法，包括：
获取待处理任务的任务处理请求，所述任务处理请求包括所述待处理任务的处理时间信息和所述待处理任务的业务类型；
在所述待处理任务的处理时间信息满足触发条件的情况下，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，其中，一个所述消息队列对应一种业务类型；
对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果。
2.根据权利要求1所述的方法，其中，所述对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果，包括：
对所述消息队列中的待处理任务执行任务处理，并根据所述待处理任务的任务信息以及所述处理时间信息生成所述待处理任务的版本号；
获取所述待处理任务的任务处理结果，将所述任务处理结果与所述版本号关联并保存。
3.根据权利要求2所述的方法，其中，所述获取所述待处理任务的任务处理结果，将所述任务处理结果与所述版本号关联并保存之后，所述方法还包括：
获取针对目标待处理任务的结果查询请求，所述结果查询请求包括所述目标待处理任务的处理时间信息；
获取与所述目标待处理任务的处理时间信息匹配的目标版本号，基于所述目标版本号确定与所述结果查询请求匹配的目标任务处理结果。
4.根据权利要求3所述的方法，其中，所述基于所述目标版本号确定与所述结果查询请求匹配的目标任务处理结果之后，所述方法还包括：
在所述目标任务处理结果不符合预设要求的情况下，根据所述目标版本号获取所述目标待处理任务的任务信息；
基于所述目标待处理任务的任务信息，将所述目标待处理任务重新写入对应的消息队列中，再次针对所述目标待处理任务执行任务处理。
5.根据权利要求1所述的方法，其中，所述基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，包括：
基于所述待处理任务的业务类型，通过调度器将所述待处理任务写入对应的消息队列中；或者，
在所述待处理任务的任务处理结果不需要保存的情况下，基于所述待处理任务的业务类型，通过目标网络接口将所述待处理任务写入对应的消息队列中。
6.根据权利要求5所述的方法，其中，所述基于所述待处理任务的业务类型，通过调度器将所述待处理任务写入对应的消息队列中，包括：
基于所述待处理任务的业务类型，通过调度器中的目标进程将所述待处理任务写入对应的消息队列中，其中，所述目标进程为与所述待处理任务的业务类型对应的进程。
7.根据权利要求1所述的方法，其中，在对所述消息队列中的待处理任务执行任务处理的过程中，当任务处理时长超过预设时长的情况下，停止对所述待处理任务的任务处理过程。
8.一种任务处理装置，包括：
第一获取模块，用于获取待处理任务的任务处理请求，所述任务处理请求包括所述待处理任务的处理时间信息和所述待处理任务的业务类型；
写入模块，用于在所述待处理任务的处理时间信息满足触发条件的情况下，基于所述待处理任务的业务类型，将所述待处理任务写入对应的消息队列中，其中，一个所述消息队列对应一种业务类型；
处理模块，用于对所述消息队列中的待处理任务执行任务处理，获取所述待处理任务的任务处理结果。
9.根据权利要求8所述的装置，其中，所述处理模块还用于：
对所述消息队列中的待处理任务执行任务处理，并根据所述待处理任务的任务信息以及所述处理时间信息生成所述待处理任务的版本号；
获取所述待处理任务的任务处理结果，将所述任务处理结果与所述版本号关联并保存。
10.根据权利要求9所述的装置，其中，所述装置还包括：
第二获取模块，用于获取针对目标待处理任务的结果查询请求，所述结果查询请求包括所述目标待处理任务的处理时间信息；
确定模块，用于获取与所述目标待处理任务的处理时间信息匹配的目标版本号，基于所述目标版本号确定与所述结果查询请求匹配的目标任务处理结果。
11.根据权利要求10所述的装置，其中，所述装置还包括：
第三获取模块，用于在所述目标任务处理结果不符合预设要求的情况下，根据所述目标版本号获取所述目标待处理任务的任务信息；
执行模块，用于基于所述目标待处理任务的任务信息，将所述目标待处理任务重新写入对应的消息队列中，再次针对所述目标待处理任务执行任务处理。
12.根据权利要求8所述的装置，其中，所述写入模块还用于：
基于所述待处理任务的业务类型，通过调度器将所述待处理任务写入对应的消息队列中；或者，
在所述待处理任务的任务处理结果不需要保存的情况下，基于所述待处理任务的业务类型，通过目标网络接口将所述待处理任务写入对应的消息队列中。
13.根据权利要求12所述的装置，其中，所述写入模块还用于：
基于所述待处理任务的业务类型，通过调度器中的目标进程将所述待处理任务写入对应的消息队列中，其中，所述目标进程为与所述待处理任务的业务类型对应的进程。
14.根据权利要求8所述的装置，其中，在对所述消息队列中的待处理任务执行任务处理的过程中，当任务处理时长超过预设时长的情况下，停止对所述待处理任务的任务处理过程。
15.一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-7中任一项所述的方法。
16.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-7中任一项所述的方法。
17.一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-7中任一项所述的方法。
CN202111141621.8A 2021-09-28 2021-09-28 任务处理方法、装置及电子设备 Active CN113867916B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202111141621.8A CN113867916B (zh) 2021-09-28 2021-09-28 任务处理方法、装置及电子设备
EP22196817.5A EP4113299A3 (en) 2021-09-28 2022-09-21 Task processing method and device, and electronic device
US17/951,094 US20230020324A1 (en) 2021-09-28 2022-09-22 Task Processing Method and Device, and Electronic Device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111141621.8A CN113867916B (zh) 2021-09-28 2021-09-28 任务处理方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN113867916A true CN113867916A (zh) 2021-12-31
CN113867916B CN113867916B (zh) 2024-05-07

Family

ID=78991838

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111141621.8A Active CN113867916B (zh) 2021-09-28 2021-09-28 任务处理方法、装置及电子设备

Country Status (3)

Country Link
US (1) US20230020324A1 (zh)
EP (1) EP4113299A3 (zh)
CN (1) CN113867916B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114691318A (zh) * 2022-02-24 2022-07-01 深圳震有科技股份有限公司 一种数据排队处理方法、装置、终端及存储介质
CN115114359A (zh) * 2022-05-27 2022-09-27 马上消费金融股份有限公司 用户数据处理方法及装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115866017B (zh) * 2023-02-27 2023-06-23 天翼云科技有限公司 消息处理方法、装置、通信设备及存储介质
CN116361038B (zh) * 2023-06-02 2023-09-08 山东浪潮科学研究院有限公司 一种加速计算管理方法、系统、设备及存储介质
CN116521630B (zh) * 2023-06-30 2024-01-02 深圳复临科技有限公司 任务进度实时显示方法、装置、计算机设备及存储介质
CN117785431B (zh) * 2024-02-27 2024-06-04 云粒智慧科技有限公司 任务调度分配方法、装置、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190163524A1 (en) * 2017-11-30 2019-05-30 Baidu Online Network Technology (Beijing) Co., Ltd. Method and apparatus for processing task in smart device
CN109885399A (zh) * 2019-01-17 2019-06-14 平安普惠企业管理有限公司 数据处理方法、电子装置、计算机设备及存储介质
CN111221638A (zh) * 2020-01-03 2020-06-02 北京字节跳动网络技术有限公司 并发任务的调度处理方法、装置、设备和介质
CN111831420A (zh) * 2020-07-20 2020-10-27 北京百度网讯科技有限公司 用于任务调度的方法、装置、电子设备及计算机可读存储介质
CN112905314A (zh) * 2021-01-27 2021-06-04 北京百度网讯科技有限公司 异步处理方法、装置、电子设备、存储介质、及路侧设备
CN112965799A (zh) * 2021-03-05 2021-06-15 北京百度网讯科技有限公司 任务状态的提示方法、装置、电子设备和介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6514687B2 (ja) * 2013-05-20 2019-05-15 パックサイズ，エルエルシー ローカルまたは分散型コンピュータ・システムにおける柔軟なノード構成方法およびシステム
US10877801B2 (en) * 2018-09-28 2020-12-29 Atlassian Pty Ltd. Systems and methods for scheduling tasks

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190163524A1 (en) * 2017-11-30 2019-05-30 Baidu Online Network Technology (Beijing) Co., Ltd. Method and apparatus for processing task in smart device
CN109885399A (zh) * 2019-01-17 2019-06-14 平安普惠企业管理有限公司 数据处理方法、电子装置、计算机设备及存储介质
CN111221638A (zh) * 2020-01-03 2020-06-02 北京字节跳动网络技术有限公司 并发任务的调度处理方法、装置、设备和介质
CN111831420A (zh) * 2020-07-20 2020-10-27 北京百度网讯科技有限公司 用于任务调度的方法、装置、电子设备及计算机可读存储介质
CN112905314A (zh) * 2021-01-27 2021-06-04 北京百度网讯科技有限公司 异步处理方法、装置、电子设备、存储介质、及路侧设备
CN112965799A (zh) * 2021-03-05 2021-06-15 北京百度网讯科技有限公司 任务状态的提示方法、装置、电子设备和介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
姚丹霖: "BPEL4WS与工作流技术", 28 February 2009, 国防科技大学出版社, pages: 35 *
高丽萍;戴?;高丽;: "一种范围性空间众包任务的在线分配优化研究", 小型微型计算机系统, no. 08, pages 14 - 23 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114691318A (zh) * 2022-02-24 2022-07-01 深圳震有科技股份有限公司 一种数据排队处理方法、装置、终端及存储介质
CN115114359A (zh) * 2022-05-27 2022-09-27 马上消费金融股份有限公司 用户数据处理方法及装置
CN115114359B (zh) * 2022-05-27 2023-11-14 马上消费金融股份有限公司 用户数据处理方法及装置

Also Published As

Publication number Publication date
US20230020324A1 (en) 2023-01-19
EP4113299A2 (en) 2023-01-04
EP4113299A3 (en) 2023-02-22
CN113867916B (zh) 2024-05-07

Similar Documents

Publication Publication Date Title
CN113867916A (zh) 任务处理方法、装置及电子设备
CN112967023B (zh) 获取日程信息的方法、装置、设备、存储介质及程序产品
CN114489997A (zh) 定时任务调度方法、装置、设备和介质
CN112905314A (zh) 异步处理方法、装置、电子设备、存储介质、及路侧设备
EP4060496A2 (en) Method, apparatus, device and storage medium for running inference service platform
US10318456B2 (en) Validation of correctness of interrupt triggers and delivery
CN115964153A (zh) 一种异步任务处理方法、装置、设备以及存储介质
CN112817992A (zh) 执行更改任务的方法、装置、电子设备以及可读存储介质
CN112948081A (zh) 延时处理任务的方法、装置、设备以及存储介质
CN114327819B (zh) 一种任务管理方法、装置、设备及存储介质
CN115658248A (zh) 任务调度方法方法、装置、电子设备及存储介质
CN112925623A (zh) 任务处理方法、装置、电子设备和介质
CN114386577A (zh) 用于执行深度学习模型的方法、设备和存储介质
CN113411271A (zh) 数据接入方法、装置、设备以及存储介质
CN114429211A (zh) 用于生成信息的方法、装置、设备、介质和产品
CN114329164A (zh) 用于处理数据的方法、装置、设备、介质和产品
CN114185641A (zh) 虚拟机冷迁移方法、装置、电子设备及存储介质
CN113656239A (zh) 针对中间件的监控方法、装置及计算机程序产品
CN113220230B (zh) 数据导出方法及其装置、电子设备以及存储介质
CN114185673A (zh) 分布式资源调度方法、装置及系统
CN115061817A (zh) 运维方法、装置、系统及计算机程序产品
CN115391292A (zh) 日志数据处理方法、装置、设备及存储介质
CN114116142A (zh) 标识生成方法、装置、电子设备及存储介质
CN114185552A (zh) 应用部署的处理方法及装置、设备、介质和产品
CN115390992A (zh) 一种虚拟机创建方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant