CN111182061B - 任务分发处理方法、系统、计算机设备和存储介质 - Google Patents
任务分发处理方法、系统、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN111182061B CN111182061B CN201911400288.0A CN201911400288A CN111182061B CN 111182061 B CN111182061 B CN 111182061B CN 201911400288 A CN201911400288 A CN 201911400288A CN 111182061 B CN111182061 B CN 111182061B
- Authority
- CN
- China
- Prior art keywords
- task
- asynchronous
- tasks
- celery
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title abstract description 21
- 238000012545 processing Methods 0.000 claims abstract description 173
- 240000007087 Apium graveolens Species 0.000 claims abstract description 132
- 235000015849 Apium graveolens Dulce Group Nutrition 0.000 claims abstract description 132
- 235000010591 Appio Nutrition 0.000 claims abstract description 132
- 230000000007 visual effect Effects 0.000 claims abstract description 127
- 238000012544 monitoring process Methods 0.000 claims abstract description 112
- 238000000034 method Methods 0.000 claims abstract description 56
- 230000007246 mechanism Effects 0.000 claims abstract description 37
- 230000000977 initiatory effect Effects 0.000 claims description 72
- 238000012800 visualization Methods 0.000 claims description 34
- 238000004590 computer program Methods 0.000 claims description 24
- 230000008569 process Effects 0.000 claims description 20
- 238000010586 diagram Methods 0.000 description 9
- 230000003993 interaction Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000026676 system process Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 230000007248 cellular mechanism Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
- H04L43/045—Processing captured monitoring data, e.g. for logfile generation for graphical visualisation of monitoring data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请涉及一种任务分发处理方法、系统、计算机设备和存储介质，所述方法包括：通过Tornado框架的Web服务器接收到任务请求时，根据任务请求使用Tornado框架的Web服务器生成多异步任务；使用Tornado框架的Web服务器将多异步任务下发到Celery系统；使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理，Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理；对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。上述方法能够通过异步任务处理方式提高任务处理效率。
Description
技术领域
本申请涉及任务处理技术领域，特别是涉及一种任务分发处理方法、系统、计算机设备和存储介质。
背景技术
业务请求的客户端向业务系统请求对应的业务时，传统的方式是根据客户端的业务请求生成流式任务，业务系统再对流式任务进行任务处理，进而将任务处理结果反馈到客户端。由于客户端请求的业务量越来越大并且业务请求的频次越来越高，流式任务的任务处理过程中单任务运行时间过长，部分任务需要一周以上，严重影响业务系统中的业务处理效率，导致业务系统中的业务处理效率低。
发明内容
基于此，有必要针对上述技术问题，提供一种能够通过异步任务处理方式提高任务处理效率的任务分发处理方法、系统、计算机设备和存储介质。
一种任务分发处理方法，该方法包括：通过Tornado框架的Web服务器接收到任务请求时，根据任务请求使用Tornado框架的Web服务器生成多异步任务；使用Tornado框架的Web服务器将多异步任务下发到Celery系统；使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理，Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理；对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。
在其中一个实施例中，对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，包括：获取Tornado框架的Web服务器生成的各异步任务；获取预设可视化任务发起页面，可视化任务发起页面中包含有任务字段信息；通过预设可视化任务发起页面的任务字段信息显示Tornado框架的Web服务器生成的各异步任务；任务分发处理方法还包括：当通过可视化任务发起页面接收到任务发起指令时，使用Tornado框架的Web服务器将可视化任务发起页面中显示的各异步任务下发到Celery系统。
在其中一个实施例中，任务分发处理方法还包括：获取Celery系统对可视化任务发起页面中显示的各异步任务的任务处理信息；获取预设可视化任务监控页面；通过预设可视化任务监控页面显示各异步任务的任务处理信息。
在其中一个实施例中，Celery系统包括多个工作节点，各工作节点用于对分配到的任务进行任务处理，对Celery系统的任务处理进行可视化任务监控，包括：当监测到Tornado框架的Web服务器向Celery系统下发目标异步任务时，确认目标异步任务对应的目标工作节点，获取目标工作节点处理目标异步任务的工作状态信息；获取预设可视化节点监控页面；通过可视化预设节点监控页面显示目标工作节点的工作状态信息。
在其中一个实施例中，任务分发处理方法还包括：获取目标工作节点处理目标异步任务的任务处理信息；获取预设可视化节点监控页面；通过预设可视化节点监控页面显示目标工作节点处理目标异步任务的任务处理信息。
在其中一个实施例中，任务分发处理方法还包括：确定多个工作节点的第一操作系统和第二操作系统；根据分布式任务队列Celery机制对第一操作系统设置第一操作命令，以使得第一操作系统对应的第一工作节点根据第一操作命令执行任务处理；根据分布式任务队列Celery机制对第二操作系统设置第二操作命令，以使得第二操作系统对应的第二工作节点根据第二操作命令执行任务处理。
在其中一个实施例中，Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理，包括：Celery系统根据分布式任务队列Celery机制采用公平调度算法对多异步任务进行任务分配；Celery系统根据分布式任务队列Celery机制采用生产者-消费者模式对分配后的任务进行任务传输，以对传输后的任务进行任务处理。
一种任务分发处理系统，该系统包括：Tornado框架的Web服务器，用于接收到任务请求时根据任务请求生成多异步任务，将多异步任务下发到Celery系统；Celery系统，用于使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理；任务监控系统，用于对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。
一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述任一实施例方法的步骤。
一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述任一实施例方法的步骤。
上述任务分发处理方法、系统、计算机设备和存储介质，通过Tornado框架的Web服务器接收到任务请求时，根据任务请求使用Tornado框架的Web服务器生成多异步任务，使用Tornado框架的Web服务器将多异步任务下发到Celery系统，使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理。因此，能够针对任务请求通过Tornado框架的Web服务器生成可并行处理的多异步任务，进而通过Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及任务处理，从而将传统业务处理方式中的流式任务处理方式变为可并行处理的异步任务处理方式，提高了任务处理的效率。此外，通过对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控以及对Celery系统的任务处理进行可视化任务监控，实现任务处理过程的可视化监控，便于开发人员根据可视化监控结果控制业务处理过程，进一步提高业务处理的效率。
附图说明
图1为一个实施例中的一种任务分发处理方法的应用环境图；
图2为一个实施例中的一种任务分发处理方法的流程示意图；
图3为一个实施例中的Celery系统的结构示意图；
图4为一个实施例中的可视化任务发起页面的界面显示示意图；
图5为一个实施例中的可视化任务监控页面的界面显示示意图；
图6为一个实施例中的可视化预设节点监控页面的界面显示示意图；
图7为另一个实施例中的可视化预设节点监控页面的界面显示示意图；
图8为一个实施例中的Windows操作系统的设备的界面显示示意图；
图9为一个实施例中的一种任务分发处理方法中的部署流程示意图；
图10为一个实施例中一种任务分发处理系统的结构框图；
图11为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请提供的一种任务分发处理方法，应用于如图1所示的应用环境中。该应用环境中包括用户终端集群100以及与用户终端集群100对应的任务处理后台200。任务处理后台200包括Tornado框架的Web服务器202、Celery系统204以及任务控制平台206。用户终端集群100包括一个或多个用户终端。用户终端集群100中的用户终端向任务处理后台200发送任务请求时，任务控制平台206通过Tornado框架的Web服务器202接收到用户终端集群100发起的任务请求，根据任务请求使用Tornado框架的Web服务器202生成多异步任务。进一步地，使用Tornado框架的Web服务器202将所多异步任务下发到Celery系统204，进而使用Celery系统204对多异步任务进行任务分配并对分配后的任务进行任务处理。其中，Celery系统204使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理。此外，任务控制平台206对Tornado框架的Web服务器202生成的多异步任务进行可视化任务监控，以及对Celery系统204的任务处理进行可视化任务监控。具体地，任务控制平台206包括服务器2062以及终端2064。服务器2062与终端2064进行任务信息交互，并通过终端2064的监控界面2068实现对Tornado框架的Web服务器202生成的多异步任务的可视化任务监控以及对Celery系统204的任务处理的可视化任务监控。
在一个实施例中，如图2所示，提供了一种任务分发处理方法，以该方法应用于图1中的任务控制平台206为例进行说明，包括以下步骤：
S102，通过Tornado框架的Web服务器接收到任务请求时，根据任务请求使用Tornado框架的Web服务器生成多异步任务。
在本实施例中，Tornado是Web服务器的一种开发框架，Tornado框架的Web服务器为可扩展的非阻塞式异步http服务器。Tornado框架的Web服务器在接收的用户终端的发起的任务请求时，能够根据任务请求生成多异步任务。尤其是在用户终端发起的任务请求量过大时，Tornado框架的Web服务器采用asyncio协程工作，在用于接收任务请求的I/O(Input/Output，输入/输出)接口出现阻塞时可以做到I/O接口切换，因此使得多异步任务之间相互无干扰。其中，任务请求可以是一个或多个，多异步任务可以是一个任务请求对应的多个异步任务，也可以是多个任务请求对应的多个异步任务。异步任务可以是python任务，如心跳任务等。
S104，使用Tornado框架的Web服务器将多异步任务下发到Celery系统。
在本实施例中，采用Tornado框架的Web服务器发起异步任务，将多异步任务下发到Celery系统，以由Celery系统对各异步任务进行任务处理。其中，Celery系统用于对Tornado框架的Web服务器发起的各异步任务进行任务处理。具体地，Tornado框架的Web服务器接收到任务请求后，将根据任务请求生成的业务逻辑处理任务、数据库操作任务以及I/O接口任务等各种耗时的任务下发给Celery系统。Celery系统对各任务进行异步处理后，再将处理结果返回Tornado框架的Web服务器。Tornado框架的Web服务器再将处理结果返回到任务请求的客户端。
S106，使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理，Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理。
如图3所示，Celery系统包括消息中间件、工作节点(任务执行单元)以及存储设备等。消息中间件用于接收多异步任务。各工作节点从消息中间件中读取异步任务，以对各异步任务执行任务处理，并将任务执行后的结果信息反馈到消息中间件，以由消息中间件进行监控。同时，各工作节点将任务执行结果进行存储，将任务执行结果存储到存储设备中。在本实施例中，使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理。具体地，通过将多异步任务分别存储到消息中间件中，各工作节点从消息中间件从消息中间件中读取异步任务，以对读取的异步任务进行任务处理。其中，在对多异步任务进行任务分配并对分配后的任务进行任务处理过程中，Celery系统使用分布式任务队列Celery机制进行任务分配和任务处理。
S108，对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。
在本实施例中，任务控制平台206在使用Tornado框架的Web服务器生成多异步任务并使用Celery系统进行异步任务处理之后，进一步对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。具体地，任务控制平台206获取Tornado框架的Web服务器中生成的多异步任务的任务信息，并通过可视化的方式将多异步任务的任务信息进行监控。此外，任务控制平台206还获取Celery系统中各工作节点的任务处理信息，并通过可视化的方式将多异步任务的任务信息进行监控。
上述任务分发处理方法，通过Tornado框架的Web服务器接收到任务请求时，根据任务请求使用Tornado框架的Web服务器生成多异步任务，使用Tornado框架的Web服务器将多异步任务下发到Celery系统，使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理。因此，能够针对任务请求通过Tornado框架的Web服务器生成可并行处理的多异步任务，进而通过Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及任务处理，从而将传统业务处理方式中的流式任务处理方式变为可并行处理的调用链任务处理方式，提高了任务处理的效率。此外，通过对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控以及对Celery系统的任务处理进行可视化任务监控，实现任务处理过程的可视化监控，便于开发人员根据可视化监控结果控制业务处理过程，进一步提高业务处理的效率。
在一实施例中，步骤S108中，对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，包括：获取Tornado框架的Web服务器生成的各异步任务；获取预设可视化任务发起页面，可视化任务发起页面中包含有任务字段信息；通过预设可视化任务发起页面的任务字段信息显示Tornado框架的Web服务器生成的各异步任务。此时，步骤S108之后还包括：当通过可视化任务发起页面接收到任务发起指令时，使用Tornado框架的Web服务器将可视化任务发起页面中显示的各异步任务下发到Celery系统。
在该实施例中，通过可视化任务发起页面对Tornado框架的Web服务器生成的各异步任务进行可视化任务监控。其中，可视化任务发起页面可以是预先设置的可视化任务发起页面，即预设可视化任务发起页面。可视化任务发起页面中包含有任务字段信息，通过预设可视化任务发起页面的任务字段信息能够显示Tornado框架的Web服务器生成的各异步任务。具体地，预设可视化任务发起页面包含多个任务字段，多个任务字段用于标识出预设可视化任务发起页面中各异步任务，以显示Tornado框架的Web服务器生成的各异步任务。进一步地，预设可视化任务发起页面提供任务字段的校验，即时通信反馈及邮件反馈等多种功能。同时提供无模板的任务发起和模板的任务发起，以使得任务控制平台206能够控制Tornado框架的Web服务按照模板将各异步任务下发到Celery系统。或者，能够控制Tornado框架的Web服务不参照模板的方式将各异步任务下发到Celery系统。因此，可以实现对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控。
在一实现方式中，任务控制平台206控制Tornado框架的Web服务按照无模板形式发起异步任务，无模板形式如图4所示。无模板形式中，可视化任务发起页面包含多个任务字段，各任务字段表征对应异步任务的任务信息，具体参见图4所示。当通过可视化任务发起页面接收到任务发起指令时，使用Tornado框架的Web服务器将可视化任务发起页面中显示的各异步任务下发到Celery系统。如图4所示，可视化任务发起页面提供有“发起任务”按键，触发该按键时任务控制平台206得到任务发起指令，进而控制Tornado框架的Web服务器将可视化任务发起页面中显示的各异步任务下发到Celery系统。
在一实施例中，步骤S108中，对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，还包括：获取Celery系统对可视化任务发起页面中显示的各异步任务的任务处理信息；获取预设可视化任务监控页面；通过预设可视化任务监控页面显示各异步任务的任务处理信息。
在该实施例中，任务控制平台206通过预设可视化任务发起页面的任务字段信息显示Tornado框架的Web服务器生成的各异步任务之后，还对各异步任务的处理情况进行可视化监控。具体地，设置预设可视化任务监控页面，将Celery系统对可视化任务发起页面中显示的各异步任务的任务处理信息显示在可视化任务监控页面中。其中，预设可视化任务监控页面的显示界面信息可参见图5所示。通过预设可视化任务监控页面显示各异步任务的任务处理信息包括显示各异步任务的任务名称、索引、任务状态以及任务参数等信息。因此，可以实现对Celery系统处理各异步任务时任务信息的进行可视化任务监控。
在一实施例中，Celery系统包括多个工作节点，各工作节点用于对分配到的任务进行任务处理。步骤S108中，对Celery系统的任务处理进行可视化任务监控，包括：当监测到Tornado框架的Web服务器向Celery系统下发目标异步任务时，确认目标异步任务对应的目标工作节点，获取目标工作节点处理目标异步任务的工作状态信息；获取预设可视化节点监控页面；通过可视化预设节点监控页面显示目标工作节点的工作状态信息。
Tornado框架的Web服务器向Celery系统下发各异步任务时，Celery系统中不同工作节点处理不同异步任务，或者同一异步任务由不同工作节点进行处理。在该实施例中，任务控制平台206监测到Tornado框架的Web服务器向Celery系统下发目标异步任务时，确认Celery系统中处理该目标异步任务的目标工作节点。目标工作节点可以是一个或多个，多个目标工作节点可以位于不同的平台系统中。具体地，可以采用websocket技术实现实时监控页面，以使得任务监控更及时更全面。进一步地，获取目标工作节点处理目标异步任务的工作状态信息，通过可视化预设节点监控页面显示目标工作节点的工作状态信息。可视化预设节点监控页面可参见图6所示。其中，可视化预设节点监控页面显示目标工作节点的工作状态信息包括目标工作节点在线处理任务状态或者目标工作节点当前不处理任务状态。进一步地，目标工作节点的工作状态信息还可以是等待处理状态、当前在处理状态、已成功处理状态或处理失败状态、或重试状态。因此，可以实现各异步任务在Celery系统中对应工作节点的处理状态信息的可视化监控。
在一实施例中，步骤S108中，对Celery系统的任务处理进行可视化任务监控，包括：获取目标工作节点处理目标异步任务的任务处理信息；获取预设可视化节点监控页面；通过预设可视化节点监控页面显示目标工作节点处理目标异步任务的任务处理信息。
任务控制平台206除了对目标工作节点的工作状态信息进行可视化监控之外，还对目标工作节点处理目标异步任务的任务处理信息进行可视化监控。在该实施例中，任务控制平台206获取目标工作节点处理目标异步任务的任务处理信息。如图7所示，任务处理信息可以包括目标工作节点的最大并发数量、空闲线程数量、运行线程数量、进程识别号以及目标工作节点读取的消息数量。此外，还可以包括可设置的进程并发数量以及自适应调整的线程并发数量信息等。因此，使得任务控制平台206能够对目标工作节点处理目标异步任务的任务处理信息进行可视化监控。
在一实施例中，步骤S106之后，还包括：确定多个工作节点的第一操作系统和第二操作系统；根据分布式任务队列Celery机制对第一操作系统设置第一操作命令，以使得第一操作系统对应的第一工作节点根据第一操作命令执行任务处理；根据分布式任务队列Celery机制对第二操作系统设置第二操作命令，以使得第二操作系统对应的第二工作节点根据第二操作命令执行任务处理。
在该实施例中，Celery系统中的工作节点指的是对异步任务进行任务处理的计算机设备，多个工作节点可以采用多个操作系统。任务控制平台206确定多个工作节点的第一操作系统和第二操作系统。第一操作系统和第二操作系统为不相同的两个操作系统。两个操作系统可以是Windows操作系统和Linux操作系统。进一步地，根据分布式任务队列Celery机制对第一操作系统设置第一操作命令，以使得第一操作系统对应的第一工作节点根据第一操作命令执行任务处理。并且，根据分布式任务队列Celery机制对第二操作系统设置第二操作命令，以使得第二操作系统对应的第二工作节点根据第二操作命令执行任务处理。其中，可以是通过人工操作的方式，将第一操作命令对应的命令符设置到第一工作节点上，以使得第一工作节点根据第一操作命令执行任务处理。以及，通过人工操作的方式，将第二操作命令对应的命令符设置到第二工作节点上，以使得第二工作节点根据第二操作命令执行任务处理。
具体地，该实施例中提供多种方式的操作命令，以同时兼容windows操作系统和Linux操作系统，方便业务人员和运维人员使用。例如，Windows操作系统的设备界面采用双击bat文件发起，启动后效果如图8所示。可根据实际需求决定日志信息及任务具体执行方式，实际操作命令为celery-A tasks worker-l info-n worker＿heart.％h-P eventlet。对于Linux操作系统的设备界面采用命令行发起，操作命令为:celery-A tasks worker-linfo-n worker＿heart.％h-P eventlet。
在一实施例中，步骤S106中，Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理，包括：Celery系统根据分布式任务队列Celery机制采用公平调度算法对多异步任务进行任务分配；Celery系统根据分布式任务队列Celery机制采用生产者-消费者模式对分配后的任务进行任务传输，以对传输后的任务进行任务处理。
具体地，Celery系统采用生产者-消费者模式下发任务，采用公平调度算法对任务进行分发。此外，还可以采用可视化方式发布任务以及采用多级存储方式进行数据存储，并且数据返回值采用json格式。因此，采用生产者-消费者模式传输任务，能够防止任务因无序性和网络延迟导致任务发布失败。采用公平调度算法对多异步任务进行任务分配，能够平衡各个工作节点的任务量，避免因任务量不均衡导致的资源浪费。
针对上述各实施例所述的任务分发处理方法，以下提供一个部署流程实施例，以进一步说明本申请中的任务分发处理方法的实现过程：
如图9所示，用户客户端通过用户终端设备发起任务请求。任务请求可以是多个请求构成的任务请求集合或者是单个任务请求。也即是，http请求集合或者是单条http请求。根据任务请求生成多个异步任务并进行异步任务分配。进而，将异步任务发送到消息队列中。消息队列内有需要传输的消息(任务)。将消息队列中的消息传输到各工作节点，以由各工作节点进行任务处理。同时，各工作节点需要进行节点配置，因此提供有各配置文件，以使得各工作节点根据配置文件进行节点配置。根据如图9所示的流程部署后，可实现本申请的任务分发处理方法。
进一步地，考虑到多平台跨系统后期及云平台的问题，采用如下方式进行软件配置：
1)将可视化系统(可视化任务发起页面、可视化任务监控页面、可视化节点监控页面)打包，方便后期人员使用，使用python内置pip语句即可实现轻松扩展。具体地，采用pipinstall sn_flower方式安装系统。
2)将系统的配置文件集中放置，可以使用mysql存放，采用单点部署。当任务量较大时采用etcd存放以保证配置安全可靠性，并采用多节点分布式高可用方式部署。
3)任务交互方式采用RabbitMQ，方便监控队列信息。具体地，采用生产者-消费者模式传输任务，防止任务因无序性和网络延迟导致任务发布失败。
4)节点部署方式采用压缩包安装部署，避免因exe等执行文件导致多平台不兼容情况，内置多系统启动方式，启动命令一致。任务节点采用简单的start文件和py文件直接执行方式。
5)根据任务部署后端云计算节点，可以支持openstak及k8s等多平台部署方式，采用chan任务链方式实现自动化多平台跨系统。
综上，本申请的一种任务分发处理方法，当有大量临时任务快速执行时，采用本方法的系统可做到快速扩容、多进程同时执行且相互间任务无干扰。当原有任务因体量过大导致任务执行缓慢需要重构时，采用本方法的系统可做到任务快速拆分，使用内置任务链模式使任务流程由串行改并行。当有部分工作节点压力过大时，采用本方法的系统可采用快速负载均衡，无需更改配置文件。当需要部分业务迁移需要重新审核代码时，可根据任务快速定位需要重改部分以及可以根据任务可视化方式和业务沟通，实现快速开发。
应该理解的是，虽然流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，附图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
本申请还提供一种任务分发处理系统。如图10所示，该系统包括Tornado框架的Web服务器10、Celery系统20以及任务监控系统30。Tornado框架的Web服务器10，用于接收到任务请求时根据任务请求生成多异步任务，将多异步任务下发到Celery系统；Celery系统20，用于使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理；任务监控系统30，用于对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。
在其中一个实施例中，任务监控系统30可以包括(图10未示出)：第一获取装置，用于获取Tornado框架的Web服务器生成的各异步任务；第二获取装置，用于获取预设可视化任务发起页面，可视化任务发起页面中包含有任务字段信息；第一显示装置，用于通过预设可视化任务发起页面的任务字段信息显示Tornado框架的Web服务器生成的各异步任务；任务发起装置，用于当通过可视化任务发起页面接收到任务发起指令时，使用Tornado框架的Web服务器将可视化任务发起页面中显示的各异步任务下发到Celery系统。
在其中一个实施例中，任务监控系统30可以包括(图10未示出)：第三获取装置，用于获取Celery系统对可视化任务发起页面中显示的各异步任务的任务处理信息；第四获取装置，用于获取预设可视化任务监控页面；第二显示装置，用于通过预设可视化任务监控页面显示各异步任务的任务处理信息。
在其中一个实施例中，Celery系统包括多个工作节点，各工作节点用于对分配到的任务进行任务处理。任务监控系统30可以包括(图10未示出)：第五获取装置，用于当监测到Tornado框架的Web服务器向Celery系统下发目标异步任务时，确认目标异步任务对应的目标工作节点，获取目标工作节点处理目标异步任务的工作状态信息；第六获取装置，用于获取预设可视化节点监控页面；第三显示装置，用于通过可视化预设节点监控页面显示目标工作节点的工作状态信息。
在其中一个实施例中，任务监控系统30可以包括(图10未示出)：第七获取装置，用于获取目标工作节点处理目标异步任务的任务处理信息；第八获取装置，用于获取预设可视化节点监控页面；第四显示装置，用于通过预设可视化节点监控页面显示目标工作节点处理目标异步任务的任务处理信息。
在其中一个实施例中，任务监控系统30可以包括(图10未示出)：确定装置，用于确定多个工作节点的第一操作系统和第二操作系统；第一设置装置，用于根据分布式任务队列Celery机制对第一操作系统设置第一操作命令，以使得第一操作系统对应的第一工作节点根据第一操作命令执行任务处理；第二设置装置，用于根据分布式任务队列Celery机制对第二操作系统设置第二操作命令，以使得第二操作系统对应的第二工作节点根据第二操作命令执行任务处理。
在其中一个实施例中，Celery系统20可以包括(图10未示出)：分配装置，用于根据分布式任务队列Celery机制采用公平调度算法对多异步任务进行任务分配；任务处理装置，用于根据分布式任务队列Celery机制采用生产者-消费者模式对分配后的任务进行任务传输，以对传输后的任务进行任务处理。
关于任务分发处理系统的具体限定可以参见上文中对于任务分发处理方法的限定，在此不再赘述。上述任务分发处理系统中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是任务控制平台206中的服务器，其内部结构图可以如图11所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部其他服务器连接，以与外部服务器进行数据交互。该计算机程序被处理器执行时以实现一种任务分发处理方法。
本领域技术人员可以理解，图11中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以下步骤：通过Tornado框架的Web服务器接收到任务请求时，根据任务请求使用Tornado框架的Web服务器生成多异步任务；使用Tornado框架的Web服务器将多异步任务下发到Celery系统；使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理，Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理；对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。
在其中一个实施例中，处理器执行计算机程序实现上述的对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控步骤时，具体实现以下步骤：获取Tornado框架的Web服务器生成的各异步任务；获取预设可视化任务发起页面，可视化任务发起页面中包含有任务字段信息；通过预设可视化任务发起页面的任务字段信息显示Tornado框架的Web服务器生成的各异步任务；处理器执行计算机程序时还实现以下步骤：当通过可视化任务发起页面接收到任务发起指令时，使用Tornado框架的Web服务器将可视化任务发起页面中显示的各异步任务下发到Celery系统。
在其中一个实施例中，处理器执行计算机程序时还实现以下步骤：获取Celery系统对可视化任务发起页面中显示的各异步任务的任务处理信息；获取预设可视化任务监控页面；通过预设可视化任务监控页面显示各异步任务的任务处理信息。
在其中一个实施例中，Celery系统包括多个工作节点，各工作节点用于对分配到的任务进行任务处理。处理器执行计算机程序实现上述的对Celery系统的任务处理进行可视化任务监控步骤时，具体实现以下步骤：当监测到Tornado框架的Web服务器向Celery系统下发目标异步任务时，确认目标异步任务对应的目标工作节点，获取目标工作节点处理目标异步任务的工作状态信息；获取预设可视化节点监控页面；通过可视化预设节点监控页面显示目标工作节点的工作状态信息。
在其中一个实施例中，处理器执行计算机程序时还实现以下步骤：获取目标工作节点处理目标异步任务的任务处理信息；获取预设可视化节点监控页面；通过预设可视化节点监控页面显示目标工作节点处理目标异步任务的任务处理信息。
在其中一个实施例中，处理器执行计算机程序时还实现以下步骤：确定多个工作节点的第一操作系统和第二操作系统；根据分布式任务队列Celery机制对第一操作系统设置第一操作命令，以使得第一操作系统对应的第一工作节点根据第一操作命令执行任务处理；根据分布式任务队列Celery机制对第二操作系统设置第二操作命令，以使得第二操作系统对应的第二工作节点根据第二操作命令执行任务处理。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：通过Tornado框架的Web服务器接收到任务请求时，根据任务请求使用Tornado框架的Web服务器生成多异步任务；使用Tornado框架的Web服务器将多异步任务下发到Celery系统；使用Celery系统对多异步任务进行任务分配并对分配后的任务进行任务处理，Celery系统使用分布式任务队列Celery机制对多异步任务进行任务分配以及对分配后的任务进行任务处理；对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控，以及对Celery系统的任务处理进行可视化任务监控。
在其中一个实施例中，计算机程序被处理器执行实现上述的对Tornado框架的Web服务器生成的多异步任务进行可视化任务监控步骤时，具体实现以下步骤：获取Tornado框架的Web服务器生成的各异步任务；获取预设可视化任务发起页面，可视化任务发起页面中包含有任务字段信息；通过预设可视化任务发起页面的任务字段信息显示Tornado框架的Web服务器生成的各异步任务；计算机程序被处理器执行时还实现以下步骤：当通过可视化任务发起页面接收到任务发起指令时，使用Tornado框架的Web服务器将可视化任务发起页面中显示的各异步任务下发到Celery系统。
在其中一个实施例中，计算机程序被处理器执行时还实现以下步骤：获取Celery系统对可视化任务发起页面中显示的各异步任务的任务处理信息；获取预设可视化任务监控页面；通过预设可视化任务监控页面显示各异步任务的任务处理信息。
在其中一个实施例中，Celery系统包括多个工作节点，各工作节点用于对分配到的任务进行任务处理。计算机程序被处理器执行时实现上述的对Celery系统的任务处理进行可视化任务监控步骤时，具体实现以下步骤：当监测到Tornado框架的Web服务器向Celery系统下发目标异步任务时，确认目标异步任务对应的目标工作节点，获取目标工作节点处理目标异步任务的工作状态信息；获取预设可视化节点监控页面；通过可视化预设节点监控页面显示目标工作节点的工作状态信息。
在其中一个实施例中，计算机程序被处理器执行时还实现以下步骤：获取目标工作节点处理目标异步任务的任务处理信息；获取预设可视化节点监控页面；通过预设可视化节点监控页面显示目标工作节点处理目标异步任务的任务处理信息。
在其中一个实施例中，计算机程序被处理器执行时还实现以下步骤：确定多个工作节点的第一操作系统和第二操作系统；根据分布式任务队列Celery机制对第一操作系统设置第一操作命令，以使得第一操作系统对应的第一工作节点根据第一操作命令执行任务处理；根据分布式任务队列Celery机制对第二操作系统设置第二操作命令，以使得第二操作系统对应的第二工作节点根据第二操作命令执行任务处理。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (9)
1.一种任务分发处理方法，所述方法包括：
通过Tornado框架的Web服务器接收到任务请求时，根据所述任务请求使用所述Tornado框架的Web服务器生成多异步任务；
使用所述Tornado框架的Web服务器将所述多异步任务下发到Celery系统；
使用所述Celery系统对所述多异步任务进行任务分配并对分配后的任务进行任务处理，所述Celery系统使用分布式任务队列Celery机制对所述多异步任务进行任务分配以及对分配后的任务进行任务处理；
对所述Tornado框架的Web服务器生成的所述多异步任务进行可视化任务监控，以及对所述Celery系统的任务处理进行可视化任务监控；
其中，所述对所述Tornado框架的Web服务器生成的所述多异步任务进行可视化任务监控，包括：
获取所述Tornado框架的Web服务器生成的各异步任务；
获取预设可视化任务发起页面，所述可视化任务发起页面中包含有任务字段信息；
通过所述预设可视化任务发起页面的任务字段信息显示所述Tornado框架的Web服务器生成的各异步任务；
所述方法还包括：
当通过所述可视化任务发起页面接收到任务发起指令时，使用所述Tornado框架的Web服务器将所述可视化任务发起页面中显示的各异步任务下发到所述Celery系统。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取所述Celery系统对所述可视化任务发起页面中显示的各异步任务的任务处理信息；
获取预设可视化任务监控页面；
通过所述预设可视化任务监控页面显示所述各异步任务的任务处理信息。
3.根据权利要求1所述的方法，其特征在于，所述Celery系统包括多个工作节点，各工作节点用于对分配到的任务进行任务处理，所述对所述Celery系统的任务处理进行可视化任务监控，包括：
当监测到所述Tornado框架的Web服务器向所述Celery系统下发目标异步任务时，确认所述目标异步任务对应的目标工作节点，获取所述目标工作节点处理所述目标异步任务的工作状态信息；
获取预设可视化节点监控页面；
通过所述预设可视化节点监控页面显示所述目标工作节点的工作状态信息。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
获取所述目标工作节点处理所述目标异步任务的任务处理信息；
获取预设可视化节点监控页面；
通过所述预设可视化节点监控页面显示所述目标工作节点处理所述目标异步任务的任务处理信息。
5.根据权利要求3所述的方法，其特征在于，所述方法还包括：
确定所述多个工作节点的第一操作系统和第二操作系统；
根据所述分布式任务队列Celery机制对所述第一操作系统设置第一操作命令，以使得所述第一操作系统对应的第一工作节点根据所述第一操作命令执行任务处理；
根据所述分布式任务队列Celery机制对所述第二操作系统设置第二操作命令，以使得所述第二操作系统对应的第二工作节点根据所述第二操作命令执行任务处理。
6.根据权利要求1所述的方法，其特征在于，所述Celery系统使用分布式任务队列Celery机制对所述多异步任务进行任务分配以及对分配后的任务进行任务处理，包括：
所述Celery系统根据所述分布式任务队列Celery机制采用公平调度算法对所述多异步任务进行任务分配；
所述Celery系统根据所述分布式任务队列Celery机制采用生产者-消费者模式对分配后的任务进行任务传输，以对传输后的任务进行任务处理。
7.一种任务分发处理系统，其特征在于，所述系统包括：
Tornado框架的Web服务器，用于接收到任务请求时根据所述任务请求生成多异步任务，将所述多异步任务下发到Celery系统；
所述Celery系统，用于使用分布式任务队列Celery机制对所述多异步任务进行任务分配以及对分配后的任务进行任务处理；
任务监控系统，用于对所述Tornado框架的Web服务器生成的所述多异步任务进行可视化任务监控，以及对所述Celery系统的任务处理进行可视化任务监控；
其中，所述对所述Tornado框架的Web服务器生成的所述多异步任务进行可视化任务监控，包括：
获取所述Tornado框架的Web服务器生成的各异步任务；
获取预设可视化任务发起页面，所述可视化任务发起页面中包含有任务字段信息；
通过所述预设可视化任务发起页面的任务字段信息显示所述Tornado框架的Web服务器生成的各异步任务；
任务监控系统还用于当通过所述可视化任务发起页面接收到任务发起指令时，使用所述Tornado框架的Web服务器将所述可视化任务发起页面中显示的各异步任务下发到所述Celery系统。
8.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述方法的步骤。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911400288.0A CN111182061B (zh) | 2019-12-30 | 2019-12-30 | 任务分发处理方法、系统、计算机设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911400288.0A CN111182061B (zh) | 2019-12-30 | 2019-12-30 | 任务分发处理方法、系统、计算机设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111182061A CN111182061A (zh) | 2020-05-19 |
| CN111182061B true CN111182061B (zh) | 2023-04-14 |
Family
ID=70623330
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911400288.0A Active CN111182061B (zh) | 2019-12-30 | 2019-12-30 | 任务分发处理方法、系统、计算机设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111182061B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114095571A (zh) * | 2020-07-30 | 2022-02-25 | 中移(苏州)软件技术有限公司 | 数据处理方法、数据服务总线、终端和存储介质 |
| CN111813530B (zh) * | 2020-08-12 | 2024-04-19 | 中国工商银行股份有限公司 | 数据处理的方法、装置、计算设备和介质 |
| CN112202858B (zh) * | 2020-09-22 | 2022-06-17 | 苏宁消费金融有限公司 | 基于celery分布式调度框架的jenkins集群管理方法和系统 |
| CN112148455B (zh) * | 2020-09-29 | 2021-07-27 | 星环信息科技(上海)股份有限公司 | 一种任务处理方法、设备及介质 |
| CN113010306A (zh) * | 2021-02-24 | 2021-06-22 | 金蝶软件（中国）有限公司 | 业务数据处理方法、装置、计算机设备和存储介质 |
| CN113626188B (zh) * | 2021-08-02 | 2024-09-20 | 北京金山云网络技术有限公司 | 任务推送方法、装置、计算机设备和存储介质 |
| CN115357400B (zh) * | 2022-10-17 | 2023-02-03 | 成都华栖云科技有限公司 | 一种基于Kubernetes录播厂商的资源入库方法及系统 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109656782A (zh) * | 2018-12-24 | 2019-04-19 | 成都四方伟业软件股份有限公司 | 可视化调度监控方法、装置及服务器 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107688496B (zh) * | 2017-07-24 | 2020-12-04 | 深圳壹账通智能科技有限公司 | 任务分布式处理方法、装置、存储介质和服务器 |
| CN108829521B (zh) * | 2018-06-13 | 2022-05-13 | 平安科技（深圳）有限公司 | 任务处理方法、装置、计算机设备及存储介质 |
| CN110471777B (zh) * | 2019-06-27 | 2022-04-15 | 中国科学院计算机网络信息中心 | 一种Python-Web环境中多用户共享使用Spark集群的实现方法和系统 |
-
2019
- 2019-12-30 CN CN201911400288.0A patent/CN111182061B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109656782A (zh) * | 2018-12-24 | 2019-04-19 | 成都四方伟业软件股份有限公司 | 可视化调度监控方法、装置及服务器 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111182061A (zh) | 2020-05-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111182061B (zh) | 任务分发处理方法、系统、计算机设备和存储介质 | |
| CN108845884B (zh) | 物理资源分配方法、装置、计算机设备和存储介质 | |
| CN108632365B (zh) | 服务资源调整方法、相关装置和设备 | |
| CN107992362B (zh) | 自动化性能测试的方法、装置及系统 | |
| EP3335120B1 (en) | Method and system for resource scheduling | |
| US20100153482A1 (en) | Cloud-Based Automation of Resources | |
| CN110995617B (zh) | 基于mqtt的数据报送方法、装置、计算机设备和存储介质 | |
| CN108874549B (zh) | 资源复用方法、装置、终端和计算机可读存储介质 | |
| CN111104208A (zh) | 进程调度管理方法、装置、计算机设备及存储介质 | |
| CN111160873A (zh) | 基于分布式架构的跑批处理装置及方法 | |
| CN111209110A (zh) | 一种实现负载均衡的任务调度管理方法、系统和存储介质 | |
| CN110750343B (zh) | 集群系统定时任务调度控制方法及集群系统 | |
| CN112003895B (zh) | OpenStack云平台中云主机疏散方法、装置、设备及存储介质 | |
| CN113703997A (zh) | 集成多种消息代理的双向异步通信中间件系统及实现方法 | |
| CN103605575B (zh) | 一种Cloud Foundry平台应用调度系统及方法 | |
| CN108628677B (zh) | 分布式任务处理系统、方法和装置 | |
| CN115509756A (zh) | 多集群计算任务提交方法及相关装置、设备 | |
| CN107025134B (zh) | 数据库服务系统及兼容多种数据库的方法 | |
| CN113407340A (zh) | 业务控制系统、网关服务方法、业务请求转发方法及装置 | |
| CN110275777B (zh) | 一种资源调度系统 | |
| WO2015117458A1 (zh) | 故障信息收集方法、装置及系统 | |
| CN115964170A (zh) | 一种资源调度方法、装置、电子设备及存储介质 | |
| CN111556126B (zh) | 模型管理方法、系统、计算机设备和存储介质 | |
| CN110889539B (zh) | 基于云平台的现货市场出清案例组织方法、系统和装置 | |
| CN110737520B (zh) | 集群系统调度控制定时任务的方法及集群系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address | ||
| CP03 | Change of name, title or address |
Address after: No.1-1 Suning Avenue, Xuzhuang Software Park, Xuanwu District, Nanjing, Jiangsu Province, 210000 Patentee after: Jiangsu Suning cloud computing Co.,Ltd. Country or region after: China Address before: No.1-1 Suning Avenue, Xuzhuang Software Park, Xuanwu District, Nanjing, Jiangsu Province, 210000 Patentee before: Suning Cloud Computing Co.,Ltd. Country or region before: China |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20240612 Address after: Room 3104, Building A5, No. 3 Gutan Avenue, Economic Development Zone, Gaochun District, Nanjing City, Jiangsu Province, 210000 Patentee after: Jiangsu Biying Technology Co.,Ltd. Country or region after: China Address before: No.1-1 Suning Avenue, Xuzhuang Software Park, Xuanwu District, Nanjing, Jiangsu Province, 210000 Patentee before: Jiangsu Suning cloud computing Co.,Ltd. Country or region before: China |