CN112929293A - 任务执行方法、装置、设备、平台及介质 - Google Patents
任务执行方法、装置、设备、平台及介质 Download PDFInfo
- Publication number
- CN112929293A CN112929293A CN201911237133.XA CN201911237133A CN112929293A CN 112929293 A CN112929293 A CN 112929293A CN 201911237133 A CN201911237133 A CN 201911237133A CN 112929293 A CN112929293 A CN 112929293A
- Authority
- CN
- China
- Prior art keywords
- task
- executed
- cloud network
- determining
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 74
- 238000012545 processing Methods 0.000 claims description 74
- 238000007781 pre-processing Methods 0.000 claims description 18
- 238000010586 diagram Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 206010006187 Breast cancer Diseases 0.000 description 5
- 208000026310 Breast neoplasm Diseases 0.000 description 5
- 238000012423 maintenance Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 238000000586 desensitisation Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000012550 audit Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 208000004396 mastitis Diseases 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
- G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/70—Admission control; Resource allocation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/70—Admission control; Resource allocation
- H04L47/80—Actions related to the user profile or the type of traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明公开一种基于混合云平台的任务执行方法、装置、设备、平台及介质。该方法包括:获取待执行任务和待执行任务的任务参数;根据任务参数,确定待执行任务的第一任务状态;根据第一任务状态,确定用于执行待执行任务的云网络;以及将待执行任务添加到确定出的云网络的待执行队列中。该方法能够能够合理利用资源、调度任务。
Description
技术领域
本发明涉及计算机技术领域,具体而言,涉及一种基于混合云平台的任务执行方法、装置、设备、平台及介质。
背景技术
用户在使用医疗数据的时候,往往涉及到多家私有云数据的使用。编写相关程序分别在不同的私有云处理数据,并将结果取回、汇总,得到最终的结果。各个私有云需要接收任务、执行任务,无法从全局角度进行合理的资源分配和任务调度;私有云需要进行流量控制、和用户进行交互等多项工作,导致私有云的运维压力大。
在所述背景技术部分公开的上述信息仅用于加强对本发明的背景的理解,因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本发明提供一种基于混合云平台的任务执行方法、装置、设备、平台及介质,能够合理利用资源、调度任务,降低运维压力。
本发明的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本发明的实践而习得。
根据本发明的一方面,提供一种基于混合云平台的任务执行方法,包括:获取待执行任务和待执行任务的任务参数;根据任务参数,确定待执行任务的第一任务状态;根据第一任务状态,确定用于执行待执行任务的云网络;以及将待执行任务添加到确定出的云网络的待执行队列中。
根据本发明的一实施方式,根据任务参数,确定待执行任务的第一任务状态包括:根据任务参数,对待执行任务进行预处理,获得待执行任务的预处理结果;以及根据预处理结果,确定待执行任务的第一任务状态。
根据本发明的一实施方式,根据第一任务状态,确定用于执行待执行任务的云网络包括:根据第一任务状态,确定是否需要将待执行任务分发至至少一个云网络;以及当确定需要将待执行任务分发至至少一个云网络时,根据任务参数,从至少一个云网络中确定用于执行待执行任务的云网络。
根据本发明的一实施方式,将所述待执行任务添加到确定出的所述云网络的待执行队列中之前,该方法还包括:判断云网络的处理流量是否超过流量阈值;以及当云网络的处理流量未超过流量阈值时,将所述待执行任务并发送给所述云网络。
根据本发明的一实施方式,上述方法还包括:接收云网络发送的对至少一个待执行任务的执行结果;根据至少一个待执行任务的任务参数,分别通过预设的至少一个插件对各执行结果进行处理,获得至少一个待执行任务的处理结果;根据各处理结果,确定至少一个待执行任务的第二任务状态;以及根据各第二任务状态,确定是否需要继续对各处理结果进行处理。
根据本发明的一实施方式,根据任务参数,对待执行任务进行预处理包括:根据任务参数,通过预设的至少一个插件对待执行任务进行预处理。
根据本发明的另一方面,提供一种基于混合云平台的任务执行装置,包括:任务获取模块,用于获取待执行任务和待执行任务的任务参数;状态确定模块,用于根据任务参数,确定待执行任务的第一任务状态;云网络确定模块,用于根据第一任务状态,确定用于执行待执行任务的云网络;以及任务添加模块,用于将待执行任务添加到确定出的云网络的待执行队列中。
根据本发明的再一方面,提供一种云网络设备,包括:至少一台服务器;所述至少一台服务器包括:存储器、处理器及存储在所述存储器中并可在所述处理器中运行的可执行指令,所述处理器执行所述可执行指令时实现如上述任一项所述的方法。
根据本发明的再一方面,提供一种混合云平台,包括:由至少一台第一服务器组成的第一云网络;以及由至少一台第二服务器组成的第二云网络;其中,所述至少一个第一服务器包括:存储器、处理器及存储在所述存储器中并可在所述处理器中运行的可执行指令,所述处理器执行所述可执行指令时实现如上述任一项所述的方法。
根据本发明的再一方面,提供一种计算机可读存储介质,其上存储有计算机可执行指令,所述可执行指令被处理器执行时实现如上述任一项所述的方法。
根据本发明实施例提供的基于混合云平台的任务执行方法,获取待执行任务,根据确定出的待执行任务的第一任务状态,确定用于执行任务的云网络,并将待执行任务添加到确定出的云网络的待执行队列中。该方法通过任务状态确定用于执行任务的云网络,将任务分发给云网络,能够合理利用资源、调度任务,降低运维压力。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本发明。
附图说明
通过参照附图详细描述其示例实施例,本发明的上述和其它目标、特征及优点将变得更加显而易见。
图1是根据一示例性实施方式示出的一种混合云平台的示意图。
图2是根据一示例性实施方式示出的一种基于混合云平台的任务执行方法的流程图。
图3是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
图4是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
图5是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
图6是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
图7是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
图8是根据一示例性实施方式示出的一种基于混合云平台的任务执行装置的框图。
图9是根据一示例性实施方式示出的一种服务器的结构示意图。
图10是根据一示例性实施方式示出的一种计算机可读存储介质的示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本发明将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。附图仅为本发明的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。
此外,所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本发明的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本发明的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知结构、方法、装置、实现或者操作以避免喧宾夺主而使得本发明的各方面变得模糊。
此外,在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。
图1是根据一示例性实施方式示出的一种混合云平台的示意图。
如图1所示,混合云平台包括:第一云网络1、第二云网络2和客户端5。其中,客户端5与第一云网络1连接,可以实现数据的交互;第一云网络1和第二云网络2连接,可以实现数据的交互;连接方式可以是有线连接,也可以是无线连接,本发明对此不做限制。第一云网络1例如可以是公有云网络,包括至少一个第一服务器3;第二云网络例如可以是私有云网络,包括至少一个第二服务器4。第一云网络1从客户端5获取待执行任务和待执行任务的任务参数,第一云网络1将待执行任务分发到至少一个第二云网络2,第二云网络2对待执行任务进行处理,并向第一云网络1返回执行结果,第一云网络1接收执行结果并保存。本领域技术人员可以理解的是,在实际应用中可以有多个第一云网络1、多个第二云网络2和多个客户端5,本发明对此不做限制。
图2是根据一示例性实施方式示出的一种基于混合云平台的任务执行方法的流程图。
参考图2,基于混合云平台的任务执行方法10包括:
在步骤S102中,获取待执行任务和待执行任务的任务参数。
例如可以基于混合云平台中的第一云网络获取待执行任务和待执行任务的任务参数。
第一云网络例如可以为图1所示混合云平台中的第一云网络1。在一些实施例中,第一云网络1为公有云网络。
公有云网络例如可以是部署在公网上的机器集群和软件环境,负责对私有云的管理控制和结果数据的存储。
在步骤S104中,根据任务参数,确定待执行任务的第一任务状态。
第一任务状态例如可以是继续处理任务、延迟处理任务及返回结果并结束处理任务。
在步骤S106中,根据第一任务状态,确定用于执行待执行任务的云网络。
本发明实施例中的云网络例如可以为图1所示混合云平台中的第二云网络2。在一些实施例中,第二云网络为私有云网络。
私有云网络例如可以是各个医院内部部署的机器集群和软件环境,保证医疗数据处理只在医院内部进行,保证医疗数据安全。
根据第一任务状态,确定出用于执行待执行任务的私有云网络,这样可以实现由公有网络统一调度,将任务分发给各个私有云网络,合理地利用和分配资源,提高执行任务的效率。
在步骤S108中,将待执行任务添加到确定出的云网络的待执行队列中。
将待执行任务添加到根据任务参数确定出的第二云网络的待执行队列中,等待被执行。
根据本发明实施例提供的基于混合云平台的任务执行方法,获取待执行任务,根据确定出的待执行任务的第一任务状态,确定用于执行任务的云网络,并将待执行任务添加到确定出的云网络的待执行队列中。该方法通过任务状态确定用于执行任务的云网络,将任务分发给云网络,能够合理利用资源、调度任务,降低运维压力。
应清楚地理解,本发明描述了如何形成和使用特定示例,但本发明的原理不限于这些示例的任何细节。相反,基于本发明公开的内容的教导,这些原理能够应用于许多其它实施方式。
图3是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
与图2所示的方法10不同之处在于,图3进一步提供了如何根据任务参数,确定待执行任务的第一任务状态,也即图3所示的方法,进一步提供了对图2中步骤S104的实施例。
参考图3,步骤S104包括:
在步骤S1042中,根据任务参数,对待执行任务进行预处理,获得待执行任务的预处理结果。
在一些实施例中,根据任务参数,通过预设的至少一个插件对待执行任务进行预处理。
数据处理插件是通用的、复用率高的数据处理模块,按照系统定义的输入、输出接口进行封装,并注册进系统,以供用户用调用的数据处理算法的集合。目的是实现系统功能的快速更改和扩充,实现数据处理算法的高复用率。例如:数据归一插件、数据结构化插件、数据脱敏插件,私有云结果合并插件等。用户任务可以根据自身需要、决定调用插件的种类和顺序。
可以通过数据处理插件对待执行任务进行预处理,例如之前已经存储过结果的任务可以无需再分配给后续的云网络进行处理,而是直接将之前的处理结果返回客户端。这样可以提高数据的复用率。
根据数据处理插件对待执行任务的预处理结果,可以决定任务状态。
对任务进行预处理,例如在预处理时发现,该任务之前已经存储过相应结果,则可以无需再分配给后续的云网络进行处理,而是直接将之前的处理结果返回客户端。
对任务进行预处理,例如可以对路径参数是否和数据版本匹配进行检查。当待执行任务使用新版数据时,应给出新版的数据路径。
当执行参数中有结构化查询语言(Structured Query Language,SQL)时,对任务进行预处理可以检查SQL语句是否符合语法要求。
对任务进行预处理,例如可以根据待执行任务的要求,对任务参数进行扩展。例如,待执行任务为筛选“乳腺癌”病人并希望把"乳腺癌"所有同义词、下位词病人全部纳入。参数补全插件可以调用词典数据将补充“双则乳腺癌”、“左乳腺癌”、“右乳腺癌”、“乳腺炎样癌”等参数。若待执行任务的原参数为各医院最新的数据版本,参数补全插件可以根据医院的不同获得各医院最新的数据版本进行参数替换。
对任务进行预处理,例如可以预估执行时间,提前预警。例如,根据待执行任务执行时涉及的医院,任务执行使用的数据集的大小等预估执行时间,需要长时间执行的任务提前预警,提醒操作人员对任务进行优化。
对任务进行预处理,例如可以根据执行人员的指令指定任务执行时间。
在步骤S1044中,根据预处理结果,确定待执行任务的第一任务状态。
第一任务状态例如可以是继续处理任务、延迟处理任务及返回结果并结束处理任务。
根据本发明实施例提供的基于混合云平台的任务执行方法,对待执行任务进行预处理,可以提高处理数据和处理任务的效率。
图4是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
与图2所示的方法10不同之处在于,图4进一步提供了如何根据第一任务状态,确定用于执行待执行任务的云网络,也即图4所示的方法,进一步提供了对图2中步骤S106的实施例。
参考图4,步骤S106包括:
在步骤S1062中,根据第一任务状态,确定是否需要将待执行任务分发至至少一个云网络。
当第一任务状态为继续处理任务或延迟处理任务时,确定需要将待执行任务分发至混合云平台中的至少一个云网络。
当第一任务状态为返回结果并结束处理任务时,确定不需要将待执行任务分发至混合云平台中的至少一个云网络。
在步骤S1064中,当确定需要将待执行任务分发至至少一个云网络时,根据任务参数,从至少一个云网络中确定用于执行待执行任务的云网络。
根据任务参数,确定出用于执行待执行任务的云网络,这样可以实现统一调度,将任务分发给各个云网络,合理地利用和分配资源,提高执行任务的效率。
图5是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
在如图2所示的方法10的基础上,图5所示的方法50还进一步包括以下步骤:
在步骤S502中,判断云网络的处理流量是否超过流量阈值。
根据云网络的待执行队列中的待执行任务,判断云网络的处理流量是否超过流量阈值。
在步骤S504中,当云网络的处理流量未超过流量阈值时,将待执行任务发送给云网络。
在一些实施例中,公有云网络与各私有云网络通过加密链接进行数据传输。
在公有云网络和各个私有云网络之间建立安全加密的通信信道,用户将任务先提交公有云,由公有云网络统一调度,将任务分发给各个私有云网络。
方法50与方法10中相同的步骤在此不再赘述。
图6是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
在如图2所示的方法10的基础上,图6所示的方法60还进一步包括以下步骤:
在步骤S602中,接收云网络发送的对至少一个待执行任务的执行结果。
私有云网络接收到待执行任务后,执行该任务,执行完成后,存储执行结果并通知公有云网络取回该执行结果。公有云网络接收私有云网络发送的该执行结果。
在一些实施例中,公有云网络分别接收各私有云网络定期发送的各待执行任务的执行状态信息。
私有云网络定期向公有云网络发送各待执行任务的执行状态信息,便于公有云网络对资源的调度和分配。
在步骤S604中,根据至少一个待执行任务的任务参数,分别通过预设的至少一个插件对各执行结果进行处理,获得至少一个待执行任务的处理结果。
根据待执行任务的任务参数,对执行结果进行二次处理,例如数据脱敏处理、数据结构化数量、数据归一处理、数据统计处理等。对执行结果进行二次处理还可以通过邮件将任务完成信息通知执行人。对数据进行数据处理后,方便后续工作中遇到相同或相似的待执行任务时可以直接使用,提高数据的复用率。
在步骤S606中,根据各处理结果,确定至少一个待执行任务的第二任务状态。
第二任务状态例如可以是继续处理任务、延迟处理任务及返回结果并结束处理任务。
在步骤S608中,根据各第二任务状态,确定是否需要继续对各处理结果进行处理。
当第二任务状态为继续处理任务或延迟处理任务时,确定需要继续对各处理结果进行处理。
当第二任务状态为返回结果并结束处理任务时,确定不需要继续对各处理结果进行处理。
在对各处理结果进行处理之后,存储任务处理结果,并发送到客户端,用户即可获得处理结果。
方法60与方法10中相同的步骤在此不再赘述。
图7是根据一示例性实施方式示出的另一种基于混合云平台的任务执行方法的流程图。
在如图2所示的方法10的步骤S102之前,图7所示的方法70还进一步包括以下步骤:
在步骤S702中,对登录混合云平台的用户进行权限验证。
公有云网络可以对用户的账号和密码进行管理,对用户按角色进行权限管理,用户进行权限验证登录公有云网络的系统。
在步骤S704中,接收通过权限验证的用户提交的待执行任务和任务参数以及希望执行待执行任务的云网络列表。
用户可以通过公有云网络的系统提交待执行任务、待执行的任务参数和希望执行待执行任务的私有云网络列表。
在步骤S706中,根据通过权限验证的用户的权限信息确定是否可以执行待执行任务。
公有云网络的系统可以审计待执行任务需要使用资源的权限,决定是否能执行该待执行任务。
方法70与方法10中相同的步骤在此不再赘述。
根据本发明实施例提供的基于混合云平台的任务执行方法,对用户进行权限验证,根据通过权限验证的用户的权限信息确定是否可以执行待执行任务,能够保证数据的安全性。
本领域技术人员可以理解实现上述实施方式的全部或部分步骤被实现为由CPU执行的计算机程序。在该计算机程序被CPU执行时,执行本发明提供的上述方法所限定的上述功能。所述的程序可以存储于一种计算机可读存储介质中,该存储介质可以是只读存储器,磁盘或光盘等。
此外,需要注意的是,上述附图仅是根据本发明示例性实施方式的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
下述为本发明装置实施例,可以用于执行本发明方法实施例。对于本发明装置实施例中未披露的细节,请参照本发明方法实施例。
图8是根据一示例性实施方式示出的一种基于混合云平台的任务执行装置的框图。
参考图8,基于混合云平台的任务执行装置的框图80包括:任务获取模块802、状态确定模块804、云网络确定模块806及任务添加模块808。
其中,任务获取模块802用于获取待执行任务和待执行任务的任务参数。
状态确定模块804用于根据任务参数,确定待执行任务的第一任务状态。
云网络确定模块806用于根据第一任务状态,确定用于执行待执行任务的云网络。
任务添加模块808用于将待执行任务添加到确定出的云网络的待执行队列中。
在一些实施例中,状态确定模块804包括预处理模块及任务状态确定模块,其中,预处理模块用于根据任务参数,对待执行任务进行预处理,获得待执行任务的预处理结果;任务状态确定模块用于根据预处理结果,确定待执行任务的第一任务状态。
在一些实施例中,云网络确定模块806包括状态判断模块及云网络选择模块,其中,状态判断模块用于根据第一任务状态,确定是否需要将待执行任务分发至至少一个云网络;云网络选择模块用于当确定需要将待执行任务分发至至少一个云网络时,根据任务参数,从至少一个云网络中确定用于执行待执行任务的云网络。
在一些实施例中,装置80还包括判断模块及任务发送模块,其中,判断模块用于判断云网络的处理流量是否超过流量阈值;任务发送模块用于当云网络的处理流量未超过流量阈值时,将待执行任务并发送给云网络。
在一些实施例中,装置80还包括结果接收模块、结果获得模块、第二状态确定模块及结果处理模块。其中,结果接收模块用于接收云网络发送的对至少一个待执行任务的执行结果;结果获得模块用于根据至少一个待执行任务的任务参数,分别通过预设的至少一个插件对各执行结果进行处理,获得至少一个待执行任务的处理结果;第二状态确定模块用于根据各处理结果,确定至少一个待执行任务的第二任务状态;结果处理模块用于根据各第二任务状态,确定是否需要继续对各处理结果进行处理。
根据本发明实施例提供的基于混合云平台的任务执行装置,获取待执行任务,根据确定出的待执行任务的第一任务状态,确定用于执行任务的云网络,并将待执行任务添加到确定出的云网络的待执行队列中。该装置通过任务状态确定用于执行任务的云网络,将任务分发给云网络,能够合理利用资源、调度任务,降低运维压力。
需要注意的是,上述附图中所示的框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
图9是根据一示例性实施方式示出的一种服务器的结构示意图。如图9所示的服务器如可以为组成图1所示混合云平台中第一云网络和/或第二云网络的服务器,用于执行上述方法实施例中第一云网络和/第二云网络的相关步骤。
参考图9,服务器900可以包括处理组件901、存储器902、电源组件903及通信接口904,这些部件可在总线906上通信。
处理组件901进一步包括一个或多个处理器。处理器可以是由中央处理器(CPU)、网络处理器(network processor,NP)、图形处理器(GPU)或CPU、NP与GPU的组合。处理器还可以进一步包括硬件芯片,例如可以是专用集成电路(ASIC)、可编程逻辑器件(PLD)或其组合。可编程逻辑器件例如可以是复杂可编程逻辑器件(CPLD)、现场可编程逻辑门阵列(FPGA)、通用阵列逻辑(GAL)或其组合。
由存储器902所代表的存储资源,用于存储可由处理组件601执行的指令,例如应用程序。存储器902可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
存储器902中存储的应用程序可以包括一个或一个以上的、每一个对应于一组指令的模块。
此外,当处理组件901包含的处理器为CPU时,处理组件901被配置为执行指令,以执行上述如图2-图7中所示的步骤。当处理组件901包含的处理器为FPGA、ASIC等硬件时,处理组件901无需存储器902存储指令,FPGA、ASIC等硬件处理器可以直接执行被写入其中的指令。
电源组件903被配置为执行服务器900的电源管理。
通信接口904被配置为将服务器900连接到网络,也即通过该接口使服务器900与其他设备进行通信。通信接口904可以为有线通信接口、无线通信接口或其组合。有线通信接口例如可以为以太网接口,以太网接口可以是光接口、电接口或其组合。无线通信接口例如可以为WLAN接口、蜂窝网络接口或其组合等。
服务器900可以操作基于存储在存储器902中的操作系统,例如WindowsServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等。
图10是根据一示例性实施方式示出的一种计算机可读存储介质的示意图。
参考图10所示,描述了根据本发明的实施方式的设置为实现上述方法的程序产品1000,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该计算机可读介质实现如图2-图7中所示的功能。
以上具体地示出和描述了本发明的示例性实施方式。应可理解的是,本发明不限于这里描述的详细结构、设置方式或实现方法;相反,本发明意图涵盖包含在所附权利要求的精神和范围内的各种修改和等效设置。
Claims (10)
1.一种基于混合云平台的任务执行方法,其特征在于,包括:
获取待执行任务和所述待执行任务的任务参数;
根据所述任务参数,确定所述待执行任务的第一任务状态;
根据所述第一任务状态,确定用于执行所述待执行任务的云网络;以及
将所述待执行任务添加到确定出的所述云网络的待执行队列中。
2.根据权利要求1的方法,其特征在于,根据所述任务参数,确定所述待执行任务的第一任务状态包括:
根据所述任务参数,对所述待执行任务进行预处理,获得所述待执行任务的预处理结果;以及
根据所述预处理结果,确定所述待执行任务的第一任务状态。
3.根据权利要求1的方法,其特征在于,根据所述第一任务状态,确定用于执行所述待执行任务的云网络包括:
根据所述第一任务状态,确定是否需要将所述待执行任务分发至至少一个云网络;以及
当确定需要将所述待执行任务分发至至少一个云网络时,根据所述任务参数,从至少一个云网络中确定用于执行待执行任务的云网络。
4.根据权利要求1的方法,其特征在于,将所述待执行任务添加到确定出的所述云网络的待执行队列中之前,该方法还包括:
判断所述云网络的处理流量是否超过流量阈值;以及
当所述云网络的处理流量未超过流量阈值时,将所述待执行任务发送给所述云网络。
5.根据权利要求1的方法,其特征在于,还包括:
接收所述云网络发送的对所述至少一个待执行任务的执行结果;
根据所述至少一个待执行任务的任务参数,分别通过预设的至少一个插件对各执行结果进行处理,获得所述至少一个待执行任务的处理结果;
根据各处理结果,确定所述至少一个待执行任务的第二任务状态;以及
根据各第二任务状态,确定是否需要继续对各处理结果进行处理。
6.根据权利要求2的方法,其特征在于,根据所述任务参数,对所述待执行任务进行预处理包括:根据所述任务参数,通过预设的至少一个插件对所述待执行任务进行预处理。
7.一种基于混合云平台的任务执行装置,其特征在于,包括:
任务获取模块,用于获取待执行任务和所述待执行任务的任务参数;
状态确定模块,用于根据所述任务参数,确定所述待执行任务的第一任务状态;
云网络确定模块,用于根据所述第一任务状态,确定用于执行所述待执行任务的云网络;以及
任务添加模块,用于将所述待执行任务添加到确定出的所述云网络的待执行队列中。
8.一种云网络设备,其特征在于,包括:至少一台服务器;所述至少一台服务器包括:存储器、处理器及存储在所述存储器中并可在所述处理器中运行的可执行指令,所述处理器执行所述可执行指令时实现如权利要求1-6任一项的方法。
9.一种混合云平台,其特征在于,包括:
由至少一台第一服务器组成的第一云网络;以及
由至少一台第二服务器组成的第二云网络;
其中,所述至少一个第一服务器包括:存储器、处理器及存储在所述存储器中并可在所述处理器中运行的可执行指令,所述处理器执行所述可执行指令时实现如权利要求1-6任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机可执行指令,其特征在于,所述可执行指令被处理器执行时实现如权利要求1-6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911237133.XA CN112929293A (zh) | 2019-12-05 | 2019-12-05 | 任务执行方法、装置、设备、平台及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911237133.XA CN112929293A (zh) | 2019-12-05 | 2019-12-05 | 任务执行方法、装置、设备、平台及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112929293A true CN112929293A (zh) | 2021-06-08 |
Family
ID=76161087
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911237133.XA Pending CN112929293A (zh) | 2019-12-05 | 2019-12-05 | 任务执行方法、装置、设备、平台及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112929293A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015030828A1 (en) * | 2013-08-30 | 2015-03-05 | Hewlett Packard Development Company, L.P. | Maintain a service on a cloud network based on a scale rule |
CN107018033A (zh) * | 2017-06-13 | 2017-08-04 | 上海赛特斯信息科技股份有限公司 | 自调节云管理系统 |
US20170242735A1 (en) * | 2016-02-22 | 2017-08-24 | International Business Machines Corporation | Balancing work of tasks at a sending node of a transaction server |
CN107749896A (zh) * | 2017-11-13 | 2018-03-02 | 天津开心生活科技有限公司 | 私有云并行控制方法及装置、存储介质及电子终端 |
CN108009023A (zh) * | 2017-11-29 | 2018-05-08 | 武汉理工大学 | 混合云中基于bp神经网络时间预测的任务调度方法 |
CN109547514A (zh) * | 2017-09-22 | 2019-03-29 | 北京金山云网络技术有限公司 | 一种任务处理方法、装置、电子设备及存储介质 |
CN109584974A (zh) * | 2018-11-09 | 2019-04-05 | 金色熊猫有限公司 | 医疗数据的生产方法、系统、电子设备、存储介质 |
CN109962862A (zh) * | 2017-12-25 | 2019-07-02 | 航天信息股份有限公司 | 云平台、基于云平台的动态带宽分配方法及装置 |
-
2019
- 2019-12-05 CN CN201911237133.XA patent/CN112929293A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015030828A1 (en) * | 2013-08-30 | 2015-03-05 | Hewlett Packard Development Company, L.P. | Maintain a service on a cloud network based on a scale rule |
US20170242735A1 (en) * | 2016-02-22 | 2017-08-24 | International Business Machines Corporation | Balancing work of tasks at a sending node of a transaction server |
CN107018033A (zh) * | 2017-06-13 | 2017-08-04 | 上海赛特斯信息科技股份有限公司 | 自调节云管理系统 |
CN109547514A (zh) * | 2017-09-22 | 2019-03-29 | 北京金山云网络技术有限公司 | 一种任务处理方法、装置、电子设备及存储介质 |
CN107749896A (zh) * | 2017-11-13 | 2018-03-02 | 天津开心生活科技有限公司 | 私有云并行控制方法及装置、存储介质及电子终端 |
CN108009023A (zh) * | 2017-11-29 | 2018-05-08 | 武汉理工大学 | 混合云中基于bp神经网络时间预测的任务调度方法 |
CN109962862A (zh) * | 2017-12-25 | 2019-07-02 | 航天信息股份有限公司 | 云平台、基于云平台的动态带宽分配方法及装置 |
CN109584974A (zh) * | 2018-11-09 | 2019-04-05 | 金色熊猫有限公司 | 医疗数据的生产方法、系统、电子设备、存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110489417B (zh) | 一种数据处理方法及相关设备 | |
US10558498B2 (en) | Method for scheduling data flow task and apparatus | |
CN110636130B (zh) | 延时消息处理方法、装置、计算机设备和存储介质 | |
WO2021129367A1 (zh) | 一种监控分布式存储系统的方法及装置 | |
CN108959292B (zh) | 一种数据上传方法、系统和计算机可读存储介质 | |
US8375200B2 (en) | Embedded device and file change notification method of the embedded device | |
CN108021400B (zh) | 数据处理方法及装置、计算机存储介质及设备 | |
US10102098B2 (en) | Method and system for recommending application parameter setting and system specification setting in distributed computation | |
CN111756644A (zh) | 热点限流方法、系统、设备及存储介质 | |
CN107204998B (zh) | 处理数据的方法和装置 | |
CN110019158A (zh) | 一种监控数据质量的方法和装置 | |
CN112422450A (zh) | 计算机设备、服务请求的流量控制方法及装置 | |
CN111580948A (zh) | 任务调度方法、装置及计算机设备 | |
CN112799908B (zh) | 基于边缘计算的智能终端安全监控方法、设备和介质 | |
CN113946816A (zh) | 基于云服务的鉴权方法、装置、电子设备和存储介质 | |
CN113626869A (zh) | 数据处理方法、系统、电子设备以及存储介质 | |
CN117950850A (zh) | 一种数据传输方法、装置、电子设备及计算机可读介质 | |
GB2607475A (en) | Generating a scaling plan for external systems during cloud tenant onboarding/offboarding | |
CN112929293A (zh) | 任务执行方法、装置、设备、平台及介质 | |
CN116226178A (zh) | 一种数据查询方法、装置、存储介质及电子装置 | |
CN116185578A (zh) | 计算任务的调度方法和计算任务的执行方法 | |
CN114564249B (zh) | 推荐调度引擎、推荐调度方法及计算机可读存储介质 | |
CN116166427A (zh) | 自动扩缩容方法、装置、设备及存储介质 | |
CN114281476A (zh) | Kubernetes云原生集群资源删除保护方法、装置、设备及存储介质 | |
CN113901076A (zh) | 数据同步方法、装置、服务器及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210608 |
|
RJ01 | Rejection of invention patent application after publication |