CN110298586A - 一种批量计算作业调度方法和装置 - Google Patents
一种批量计算作业调度方法和装置 Download PDFInfo
- Publication number
- CN110298586A CN110298586A CN201910577604.5A CN201910577604A CN110298586A CN 110298586 A CN110298586 A CN 110298586A CN 201910577604 A CN201910577604 A CN 201910577604A CN 110298586 A CN110298586 A CN 110298586A
- Authority
- CN
- China
- Prior art keywords
- cloud server
- batch
- calculating
- server
- target cloud
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 238000012545 processing Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 12
- 230000006854 communication Effects 0.000 description 7
- 239000003795 chemical substances by application Substances 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012905 input function Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 108090000623 proteins and genes Proteins 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06311—Scheduling, planning or task assignment for a person or group
Landscapes
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Operations Research (AREA)
- Game Theory and Decision Science (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Educational Administration (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请实施例公开了一种批量计算作业调度方法和装置,该方法包括:获取待计算的批量计算作业;根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。可见,该方法通过结合多个来源的云服务器,这样,在为批量计算作业确定目标云服务器时能够保证计算资源的充足,进而避免了由计算资源不足所导致的影响批量计算作业进度等问题。
Description
技术领域
本申请涉及数据处理领域,特别是涉及一种批量计算作业调度方法和装置。
背景技术
由于批量计算作业通常具有较大的计算量,因此,一般应用计算环境服务器集群来对其进行离线计算。其中,批量计算作业通常包括多个任务,如基因数据分析、动画渲染、大数据计算、视频转码等任务;计算环境服务器集群包括多个云服务器。
目前,当用户需要进行批量计算作业的计算时,只能应用一种来源的云服务器来创建计算环境服务器集群,从而基于创建的计算环境服务器集群来进行批量计算作业的计算。如此,当该种来源的云服务器资源不足时,将影响批量计算作业的计算进度,甚至导致批量计算作业的任务中断等问题。
发明内容
为了解决上述技术问题,本申请提供了一种批量计算作业调度方法和装置,能够保证计算资源的充足,进而避免了由计算资源不足所导致的影响批量计算作业进度等问题。
本申请实施例公开了如下技术方案:
第一方面,本申请实施例提供了一种批量计算作业调度方法,所述方法包括:
获取待计算的批量计算作业;
根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;
根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
第二方面,本申请实施例提供了一种批量计算作业调度装置,所述装置包括获取单元、确定单元和创建单元:
所述获取单元,用于获取待计算的批量计算作业;
所述确定单元,用于根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;
所述创建单元,用于根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
第三方面,本申请实施例提供了一种用于批量计算作业调度的设备,所述设备包括处理器以及存储器:
所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;
所述处理器用于根据所述程序代码中的指令执行如第一方面所述的批量计算作业调度方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行如第一方面所述的批量计算作业调度方法。
由上述技术方案可以看出,在获取待计算的批量计算作业之后,可以根据该获取的批量计算作业,从多个来源的云服务器中确定目标云服务器。从而,根据确定出的目标云服务器来创建用于计算批量计算作业的计算环境服务器集群。可见,该方法通过结合多个来源的云服务器,这样,在为批量计算作业确定目标云服务器时能够保证计算资源的充足,进而避免了由计算资源不足所导致的影响批量计算作业进度等问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种批量计算作业调度方法的应用场景示意图;
图2为本申请实施例提供的一种批量计算作业调度方法流程图;
图3为本申请实施例提供的一种批量计算作业调度系统结构图;
图4为本申请实施例提供的一种多云资源管理模块的工作方法流程图;
图5a为本申请实施例提供的一种批量计算作业调度装置的结构示意图;
图5b为本申请实施例提供的一种批量计算作业调度装置的结构示意图;
图6为本申请实施例提供的一种用于批量计算作业调度设备的结构图;
图7为本申请实施例提供的一种服务器的结构图。
具体实施方式
下面结合附图,对本申请的实施例进行描述。
目前,用户仅能应用一种来源的云服务器来创建计算环境服务器集群,以用于批量计算作业的计算。如此,当该种来源的云服务器资源不足时,将影响批量计算作业的计算进度,甚至导致批量计算作业的任务中断等问题。
为此,本申请实施例提供了一种批量计算作业调度方法,其核心思想为:基于多个来源的云服务器,以为批量计算作业确定用于创建计算环境服务器集群的目标服务器,从而,通过结合多个不同来源的云服务器,可以保证计算资源的充足,进而避免了由计算资源不足所导致的影响批量计算作业进度等问题。
首先,对本申请实施例的应用场景进行介绍。该批量计算作业调度方法可以应用到服务器中,所述服务器可以是仅用于批量计算作业调度的专用服务器,所述服务器也可以是还包含其它数据处理功能的公用服务器,本申请实施例不做限定。
为了便于理解本申请的技术方案,下面结合实际应用场景,以服务器为例对本申请实施例提供的批量计算作业调度方法进行介绍。
参见图1,图1为本申请实施例提供的一种批量计算作业调度方法的应用场景示意图。该应用场景中包括服务器101,所述服务器中可以预先集成有多个不同来源的云服务器资源,其中,所述云服务器的来源可以指云服务器的控制方,比如,云服务器的来源可以是云服务器的供应商。
由此,服务器101可以获取待计算的批量计算作业。其中,所述待计算的批量计算作业可以是需要进行计算、且计算量较大的计算作业。
在获取待计算的批量计算作业之后,可以根据批量计算作业,从多个来源的云服务器中确定目标云服务器,从而,根据确定出的目标云服务器,创建用于计算该获取的批量计算作业的计算环境服务器集群。
可见,该方法通过结合多个来源的云服务器,这样,在为批量计算作业确定目标云服务器时能够保证计算资源的充足,进而避免了由计算资源不足所导致的影响批量计算作业进度等问题。
接下来,将结合附图对本申请实施例提供的批量计算作业调度方法进行介绍。
参见图2,该图示出了本申请实施例提供的一种批量计算作业调度方法流程图,如图2所示,所述方法可以包括:
S201:获取待计算的批量计算作业。
当用户需要计算批量计算作业时,可以发送待计算的批量计算作业。由此,可以接收用户发送的批量计算作业。
S202:根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器。
在本申请实施例中,可以预先集成有多个不同来源的云服务器。其中,所述云服务器的来源可以是云服务器的控制方。比如云服务器A的来源可以是云服务器提供商B。
在接收到待计算的批量计算作业后,可以根据该批量计算作业,从集成的多个来源的云服务器中确定出目标云服务器。这里所述的目标云服务器可以是为所述批量计算作业创建计算环境服务器集群所需的云服务器。
需要说明,确定出的所述目标服务器可以是一个云服务器,也可以是多个云服务器。
S203:根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
由此,可以根据确定的目标云服务器,创建用于计算批量计算作业的计算环境服务器集群。
由上述技术方案可以看出,在获取待计算的批量计算作业之后,可以根据该获取的批量计算作业,从多个来源的云服务器中确定目标云服务器。从而,根据确定出的目标云服务器来创建用于计算批量计算作业的计算环境服务器集群。可见,该方法通过结合多个来源的云服务器,这样,在为批量计算作业确定目标云服务器时能够保证计算资源的充足,进而避免了由计算资源不足所导致的影响批量计算作业进度等问题。
针对于用于计算批量计算作业的计算环境服务器集群,其中的云服务器通常为公有云服务器。其中,所述公有云服务器可以是云服务提供商为用户提供的云服务器。基于此,在一种可能的实现方式中,所述多个来源的云服务器还可以包括私有云服务器,其中,所述私有云服务器可以是提供给用户单独使用的云服务器,所述私有云服务器可以由用户自身构建,也可以由云服务器供应商构建。如此,进一步保证了充足的可使用云服务器资源。
当所述多个来源的云服务器中包括私有云服务器的情况下,针对于S202,即根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器的方法,可以包括:
S301:在根据所述批量计算作业,从所述多个来源的云服务器中确定私有云服务器为目标云服务器之前,对所述私有云服务器进行认证。
可以理解,如果多个来源的云服务器中包括私有云服务器,在根据批量计算作业,从所述多个来源的云服务器中确定目标云服务器时,有可能从所述多个来源的云服务器中确定出私有云服务器作为目标云服务器。由此,在从所述多个来源的云服务器中确定私有云服务器作为目标云服务器时,可以对该私有云服务器进行认证,以保证该私有云服务器的安全性等性能。
S302:当所述私有云服务器通过认证后,确定所述私有云服务器为目标云服务器。
这样,在私有云服务器通过认证时才将其确定为目标云服务器,可以有效保证接下来S203中创建的计算环境服务器集群的稳定性和安全性。
可以理解的是,通过执行S203,可以创建出用于计算批量计算作业的计算环境服务器集群。基于此,在创建计算环境服务器集群后,在一种可能的实现方式中,所述方法还包括:
S401:通过所述计算环境服务器集群计算所述批量计算作业。
通过该方法,即可根据创建的计算环境服务器集群对用户的批量计算作业进行计算,从而完成用户的批量计算作业的计算。
在本申请实施例中,为了减小用户通过计算环境服务器集群计算批量计算作业的操作复杂性,在一种可能的实现方式中,针对于S401,即通过所述计算环境服务器集群计算所述批量计算作业的方法,可以包括:
S501:根据所述批量计算作业,生成所述计算环境服务器集群中不同来源的目标云服务器对应的应用程序编程接口API调用请求。
在本申请实施例中,可以预先集成所述多个来源(如多个不同供应商)的应用程序编程接口(Application Programming Interface,API)。
可以理解,所创建的计算环境服务器集群中可以包括不同来源的目标云服务器,这样,可以根据批量计算作业,相应的生成该计算环境服务器集群中不同来源的目标云服务器对应的API调用请求。
S502:当需要调用所述计算环境服务器集群中的目标云服务器时,根据所述目标云服务器对应的API调用请求调用所述目标云服务器。
由此,在通过计算环境服务器集群进行批量计算作业的计算的过程中,当需要调用该计算环境服务器中的任意一个目标云服务器时,可以根据该目标云服务器对应的API调用请求,来调用该目标云服务器。
通过该种方式,可以为用户屏蔽多个来源API的复杂性,简化了用户操作,使得用户仅需关注批量计算作业中的各个任务。
需要说明,本申请实施例不限定S202中根据批量计算作业,从多个来源的云服务器中确定出目标云服务器的方法,可以根据实际需要,选择适合的方法确定目标云服务器。
在一种可能的实现方式中,该S202中根据所述批量计算作业,从多个来源的云服务器中确定出目标云服务器的方法,可以包括:
S601:根据所述批量计算作业的目标条件,从所述多个来源的云服务器中确定出目标云服务器,其中,所述目标条件包括中央处理器CPU数量、内存数量或者云服务器数量中的一种或多种。
在本申请实施例中,批量计算作业可以对应有目标条件,其中,所述目标条件可以包括中央处理器(Central Processing Unit,CPU)数量、内存数量或者云服务器数量中的一种或多种。
基于此,可以根据批量计算作业的目标条件,从多个来源的云服务器中确定出目标服务器。
此外,针对于S202中根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器的方法,在一种可能的实现方式中,所述方法还包括:
S701:根据所述批量计算作业和云服务器的资源值,从所述多个来源的云服务器中确定目标云服务器,以使得确定出的所述目标云服务器对应的总资源值最低。
其中,所述云服务器的资源值比如可以是用户应用所述云服务器时需要付出的成本。在具体实现中,可以通过每个来源的价格查询接口来获取相应的云服务器的价格。
如此,可以根据所述批量计算作业和云服务器的资源值,从所述多个来源的云服务器中确定目标云服务器,以使得确定出的所述目标云服务器对应的总资源值最低。
可见,该方法在从多个来源的云服务器中确定目标云服务器时,除了将批量计算作业作为确定因素外,还可以将云服务器的资源值作为确定因素,从而,降低了用户计算批量计算作业的成本。
本申请实施例还提供了一种批量计算作业调度系统,参见图3,该图示出了本申请实施例提供的一种批量计算作业调度系统结构图。如图3所示,该批量计算作业调度系统可以包括API服务模块、多云资源管理模块、作业任务调度模块和批量计算程序(Agent)下载模块。
所述API服务模块可以用于接收用户提交的批量计算作业,该模块中集成有多个不同云服务器供应商对应的API,如此,其可以根据批量计算作业,生成计算环境服务器集群中不同来源的目标云服务器对应的API调用请求。
所述多云资源管理模块可以用于根据批量计算作业中的CPU数目、内存数目和云服务器数目,向多家云服务器供应商和私有云服务器查询满足CPU数量和内存数量要求的云服务器机型和价格,计算出成本最低的云服务器组合,其中,所述成本最低的云服务器组合中可以包括公有云服务器和私有云服务器(即目标云服务器),并以此创建出计算环境服务器集群,以及在完成批量计算作业后释放计算环境服务器集群中的云服务器。
所述作业任务调度模块可以用于将批量计算作业中的多个计算任务,调度到计算环境服务器集群中的空闲云服务器上执行,并记录任务执行结果。
所述批量计算Agent下载模块可以用于提供下载批量计算Agent的功能。其中,所述批量计算Agent可以是运行在计算环境服务器集群的云服务器中的程序,以用于执行用户提交的计算作业任务。
下面对所述批量计算作业调度系统的工作过程进行介绍。
如图3所示,当用户需要进行批量计算作业时,可以将所述批量计算作业提交至所述批量计算作业调度系统中。
然后,API服务模块可以在接收到所述批量计算作业后,将其存入数据库中。
接着,所述多云资源管理模块可以向多家云服务器供应商查询云服务器的可用数量和对应的成本。
接下来,所述多云资源管理模块可以根据云服务器的成本和批量计算作业的目标条件,从一家或多家供应商中确定目标云服务器。其中,所述批量计算作业的目标条件可以包括中央处理器CPU数量、内存数量或者云服务器数量中的一种或多种。可以理解,所述目标云服务器中可以包括公有云服务器或私有云服务器。
从而,根据确定的目标云服务器,创建计算环境服务器集群。
在创建计算环境服务器集群后,可以为其中的每个目标云服务器从所述批量计算Agent下载模块中下载批量计算Agent并进行安装。
然后,所述多云资源管理模块可以将与计算环境服务器集群相关的信息保存至数据库中。
接着,所述作业任务调度模块可以从数据库中读取批量计算作业,并对所述批量计算作业中的各任务进行调度,以及将这些任务相应的分配到计算环境服务器集群的空闲云服务器上执行。
最后,当完成对批量计算作业的计算时,所述多云资源管理模块可以释放所述计算环境服务器集群中的云服务器。
接下来,对批量计算作业调度系统中多云资源管理模块的工作方法进行详细介绍。参见图4,该图示出了本申请实施例提供的一种多云资源管理模块的工作方法流程图。
如图4所示,可以根据批量计算作业的CPU数量和内存数量,向多家云服务器供应商查询云服务器的机型和对应的价格信息。然后,可以根据如下条件,选择满足该条件的云服务器机型:所述条件为云服务器机型的CPU数量和内存数量大于或等于批量计算作业中的CPU数量和内存数量。接着,根据上一步骤中选择的云服务器机型和对应的价格、以及批量计算作业中指定的云服务器数量,计算成本最低的云服务器组合(即目标云服务器)。接下来,根据上一步骤中的成本最低的目标云服务器,创建计算环境服务器集群。从而,通过创建的计算环境服务器集群进行批量计算作业的计算。最后,在所述计算环境服务器集群完成批量计算作业的计算后,即可以释放所述计算环境服务器集群中的云服务器。
基于前述实施例提供的一种批量计算作业调度方法,本申请实施例还提供一种批量计算作业调度装置,参见图5a,该图示出了本申请实施例提供的一种批量计算作业调度装置的结构示意图,所述装置包括获取单元501、确定单元502和创建单元503:
所述获取单元501,用于获取待计算的批量计算作业;
所述确定单元502,用于根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;
所述创建单元503,用于根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
可选的,所述多个来源的云服务器中包括私有云服务器。
可选的,所述确定单元502,具体用于:
在根据所述批量计算作业,从所述多个来源的云服务器中确定私有云服务器为目标云服务器之前,对所述私有云服务器进行认证;
当所述私有云服务器通过认证后,确定所述私有云服务器为目标云服务器。
可选的,参见图5b,该图示出了本申请实施例提供的一种批量计算作业调度装置的结构示意图,所述装置还包括计算单元504,所述计算单元504,用于:
根据所述批量计算作业,生成所述计算环境服务器集群中不同来源的目标云服务器对应的应用程序编程接口API调用请求;
当需要调用所述计算环境服务器集群中的目标云服务器时,根据所述目标云服务器对应的API调用请求调用所述目标云服务器。
可选的,所述确定单元502,还具体用于:
根据所述批量计算作业的目标条件,从所述多个来源的云服务器中确定出目标云服务器,其中,所述目标条件包括中央处理器CPU数量、内存数量或者云服务器数量中的一种或多种。
可选的,所述确定单元502,还具体用于:
根据所述批量计算作业和云服务器的资源值,从所述多个来源的云服务器中确定目标云服务器,以使得确定出的所述目标云服务器对应的总资源值最低。
由上述技术方案可以看出,在获取待计算的批量计算作业之后,可以根据该获取的批量计算作业,从多个来源的云服务器中确定目标云服务器。从而,根据确定出的目标云服务器来创建用于计算批量计算作业的计算环境服务器集群。可见,该方法通过结合多个来源的云服务器,这样,在为批量计算作业确定目标云服务器时能够保证计算资源的充足,进而避免了由计算资源不足所导致的影响批量计算作业进度等问题。
本申请实施例还提供了一种用于批量计算作业调度的设备,下面结合附图对用于批量计算作业调度的设备进行介绍。请参见图6所示,本申请实施例提供了一种用于批量计算作业调度设备600,该设备600还可以是终端设备,该终端设备可以为包括手机、平板电脑、个人数字助理(Personal Digital Assistant,简称PDA)、销售终端(Point of Sales,简称POS)、车载电脑等任意智能终端,以终端设备为手机为例:
图6示出的是与本申请实施例提供的终端设备相关的手机的部分结构的框图。参考图6,手机包括:射频(Radio Frequency,简称RF)电路610、存储器620、输入单元630、显示单元640、传感器650、音频电路660、无线保真(wireless fidelity,简称WiFi)模块670、处理器680、以及电源690等部件。本领域技术人员可以理解,图6中示出的手机结构并不构成对手机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图6对手机的各个构成部件进行具体的介绍:
RF电路610可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,给处理器680处理;另外,将设计上行的数据发送给基站。通常,RF电路610包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low NoiseAmplifier,简称LNA)、双工器等。此外,RF电路610还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(Global System of Mobile communication,简称GSM)、通用分组无线服务(GeneralPacket Radio Service,简称GPRS)、码分多址(Code Division Multiple Access,简称CDMA)、宽带码分多址(Wideband Code Division Multiple Access,简称WCDMA)、长期演进(Long Term Evolution,简称LTE)、电子邮件、短消息服务(Short Messaging Service,简称SMS)等。
存储器620可用于存储软件程序以及模块,处理器680通过运行存储在存储器620的软件程序以及模块,从而执行手机的各种功能应用以及数据处理。存储器620可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器620可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元630可用于接收输入的数字或字符信息,以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地,输入单元630可包括触控面板631以及其他输入设备632。触控面板631,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板631上或在触控面板631附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板631可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器680,并能接收处理器680发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板631。除了触控面板631,输入单元630还可以包括其他输入设备632。具体地,其他输入设备632可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元640可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元640可包括显示面板641,可选的,可以采用液晶显示器(Liquid CrystalDisplay,简称LCD)、有机发光二极管(Organic Light-Emitting Diode,简称OLED)等形式来配置显示面板641。进一步的,触控面板631可覆盖显示面板641,当触控面板631检测到在其上或附近的触摸操作后,传送给处理器680以确定触摸事件的类型,随后处理器680根据触摸事件的类型在显示面板641上提供相应的视觉输出。虽然在图6中,触控面板631与显示面板641是作为两个独立的部件来实现手机的输入和输入功能,但是在某些实施例中,可以将触控面板631与显示面板641集成而实现手机的输入和输出功能。
手机还可包括至少一种传感器650,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板641的亮度,接近传感器可在手机移动到耳边时,关闭显示面板641和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路660、扬声器661,传声器662可提供用户与手机之间的音频接口。音频电路760可将接收到的音频数据转换后的电信号,传输到扬声器661,由扬声器661转换为声音信号输出;另一方面,传声器662将收集的声音信号转换为电信号,由音频电路660接收后转换为音频数据,再将音频数据输出处理器680处理后,经RF电路610以发送给比如另一手机,或者将音频数据输出至存储器620以便进一步处理。
WiFi属于短距离无线传输技术,手机通过WiFi模块670可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图6示出了WiFi模块670,但是可以理解的是,其并不属于手机的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器680是手机的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器620内的软件程序和/或模块,以及调用存储在存储器620内的数据,执行手机的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器680可包括一个或多个处理单元;优选的,处理器680可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器680中。
手机还包括给各个部件供电的电源690(比如电池),优选的,电源可以通过电源管理系统与处理器680逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管未示出,手机还可以包括摄像头、蓝牙模块等,在此不再赘述。
在本实施例中,该终端设备所包括的处理器680还具有以下功能:
获取待计算的批量计算作业;
根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;
根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
本申请实施例提供的用于批量计算作业调度设备可以是服务器,请参见图7所示,图7为本申请实施例提供的服务器700的结构图,服务器700可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器(Central Processing Units,简称CPU)722(例如,一个或一个以上处理器)和存储器732,一个或一个以上存储应用程序742或数据744的存储介质730(例如一个或一个以上海量存储设备)。其中,存储器732和存储介质730可以是短暂存储或持久存储。存储在存储介质730的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器722可以设置为与存储介质730通信,在服务器700上执行存储介质730中的一系列指令操作。
服务器700还可以包括一个或一个以上电源726,一个或一个以上有线或无线网络接口750,一个或一个以上输入输出接口758,和/或,一个或一个以上操作系统741,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
上述实施例中由服务器所执行的步骤可以基于该图7所示的服务器结构。
其中,CPU 722用于执行如下步骤:
获取待计算的批量计算作业;
根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;
根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应当理解,在本申请中,“至少一个(项)”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:只存在A,只存在B以及同时存在A和B三种情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,“a和b”,“a和c”,“b和c”,或“a和b和c”,其中a,b,c可以是单个,也可以是多个。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (10)
1.一种批量计算作业调度方法,其特征在于,所述方法包括:
获取待计算的批量计算作业;
根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;
根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
2.根据权利要求1所述的方法,其特征在于,所述多个来源的云服务器中包括私有云服务器。
3.根据权利要求2所述的方法,其特征在于,所述根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器,包括:
在根据所述批量计算作业,从所述多个来源的云服务器中确定私有云服务器为目标云服务器之前,对所述私有云服务器进行认证;
当所述私有云服务器通过认证后,确定所述私有云服务器为目标云服务器。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述批量计算作业,生成所述计算环境服务器集群中不同来源的目标云服务器对应的应用程序编程接口API调用请求;
当需要调用所述计算环境服务器集群中的目标云服务器时,根据所述目标云服务器对应的API调用请求调用所述目标云服务器。
5.根据权利要求1-4任意一项所述的方法,其特征在于,所述根据所述批量计算作业,从多个来源的云服务器中确定出目标云服务器,包括:
根据所述批量计算作业的目标条件,从所述多个来源的云服务器中确定出目标云服务器,其中,所述目标条件包括中央处理器CPU数量、内存数量或者云服务器数量中的一种或多种。
6.根据权利要求1-4任意一项所述的方法,其特征在于,所述根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器,包括:
根据所述批量计算作业和云服务器的资源值,从所述多个来源的云服务器中确定目标云服务器,以使得确定出的所述目标云服务器对应的总资源值最低。
7.一种批量计算作业调度装置,其特征在于,所述装置包括获取单元、确定单元和创建单元:
所述获取单元,用于获取待计算的批量计算作业;
所述确定单元,用于根据所述批量计算作业,从多个来源的云服务器中确定目标云服务器;
所述创建单元,用于根据所述目标云服务器,创建用于计算所述批量计算作业的计算环境服务器集群。
8.根据权利要求7所述的装置,其特征在于,所述多个来源的云服务器中包括私有云服务器。
9.根据权利要求8所述的装置,其特征在于,所述确定单元,具体用于:
在根据所述批量计算作业,从所述多个来源的云服务器中确定私有云服务器为目标云服务器之前,对所述私有云服务器进行认证;
当所述私有云服务器通过认证后,确定所述私有云服务器为目标云服务器。
10.根据权利要求7所述的装置,其特征在于,所述装置还包括计算单元,所述计算单元,用于:
根据所述批量计算作业,生成所述计算环境服务器集群中不同来源的目标云服务器对应的应用程序编程接口API调用请求;
当需要调用所述计算环境服务器集群中的目标云服务器时,根据所述目标云服务器对应的API调用请求调用所述目标云服务器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910577604.5A CN110298586A (zh) | 2019-06-28 | 2019-06-28 | 一种批量计算作业调度方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910577604.5A CN110298586A (zh) | 2019-06-28 | 2019-06-28 | 一种批量计算作业调度方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110298586A true CN110298586A (zh) | 2019-10-01 |
Family
ID=68029444
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910577604.5A Pending CN110298586A (zh) | 2019-06-28 | 2019-06-28 | 一种批量计算作业调度方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110298586A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114430411A (zh) * | 2021-12-30 | 2022-05-03 | 苏州浪潮智能科技有限公司 | 一种服务器标准作业程序批量下载方法及装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103036927A (zh) * | 2011-09-29 | 2013-04-10 | 中国电信股份有限公司 | 智能交通控制方法、装置与系统 |
CN107343045A (zh) * | 2017-07-04 | 2017-11-10 | 北京百度网讯科技有限公司 | 云计算系统及用于控制服务器的云计算方法和装置 |
CN108961080A (zh) * | 2018-06-29 | 2018-12-07 | 渤海人寿保险股份有限公司 | 保险业务分布式处理方法、装置、存储介质及终端 |
-
2019
- 2019-06-28 CN CN201910577604.5A patent/CN110298586A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103036927A (zh) * | 2011-09-29 | 2013-04-10 | 中国电信股份有限公司 | 智能交通控制方法、装置与系统 |
CN107343045A (zh) * | 2017-07-04 | 2017-11-10 | 北京百度网讯科技有限公司 | 云计算系统及用于控制服务器的云计算方法和装置 |
CN108961080A (zh) * | 2018-06-29 | 2018-12-07 | 渤海人寿保险股份有限公司 | 保险业务分布式处理方法、装置、存储介质及终端 |
Non-Patent Citations (1)
Title |
---|
申时凯等: ""基于云计算的大数据处理技术发展与应用"", 31 March 2019, 电子科技大学出版社, pages: 136 - 139 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114430411A (zh) * | 2021-12-30 | 2022-05-03 | 苏州浪潮智能科技有限公司 | 一种服务器标准作业程序批量下载方法及装置 |
CN114430411B (zh) * | 2021-12-30 | 2023-07-18 | 苏州浪潮智能科技有限公司 | 一种服务器标准作业程序批量下载方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104850434B (zh) | 多媒体资源下载方法及装置 | |
CN110555665B (zh) | 生产计划生成方法以及装置 | |
CN107204964B (zh) | 一种权限管理的方法、装置和系统 | |
CN111340587B (zh) | 一种虚拟商品管理方法以及相关装置 | |
CN111078556B (zh) | 应用测试方法及装置 | |
CN107766139B (zh) | 应用管理方法及装置 | |
CN107391198B (zh) | 任务调度方法和装置、计算机可读存储介质、移动终端 | |
CN105303427A (zh) | 物品交换方法和装置 | |
CN112540996B (zh) | 一种业务数据的校验方法、装置、电子设备及存储介质 | |
EP3105912B1 (en) | Application-based service providing method and system | |
CN109544071A (zh) | 物料管控方法、系统、电子设备及计算机可读存储介质 | |
US11882468B2 (en) | Traffic/rate counting method and related device | |
US20200125369A1 (en) | Method, device, and terminal for accelerating startup of application | |
CN107465646B (zh) | 一种应用下载方法、系统及相关设备 | |
CN107368998A (zh) | 日程管理方法及相关产品 | |
CN111359210B (zh) | 一种数据处理方法、装置、电子设备以及存储介质 | |
CN110298586A (zh) | 一种批量计算作业调度方法和装置 | |
WO2017206851A1 (zh) | 安装任务的分配方法及移动终端 | |
CN111367502A (zh) | 一种数值处理方法和装置 | |
CN107943687B (zh) | 一种设备共享方法、装置、服务器及存储介质 | |
CN110277097A (zh) | 数据处理方法及相关设备 | |
CN109286571A (zh) | 移动终端及应用程序限核及限网的方法、装置和存储装置 | |
CN106209601B (zh) | 状态更新消息的推送方法及装置 | |
CN109379394A (zh) | 一种监控网络请求的方法、装置及终端 | |
CN114430504A (zh) | 一种媒体内容的推荐方法以及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |