CN103458052B - 一种基于IaaS云平台的资源调度方法和装置 - Google Patents
一种基于IaaS云平台的资源调度方法和装置 Download PDFInfo
- Publication number
- CN103458052B CN103458052B CN201310421712.6A CN201310421712A CN103458052B CN 103458052 B CN103458052 B CN 103458052B CN 201310421712 A CN201310421712 A CN 201310421712A CN 103458052 B CN103458052 B CN 103458052B
- Authority
- CN
- China
- Prior art keywords
- resource
- state information
- idling
- demand
- acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Debugging And Monitoring (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明实施例公开了一种基于IaaS云平台的资源调度方法和装置，所述方法包括：获取预设时间内的监控数据；根据监控数据，获取资源状态表，资源状态表包括至少一项资源状态信息，资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系；读取任一待执行任务后，获取待执行任务的需求参数；在资源状态表中，获取满足需求参数的资源状态信息；确定资源状态信息对应的资源标识后，调度资源标识对应的资源，以便将资源分配给待执行任务。本发明利用基于时间的资源状态表为待执行任务分配资源，充分利用了每个时间段内的空闲资源，在有限资源情况下大幅提高了任务并发量，同时提高了系统资源的利用率。
Description
技术领域
本发明涉及数据处理技术领域，具体涉及一种基于IaaS云平台的资源调度方法和装置。
背景技术
IaaS云平台即基础设施即服务云计算平台，是提供基础设施服务的云平台，提供给消费者的服务是对基础设施的利用，如服务器或者存储资源。云计算的目的就是能够更充分的利用有限的物理资源，将物理资源虚拟化后按需分配给用户使用，而IaaS云平台提供的是基础设施的虚拟化，给用户直接提供虚拟资源，用户可以很容易根据自己业务状况增加或减少需要的虚拟资源。IaaS云平台，将有限的物理资源虚拟化后分配给用户使用，可以达到更充分利用物理资源。
但是，实际使用中发现分配给用户的虚拟资源有很多空闲，这和用户的业务有关系，其中用户的很多业务都是和时间有关系的，比如白天负载高，晚上负载很低，另外，一般用户是按照最大负载情况申请或购买资源的，这就使得在用户业务负载低的时候很多资源处于空闲状态，这种资源空闲情况，云平台的监控系统能够捕获到。
对于上述云平台监控系统捕获到的空闲资源，目前现行的系统都没用对其充分利用，这也就造成了资源的浪费。
发明内容
为了充分利用空闲资源，从而提高资源利用率，本发明提供了一种基于IaaS平台的资源调度方法和装置。
本发明提供了一种基于IaaS云平台的资源调度方法，所述方法包括：
获取预设时间内的监控数据；
根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；
读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；
在所述资源状态表中，获取满足所述需求参数的资源状态信息；
确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。
优选地，所述根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源，包括：根据预设频度确定时间区间；
根据所述时间区间内的监控数据，获取资源标识对应的资源种类和空闲资源量，所述资源标识用于唯一标识资源；
获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系。
优选地，所述在所述资源状态表中，获取满足所述需求参数的资源状态信息，包括：
在所述资源状态表中，获取满足所述需求资源种类的第一资源状态信息组，所述第一资源状态信息组包括至少一项资源状态信息；
在所述第一资源状态信息组中，获取满足所述需求资源量的第二资源状态信息组，所述第二资源状态信息组包括至少一项资源状态信息；
在所述第二资源状态信息组中，获取满足所述待执行时间的资源状态信息。
优选地，所述方法还包括：
获取所述资源状态信息中的空闲资源量；
将所述空闲资源量减去所述需求资源量后，更新所述资源状态信息。
优选地，所述方法还包括：
所述待执行任务结束后，获取所述资源状态信息中的空闲资源量；将所述空闲资源量加上所述需求资源量后，更新所述资源状态信息。
优选地，所述方法还包括：
监控所述待执行任务，以获知所述待执行任务的执行异常。
本发明还提供一种基于IaaS云平台的资源调度装置，所述装置包括：
第一获取模块，用于获取预设时间内的监控数据；
第二获取模块，用于根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；
第三获取模块，用于读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；
第四获取模块，用于在所述资源状态表中，获取满足所述需求参数的资源状态信息；
调度模块，用于确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。
优选地，所述第二获取模块，包括：
第一确定子模块，用于根据预设频度确定时间区间；
第一获取子模块，用于根据所述时间区间内的监控数据，获取资源标识对应的资源种类和空闲资源量，所述资源标识用于唯一标识资源；
第二获取子模块，用于获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系。
优选地，所述第四获取模块，包括：
第三获取子模块，用于在所述资源状态表中，获取满足所述需求资源种类的第一资源状态信息组，所述第一资源状态信息组包括至少一项资源状态信息；
第四获取子模块，用于在所述第一资源状态信息组中，获取满足所述需求资源量的第二资源状态信息组，所述第二资源状态信息组包括至少一项资源状态信息；
第五获取子模块，用于在所述第二资源状态信息组中，获取满足所述待执行时间的资源状态信息。
优选地，所述装置还包括：
第五获取模块，用于获取所述资源状态信息中的空闲资源量；
第一更新模块，用于将所述空闲资源量减去所述需求资源量后，更新所述资源状态信息。
优选地，所述装置还包括：
第六获取模块，用于所述待执行任务结束后，获取所述资源状态信息中的空闲资源量；
第二更新模块，用于将所述空闲资源量加上所述需求资源量后，更新所述资源状态信息。
优选地，所述装置还包括：
监控模块，用于监控所述待执行任务，以获知所述待执行任务的执行异常。
本发明首先获取预设时间内的监控数据；根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；其次，读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；再次，在所述资源状态表中，获取满足所述需求参数的资源状态信息；最后，确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。本发明利用基于时间的资源状态表为待执行任务分配资源，充分利用了每个时间段内的空闲资源，在有限资源情况下大幅提高了任务并发量，同时提高了系统资源的利用率。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例一提供的基于IaaS云平台的资源调度方法流程图；
图2为本发明实施例一提供的获取资源状态表的方法流程图；
图3为本发明实施例一提供的获取满足待执行任务的需求参数的资源状态信息的方法流程图；
图4为本发明实施例二提供的基于IaaS云平台的资源调度装置结构图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
ＩａａＳ云平台下，系统监控管理大量物理资源，并将这些资源虚拟化后提供给用户使用，但实际上，用户在不同时间段对资源使用率都不同，其中会有大量的资源（如ＣＰＵ、内存、网络或磁盘）会在不同时间段处于空闲状态，造成资源的严重浪费。本发明实施例提供的资源调度方法利用ＩａａＳ云平台监控系统的监控数据，分析资源基于时间的空闲趋势，将基于时间的空闲资源调度给待执行任务使用，从而更充分的利用系统资源，提升系统资源的使用率。
实施例一
参考图1，图1为本实施例提供的基于IaaS云平台的资源调度方法流程图，具体可以包括：
步骤101：获取预设时间内的监控数据；
本实施例中，在进行资源调度之前，首先获取预设时间内的监控数据，其中预设时间可以为前一天或者前一周，具体的，可以获取前一天的监控数据。
其中，预设时间可以通过观察监控数据的规律设定，监控数据为周期性规律显示的，其预设时间可以设定为该周期。例如，监控数据的显示在白天和晚上明显不同时，可以将预设时间设定为24小时。
具体的，监控数据为每隔一段时间（比如几分钟）的IaaS云平台内的各个资源的状态，如ＣＰＵ使用率、内存使用率、磁盘ＩＯ和网络ＩＯ等数据。
步骤102：根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；
本实施例中，在获取预设时间内的监控数据后，根据该监控数据获取资源状态表。其中，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，另外，所述资源标识用于唯一标识资源，资源标识可以是资源的地址，也可以是其他能够唯一确定该资源的任何标志，其中，当资源标识为资源的地址时，可以根据该地址获取对应的资源。
参考表1，表1为资源状态表，该表中任一横行的数据为一项资源状态信息，所以，该表包括两项资源状态信息。值得注意的是，每项资源状态信息的时间区间可以不等长，也可以等长，具体的本实施例不做限制。同时，空闲资源量可以为时间区间内的空闲资源的平均值，具体的获取空闲资源量的方式不受限制。另外，资源种类可以包括ＣＰＵ、内存、网络ＩＯ和磁盘ＩＯ。
| 资源标识 | 资源种类 | 时间区间 | 空闲资源量 |
| 01 | CPU | 2:00～2:30 | 2个CPU |
| 02 | 内存 | 3:00～4:00 | 1GB |
表1
参考图2，图2为本实施例提供的获取资源状态表的方法流程图，具体可以包括：
步骤201：根据预设频度确定时间区间；
本实施例中，可以预先设置频度，其次根据预设的频度确定时间区间。值得注意的是，这种方法确定的所有时间区间为等长的。
实际操作过程中，监控系统对资源的监控频率一般比较高（一般为1-5分钟一次），而实际使用时并不需要这么高频度的数据，只需要30-60分钟一次的数据就可以，也就是说，可以将频度预先设置为60分钟，也相当于将时间区间设置为60分钟。
步骤202：根据所述时间区间内的监控数据，获取资源标识对应的资源种类和空闲资源量，所述资源标识用于唯一标识资源；
本实施例中，在设定时间区间的前提下，根据该时间区间内的监控数据，获取该时间区间内资源标识对应的资源种类和空闲资源量。
如上述设定的时间区间为60分钟，本步骤需要把这60分钟之内的所有资源标识对应的资源种类和空闲资源量均获取到。具体的，可以通过计算该60分钟之内任一资源标识对应的监控数据的平均值得出该资源标识对应的资源种类和空闲资源量。值得注意的是，资源标识用于唯一确定资源。
步骤203：获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系。
本实施例中，在获取所有时间区间内的资源标识对应的资源种类和空闲资源量之后，将资源标识、资源种类、时间区间和空闲资源量的对应关系组成资源状态信息，同时，所有组成的资源状态信息确定资源状态表。
步骤103：读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；
本实施例中，首先读取任意一个待执行任务，其次，获取该待执行任务的需求参数，其中，所述需求参数可以包括需求资源种类、需求资源量和待执行时间，具体的，需求资源种类可以为该待执行任务需要的资源种类，如CPU或者内存；需求资源量可以为该待执行任务需要的资源的大小，如3个CPU或者2GB内存等；待执行时间可以为该待执行任务需要执行的时间。
步骤104：在所述资源状态表中，获取满足所述需求参数的资源状态信息；
本实施例中，根据获取的待执行任务的需求参数，在资源状态表中获取满足条件的资源状态信息，其中，满足条件即为能够满足所述需求参数即可。
参考图3，图3为本实施例提供的获取满足待执行任务的需求参数的资源状态信息的方法流程图，具体可以包括：
步骤301：在所述资源状态表中，获取满足所述需求资源种类的第一资源状态信息组，所述第一资源状态信息组包括至少一项资源状态信息；
本实施例中，首先在资源状态表中获取满足待执行任务的需求资源种类的第一资源状态信息组，其中该第一资源状态信息组可以包括至少一项资源状态信息。其中，当任意一项资源状态信息中的资源种类与该待执行任务的需求资源种类相同时，将该项资源状态信息添加到第一资源状态信息组，也就是说，该第一资源状态信息组中包括的资源状态信息中的资源种类均与该待执行任务的需求资源种类相同。
另外，如果不能获取满足该待执行任务的需求资源种类的资源状态信息，则可以说明资源状态表中并没有能够分配给该待执行任务的资源。
步骤302：在所述第一资源状态信息组中，获取满足所述需求资源量的第二资源状态信息组，所述第二资源状态信息组包括至少一项资源状态信息；
本实施例中，在获取的第一资源状态信息组中，获取能够满足该待执行任务的需求资源量的资源状态信息，并将其添加到第二资源状态信息组，也就是说，该第二资源状态信息组中包括的资源状态信息中的需求资源量和资源种类均能够满足该待执行任务的需求。具体的，该第二资源状态信息组中包括的资源状态信息中的需求资源量大于或者等于该待执行任务的需求资源量。
仍然要说的是，如果不能获取满足该待执行任务的需求资源量的资源状态信息，则可以说明资源状态表中并没有能够分配给该待执行任务的资源。
步骤303：在所述第二资源状态信息组中，获取满足所述待执行时间的资源状态信息。
本实施例中，在获取了满足该待执行任务的资源种类和需求资源量的第二资源状态信息组后，在该第二资源状态信息组中，获取满足该待执行任务的待执行时间的资源状态信息，即该资源状态信息中的时间区间大于或者等于该待执行任务的待执行时间。或者，第二资源状态信息组中的若干个资源状态信息中的时间区间能够组成的连续时间区间大于或者等于该待执行任务的待执行时间。
同样的，如果不能获取满足该待执行任务的待执行时间的资源状态信息，则可以说明资源状态表中并没有能够分配给该待执行任务的资源。
值得强调的是，步骤301～步骤303的执行顺序不受限制，只要最终能够获取同时满足待执行任务的需求参数的资源状态信息即可。
步骤105：确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。
本实施例中，在获取满足所述需求参数的资源状态信息后，首先确定该资源状态信息对应的资源标识，然后根据该资源标识确定其对应的资源，最终调度该资源，以便将其分配给该待执行任务。
为了保证后续资源调度的准确性，本实施例在完成上述资源调度后，更新资源状态信息，即更新资源状态表，具体可以包括：
首先，获取所述资源状态信息中的空闲资源量；
其次，将所述空闲资源量减去所述需求资源量后，更新所述资源状态信息。
本实施例中，在结束步骤101～步骤105的资源调度后，由于部分资源已经分配给待执行任务，从而空闲资源相应的减少了该待执行任务的需求资源量，所以，本实施例将空闲资源量减去该需求资源量后，更新该资源状态信息。
同样的，本实施例在结束该待执行任务后，更新资源状态信息，即更新资源状态表，具体可以包括：
首先，所述待执行任务结束后，获取所述资源状态信息中的空闲资源量；
其次，将所述空闲资源量加上所述需求资源量后，更新所述资源状态信息。
本实施例中，当该待执行任务结束后，释放其所占用的资源，即空闲资源增加了该待执行任务的需求资源量，所以，本实施例将空闲资源量加上该需求资源量后，更新该资源状态信息。
为了不对资源上正在执行的任务造成影响，本实施例可以对该待执行任务进行监控，具体可以包括：
监控所述待执行任务，以获知所述待执行任务的执行异常。
本实施例首先获取预设时间内的监控数据；根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；其次，读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；再次，在所述资源状态表中，获取满足所述需求参数的资源状态信息；最后，确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。本实施例利用基于时间的资源状态表为待执行任务分配资源，充分利用了每个时间段内的空闲资源，在有限资源情况下大幅提高了任务并发量，同时提高了系统资源的利用率。
实施例二
参考图4，图4为本实施例提供的基于IaaS云平台的资源调度装置结构图，具体可以包括：
第一获取模块401，用于获取预设时间内的监控数据；
第二获取模块402，用于根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；
第三获取模块403，用于读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；
第四获取模块404，用于在所述资源状态表中，获取满足所述需求参数的资源状态信息；
调度模块405，用于确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。
其中，所述第二获取模块402可以包括：
第一确定子模块，用于根据预设频度确定时间区间；
第一获取子模块，用于根据所述时间区间内的监控数据，获取资源标识对应的资源种类和空闲资源量，所述资源标识用于唯一标识资源；
第二获取子模块，用于获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系。
其中，所述第四获取模块404可以包括：
第三获取子模块，用于在所述资源状态表中，获取满足所述需求资源种类的第一资源状态信息组，所述第一资源状态信息组包括至少一项资源状态信息；
第四获取子模块，用于在所述第一资源状态信息组中，获取满足所述需求资源量的第二资源状态信息组，所述第二资源状态信息组包括至少一项资源状态信息；
第五获取子模块，用于在所述第二资源状态信息组中，获取满足所述待执行时间的资源状态信息。
进一步的，所述装置还可以包括：
第五获取模块，用于获取所述资源状态信息中的空闲资源量；
第一更新模块，用于将所述空闲资源量减去所述需求资源量后，更新所述资源状态信息。
更进一步的，所述装置还可以包括：
第六获取模块，用于所述待执行任务结束后，获取所述资源状态信息中的空闲资源量；
第二更新模块，用于将所述空闲资源量加上所述需求资源量后，更新所述资源状态信息。
更进一步的，所述装置还可以包括：
监控模块，用于监控所述待执行任务，以获知所述待执行任务的执行异常。
本实施例提供的基于IaaS云平台的资源调度装置包括第一获取模块、第二获取模、第三获取模块、第四获取模块和调度模块，所述装置的工作原理是：
第一获取模块获取预设时间内的监控数据；第二获取模块根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；第三获取模块读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；第四获取模块在所述资源状态表中，获取满足所述需求参数的资源状态信息；调度模块确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。
其中，所述第二获取模块可以包括第一确定子模块、第一获取子模块和第二获取子模块，其中，第一确定子模块根据预设频度确定时间区间；第一获取子模块根据所述时间区间内的监控数据，获取资源标识对应的资源种类和空闲资源量，所述资源标识用于唯一标识资源；第二获取子模块获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系。
其中，所述第四获取模块可以包括第三获取子模块、第四获取子模块和第五获取子模块，第三获取子模块在所述资源状态表中，获取满足所述需求资源种类的第一资源状态信息组，所述第一资源状态信息组包括至少一项资源状态信息；第四获取子模块在所述第一资源状态信息组中，获取满足所述需求资源量的第二资源状态信息组，所述第二资源状态信息组包括至少一项资源状态信息；第五获取子模块在所述第二资源状态信息组中，获取满足所述待执行时间的资源状态信息。
进一步的，所述装置还可以包括第五获取模块和第一更新模块，第五获取模块获取所述资源状态信息中的空闲资源量；第一更新模块将所述空闲资源量减去所述需求资源量后，更新所述资源状态信息。
更进一步的，所述装置还可以包括第六获取模块和第二更新模块第六获取模块所述待执行任务结束后，获取所述资源状态信息中的空闲资源量；第二更新模块将所述空闲资源量加上所述需求资源量后，更新所述资源状态信息。
更进一步的，所述装置还可以包括监控模块，监控模块监控所述待执行任务，以获知所述待执行任务的执行异常。
本实施例提供的基于IaaS云平台的资源调度装置，首先获取预设时间内的监控数据；根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；其次，读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间；再次，在所述资源状态表中，获取满足所述需求参数的资源状态信息；最后，确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务。本实施例利用基于时间的资源状态表为待执行任务分配资源，充分利用了每个时间段内的空闲资源，在有限资源情况下大幅提高了任务并发量，同时提高了系统资源的利用率。
对于系统实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明实施例所提供的基于IaaS云平台的资源调度方法和装置进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种基于IaaS云平台的资源调度方法，其特征在于，所述方法包括：
获取预设周期内的监控数据，所述监控数据来自IaaS云平台监控系统；
根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；
读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间，所述待执行时间为所述待执行任务需要执行的时间；
在所述资源状态表中，获取满足所述需求参数的资源状态信息；
确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务；
监控所述待执行任务，以获知所述待执行任务的执行异常。
2.根据权利要求1所述的方法，其特征在于，所述根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源，包括：根据预设频度确定时间区间；
根据所述时间区间内的监控数据，获取资源标识对应的资源种类和空闲资源量，所述资源标识用于唯一标识资源；
获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系。
3.根据权利要求1所述的方法，其特征在于，所述在所述资源状态表中，获取满足所述需求参数的资源状态信息，包括：
在所述资源状态表中，获取满足所述需求资源种类的第一资源状态信息组，所述第一资源状态信息组包括至少一项资源状态信息；
在所述第一资源状态信息组中，获取满足所述需求资源量的第二资源状态信息组，所述第二资源状态信息组包括至少一项资源状态信息；
在所述第二资源状态信息组中，获取满足所述待执行时间的资源状态信息。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取所述资源状态信息中的空闲资源量；
将所述空闲资源量减去所述需求资源量后，更新所述资源状态信息。
5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
所述待执行任务结束后，获取所述资源状态信息中的空闲资源量；将所述空闲资源量加上所述需求资源量后，更新所述资源状态信息。
6.一种基于IaaS云平台的资源调度装置，其特征在于，所述装置包括：
第一获取模块，用于获取预设时间内的监控数据，所述监控数据来自IaaS云平台监控系统；
第二获取模块，用于根据所述监控数据，获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系，所述资源标识用于唯一标识资源；
第三获取模块，用于读取任一待执行任务后，获取所述待执行任务的需求参数，所述需求参数包括需求资源种类、需求资源量和待执行时间，所述待执行时间为所述待执行任务需要执行的时间；
第四获取模块，用于在所述资源状态表中，获取满足所述需求参数的资源状态信息；
调度模块，用于确定所述资源状态信息对应的资源标识后，调度所述资源标识对应的资源，以便将所述资源分配给所述待执行任务；
监控模块，用于监控所述待执行任务，以获知所述待执行任务的执行异常。
7.根据权利要求6所述的装置，其特征在于，所述第二获取模块，包括：
第一确定子模块，用于根据预设频度确定时间区间；
第一获取子模块，用于根据所述时间区间内的监控数据，获取资源标识对应的资源种类和空闲资源量，所述资源标识用于唯一标识资源；
第二获取子模块，用于获取资源状态表，所述资源状态表包括至少一项资源状态信息，所述资源状态信息包括资源标识、资源种类、时间区间和空闲资源量的对应关系。
8.根据权利要求6所述的装置，其特征在于，所述第四获取模块，包括：
第三获取子模块，用于在所述资源状态表中，获取满足所述需求资源种类的第一资源状态信息组，所述第一资源状态信息组包括至少一项资源状态信息；
第四获取子模块，用于在所述第一资源状态信息组中，获取满足所述需求资源量的第二资源状态信息组，所述第二资源状态信息组包括至少一项资源状态信息；
第五获取子模块，用于在所述第二资源状态信息组中，获取满足所述待执行时间的资源状态信息。
9.根据权利要求6所述的装置，其特征在于，所述装置还包括：
第五获取模块，用于获取所述资源状态信息中的空闲资源量；
第一更新模块，用于将所述空闲资源量减去所述需求资源量后，更新所述资源状态信息。
10.根据权利要求9所述的装置，其特征在于，所述装置还包括：
第六获取模块，用于所述待执行任务结束后，获取所述资源状态信息中的空闲资源量；
第二更新模块，用于将所述空闲资源量加上所述需求资源量后，更新所述资源状态信息。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310421712.6A CN103458052B (zh) | 2013-09-16 | 2013-09-16 | 一种基于IaaS云平台的资源调度方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310421712.6A CN103458052B (zh) | 2013-09-16 | 2013-09-16 | 一种基于IaaS云平台的资源调度方法和装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103458052A CN103458052A (zh) | 2013-12-18 |
| CN103458052B true CN103458052B (zh) | 2017-05-24 |
Family
ID=49739994
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310421712.6A Active CN103458052B (zh) | 2013-09-16 | 2013-09-16 | 一种基于IaaS云平台的资源调度方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103458052B (zh) |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104901989B (zh) * | 2014-03-07 | 2018-08-14 | 中国科学院声学研究所 | 一种现场服务提供系统及方法 |
| CN104125297A (zh) * | 2014-08-06 | 2014-10-29 | 华为技术有限公司 | 虚拟资源共享方法、装置及系统 |
| CN104679595B (zh) * | 2015-03-26 | 2017-10-13 | 南京大学 | 一种面向应用的IaaS层动态资源分配方法 |
| CN106201671B (zh) * | 2015-04-29 | 2019-10-15 | 北大方正集团有限公司 | 一种群集部署环境中任务调度方法及装置 |
| CN106681825A (zh) * | 2015-11-10 | 2017-05-17 | 阿里巴巴集团控股有限公司 | 一种资源分配方法及装置 |
| CN105912397A (zh) * | 2016-03-31 | 2016-08-31 | 乐视控股（北京）有限公司 | 一种资源管理方法和装置 |
| CN105871618B (zh) * | 2016-04-13 | 2019-05-24 | 上海交通大学 | 云调度器中应对不确定需求的多资源调度方法 |
| CN106126347A (zh) * | 2016-08-17 | 2016-11-16 | 浪潮电子信息产业股份有限公司 | 一种云平台下有效实现主机集群资源调度的方法 |
| CN106686081B (zh) * | 2016-12-29 | 2020-08-28 | 北京奇虎科技有限公司 | 一种数据库服务系统的资源分配方法和装置 |
| CN108574645B (zh) * | 2017-03-14 | 2020-08-25 | 华为技术有限公司 | 一种队列调度方法及装置 |
| CN107343023B (zh) * | 2017-05-25 | 2020-01-10 | 北京奇艺世纪科技有限公司 | 一种Mesos管理集群中的资源分配方法、装置及电子设备 |
| CN107423914A (zh) * | 2017-08-04 | 2017-12-01 | 合肥工业大学 | 一种基于云制造的任务调度方法及系统 |
| CN107992951A (zh) * | 2017-12-11 | 2018-05-04 | 上海市信息网络有限公司 | 云管理平台的容量告警方法、系统、存储器及电子设备 |
| CN110297701B (zh) * | 2019-05-16 | 2023-08-01 | 平安科技（深圳）有限公司 | 数据处理作业调度方法、装置、计算机设备及存储介质 |
| CN112019581B (zh) * | 2019-05-30 | 2022-02-25 | 华为技术有限公司 | 一种调度任务处理实体的方法及装置 |
| CN110727526B (zh) * | 2019-09-09 | 2023-02-03 | 未鲲(上海)科技服务有限公司 | 大数据计算任务的处理方法和系统 |
| CN112131007B (zh) * | 2020-09-28 | 2023-02-21 | 山东浪潮科学研究院有限公司 | 基于ai平台的gpu资源调度方法、装置及介质 |
| CN112416599B (zh) * | 2020-12-03 | 2023-03-24 | 腾讯科技（深圳）有限公司 | 一种资源调度方法、装置、设备及计算机可读存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102209041A (zh) * | 2011-07-13 | 2011-10-05 | 上海红神信息技术有限公司 | 一种调度方法、装置及系统 |
| CN102497409A (zh) * | 2011-12-08 | 2012-06-13 | 曙光信息产业(北京)有限公司 | 一种云计算系统资源管理的方法 |
| CN103167021A (zh) * | 2013-02-01 | 2013-06-19 | 浪潮(北京)电子信息产业有限公司 | 资源配置方法和装置 |
| CN103297499A (zh) * | 2013-04-19 | 2013-09-11 | 无锡成电科大科技发展有限公司 | 一种基于云平台的调度方法及系统 |
-
2013
- 2013-09-16 CN CN201310421712.6A patent/CN103458052B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102209041A (zh) * | 2011-07-13 | 2011-10-05 | 上海红神信息技术有限公司 | 一种调度方法、装置及系统 |
| CN102497409A (zh) * | 2011-12-08 | 2012-06-13 | 曙光信息产业(北京)有限公司 | 一种云计算系统资源管理的方法 |
| CN103167021A (zh) * | 2013-02-01 | 2013-06-19 | 浪潮(北京)电子信息产业有限公司 | 资源配置方法和装置 |
| CN103297499A (zh) * | 2013-04-19 | 2013-09-11 | 无锡成电科大科技发展有限公司 | 一种基于云平台的调度方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103458052A (zh) | 2013-12-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103458052B (zh) | 一种基于IaaS云平台的资源调度方法和装置 | |
| CN104915407B (zh) | 一种基于Hadoop多作业环境下的资源调度方法 | |
| US9703285B2 (en) | Fair share scheduling for mixed clusters with multiple resources | |
| US11556389B2 (en) | Resource usage prediction for cluster provisioning | |
| CN104580284B (zh) | 业务分配装置和业务分配方法 | |
| CN108874640A (zh) | 一种集群性能的评估方法和装置 | |
| US20140143773A1 (en) | Method and system for running a virtual appliance | |
| CN103164283A (zh) | 一种虚拟桌面系统中虚拟化资源动态调度管理方法及系统 | |
| CN103197623B (zh) | 一种流水线监控管理方法及装置 | |
| CN102253883B (zh) | 一种服务器性能评价的方法和系统 | |
| WO2019033770A1 (zh) | 一种工作量分配方法、装置、存储介质和服务器 | |
| CN106911592A (zh) | 一种自适应资源分配方法及装置 | |
| CN109118012B (zh) | 一种工业动态多维度能耗成本预测方法、系统、存储介质和终端 | |
| CN110599148B (zh) | 集群数据处理方法、装置、计算机集群及可读存储介质 | |
| CN108255607A (zh) | 任务处理方法、装置、电子终端及可读存储介质 | |
| Akan et al. | Congestion-based lead-time quotation for heterogenous customers with convex-concave delay costs: Optimality of a cost-balancing policy based on convex hull functions | |
| CN104407926A (zh) | 一种云计算资源的调度方法 | |
| CN108574645A (zh) | 一种队列调度方法及装置 | |
| CN108459905A (zh) | 资源池容量规划方法及服务器 | |
| CN104156505B (zh) | 一种基于用户行为分析的Hadoop集群作业调度方法及装置 | |
| CN115169634A (zh) | 一种任务分配优化处理方法及装置 | |
| CN104111876A (zh) | 一种基于Oracle资源计划的动态资源管理装置及方法 | |
| CN108153584A (zh) | 一种用于确定目标网络设备需分配的线程数的方法与设备 | |
| US10585620B2 (en) | Storage monitoring system for monitoring components in a storage system in a distributed manner | |
| JPH10254962A (ja) | グループ別作業能力補正装置および作業割り当てシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP02 | Change in the address of a patent holder | ||
| CP02 | Change in the address of a patent holder |
Address after: 100086 12, 1201, 3 building, 2 South Road, Haidian District Academy of Sciences, Beijing. Patentee after: Beijing Sohu New Media Information Technology Co., Ltd. Address before: 100084 Beijing Haidian District Zhongguancun East Road 1 hospital 9 building Sohu cyber Building 8 floor 802 room. Patentee before: Beijing Sohu New Media Information Technology Co., Ltd. |