CN116996513B - 一种设备资产管理系统的资源调度方法 - Google Patents
一种设备资产管理系统的资源调度方法 Download PDFInfo
- Publication number
- CN116996513B CN116996513B CN202310993579.5A CN202310993579A CN116996513B CN 116996513 B CN116996513 B CN 116996513B CN 202310993579 A CN202310993579 A CN 202310993579A CN 116996513 B CN116996513 B CN 116996513B
- Authority
- CN
- China
- Prior art keywords
- computing
- resource
- function
- management system
- asset management
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 20
- 238000004364 calculation method Methods 0.000 claims abstract description 40
- 238000009826 distribution Methods 0.000 claims abstract description 6
- 230000006870 function Effects 0.000 claims description 83
- 238000007726 management method Methods 0.000 claims description 34
- 238000003860 storage Methods 0.000 claims description 15
- 238000011217 control strategy Methods 0.000 claims description 3
- 238000013468 resource allocation Methods 0.000 claims description 3
- 238000010276 construction Methods 0.000 abstract description 2
- 230000004927 fusion Effects 0.000 abstract 1
- 238000012795 verification Methods 0.000 description 6
- 238000012544 monitoring process Methods 0.000 description 5
- 230000003993 interaction Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000004220 aggregation Methods 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000005336 cracking Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5061—Partitioning or combining of resources
- G06F9/5066—Algorithms for mapping a plurality of inter-dependent sub-tasks onto a plurality of physical CPUs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/133—Protocols for remote procedure calls [RPC]
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种设备资产管理系统的资源调度方法，包括以下步骤：（a）资源集合获取：获取设备资产管理系统的所有可用资源计算节点；（b）调度算法执行：调度器获取所述设备资产管理系统所有可用资源计算节点的组合后，通过函数计算模块计算出每个资源计算节点应该分配的任务量大小；（c）任务的分发和计算：将总的计算任务划分为多个子任务，然后分发给每个资源计算节点进行计算。通过进行资源集合获取、调度算法执行以及任务的分发和计算的步骤，能够有效提高边缘资源的利用率，通过对基础设施的抽象与融合，提高资源弹性构建能力，从而实现降低系统开销、提高资源利用率等价值。
Description
技术领域
本发明涉及一种资源调度方法，具体是一种设备资产管理系统的资源调度方法。
背景技术
企业设备资产是企业（如各园区、工厂等）经营管理过程中，工作人员用于进行产品生产所使用的有形固定资产。
申请号为202310464732.5的中国发明专利公开了一种基于物联网的企业设备资产管理系统及管理方法，其中企业设备资产管理系统包括设备运行监控平台、设备综合管理平台和统一数据交互验证平台；企业设备资产管理系统通过利用统一数据交互验证平台对设备运行监控平台的前端传感装置的加密信息进行密码验证，将验证通过结果反馈至设备运行监控平台；以及利用统一数据交互验证平台对设备运行监控平台的加密信息进行密码验证，将验证通过结果反馈至所述设备综合管理平台，实现对企业设备资产的监测信息的传输数据进行加密保护，提高了企业设备资产管理系统在物联网模式下的数据安全。然而，该企业设备资产管理系统的弹性不足，表现为部分环境信息资源不足，导致系统割裂而无法跨集群资源调配。
发明内容
基于上述缺陷，本发明提供一种设备资产管理系统的资源调度方法。
为了达成上述目的，本发明提供一种设备资产管理系统的资源调度方法，包括以下步骤：
（a）资源集合获取：获取设备资产管理系统的所有可用资源计算节点；
（b）调度算法执行：调度器获取所述设备资产管理系统所有可用资源计算节点的组合后，通过函数计算模块计算出每个资源计算节点应该分配的任务量大小；
（c）任务的分发和计算：将总的计算任务划分为多个子任务，然后分发给每个资源计算节点进行计算。
优化地，步骤（a）中，使调度器通过实时查询信息采集器从各个资源管理器收集节点资源的记录，以获取所有可用资源计算节点。
优化地，步骤（b）中，所述函数计算模块包括计算资源池、与所述计算资源池相通讯的储存资源池以及分别与所述计算资源池、所述储存资源池相通讯的函数计算服务中心，所述函数计算服务中心包括相配合的函数路由单元、函数模板池、函数创建单元、版本管理单元和函数定制单元。
进一步地，步骤（b）中，利用所述函数计算模块执行调度算法，执行调度算法的结果。
优化地，步骤（c）中，当所有资源计算节点上的子任务计算完成后，得出最终的计算结果即可。
优化地，步骤（a）进行前，还使用先来先服务和优先级判断相结合的队列控制策略从用户提交所有任务的任务队列中，取出目前最需要执行的计算任务，然后对任务进行合理的资源分配。
进一步地，所述储存资源池用作存储介质，用于存储用户的文件、云原生文件，所述计算资源群用作主要计算资源存，所述函数计算服务中心提供给用户进行函数编程环境支持。
优化地，所述函数计算模块支持快速发布函数实体、支持对资源进行动态加载并支持多种编程语言的函数实体。
本发明设备资产管理系统的资源调度方法，通过进行资源集合获取、调度算法执行以及任务的分发和计算的步骤，能够有效提高边缘资源的利用率，通过对基础设施的抽象与融合，提高资源弹性构建能力，从而实现降低系统开销、提高资源利用率等价值。
附图说明
图1为本发明函数计算模块的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明，下面将结合实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员所做的等效变化与修饰前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
为了实现对设备资产管理系统进行资源调度，需要使用资源管理调度系统为要使用此调度系统的资源节点提供服务。该资源管理调度系统包括资源管理器、任务执行器、多个信息采集器和唯一的调度器；每个边缘节点运行资源管理器和任务执行器，在整个边缘节点网络中运行任意多个信息采集器以及唯一的一个调度器，从而实现各节点资源聚合管理。
上述设备资产管理系统的资源调度方法，使用先来先服务和优先级判断相结合的队列控制策略从用户提交所有任务的任务队列中，取出目前最需要执行的计算任务，然后对任务进行合理的资源分配；具体包括以下步骤：
（a）资源集合获取：获取设备资产管理系统的所有可用资源计算节点；具体是：调度器通过实时查询信息采集采集器从各个资源管理器收集的的节点资源的记录，获取系统所有可用资源计算节点。
（b）调度算法执行：调度器获取所述设备资产管理系统所有可用资源计算节点的组合后，通过函数计算模块计算出每个资源计算节点应该分配的任务量大小。具体是：调度器获取到设备资产管理系统所有可用计算资源的组合后，通过函数计算模块执行相应的调度算法，计算出每个计算节点应该分配的任务量大小。
函数服务计算（即函数计算）就是以函数为单元，对外提供服务。基于该服务，软件开发人员只要专心于编写核心的业务代码，而创建和维护相应的计算、存储、网络等资源的工作，由函数服务计算负责。在软件开发人员编写完成，向云上上传代码之后，直接运行，就能够得到相应的数据结果或服务。函数服务计算有效降低了系统运维成本，使用户更专注于业务代码，实现高效工作。基于函数计算，通过统筹系统可以更加合理和有效地利用资源，有利于边缘节点承载更多服务。另外，从物联网等应用出发，需要考虑如何将服务从中心云快速迁移到边缘，以及在边缘之间进行轻量化服务的高效调用。而函数计算是理想的解决方案，可以大幅度降低系统的资源开销，同时提高服务效率，因此本申请引入函数计算技术，进一步提升边缘环境的服务能力。
函数服务计算需求如下：
（1）完备的基础设施服务。作为连接前端和后端服务的中间层，函数服务计算依赖于基础设施服务的完备性。其中包括计算、存储、网络等资源。函数服务计算需要集中计算的能力，将物理服务器作为计算资源承载点，多物理节点构建集群来为函数服务计算提供计算能力。计算资源之间需要保证高可用性，函数服务计算 当前倚重的计算资源出现故障，需要有备用计算资源代替，基于OpenCurve的存储机制保证用户能平稳的在平台以函数为单位进行开发而不会受到单个计算资源失效影响。
（2）函数计算核心功能。函数计算模块作为基础服务应该运行的是一些代码量小、较为离散的代码块。对函数服务计算特点进行分析，函数计算核心功能应该包括但不限于：需要支持快速发布函数实体，支持对资源进行动态加载，支持多种编程语言的函数实体；如果用户没有操作需暂停函数服务，即不能让函数服务长时间运行，根据用户的需要来分配函数资源，实现定制功能；控制执行时间在用户可接受范围内，最佳情况在毫秒级；对资源的可重复利用性，支持函数资源模板化；支持用户对自己的资源进行管理，可以进行版本迭代，对存储的不同版本代码支持回滚。
具体地，如图1所示，函数计算模块包括计算资源池、与计算资源池相通讯的储存资源池以及分别与计算资源池、储存资源池相通讯的函数计算服务中心，函数计算服务中心包括相配合的函数路由单元、函数模板池、函数创建单元、版本管理单元和函数定制单元等；即其包括用做存储介质的储存资源池，存储用户的文件、云原生文件等等；其次是计算资源池，此模块作为主要计算资源存在于整个系统中；另外是函数计算服务中心，是整个函数服务计算的核心部分，函数服务计算主要提供给用户进行函数编程环境支持。它提供数据库服务，数据存储方案采用 MySQL+Redis 结合使用方式，从 MySQL 数据库中Load数据到Redis中形成缓存。
具体功能如下：
（1）设计函数创建/删除功能，用户可对自己的函数实体进行创建或者删除；
（2）设计函数创建时用户可以选择资源类型，用户可选创建资源类型，同时可以选择内存、CPU、磁盘性能参数；
（3）考虑执行函数实体时间由多方面因素决定，如用户代码量、代码执行时间空间复杂度、网络延迟等原因。前两个原因是开发者不可控的，网络延迟采用gRPC机制提高传输速率，在传输大量数据的时候 gRPC比Restful有更高的效率；
（4）设计函数模板功能，对应设立模板池，分为全局模板池和局部模板池，全局模板池可以看到所有用户Push的函数模板，局部模板池设置是当前用户可见；
（5）设计版本管理功能，支持用户编写保存一定数量的函数版本，支持版本回退以及跨版本之间切换；
（6）考虑函数计算服务和其他模块的功能交互性，设置函数路由功能，接收到用户请求时，在路由中对用户行为进行解析，寻找到方法之后对请求再封装发送。
（c）任务的分发和计算：将总的计算任务划分为多个子任务，然后分发给每个资源计算节点进行计算。具体是：按照上述调度算法执行的结果，将总的计算任务划分为多个子任务，然后分发给每个计算节点。当所有计算节点上的子任务计算完成后，则可以得出最终的计算结果并返回给应用。
以上所述仅为本发明较佳的实施方式，并非用以限定本发明的保护范围；同时以上的描述，对于相关技术领域中具有通常知识者应可明了并据以实施，因此其他未脱离本发明所揭露概念下所完成之等效改变或修饰，都应涵盖在本发明的保护范围之内。
Claims (4)
1.一种设备资产管理系统的资源调度方法，其特征在于，包括以下步骤：
（a）资源集合获取：获取设备资产管理系统的所有可用资源计算节点；
（b）调度算法执行：调度器获取所述设备资产管理系统所有可用资源计算节点的组合后，通过函数计算模块计算出每个资源计算节点应该分配的任务量大小；所述函数计算模块包括计算资源池、与所述计算资源池相通讯的储存资源池以及分别与所述计算资源池、所述储存资源池相通讯的函数计算服务中心，所述函数计算服务中心包括相配合的函数路由单元、函数模板池、函数创建单元、版本管理单元和函数定制单元；利用所述函数计算模块执行调度算法，执行调度算法的结果；所述储存资源池用作存储介质，用于存储用户的文件和云原生文件，所述计算资源池用作主要计算资源，所述函数计算服务中心提供给用户进行函数编程环境支持；所述函数计算模块支持快速发布函数实体、支持对资源进行动态加载并支持多种编程语言的函数实体；
（c）任务的分发和计算：将总的计算任务划分为多个子任务，然后分发给每个资源计算节点进行计算。
2.根据权利要求1所述设备资产管理系统的资源调度方法，其特征在于：步骤（a）中，使调度器通过实时查询信息采集器从各个资源管理器收集节点资源的记录，以获取所有可用资源计算节点。
3.根据权利要求1所述设备资产管理系统的资源调度方法，其特征在于：步骤（c）中，当所有资源计算节点上的子任务计算完成后，得出最终的计算结果即可。
4.根据权利要求1所述设备资产管理系统的资源调度方法，其特征在于：步骤（a）进行前，还使用先来先服务和优先级判断相结合的队列控制策略从用户提交所有任务的任务队列中，取出目前最需要执行的计算任务，然后对任务进行合理的资源分配。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310993579.5A CN116996513B (zh) | 2023-08-09 | 2023-08-09 | 一种设备资产管理系统的资源调度方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310993579.5A CN116996513B (zh) | 2023-08-09 | 2023-08-09 | 一种设备资产管理系统的资源调度方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116996513A CN116996513A (zh) | 2023-11-03 |
| CN116996513B true CN116996513B (zh) | 2024-04-02 |
Family
ID=88523023
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310993579.5A Active CN116996513B (zh) | 2023-08-09 | 2023-08-09 | 一种设备资产管理系统的资源调度方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116996513B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102426544A (zh) * | 2011-11-04 | 2012-04-25 | 浪潮(北京)电子信息产业有限公司 | 任务分配方法和系统 |
| CN104598425A (zh) * | 2013-10-31 | 2015-05-06 | 中国石油天然气集团公司 | 一种通用多机并行计算方法及系统 |
| CN113411369A (zh) * | 2020-03-26 | 2021-09-17 | 山东管理学院 | 一种云服务资源协同优化调度方法、系统、介质及设备 |
| CN114168353A (zh) * | 2022-01-13 | 2022-03-11 | 中国联合网络通信集团有限公司 | 基于端边资源调度的任务联合执行方法及系统 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6083290B2 (ja) * | 2013-03-27 | 2017-02-22 | 日本電気株式会社 | 分散処理システム |
-
2023
- 2023-08-09 CN CN202310993579.5A patent/CN116996513B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102426544A (zh) * | 2011-11-04 | 2012-04-25 | 浪潮(北京)电子信息产业有限公司 | 任务分配方法和系统 |
| CN104598425A (zh) * | 2013-10-31 | 2015-05-06 | 中国石油天然气集团公司 | 一种通用多机并行计算方法及系统 |
| CN113411369A (zh) * | 2020-03-26 | 2021-09-17 | 山东管理学院 | 一种云服务资源协同优化调度方法、系统、介质及设备 |
| CN114168353A (zh) * | 2022-01-13 | 2022-03-11 | 中国联合网络通信集团有限公司 | 基于端边资源调度的任务联合执行方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116996513A (zh) | 2023-11-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Sun et al. | Modeling a dynamic data replication strategy to increase system availability in cloud computing environments | |
| CN100570569C (zh) | 网格计算环境下的作业跨域控制方法 | |
| CN103092698B (zh) | 云计算应用自动部署系统及方法 | |
| CN104239148A (zh) | 一种分布式任务调度方法及装置 | |
| CN103279351B (zh) | 一种任务调度的方法及装置 | |
| CN112783649A (zh) | 一种面向云计算的交互感知的容器化微服务资源调度方法 | |
| CN107864211B (zh) | 集群资源调度方法及系统 | |
| CN103324539A (zh) | 一种作业调度管理系统及方法 | |
| TW201140450A (en) | Continuous optimization of archive management scheduling by use of integrated content-resource analytic model | |
| CN103825964A (zh) | 一种基于云计算PaaS平台的SLS调度装置和方法 | |
| CN105843182A (zh) | 一种基于oms的电力调度事故预案系统及方法 | |
| CN111459641B (zh) | 一种跨机房的任务调度和任务处理的方法及装置 | |
| CN104123182A (zh) | 基于主从架构的MapReduce任务跨数据中心调度系统及方法 | |
| CN109325200B (zh) | 获取数据的方法、装置及计算机可读存储介质 | |
| CN111432005B (zh) | 一种窄带弱连网络条件下服务迁移的方法 | |
| CN106095569A (zh) | 一种基于sla的云工作流引擎资源调度与控制方法 | |
| Guo et al. | Energy-efficient fault-tolerant scheduling algorithm for real-time tasks in cloud-based 5G networks | |
| Albrecht et al. | Making work queue cluster-friendly for data intensive scientific applications | |
| CN113515267A (zh) | 一种基于工业物联网的PaaS平台 | |
| CN116996513B (zh) | 一种设备资产管理系统的资源调度方法 | |
| US20190097887A1 (en) | Modifying distributed application based on cloud diagnostic data | |
| JP7452668B2 (ja) | タスク管理装置、タスク管理方法、および、タスク管理プログラム | |
| Caux et al. | Smart datacenter electrical load model for renewable sources management | |
| CN114443293A (zh) | 一种大数据平台的部署系统及方法 | |
| CN115374101A (zh) | 轨道交通站段级数据管理系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |