CN113064714A - 利用研发环境中的空闲资源处理任务的方法及装置 - Google Patents
利用研发环境中的空闲资源处理任务的方法及装置 Download PDFInfo
- Publication number
- CN113064714A CN113064714A CN202110464932.1A CN202110464932A CN113064714A CN 113064714 A CN113064714 A CN 113064714A CN 202110464932 A CN202110464932 A CN 202110464932A CN 113064714 A CN113064714 A CN 113064714A
- Authority
- CN
- China
- Prior art keywords
- resource
- application environment
- idle
- task
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 107
- 238000000034 method Methods 0.000 title claims abstract description 71
- 238000012827 research and development Methods 0.000 title abstract description 36
- 238000011161 development Methods 0.000 claims description 40
- 230000008569 process Effects 0.000 claims description 23
- 230000015654 memory Effects 0.000 claims description 21
- 238000012544 monitoring process Methods 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 12
- 238000004422 calculation algorithm Methods 0.000 claims description 8
- 238000013515 script Methods 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 3
- 230000018109 developmental process Effects 0.000 description 30
- 238000004364 calculation method Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 10
- 238000012360 testing method Methods 0.000 description 7
- 238000011156 evaluation Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 230000033772 system development Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000011981 development test Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000011056 performance test Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种利用研发环境中的空闲资源处理任务的方法及装置,可用于金融领域或其他技术领域,该方法包括:获取待处理任务的资源需求信息,其中,所述资源需求信息包括:资源指标名称以及各资源指标各自对应的需求量;从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,其中,所述空闲资源池信息中包含多条空闲资源信息,每条空闲资源信息对应一个应用环境,每条空闲资源信息包含:应用环境对应的每个资源指标各自的资源空闲量;采用该相匹配的应用环境对所述待处理任务进行处理。本发明提供了一种较为高效的对研发环境中的空闲资源进行利用的方法,提高了研发环境的资源利用率。
Description
技术领域
本发明涉及应用开发技术领域,具体而言,涉及一种利用研发环境中的空闲资源处理任务的方法及装置。
背景技术
大型软件中心有数百个应用在开发测试过程中,各应用的版本需要部署在多套研发环境上持续运行,各应用在正式上线之前的不同生命周期阶段(开发、单元测试、集成测试、性能测试、验收测试等),所需要使用的研发环境的资源(如网络、计算、存储等)的需求量是各不相同的,在资源需求量较少的时间段,研发环境中的空闲资源并未得到充分再利用,存在较多的资源浪费。针对这种情况,现有技术缺少一种较为高效的对研发环境中的空闲资源进行利用的方法,以提高研发环境的资源利用率。
发明内容
本发明为了解决上述背景技术中的技术问题,提出了一种利用研发环境中的空闲资源处理任务的方法及装置。
为了实现上述目的,根据本发明的一个方面,提供了一种利用研发环境中的空闲资源处理任务的方法,该方法包括:
获取待处理任务的资源需求信息,其中,所述资源需求信息包括:资源指标名称以及各资源指标各自对应的需求量;
从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,其中,所述空闲资源池信息中包含多条空闲资源信息,每条空闲资源信息对应一个应用环境,每条空闲资源信息包含:应用环境对应的每个资源指标各自的资源空闲量;
采用该相匹配的应用环境对所述待处理任务进行处理。
可选的,该利用研发环境中的空闲资源处理任务的方法,还包括:
对每个应用环境各自对应的每个资源指标的资源空闲量进行检测;
若应用环境对应的各资源指标的资源空闲量满足预设的空闲条件,则确定该应用环境为空闲应用环境;
生成所述空闲应用环境对应的空闲资源信息,并将生成的空闲资源信息添加到所述空闲资源池信息中。
可选的,所述资源需求信息还包括:各资源指标的权重;
所述从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,具体包括:
根据各资源指标各自对应的需求量以及各资源指标的权重采用最优匹配算法与所述空闲资源池信息中的各空闲资源信息进行匹配,确定出与所述资源需求信息相匹配的应用环境。
可选的,所述采用该相匹配的应用环境对所述待处理任务进行处理,具体包括:
调用所述待处理任务对应的进程或脚本并采用该相匹配的应用环境进行任务处理。
可选的,该利用研发环境中的空闲资源处理任务的方法,还包括:
在采用该相匹配的应用环境对所述待处理任务进行处理时,对该相匹配的应用环境对应的每个资源指标的资源空闲量进行检测;
若该相匹配的应用环境对应的各资源指标的资源空闲量不满足预设的空闲条件,则停止采用该相匹配的应用环境对所述待处理任务进行处理,直至该相匹配的应用环境对应的各资源指标的资源空闲量满足预设的空闲条件之后再对所述待处理任务进行处理。
可选的,该利用研发环境中的空闲资源处理任务的方法,还包括:
监控并记录所述待处理任务的任务处理状态及任务处理结果。
为了实现上述目的,根据本发明的另一方面,提供了一种利用研发环境中的空闲资源处理任务的装置,该装置包括:
资源需求信息获取模块,用于获取待处理任务的资源需求信息,其中,所述资源需求信息包括:资源指标名称以及各资源指标各自对应的需求量;
应用环境确定模块,用于从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,其中,所述空闲资源池信息中包含多条空闲资源信息,每条空闲资源信息对应一个应用环境,每条空闲资源信息包含:应用环境对应的每个资源指标各自的资源空闲量;
任务处理模块,用于采用该相匹配的应用环境对所述待处理任务进行处理。
可选的,该利用研发环境中的空闲资源处理任务的装置,还包括:
资源空闲量检测模块,用于对每个应用环境各自对应的每个资源指标的资源空闲量进行检测;
空闲应用环境确定模块,用于若应用环境对应的各资源指标的资源空闲量满足预设的空闲条件,则确定该应用环境为空闲应用环境;
空闲资源池建立模块,用于生成所述空闲应用环境对应的空闲资源信息,并将生成的空闲资源信息添加到所述空闲资源池信息中。
可选的,所述资源需求信息还包括:各资源指标的权重;
所述应用环境确定模块,具体用于根据各资源指标各自对应的需求量以及各资源指标的权重采用最优匹配算法与所述空闲资源池信息中的各空闲资源信息进行匹配,确定出与所述资源需求信息相匹配的应用环境。
可选的,所述任务处理模块,具体用于调用所述待处理任务对应的进程或脚本并采用该相匹配的应用环境进行任务处理。
可选的,该利用研发环境中的空闲资源处理任务的装置,还包括:
应用环境状态监测模块,用于在采用该相匹配的应用环境对所述待处理任务进行处理时,对该相匹配的应用环境对应的每个资源指标的资源空闲量进行检测;
任务启停模块,用于若该相匹配的应用环境对应的各资源指标的资源空闲量不满足预设的空闲条件,则停止采用该相匹配的应用环境对所述待处理任务进行处理,直至该相匹配的应用环境对应的各资源指标的资源空闲量满足预设的空闲条件之后再对所述待处理任务进行处理。
可选的,该利用研发环境中的空闲资源处理任务的装置,还包括:
处理状态监控模块,用于监控并记录所述待处理任务的任务处理状态及任务处理结果。
为了实现上述目的,根据本发明的另一方面,还提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述利用研发环境中的空闲资源处理任务的方法中的步骤。
为了实现上述目的,根据本发明的另一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序在计算机处理器中执行时实现上述利用研发环境中的空闲资源处理任务的方法中的步骤。
本发明的有益效果为:本发明实施例通过获取待处理任务的资源需求信息,进而从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,最后采用该相匹配的应用环境对所述待处理任务进行处理,实现了高效的对研发环境中的空闲资源进行利用的有益效果,有助于减少研发环境的资源浪费以及提高研发环境的资源利用率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1是本发明实施例利用研发环境中的空闲资源处理任务的方法的流程图;
图2是本发明实施例生成空闲资源池信息的流程图;
图3是本发明实施例任务处理的流程图;
图4是本发明另一个实施例利用研发环境中的空闲资源处理任务的方法的流程图;
图5是本发明实施例利用研发环境中的空闲资源处理任务的装置的第一结构框图;
图6是本发明实施例利用研发环境中的空闲资源处理任务的装置的第二结构框图;
图7是本发明实施例利用研发环境中的空闲资源处理任务的装置的第三结构框图;
图8是本发明实施例计算机设备示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
需要说明的是,本发明的利用研发环境中的空闲资源处理任务的方法及装置可用于金融领域,也可以应用于其他技术领域。
本发明提供一种利用研发环境中的空闲资源处理任务的方法,本发针对大型软件中心的各类研发测试环境,通过监测识别并划分出各应用环境的空闲资源,将各应用环境的空闲资源在逻辑上组成资源池,对资源池进行动态管理。将一些独立的计算任务按预评估所需要的资源指标及权重进行计算,形成待处理任务清单。任务调度装置根据待处理任务清单及所需要的各项资源指标、值及权重信息加权计算后,与空闲资源池的资源清单按最优匹配算法进行匹配,任务分配单元将各任务合理、最优分配到对应的空闲资源上运行,最终完成计算任务。本发明通过精细化的管理、灵活可扩展的配置、可视化的报表统计功能,可极大提高空闲资源的周转周期和总体资源利用率,降低研发环境的资源投入成本。
图1是本发明实施例利用研发环境中的空闲资源处理任务的方法的流程图,如图1所示,本实施例的利用研发环境中的空闲资源处理任务的方法包括步骤S101至步骤S103。
步骤S101,获取待处理任务的资源需求信息,其中,所述资源需求信息包括:资源指标名称以及各资源指标各自对应的需求量。
在本发明实施例中,本发明将一些独立的计算任务,如统计分析、批量计算、报表处理等业务计算任务,按预评估所需要的资源情况,形成待处理任务清单,包含任务编号、任务名称、对应的进程或脚本、所需要的各资源指标的需求量及权重等信息。在本发明实施例的待处理任务清单示例如下表1:
表1
步骤S102,从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,其中,所述空闲资源池信息中包含多条空闲资源信息,每条空闲资源信息对应一个应用环境,每条空闲资源信息包含:应用环境对应的每个资源指标各自的资源空闲量。
在本发明实施例中,本发明根据所获取的空闲资源池信息,以及待处理任务清单信息,将待处理任务所需要的各资源指标的需求量,与空闲资源池信息中的每条空闲资源信息进行匹配,确定出与待处理任务最为匹配的应用环境,实现将各任务合理、最优分配到对应的空闲资源上运行。
本发明实施例中的应用环境指的是应用系统研发环境,应用系统研发环境通常由一个或多个服务器组成。
步骤S103,采用该相匹配的应用环境对所述待处理任务进行处理。
在本发明一个实施例中,本步骤具体可以调用所述待处理任务对应的进程或脚本并采用该相匹配的应用环境进行任务处理。
在本发明一个实施例中,在进行上述步骤S103时,本发明还监控并记录所述待处理任务的任务处理状态及任务处理结果。示例可以如下表2:
表2
图2是本发明实施例生成空闲资源池信息的流程图,如图2所示,在本发明一个实施例中,上述空闲资源池信息具体可以由步骤S201至步骤S203生成。
步骤S201,对每个应用环境各自对应的每个资源指标的资源空闲量进行检测。
在本发明实施例中,本发明先针对每个应用环境预设了对应的资源指标,资源指标可以包括:CPU、内存、IO以及磁盘空间等。具体的,本发明可以建立并维护空闲指标字典信息,空闲指标字典信息记录了每个应用环境各自对应的资源指标,用户可以对空闲指标字典信息中的各应用环境对应的资源指标进行增删改查等操作。
在本发明实施例中,一个应用环境可对应多条资源指标,关联关系可新增、修改、删除。本发明还针对每个资源指标设置了对应的资源指标编号,每个资源指标对应一个唯一编号。本发明还自动生成应用环境与资源指标对应的关联编号,每个应用环境与一条资源指标确定唯一一个关联编号,即每个应用环境关联对应一条或多条资源指标及阀值。
步骤S202,若应用环境对应的各资源指标的资源空闲量满足预设的空闲条件,则确定该应用环境为空闲应用环境。
在本发明实施例中,本发明还针对每个应用环境设置了空闲条件,在一个可选实施例中,空闲条件可以为资源指标阀值,表明该应用环境各项资源指标达到多少阀值后才标识为空闲应用环境。在本发明实施例中,各应用环境的空闲条件可以定制修改,以使对应的空闲指标阀值符合自身应用的特点。
在本发明一个实施例中,本发明的空闲指标字典信息以及各应用环境的空闲条件信息,可以如下表3所示:
表3
在本发明实施例中,本发明可以定时或实时监控各应用系统研发环境的空闲资源情况,包含各应用环境的CPU、内存、IO等资源项空闲情况,得到每个应用环境各自对应的每个资源指标的资源空闲量。进而根据上述空闲条件判断各应用环境是否满足空闲标准,确定出所有的空闲应用环境。
步骤S203,生成所述空闲应用环境对应的空闲资源信息,并将生成的空闲资源信息添加到所述空闲资源池信息中。
在本发明实施例中,本发明保存各应用环境满足空闲标准的空闲资源情况,进而根据各应用环境的空闲资源组成空闲资源池。空闲资源池信息的示例可以如下表4:
表4
在本发明一个实施例中,上述步骤S101中的资源需求信息还包括:各资源指标的权重。
上述步骤S102的从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,具体包括:
根据各资源指标各自对应的需求量以及各资源指标的权重采用最优匹配算法与所述空闲资源池信息中的各空闲资源信息进行匹配,确定出与所述资源需求信息相匹配的应用环境。
本发明根据空闲资源池信息,以及待处理任务的资源需求信息,将待处理任务所需要的各项资源指标的需求量及权重信息加权后,与空闲资源池信息中的各空闲资源信息进行匹配,将各任务合理、最优分配到对应的空闲资源上运行。
图3是本发明实施例任务处理的流程图,如图3所示,在本发明一个实施例中,在进行上述步骤S103时,本发明方法还包括步骤S301和步骤S302。
步骤S301,在采用该相匹配的应用环境对所述待处理任务进行处理时,对该相匹配的应用环境对应的每个资源指标的资源空闲量进行检测。
步骤S302,若该相匹配的应用环境对应的各资源指标的资源空闲量不满足预设的空闲条件,则停止采用该相匹配的应用环境对所述待处理任务进行处理,直至该相匹配的应用环境对应的各资源指标的资源空闲量满足预设的空闲条件之后再对所述待处理任务进行处理。
在本发明实施例中,本发明在任务运行过程中,还对运行任务的应用环境上的资源指标进行动态监测,确保不影响原有研发测试应用的运行,并针对资源监控情况,实时调整任务运行进度,如影响原研发测试应用,则暂停任务,并缓存未完成任务的状态,待资源空闲阀值达标后再断点重启所分配的任务。
图4是本发明另一个实施例利用研发环境中的空闲资源处理任务的方法的流程图,如图4所示,本发明方法流程如下:
步骤S1101:维护各应用环境的空闲指标信息,包含维护空闲指标字典、应用环境与空闲指标关联关系、各应用环境的空闲指标阀值信息。
步骤S1102:监控并记录各应用环境满足空闲资源阀值的周期及各项空闲资源详细情况。
步骤S1103:根据应用环境空闲资源信息、应用环境关联的空闲指标项及阀值信息,将环境的空闲资源组装形成空闲资源池清单。
步骤S1104:将一些独立的计算任务按预评估所需要的资源及权重情况,形成详细的待处理任务及所需资源配置清单。
步骤S1105:对待处理任务清单循环处理。
步骤S1106:针对每一个待处理任务,判断当前的空闲资源池清单中是否有相应空闲资源可以匹配该任务资源需求,如果不匹配,则转步骤S1107;如果匹配,则转步骤S1108。
步骤S1107:将该任务标记为未分配状态,转S1105循环处理下一个任务。
步骤S1108:为该任务分配对应的空闲资源,建立分配关系。
步骤S1109:启动该任务,并记录任务的实时运行状态及最终运行结果。
由以上实施例可以看出,本发明提出了一种研发环境空闲资源再利用的方法,其优点主要有如下几方面:
1、充分利用空闲资源且不影响现有环境。
在现有研发环境中识别出空闲时间段及空闲资源,并划分纳入单独的空闲资源池,解决了应用环境长期大量占用研发环境,期间空闲资源未能充分利用的问题。对于需要短期使用大量资源的计算任务,不需要为相关计算任务分配独立的研发环境,可以避免频繁的资源回收或调整配置的情况,充分利用现有研发环境的空闲资源,有效减少资源消耗,节省整体设备资源的投入成本。同时空闲资源池与研发环境逻辑隔离,不影响现有研发环境的开发测试正常稳定运行。
2、计算任务所需资源按权重评估,最优匹配空闲资源。
将一些独立的计算任务,如统计分析、批量计算、报表处理等计算任务,按预评估所需要的资源指标及权重需求,加权计算后,按最优匹配算法分配到对应的空闲资源上运行。
3、指标配置灵活定义,方便快速扩展。
本发明采用参数化定制方法,对应用系统所设置的空闲指标阀值、待处理任务所需资源指标及权重等信息进行参数化配置管理,实现不同应用系统自定义特殊空闲指标、不同计算任务不同资源需求权重,具有良好的适应性和可扩展性。
4、统一集中的分析处理平台,处理效率高,易用性强。
针对大型软件中心研发环境应用环境较多,并且不同应用环境相关资源使用情况差异较大等复杂情况,本发明可在指标配置系统定义各应用系统的资源空闲指标阀值,以便资源池管理装置及任务调度装置计算评估各应用环境的空闲状况及可匹配的计算任务,可实时在报表装置展现空闲资源监控情况、空闲资源分析、分配、计算任务的运行情况。相关分配过程及结果可实时统计展现,能满足大型开发中心大量用户对多个应用环境的空闲资源充分利用的灵活业务需求,实用性强,易于推广。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
基于同一发明构思,本发明实施例还提供了一种利用研发环境中的空闲资源处理任务的装置,可以用于实现上述实施例所描述的利用研发环境中的空闲资源处理任务的方法,如下面的实施例所述。由于利用研发环境中的空闲资源处理任务的装置解决问题的原理与利用研发环境中的空闲资源处理任务的方法相似,因此利用研发环境中的空闲资源处理任务的装置的实施例可以参见利用研发环境中的空闲资源处理任务的方法的实施例,重复之处不再赘述。以下所使用的,术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图5是本发明实施例利用研发环境中的空闲资源处理任务的装置的第一结构框图,如图5所示,本发明实施例利用研发环境中的空闲资源处理任务的装置包括:
资源需求信息获取模块1,用于获取待处理任务的资源需求信息,其中,所述资源需求信息包括:资源指标名称以及各资源指标各自对应的需求量;
应用环境确定模块2,用于从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,其中,所述空闲资源池信息中包含多条空闲资源信息,每条空闲资源信息对应一个应用环境,每条空闲资源信息包含:应用环境对应的每个资源指标各自的资源空闲量;
任务处理模块3,用于采用该相匹配的应用环境对所述待处理任务进行处理。
图6是本发明实施例利用研发环境中的空闲资源处理任务的装置的第二结构框图,如图6所示,本发明实施例利用研发环境中的空闲资源处理任务的装置还包括:
资源空闲量检测模块4,用于对每个应用环境各自对应的每个资源指标的资源空闲量进行检测;
空闲应用环境确定模块5,用于若应用环境对应的各资源指标的资源空闲量满足预设的空闲条件,则确定该应用环境为空闲应用环境;
空闲资源池建立模块6,用于生成所述空闲应用环境对应的空闲资源信息,并将生成的空闲资源信息添加到所述空闲资源池信息中。
在本发明一个实施例中,所述资源需求信息还包括:各资源指标的权重;所述应用环境确定模块2,具体用于根据各资源指标各自对应的需求量以及各资源指标的权重采用最优匹配算法与所述空闲资源池信息中的各空闲资源信息进行匹配,确定出与所述资源需求信息相匹配的应用环境。
在本发明一个实施例中,所述任务处理模块3,具体用于调用所述待处理任务对应的进程或脚本并采用该相匹配的应用环境进行任务处理。
图7是本发明实施例利用研发环境中的空闲资源处理任务的装置的第三结构框图,如图7所示,本发明实施例利用研发环境中的空闲资源处理任务的装置还包括:
应用环境状态监测模块7,用于在采用该相匹配的应用环境对所述待处理任务进行处理时,对该相匹配的应用环境对应的每个资源指标的资源空闲量进行检测;
任务启停模块8,用于若该相匹配的应用环境对应的各资源指标的资源空闲量不满足预设的空闲条件,则停止采用该相匹配的应用环境对所述待处理任务进行处理,直至该相匹配的应用环境对应的各资源指标的资源空闲量满足预设的空闲条件之后再对所述待处理任务进行处理。
在本发明一个实施例中,本发明的利用研发环境中的空闲资源处理任务的装置还包括:
处理状态监控模块,用于监控并记录所述待处理任务的任务处理状态及任务处理结果。
为了实现上述目的,根据本申请的另一方面,还提供了一种计算机设备。如图8所示,该计算机设备包括存储器、处理器、通信接口以及通信总线,在存储器上存储有可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述实施例方法中的步骤。
处理器可以为中央处理器(Central Processing Unit,CPU)。处理器还可以为其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片,或者上述各类芯片的组合。
存储器作为一种非暂态计算机可读存储介质,可用于存储非暂态软件程序、非暂态计算机可执行程序以及单元,如本发明上述方法实施例中对应的程序单元。处理器通过运行存储在存储器中的非暂态软件程序、指令以及模块,从而执行处理器的各种功能应用以及作品数据处理,即实现上述方法实施例中的方法。
存储器可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储处理器所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中,存储器可选包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至处理器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个单元存储在所述存储器中,当被所述处理器执行时,执行上述实施例中的方法。
上述计算机设备具体细节可以对应参阅上述实施例中对应的相关描述和效果进行理解,此处不再赘述。
为了实现上述目的,根据本申请的另一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序在计算机处理器中执行时实现上述利用研发环境中的空闲资源处理任务的方法中的步骤。本领域技术人员可以理解,实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)、随机存储记忆体(RandomAccessMemory,RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive,缩写:HDD)或固态硬盘(Solid-State Drive,SSD)等;所述存储介质还可以包括上述种类的存储器的组合。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (14)
1.一种利用研发环境中的空闲资源处理任务的方法,其特征在于,包括:
获取待处理任务的资源需求信息,其中,所述资源需求信息包括:资源指标名称以及各资源指标各自对应的需求量;
从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,其中,所述空闲资源池信息中包含多条空闲资源信息,每条空闲资源信息对应一个应用环境,每条空闲资源信息包含:应用环境对应的每个资源指标各自的资源空闲量;
采用该相匹配的应用环境对所述待处理任务进行处理。
2.根据权利要求1所述的利用研发环境中的空闲资源处理任务的方法,其特征在于,还包括:
对每个应用环境各自对应的每个资源指标的资源空闲量进行检测;
若应用环境对应的各资源指标的资源空闲量满足预设的空闲条件,则确定该应用环境为空闲应用环境;
生成所述空闲应用环境对应的空闲资源信息,并将生成的空闲资源信息添加到所述空闲资源池信息中。
3.根据权利要求1所述的利用研发环境中的空闲资源处理任务的方法,其特征在于,所述资源需求信息还包括:各资源指标的权重;
所述从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,具体包括:
根据各资源指标各自对应的需求量以及各资源指标的权重采用最优匹配算法与所述空闲资源池信息中的各空闲资源信息进行匹配,确定出与所述资源需求信息相匹配的应用环境。
4.根据权利要求1所述的利用研发环境中的空闲资源处理任务的方法,其特征在于,所述采用该相匹配的应用环境对所述待处理任务进行处理,具体包括:
调用所述待处理任务对应的进程或脚本并采用该相匹配的应用环境进行任务处理。
5.根据权利要求1所述的利用研发环境中的空闲资源处理任务的方法,其特征在于,还包括:
在采用该相匹配的应用环境对所述待处理任务进行处理时,对该相匹配的应用环境对应的每个资源指标的资源空闲量进行检测;
若该相匹配的应用环境对应的各资源指标的资源空闲量不满足预设的空闲条件,则停止采用该相匹配的应用环境对所述待处理任务进行处理,直至该相匹配的应用环境对应的各资源指标的资源空闲量满足预设的空闲条件之后再对所述待处理任务进行处理。
6.根据权利要求1所述的利用研发环境中的空闲资源处理任务的方法,其特征在于,还包括:
监控并记录所述待处理任务的任务处理状态及任务处理结果。
7.一种利用研发环境中的空闲资源处理任务的装置,其特征在于,包括:
资源需求信息获取模块,用于获取待处理任务的资源需求信息,其中,所述资源需求信息包括:资源指标名称以及各资源指标各自对应的需求量;
应用环境确定模块,用于从空闲资源池信息中确定出与所述资源需求信息相匹配的应用环境,其中,所述空闲资源池信息中包含多条空闲资源信息,每条空闲资源信息对应一个应用环境,每条空闲资源信息包含:应用环境对应的每个资源指标各自的资源空闲量;
任务处理模块,用于采用该相匹配的应用环境对所述待处理任务进行处理。
8.根据权利要求7所述的利用研发环境中的空闲资源处理任务的装置,其特征在于,还包括:
资源空闲量检测模块,用于对每个应用环境各自对应的每个资源指标的资源空闲量进行检测;
空闲应用环境确定模块,用于若应用环境对应的各资源指标的资源空闲量满足预设的空闲条件,则确定该应用环境为空闲应用环境;
空闲资源池建立模块,用于生成所述空闲应用环境对应的空闲资源信息,并将生成的空闲资源信息添加到所述空闲资源池信息中。
9.根据权利要求7所述的利用研发环境中的空闲资源处理任务的装置,其特征在于,所述资源需求信息还包括:各资源指标的权重;
所述应用环境确定模块,具体用于根据各资源指标各自对应的需求量以及各资源指标的权重采用最优匹配算法与所述空闲资源池信息中的各空闲资源信息进行匹配,确定出与所述资源需求信息相匹配的应用环境。
10.根据权利要求7所述的利用研发环境中的空闲资源处理任务的装置,其特征在于,所述任务处理模块,具体用于调用所述待处理任务对应的进程或脚本并采用该相匹配的应用环境进行任务处理。
11.根据权利要求7所述的利用研发环境中的空闲资源处理任务的装置,其特征在于,还包括:
应用环境状态监测模块,用于在采用该相匹配的应用环境对所述待处理任务进行处理时,对该相匹配的应用环境对应的每个资源指标的资源空闲量进行检测;
任务启停模块,用于若该相匹配的应用环境对应的各资源指标的资源空闲量不满足预设的空闲条件,则停止采用该相匹配的应用环境对所述待处理任务进行处理,直至该相匹配的应用环境对应的各资源指标的资源空闲量满足预设的空闲条件之后再对所述待处理任务进行处理。
12.根据权利要求7所述的利用研发环境中的空闲资源处理任务的装置,其特征在于,还包括:
处理状态监控模块,用于监控并记录所述待处理任务的任务处理状态及任务处理结果。
13.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6任一项所述的方法。
14.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序在计算机处理器中执行时实现如权利要求1至6任意一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110464932.1A CN113064714B (zh) | 2021-04-28 | 2021-04-28 | 利用研发环境中的空闲资源处理任务的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110464932.1A CN113064714B (zh) | 2021-04-28 | 2021-04-28 | 利用研发环境中的空闲资源处理任务的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113064714A true CN113064714A (zh) | 2021-07-02 |
CN113064714B CN113064714B (zh) | 2024-08-02 |
Family
ID=76567947
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110464932.1A Active CN113064714B (zh) | 2021-04-28 | 2021-04-28 | 利用研发环境中的空闲资源处理任务的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113064714B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017113074A1 (zh) * | 2015-12-28 | 2017-07-06 | 华为技术有限公司 | 一种资源的分配方法、装置和系统 |
CN111078402A (zh) * | 2019-12-03 | 2020-04-28 | 广州西麦科技股份有限公司 | 一种快速提供实验环境的资源池系统 |
CN111880914A (zh) * | 2020-07-20 | 2020-11-03 | 北京百度网讯科技有限公司 | 资源调度方法、资源调度装置、电子设备和存储介质 |
-
2021
- 2021-04-28 CN CN202110464932.1A patent/CN113064714B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017113074A1 (zh) * | 2015-12-28 | 2017-07-06 | 华为技术有限公司 | 一种资源的分配方法、装置和系统 |
CN111078402A (zh) * | 2019-12-03 | 2020-04-28 | 广州西麦科技股份有限公司 | 一种快速提供实验环境的资源池系统 |
CN111880914A (zh) * | 2020-07-20 | 2020-11-03 | 北京百度网讯科技有限公司 | 资源调度方法、资源调度装置、电子设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113064714B (zh) | 2024-08-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10523580B2 (en) | Automatic cloud provisioning based on related internet news and social network trends | |
CN106598735B (zh) | 一种分布式计算方法、主控节点和计算系统 | |
CN106874100B (zh) | 计算资源分配方法及装置 | |
CN115373835A (zh) | Flink集群的任务资源调整方法、装置及电子设备 | |
US10331484B2 (en) | Distributed data platform resource allocator | |
CN113760677A (zh) | 异常链路分析方法、装置、设备及存储介质 | |
CN110865877A (zh) | 一种任务请求的响应方法及设备 | |
CN107193749B (zh) | 测试方法、装置及设备 | |
CN112817687A (zh) | 一种数据同步方法和装置 | |
CN108255710B (zh) | 一种脚本的异常检测方法及其终端 | |
CN116662001A (zh) | 一种事件处理方法及装置 | |
CN113064714B (zh) | 利用研发环境中的空闲资源处理任务的方法及装置 | |
CN116126719A (zh) | 接口测试方法、装置、电子设备及存储介质 | |
CN113722141B (zh) | 数据任务的延迟原因确定方法、装置、电子设备及介质 | |
CN109302723A (zh) | 一种基于互联网的多节点实时无线电监测控制系统及控制方法 | |
CN114862223A (zh) | 一种机器人调度方法、装置、设备及存储介质 | |
CN114520773A (zh) | 一种服务请求的响应方法、装置、服务器及存储介质 | |
CN110247802B (zh) | 针对云服务单机环境的资源配置方法及装置 | |
CN114064403A (zh) | 一种任务延迟分析处理方法和装置 | |
CN113869882A (zh) | 一种数据处理方法、装置、介质 | |
CN110493071B (zh) | 消息系统资源均衡装置、方法及设备 | |
CN110955579A (zh) | 一种基于Ambari的大数据平台的监测方法 | |
CN112395081A (zh) | 一种资源在线自动回收方法、系统、服务器以及存储介质 | |
CN111194009B (zh) | Gps信息提取方法、装置、设备及存储介质 | |
CN114328549B (zh) | 数据处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |