CN107809323A - 一种资源的控制方法、装置及系统 - Google Patents

一种资源的控制方法、装置及系统 Download PDF

Info

Publication number
CN107809323A
CN107809323A CN201610811885.2A CN201610811885A CN107809323A CN 107809323 A CN107809323 A CN 107809323A CN 201610811885 A CN201610811885 A CN 201610811885A CN 107809323 A CN107809323 A CN 107809323A
Authority
CN
China
Prior art keywords
resource
container
stock number
information
terminable
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610811885.2A
Other languages
English (en)
Other versions
CN107809323B (zh
Inventor
关涛
汪绍飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201610811885.2A priority Critical patent/CN107809323B/zh
Publication of CN107809323A publication Critical patent/CN107809323A/zh
Application granted granted Critical
Publication of CN107809323B publication Critical patent/CN107809323B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供一种资源的控制方法、装置及系统,该方法包括:接收一用于将预设资源类型的资源量调整至目标资源量的资源调整指示信息;向资源管理器RM发送更新所述NM的资源量的资源更新通知信息,其中若当前所述预设资源类型占用的资源量大于所述目标资源量,则所述资源更新通知信息中携带有第一资源标识信息。本发明通过节点管理器接收资源调整指示信息,并向资源管理器发送资源更新通知消息,使得资源管理器控制节点管理器调整资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率。

Description

一种资源的控制方法、装置及系统
技术领域
本发明涉及大数据领域,特别是涉及一种资源的控制方法、装置及系统。
背景技术
随着大数据处理技术的发展,对数据处理过程中所占用的处理资源越来越有必要进行控制。Yarn(Yet Another Resource Negotiator,另一种资源协调者)是大数据处理领域被广泛应用的一种数据处理资源管理组件。
Yarn分为RM(Resource Manager,资源管理器)和(Node Manager,节点管理器)。其中,NM向RM上报自己可用的资源,RM根据作业的请求进行分配。
但现有技术中,Yarn的NM在启动后,只能使用预先配置好的资源量,无法动态变更自己可用的资源量。如果NM所在节点上还存在其它系统也需要处理资源,则即便分配给NM的资源并未被完全使用,其它系统也不能便占用这些资源。如果要调整,需要操作者确认调整后的资源量和当前正在运行的作业的资源需求是否匹配,并且需要重启NM,处理步骤复杂且不够智能化。
发明内容
本发明的目的在于提供一种资源的控制方法、装置及系统,用以解决现有技术中NM所占用的数据处理资源调整困难的问题。
为了解决上述技术问题,本发明实施例提供一种资源的控制方法,包括:
接收一用于将预设资源类型的资源量调整至目标资源量的资源调整指示信息;
根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息,其中若当前所述预设资源类型占用的资源量大于所述目标资源量,则所述资源更新通知信息中携带有第一资源标识信息。
其中,若当前所述预设资源类型占用的资源量小于或等于所述目标资源量,则所述资源更新通知信息中携带有第二资源标识信息。
其中,所述根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息之后的步骤,包括:
接收所述RM根据所述第一资源标识信息发送的终止容器指示信息,所述终止容器指示信息携带有待终止的容器的信息;
根据所述终止容器指示信息,终止所述待终止的容器,并释放所述待终止的容器占用的资源量,使所述预设资源类型的资源量调整至目标资源量。
本发明实施例还提供一种资源的控制装置,包括:
第一接收模块,用于接收一用于将预设资源类型的资源量调整至目标资源量的资源调整指示信息;
发送模块,用于根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息,其中若当前所述预设资源类型占用的资源量大于所述目标资源量,则所述资源更新通知信息中携带有第一资源标识信息。
其中,若当前所述预设资源类型占用的资源量小于或等于所述目标资源量,则所述资源更新通知信息中携带有第二资源标识信息。
其中,所述控制装置还包括:
第二接收模块,用于接收所述RM根据所述第一资源标识信息发送的终止容器指示信息,所述终止容器指示信息携带有待终止的容器的信息;
终止释放模块,用于根据所述终止容器指示信息,终止所述待终止的容器,并释放所述待终止的容器占用的资源量,使所述预设资源类型的资源量调整至目标资源量。
本发明实施例还提供一种节点管理器,包括上述实施例所述的资源的控制装置。
本发明实施例还提供一种资源的控制方法,应用于资源管理器RM,包括:
接收节点管理器NM发送的更新所述NM的资源量的资源更新通知信息;
判断所述资源更新通知信息中是否携带有第一资源标识信息,得到判断结果,所述第一资源标识信息表示所述NM中预设资源类型占用的资源量大于目标资源量;
根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量。
其中,所述根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量的步骤包括:
若所述资源更新通知信息中携带有所述第一资源标识信息,则选择所述NM上可终止的容器;
向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息,所述第一终止容器指示信息用于指示所述AM终止所述可终止的容器,并释放所述可终止的占用的资源量。
其中,向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息之后的步骤,包括:
若在预设时间内检测到所述AM未终止所述可终止的容器,则向所述可终止的容器所归属的NM发送第二终止容器指示信息,所述第二终止容器指示信息用于指示所述NM终止所述可终止的容器,并释放所述可终止的容器占用的资源量。
其中,所述根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量的步骤包括:
若所述资源更新通知信息中未携带有所述第一资源标识信息或携带有第二资源标识信息,则控制所述NM将所述预设资源类型的资源量调整至所述目标资源量,所述第二资源标识信息表示所述NM中预设资源类型占用的资源量小于或等于目标资源量。
本发明实施例还提供一种资源的控制装置,包括:
第三接收模块,用于接收节点管理器NM发送的更新所述NM的资源量的资源更新通知信息;
判断模块,用于判断所述资源更新通知信息中是否携带有第一资源标识信息,得到判断结果,所述第一资源标识信息表示所述NM中预设资源类型占用的资源量大于目标资源量;
控制模块,用于根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量。
其中,所述控制模块包括:
选择单元,用于若所述资源更新通知信息中携带有所述第一资源标识信息,则选择所述NM上可终止的容器;
第一发送单元,用于向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息,所述第一终止容器指示信息用于指示所述AM终止所述可终止的容器,并释放所述可终止的占用的资源量。
其中,所述控制模块还包括:
第二发送单元,用于向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息后,若在预设时间内检测到所述AM未终止所述可终止的容器,则向所述可终止的容器所归属的NM发送第二终止容器指示信息,所述第二终止容器指示信息用于指示所述NM终止所述可终止的容器,并释放所述可终止的容器占用的资源量。
其中,所述控制模块还包括:
控制单元,用于若所述资源更新通知信息中未携带有所述第一资源标识信息或携带有第二资源标识信息,则控制所述NM将所述预设资源类型的资源量调整至所述目标资源量,所述第二资源标识信息表示所述NM中预设资源类型占用的资源量小于或等于目标资源量。
本发明实施例还提供一种资源管理器,包括上述实施例所述的资源的控制装置。
本发明实施例还提供一种资源管理系统,包括:节点管理器以及资源管理器;
其中,所述节点管理器包括上述实施例所述的资源的控制装置;
所述资源管理器包括上述实施例所述的资源的控制装置。
本发明的上述技术方案的有益效果如下:
本发明实施例的上述方案中,通过节点管理器接收资源调整指示信息,并向资源管理器发送资源更新通知消息,使得资源管理器控制节点管理器调整资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率。
附图说明
图1为本发明实施例的资源的控制方法的基本步骤示意图之一;
图2为本发明实施例的资源的控制装置的组成结构示意图之一;
图3为本发明实施例的资源的控制方法的基本步骤示意图之一;
图4为本发明实施例的资源的控制装置的组成结构示意图之二;
图5为本发明实施例的资源管理系统框图;
图6为本发明实施例的资源的控制方法的具体流程示意图。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚,下面将结合附图及具体实施例进行详细描述。
本发明针对现有技术中NM所占用的数据处理资源调整困难的问题,提供一种资源的控制方法,可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率。
第一实施例
如图1所示,本发明实施例提供一种资源的控制方法,应用于节点管理器NM,包括:
步骤11,接收一用于将预设资源类型的资源量调整至目标资源量的资源调整指示信息;
需要说明的是,所述资源一般是指用于处理数据的资源;其中,预设资源类型可以包括:内存、CPU等类型。
这里,可通过RPC(Remote Procedure Calls,远程过程调用)接口接收外部的资源调整指示信息,也可以通过扫描配置文件来获取资源调整指示信息。
这里,RPC接口主要目的是为组件提供一种相互通信的接口。
步骤12,根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息,其中若当前所述预设资源类型占用的资源量大于所述目标资源量,则所述资源更新通知信息中携带有第一资源标识信息。
需要说明的是,在向资源管理器RM发送更新NM的资源量的资源更新通知信息之前,NM根据资源调整指示信息中的目标资源量,判断当前占用的资源量是否超限,也就是当前占用的资源量是否大于目标资源量。
这里,资源更新通知消息中还携带有资源待调整的目标资源量。
本发明实施例提供的资源的控制方法,通过节点管理器接收资源调整指示信息,并向资源管理器发送资源更新通知消息,使得资源管理器控制节点管理器调整资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率,同时节省NM资源调整中人工操作的一些步骤,NM不重启,不会临时中断服务,提高计算资源的使用效率。
可选的,若当前所述预设资源类型占用的资源量小于或等于所述目标资源量,则所述资源更新通知信息中携带有第二资源标识信息。
这里,所述第二资源标识信息表明当前预设资源类型占用的资源量未超限。当然,第二资源标识信息为可选信息,也就是说,若当前预设资源类型占用的资源量小于或等于目标资源量时,资源更新通知消息中可不必携带标识信息,也就是第二资源标识信息。
优选的,本发明实施例的资源的控制方法,还可进一步包括:
步骤13,在根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息之后,接收所述RM根据所述第一资源标识信息发送的终止容器指示信息,所述终止容器指示信息携带有待终止的容器的信息;
这里,终止容器指示信息用于终止正在作业的容器,释放容器当前占用的资源量。
步骤14,根据所述终止容器指示信息,终止所述待终止的容器,并释放所述待终止的容器占用的资源量,使所述预设资源类型的资源量调整至目标资源量。
这里,需要说明的是,NM在接收RM根据第一资源标识信息发送的终止容器指示信息前,在NM管理下的主应用程序AM先接收到该终止容器指示信息。这里,终止容器指示信息所指示的待终止的容器由AM直接控制。换句话说,RM首先向AM发送终止容器指示信息,当检测到AM未对待终止的容器进行处理时,再向NM发送终止容器指示信息。
本发明实施例提供的资源的控制方法,通过节点管理器接收资源调整指示信息,并向资源管理器发送资源更新通知消息,使得资源管理器控制节点管理器调整资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率,同时节省NM资源调整中人工操作的一些步骤,NM不重启,不会临时中断服务,提高计算资源的使用效率。
第二实施例
如图2所示,本发明实施例还提供一种资源的控制装置,包括:
第一接收模块21,用于接收一用于将预设资源类型的资源量调整至目标资源量的资源调整指示信息;
需要说明的是,所述资源一般是指用于处理数据的资源;其中,预设资源类型可以包括:内存、CPU等类型。
这里,可通过RPC(Remote Procedure Calls,远程过程调用)接口接收外部的资源调整指示信息,也可以通过扫描配置文件来获取资源调整指示信息。
这里,RPC接口主要目的是为组件提供一种相互通信的接口。
发送模块22,用于根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息,其中若当前所述预设资源类型占用的资源量大于所述目标资源量,则所述资源更新通知信息中携带有第一资源标识信息。
需要说明的是,在向资源管理器RM发送更新NM的资源量的资源更新通知信息之前,NM根据资源调整指示信息中的目标资源量,判断当前占用的资源量是否超限,也就是当前占用的资源量是否大于目标资源量。
这里,资源更新通知消息中还携带有资源待调整的目标资源量。
具体的,若当前所述预设资源类型占用的资源量小于或等于所述目标资源量,则所述资源更新通知信息中携带有第二资源标识信息。
这里,所述第二资源标识信息表明当前预设资源类型占用的资源量未超限。当然,第二资源标识信息为可选信息,也就是说,若当前预设资源类型占用的资源量小于或等于目标资源量时,资源更新通知消息中可不必携带标识信息,也就是第二资源标识信息。
具体的,本发明实施例的资源的控制装置还可具体包括:
第二接收模块23,用于接收所述RM根据所述第一资源标识信息发送的终止容器指示信息,所述终止容器指示信息携带有待终止的容器的信息;
这里,终止容器指示信息用于终止正在作业的容器,释放容器当前占用的资源量。
终止释放模块24,用于根据所述终止容器指示信息,终止所述待终止的容器,并释放所述待终止的容器占用的资源量,使所述预设资源类型的资源量调整至目标资源量。
这里,需要说明的是,NM在接收RM根据第一资源标识信息发送的终止容器指示信息前,在NM管理下的主应用程序AM先接收到该终止容器指示信息。这里,终止容器指示信息所指示的待终止的容器由AM直接控制。换句话说,RM首先向AM发送终止容器指示信息,当检测到AM未对待终止的容器进行处理时,再向NM发送终止容器指示信息。
本发明实施例还提供一种节点管理器NM,包括如上述所述的资源的控制装置。
本发明实施例提供的资源的控制装置,通过节点管理器的第一接收模块接收资源调整指示信息,发送模块根据资源调整指示信息,向资源管理器发送资源更新通知消息,使得资源管理器控制节点管理器调整资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率,同时节省NM资源调整中人工操作的一些步骤,NM不重启,不会临时中断服务,提高计算资源的使用效率。
第三实施例
如图3所示,本发明实施例还提供一种资源的控制方法,应用于资源管理器RM,包括:
步骤31,接收节点管理器NM发送的更新所述NM的资源量的资源更新通知信息;
这里,资源更新通知信息中携带有NM中预设资源类型的资源量要调整到的目标资源量。
这里,所述资源一般是指用于处理数据的资源。
步骤32,判断所述资源更新通知信息中是否携带有第一资源标识信息,得到判断结果,所述第一资源标识信息表示所述NM中预设资源类型占用的资源量大于目标资源量;
这里,第一资源标识信息表明NM中预设资源类型当前占用的资源量超限。
步骤33,根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量。
本发明实施例提供的资源的控制方法,通过接收节点管理器NM发送的更新NM的资源量的资源更新通知信息,控制NM将预设资源类型的资源量调整至目标资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率,同时节省NM资源调整中人工操作的一些步骤,NM不重启,不会临时中断服务,提高计算资源的使用效率。
优选的,本发明实施例的资源的控制方法,步骤33还可进一步包括:
步骤331,若所述资源更新通知信息中携带有所述第一资源标识信息,则选择所述NM上可终止的容器;
这里,在选择NM上可终止的容器时,可根据预先设置的容器终止优先权,选择可终止的容器。这里,预先设置的容器终止优先权可以确定优先选择终止哪一个正在作业的容器。
当然,也可以根据正在作业的容器中运行的程序的重要级别,选择可终止的容器。也就是,选择重要级别低的容器作为终止对象。
步骤332,向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息,所述第一终止容器指示信息用于指示所述AM终止所述可终止的容器,并释放所述可终止的占用的资源量。
优选的,本发明实施例的资源的控制方法,步骤33还可进一步包括:
步骤333,若所述资源更新通知信息中未携带有所述第一资源标识信息或携带有第二资源标识信息,则控制所述NM将所述预设资源类型的资源量调整至所述目标资源量,所述第二资源标识信息表示所述NM中预设资源类型占用的资源量小于或等于目标资源量。
这里,所述第二资源标识信息表示当前所述预设资源类型占用的资源量小于或等于所述目标资源量,也就是,当前预设资源类型占用的资源量未超限。
本发明实施例提供的资源的控制方法,通过接收节点管理器NM发送的更新NM的资源量的资源更新通知信息,控制NM将预设资源类型的资源量调整至目标资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率,同时节省NM资源调整中人工操作的一些步骤,NM不重启,不会临时中断服务,提高计算资源的使用效率。
第四实施例
如图4所示,本发明实施例还提供一种资源的控制装置,包括:
第三接收模块41,用于接收节点管理器NM发送的更新所述NM的资源量的资源更新通知信息;
这里,资源更新通知信息中携带有NM中预设资源类型的资源量要调整到的目标资源量。
这里,所述资源一般是指用于处理数据的资源。
判断模块42,用于判断所述资源更新通知信息中是否携带有第一资源标识信息,得到判断结果,所述第一资源标识信息表示所述NM中预设资源类型占用的资源量大于目标资源量;
这里,第一资源标识信息表明NM中预设资源类型当前占用的资源量超限。
控制模块43,用于根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量。
具体的,本发明实施例的控制模块43可具体包括:
选择单元,用于若所述资源更新通知信息中携带有所述第一资源标识信息,则选择所述NM上可终止的容器;
这里,在选择NM上可终止的容器时,可根据预先设置的容器终止优先权,选择可终止的容器。这里,预先设置的容器终止优先权可以确定优先选择终止哪一个正在作业的容器。
当然,也可以根据正在作业的容器中运行的程序的重要级别,选择可终止的容器。也就是,选择重要级别低的容器作为终止对象。
第一发送单元,用于向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息,所述第一终止容器指示信息用于指示所述AM终止所述可终止的容器,并释放所述可终止的占用的资源量。
具体的,本发明实施例的控制模块43还可具体包括:
第二发送单元,用于向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息后,若在预设时间内检测到所述AM未终止所述可终止的容器,则向所述可终止的容器所归属的NM发送第二终止容器指示信息,所述第二终止容器指示信息用于指示所述NM终止所述可终止的容器,并释放所述可终止的容器占用的资源量。
具体的,本发明实施例中的所述控制模块43还可具体包括:
控制单元,用于若所述资源更新通知信息中未携带有所述第一资源标识信息或携带有第二资源标识信息,则控制所述NM将所述预设资源类型的资源量调整至所述目标资源量,所述第二资源标识信息表示所述NM中预设资源类型占用的资源量小于或等于目标资源量。
这里,所述第二资源标识信息表示当前所述预设资源类型占用的资源量小于或等于所述目标资源量,也就是,当前预设资源类型占用的资源量未超限。
本发明实施例还提供一种资源管理器RM,包括如上述所述的资源的控制装置。
本发明实施例还提供一种资源管理系统,如图5所示,包括节点管理器以及资源管理器,其中,所述节点管理器包括如第二实施例中所述的资源的控制装置;所述资源管理器包括如第四实施例中所述的资源的控制装置。
这里,资源管理器可以控制管理多个节点管理器,比如节点管理器X、节点管理器Y等等,一个节点管理器可以运行多个容器。资源管理器与节点管理器均可看作是资源管理系统中的组件。组件间相互通信可通过RPC接口。
本发明实施例提供的资源的控制装置,通过第三接收模块接收节点管理器NM发送的更新NM的资源量的资源更新通知信息,控制模块控制NM将预设资源类型的资源量调整至目标资源量,从而可动态控制NM所占用的数据处理资源,提高数据处理资源的使用效率,同时节省NM资源调整中人工操作的一些步骤,NM不重启,不会临时中断服务,提高计算资源的使用效率。
第五实施例
如6所示,为本发明实施例的资源的控制方法的具体流程图。下面就该图具体说明该控制方法的实施过程。
步骤501,节点管理器NM接收资源调整指示信息;
这里,资源调整指示信息中包括:待调整的资源类型,目标资源量等。
步骤502,NM判断资源调整指示信息中的目标资源量是否低于当前NM占用的资源量;
步骤503,NM向资源管理器RM发送资源更新通知信息;
这里,资源更新通知信息也可以理解为资源量报告信息,该信息中携带有目标资源量;当目标资源量低于当前NM占用的资源量时,还可携带资源超限标志。
步骤504,RM更新此NM的资源配额,且若此NM的资源超限,则选择可终止的容器列表;
这里,NM的资源配额为目标资源量。该资源配额用于控制NM根据资源配额中指示的目标资源量调整NM的资源量。
步骤505,RM向可终止容器归属的AM发送终止容器指示信息,所述终止容器指示信息携带有可终止的容器信息。
步骤506,RM在预设时间内,检测到AM未终止可终止的容器,则向可终止的容器归属的NM发送终止容器指示信息,所述终止容器指示信息携带有可终止的容器信息。
这里,本步骤说明,AM可以选择终止可终止的容器,释放资源,或者不处理。
步骤507,NM终止可终止的容器,释放资源。
这里,以需要某个NM调整内存,比现在内存量减少30G为例,具体步骤如下:
步骤一:NM接收到内存资源量调整指示信息。
步骤二:NM分析该指示信息中的内容,确定需要调整的资源类型为内存,目标内存总量比现有内存总量减少30G。
也就是,需将本NM内存资源总量调整为目标内存总量。
步骤三:统计本NM所启动的容器信息,汇总占用的内存总量。
步骤四:判断当前占用的内存总量是否超出目标内存总量。假设超过了目标内存总量5G。
步骤五:向RM发送资源报告,携带资源超限标志,指示本NM管理的内存资源使用超限5G容量。
步骤六:RM根据资源报告内容,更新RM内存储的此NM的内存资源容量,比原有量减少30G。
步骤七:RM分析资源报告内容,检测到有资源超限标志,类型为内存,超限容量为5G。
步骤八:RM分析此NM所启动的容器信息,查找可终止的容器列表,以在此NM上释放5G内存。
步骤九:RM根据容器所属的AM,向对应的AM发送终止容器请求。
步骤十:情形一,AM选择对应的可终止的容器,释放资源。
情形二,AM选择不处理RM发送的终止容器请求,RM在等待预设时间后,向对应的NM发送终止容器请求。
步骤十一:NM终止请求内的可终止的容器。
最后,NM的占用内存下降到目标内存总量。
以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明所述原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (17)

1.一种资源的控制方法,应用于节点管理器NM,其特征在于,包括:
接收一用于将预设资源类型的资源量调整至目标资源量的资源调整指示信息;
根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息,其中若当前所述预设资源类型占用的资源量大于所述目标资源量,则所述资源更新通知信息中携带有第一资源标识信息。
2.根据权利要求1所述的资源的控制方法,其特征在于,若当前所述预设资源类型占用的资源量小于或等于所述目标资源量,则所述资源更新通知信息中携带有第二资源标识信息。
3.根据权利要求1所述的资源的控制方法,其特征在于,所述根据所述资源调整指示信息,向资源管理器RM发送更新所述NM的资源量的资源更新通知信息之后的步骤,包括:
接收所述RM根据所述第一资源标识信息发送的终止容器指示信息,所述终止容器指示信息携带有待终止的容器的信息;
根据所述终止容器指示信息,终止所述待终止的容器,并释放所述待终止的容器占用的资源量,使所述预设资源类型的资源量调整至目标资源量。
4.一种资源的控制装置,其特征在于,包括:
第一接收模块,用于接收一用于将预设资源类型的资源量调整至目标资源量的资源调整指示信息;
发送模块,用于根据所述资源调整指示信息,向资源管理器RM发送更新NM的资源量的资源更新通知信息,其中若当前所述预设资源类型占用的资源量大于所述目标资源量,则所述资源更新通知信息中携带有第一资源标识信息。
5.根据权利要求4所述的资源的控制装置,其特征在于,若当前所述预设资源类型占用的资源量小于或等于所述目标资源量,则所述资源更新通知信息中携带有第二资源标识信息。
6.根据权利要求4所述的资源的控制装置,其特征在于,所述控制装置还包括:
第二接收模块,用于接收所述RM根据所述第一资源标识信息发送的终止容器指示信息,所述终止容器指示信息携带有待终止的容器的信息;
终止释放模块,用于根据所述终止容器指示信息,终止所述待终止的容器,并释放所述待终止的容器占用的资源量,使所述预设资源类型的资源量调整至目标资源量。
7.一种节点管理器,其特征在于,包括如权利要求4~6任一项所述的资源的控制装置。
8.一种资源的控制方法,应用于资源管理器RM,其特征在于,包括:
接收节点管理器NM发送的更新所述NM的资源量的资源更新通知信息;
判断所述资源更新通知信息中是否携带有第一资源标识信息,得到判断结果,所述第一资源标识信息表示所述NM中预设资源类型占用的资源量大于目标资源量;
根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量。
9.根据权利要求8所述的资源的控制方法,其特征在于,所述根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量的步骤包括:
若所述资源更新通知信息中携带有所述第一资源标识信息,则选择所述NM上可终止的容器;
向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息,所述第一终止容器指示信息用于指示所述AM终止所述可终止的容器,并释放所述可终止的占用的资源量。
10.根据权利要求9所述的资源的控制方法,其特征在于,向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息之后的步骤,包括:
若在预设时间内检测到所述AM未终止所述可终止的容器,则向所述可终止的容器所归属的NM发送第二终止容器指示信息,所述第二终止容器指示信息用于指示所述NM终止所述可终止的容器,并释放所述可终止的容器占用的资源量。
11.根据权利要求8所述的资源的控制方法,其特征在于,所述根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量的步骤包括:
若所述资源更新通知信息中未携带有所述第一资源标识信息或携带有第二资源标识信息,则控制所述NM将所述预设资源类型的资源量调整至所述目标资源量,所述第二资源标识信息表示所述NM中预设资源类型占用的资源量小于或等于目标资源量。
12.一种资源的控制装置,其特征在于,包括:
第三接收模块,用于接收节点管理器NM发送的更新所述NM的资源量的资源更新通知信息;
判断模块,用于判断所述资源更新通知信息中是否携带有第一资源标识信息,得到判断结果,所述第一资源标识信息表示所述NM中预设资源类型占用的资源量大于目标资源量;
控制模块,用于根据所述判断结果,控制所述NM将所述预设资源类型的资源量调整至所述目标资源量。
13.根据权利要求12所述的资源的控制装置,其特征在于,所述控制模块包括:
选择单元,用于若所述资源更新通知信息中携带有所述第一资源标识信息,则选择所述NM上可终止的容器;
第一发送单元,用于向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息,所述第一终止容器指示信息用于指示所述AM终止所述可终止的容器,并释放所述可终止的占用的资源量。
14.根据权利要求13所述的资源的控制装置,其特征在于,所述控制模块还包括:
第二发送单元,用于向所述可终止的容器所归属的主应用程序AM发送第一终止容器指示信息后,若在预设时间内检测到所述AM未终止所述可终止的容器,则向所述可终止的容器所归属的NM发送第二终止容器指示信息,所述第二终止容器指示信息用于指示所述NM终止所述可终止的容器,并释放所述可终止的容器占用的资源量。
15.根据权利要求12所述的资源的控制装置,其特征在于,所述控制模块还包括:
控制单元,用于若所述资源更新通知信息中未携带有所述第一资源标识信息或携带有第二资源标识信息,则控制所述NM将所述预设资源类型的资源量调整至所述目标资源量,所述第二资源标识信息表示所述NM中预设资源类型占用的资源量小于或等于目标资源量。
16.一种资源管理器,其特征在于,包括如权利要求12~15任一项所述的资源的控制装置。
17.一种资源管理系统,其特征在于,包括:节点管理器以及资源管理器;
其中,所述节点管理器包括如权利要求4~6任一项所述的资源的控制装置;
所述资源管理器包括如权利要求12~15任一项所述的资源的控制装置。
CN201610811885.2A 2016-09-08 2016-09-08 一种资源的控制方法、装置及系统 Active CN107809323B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610811885.2A CN107809323B (zh) 2016-09-08 2016-09-08 一种资源的控制方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610811885.2A CN107809323B (zh) 2016-09-08 2016-09-08 一种资源的控制方法、装置及系统

Publications (2)

Publication Number Publication Date
CN107809323A true CN107809323A (zh) 2018-03-16
CN107809323B CN107809323B (zh) 2022-10-21

Family

ID=61576318

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610811885.2A Active CN107809323B (zh) 2016-09-08 2016-09-08 一种资源的控制方法、装置及系统

Country Status (1)

Country Link
CN (1) CN107809323B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110597614A (zh) * 2018-06-12 2019-12-20 阿里巴巴集团控股有限公司 一种资源调整方法及装置
CN111314401A (zh) * 2018-12-12 2020-06-19 百度在线网络技术(北京)有限公司 资源配置方法、装置、系统、终端和计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102130938A (zh) * 2010-12-03 2011-07-20 中国科学院软件研究所 一种面向Web应用宿主平台的资源供给方法
CN104780146A (zh) * 2014-01-13 2015-07-15 华为技术有限公司 资源管理方法及装置
CN105245617A (zh) * 2015-10-27 2016-01-13 江苏电力信息技术有限公司 一种基于容器的服务器资源供给方法
US20160088006A1 (en) * 2014-09-23 2016-03-24 Chaitali GUPTA Predictive model for anomaly detection and feedback-based scheduling
CN105591809A (zh) * 2015-10-12 2016-05-18 杭州华三通信技术有限公司 一种资源分配方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102130938A (zh) * 2010-12-03 2011-07-20 中国科学院软件研究所 一种面向Web应用宿主平台的资源供给方法
CN104780146A (zh) * 2014-01-13 2015-07-15 华为技术有限公司 资源管理方法及装置
US20160088006A1 (en) * 2014-09-23 2016-03-24 Chaitali GUPTA Predictive model for anomaly detection and feedback-based scheduling
CN105591809A (zh) * 2015-10-12 2016-05-18 杭州华三通信技术有限公司 一种资源分配方法和装置
CN105245617A (zh) * 2015-10-27 2016-01-13 江苏电力信息技术有限公司 一种基于容器的服务器资源供给方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110597614A (zh) * 2018-06-12 2019-12-20 阿里巴巴集团控股有限公司 一种资源调整方法及装置
CN110597614B (zh) * 2018-06-12 2023-11-21 阿里巴巴集团控股有限公司 一种资源调整方法及装置
CN111314401A (zh) * 2018-12-12 2020-06-19 百度在线网络技术(北京)有限公司 资源配置方法、装置、系统、终端和计算机可读存储介质

Also Published As

Publication number Publication date
CN107809323B (zh) 2022-10-21

Similar Documents

Publication Publication Date Title
CN108768877B (zh) 一种突发流量的分配方法、装置及代理服务器
WO2015085813A1 (zh) 一种流量控制方法及系统
KR100897557B1 (ko) 태스크 처리 방법, 단말 장치 관리 시스템 및 단말 장치
CN103955381A (zh) 管理服务器对终端设备进行批量软件升级方法与系统
WO1999002000B1 (en) Resource controllers for use in a non-unitary service system
CN107205248B (zh) 一种资源分配方法及系统
CN102739554A (zh) 一种数据管控平台及其数据管控方法
CN107205030A (zh) 服务器资源调度方法及系统
CN113364697A (zh) 流量控制方法、装置、设备及计算机可读存储介质
CN107809323A (zh) 一种资源的控制方法、装置及系统
DE112018005077T5 (de) Gemeinsam genutzter funkvermittler
CN102264118A (zh) 一种实现mtc终端接入的方法及系统
CN107015864B (zh) 业务批量处理控制方法及装置
CN104750546B (zh) 一种调整连接池的方法及系统
CN105873218A (zh) 一种用户调度及资源分配方法和装置
CN106921588B (zh) 一种流量控制方法、装置及设备
CN104683460B (zh) 一种物联网的通信方法、装置及服务器
CN110740425A (zh) 一种核心网区分集群业务承载的方法和系统
CN106603215B (zh) 一种基于ZigBee非公平网络信道资源共享方法
CN111225007B (zh) 数据库连接方法、装置和系统
CN105204888B (zh) 硬件功能更新方法及动态更新硬件功能的装置
CN108024196A (zh) 一种基于d2d技术的信道容量最大化资源分配方法
CN107171915A (zh) 一种通信协议的变更方法及装置
CN102065009A (zh) 分布式队列分配方法及分布式系统
CN106371897A (zh) 一种智能手机内存优化的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant