CN105653373A - 资源分配方法及装置 - Google Patents

资源分配方法及装置 Download PDF

Info

Publication number
CN105653373A
CN105653373A CN201610103795.8A CN201610103795A CN105653373A CN 105653373 A CN105653373 A CN 105653373A CN 201610103795 A CN201610103795 A CN 201610103795A CN 105653373 A CN105653373 A CN 105653373A
Authority
CN
China
Prior art keywords
storage resource
application
resource
memory capacity
capacity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610103795.8A
Other languages
English (en)
Inventor
许壮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610103795.8A priority Critical patent/CN105653373A/zh
Publication of CN105653373A publication Critical patent/CN105653373A/zh
Priority to PCT/CN2017/074737 priority patent/WO2017144011A1/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3034Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a storage system, e.g. DASD based or network based
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5022Mechanisms to release resources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/50Indexing scheme relating to G06F9/50
    • G06F2209/503Resource availability
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/50Indexing scheme relating to G06F9/50
    • G06F2209/508Monitor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Quality & Reliability (AREA)
  • Debugging And Monitoring (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种资源分配方法及装置,属于网络技术领域。所述方法包括:在接收到应用的搜索服务申请后,为所述应用分配第一存储资源,使得所述应用基于所述第一存储资源运行搜索功能,所述第一存储资源具有第一存储容量;在应用运行过程中,监控所述第一存储资源的实际使用容量;根据监控结果,对所述应用已分配的存储资源进行调整。本发明通过在应用运行过程中,对应用实际使用容量进行实时监控,根据实际使用容量为应用重新分配存储资源,既避免了存储资源的浪费、提高了资源利用率,又降低了搜索服务平台提供搜索服务的成本。

Description

资源分配方法及装置
技术领域
本发明涉及网络技术领域,特别涉及一种资源分配方法及装置。
背景技术
随着互联网技术的迅速发展,不同类型的网站和应用层出不穷,比如购物类、即时通讯类和游戏类等。为了满足人们的需求,这些网站或应用通常具有搜索功能,使得人们可以在繁多的信息中快速定位到自己需要的信息。由于实现搜索功能需要专业的开发人员,而且存储成本高。因此,一些网站或应用在实际开发过程中,通常会将搜索功能的实现托管给搜索服务平台,由搜索服务平台为网站或应用分配存储资源,以实现相应网站或应用的搜索功能。
现有技术中,搜索服务平台在为网站或应用分配存储资源时,首先应用开发商向搜索服务平台提交搜索服务申请,该搜索服务申请中包含应用开发商需要的存储容量。搜索服务平台在接收到应用开发商的搜索服务申请后,按照应用开发商申请的存储容量,为应用开发商分配与申请存储容量相等的存储空间,使得相应的网站或应用实现搜索功能。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:
现有技术中在分配存储资源时,应用开发商申请的存储资源是多少的存储容量,就分配相等存储容量的存储资源。实际应用中,有些应用开发商实际使用的存储资源往往远远小于申请的存储资源,这样就造成了存储资源的严重浪费且资源利用率低。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种资源分配方法及装置。所述技术方案如下:
第一方面,提供了一种资源分配方法,所述方法包括:
在接收到应用的搜索服务申请后,为所述应用分配第一存储资源,使得所述应用基于所述第一存储资源运行搜索功能,所述第一存储资源具有第一存储容量;
在应用运行过程中,监控所述第一存储资源的实际使用容量;
根据监控结果,对所述应用已分配的存储资源进行调整。
第二方面,提供了一种资源分配装置,所述装置包括:
资源分配模块,用于在接收到应用的搜索服务申请后,为所述应用分配第一存储资源,使得所述应用基于所述第一存储资源运行搜索功能,所述第一存储资源具有第一存储容量;
监控模块,用于在应用运行过程中,监控所述第一存储资源的实际使用容量;
调整模块,用于根据监控结果,对所述应用已分配的存储资源进行调整。
本发明实施例提供的技术方案带来的有益效果是:通过在应用运行过程中,对应用实际使用容量进行实时监控,根据实际使用容量为应用重新分配存储资源,既避免了存储资源的浪费、提高了资源利用率,又降低了搜索服务平台提供搜索服务的成本。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种资源分配方法的流程图;
图2是本发明实施例提供的一种资源分配方法的流程图;
图3是本发明实施例提供的一种资源分配装置的框图;
图4是本发明实施例提供的一种资源分配装置的框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
图1是本发明实施例提供的一种资源分配方法的流程图,参见图1,包括以下步骤:
101、在接收到应用的搜索服务申请后,为应用分配第一存储资源,使得应用基于第一存储资源运行搜索功能,第一存储资源具有第一存储容量。
102、在应用运行过程中,监控第一存储资源的实际使用容量。
103、根据监控结果,对应用已分配的存储资源进行调整。
本发明实施例提供的方法,通过在应用运行过程中,对应用实际使用容量进行实时监控,根据实际使用容量为应用重新分配存储资源,既避免了存储资源的浪费、提高了资源利用率,又降低了搜索服务平台提供搜索服务的成本。
可选地,该方法还包括:
按照多个存储容量粒度,将当前可用的存储资源划分成多个存储资源组,每个存储资源组中包括多个具有相同存储容量的存储资源;
相应地,为应用分配第一存储资源包括:
从多个存储资源组中,为应用分配第一存储资源。
可选地,根据监控结果,对应用已分配的存储资源进行调整包括:
判断实际使用容量是否大于第一存储容量的指定百分比;
若实际使用容量大于第一存储容量的指定百分比,则为应用重新分配第二存储资源,第二存储资源具有第二存储容量,且第二存储容量大于第一存储容量。
可选地,若实际使用容量大于第一存储容量的指定百分比之后,该方法还包括:
判断实际使用容量是否小于搜索服务申请所对应的存储容量;
若实际使用容量小于搜索服务申请所对应的存储容量,则执行为应用重新分配第二存储资源的步骤。
可选地,为应用重新分配第二存储资源之前,方法还包括:
检测第一存储资源中已存储的数据中是否包含冗余数据;
若包含冗余数据,则删除冗余数据,并释放冗余数据所占用的存储资源;
基于释放后的实际使用容量,执行判断释放后的实际使用容量是否大于第一存储容量的指定百分比的步骤,若释放后的实际使用容量大于第一存储容量的指定百分比,则执行为应用重新分配第二存储资源的步骤。
可选地,为应用重新分配第二存储资源包括:
在第一存储资源占用的存储空间之外,为应用分配第二存储资源,并释放第一存储资源,使得应用基于第二存储资源运行搜索功能;或,
在第一存储资源的基础上,为应用分配的存储资源进行扩容,得到第二存储资源,使得应用基于第二存储资源运行搜索功能。
可选地,判断实际使用容量是否小于搜索服务申请所对应的存储容量之后,该方法还包括:
若实际使用容量等于搜索服务申请所对应的存储容量,则显示实际使用容量已达上限的提示信息。
可选地,根据监控结果,对应用已分配的存储资源进行调整包括:
若应用在资源分配后的实际使用容量持续小于第三存储容量且大于零,则为应用分配第三存储资源,并释放第一存储资源,第三存储资源的容量为第三存储容量,第三存储容量小于第一存储容量的指定百分比;
若实际使用容量为零,则释放第一存储资源。
上述所有可选技术方案,可以采用任意结合形成本公开的可选实施例,在此不再一一赘述。
图2是本发明实施例提供的一种资源分配方法的流程图,参见图2,包括以下步骤:
201、获取当前可用的存储资源,按照多个存储容量粒度,将存储资源划分成多个存储资源组。
在本发明实施例中,搜索服务平台可为应用开发商开发的不同应用提供搜索服务,为该不同应用实现搜索功能。其中,该不同应用可包括购物类应用、医疗类应用、即时通讯类应用和游戏类应用等,本发明实施例对此不做具体限定。搜索服务平台在向应用提供搜索服务之前,需要应用开发商向搜索服务平台提交应用的搜索服务申请,以便搜索服务平台为应用分配存储资源,实现相应的搜索功能。其中,搜索服务申请中至少包括申请的存储容量。在具体实施时,搜索服务平台还可限制申请的最小存储容量,即应用开发商必须申请的存储容量不能小于该最小存储容量。该最小存储容量可为50M、100M、200M、500M等,本发明实施例对此不做具体限定。
现有技术中,在为应用分配存储资源时,会在接收到应用的搜索服务申请后,获取当前可用的存储资源,并在当前可用的存储资源中为应用分配存储资源,导致分配存储资源时耗费的时间过长,容易造成搜索服务平台的用户量的流失。为了缩短为应用分配存储资源时耗费的时间,本发明实施例可在对搜索服务平台在进行初始化时,可以进行对当前存储资源的划分操作,具体过程如下:
按照多个存储容量粒度,将当前可用的存储资源划分成多个存储资源组,每个存储资源组中包括多个具有相同存储容量的存储资源。当搜索服务平台接收到应用的搜索服务申请后,便可直接在划分好的多个存储资源组中,为应用分配存储资源,缩短了获取为应用分配存储资源时耗费的时间。其中,多个存储容量粒度可以为50M、100M、200M、500M、1G、2G、5G、10G、50G等,本发明实施例对此不做具体限定。
202、在接收到应用的搜索服务器申请后,为应用分配第一存储资源,使得应用基于第一存储资源运行搜索功能。
对于应用开发商来说,为了保证申请的存储资源能够满足搜索功能的正常运行,其在应用的搜索服务申请中申请的存储容量往往大于应用的实际使用容量。因此,为了避免直接为应用分配比应用实际使用容量更大的存储资源,导致存储资源的浪费,本发明实施例在接收到应用的搜索服务申请后,先为应用分配第一存储资源,即,从上述步骤201中得到的多个存储资源组中,为应用分配第一存储资源,使得应用基于第一存储资源运行搜索功能。其中,第一存储资源可理解成为应用分配的初始存储资源;第一存储资源具有第一存储容量,该第一存储容量可为50M、100M、200M、500M等,本发明实施例对此不做具体限定。该第一存储容量可为经过统计得到的能够满足大多数应用的业务需求的存储容量。之后,再根据应用的实际使用容量来对已分配的存储资源进行调整,具体过程可以详见下述步骤203和204。
在本发明实施例中,搜索服务申请中还可包括搜索模板信息,该搜索模板信息包括搜索结果的显示类别、排序方式等。在搜索服务平台为应用分配第一存储资源后,获取与该应用相关的数据资源,以视频应用为例,该数据资源即为该视频应用中包含的全部视频摘要信息,该摘要信息包括视频的名称、类别、时长、评分等,本发明实施例对此不做具体限定。搜索服务平台根据获取到的数据资源以及搜索模板信息,可为应用提供个性化的搜索服务,实现应用的搜索功能。具体实施过程中,搜索服务平台可根据获取到的数据资源以及搜索模板信息,生成满足该搜索模板信息的该应用的搜索服务数据,并将该搜索服务数据存储至第一存储资源中,进而使得该应用可基于第一存储资源运行搜索功能。进一步地,搜索服务平台可为应用提供搜索服务接口,当检测到应用通过该搜索服务接口使用搜索服务时,在第一存储资源存储的搜索服务数据中获取与搜索关键词相符的搜索结果,并将搜索结果反馈给应用,由应用显示该搜索结果。
203、在应用运行过程中,监控第一存储资源的实际使用容量。
在本发明实施例中,在应用运行过程中,第一存储资源的实际使用容量可以是动态变化的。搜索服务平台为应用分配的第一存储资源的第一存储容量可能远远超过实际使用容量,进而造成存储资源浪费;或者实际使用容量可能即将超过第一存储容量,可能会造成由于存储容量不足使得搜索功能不能正常运行的后果。为了避免造成第一存储资源的浪费,或者避免由于存储容量不足而造成应用的搜索功能不能正常的运行,本发明实施例在为应用分配了第一存储资源后,对应用的实际使用容量进行实时监控。之后根据监控结果,对应用已分配的存储资源进行调整,具体调整过程详见下述步骤204。
204、根据监控结果,对该应用已分配的存储资源进行调整。
在本发明实施例中,在对第一存储资源的实际使用容量进行监控后,根据监控结果是否符合调整条件,对应用已分配的存储资源进行调整,该调整条件可以用于衡量该第一存储资源是否足以为应用提供搜索服务,具体地,该调整过程如下:
判断该实际使用容量是否大于第一存储容量的指定百分比;若该实际使用容量大于第一存储容量的指定百分比,则说明为应用分配的第一存储资源可能不能够满足应用运行过程中的实际使用容量,很可能会造成搜索功能不能正常运行的后果,因此本发明实施例为应用重新分配第二存储资源。其中,第二存储资源具有第二存储容量,且第二存储容量大于第一存储容量,使得重新分配的第二存储资源能够满足应用运行过程中的实际使用容量;指定百分比可为70%、80%、90%等,本发明实施例对此不做具体限定。当实际使用容量大于第一存储容量的指定百分比时,比如第一存储容量为500M,指定百分比为80%,则当实际使用容量450M时便大于了500M的80%。此时,认为应用的实际使用容量很可能在短时间内超过第一存储容量,便为应用分配存储容量进行扩容,为其分配更多的存储容量,以满足应用的业务需求。
在本发明实施例中,在为应用重新分配第二存储资源包括以下两种方式:
第一种方式、在第一存储资源占用的存储空间之外,为应用分配第二存储资源,并释放第一存储资源,使得应用基于第二存储资源运行搜索功能。
需要说明的是,在释放第一存储资源之前,将应用在第一存储资源中存储的数据迁移到第二存储资源中,使得应用可以正常稳定且不间断的运行。在另一实施例中,在为应用分配第二存储资源后,由于第二存储资源的存储地址与第一存储资源的存储地址不同,为了避免在迁移数据时发生错误,可重新获取与应用相关的数据,先将重新获取的数据存储到第二存储资源中,再将第一存储资源中的数据进行删除,并释放第一存储资源,以保证应用正常稳定运行。
第二种方式、在第一存储资源的基础上,为应用分配的存储资源进行扩容,得到第二存储资源,使得应用基于第二存储资源运行搜索功能。
需要说明的是,由于在接收应用的搜索服务申请之前,就将当前可用的存储资源划分成了多个存储资源组,每个存储资源组中包含多个具有相同存储容量的存储资源。因此在确定为应用分配的第一存储资源的第一存储容量后,可将该第一存储容量作为扩容的基本单元,即为应用重新分配存储资源时,在第一存储资源的基础上,为应用增加第一存储容量的存储资源。
例如,在接收到应用的搜索服务申请后,为应用分配了容量为500M的第一存储资源,当应用的实际使用容量大于500M的80%后,将为应用分配的存储容量增加至1000M,即为应用的存储容量扩展了500M。该1000M对应的存储资源即为重新分配的第二存储资源。具体实施过程中,可采用上述第一种方式进行重新分配:在第一存储资源占用的500M存储空间之外,为应用重新分配1000M的第二存储资源,当将应用在第一存储资源中的数据平稳迁移到第二存储资源中后,释放第一存储资源。具体实施中,还可采用上述第二种方式进行重新分配:在第一存储资源占用的500M存储空间的基础上,为应用重新分配第二个500M的存储资源,该第二个500M的存储资源与第一存储资源组成第二存储资源,使得重新分配存储资源后,应用占有的存储资源为1000M。
在另一实施例中,为了避免搜索服务平台无限制的为应用提供存储资源,而造成的存储资源浪费以及存储资源管理上的困难,搜索服务平台限制了为搜索服务提供者分配的最大存储容量,该最大存储容量即为搜索服务申请者在搜索服务申请中对应的存储容量。因此,在判断该实际使用容量大于第一存储容量的指定百分比之后,还需判断该实际使用容量是否小于搜索服务申请所对应的存储容量;若该实际使用容量小于搜索服务申请所对应的存储容量,则执行为应用重新分配第二存储资源的步骤。若实际使用容量等于搜索服务申请所对应的存储容量,则说明搜索服务申请者申请的存储资源已经用完,显示实际使用容量已达上限的提示信息,该提示信息可为“您使用的容量已达上限,是否需要扩容”等,本发明实施例对此不做具体限定。其中,搜索服务申请所对应的存储容量可为搜索服务申请中填写的存储容量,还可为多个可选存储容量中被选中的存储容量,还可为搜索服务申请中包含的金额对应的存储容量,本发明实施例对此不做具体限定。
在另一实施例中,由于搜索功能运行的过程中会产生很多冗余数据,比如在对第一存储资源的某一数据进行更新时,仍然保留更新前的数据,而造成数据的冗余,因此为了减少数据冗余,释放更多的存储资源以便提高存储资源的利用率,在为应用重新分配第二存储资源之前,检测第一存储资源中已存储的数据中是否包含冗余数据;若包含冗余数据,则删除冗余数据,并释放冗余数据所占用的存储资源;之后,基于释放后的实际使用容量,判断释放后的实际使用容量是否大于第一存储容量的指定百分比,若释放后的实际使用容量大于第一存储容量的指定百分比,则执行为应用重新分配第二存储资源的步骤。
在本发明实施例中,由于有些应用比较简单,应用运行过程中,第一存储资源的实际使用容量很小,比如小于第一存储容量的20%,10%等,便会造成第一存储资源的严重浪费。为了避免在上述情况下造成存储资源的浪费,在对应用的实际使用容量进行监控后,若应用在资源分配后的实际使用容量持续小于第三存储容量且大于零,则为应用分配第三存储资源,并释放第一存储资源。其中,第三存储资源的容量为第三存储容量,第三存储容量小于第一存储容量的指定百分比。其中,实际使用容量持续小于第三存储容量且大于零,指代在指定时间段内,监控得到的实际使用容量均小于第三存储容量且大于零,该指定时间段可为15天、30天等,本发明实施例对此不做具体限定。例如,为应用分配了500M的第一存储资源后,监控得到应用的实际使用容量持续小于50M,比如15天内均小于50M,而根据步骤201对当前可用的存储资源进行划分后,包含粒度为50M的第三存储资源,则为了提高资源的利用率,避免资源的浪费,根据应用的实际使用容量为用户分配粒度为50M的第三存储资源。在分配第三存储资源后,将应用在第一存储资源中的数据迁移到第三存储资源中,之后再释放第一存储资源,以保证应用运行的稳定性。
在另一实施例中,很多应用开发商在为应用申请搜索服务时,仅用来体验一下搜索服务平台的搜索服务申请流程,而并不是想实际使用该搜索服务,此时应用便为使用搜索服务平台为其分配的第一存储资源,为了避免该种情况下造成的存储资源的浪费,若监控得到应用的实际使用容量为零,则释放第一存储资源,当再次接收到应用的搜索服务申请后,执行为应用分配第一存储资源的步骤。
在另一实施例中,有些应用的生命周期可能很短,在其生命周期结束时不再使用搜索服务,或者由于应用取消了搜索功能不再使用搜索服务,但应用该还占用搜索服务平台为其分配的第一存储资源,进而造成存储资源的浪费。为了避免该种情况下存储资源的浪费,若监控得到应用的实际使用容量不为零,但应用在指定时间段内未使用过搜索服务,则停止对应用提供搜索服务,将应用在第一存储资源中存储的数据迁移至其他存储资源,该其他存储资源不是用来提供搜索服务的存储资源,并释放第一存储资源。
本发明实施例提供的方法,通过在应用运行过程中,对应用实际使用容量进行实时监控,根据实际使用容量为应用重新分配存储资源,既避免了存储资源的浪费、提高了资源利用率,又降低了搜索服务平台提供搜索服务的成本。进一步的,在接收应用的搜索服务申请之前,将当前可用的存储资源划分成多个存储资源组,以便在接收到应用的搜索服务申请之后,直接在多个存储资源组中为应用分配存储资源,大大缩短了分配存储资源的时间。
图3是本发明实施例提供的一种资源分配装置的框图,参见图3,包括资源分配模块301、监控模块302和调整模块303。
其中,资源分配模块301与监控模块302连接,用于在接收到应用的搜索服务申请后,为应用分配第一存储资源,使得应用基于第一存储资源运行搜索功能,第一存储资源具有第一存储容量;监控模块302与调整模块303连接,用于在应用运行过程中,监控第一存储资源的实际使用容量;调整模块303,用于根据监控结果,对应用已分配的存储资源进行调整。
可选地,该装置还包括:
划分模块,用于按照多个存储容量粒度,将当前可用的存储资源划分成多个存储资源组,每个存储资源组中包括多个具有相同存储容量的存储资源;
相应地,资源分配模块301,用于从多个存储资源组中,为应用分配第一存储资源。
可选地,调整模块303,用于判断实际使用容量是否大于第一存储容量的指定百分比;若实际使用容量大于第一存储容量的指定百分比,则为应用重新分配第二存储资源,第二存储资源具有第二存储容量,且第二存储容量大于第一存储容量。
可选地,该装置还包括:
判断模块,用于判断实际使用容量是否小于搜索服务申请所对应的存储容量;
调整模块303,用于若实际使用容量小于搜索服务申请所对应的存储容量,则执行为应用重新分配第二存储资源的步骤。
可选地,该装置还包括:
检测模块,用于检测第一存储资源中已存储的数据中是否包含冗余数据;
删除模块,用于若包含冗余数据,则删除冗余数据,并释放冗余数据所占用的存储资源;
判断模块,用于基于释放后的实际使用容量,执行判断释放后的实际使用容量是否大于第一存储容量的指定百分比的步骤,若释放后的实际使用容量大于第一存储容量的指定百分比,则执行为应用重新分配第二存储资源的步骤。
可选地,调整模块303,用于在第一存储资源占用的存储空间之外,为应用分配第二存储资源,并释放第一存储资源,使得应用基于第二存储资源运行搜索功能;或,在第一存储资源的基础上,为应用分配的存储资源进行扩容,得到第二存储资源,使得应用基于第二存储资源运行搜索功能。
可选地,该装置还包括:
显示模块,用于若实际使用容量等于搜索服务申请所对应的存储容量,则显示实际使用容量已达上限的提示信息。
可选地,调整模块303,用于若应用在资源分配后的实际使用容量持续小于第三存储容量且大于零,则为应用分配第三存储资源,并释放第一存储资源,第三存储资源的容量为第三存储容量,第三存储容量小于第一存储容量的指定百分比;若实际使用容量为零,则释放第一存储资源。
本发明实施例提供的装置,通过在应用运行过程中,对应用实际使用容量进行实时监控,根据实际使用容量为应用重新分配存储资源,既避免了存储资源的浪费、提高了资源利用率,又降低了搜索服务平台提供搜索服务的成本。
需要说明的是:上述实施例提供的资源分配装置在分配资源时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的资源分配装置与资源分配方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图4是本发明实施例提供的一种资源分配装置的框图。例如,装置400可以被提供为一服务器。参照图4,装置400包括处理组件422,其进一步包括一个或多个处理器,以及由存储器432所代表的存储器资源,用于存储可由处理组件422执行的指令,例如应用程序。存储器432中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件422被配置为执行指令,以执行上述资源分配方法。
装置400还可以包括一个电源组件426被配置为执行装置400的电源管理,一个有线或无线网络接口450被配置为将装置400连接到网络,和一个输入输出(I/O)接口458。装置400可以操作基于存储在存储器432的操作系统,例如WindowsServerTM,MacOSXTM,UnixTM,LinuxTM,FreeBSDTM或类似。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (16)

1.一种资源分配方法,其特征在于,所述方法包括:
在接收到应用的搜索服务申请后,为所述应用分配第一存储资源,使得所述应用基于所述第一存储资源运行搜索功能,所述第一存储资源具有第一存储容量;
在应用运行过程中,监控所述第一存储资源的实际使用容量;
根据监控结果,对所述应用已分配的存储资源进行调整。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
按照多个存储容量粒度,将当前可用的存储资源划分成多个存储资源组,每个存储资源组中包括多个具有相同存储容量的存储资源;
相应地,为所述应用分配第一存储资源包括:
从所述多个存储资源组中,为所述应用分配第一存储资源。
3.根据权利要求1所述的方法,其特征在于,所述根据监控结果,对所述应用已分配的存储资源进行调整包括:
判断所述实际使用容量是否大于所述第一存储容量的指定百分比;
若所述实际使用容量大于所述第一存储容量的指定百分比,则为所述应用重新分配第二存储资源,所述第二存储资源具有第二存储容量,且所述第二存储容量大于所述第一存储容量。
4.根据权利要求3所述的方法,其特征在于,所述若所述实际使用容量大于所述第一存储容量的指定百分比之后,所述方法还包括:
判断所述实际使用容量是否小于所述搜索服务申请所对应的存储容量;
若所述实际使用容量小于所述搜索服务申请所对应的存储容量,则执行所述为所述应用重新分配第二存储资源的步骤。
5.根据权利要求3或4所述的方法,其特征在于,所述为所述应用重新分配第二存储资源之前,所述方法还包括:
检测所述第一存储资源中已存储的数据中是否包含冗余数据;
若包含所述冗余数据,则删除所述冗余数据,并释放所述冗余数据所占用的存储资源;
基于释放后的实际使用容量,执行判断所述释放后的实际使用容量是否大于所述第一存储容量的指定百分比的步骤,若所述释放后的实际使用容量大于所述第一存储容量的指定百分比,则执行为所述应用重新分配第二存储资源的步骤。
6.根据权利要求5所述的方法,其特征在于,所述为所述应用重新分配第二存储资源包括:
在所述第一存储资源占用的存储空间之外,为所述应用分配所述第二存储资源,并释放所述第一存储资源,使得所述应用基于所述第二存储资源运行搜索功能;或,
在所述第一存储资源的基础上,为所述应用分配的存储资源进行扩容,得到第二存储资源,使得所述应用基于所述第二存储资源运行搜索功能。
7.根据权利要求4所述的方法,其特征在于,所述判断所述实际使用容量是否小于所述搜索服务申请所对应的存储容量之后,所述方法还包括:
若所述实际使用容量等于所述搜索服务申请所对应的存储容量,则显示实际使用容量已达上限的提示信息。
8.根据权利要求1所述的方法,其特征在于,所述根据监控结果,对所述应用已分配的存储资源进行调整包括:
若所述应用在资源分配后的实际使用容量持续小于第三存储容量且大于零,则为所述应用分配第三存储资源,并释放所述第一存储资源,所述第三存储资源的容量为所述第三存储容量,所述第三存储容量小于所述第一存储容量的指定百分比;
若所述实际使用容量为零,则释放所述第一存储资源。
9.一种资源分配装置,其特征在于,所述装置包括:
资源分配模块,用于在接收到应用的搜索服务申请后,为所述应用分配第一存储资源,使得所述应用基于所述第一存储资源运行搜索功能,所述第一存储资源具有第一存储容量;
监控模块,用于在应用运行过程中,监控所述第一存储资源的实际使用容量;
调整模块,用于根据监控结果,对所述应用已分配的存储资源进行调整。
10.根据权利要求9所述的装置,其特征在于,所述装置还包括:
划分模块,用于按照多个存储容量粒度,将当前可用的存储资源划分成多个存储资源组,每个存储资源组中包括多个具有相同存储容量的存储资源;
相应地,所述资源分配模块,用于从所述多个存储资源组中,为所述应用分配第一存储资源。
11.根据权利要求9所述的装置,其特征在于,所述调整模块用于判断所述实际使用容量是否大于所述第一存储容量的指定百分比;若所述实际使用容量大于所述第一存储容量的指定百分比,则为所述应用重新分配第二存储资源,所述第二存储资源具有第二存储容量,且所述第二存储容量大于所述第一存储容量。
12.根据权利要求11所述的装置,其特征在于,所述装置还包括:
判断模块,用于判断所述实际使用容量是否小于所述搜索服务申请所对应的存储容量;
所述调整模块,用于若所述实际使用容量小于所述搜索服务申请所对应的存储容量,则执行所述为所述应用重新分配第二存储资源的步骤。
13.根据权利要求11或12所述的装置,其特征在于,所述装置还包括:
检测模块,用于检测所述第一存储资源中已存储的数据中是否包含冗余数据;
删除模块,用于若包含所述冗余数据,则删除所述冗余数据,并释放所述冗余数据所占用的存储资源;
所述判断模块,用于基于释放后的实际使用容量,执行判断所述释放后的实际使用容量是否大于所述第一存储容量的指定百分比的步骤,若所述释放后的实际使用容量大于所述第一存储容量的指定百分比,则执行为所述应用重新分配第二存储资源的步骤。
14.根据权利要求13所述的装置,其特征在于,所述调整模块用于:
在所述第一存储资源占用的存储空间之外,为所述应用分配所述第二存储资源,并释放所述第一存储资源,使得所述应用基于所述第二存储资源运行搜索功能;或,在所述第一存储资源的基础上,为所述应用分配的存储资源进行扩容,得到第二存储资源,使得所述应用基于所述第二存储资源运行搜索功能。
15.根据权利要求12所述的装置,其特征在于,所述装置还包括:
显示模块,用于若所述实际使用容量等于所述搜索服务申请所对应的存储容量,则显示实际使用容量已达上限的提示信息。
16.根据权利要求9所述的装置,其特征在于,所述调整模块用于若所述应用在资源分配后的实际使用容量持续小于第三存储容量且大于零,则为所述应用分配第三存储资源,并释放所述第一存储资源,所述第三存储资源的容量为所述第三存储容量,所述第三存储容量小于所述第一存储容量的指定百分比;若所述实际使用容量为零,则释放所述第一存储资源。
CN201610103795.8A 2016-02-25 2016-02-25 资源分配方法及装置 Pending CN105653373A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610103795.8A CN105653373A (zh) 2016-02-25 2016-02-25 资源分配方法及装置
PCT/CN2017/074737 WO2017144011A1 (zh) 2016-02-25 2017-02-24 资源分配方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610103795.8A CN105653373A (zh) 2016-02-25 2016-02-25 资源分配方法及装置

Publications (1)

Publication Number Publication Date
CN105653373A true CN105653373A (zh) 2016-06-08

Family

ID=56488777

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610103795.8A Pending CN105653373A (zh) 2016-02-25 2016-02-25 资源分配方法及装置

Country Status (2)

Country Link
CN (1) CN105653373A (zh)
WO (1) WO2017144011A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017144011A1 (zh) * 2016-02-25 2017-08-31 腾讯科技(深圳)有限公司 资源分配方法及装置
CN108399102A (zh) * 2017-02-08 2018-08-14 阿里巴巴集团控股有限公司 一种资源分配方法和装置
CN110333953A (zh) * 2019-07-11 2019-10-15 中国工商银行股份有限公司 数据存储资源调度方法及装置
CN110648158A (zh) * 2018-06-27 2020-01-03 广东神马搜索科技有限公司 资源分配方法及装置
CN112148469A (zh) * 2019-06-28 2020-12-29 杭州海康威视数字技术股份有限公司 管理资源的方法、装置及计算机存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112835521B (zh) * 2021-02-01 2022-02-18 杭州宏杉科技股份有限公司 一种存储空间分配方法、装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102685219A (zh) * 2012-04-27 2012-09-19 浪潮电子信息产业股份有限公司 San存储系统中通过动态扩容提高存储资源利用率的方法
CN103595815A (zh) * 2013-11-25 2014-02-19 广东电网公司汕头供电局 基于云计算的存储资源分配方法
CN104778244A (zh) * 2015-04-09 2015-07-15 天脉聚源(北京)传媒科技有限公司 数据的搜索方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4633802B2 (ja) * 2005-12-09 2011-02-16 パナソニック株式会社 不揮発性記憶装置及びデータ読み出し方法及び管理テーブル作成方法
CN104348887B (zh) * 2013-08-09 2019-02-19 中国电信股份有限公司 云管理平台中的资源分配方法与装置
CN105653373A (zh) * 2016-02-25 2016-06-08 腾讯科技(深圳)有限公司 资源分配方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102685219A (zh) * 2012-04-27 2012-09-19 浪潮电子信息产业股份有限公司 San存储系统中通过动态扩容提高存储资源利用率的方法
CN103595815A (zh) * 2013-11-25 2014-02-19 广东电网公司汕头供电局 基于云计算的存储资源分配方法
CN104778244A (zh) * 2015-04-09 2015-07-15 天脉聚源(北京)传媒科技有限公司 数据的搜索方法及装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017144011A1 (zh) * 2016-02-25 2017-08-31 腾讯科技(深圳)有限公司 资源分配方法及装置
CN108399102A (zh) * 2017-02-08 2018-08-14 阿里巴巴集团控股有限公司 一种资源分配方法和装置
CN110648158A (zh) * 2018-06-27 2020-01-03 广东神马搜索科技有限公司 资源分配方法及装置
CN110648158B (zh) * 2018-06-27 2022-07-19 阿里巴巴(中国)有限公司 资源分配方法及装置
CN112148469A (zh) * 2019-06-28 2020-12-29 杭州海康威视数字技术股份有限公司 管理资源的方法、装置及计算机存储介质
CN112148469B (zh) * 2019-06-28 2024-02-20 杭州海康威视数字技术股份有限公司 管理资源的方法、装置及计算机存储介质
CN110333953A (zh) * 2019-07-11 2019-10-15 中国工商银行股份有限公司 数据存储资源调度方法及装置

Also Published As

Publication number Publication date
WO2017144011A1 (zh) 2017-08-31

Similar Documents

Publication Publication Date Title
CN105653373A (zh) 资源分配方法及装置
CN107395659A (zh) 一种业务受理及共识的方法及装置
US11296940B2 (en) Centralized configuration data in a distributed file system
US10387038B1 (en) Storage space allocation for logical disk creation
KR20180027326A (ko) 확장 가능한 멀티-스테이지 데이터 처리 시스템들에서의 효율적인 데이터 캐싱 관리
US9805140B2 (en) Striping of directed graphs and nodes with improved functionality
Sethi et al. RecShard: statistical feature-based memory optimization for industry-scale neural recommendation
CN110414771A (zh) 企业组织架构数据的更新方法、装置、服务器及客户端
KR101938501B1 (ko) 동적 부하 기반 병합
KR101430649B1 (ko) 클라우드 환경 내의 데이터 분석 서비스 제공 시스템 및 방법
CN107402926B (zh) 一种查询方法以及查询设备
CN110784498B (zh) 一种个性化数据容灾方法及装置
WO2020019313A1 (zh) 一种图数据的更新方法、系统、计算机可读存储介质及设备
CN110049091A (zh) 数据存储方法及装置、电子设备、存储介质
US10417192B2 (en) File classification in a distributed file system
US20230006891A1 (en) Techniques and architectures for efficient allocation of under-utilized resources
CN112346871A (zh) 一种请求处理方法及微服务系统
CN110740155B (zh) 分布式系统中的请求处理方法及装置
CN112988066A (zh) 一种数据处理方法及装置
CN112084173A (zh) 数据迁移方法和装置及存储介质
CN111831752A (zh) 分布式数据库的空间整理方法、装置、设备以及存储介质
Liu et al. Par-BF: A parallel partitioned Bloom filter for dynamic data sets
CN106254516A (zh) 负载均衡方法及装置
US11656856B2 (en) Optimizing a just-in-time compilation process in a container orchestration system
CN111475277A (zh) 一种资源分配方法、系统、设备及机器可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160608

RJ01 Rejection of invention patent application after publication