CN103795804A - 存储资源调度方法及存储计算系统 - Google Patents

存储资源调度方法及存储计算系统 Download PDF

Info

Publication number
CN103795804A
CN103795804A CN201410062471.5A CN201410062471A CN103795804A CN 103795804 A CN103795804 A CN 103795804A CN 201410062471 A CN201410062471 A CN 201410062471A CN 103795804 A CN103795804 A CN 103795804A
Authority
CN
China
Prior art keywords
task type
storage
storage system
computing system
scheduling strategy
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410062471.5A
Other languages
English (en)
Inventor
王黎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201410062471.5A priority Critical patent/CN103795804A/zh
Publication of CN103795804A publication Critical patent/CN103795804A/zh
Priority to EP14883281.9A priority patent/EP3101870A1/en
Priority to PCT/CN2014/089540 priority patent/WO2015123999A1/zh
Priority to US15/245,807 priority patent/US10241835B2/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061Improving I/O performance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0631Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659Command handling arrangements, e.g. command buffers, queues, command scheduling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供一种存储资源调度方法及存储计算系统,该存储计算系统具有计算系统和存储系统,计算系统具有至少一个计算单元,存储系统具有至少一个存储单元,该方法包括:对于至少一个计算单元中的任一计算单元,计算系统识别计算单元的任务类型,计算系统向存储系统发送任务类型信息,任务类型信息携带任务类型;存储系统根据任务类型信息,获取任务类型的调度策略;存储系统根据调度策略,对计算单元对应的存储单元进行调度。该方法中,通过感知计算单元不同的任务,针对任务类型进行资源调度,实现对同一个存储单元不同任务下的调度管理。

Description

存储资源调度方法及存储计算系统
技术领域
本发明实施例涉及计算机技术,尤其涉及一种存储资源调度方法及存储计算系统。
背景技术
服务等级协议(Service-Level Agreement,SLA)是指提供者与用户之间就服务的品质、水准等所达成的双方共同认可的协议,从用户角度表达对服务质量(Quality of Service,QoS)的要求。云计算场景下,存储和计算作为云的两大核心资源,经过有机融合,联合对外提供各种应用。为保证重点应用的服务质量、各种应用的可预测性等,需要引入QoS机制对存储资源进行调度管理。
一般来说,现有技术中,一般采用如下方式对存储资源进行调度管理:存储系统和计算系统相对独立,分离管理,存储系统提供存储单元给计算系统使用,并以存储单元为粒度对存储资源进行管理。具体的,计算系统中的计算单元,如虚拟机(Virtual Machine,VM)等对应不同的存储单元,根据QoS预先为各VM配置SLA级别,存储系统根据SLA级别对各存储单元进行优化及性能管理。但是现有技术中,仅能够处理和调度不同存储单元间的资源。
发明内容
本发明实施例提供一种存储资源调度方法及存储计算系统。
第一个方面,本发明实施例提供一种存储资源调度方法,适用于具有计算系统和存储系统的存储计算系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,该方法包括:
对于所述至少一个计算单元中的任一计算单元,所述计算系统识别所述计算单元的任务类型;
所述计算系统向所述存储系统发送任务类型信息,所述任务类型信息携带所述任务类型;
所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略;
所述存储系统根据所述调度策略,对所述计算单元对应的存储单元进行调度。
在第一个方面的第一种可能的实现方式中,所述调度策略具体为所述任务类型的存储服务等级,所述存储系统存储有所述任务类型与所述存储服务等级的对应关系;
所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略,包括:
所述存储系统根据所述任务类型信息查找所述对应关系,确定所述任务类型的存储服务等级。
在第一个方面的第二种可能的实现方式中,所述任务类型信息还携带所述计算单元的服务等级;
所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略,包括:
所述存储系统根据所述任务类型信息,确定所述任务类型对应的操作信息;
根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
在第一个方面的第三种可能的实现方式中,所述调度策略具体为性能指标,所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略,包括:
所述存储系统根据所述任务类型信息,为所述任务类型生成所述性能指标。
结合第一个方面、第一个方面的第一种、第二种或第三种可能的实现方式,在第一个方面的第四种可能的实现方式中,所述计算系统向所述存储系统发送所述任务类型信息之前,还包括:
所述计算系统在所述计算系统与所述存储系统之间建立通信接口;
所述计算系统向所述存储系统发送所述任务类型信息,包括:
所述计算系统通过所述通信接口向所述存储系统发送所述任务类型信息。
结合第一个方面、第一个方面的第一种、第二种或第三种可能的实现方式,在第一个方面的第五种可能的实现方式中,所述计算系统向所述存储系统发送所述任务类型信息之前,还包括:
所述计算系统配置所述计算系统与所述存储系统之间进行通信的配置文件;
所述计算系统向所述存储系统发送所述任务类型信息,包括:
所述计算系统将所述任务类型信息携带在所述配置文件中发送给所述存储系统。
第二个方面,本发明实施例提供一种存储资源调度方法,适用于具有计算系统和存储系统的存储计算系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,该方法包括:
对于所述至少一个计算单元中的任一计算单元,所述计算系统识别所述计算单元的任务类型;
所述计算系统根据所述任务类型,获取所述任务类型的调度策略;
所述计算系统向所述存储系统发送所述任务类型的调度策略;
所述存储系统根据所述调度策略,对所述计算单元对应的存储单元进行调度。
在第二个方面的第一种可能的实现方式中,所述调度策略具体为所述任务类型的存储服务等级,所述计算系统存储有所述任务类型与所述存储服务等级的对应关系;
所述计算系统根据所述任务类型,获取所述任务类型的调度策略,包括:所述计算系统根据所述任务类型查找所述对应关系,确定所述任务类型的存储服务等级。
在第二个方面的第二种可能的实现方式中,所述计算系统根据所述任务类型,获取所述任务类型的调度策略,包括:
所述计算系统确定所述任务类型对应的操作信息;根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
在第二个方面的第三种可能的实现方式中,所述调度策略具体为性能指标,所述计算系统根据所述任务类型,获取所述任务类型的调度策略,包括:
所述计算系统根据所述任务类型,为所述任务类型生成所述性能指标。
第三个方面,本发明实施例提供一种存储计算系统,包括计算系统和存储系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,所述计算系统还包括标识模块与发送模块,所述存储系统还包括任务解析模块与服务质量模块;其中,
所述标识模块,用于对于所述至少一个计算单元中的任一计算单元,识别所述计算单元的任务类型;
所述发送模块,用于向所述存储系统的任务解析模块发送任务类型信息,所述任务类型信息携带所述任务类型;
所述任务解析模块,用于根据所述任务类型信息,获取所述任务类型的调度策略;
所述服务质量模块,用于根据所述任务解析模块解析的所述调度策略,对所述计算单元对应的存储单元进行调度。
在第三个方面的第一种可能的实现方式中,当所述调度策略具体为所述任务类型的存储服务等级时,所述存储系统还包括存储模块,用于存储所述任务类型与所述存储服务等级的对应关系;
所述任务解析模块,具体用于根据所述任务类型信息查找所述存储模块存储的所述对应关系,确定所述任务类型的存储服务等级。
在第三个方面的第二种可能的实现方式中,当所述任务类型信息还携带所述计算单元的服务等级时,
所述任务解析模块,具体用于根据所述任务类型信息,确定所述任务类型对应的操作信息,根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
在第三个方面的第三种可能的实现方式中,当所述调度策略具体为性能指标时,
所述任务解析模块,具体用于根据所述任务类型信息,为所述任务类型生成所述性能指标。
结合第三个方面、第三个方面的第一种、第二种或第三种可能的实现方式,在第三个方面的第四种可能的实现方式中,所述计算系统还包括:通信接口建立模块;
所述通信接口建立模块,用于在所述计算系统与所述存储系统之间建立通信接口;
所述发送模块,具体用于通过所述通信接口建立模块建立的所述通信接口向所述存储系统发送所述任务类型信息。
结合第三个方面、第三个方面的第一种、第二种或第三种可能的实现方式,在第三个方面的第五种可能的实现方式中,所述计算系统还包括:配置模块;
所述配置模块,用于配置所述计算系统与所述存储系统之间进行通信的配置文件;
所述发送模块,具体用于将所述任务类型信息携带在所述配置模块配置的所述配置文件中发送给所述存储系统。
第四个方面,本发明实施例提供一种存储计算系统,包括计算系统和存储系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,所述计算系统还包括识别映射模块与发送模块,所述存储系统还包括服务质量模块;其中,
所述识别映射模块,用于对于所述至少一个计算单元中的任一计算单元,识别所述计算单元的任务类型,并根据所述任务类型,获取所述任务类型的调度策略;
所述发送模块,用于向所述存储系统的服务质量模块发送所述任务类型的调度策略;
所述服务质量模块,用于根据所述发送模块发送的所述调度策略,对所述计算单元对应的存储单元进行调度。
在第四个方面的第一种可能的实现方式中,当所述调度策略具体为所述任务类型的存储服务等级时,所述计算系统还包括存储模块,用于存储所述任务类型与所述存储服务等级的对应关系;
所述识别映射模块,具体根据所述任务类型根据所述存储模块存储的所述对应关系,确定所述任务类型的存储服务等级。
在第四个方面的第二种可能的实现方式中,所述识别映射模块,具体用于确定所述任务类型对应的操作信息;根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
在第四个方面的第三种可能的实现方式中,当所述调度策略具体为性能指标时,所述识别映射模块,具体用于根据所述任务类型,为所述任务类型生成所述性能指标。
本发明实施例提供的存储资源调度方法及存储计算系统,对于任意计算单元,计算系统识别计算单元的任务类型,计算系统向存储系统发送任务类型信息,任务类型信息携带任务类型;存储系统根据任务类型信息,为任务类型配置调度策略;存储系统根据调度策略,对计算单元对应的存储单元进行调度。或者,对于任意计算单元,计算系统识别计算单元的任务类型,并根据任务类型获取调度策略。然后,将调度策略发送给存储系统,使得存储系统对计算单元对应的存储单元进行调度。上述方法中,通过感知计算单元不同的任务,针对任务类型进行资源调度,实现对同一个存储单元不同任务下的调度管理。
附图说明
图1为本发明存储资源调度方法所适用的存储计算系统的一种架构示意图;
图2为本发明存储资源调度方法实施例一的流程图;
图3为本发明存储资源调度方法所适用的存储计算系统的另一种架构示意图;
图4为本发明存储资源调度方法实施例二的流程图;
图5为本发明存储资源调度方法实施例三的过程示意图;
图6为本发明存储计算系统实施例一的结构示意图;
图7为本发明存储计算系统实施例二的结构示意图;
图8A为本发明存储计算系统实施例三的结构示意图;
图8B为本发明存储计算系统实施例四的结构示意图;
图9为本发明存储计算系统实施例五的结构示意图;
图10为本发明存储计算系统实施例六的结构示意图;
图11为本发明存储计算系统实施例七的结构示意图;
图12为本发明存储计算系统实施例八的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明存储资源调度方法所适用的存储计算系统的一种架构示意图。如图1所示,存储计算系统,例如云系统,通常由计算系统、存储系统以及网络(图中未示出)三大资源构成,计算系统具有至少一个计算单元,如虚拟机(Virtual Machine,VM)等,在计算单元上可以运行不同的应用,如数据库、虚拟设备接口(Virtual Device Interface,VDI)、邮箱服务等;存储系统的物理设备可以为服务器、网络连接存储(Network Attached Storage,NAS)、存储区域网络(Storage Area Networking,SAN)等,存储系统以存储单元为粒度对存储资源进行管理,存储单元例如为卷(volume,Lun)、文件或主机等。需要说明的是,本实施例中,是从逻辑的角度将计算存储系统划分为计算系统与存储系统的,然而,实际部署中,计算系统和存储系统可独立也可以合一部署,通过虚拟化技术,对外提供虚拟服务,如云主机等。
图2为本发明存储资源调度方法实施例一的流程图。同时结合图1与图2详细描述,本实施例包括如下步骤:
101、对于所述至少一个计算单元中的任一计算单元,所述计算系统识别所述计算单元的任务类型。
如图1所示,计算系统上部署有标识模块,用于识别计算系统的任意计算单元的任务类型。以计算单元为VM为例,计算系统的标识模块识别VM的任务类型,该任务包括VM的操作任务或应用业务,其中,操作任务包括但不限于:VM的启动、重启、创建、删除、迁移、或唤醒,应用业务包括但不限于:VM的杀毒、备份、或远程复制容灾。具体的,在计算系统进行VM管理时,标识模块识别该VM当前的任务类型。
102、所述计算系统向所述存储系统发送任务类型信息,所述任务类型信息携带所述任务类型。
在识别该VM当前的任务类型后,计算系统向存储系统发送携带任务类型的任务类型信息,该任务类型信息包括但不限于VM的身份标识(IDentity,ID)、VM的操作任务或应用业务的类型。可选地,该任务类型信息还可以包括VM的SLA等级等。
103、所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略。
如图1所示,存储系统上部署有任务解析模块,用于解析计算系统发送的任务类型信息,并为该任务类型信息携带的任务类型获取调度策略。其中,调度策略例如是计算单元对应的存储单元的SLA等级、存储单元的性能需求等。具体的,用户可通过配置界面、配置命令、配置文件参数或系统默认等方式设定或修改不同计算单元的任务类型的调度策略。
104、所述存储系统根据所述调度策略,对所述计算单元对应的存储单元进行调度。
如图1所示,存储系统上部署有服务质量模块,用于按照调度策略,对计算单元对应的存储单元进行调度等。具体的,服务质量模块按照调度策略,对所管理的计算单元,如Lun、文件或主机等对象进行性能管理和资源调度以满足用户的服务质量和服务等级。其中,调度可以包含但不限于:业务迁移,业务限制,流量控制,资源调度等。
本发明实施例提供的存储资源调度方法,对于任意计算单元,计算系统识别计算单元的任务类型,计算系统向存储系统发送任务类型信息,任务类型信息携带任务类型;存储系统根据任务类型信息,获取任务类型的调度策略并根据调度策略,对计算单元对应的存储单元进行调度。该方法中,通过感知计算单元不同的任务,针对任务类型进行资源调度,实现同一个存储单元不同任务下的调度管理。
可选的,上述实施例中,计算系统在计算系统与存储系统之间建立通信接口,计算系统通过所述通信接口向存储系统发送任务类型信息。
具体的,计算系统和存储系统之间可通过具体的协议配置该通信接口,通过该通信接口传递任务类型信息等。
可选的,上述实施例中,计算系统配置计算系统与存储系统之间进行通信的配置文件,计算系统将任务类型信息携带在配置文件中发送给所述存储系统。例如,通过XML等配置文件传递任务类型信息。
需要说明的是,上述图1所示的存储计算系统的架构示意图中,为实现本发明所新增的标识模块、任务解析模块、服务质量模块等可以灵活部署,本发明并不以此为限。例如,可以将标识模块和任务解析模块均部署于计算系统侧。具体的,请参见图3。
图3为本发明存储资源调度方法所适用的存储计算系统的另一种架构示意图。相较于图1实施例,本实施例中,对标识模块和任务解析模块进行功能合一,将该两个模块组合成一个“识别映射模块”并部署于计算系统侧。
请参照图3,识别映射模块用于完成对VM的操作任务及业务应用等业务类型的识别,并在计算系统侧直接完成计算单元对应的存储单元的调度策略的获取,然后通过消息接口或配置文件等形式,将调度策略发送给存储系统,由存储系统的服务质量模块进行相应的性能管理调度。由此可知,本实施例中,计算系统侧直接根据任务类型,为计算单元对应的存储单元获取调度策略,无需将任务类型信息发送至存储系统。
基于图3所示的存储计算系统,本发明实施例还提供一种存储资源调度方法。具体可参见图4。
图4为本发明存储资源调度方法实施例二的流程图。本实施例同样适用于具有计算系统和存储系统的存储计算系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,同时结合图3与图4的详细描述,本实施例包括如下步骤:
201、对于所述至少一个计算单元中的任一计算单元,所述计算系统识别所述计算单元的任务类型。
如图3所示,计算系统上部署有识别映射模块,用于识别计算系统的任意计算单元的任务类型。该步骤中,关于任务类型的相关描述可参见上述图2步骤101,此处不再赘述。
202、所述计算系统根据所述任务类型,获取所述任务类型的调度策略。
相较于上述图2中计算系统发送任务类型信息给存储系统,使得存储系统获取任务类型的调度信息,本实施例中,任务类型的调度策略由部署在计算系统上的识别映射模块获取。
203、所述计算系统向所述存储系统发送所述任务类型的调度策略。
204、所述存储系统根据所述调度策略,对所述计算单元对应的存储单元进行调度。
上述步骤203与步骤204中,在获取到任务类型的调度策略后,计算系统直接将调度策略发送给存储系统;相应的,存储系统接收调度策略,并根据该调度策略对计算单元对应的存储单元进行调度。
本发明实施例提供的存储资源调度方法,对于任意计算单元,计算系统识别计算单元的任务类型,并根据任务类型获取调度策略。然后,将调度策略发送给存储系统,使得存储系统对计算单元对应的存储单元进行调度。该方法中,通过感知计算单元不同的任务,针对任务类型进行资源调度,实现同一个存储单元不同任务下的调度管理。
图5为本发明存储资源调度方法实施例三的过程示意图。本实施例中,计算单元具体为VM,以SLA等级均为“高”的VM1、VM2为例,本实施例具体包括如下步骤:
S1、用户或管理员通过管理界面或自助服务平台分配虚拟机,从计算系统和存储系统分别申请CPU、内存、卷设备等资源从而创建虚拟机。
本步骤中,假设创建了两个虚拟机,即VM1与VM2,其中,VM1与VM2的SLA等级均为“高”,即“H”(High),该SLA等级可在创建VM的同时指定,或者按照默认配置生成,本发明并不以此为限制,VM1对应的存储单元具体为Lun1,VM2对应的存储单元具体为Lun2。
S2、VM1启动后处于正常运行(Running)状态,计算系统对VM2下发休眠指令,使得VM2进入休眠(Hibernate)状态。
S3、计算系统上的标识模块,识别并记录VM1与VM2的任务类型,并将该任务类型携带在任务类型信息中,按照某种消息协议接口或通过配置文件等形式,传递给存储系统。
本步骤中,任务类型信息例如可以用表1表示,表1为本发明任务类型信息的属性表。
表1
VM ID SLA State State ID Other
VM1 H Running 6 ……
VM2 H Hibernate 5 ……
S4、存储系统上的任务解析模块,在接收到任务类型信息,对其解析识别后,根据VM的操作业务或应用业务等任务类型,获取调度策略并下发给存储系统上的服务质量模块。表1中,以操作任务为Running和Hibernate为例。
具体的,存储系统预先存储有任务类型与存储服务等级SLA对应关系的映射表,如表2所示。该表2可以由用户自助设定,或者系统默认配置。
结合表2,针对VM1,任务解析模块为VM1对应的存储单元,即Lun1获取的调度策略为“H”;针对VM2,任务解析模块为其对应的存储单元,即Lun2获取的调度策略为“M”(Medium)。表2中,调度策略为“L”(Low),表示为低。
表2
任务编号 任务类型 调度策略 Other
1 创建VM M ……
2 删除VM L ……
3 启动VM H ……
4 迁移VM H ……
5 休眠VM M ……
6 Running H ……
7 备份VM L ……
8 VM杀毒 L ……
…… …… …… ……
S5、存储系统上的服务质量模块根据调度策略,以Lun为粒度,对各VM对应的存储单元进行管理调度,从而统一管理存储系统的资源,合理配置资源,达成QoS和SLA的要求,满足用户体验。例如,对于VM1对应的存储单元Lun1,服务质量模块按照“H”的策略进行保障,而对于VM2对应的存储单元Lun2,服务质量模块按照“M”的策略进行调度保障,这相对于现有技术中的仅根据VM的SLA等级对该VM对应的存储单元进行调度的方法,本发明实施例可以实现对不同任务类型的VM的细分,根据VM的不同任务类型对VM进行调度的目的。
本实施例中,存储系统可根据不同VM的任务类型,对各VM对应的存储单元进行智能调度,实现不同任务下的存储单元的智能调度管理,做到重点业务的保障、关键操作任务的性能优先保护,从而合理调配资源。例如,批量创建VM时会产生大量IO,此时会影响正在Running的VM的用户的在线体验,但创建VM的任务类型本身的业务实时性可能并不高。因此,利用本发明,即可区分任务类型的优先级,有效解决此问题,避免批量操作对在线用户的影响。
上述图5实施例中,任务类型与调度策略之间的映射关系是静态的,例如表2所示,然而,本发明并不以此为限,在其他可能的实施方式中,任务类型对应的调度策略可动态配置。例如,当任务类型信息携带计算单元自身的服务等级SLA、调度策略具体为对任务类型对应的存储服务等级SLA的操作信息时,存储系统可根据任务类型信息,确定任务类型对应的操作信息,并根据该操作信息,对计算单元自身的服务等级SLA进行处理以得到任务类型的调度策略。具体的,可见表3,表3为本发明存储资源调度方法实施例三中任务类型与存储服务等级SLA对应关系的映射表。
表3
Figure BDA0000468777900000121
Figure BDA0000468777900000131
结合表3,本实施例中,存储系统根据VM本身的SLA等级以及任务类型,获取任务类型的调度策略,使得服务质量模块根据调度策略,对计算单元对应的存储单元进行调度管理。该存储资源调度过程中,相较于上述实施例,对于任意等级的VM,并非按照固定模式对其对应的存储单元进程调度管理,而是结合该VM自身的SLA等级以及任务类型,对该VM对应的存储单元进行调度。例如,VM1的SLA等级为“H”,VM2的SLA等级为“M”,则根据表3,同样是创建VM的任务类型,对VM1的SLA等级“降一级”,从而使得VM1对应的存储单元的调度策略为“M”,VM2对应的存储单元的调度策略为低,即“L”(Low)。
需要说明的是,根据表3中的操作信息,对VM的SLA等级进行操作,若超过最低,则按照最低限度处理。以VM2为例,若任务类型为删除VM,则由于VM2自身的SLA等级为“M”,“降两级”后超过最低限度“L”,此时,对于删除VM2的任务类型,对其对应的存储单元的调度策略为“L”。
另外,调度策略除了可以是上述的SLA等级外,还可以是具体的性能指标等,存储系统根据任务类型信息,为任务类型生成性能指标。其中,性能指标包括但不限于传输速率(Million bits per second,MBPS)、每秒进行读写操作的次数(Input/Output Operations Per Second,IOPS)、业务时延、输入输出(Input/Output,IO)时延等,存储系统的服务质量模块根据性能指标,对任务类型获取符合该性能指标的调度策略。具体的,可参见表4,表4为本发明存储资源调度方法实施例四中任务类型与调度策略对应关系的映射表。
表4
任务编号 任务类型 调度策略 Other
1 创建VM MBPS≤30MB ……
2 删除VM IOPS≤50% ……
3 启动VM 不变 ……
4 迁移VM 不变 ……
5 休眠VM MBPS≤20MB ……
6 Running 不变 ……
7 备份VM 2倍延时 ……
8 VM杀毒 IOPS≤50% ……
…… …… …… ……
结合表4,本实施例中,存储系统根据任务类型以及性能指标,对计算单元对应的存储单元进行调度。其中,该性能指标可以是固定的,也可以是相对性的,例如,同时删除VM1与VM2,VM1的SLA等级为“H”,VM2的SLA等级为“L”,此时,可以对等级为“H”与等级为“L”的VM分别设置性能指标。
另外,需要说明的是,上述表2中静态的对任务类型与调度策略之间进行映射的方式、以及上述表3中以动态的对任务类型与调度策略之间进行映射的方式、以及上述表4中通过性能指标对任务类型与调度策略之间进行映射的方式并不是独立的,在实际可行的实施方式中,也可以结合使用,例如,可配合时间生效,在某时间段,对某个VM对应的存储单元设置该时间段的SLA等级、MBPS性能指标等。
需要说明的是,上述图5以及表1-表4是以存储计算系统采用图1所示架构为例对本发明进行详细说明,其中S3、S4中是由计算系统对任务类型进行识别并发送任务类型信息给存储系统,由存储系统根据任务类型获取调度策略。然而,本发明并不以此为限制,在其他可行的实施方式中,例如,当存储计算系统采用图3所示架构时,也可由计算系统对任务类型进行识别并获取调度策略,然后,直接将调度策略发送至存储系统,参见前面实施例的具体描述。
图6为本发明存储计算系统实施例一的结构示意图。本实施例提供的存储计算系统是与本发明图2实施例对应的装置实施例,具体实现过程在此不再赘述。具体的,本实施例提供的存储计算系统1000具体包括:计算系统100和存储系统200,计算系统100具有至少一个计算单元,存储系统200具有至少一个存储单元;计算系统100还包括标识模块11与发送模块12,存储系统200包括任务解析模块21与服务质量模块22。
标识模块11,用于对于所述至少一个计算单元中的任一计算单元,识别所述计算单元的任务类型;
发送模块12,用于向所述存储系统的任务解析模块21发送任务类型信息,所述任务类型信息携带所述任务类型;
任务解析模块21,用于根据所述任务类型信息,获取所述任务类型的调度策略;
服务质量模块22,用于根据所述任务解析模块21解析的所述调度策略,对所述计算单元对应的存储单元进行调度。
本发明实施例提供的存储计算系统,对于任意计算单元,计算系统识别计算单元的任务类型,计算系统向存储系统发送任务类型信息,任务类型信息携带任务类型;存储系统根据任务类型信息,获取任务类型的调度策略并根据调度策略,对计算单元对应的存储单元进行调度。该方法中,通过感知计算单元不同的任务,针对任务类型进行资源调度,实现同一个存储单元不同任务下的调度管理。
图7为本发明存储计算系统实施例二的结构示意图。如图7所示,本实施例的存储计算系统1000在图6装置结构的基础上,进一步的,当调度策略具体为任务类型的存储服务等级时,存储系统200还包括存储模块23,用于存储任务类型与存储服务等级的对应关系;
任务解析模块21,具体用于根据所述任务类型信息查找所述存储模块23存储的所述对应关系,确定所述任务类型的存储服务等级。
可选的,当所述任务类型信息还携带所述计算单元的服务等级时,任务解析模块21,具体用于根据所述任务类型信息,确定所述任务类型对应的操作信息,根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
可选的,当所述调度策略具体为性能指标时,任务解析模块21,具体用于根据所述任务类型信息,为所述任务类型生成性能指标。
图8A为本发明存储计算系统实施例三的结构示意图。如图8A所示,本实施例的存储计算系统1000在图6装置结构的基础上,进一步的,计算系统100还包括:通信接口建立模块13;
通信接口建立模块13,用于在所述计算系统与所述存储系统之间建立通信接口;
发送模块12,具体用于通过所述通信接口建立模块建立的所述通信接口向所述存储系统发送任务类型信息。
图8B为本发明存储计算系统实施例四的结构示意图。如图8B所示,本实施例的存储计算系统1000在图6装置结构的基础上,进一步的,计算系统100还包括:配置模块14;
配置模块14,用于配置所述计算系统与所述存储系统之间进行通信的配置文件;
发送模块12,具体用于将所述任务类型信息携带在所述配置模块配置的所述配置文件中发送给所述存储系统。
需要说明的是上述图8A与图8B所示的存储计算系统,当调度策略具体为任务类型的存储服务等级时,可选的还包括存储模块23,用于存储任务类型与存储服务等级的对应关系。
图9为本发明存储计算系统实施例五的结构示意图。本实施例提供的存储计算系统是与本发明图4实施例对应的装置实施例,具体实现过程在此不再赘述。具体的,本实施例提供的存储计算系统2000具体包括:计算系统300和存储系统400,计算系统300具有至少一个计算单元,存储系统400具有至少一个存储单元;计算系统300还包括标识映射模块31与发送模块32,存储系统400包括服务质量模块41。
所述标识映射模块31,用于对于所述至少一个计算单元中的任一计算单元,识别所述计算单元的任务类型,并根据所述任务类型,获取所述任务类型的调度策略;
所述发送模块32,用于向所述存储系统的服务质量模块41发送所述任务类型的调度策略;
所述服务质量模块41,用于根据所述发送模块32发送的所述调度策略,对所述计算单元对应的存储单元进行调度。
本发明实施例提供的存储计算系统,对于任意计算单元,计算系统识别计算单元的任务类型,并根据任务类型获取调度策略。然后,将调度策略发送给存储系统,使得存储系统对计算单元对应的存储单元进行调度。该方法中,通过感知计算单元不同的任务,针对任务类型进行资源调度,实现同一个存储单元不同任务下的调度管理。
图10为本发明存储计算系统实施例六的结构示意图。如图10所示,本实施例的存储计算系统2000在图9装置结构的基础上,进一步的,当所述调度策略具体为所述任务类型的存储服务等级时,所述计算系统300还包括存储模块33,用于存储所述任务类型与所述存储服务等级的对应关系;
所述标识映射模块31,具体用于根据所述任务类型查找所述存储模块33存储的所述对应关系,确定所述任务类型的存储服务等级。
可选的,所述标识映射模块31,具体用于确定所述任务类型对应的操作信息;根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
可选的,当所述调度策略具体为性能指标时,所述标识映射模块31,具体用于根据所述任务类型,为所述任务类型生成所述性能指标。
图11为本发明存储计算系统实施例七的结构示意图。如图11所示,本实施例提供的存储计算系统3000,包括:处理器51和存储器52。存储计算系统3000还可以包括发射器53、接收器54。发射器53和接收器54可以和处理器51相连。其中,发射器53用于发送数据或信息,接收器54用于接收数据或信息,存储器52存储执行指令,当存储计算系统3000运行时,处理器51与存储器52之间通信,处理器51调用存储器52中的执行指令,用于执行图2和图5所示方法实施例,其实现原理和技术效果类似,此处不再赘述。
图12为本发明存储计算系统实施例八的结构示意图。如图12所示,本实施例提供的存储计算系统4000,包括:处理器61和存储器62。存储计算系统4000还可以包括发射器63、接收器64。发射器63和接收器64可以和处理器61相连。其中,发射器63用于发送数据或信息,接收器64用于接收数据或信息,存储器62存储执行指令,当存储计算系统4000运行时,处理器61与存储器62之间通信,处理器61调用存储器62中的执行指令,用于执行图4和图5所示方法实施例,其实现原理和技术效果类似,此处不再赘述。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (20)

1.一种存储资源调度方法,其特征在于,适用于具有计算系统和存储系统的存储计算系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,该方法包括:
对于所述至少一个计算单元中的任一计算单元,所述计算系统识别所述计算单元的任务类型;
所述计算系统向所述存储系统发送任务类型信息,所述任务类型信息携带所述任务类型;
所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略;
所述存储系统根据所述调度策略,对所述计算单元对应的存储单元进行调度。
2.根据权利要求1所述的方法,其特征在于,所述调度策略具体为所述任务类型的存储服务等级,所述存储系统存储有所述任务类型与所述存储服务等级的对应关系;
所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略,包括:
所述存储系统根据所述任务类型信息查找所述对应关系,确定所述任务类型的存储服务等级。
3.根据权利要求1所述的方法,其特征在于,所述任务类型信息还携带所述计算单元的服务等级;
所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略,包括:
所述存储系统根据所述任务类型信息,确定所述任务类型对应的操作信息;
根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
4.根据权利要求1所述的方法,其特征在于,所述调度策略具体为性能指标,所述存储系统根据所述任务类型信息,获取所述任务类型的调度策略,包括:
所述存储系统根据所述任务类型信息,为所述任务类型生成所述性能指标。
5.根据权利要求1~4任一项所述的方法,其特征在于,所述计算系统向所述存储系统发送所述任务类型信息之前,还包括:
所述计算系统在所述计算系统与所述存储系统之间建立通信接口;
所述计算系统向所述存储系统发送所述任务类型信息,包括:
所述计算系统通过所述通信接口向所述存储系统发送所述任务类型信息。
6.根据权利要求1~4任一项所述的方法,其特征在于,所述计算系统向所述存储系统发送所述任务类型信息之前,还包括:
所述计算系统配置所述计算系统与所述存储系统之间进行通信的配置文件;
所述计算系统向所述存储系统发送所述任务类型信息,包括:
所述计算系统将所述任务类型信息携带在所述配置文件中发送给所述存储系统。
7.一种存储资源调度方法,其特征在于,适用于具有计算系统和存储系统的存储计算系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,该方法包括:
对于所述至少一个计算单元中的任一计算单元,所述计算系统识别所述计算单元的任务类型;
所述计算系统根据所述任务类型,获取所述任务类型的调度策略;
所述计算系统向所述存储系统发送所述任务类型的调度策略;
所述存储系统根据所述调度策略,对所述计算单元对应的存储单元进行调度。
8.根据权利要求7所述的方法,其特征在于,所述调度策略具体为所述任务类型的存储服务等级,所述计算系统存储有所述任务类型与所述存储服务等级的对应关系;
所述计算系统根据所述任务类型,获取所述任务类型的调度策略,包括:所述计算系统根据所述任务类型查找所述对应关系,确定所述任务类型的存储服务等级。
9.根据权利要求7所述的方法,其特征在于,所述计算系统根据所述任务类型,获取所述任务类型的调度策略,包括:
所述计算系统确定所述任务类型对应的操作信息;根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
10.根据权利要求7所述的方法,其特征在于,所述调度策略具体为性能指标,所述计算系统根据所述任务类型,获取所述任务类型的调度策略,包括:
所述计算系统根据所述任务类型,为所述任务类型生成所述性能指标。
11.一种存储计算系统,包括计算系统和存储系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,其特征在于:
所述计算系统包括标识模块与发送模块,所述存储系统包括任务解析模块与服务质量模块;其中,
所述标识模块,用于对于所述至少一个计算单元中的任一计算单元,识别所述计算单元的任务类型;
所述发送模块,用于向所述存储系统的任务解析模块发送任务类型信息,所述任务类型信息携带所述任务类型;
所述任务解析模块,用于根据所述任务类型信息,获取所述任务类型的调度策略;
所述服务质量模块,用于根据所述任务解析模块解析的所述调度策略,对所述计算单元对应的存储单元进行调度。
12.根据权利要求11所述的存储计算系统,其特征在于,当所述调度策略具体为所述任务类型的存储服务等级时,所述存储系统还包括存储模块,用于存储所述任务类型与所述存储服务等级的对应关系;
所述任务解析模块,具体用于根据所述任务类型信息查找所述存储模块存储的所述对应关系,确定所述任务类型的存储服务等级。
13.根据权利要求11所述的存储计算系统,其特征在于,当所述任务类型信息还携带所述计算单元的服务等级时,
所述任务解析模块,具体用于根据所述任务类型信息,确定所述任务类型对应的操作信息,根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
14.根据权利要求11所述的存储计算系统,其特征在于,当所述调度策略具体为性能指标时,
所述任务解析模块,具体用于根据所述任务类型信息,为所述任务类型生成所述性能指标。
15.根据权利要求11~14任一项所述的存储计算系统,其特征在于,所述计算系统还包括:通信接口建立模块;
所述通信接口建立模块,用于在所述计算系统与所述存储系统之间建立通信接口;
所述发送模块,具体用于通过所述通信接口建立模块建立的所述通信接口向所述存储系统发送所述任务类型信息。
16.根据权利要求11~14任一项所述的存储计算系统,其特征在于,所述计算系统还包括:配置模块;
所述配置模块,用于配置所述计算系统与所述存储系统之间进行通信的配置文件;
所述发送模块,具体用于将所述任务类型信息携带在所述配置模块配置的所述配置文件中发送给所述存储系统。
17.一种存储计算系统,包括计算系统和存储系统,所述计算系统具有至少一个计算单元,所述存储系统具有至少一个存储单元,其特征在于:
所述计算系统包括识别映射模块与发送模块,所述存储系统包括服务质量模块;其中,
所述识别映射模块,用于对于所述至少一个计算单元中的任一计算单元,识别所述计算单元的任务类型,并根据所述任务类型,获取所述任务类型的调度策略;
所述发送模块,用于向所述存储系统的服务质量模块发送所述任务类型的调度策略;
所述服务质量模块,用于根据所述发送模块发送的所述调度策略,对所述计算单元对应的存储单元进行调度。
18.根据权利要求17所述的存储计算系统,其特征在于,当所述调度策略具体为所述任务类型的存储服务等级时,所述计算系统还包括存储模块,用于存储所述任务类型与所述存储服务等级的对应关系;
所述识别映射模块,具体用于根据所述任务类型查找所述存储模块存储的所述对应关系,确定所述任务类型的存储服务等级。
19.根据权利要求17所述的存储计算系统,其特征在于,
所述识别映射模块,具体用于确定所述任务类型对应的操作信息;根据所述操作信息,对所述计算单元的服务等级进行处理以得到所述任务类型的调度策略。
20.根据权利要求17所述的存储计算系统,其特征在于,当所述调度策略具体为性能指标时,
所述识别映射模块,具体用于根据所述任务类型,为所述任务类型生成所述性能指标。
CN201410062471.5A 2014-02-24 2014-02-24 存储资源调度方法及存储计算系统 Pending CN103795804A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201410062471.5A CN103795804A (zh) 2014-02-24 2014-02-24 存储资源调度方法及存储计算系统
EP14883281.9A EP3101870A1 (en) 2014-02-24 2014-10-27 Storage resource scheduling method and storage calculation system
PCT/CN2014/089540 WO2015123999A1 (zh) 2014-02-24 2014-10-27 存储资源调度方法及存储计算系统
US15/245,807 US10241835B2 (en) 2014-02-24 2016-08-24 Scheduling storage and computing resources based on task types and service levels

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410062471.5A CN103795804A (zh) 2014-02-24 2014-02-24 存储资源调度方法及存储计算系统

Publications (1)

Publication Number Publication Date
CN103795804A true CN103795804A (zh) 2014-05-14

Family

ID=50671072

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410062471.5A Pending CN103795804A (zh) 2014-02-24 2014-02-24 存储资源调度方法及存储计算系统

Country Status (4)

Country Link
US (1) US10241835B2 (zh)
EP (1) EP3101870A1 (zh)
CN (1) CN103795804A (zh)
WO (1) WO2015123999A1 (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104142853A (zh) * 2014-08-12 2014-11-12 华为技术有限公司 虚拟机存储资源部署方法和装置
CN104657205A (zh) * 2014-12-26 2015-05-27 中通服公众信息产业股份有限公司 一种基于虚拟化的视频内容分析方法及系统
WO2015123999A1 (zh) * 2014-02-24 2015-08-27 华为技术有限公司 存储资源调度方法及存储计算系统
CN105653365A (zh) * 2016-02-22 2016-06-08 青岛海尔智能家电科技有限公司 任务处理方法及装置
CN105808333A (zh) * 2016-03-04 2016-07-27 上海携程商务有限公司 任务分配方法及系统
CN106095534A (zh) * 2016-06-07 2016-11-09 百度在线网络技术(北京)有限公司 一种计算任务处理方法和系统
CN107273202A (zh) * 2017-07-14 2017-10-20 郑州云海信息技术有限公司 一种控制任务调度的方法和装置
CN109298936A (zh) * 2018-09-11 2019-02-01 华为技术有限公司 一种资源调度方法及装置
CN110750582A (zh) * 2018-07-23 2020-02-04 阿里巴巴集团控股有限公司 数据处理方法、装置和系统
CN111027689A (zh) * 2019-11-20 2020-04-17 中国航空工业集团公司西安航空计算技术研究所 配置方法、装置及计算系统
WO2021258881A1 (zh) * 2020-06-23 2021-12-30 华为技术有限公司 应用的数据管理方法、系统和计算机设备

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105446812A (zh) * 2016-01-04 2016-03-30 中国南方电网有限责任公司 一种多任务调度配置方法
US10572650B2 (en) * 2016-02-29 2020-02-25 Intel Corporation Technologies for independent service level agreement monitoring
CN108228354B (zh) * 2017-12-29 2022-03-18 杭州朗和科技有限公司 调度方法、系统、计算机设备和介质
US10725819B2 (en) 2018-05-18 2020-07-28 Acronis International Gmbh System and method for scheduling and allocating data storage
WO2021022486A1 (zh) * 2019-08-06 2021-02-11 西门子股份公司 配置优先级的方法、云平台、系统、计算设备和介质
US11321257B2 (en) 2019-12-31 2022-05-03 Micron Technology, Inc. Quality of service control of logical devices for a memory sub-system
US11829625B2 (en) * 2020-04-27 2023-11-28 EMC IP Holding Company LLC Slice memory control
US11726827B2 (en) * 2021-02-19 2023-08-15 Vast Data Ltd. Hierarchical workload allocation in a storage system
CN113742045A (zh) * 2021-09-15 2021-12-03 上海淇玥信息技术有限公司 一种分布式任务处理方法、装置和电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1859418A (zh) * 2006-03-06 2006-11-08 华为技术有限公司 通讯网络中网络资源的分配方法及系统
CN101908972A (zh) * 2010-05-25 2010-12-08 北京邮电大学 一种otn传输设备中mpls-tp业务通道资源分配方法及其装置
CN102567072A (zh) * 2010-12-20 2012-07-11 中国移动通信集团公司 一种资源分配方法、装置及系统
CN103414657A (zh) * 2013-08-22 2013-11-27 浪潮(北京)电子信息产业有限公司 一种跨数据中心的资源调度方法、超级调度中心和系统
CN103501347A (zh) * 2013-10-14 2014-01-08 中国联合网络通信集团有限公司 资源分配方法及装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07302236A (ja) * 1994-05-06 1995-11-14 Hitachi Ltd 情報処理システムおよびその方法並びに情報処理システムにおけるサービス提供方法
US6904470B1 (en) * 2003-03-26 2005-06-07 Emc Corporation Device selection by a disk adapter scheduler
US7480912B2 (en) * 2003-05-29 2009-01-20 International Business Machines Corporation Method for policy-based, autonomically allocated storage
GB0513045D0 (en) * 2005-06-27 2005-08-03 Vidus Ltd Resource scheduling method and system
US7747662B2 (en) * 2005-12-30 2010-06-29 Netapp, Inc. Service aware network caching
US7895520B1 (en) * 2006-01-03 2011-02-22 Emc Corp Methods and apparatus for managing scheduled activities in a storage area network
US8473566B1 (en) * 2006-06-30 2013-06-25 Emc Corporation Methods systems, and computer program products for managing quality-of-service associated with storage shared by computing grids and clusters with a plurality of nodes
US7937373B2 (en) * 2007-09-07 2011-05-03 Csi Technology, Inc. Method and apparatus for automated storage of event-substantiating data
US7822731B1 (en) * 2008-03-28 2010-10-26 Emc Corporation Techniques for management of information regarding a sequential stream
US8943203B1 (en) * 2009-07-10 2015-01-27 Netapp, Inc. System and method for storage and deployment of virtual machines in a virtual server environment
JP5244831B2 (ja) * 2010-01-25 2013-07-24 株式会社日立製作所 計算機システム及びストレージ統合管理方法
US9213574B2 (en) * 2010-01-30 2015-12-15 International Business Machines Corporation Resources management in distributed computing environment
US9003157B1 (en) * 2010-06-30 2015-04-07 Emc Corporation Techniques for dynamic data storage configuration in accordance with an allocation policy
US8407501B2 (en) * 2011-03-28 2013-03-26 International Business Machines Corporation Allocation of storage resources in a networked computing environment based on energy utilization
US20120290789A1 (en) * 2011-05-12 2012-11-15 Lsi Corporation Preferentially accelerating applications in a multi-tenant storage system via utility driven data caching
US20130179371A1 (en) * 2012-01-05 2013-07-11 Microsoft Corporation Scheduling computing jobs based on value
US9152549B1 (en) * 2012-03-30 2015-10-06 Google Inc. Dynamically allocating memory for processes
US10102097B2 (en) * 2012-07-12 2018-10-16 International Business Machines Corporation Transaction server performance monitoring using component performance data
CN103023963B (zh) * 2012-10-31 2017-03-08 浪潮集团有限公司 一种用于云存储资源优化分配的方法
US9442954B2 (en) * 2012-11-12 2016-09-13 Datawise Systems Method and apparatus for achieving optimal resource allocation dynamically in a distributed computing environment
US9201777B2 (en) * 2012-12-23 2015-12-01 Advanced Micro Devices, Inc. Quality of service support using stacked memory device with logic die
US10552774B2 (en) * 2013-02-11 2020-02-04 Amazon Technologies, Inc. Cost-minimizing task scheduler
US9298385B2 (en) * 2013-04-12 2016-03-29 International Business Machines Corporation System, method and computer program product for deduplication aware quality of service over data tiering
CN106412030B (zh) * 2013-11-05 2019-08-27 华为技术有限公司 一种选择存储资源方法、装置及系统
CN103581339A (zh) * 2013-11-25 2014-02-12 广东电网公司汕头供电局 基于云计算的存储资源分配监控处理方法
JP6273866B2 (ja) * 2014-01-29 2018-02-07 富士通株式会社 制御プログラム、制御装置および制御方法
CN103795804A (zh) * 2014-02-24 2014-05-14 华为技术有限公司 存储资源调度方法及存储计算系统
CN106155764A (zh) * 2015-04-23 2016-11-23 阿里巴巴集团控股有限公司 调度虚拟机输入输出资源的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1859418A (zh) * 2006-03-06 2006-11-08 华为技术有限公司 通讯网络中网络资源的分配方法及系统
CN101908972A (zh) * 2010-05-25 2010-12-08 北京邮电大学 一种otn传输设备中mpls-tp业务通道资源分配方法及其装置
CN102567072A (zh) * 2010-12-20 2012-07-11 中国移动通信集团公司 一种资源分配方法、装置及系统
CN103414657A (zh) * 2013-08-22 2013-11-27 浪潮(北京)电子信息产业有限公司 一种跨数据中心的资源调度方法、超级调度中心和系统
CN103501347A (zh) * 2013-10-14 2014-01-08 中国联合网络通信集团有限公司 资源分配方法及装置

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015123999A1 (zh) * 2014-02-24 2015-08-27 华为技术有限公司 存储资源调度方法及存储计算系统
US10241835B2 (en) 2014-02-24 2019-03-26 Huawei Technologies Co., Ltd. Scheduling storage and computing resources based on task types and service levels
CN104142853B (zh) * 2014-08-12 2018-02-09 华为技术有限公司 虚拟机存储资源部署方法和装置
WO2016023390A1 (zh) * 2014-08-12 2016-02-18 华为技术有限公司 虚拟机存储资源部署方法和装置
CN104142853A (zh) * 2014-08-12 2014-11-12 华为技术有限公司 虚拟机存储资源部署方法和装置
CN104657205A (zh) * 2014-12-26 2015-05-27 中通服公众信息产业股份有限公司 一种基于虚拟化的视频内容分析方法及系统
CN104657205B (zh) * 2014-12-26 2018-12-14 中通服公众信息产业股份有限公司 一种基于虚拟化的视频内容分析方法及系统
CN105653365A (zh) * 2016-02-22 2016-06-08 青岛海尔智能家电科技有限公司 任务处理方法及装置
CN105808333A (zh) * 2016-03-04 2016-07-27 上海携程商务有限公司 任务分配方法及系统
CN106095534A (zh) * 2016-06-07 2016-11-09 百度在线网络技术(北京)有限公司 一种计算任务处理方法和系统
CN107273202A (zh) * 2017-07-14 2017-10-20 郑州云海信息技术有限公司 一种控制任务调度的方法和装置
CN110750582A (zh) * 2018-07-23 2020-02-04 阿里巴巴集团控股有限公司 数据处理方法、装置和系统
CN110750582B (zh) * 2018-07-23 2023-05-02 阿里巴巴集团控股有限公司 数据处理方法、装置和系统
CN109298936A (zh) * 2018-09-11 2019-02-01 华为技术有限公司 一种资源调度方法及装置
CN109298936B (zh) * 2018-09-11 2021-05-18 华为技术有限公司 一种资源调度方法及装置
CN111027689A (zh) * 2019-11-20 2020-04-17 中国航空工业集团公司西安航空计算技术研究所 配置方法、装置及计算系统
CN111027689B (zh) * 2019-11-20 2024-03-22 中国航空工业集团公司西安航空计算技术研究所 配置方法、装置及计算系统
WO2021258881A1 (zh) * 2020-06-23 2021-12-30 华为技术有限公司 应用的数据管理方法、系统和计算机设备

Also Published As

Publication number Publication date
EP3101870A4 (en) 2016-12-07
EP3101870A1 (en) 2016-12-07
US10241835B2 (en) 2019-03-26
WO2015123999A1 (zh) 2015-08-27
US20160364269A1 (en) 2016-12-15

Similar Documents

Publication Publication Date Title
CN103795804A (zh) 存储资源调度方法及存储计算系统
US10990288B2 (en) Systems and/or methods for leveraging in-memory storage in connection with the shuffle phase of MapReduce
US10176550B1 (en) GPU resource usage display and dynamic GPU resource allocation in a networked virtualization system
US9389798B2 (en) Dynamic reconfiguration of storage system
CN109684065B (zh) 一种资源调度方法、装置及系统
US20180276044A1 (en) Coordinated, topology-aware cpu-gpu-memory scheduling for containerized workloads
US9813423B2 (en) Trust-based computing resource authorization in a networked computing environment
US9367359B2 (en) Optimized resource management for map/reduce computing
US9823941B2 (en) Optimized placement of virtual machines on physical hosts based on user configured placement policies
CN110830546A (zh) 基于容器云平台的可用域建设方法、装置、设备
US9330199B2 (en) Striping of directed graphs and nodes with improved functionality
CN102307133A (zh) 一种公有云平台虚拟机调度方法
US20140282540A1 (en) Performant host selection for virtualization centers
CN102169505A (zh) 基于云计算的推荐系统构建方法
CN103645957A (zh) 一种虚拟机资源管控方法及装置
US20200278956A1 (en) Management of memory usage using usage analytics
CN104580194A (zh) 面向视频应用的虚拟化资源管理方法及装置
US20180227240A1 (en) Data and task reallocation in distributed computing platforms
CN105095103A (zh) 用于云环境下的存储设备管理方法和装置
KR101765725B1 (ko) 대용량 방송용 빅데이터 분산 병렬처리를 위한 동적 디바이스 연결 시스템 및 방법
CN104410666A (zh) 云计算下实现异构存储资源管理的方法及系统
US10938655B2 (en) Enterprise cloud garbage collector
Singh et al. Scheduling algorithm with load balancing in cloud computing
CN107528871A (zh) 存储系统中的数据分析
US20130346983A1 (en) Computer system, control system, control method and control program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140514

RJ01 Rejection of invention patent application after publication