CN111158595B - 企业级异构存储资源调度方法及系统 - Google Patents

企业级异构存储资源调度方法及系统 Download PDF

Info

Publication number
CN111158595B
CN111158595B CN201911382770.6A CN201911382770A CN111158595B CN 111158595 B CN111158595 B CN 111158595B CN 201911382770 A CN201911382770 A CN 201911382770A CN 111158595 B CN111158595 B CN 111158595B
Authority
CN
China
Prior art keywords
storage
target
resource pool
storage resource
requirement value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911382770.6A
Other languages
English (en)
Other versions
CN111158595A (zh
Inventor
裘雪敬
陈东平
余冬玲
张翔
王洪
范鹏
王建伟
陈玉贤
王立伟
王海东
李铭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Construction Bank Corp
Original Assignee
China Construction Bank Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Construction Bank Corp filed Critical China Construction Bank Corp
Priority to CN201911382770.6A priority Critical patent/CN111158595B/zh
Publication of CN111158595A publication Critical patent/CN111158595A/zh
Application granted granted Critical
Publication of CN111158595B publication Critical patent/CN111158595B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0631Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/0643Management of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供了一种企业级异构存储资源调度方法及系统,方法包括获取用户提交的服务请求,判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足服务请求的需求,若是,则根据服务请求包含的应用级别确定目标存储资源池的存储级别,这样可以根据应用级别以及存储资源池的存储性能对存储资源池进行划分,为重要的、高级别的应用系统分配存储性能更高、可用性更高的存储资源池;并且整个过程为系统的自动管理调度,实现对整个存储资源的高效、快速的调度和分配,从而提高了企业的存储运维效率。

Description

企业级异构存储资源调度方法及系统
技术领域
本发明涉及存储资源管理技术领域,更具体地说,涉及企业级异构存储资源调度方法及系统。
背景技术
在互联网时代,银行的核心业务数据以及其他交易数据量呈几何数字大量增长,对数据存储效率和安全性的要求也越来越高。原有的资源池管理系统面临很大的压力,如何建立一种高效的企业级异构存储资源管理调度方法是每个企业都要面临的问题。
企业采购的存储设备来源于各个不同的厂商,不同的存储设备的性能有所不同。企业的不同业务有不同的存储需求,但是,对于不同业务的存储需求,目前都是人工进行存储判断、规划、实施等流程,导致存储运维效率较低。
发明内容
有鉴于此,本发明提出企业级异构存储资源调度方法及系统,欲实现提高企业存储运维效率。
为了实现上述目的,现提出的方案如下:
第一方面,提供一种企业级异构存储资源调度方法,包括:
获取用户提交的服务请求,所述服务请求包含主机信息、应用级别、容量需求值和存储性能需求值;
判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值,若否,则提示人工介入处理,若是,则根据所述应用级别确定所述目标存储资源池的存储级别;
判断所述目标存储资源池中是否存在满足所述容量需求值和所述存储性能需求值的存储设备,若存在,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在,则提示人工介入处理;
根据所述主机信息和所述目标存储设备信息,生成存储资源规划文件;
利用所述存储资源规划文件,对所述目标存储设备的存储资源进行存储操作。
第二方面,提供一种企业级异构存储资源调度系统,包括:
请求获取单元,用于获取用户提交的服务请求,所述服务请求包含主机信息、应用级别、容量需求值和存储性能需求值;
第一判断单元,用于判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值,若否,则提示人工介入处理,若是,则根据所述应用级别确定所述目标存储资源池的存储级别;
第二判断单元,用于判断所述目标存储资源池中是否存在满足所述容量需求值和所述存储性能需求值的存储设备,若存在,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在,则提示人工介入处理;
存储资源规划单元,用于根据所述主机信息和所述目标存储设备信息,生成存储资源规划文件;
存储资源实施单元,用于利用所述存储资源规划文件,对所述目标存储设备的存储资源进行存储操作。
与现有技术相比,本发明的技术方案具有以下优点:
上述技术方案提供的一种企业级异构存储资源调度方法及系统,方法包括获取用户提交的服务请求,判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足服务请求的需求,若是,则根据服务请求包含的应用级别确定目标存储资源池的存储级别,这样可以根据应用级别以及存储资源池的存储性能对存储资源池进行划分,为重要的、高级别的应用系统分配存储性能更高、可用性更高的存储资源池;并且整个过程为系统的自动管理调度,实现对整个存储资源的高效、快速的调度和分配,从而提高了企业的存储运维效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种电子设备的结构示意图;
图2为本发明实施例提供的一种企业级异构存储资源调度方法的流程图;
图3为本发明实施例提供的一种数据处理方法的流程图;
图4为本发明实施例提供的另一种数据处理方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供的企业级异构存储资源调度方法可应用于电子设备,如PC终端、云平台、服务器及服务器集群等。服务器可以是机架式服务器、刀片式服务器、塔式服务器以及机柜式服务器中的一种或几种。参见图1,为电子设备的结构示意图。电子设备的硬件结构可以包括:至少一个处理器11,至少一个通信接口12,至少一个存储器13和至少一个通信总线14;且处理器11、通信接口12、存储器13通过通信总线14完成相互间的通信;
处理器11在一些实施例中可以是一个CPU(Central Processing Unit,中央处理器),或者是ASIC(Application Specific Integrated Circuit,特定集成电路),或者是被配置成实施本发明实施例的一个或多个集成电路等。
通信接口12可以包括标准的有线接口、无线接口。通常用于在电子设备与其他设备或系统之间建立通信连接。
存储器13包括至少一种类型的可读存储介质。可读存储介质可以为如闪存、硬盘、多媒体卡、卡型存储器等NVM(non-volatile memory,非易失性存储器)。可读存储介质还可以是高速RAM(random access memory,随机存取存储器)存储器。可读存储介质在一些实施例中可以是电子设备的内部存储单元,例如该电子设备的硬盘。在另一些实施例中,可读存储介质还可以是电子设备的外部存储设备,例如该电子设备上配备的插接式硬盘、SMC(Smart Media Card,智能存储卡)、SD(Secure Digital,安全数字)卡,闪存卡(FlashCard)等。
其中,存储器13存储有计算机程序,处理器11可调用存储器13存储的计算机程序,所述计算机程序用于实现本发明提供的企业级异构存储资源调度方法。
图1仅示出了具有组件11~14的电子设备,但是应理解的是,并不要求实施所有示出的组件,可以替代的实施更多或者更少的组件。
可选地,该电子设备还可以包括用户接口,用户接口可以包括输入单元(比如键盘)、语音输入装置(比如包含麦克风的具有语音识别功能的设备)和/或语音输出装置(比如音响、耳机等)。可选地,用户接口还可以包括标准的有线接口和/或无线接口。
可选地,该电子设备还可以包括显示器,显示器也可以称为显示屏或显示单元。在一些实施例中可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(OrganicLight-Emitting Diode,有机发光二极管)显示器等。显示器用于显示可视化的用户界面。
可选地,该电子设备还可以包括触摸传感器。触摸传感器所提供的供用户进行触摸操作的区域称为触控区域。此外,触摸传感器可以为电阻式触摸传感器、电容式触摸传感器等。而且,触摸传感器不仅包括接触式的触摸传感器,也可包括接近式的触摸传感器等。此外,触摸传感器可以为单个传感器,也可以为例如阵列布置的多个传感器。
此外,该电子设备的显示器的面积可以与触摸传感器的面积相同,也可以不同。可选地,将显示器与触摸传感器层叠设置,以形成触摸显示屏。该装置基于触摸显示屏侦测用户触发的触控操作。
该电子设备还可以包括RF(Radio Frequency,射频)电路、传感器和音频电路等等,在此不再赘。
下面详细介绍本发明提供的企业级异构存储资源调度方法。参见图2,为本实施例提供的一种企业级异构存储资源调度方法,该方法可以包括以下步骤:
S21:获取用户提交的服务请求。
当用户有存储需求时,如主机自身的存储容量无法满足业务存储需求,需要存储资源时,用户在存储提供方提供的可视化用户界面进行服务申请。用户提交的服务请求即为用户的存储需求信息。该服务请求包含主机信息、应用级别、容量需求值和存储性能需求值等信息。
在一个具体实施例中,用户提交的服务请求包含应用名称、部署单元、应用级别、设备类型、OS(Operating System,操作系统)类型、OS版本、主机名称、主机HBA(Host BusAdapter,主机总线适配器)卡的WWPN(world wide port name,全球端口名称)、数据盘容量、归档盘容量、MBPS(Million bits per second,兆比特每秒)和IOPS(Input/OutputOperations Per Second,每秒进行读写操作的次数)等信息。其中,应用名称、部署单元、应用级别、设备类型、OS类型、OS版本、主机名称和主机HBA卡的WWPN,用于存储端创建存储VIEW、多路径软件版本以及zone配置。数据盘容量和归档盘容量为容量需求值,MBPS和IOPS为存储性能需求值。
S22:判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足容量需求值和存储性能需求值,若否,则提示人工介入处理,若是,则根据应用级别确定目标存储资源池的存储级别。
目标存储资源池的可用剩余容量为目标存储资源池中所有存储设备的可用剩余容量总和,目标存储资源池的存储性能可用值为目标存储资源池中所有存储设备的存储性能可用值总和。在一个具体实施例中通过资源管理库动态存储每个存储资源池的可用剩余容量和存储性能可用值。
应用级别是用户输入的信息,用户可以根据应用系统的重要程度确定应用级别。预先根据存储资源池的可用剩余容量和存储性能可用值对存储资源池划分存储级别,设定不同应用级别与存储级别的对应关系。在一个具体实施例中,应用级别按照从高到低分为A+、A、B和C四种,存储级别按照可用剩余容量和存储性能可用值的综合值从高到低,分为白金级存储资源池、金级存储资源池、银级存储资源池和铜级存储资源池。应用级别A+对应白金级存储资源池,应用级别A对应金级存储资源池,应用级别B对应银级存储资源池,应用级别C对应铜级存储资源池。
同一个存储资源池可以包括不同厂商的存储设备以及同一厂商的不同存储设备。
人工介入处理后,可以进行服务请求内容修改、存储资源池扩容或主机更换存储网络资源池等后续处理。服务请求内容修改可以修改服务请求包含的容量需求值和存储性能需求值等,存储资源池扩容可以扩大存储资源池的容量,更换存储网络资源池可以将主机换到其它存储资源池中。
需要说明的是,对于SAN(Storage Area Network,存储区域网络)存储,需要与存储交换机共同使用的,主机通过存储交换机连接存储设备;一个主机连接的所有存储设备构成了一个存储资源池;一个主机与一个存储资源池之间的所有存储交换机构成了存储网络资源池。一个主机只能连接到一个存储网络资源池中。存储网络资源池由主机边缘交换机、核心交换机和存储边缘交换机三层级架构构成,主机边缘交换机连接主机,存储边缘交换机连接存储设备。一个存储网络资源池连接着的所有存储设备就构成了一个存储资源池。
S23:判断目标存储资源池中是否存在满足容量需求值和存储性能需求值的存储设备,若存在,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在,则提示人工介入处理。
S24:根据主机信息和目标存储设备信息,生成存储资源规划文件。
存储资源规划文件记载了满足服务请求的拟分配的存储资源信息。
S25:利用存储资源规划文件,对目标存储设备的存储资源进行存储操作。
对目标存储设备的存储资源进行的存储操作包括但不限于新建操作、扩容操作和回收操作等。
本实施例提供的上述企业级异构存储资源调度方法,对存储资源进行自动的调度和分配,有效降低了人工参与的规划实施周期长、易出错等问题,实现对整个存储资源的高效、快速的调度和分配,从而提高了企业的存储运维效率。
可选的,服务请求还可以包含应用数据属性,根据应用数据属性确定目标存储资源池的属性。应用数据属性指的是数据的用途,在一个具体实施例中应用数据属性分为生产属性、多活属性和灾备属性等,进而将存储资源池划分为生产存储资源池、多活存储资源池和灾备存储资源池。对于NAS存储,应用数据属性还可以包括应用属性,当应用系统为AP(Application,应用)的时候,选择AP存储资源池。
对于不同属性的存储资源池,存储资源池的划分也可以不同;在一个具体实施例中,将生产存储资源池分为白金级存储资源池、金级存储资源池和银级存储资源池,多活存储资源池和灾备存储资源池均分为白金级存储资源池和金级存储资源池。
可选的,在获取用户提交的服务请求的步骤后,还包括:分析服务请求所需的存储类型。分析服务请求所需的存储类型主要分为两种情况:一种情况是,服务请求包含指示使用何种存储类型的参数,那么直接提取该参数,按照用户的要求确定存储类型。另一种情况是,如果服务请求中没有指示使用何种存储类型的参数,这时需要根据服务请求包含的信息确定服务请求是基于块存储的IO类型还是基于文件或需要共享文件的存储,若是前者,则确定服务请求所需的是SAN存储,若是后者,则确定服务请求所需的是NAS(NetworkAttached Storage,网络附属存储)存储。
在存储类型为SAN存储时,后续执行图3所示的数据处理方法;在存储类型为NAS时,后续执行图4所示的数据处理方法。参见图3,在存储类型为SAN存储时,后续处理过程可以包括以下步骤:
S301:根据主机信息包括的主机HBA卡的WWPN,确定主机所属的存储网络资源池。
主机连接的存储网络资源池,即为主机所属的存储网络资源池。在一个具体实施例中,通过资源管理库存储所有的存储交换机信息,根据主机信息确定主机所属的存储网络资源池。
S302:获取与主机所属的存储网络资源池对应的存储资源池,并作为目标存储资源池。
存储网络资源池与存储资源池为一一对应的关系。在一个具体实施例中,通过资源管理库存储有存储网络资源池与存储资源池之间的对应关系。
S303:判断目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则执行步骤S304。
在一个具体实施例中,资源管理库中存储有每个存储资源池的对外服务参数,当对外服务参数为是时,确定对应的存储资源池可用,当对外服务参数为否时,确定对应的存储资源池不可用。具体的,可以在存储资源池的可用剩余容量小于预设最小容量阈值,或者存储性能可用值小于预设最小性能阈值时,将该存储资源池的外服务参数赋值为否;在存储资源池的可用剩余容量不小于预设最小容量阈值,且存储性能可用值不小于预设最小性能阈值时,将该存储资源池的外服务参数赋值为是。
S304:判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足容量需求值和存储性能需求值,若否,则提示人工介入处理,若是,则执行步骤S305。
S305:根据应用级别确定目标存储资源池的存储级别。
S306:确定目标存储资源池中可用的存储设备为第一存储设备。
在一个具体实施例中,资源管理库中存储有存储资源池中每个存储设备的对外服务参数,当对外服务参数为是时,确定对应的存储设备可用,当对外服务参数为否时,确定对应的存储设备不可用。具体的,可以在存储设备的可用剩余容量小于预设最小容量阈值,或者存储性能可用值小于预设最小性能阈值时,将该存储设备的外服务参数赋值为否;在存储设备的可用剩余容量不小于预设最小容量阈值,且存储性能可用值不小于预设最小性能阈值时,将该存储设备的外服务参数赋值为是。
执行步骤S306,得到目标存储资源池中对外服务参数为是的所有存储设备,即得到目标存储资源池中所有可用的存储设备,生成目标存储设备列表,即第一存储设备列表。
S307:根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作。
执行步骤S307,对第一存储设备列表中的每个第一存储设备的容量使用率进行判断,若第一存储设备的容量使用率低于预设阈值,则确定该第一存储设备执行存储资源新建操作,若第一存储设备的容量使用率不低于预设阈值,则确定该第一存储设备执行存储资源扩容操作,且不执行存储资源新建操作。在一个具体实施例中,预设阈值为75%。
S308:判断各个第一存储设备是否满足容量需求值和存储性能需求值,若存在满足容量需求值和存储性能需求值的第一存储设备,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在满足容量需求值和存储性能需求值的第一存储设备,则提示人工介入处理。
S309:从目标存储设备中选择使用率最低的pool作为目标pool。
pool为存储设备中的存储池,一个存储设备中包括多个pool。Pool的使用率为pool已使用容量/pool总容量。
S310:从目标pool中选择若干LUN(Logical Unit Number,逻辑单元号)形成LUN组,LUN组满足容量需求值。
一个pool包含多个LUN,LUN组中的LUN均为未使用的LUN。
S311:从目标存储设备中选择已分配的存储性能值最小的一组端口,作为目标端口组。
需要说明的是,端口组的已分配的性能值最小,则该端口组的存储性能可用值最大。目标存储设备包括多个端口组,每个端口组存在一个是否可用参数,目标端口组的是否可用参数为是。
S312:根据主机信息、LUN组和目标端口组,生成存储资源规划文件,主机信息包括主机名称和主机HBA卡的WWPN。
S313:根据存储资源规划文件,创建存储网络zone需求文件。
通过脚本从存储资源规划文件提取主机信息、LUN组和目标端口组等信息,创建存储网络zone需求文件。存储网络zone需求文件是zone自动化配置所需的命令文件,里边包含一条条的zone配置命令。存储交换机的zone功能将连接在SAN网络中的主机和存储设备逻辑上划到不同的区域内,仅相同区域内的设备之间可通过FC(Fibre Channel,网状通道)网络直接访问。
S314:根据存储网络zone需求文件,进行存储网络zone自动化配置。
执行步骤S314,通过脚本调用存储网络zone需求文件,实现存储网络zone自动化配置操作。存储网络zone自动化配置指的在存储交换机端进行的zone配置操作,实现主机到存储设备除物理连通外的逻辑连通。存储网络zone自动化配置是调用存储网络zone需求文件,连接到存储交换机上执行存储网络zone需求文件里面的zone配置命令。
S315:利用存储资源规划文件,对目标存储设备的存储资源进行存储操作。
执行步骤S315,利用存储资源规划文件,按其写明的存储资源信息进行相应存储操作,即完成存储变更实施。
当用户有存储需求时,如主机自身的存储容量无法满足业务存储需求,需要存储资源时,用户在存储提供方提供的可视化用户界面进行服务申请。用户提交的服务请求即为用户的存储需求信息。之后通过图3所示数据处理方法进行存储资源调度,确定目标存储设备、LUN组和端口组等存储信息,再根据后续的ZONE自动化配置和存储资源自动化实施,完成存储资源的交付,最终用户可通过在主机扫盘识别到本次存储服务提供的存储资源。
参见图4,在存储类型为NAS存储时,后续处理过程可以包括以下步骤:
S401:获取所主机信息包含的主机名称对应的存储资源池,并作为目标存储资源池。
S402:判断目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则执行步骤S403。
S403:判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足容量需求值和存储性能需求值,若否,则提示人工介入处理,若是,则执行步骤S404。
S404:根据应用级别确定目标存储资源池的存储级别。
S405:确定目标存储资源池中可用的存储设备为第一存储设备。
S406:根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作。
S407:判断各个第一存储设备是否满足所述容量需求值和所述存储性能需求值,若存在满足容量需求值和存储性能需求值的第一存储设备,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在满足容量需求值和存储性能需求值的第一存储设备,则提示人工介入处理。
S408:从目标存储设备中选择使用率最低的pool或aggr作为目标pool或目标aggr。
NAS存储的存储设备,由pool组成或者aggr组成。
S409:根据所述主机信息,以及目标pool或目标aggr,生成存储资源规划文件,主机信息包括主机名称。
S410:利用存储资源规划文件,对目标存储设备的存储资源进行存储操作。
对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。
下述为本发明装置实施例,可以用于执行本发明方法实施例。对于本发明装置实施例中未披露的细节,请参照本发明方法实施例。
本实施例提供了一种企业级异构存储资源调度系统,包括:请求获取单元、第一判断单元、第二判断单元、存储资源规划单元和存储资源实施单元。
请求获取单元,用于获取用户提交的服务请求,服务请求包含主机信息、应用级别、容量需求值和存储性能需求值。
第一判断单元,用于判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足容量需求值和存储性能需求值,若否,则提示人工介入处理,若是,则根据应用级别确定目标存储资源池的存储级别。
第二判断单元,用于判断目标存储资源池中是否存在满足容量需求值和存储性能需求值的存储设备,若存在,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在,则提示人工介入处理。
存储资源规划单元,用于根据主机信息和目标存储设备信息,生成存储资源规划文件。
存储资源实施单元,用于利用存储资源规划文件,对目标存储设备的存储资源进行存储操作。
可选的,上述企业级异构存储资源调度系统,还包括:存储类型分析单元,用于分析所述服务请求所需的存储类型。
在存储类型为SAN存储时,第一判断单元具体用于:根据主机信息包括的主机HBA卡的WWPN,确定主机所属的存储网络资源池,存储网络资源池与存储资源池为一一对应的关系;获取与主机所属的存储网络资源池对应的存储资源池,并作为目标存储资源池;判断目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值,若否,则提示人工介入处理,若是,则根据所述应用级别确定所述目标存储资源池的存储级别。
在存储类型为SAN存储时,第二判断单元,具体用于:确定目标存储资源池中可用的存储设备为第一存储设备;根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作;判断各个第一存储设备是否满足容量需求值和存储性能需求值,若存在满足容量需求值和存储性能需求值的第一存储设备,则从中选择存储性能可用值最大的第一存储设备作为目标设备,若不存在满足容量需求值和存储性能需求值的第一存储设备,则提示人工介入处理。
在存储类型为SAN存储时,存储资源规划单元,具体用于:从目标存储设备中选择使用率最低的pool作为目标pool;从目标pool中选择若干LUN形成LUN组,LUN组满足容量需求值;从目标存储设备中选择已分配的存储性能值最小的一组端口,作为目标端口组;根据主机信息、LUN组和目标端口组,生成存储资源规划文件,主机信息包括主机名称和主机HBA卡的WWPN。
在存储类型为SAN存储时,存储资源实施单元,具体用于:根据存储资源规划文件,创建存储网络zone需求文件;根据存储网络zone需求文件,进行存储网络zone自动化配置;利用存储资源规划文件,对目标存储设备的存储资源进行存储操作。
在所述存储类型为NAS存储时,第一判断单元具体用于:获取主机信息包含的主机名称对应的存储资源池,并作为目标存储资源池;判断目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足容量需求值和存储性能需求值。
在存储类型为NAS存储时,第二判断单元,具体用于:确定目标存储资源池中可用的存储设备为第一存储设备;根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作;判断各个第一存储设备是否满足容量需求值和存储性能需求值,若否,则提示人工介入处理,若是,则根据应用级别确定目标存储资源池的存储级别。
在存储类型为NAS存储时,存储资源规划单元,具体用于:从目标存储设备中选择使用率最低的pool或aggr作为目标pool或目标aggr;根据主机信息,以及目标pool或目标aggr,生成存储资源规划文件,主机信息包括主机名称。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中各个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对本发明所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种企业级异构存储资源调度方法,其特征在于,包括:
获取用户提交的服务请求,所述服务请求包含主机信息、应用级别、容量需求值和存储性能需求值;
判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值,若否,则提示人工介入处理,若是,则根据所述应用级别确定所述目标存储资源池的存储级别;
判断所述目标存储资源池中是否存在满足所述容量需求值和所述存储性能需求值的存储设备,若存在,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在,则提示人工介入处理;
根据所述主机信息和所述目标存储设备信息,生成存储资源规划文件;
利用所述存储资源规划文件,对所述目标存储设备的存储资源进行存储操作;
在所述获取用户提交的服务请求的步骤后,还包括:分析所述服务请求所需的存储类型;
在所述存储类型为SAN存储时,所述判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值的步骤,具体包括:
根据所述主机信息包括的主机HBA卡的WWPN,确定主机所属的存储网络资源池,所述存储网络资源池与存储资源池为一一对应的关系;
获取与主机所属的存储网络资源池对应的存储资源池,并作为目标存储资源池;
判断所述目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值;
在所述存储类型为SAN存储时,判断所述目标存储资源池中是否存在满足所述容量需求值和所述存储性能需求值的存储设备的步骤,具体包括:
确定所述目标存储资源池中可用的存储设备为第一存储设备;
根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作;
判断各个第一存储设备是否满足所述容量需求值和所述存储性能需求值;
在所述存储类型为SAN存储时,根据所述主机信息和所述目标存储设备信息,生成存储资源规划文件的步骤,具体包括:
从所述目标存储设备中选择使用率最低的pool作为目标pool;
从所述目标pool中选择若干LUN形成LUN组,所述LUN组满足所述容量需求值;
从所述目标存储设备中选择已分配的存储性能值最小的一组端口,作为目标端口组;
根据所述主机信息、所述LUN组和所述目标端口组,生成存储资源规划文件,所述主机信息包括主机名称和主机HBA卡的WWPN;
在所述存储类型为SAN存储时,在利用所述存储资源规划文件,对所述目标存储设备的存储资源进行存储操作的步骤前,还包括:
根据所述存储资源规划文件,创建存储网络zone需求文件;
根据所述存储网络zone需求文件,进行存储网络zone自动化配置。
2.根据权利要求1所述的企业级异构存储资源调度方法,其特征在于,所述服务请求还包含应用数据属性,在所述获取用户提交的服务请求的步骤后,还包括:
根据所述应用数据属性确定所述目标存储资源池的属性,所述应用数据属性包括生产属性、多活属性和灾备属性。
3.根据权利要求1所述的企业级异构存储资源调度方法,其特征在于,在所述存储类型为NAS存储时,所述判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值的步骤,具体包括:
获取所述主机信息包含的主机名称对应的存储资源池,并作为目标存储资源池;
判断所述目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值;
在所述存储类型为NAS存储时,判断所述目标存储资源池中是否存在满足所述容量需求值和所述存储性能需求值的存储设备的步骤,具体包括:
确定所述目标存储资源池中可用的存储设备为第一存储设备;
根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作;
判断各个第一存储设备是否满足所述容量需求值和所述存储性能需求值;
在所述存储类型为NAS存储时,根据所述主机信息和所述目标存储设备信息,生成存储资源规划文件的步骤,具体包括:
从所述目标存储设备中选择使用率最低的pool或aggr作为目标pool或目标aggr;
根据所述主机信息,以及所述目标pool或所述目标aggr,生成存储资源规划文件,所述主机信息包括主机名称。
4.根据权利要求3所述的企业级异构存储资源调度方法,其特征在于,所述服务请求还包含应用数据属性,在所述获取用户提交的服务请求的步骤后,还包括:
根据所述应用数据属性确定所述目标存储资源池的属性,所述应用数据属性包括生产属性、多活属性、灾备属性和应用属性。
5.一种企业级异构存储资源调度系统,其特征在于,包括:
请求获取单元,用于获取用户提交的服务请求,所述服务请求包含主机信息、应用级别、容量需求值和存储性能需求值;
第一判断单元,用于判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值,若否,则提示人工介入处理,若是,则根据所述应用级别确定所述目标存储资源池的存储级别;
第二判断单元,用于判断所述目标存储资源池中是否存在满足所述容量需求值和所述存储性能需求值的存储设备,若存在,则从中选择存储性能可用值最大的存储设备作为目标存储设备,若不存在,则提示人工介入处理;
存储资源规划单元,用于根据所述主机信息和所述目标存储设备信息,生成存储资源规划文件;
存储资源实施单元,用于利用所述存储资源规划文件,对所述目标存储设备的存储资源进行存储操作;
还包括:
存储类型分析单元,用于分析所述服务请求所需的存储类型;
在所述存储类型为SAN存储时,所述第一判断单元具体用于:
根据所述主机信息包括的主机HBA卡的WWPN,确定主机所属的存储网络资源池,所述存储网络资源池与存储资源池为一一对应的关系;
获取与主机所属的存储网络资源池对应的存储资源池,并作为目标存储资源池;
判断所述目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值,若否,则提示人工介入处理,若是,则根据所述应用级别确定所述目标存储资源池的存储级别;
在所述存储类型为SAN存储时,所述第二判断单元,具体用于:
确定所述目标存储资源池中可用的存储设备为第一存储设备;
根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作;
判断各个第一存储设备是否满足所述容量需求值和所述存储性能需求值,若存在满足所述容量需求值和所述存储性能需求值的第一存储设备,则从中选择存储性能可用值最大的第一存储设备作为目标设备,若不存在满足所述容量需求值和所述存储性能需求值的第一存储设备,则提示人工介入处理;
在所述存储类型为SAN存储时,所述存储资源规划单元,具体用于:
从所述目标存储设备中选择使用率最低的pool作为目标pool;
从所述目标pool中选择若干LUN形成LUN组,所述LUN组满足所述容量需求值;
从所述目标存储设备中选择已分配的存储性能值最小的一组端口,作为目标端口组;
根据所述主机信息、所述LUN组和所述目标端口组,生成存储资源规划文件,所述主机信息包括主机名称和主机HBA卡的WWPN;
在所述存储类型为SAN存储时,所述存储资源实施单元,具体用于:
根据所述存储资源规划文件,创建存储网络zone需求文件;
根据所述存储网络zone需求文件,进行存储网络zone自动化配置;
利用所述存储资源规划文件,对所述目标存储设备的存储资源进行存储操作。
6.根据权利要求5所述的企业级异构存储资源调度系统,其特征在于,所述服务请求还包含应用数据属性,所述企业级异构存储资源调度系统,还包括:
资源池属性配置单元,用于根据所述应用数据属性确定所述目标存储资源池的属性,所述应用数据属性包括生产属性、多活属性和灾备属性。
7.根据权利要求5所述的企业级异构存储资源调度系统,其特征在于,
在所述存储类型为NAS存储时,所述第一判断单元具体用于:
获取所述主机信息包含的主机名称对应的存储资源池,并作为目标存储资源池;
判断所述目标存储资源池是否可用,若不可用,则提示人工介入处理,若可用,则判断目标存储资源池的可用剩余容量和存储性能可用值是否均满足所述容量需求值和所述存储性能需求值,若否,则提示人工介入处理,若是,则根据所述应用级别确定所述目标存储资源池的存储级别;
在所述存储类型为NAS存储时,所述第二判断单元,具体用于:
确定所述目标存储资源池中可用的存储设备为第一存储设备;
根据第一存储设备的容量使用率与预设阈值的关系,确定第一存储设备用于具体执行的存储操作;
判断各个第一存储设备是否满足所述容量需求值和所述存储性能需求值;
在所述存储类型为NAS存储时,所述存储资源规划单元,具体用于:
从所述目标存储设备中选择使用率最低的pool或aggr作为目标pool或目标aggr;
根据所述主机信息,以及所述目标pool或所述目标aggr,生成存储资源规划文件,所述主机信息包括主机名称。
8.根据权利要求7所述的企业级异构存储资源调度系统,其特征在于,所述服务请求还包含应用数据属性,所述企业级异构存储资源调度系统,还包括:
资源池属性配置单元,用于根据所述应用数据属性确定所述目标存储资源池的属性,所述应用数据属性包括生产属性、多活属性、灾备属性和应用属性。
CN201911382770.6A 2019-12-27 2019-12-27 企业级异构存储资源调度方法及系统 Active CN111158595B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911382770.6A CN111158595B (zh) 2019-12-27 2019-12-27 企业级异构存储资源调度方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911382770.6A CN111158595B (zh) 2019-12-27 2019-12-27 企业级异构存储资源调度方法及系统

Publications (2)

Publication Number Publication Date
CN111158595A CN111158595A (zh) 2020-05-15
CN111158595B true CN111158595B (zh) 2023-05-23

Family

ID=70558700

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911382770.6A Active CN111158595B (zh) 2019-12-27 2019-12-27 企业级异构存储资源调度方法及系统

Country Status (1)

Country Link
CN (1) CN111158595B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113656162A (zh) * 2021-08-18 2021-11-16 恒生电子股份有限公司 资源的申请方法、装置、电子设备及存储介质
CN114640690B (zh) * 2022-05-17 2022-08-23 浙江省公众信息产业有限公司无线运营分公司 一种文件存储方法、系统、介质和设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103503414A (zh) * 2012-12-31 2014-01-08 华为技术有限公司 一种计算存储融合的集群系统
CN103634330A (zh) * 2012-08-20 2014-03-12 曙光信息产业(北京)有限公司 一种云计算环境下的资源自动分配方法
CN106385329A (zh) * 2016-08-31 2017-02-08 华为数字技术(成都)有限公司 资源池的处理方法、装置和设备
CN107092442A (zh) * 2017-04-24 2017-08-25 杭州宏杉科技股份有限公司 存储系统资源分配方法及装置
CN109582234A (zh) * 2018-11-23 2019-04-05 金色熊猫有限公司 储存资源分配方法、装置、电子设备及计算机可读介质
CN110389710A (zh) * 2018-04-20 2019-10-29 华为技术有限公司 分配存储资源的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634330A (zh) * 2012-08-20 2014-03-12 曙光信息产业(北京)有限公司 一种云计算环境下的资源自动分配方法
CN103503414A (zh) * 2012-12-31 2014-01-08 华为技术有限公司 一种计算存储融合的集群系统
CN106385329A (zh) * 2016-08-31 2017-02-08 华为数字技术(成都)有限公司 资源池的处理方法、装置和设备
CN107092442A (zh) * 2017-04-24 2017-08-25 杭州宏杉科技股份有限公司 存储系统资源分配方法及装置
CN110389710A (zh) * 2018-04-20 2019-10-29 华为技术有限公司 分配存储资源的方法和装置
CN109582234A (zh) * 2018-11-23 2019-04-05 金色熊猫有限公司 储存资源分配方法、装置、电子设备及计算机可读介质

Also Published As

Publication number Publication date
CN111158595A (zh) 2020-05-15

Similar Documents

Publication Publication Date Title
CN108287669B (zh) 数据存储方法、装置及存储介质
US9053004B2 (en) Virtual data storage service with sparse provisioning
US11886707B2 (en) Dataset space reclamation
CN105740078B (zh) 一种内存管理方法、装置及终端
JP4733461B2 (ja) 計算機システム、管理計算機及び論理記憶領域の管理方法
US7478177B2 (en) System and method for automatic reassignment of shared storage on blade replacement
US8458424B2 (en) Storage system for reallocating data in virtual volumes and methods of the same
US20100125715A1 (en) Storage System and Operation Method Thereof
US11210183B2 (en) Memory health tracking for differentiated data recovery configurations
US20180292999A1 (en) Performance throttling of virtual drives
CN104598495A (zh) 基于分布式文件系统的分级存储方法及系统
EP4036735B1 (en) Method, apparatus and readable storage medium
CN111158595B (zh) 企业级异构存储资源调度方法及系统
CN105095103A (zh) 用于云环境下的存储设备管理方法和装置
US12072892B2 (en) Data ingestion with spatial and temporal locality
CN114996173A (zh) 一种管理存储设备写操作的方法和装置
CN114020214B (zh) 存储集群的扩容方法、装置、电子设备及可读存储介质
US11994941B2 (en) Analysis and remediation of alerts
CN105321124A (zh) 一种基于Hadoop的电力云平台设计方案
CN108762637A (zh) 控制方法、装置及系统
CN111930299B (zh) 分配存储单元的方法及相关设备
CN115543859A (zh) 多分区ssd的磨损均衡优化方法、装置、设备及介质
CN110022348B (zh) 用于动态备份会话的系统和方法
US10942779B1 (en) Method and system for compliance map engine
US10788994B1 (en) Disaggregation of flash management

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant