CN113867942B - 一种卷的挂载方法、系统及计算机可读存储介质 - Google Patents
一种卷的挂载方法、系统及计算机可读存储介质 Download PDFInfo
- Publication number
- CN113867942B CN113867942B CN202111065402.6A CN202111065402A CN113867942B CN 113867942 B CN113867942 B CN 113867942B CN 202111065402 A CN202111065402 A CN 202111065402A CN 113867942 B CN113867942 B CN 113867942B
- Authority
- CN
- China
- Prior art keywords
- random
- sequential
- writing
- reading
- average value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000004364 calculation method Methods 0.000 claims abstract description 43
- 230000004044 response Effects 0.000 claims abstract description 17
- 238000004590 computer program Methods 0.000 claims description 5
- 230000000903 blocking effect Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5083—Techniques for rebalancing the load in a distributed system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
- G06F3/0607—Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0662—Virtualisation aspects
- G06F3/0665—Virtualisation aspects at area level, e.g. provisioning of virtual or logical volumes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种卷的挂载方法、系统及计算机可读存储介质,方法包括:响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷;获取集群中的所有存储节点,并基于所述存储节点获取原始数据样本;对所述原始数据样本进行计算,并基于计算结果选取符合预设条件的存储节点;基于ISCSI登录所述符合预设条件的存储节点的存储连接器。通过本发明的方案,提高了挂载卷的效率,减轻了存储集群的负担,避免了主机侧的卡顿等现象,并且提高了所建立的链路的性能,能够更好的支撑客户业务。
Description
技术领域
本发明涉及存储技术领域,尤其涉及一种卷的挂载方法、系统及计算机可读存储介质。
背景技术
kubernetes是一个可移植,可扩展,开源的,以容器为中心的管理平台。利用声明式配置以及自动化处理来完成容器的管理。根据用户业务来统一调度管理计算,网络,存储等基础设施资源,是目前容器编排服务领域的事实标准。kubernetes属于主从分布式架构,由Master Node和Worker Node组成。Master Node作为控制节点,对集群进行调度管理,Worker Node作为工作节点,运行业务应用的容器。Kubernetes主要涉及以下几个重要概念:API Server,用于提供资源操作的唯一入口,提供认证/授权/kubernets的访问控制;ControllerManager,负责维护整个集群的状态;Scheduler,负责资源的调度;Kubelet,维护当前节点的容器的生命周期;Pod,是所有业务类型的基础,也是kubernetes管理的最小单位级,它是一个或多个容器的组合。
在kubernetes较低版本时,就有了卷插件,大致经历了从in-tree到out-tree的发展过程。in-tree类型的卷插件包括awsElasticBlockStore、azureDisk、azureFile、cephfs、gcePersistentDisk等,out-tree类型的卷插件包括flexVolume、CSI。in-tree类型的卷插件,其代码是核心kubernetes的一部分,随kubernetes发布,导致卷插件与kubernetes联系过紧,灵活性不够,并且给kubernetes带来安全隐患。CSI(ContainerStorage Interface,一种开源的容器存储接口)是目前应用较多的一种out-tree类型卷插件,CSI提供行业标准,使存储厂商能够开发符合CSI标准的插件,并且CSI能够解耦容器编排系统与存储,向上对接kubernetes、Cloud Foundry、Mesos等系统,向下对接各种存储,同时为容器编排系统提供持久化卷存储能力。
目前主机侧(例如kubernetes、Cloud Foundry、Mesos等系统)通过CSI与分布式存储集群对接过程中,会先在存储集群的每个存储节点中都创建一个同名的target(存储连接器),然后将卷映射到target,基于卷和target绑定主机的IQN,最后,通过iscsiadm登录每个存储集群节点target,这样就建立起一条条链路。由于在正常的业务场景中,存储集群的节点个数成百上千个,如果每映射一个卷,都将建立成百上千调链路,这样一方面给存储带来巨大压力,另一方面主机侧也异常卡顿。
发明内容
有鉴于此,本发明提出了一种卷的挂载方法、系统及计算机可读存储介质,通过选取性能最优的一个或多个存储节点来建立链路,提高了挂载卷的效率,减轻了存储集群的负担,避免了主机侧的卡顿等现象,并且提高了所建立的链路的性能,能够更好的支撑客户业务。
基于上述目的,本发明实施例的一方面提供了一种卷的挂载方法,具体包括如下步骤:
响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷;
获取集群中的所有存储节点,并基于所述存储节点获取原始数据样本;
对所述原始数据样本进行计算,并基于计算结果选取符合预设条件的存储节点;
基于ISCSI登录所述符合预设条件的存储节点的存储连接器。
在一些实施方式中,响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷包括:
响应于接收到卷的挂载请求,判断所述存储连接器是否小于预设数量;
若是所述存储连接器小于预设数量,则创建新的存储连接器以将所述卷挂载到所述新的存储连接器。
在一些实施方式中,响应于接收到卷的挂载请求,获取符合预设条件的存储连接器进一步包括:
若是所述存储连接器不小于预设数量,则基于负载均衡策略选取对应的存储连接器以将所述卷挂载到所述对应的存储连接器。
在一些实施方式中,基于所述存储节点获取原始数据样本包括:
基于所述存储节点的顺序读、随机读、顺序写以及随机写的性能特性,获取原始数据样本。
在一些实施方式中,对所述原始数据样本进行计算包括:
对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
在一些实施方式中,对所述原始数据样本进行计算进一步包括:
从所述原始数据样本中获取每一个所述存储节点的数据样本,基于所述数据样本分别计算每个所述存储节点的顺序读的均值、随机读的均值、顺序写的均值以及随机写的均值。
在一些实施方式中,对所述原始数据样本进行计算进一步包括:
按如下公式对所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重以及每个所述存储节点的所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行计算以得到最终的计算结果;
其中,S表示对存储节点的计算结果,t表示第t个存储节点,i表示第i个特征,取值范围1~4,wi表示第i个特征的权重,μti表示每个存储节点的每个特征的均值。
在一些实施方式中,对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重包括:
对所述原始数据样本进行均值计算,得到所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值;
基于所述原始数据样本以及所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行方差计算,得到所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差;
按权重计算公式对所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差进行权重计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
本发明实施例的另一方面,还提供了一种卷的挂载系统,包括:
获取模块,所述获取模块配置为响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷;
所述获取模块还配置为获取集群中的所有存储节点,并基于所述存储节点获取原始数据样本;
计算模块,所述计算模块配置为对所述原始数据样本进行计算,并基于计算结果选取符合预设条件的存储节点;
登录模块,所述登录模块配置为基于ISCSI登录所述符合预设条件的存储节点的存储连接器。
在一些实施方式中,所述获取模块还配置为:
响应于接收到卷的挂载请求,判断所述存储连接器是否小于预设数量;
若是所述存储连接器小于预设数量,则创建新的存储连接器以将所述卷挂载到所述新的存储连接器。
在一些实施方式中,所述获取模块还配置为:
若是所述存储连接器不小于预设数量,则基于负载均衡策略选取对应的存储连接器以将所述卷挂载到所述对应的存储连接器。
在一些实施方式中,所述获取模块还配置为::
基于所述存储节点的顺序读、随机读、顺序写以及随机写的性能特性,获取原始数据样本。
在一些实施方式中,所述计算模块还配置为:
对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
在一些实施方式中,所述计算模块还配置为:
从所述原始数据样本中获取每一个所述存储节点的数据样本,基于所述数据样本分别计算每个所述存储节点的顺序读的均值、随机读的均值、顺序写的均值以及随机写的均值。
在一些实施方式中,所述计算模块还配置为:
按如下公式对所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重以及每个所述存储节点的所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行计算以得到最终的计算结果;
其中,S表示对存储节点的计算结果,t表示第t个存储节点,i表示第i个特征,取值范围1~4,wi表示第i个特征的权重,μti表示每个存储节点的每个特征的均值。
在一些实施方式中,所述计算模块还配置为:
对所述原始数据样本进行均值计算,得到所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值;
基于所述原始数据样本以及所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行方差计算,得到所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差;
按权重计算公式对所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差进行权重计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
本发明实施例的再一方面,还提供了一种计算机可读存储介质,计算机可读存储介质存储有被处理器执行时实现如上方法步骤的计算机程序。
本发明至少具有以下有益技术效果:基于一定数量的target以及负载均衡策略来选择target,并且根据存储集群中存储节点的特性选取性能最优的一个或多个存储节点以将卷挂载到性能最优的存储节点的target上,通过这种方式建立的链路,卷的挂载效率高,减轻了存储集群的负担,避免了主机侧的卡顿等现象,并且提高了所建立的链路的性能,能够更好的支撑客户业务。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的实施例。
图1为本发明提供的卷的挂载方法的一实施例的框图;
图2为本发明提供的卷的挂载系统的一实施例的示意图;
图3为本发明提供的计算机可读存储介质的一实施例的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明实施例进一步详细说明。
需要说明的是,本发明实施例中所有使用“第一”和“第二”的表述均是为了区分两个相同名称非相同的实体或者非相同的参量,可见“第一”、“第二”仅为了表述的方便,不应理解为对本发明实施例的限定,后续实施例对此不再一一说明。
基于上述目的,本发明实施例的第一个方面,提出了一种卷的挂载方法的实施例。如图1所示,其包括如下步骤:
步骤S101、响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷;
步骤S103、获取集群中的所有存储节点,并基于所述存储节点获取原始数据样本;
步骤S105、对所述原始数据样本进行计算,并基于计算结果选取符合预设条件的存储节点;
步骤S107、基于ISCSI登录所述符合预设条件的存储节点的存储连接器。
接收到卷的挂载请求后,从存储集群的存储节点上获取符合预设条件的存储连接器target,一般的是选择挂载卷最少的target,以挂载卷;获取集群中的所有存储节点,采集或者从历史时间段获取存储节点运行时的性能数据作为原始数据样本;对原始数据样本进行计算,从计算结果中选取符合预设条件的存储节点,例如可以选择运行速度快的存储节点或者剩余容量大的存储节点,一般情况下,会选择2个存储节点,以防一个节点故障时,可以使用另一个存储节点,不会导致业务中断。基于ISCSI登录选取的存储节点上的存储连接器以完成所述卷的挂载,即建立起了链路。
通过本方案的方法选取存储节点和target来挂载卷以建立链路,卷的挂载效率高,减轻了存储集群的负担,避免了主机侧的卡顿等现象,并且提高了所建立的链路的性能,能够更好的支撑客户业务。
在一些实施方式中,响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷包括:
响应于接收到卷的挂载请求,判断所述存储连接器是否小于预设数量;
若是所述存储连接器小于预设数量,则创建新的存储连接器以将所述卷挂载到所述新的存储连接器。
在一些实施方式中,响应于接收到卷的挂载请求,获取符合预设条件的存储连接器进一步包括:
若是所述存储连接器不小于预设数量,则基于负载均衡策略选取对应的存储连接器以将所述卷挂载到所述对应的存储连接器。
具体的,在存储集群中创建预设数量的target,target数量可以根据使用需求自定义,12、16、24、32、36等等,避免了每一存储节点上都建立一个target,缩短了挂载卷时获取target的时间。
假设当前存储集群预定建立32个,在接收到卷的挂载请求后,先判断当前target数量是否满足32个。若是满足,则根据负载均衡策略将卷挂载到当前挂载卷最少的target;若是不满足,则创建新的target,将卷挂载到新创建的target。通过上述方法,避免了同一个target上挂载的卷过多,影响target性能。
在一些实施方式中,基于所述存储节点获取原始数据样本包括:
基于所述存储节点的顺序读、随机读、顺序写以及随机写的性能特性,获取原始数据样本。
在一些实施方式中,对所述原始数据样本进行计算包括:
对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
在一些实施方式中,对所述原始数据样本进行计算进一步包括:
从所述原始数据样本中获取每一个所述存储节点的数据样本,基于所述数据样本分别计算每个所述存储节点的顺序读的均值、随机读的均值、顺序写的均值以及随机写的均值。
在一些实施方式中,对所述原始数据样本进行计算进一步包括:
按如下公式对所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重以及每个所述存储节点的所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行计算以得到最终的计算结果;
其中,S表示对存储节点的计算结果,t表示第t个存储节点,i表示第i个特征,取值范围1~4,wi表示第i个特征的权重,μti表示每个存储节点的每个特征的均值。
具体的,特征在本实施例中指的是顺序读、随机读、顺序写以及随机写中的全部,通过上述公式进行计算时,可以将顺序读、随机读、顺序写以及随机写中的任意一个作为第1个特征,剩下的依次作为第2、3、4特征。例如:特征1~4可以依次为顺序读、随机读、顺序写、随机写,还可以为顺序读、顺序写、随机读、随机写等等共12种组合。
在一些实施方式中,对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重包括:
对所述原始数据样本进行均值计算,得到所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值;
基于所述原始数据样本以及所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行方差计算,得到所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差;
按权重计算公式对所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差进行权重计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
下面通过具体的实施例对本发明的多个实施方式进行说明。
假设存储集群存在三条存储节点,188.188.40.203、188.188.40.204和188.188.40.205,需要选取两个存储节点以将卷挂载到选取的存储节点上来。此时,根据存储节点的顺序读、随机读、顺序写、随机写四个方面的性能选取数据作为原始数据样本。例如可以按一定时间内顺序读、随机读、顺序写、随机写传输的数据量或一定数量的顺序读、随机读、顺序写、随机写消耗的时间等能体现存储节点性能的方式获取原始数据样本。具体的,本实施例按1T数据量的顺序读、随机读、顺序写、随机写的耗时选取数据作为原始数据样本,原始数据样本详见表1。
表1原始样本数据
对表1中的数据进行处理,计算每个特征(即顺序读、随机读、顺序写、随机写四个特征)的权重wi。均值方差/> 权重/>其中,i表示第i个特征,取值范围1~4。k表示第k个样本,取值范围1~9。N为样本总数,本例中为9。/>为第k个样本的第i个特征值。
计算结果,即每个特征的权重,见表2。
表2每个特征的权重
顺序读权重 | 随机读权重 | 顺序写权重 | 随机写权重 |
5.005 | 4.788 | 4.563 | 4.057 |
根据存储进行分类,计算每一个存储节点的每一个特性的均值其中,t表示第t个存储节点,取值范围1~3。i表示第i个特征,取值范围1~4。Nt表示每个特征的第t个存储节点的样本总数。
计算结果,即每个存储节点的每个特征的均值,见表3。
表3每个存储节点的每个特征的均值
顺序读均值 | 随机读均值 | 顺序写均值 | 随机写均值 | 存储节点IP |
2.133 | 5.567 | 5.100 | 3.233 | 188.188.40.203 |
2.667 | 5.267 | 5.467 | 2.933 | 188.188.40.204 |
2.700 | 5.700 | 5.600 | 2.900 | 188.188.40.205 |
根据权重和均值,计算每个存储节点的总耗时并选择总耗时最小两个的存储节点,本实施例中选择188.188.40.203和188.188.40.204两个存储节点。
至此,通过上述一系列步骤完成卷挂载的存储节点的选择。
通过iscsiadm登录选取的存储集群节点的target,就建立起了链路。
基于同一发明构思,根据本发明的另一个方面,如图2所示,本发明的实施例还提供了一种卷的挂载系统,包括:
获取模块,所述获取模块配置为响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷;
所述获取模块还配置为获取集群中的所有存储节点,并基于所述存储节点获取原始数据样本;
计算模块,所述计算模块配置为对所述原始数据样本进行计算,并基于计算结果选取符合预设条件的存储节点;
登录模块,所述登录模块配置为基于ISCSI登录所述符合预设条件的存储节点的存储连接器。
在一些实施方式中,所述获取模块还配置为:
响应于接收到卷的挂载请求,判断所述存储连接器是否小于预设数量;
若是所述存储连接器小于预设数量,则创建新的存储连接器以将所述卷挂载到所述新的存储连接器。
在一些实施方式中,所述获取模块还配置为:
若是所述存储连接器不小于预设数量,则基于负载均衡策略选取对应的存储连接器以将所述卷挂载到所述对应的存储连接器。
在一些实施方式中,所述获取模块还配置为:
基于所述存储节点的顺序读、随机读、顺序写以及随机写的性能特性,获取原始数据样本。
在一些实施方式中,所述计算模块还配置为:
对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
在一些实施方式中,所述计算模块还配置为:
从所述原始数据样本中获取每一个所述存储节点的数据样本,基于所述数据样本分别计算每个所述存储节点的顺序读的均值、随机读的均值、顺序写的均值以及随机写的均值。
在一些实施方式中,所述计算模块还配置为:
按如下公式对所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重以及每个所述存储节点的所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行计算以得到最终的计算结果;
其中,S表示对存储节点的计算结果,t表示第t个存储节点,i表示第i个特征,取值范围1~4,wi表示第i个特征的权重,μti表示每个存储节点的每个特征的均值。
在一些实施方式中,所述计算模块还配置为:
对所述原始数据样本进行均值计算,得到所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值;
基于所述原始数据样本以及所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行方差计算,得到所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差;
按权重计算公式对所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差进行权重计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
基于同一发明构思,根据本发明的另一个方面,如图3所示,本发明的实施例还提供了一种计算机可读存储介质30,计算机可读存储介质30存储有被处理器执行时执行如上方法的计算机程序310。
最后需要说明的是,本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关硬件来完成,程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,程序的存储介质可为磁碟、光盘、只读存储记忆体(ROM)或随机存储记忆体(RAM)等。上述计算机程序的实施例,可以达到与之对应的前述任意方法实施例相同或者相类似的效果。
本领域技术人员还将明白的是,结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。为了清楚地说明硬件和软件的这种可互换性,已经就各种示意性组件、方块、模块、电路和步骤的功能对其进行了一般性的描述。这种功能是被实现为软件还是被实现为硬件取决于具体应用以及施加给整个系统的设计约束。本领域技术人员可以针对每种具体应用以各种方式来实现的功能,但是这种实现决定不应被解释为导致脱离本发明实施例公开的范围。
以上是本发明公开的示例性实施例,但是应当注意,在不背离权利要求限定的本发明实施例公开的范围的前提下,可以进行多种改变和修改。根据这里描述的公开实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外,尽管本发明实施例公开的元素可以以个体形式描述或要求,但除非明确限制为单数,也可以理解为多个。
应当理解的是,在本文中使用的,除非上下文清楚地支持例外情况,单数形式“一个”旨在也包括复数形式。还应当理解的是,在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。
上述本发明实施例公开实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
所属领域的普通技术人员应当理解:以上任何实施例的讨论仅为示例性的,并非旨在暗示本发明实施例公开的范围(包括权利要求)被限于这些例子;在本发明实施例的思路下,以上实施例或者不同实施例中的技术特征之间也可以进行组合,并存在如上的本发明实施例的不同方面的许多其它变化,为了简明它们没有在细节中提供。因此,凡在本发明实施例的精神和原则之内,所做的任何省略、修改、等同替换、改进等,均应包含在本发明实施例的保护范围之内。
Claims (5)
1.一种卷的挂载方法,其特征在于,包括:
响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷;
获取集群中的所有存储节点,并基于所述存储节点获取原始数据样本;
对所述原始数据样本进行计算,并基于计算结果选取符合预设条件的存储节点;
基于ISCSI登录所述符合预设条件的存储节点的存储连接器,
其中基于所述存储节点获取原始数据样本包括:
基于所述存储节点的顺序读、随机读、顺序写以及随机写的性能特性,获取原始数据样本;
其中对所述原始数据样本进行计算包括:
对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重;
从所述原始数据样本中获取每一个所述存储节点的数据样本,基于所述数据样本分别计算每个所述存储节点的顺序读的均值、随机读的均值、顺序写的均值以及随机写的均值;
按如下公式对所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重以及每个所述存储节点的所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行计算以得到最终的计算结果;
其中,表示对存储节点的计算结果,t表示第t个存储节点,i表示第i个特征,取值范围1~4,/> 表示第i个特征的权重,/>表示每个存储节点的每个特征的均值;
并且其中对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重包括:
对所述原始数据样本进行均值计算,得到所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值;
基于所述原始数据样本以及所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行方差计算,得到所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差;
按权重计算公式对所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差进行权重计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
2.根据权利要求1所述的方法,其特征在于,响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷包括:
响应于接收到卷的挂载请求,判断所述存储连接器是否小于预设数量;
若是所述存储连接器小于预设数量,则创建新的存储连接器以将所述卷挂载到所述新的存储连接器。
3.根据权利要求2所述的方法,其特征在于,进一步包括:
若是所述存储连接器不小于预设数量,则基于负载均衡策略选取对应的存储连接器以将所述卷挂载到所述对应的存储连接器。
4.一种卷的挂载系统,其特征在于,包括:
获取模块,所述获取模块配置为响应于接收到卷的挂载请求,获取符合预设条件的存储连接器以挂载所述卷;
所述获取模块还配置为获取集群中的所有存储节点,并基于所述存储节点获取原始数据样本;
计算模块,所述计算模块配置为对所述原始数据样本进行计算,并基于计算结果选取符合预设条件的存储节点;
登录模块,所述登录模块配置为基于ISCSI登录所述符合预设条件的存储节点的存储连接器,
其中基于所述存储节点获取原始数据样本包括:
基于所述存储节点的顺序读、随机读、顺序写以及随机写的性能特性,获取原始数据样本;
其中对所述原始数据样本进行计算包括:
对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重;
从所述原始数据样本中获取每一个所述存储节点的数据样本,基于所述数据样本分别计算每个所述存储节点的顺序读的均值、随机读的均值、顺序写的均值以及随机写的均值;
按如下公式对所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重以及每个所述存储节点的所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行计算以得到最终的计算结果;
其中,表示对存储节点的计算结果,t表示第t个存储节点,i表示第i个特征,取值范围1~4,/> 表示第i个特征的权重,/>表示每个存储节点的每个特征的均值;
并且其中对所述原始数据样本进行计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重包括:
对所述原始数据样本进行均值计算,得到所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值;
基于所述原始数据样本以及所述顺序读的均值、所述随机读的均值、所述顺序写的均值以及所述随机写的均值进行方差计算,得到所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差;
按权重计算公式对所述顺序读的方差、所述随机读的方差、所述顺序写的方差以及所述随机写的方差进行权重计算,得到所述顺序读的权重、所述随机读的权重、所述顺序写的权重以及所述随机写的权重。
5.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时执行如权利要求1-3任意一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111065402.6A CN113867942B (zh) | 2021-09-12 | 2021-09-12 | 一种卷的挂载方法、系统及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111065402.6A CN113867942B (zh) | 2021-09-12 | 2021-09-12 | 一种卷的挂载方法、系统及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113867942A CN113867942A (zh) | 2021-12-31 |
CN113867942B true CN113867942B (zh) | 2023-11-03 |
Family
ID=78995526
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111065402.6A Active CN113867942B (zh) | 2021-09-12 | 2021-09-12 | 一种卷的挂载方法、系统及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113867942B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114697331B (zh) * | 2022-03-29 | 2024-06-07 | 浪潮云信息技术股份公司 | 一种云盘挂载数量调度方法、系统、装置及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106210046A (zh) * | 2016-07-11 | 2016-12-07 | 浪潮(北京)电子信息产业有限公司 | 一种基于Cinder的卷跨集群挂载方法及系统 |
CN111290826A (zh) * | 2018-12-06 | 2020-06-16 | 北京京东尚科信息技术有限公司 | 分布式文件系统、计算机系统和介质 |
CN111638855A (zh) * | 2020-06-03 | 2020-09-08 | 山东汇贸电子口岸有限公司 | 一种物理裸机支持Ceph后端卷的方法 |
CN111913665A (zh) * | 2020-07-30 | 2020-11-10 | 星辰天合(北京)数据科技有限公司 | 存储卷的挂载方法及装置、电子设备 |
CN112003963A (zh) * | 2020-08-27 | 2020-11-27 | 苏州浪潮智能科技有限公司 | 一种裸金属服务器挂载卷的方法、系统、设备以及介质 |
CN112214283A (zh) * | 2020-10-16 | 2021-01-12 | 苏州浪潮智能科技有限公司 | 一种预测Kubernetes挂载卷时长的方法及装置 |
CN112230847A (zh) * | 2020-09-18 | 2021-01-15 | 苏州浪潮智能科技有限公司 | 一种监控K8s存储卷的方法、系统、终端及存储介质 |
WO2021012785A1 (zh) * | 2019-07-22 | 2021-01-28 | 平安科技(深圳)有限公司 | 基于云存储的云磁盘挂载方法、装置、设备和存储介质 |
-
2021
- 2021-09-12 CN CN202111065402.6A patent/CN113867942B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106210046A (zh) * | 2016-07-11 | 2016-12-07 | 浪潮(北京)电子信息产业有限公司 | 一种基于Cinder的卷跨集群挂载方法及系统 |
CN111290826A (zh) * | 2018-12-06 | 2020-06-16 | 北京京东尚科信息技术有限公司 | 分布式文件系统、计算机系统和介质 |
WO2021012785A1 (zh) * | 2019-07-22 | 2021-01-28 | 平安科技(深圳)有限公司 | 基于云存储的云磁盘挂载方法、装置、设备和存储介质 |
CN111638855A (zh) * | 2020-06-03 | 2020-09-08 | 山东汇贸电子口岸有限公司 | 一种物理裸机支持Ceph后端卷的方法 |
CN111913665A (zh) * | 2020-07-30 | 2020-11-10 | 星辰天合(北京)数据科技有限公司 | 存储卷的挂载方法及装置、电子设备 |
CN112003963A (zh) * | 2020-08-27 | 2020-11-27 | 苏州浪潮智能科技有限公司 | 一种裸金属服务器挂载卷的方法、系统、设备以及介质 |
CN112230847A (zh) * | 2020-09-18 | 2021-01-15 | 苏州浪潮智能科技有限公司 | 一种监控K8s存储卷的方法、系统、终端及存储介质 |
CN112214283A (zh) * | 2020-10-16 | 2021-01-12 | 苏州浪潮智能科技有限公司 | 一种预测Kubernetes挂载卷时长的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN113867942A (zh) | 2021-12-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112685170B (zh) | 备份策略的动态优化 | |
CN110162388A (zh) | 一种任务调度方法、系统及终端设备 | |
CN117033004B (zh) | 负载均衡方法、装置、电子设备及存储介质 | |
CN112711479A (zh) | 服务器集群的负载均衡系统、方法、装置和存储介质 | |
CN113867942B (zh) | 一种卷的挂载方法、系统及计算机可读存储介质 | |
CN115543577A (zh) | 基于协变量的Kubernetes资源调度优化方法、存储介质及设备 | |
CN113377866A (zh) | 一种虚拟化数据库代理服务的负载均衡方法及装置 | |
CN111049750B (zh) | 一种报文转发方法、系统及设备 | |
CN112416888A (zh) | 用于分布式文件系统的动态负载均衡方法及系统 | |
CN117314605B (zh) | 一种互联网金融业务流程管理方法及系统 | |
CN106874371A (zh) | 一种数据处理方法及装置 | |
CN118193188A (zh) | 一种基于虚拟化平台动态负载均衡系统及方法 | |
CN109257256A (zh) | 设备监控方法、装置、计算机设备及存储介质 | |
CN111291018A (zh) | 数据管理方法、装置、设备及存储介质 | |
CN111737000A (zh) | 一种实现负载均衡的方法 | |
CN114090604A (zh) | 请求处理方法及装置 | |
CN115564055A (zh) | 异步联合学习训练方法、装置、计算机设备及存储介质 | |
CN109818767B (zh) | 一种Redis集群容量调整的方法、装置及存储介质 | |
CN107770024B (zh) | 总线周期扫描表的生成方法和装置 | |
CN111104274B (zh) | Ssd硬盘自动化测试方法、装置、设备及可读存储介质 | |
CN117971505B (zh) | 部署容器应用的方法及装置 | |
CN114257397B (zh) | 基于复杂网络的策略冲突处理方法及装置 | |
CN113377861B (zh) | 分布式存储系统的重构方法、装置、设备和存储介质 | |
CN113923215B (zh) | 虚拟机调度方法、电子设备及存储介质 | |
CN116707147B (zh) | 一种分布式电池储能系统的控制方法及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |