CN108200151A - 一种分布式存储系统中ISCSI Target负载均衡方法和装置 - Google Patents

一种分布式存储系统中ISCSI Target负载均衡方法和装置 Download PDF

Info

Publication number
CN108200151A
CN108200151A CN201711474284.8A CN201711474284A CN108200151A CN 108200151 A CN108200151 A CN 108200151A CN 201711474284 A CN201711474284 A CN 201711474284A CN 108200151 A CN108200151 A CN 108200151A
Authority
CN
China
Prior art keywords
iscsi
back end
iscsi target
chap
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711474284.8A
Other languages
English (en)
Other versions
CN108200151B (zh
Inventor
柯江灵
黄钦皇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Innovation And Technology Storage Technology Co Ltd
UIT STORAGE TECHNOLOGY (SHENZHEN) Co Ltd
Original Assignee
Innovation And Technology Storage Technology Co Ltd
UIT STORAGE TECHNOLOGY (SHENZHEN) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Innovation And Technology Storage Technology Co Ltd, UIT STORAGE TECHNOLOGY (SHENZHEN) Co Ltd filed Critical Innovation And Technology Storage Technology Co Ltd
Priority to CN201711474284.8A priority Critical patent/CN108200151B/zh
Publication of CN108200151A publication Critical patent/CN108200151A/zh
Application granted granted Critical
Publication of CN108200151B publication Critical patent/CN108200151B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • H04L67/1008Server selection for load balancing based on parameters of servers, e.g. available memory or workload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0811Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking connectivity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Abstract

本发明提供了一种分布式存储系统中ISCSI Target负载均衡方法和装置,分布式存储系统包括管理节点和数据节点,每个数据节点中均部署多个ISCSI Target,该方法应用于管理节点,包括:监控所有数据节点中的ISCSI Target的使用状态;根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量;根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量;针对每个数据节点,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作。本发明能够解决分布式存储系统的负载均衡问题。

Description

一种分布式存储系统中ISCSI Target负载均衡方法和装置
技术领域
本发明涉及分布式存储技术领域,特别涉及一种分布式存储系统中ISCSI Target负载均衡方法和装置。
背景技术
小型计算机系统接口(iSCSI)是由IBM公司开发的,为供硬件设备使用的可以在IP协议的上层运行的SCSI协议;它基于TCP/IP协议,用来建立和管理IP存储设备,主机和客户机等之间的相互连接,并创建IP SAN,这种传送以数据块级别在多个数据存储网络间进行。
云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念。云存储是一种架构,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。
随着企业云与个人私有云的高速发展,云存储中大量用户访问成为一个重要的需求,集群分布式存储系统的负载均衡则是实现这一需求,并提升集群的灵活性和高可用性其中一个非常重要的指标。
发明内容
有鉴于此,本发明的目的在于提供一种分布式存储系统中ISCSI Target负载均衡方法和装置,能够解决分布式存储系统中ISCSI Target的负载均衡问题。
为了达到上述目的,本发明提供了如下技术方案:
一种分布式存储系统中ISCSI Target负载均衡方法,分布式存储系统包括管理节点和数据节点,每个数据节点中均部署多个ISCSI Target,该方法应用于管理节点,包括:
监控所有数据节点中的ISCSI Target的使用状态;
根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量;
根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量;
针对每个数据节点,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作。
一种分布式存储系统中ISCSI Target负载均衡装置,分布式存储系统包括管理节点和数据节点,每个数据节点中均部署多个ISCSI Target,该装置应用于管理节点,包括:监控单元、负载确定单元、均衡单元;
所述监控单元,用于监控所有数据节点中的ISCSI Target的使用状态;
所述负载确定单元,用于根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量;用于根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量;
所述均衡单元,用于针对每个数据节点,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作。
由上面的技术方案可知,本发明中,管理节点通过实时监控各数据节点中ISCSITarget的使用状态,根据各数据节点中ISCSI Target的使用状态确定各数据节点的负载量及平均负载量,从而利用各数据节点的负载量与平均负载量对各数据节点执行负载均衡操作。本发明能够解决分布式存储系统中ISCSI Target的负载均衡问题。
附图说明
图1是本发明实施例基于ISCSI的分布式存储系统的架构图;
图2是本发明实施例分布式存储系统中ISCSI Target负载均衡方法流程图;
图3是本发明实施例分布式存储系统中ISCSI Target负载均衡装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,下面结合附图并据实施例,对本发明的技术方案进行详细说明。
参见图1,图1是本发明实施例基于ISCSI的分布式存储系统的架构图,如图1所示,该架构图中,主要包括分布式存储系统和分布于不同操作系统平台的ISCSI Initiator,分布式存储系统中包括管理节点(包括主管理节点和备管理节点,本发明中的管理节点如未特别说明,均是指主管理节点)和数据节点,管理节点上部署和启用了ISNS服务器,各数据节点上均部署了多个ISCSI Target。所有ISCSI Initiator和ISCSI Target在启动时均作为ISNS客户端向所述ISNS服务器注册,从而ISNS服务器可以获知注册的所有ISCSIInitiator和ISCSI Target的各种状态信息变化。
以下基于上述架构,对本发明的具体实现进行详细说明。
参见图2,图2是本发明实施例分布式存储系统中ISCSI Target负载均衡方法流程图,分布式存储系统包括管理节点和数据节点,每个数据节点中均部署多个ISCSI Target,该方法应用于管理节点,如图2所示,主要包括以下步骤:
步骤201、监控所有数据节点中的ISCSI Target的使用状态;
步骤202、根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量;
步骤203、根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量;
步骤204、针对每个数据节点,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作。
在本发明实施例中,根据ISCSI Target与ISCSI Initiator的连接情况,可分为以下四种连接状态:已连接、正连接、未连接、未启动。其中,已连接和正连接分别表明ISCSITarget已经或正在与一ISCSI Initiator建立了连接,未连接表明ISCSI Target已启动但尚未与任何ISCSI Initiator建立连接,未启动表明ISCSI Target目前尚未运行。
本发明中,根据ISCSI Target的连接状态确定该ISCSI Target的使用状态,使用状态包括使用和未使用两种取值,其中,将已连接和正连接的ISCSI Target的使用状态值设置为使用,将未连接或未启动的ISCSI Target的使用状态值设置为未使用。
因此,为了监控各数据节点中ISCSI Target的使用状态,管理节点需要先获取各ISCSI Target的连接状态,本发明实施例中,各ISCSI Target可以通过周期性上报自身的连接状态信息到管理节点,或者在自身的连接状态变化时上报自身的连接状态信息到管理节点,使得管理节点可以根据每个ISCSI Target上报的连接状态信息确定该ISCSI Target的使用状态。
在实际应用中,在进行负载均衡时,可以兼顾各个数据节点上ISCSI Target的读写任务量和处于使用状态的ISCSI Target数目。
然而,对于其他接口的读写任务量,分布式文件系统通常在执行读写操作之前已经进行了负载均衡,因此,本发明中,主要关注对数据节点上的ISCSI Target数目的负载均衡。
在本发明的一个实施例中,将各数据节点中的处于使用状态的ISCSI Target数目作为衡量该数据节点的负载的标准。
因此,
步骤202中,根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量的方法具体为:将该数据节点中处于使用状态的ISCSI Target的数目确定为该数据节点的负载量;
步骤203中,根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量的方法具体为:将所有数据节点中处于使用状态的ISCSI Target的数目与数据节点的数目的商确定为所有数据节点的平均负载量;
步骤204中,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作的方法具体如下:
如果该数据节点的负载量等于所述平均负载量,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量大于所述平均负载量,则计算该数据节点的负载量与所述平均负载量的差值N1,若该差值N1大于预设阈值,则通知该数据节点关闭N1个处于使用状态的ISCSI Target,若该差值N1不大于预设阈值,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量小于所述平均负载量,则计算所述平均负载量与该数据节点的负载量的差值N2,若该差值N2大于预设阈值,通知该数据节点启用N2个处于未使用状态的ISCSI Target,若该差值N2不大于预设阈值,不对该数据节点执行负载均衡操作。
这里,关闭ISCSI Target是指将该停止该ISCSI Target服务并把该ISCSI Target放入沉睡队列;启用ISCSI Target是指将未启动的该ISCSI Target启动,或将该ISCSITarget从沉睡队列中取出并激活(即重新启动)。
根据以上负载均衡过程可知,在负载均衡过程中,需要关闭或启动数据节点上处于使用状态的ISCSI Target,这样做的结果会导致处于使用状态的ISCSI Target被关闭后,与该ISCSI Target建立连接的ISCSI Initiator无法得到服务,此时ISCSI Initiator需要重新选择一个ISCSI Target建立连接。
UFS集群分布式文件系统中在每创建和启动一个ISCSI Target服务时,会根据每个数据节点Target负载情况确定在哪个数据节点启动ISCSI Target服务,最大程度保证各个数据节点各ISCSI Target在启动运行阶段的负载均衡,减少各个数据节点不必要的负载压力和操作。然而由于数据节点宕机、磁盘故障或管理节点关闭某个ISCSI Target服务等问题可能会导致已连接的某个ISCSI Target变得不可用。但是,ISCSI Initiator并不能获取到最新ISCSI Target信息,这使得ISCSI Initiator访问分布式文件系统并不顺畅,导致用户体验较差。
为了解决上述问题,本发明中,在分布式存储系统中应用ISNS协议,即如图1所示架构,在管理节点中部署和启用ISNS服务器,这样,所有ISCSI Initiator和ISCSI Target启动时均作为ISNS客户端向ISNS服务器注册,从而,该ISNS服务器可以实时获知各ISCSITarget的连接状态变化,并将各ISCSI Target变化后的连接状态信息通知给每个ISCSIInitiator,使得每个ISCSI Initiator在需要连接ISCSI Target时,可以选择与可用ISCSITarget建立连接,不再尝试与已经变为不可用的ISCSI Target建立连接,因此,可以有效改善用户体验。这里对于一个特定的ISCSI Initiator来说,它的每个可用ISCSI Target需满足以下条件:处于未连接状态,且管理节点配置该ISCSI Initiator对该ISCSI Target的chap认证信息。
本发明中,还可以支持ISCSI Initiator自动重连,也即ISCSI Initiator在与某一ISCSI Target建立连接后,如果因为网络或其它原因导致连接断开,则ISCSI Initiator可以再次与该ISCSI Target建立连接。
而且,本发明中,如果ISCSI Initiator与某一ISCSI Target建立的连接断开后,如果再次连接该ISCSI Target,则在重连过程中,该ISCSI Initiator对该ISCSI Target的chap认证信息和读写权限均未改变的情况下,可以省略chap认证步骤。
现有技术中,ISCSI Initiator与ISCSI Target建立连接的过程为:ISCSIInitiator发连接请求给ISCSI Target,ISCSI Target发送chap认证消息给ISCSIInitiator,ISCSI Initiator将其对该ISCSI Target的chap认证信息(包括用户名、密码等)携带在chap认证响应中发给ISCSI Target,ISCSI Target将该chap认证信息发送到管理节点(管理节点中配置了ISCSI Initiator对该ISCSI Target的chap认证信息)进行chap认证,认证成功,则ISCSI Target会与ISCSI Initiator执行后续的连接流程,认证失败,则ISCSI Target拒绝与ISCSI Initiator建立连接。
本发明中,为了上述自动重连的目的,管理节点需要支持以下操作:
管理节点可以配置或修改ISCSI Initiator对每个ISCSI Target的chap认证信息和读写权限,并将配置或修改的该ISCSI Initiator对该ISCSI Target的chap认证信息和读写权限,作为该ISCSI Initiator对该ISCSI Target的最新的chap认证信息和读写权限通知给所述ISNS服务器;所述ISNS服务器将此信息保存到ISNS数据库。
管理节点还可以将ISCSI Initiator连接ISCSI Target的过程中使用的chap认证信息和该ISCSI Initiator当前对该ISCSI Target的读写权限,作为该ISCSI Initiator最近一次连接该ISCSI Target时的chap认证信息和读写权限通知给所述ISNS服务器;所述ISNS服务器也将此信息保存到ISNS数据库。
可以看出,对于一个ISCSI Initiator来说,如果其与某一ISCSI Target建立过连接,则ISNS服务器在ISNS数据库中保存了该ISCSI Initiator对该ISCSI Target的两份chap认证信息和读写权限,其中一份是该ISCSI Initiator对该ISCSI Target的最新的chap认证信息和读写权限,另一份是该ISCSI Initiator最近一次连接该ISCSI Target时的chap认证信息和读写权限。这两份chap认证信息和读写权限如果相同,则说明该ISCSIInitiator最近一次连接该ISCSI Target之前和之后,该ISCSI Initiator对该ISCSITarget的chap认证信息和读写权限未发生变化,再次连接时不需要chap认证,如果不相同,则说明ISCSI Initiator最近一次连接该ISCSI Target之前和之后,该ISCSI Initiator对该ISCSI Target的chap认证信息和读写权限发生了变化,再次连接时需要chap认证。
基于上述分析,本发明实施例中,ISCSI Initiator与ISCSI Target的连接过程如下:该ISCSI Initiator向该ISCSI Target发送连接请求;该ISCSI Target向管理节点发送连接信息请求;管理节点向ISNS服务器发送chap认证指示请求,ISNS服务器将该ISCSIInitiator对该ISCSI Target的最新的chap认证信息和读写权限与该ISCSI Initiator最近一次连接该ISCSI Target时的chap认证信息和读写权限进行比较,两者信息相同则向管理节点发送表明不需要进行chap认证的chap认证指示,否则发送需要进行chap认证的chap认证指示。管理节点接收到ISNS服务器返回的chap认证指示后,将chap认证指示返回给该ISCSI Target;该ISCSI Target根据该返回的chap认证指示确定该ISCSI Initiator本次连接该ISCSI Target是否需要chap认证,其中,如果chap认证指示表明需要进行chap认证,则该ISCSI Target执行对该任一ISCSI Initiator的chap认证和连接流程,如果chap认证指示表明不需要进行chap认证,则跳过chap认证阶段,直接执行对该任一ISCSI Initiator的连接流程。
另外,需要说明的是,在实际实现中,分布式文件系统的管理节点可以有多个,其中一个作为主管理节点,其它管理节点作为备份管理节点。在主管理节点未故障的情况下,由主管理节点执行上述图2所示本发明实施例中管理节点执行的各项功能,当主管理节点故障时,可以从备管理节点中选择一个作为新的主管理节点,接替故障的主管理节点工作,成为新的主管理节点。
以上对本发明实施例分布式存储系统中ISCSI Target负载均衡方法进行了详细说明,本发明还提供了一种分布式存储系统中ISCSI Target负载均衡装置,以下结合图3进行详细说明。
参见图3,图3是本发明实施例分布式存储系统中ISCSI Target负载均衡装置的结构示意图,分布式存储系统包括管理节点和数据节点,每个数据节点中均部署多个ISCSITarget,该装置应用于管理节点,如图3所示,包括:监控单元301、负载确定单元302、均衡单元303;其中,
监控单元301,用于监控所有数据节点中的ISCSI Target的使用状态;
负载确定单元302,用于根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量;用于根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量;
均衡单元303,用于针对每个数据节点,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作。
图3所示装置中,
所述监控单元301,监控各数据节点中的ISCSI Target的使用状态时,用于:接收所有数据节点中的ISCSI Target连接状态及变化信息周期性上报和/或该ISCSI Target的连接状态变化时上报的连接状态信息,根据每个ISCSI Target上报的连接状态信息确定该ISCSI Target的使用状态。
图3所示装置中,
所述使用状态包括使用和未使用;
所述连接状态包括已连接、正连接、未连接、未启动;
所述监控单元301,根据每个ISCSI Target上报的连接状态信息确定该ISCSITarget的使用状态时,用于:如果该ISCSI Target的连接状态为已连接或正连接,则确定该ISCSI Target处于使用状态,否则,确定该ISCSI Target处于未使用状态。
图3所示装置中,
所述负载确定单元302,根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量时,用于:将该数据节点中处于使用状态的ISCSI Target的数目确定为该数据节点的负载量;
所述负载确定单元302,根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量时,用于:将所有数据节点中处于使用状态的ISCSI Target的数目与数据节点的数目的商确定为所有数据节点的平均负载量;
所述均衡单元303,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作时,用于:
如果该数据节点的负载量等于所述平均负载量,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量大于所述平均负载量,则计算该数据节点的负载量与所述平均负载量的差值N1,若该差值N1大于预设阈值,则通知该数据节点关闭N1个处于使用状态的ISCSI Target,若该差值N1不大于预设阈值,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量小于所述平均负载量,则计算所述平均负载量与该数据节点的负载量的差值N2,若该差值N2大于预设阈值,通知该数据节点启动N2个处于未使用状态的ISCSI Target,若该差值N2不大于预设阈值,不对该数据节点执行负载均衡操作。
图3所示装置中,还包括启用单元304;
所述启用单元304,用于在管理节点中启用ISNS服务器;所有ISCSI Initiator和ISCSI Target启动时均作为ISNS客户端向ISNS服务器注册,以使所述ISNS服务器获知各ISCSI Target的连接状态变化,并将各ISCSI Target变化后的连接状态信息通知给每个ISCSI Initiator,使得每个ISCSI Initiator选择与可用ISCSI Target建立连接;其中可用ISCSI Target是指处于未连接状态的ISCSI Target,且管理节点配置了该ISCSIInitiator对该处于未连接状态的ISCSI Target的chap认证信息。
图3所示装置中,还包括配置单元305和连接管理单元306;
所述配置单元305,用于配置或修改ISCSI Initiator对每个ISCSI Target的chap认证信息和读写权限,并将配置或修改的该ISCSI Initiator对该ISCSI Target的chap认证信息和读写权限,作为该ISCSI Initiator对该ISCSI Target的最新的chap认证信息和读写权限通知给所述ISNS服务器;
所述连接管理单元306,用于将ISCSI Initiator连接ISCSI Target的过程中使用的chap认证信息和该ISCSI Initiator当前对该ISCSI Target的读写权限,作为该ISCSIInitiator最近一次连接该ISCSI Target时的chap认证信息和读写权限通知给所述ISNS服务器;
所述连接管理单元306,用于接收ISCSI Target发送的针对任一ISCSI Initiator的连接信息请求,向所述ISNS服务器发送chap认证指示请求,接收所述ISNS服务器返回的chap认证指示并将其返回给该ISCSI Target,以使该ISCSI Target确定该chap认证指示表明需要chap认证时,执行对该任一ISCSI Initiator的chap认证和连接流程,确定该chap认证指示表明不需要chap认证时,跳过chap认证阶段,直接执行对该任一ISCSI Initiator的连接流程;其中,该连接信息请求是该ISCSI Target接收到该任一ISCSI Initiator的连接请求后发向管理节点的;所述ISNS服务器接收到管理节点的chap认证指示请求时,比较该任一ISCSI Initiator对该ISCSI Target的最新的chap认证信息和读写权限以及该任一ISCSI Initiator最近一次连接该ISCSI Target时的chap认证信息和读写权限,如果相同,则返回表明不需要chap认证的chap认证指示,如果不同,则返回表明需要chap认证的chap认证指示。。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (12)

1.一种分布式存储系统中ISCSI Target负载均衡方法,其特征在于,分布式存储系统包括管理节点和数据节点,每个数据节点中均部署多个ISCSI Target,该方法应用于管理节点,包括:
监控所有数据节点中的ISCSI Target的使用状态;
根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量;
根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量;
针对每个数据节点,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作。
2.根据权利要求1所述的方法,其特征在于,
监控各数据节点中的ISCSI Target的使用状态的方法为:接收所有数据节点中的ISCSI Target周期性上报和/或该ISCSI Target连接状态变化时上报的连接状态信息,根据每个ISCSI Target上报的连接状态信息确定该ISCSI Target的使用状态。
3.根据权利要求2所述的方法,其特征在于,
所述使用状态包括使用和未使用;
所述连接状态包括已连接、正连接、未连接、未启动;
根据每个ISCSI Target上报的连接状态信息确定该ISCSI Target的使用状态的方法为:如果该ISCSI Target的连接状态为已连接或正连接,则确定该ISCSI Target处于使用状态,否则,确定该ISCSI Target处于未使用状态。
4.根据权利要求3所述的方法,其特征在于,
根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量的方法为:将该数据节点中处于使用状态的ISCSI Target的数目确定为该数据节点的负载量;
根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量的方法为:将所有数据节点中处于使用状态的ISCSI Target的数目与数据节点的数目的商确定为所有数据节点的平均负载量;
根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作的方法为:
如果该数据节点的负载量等于所述平均负载量,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量大于所述平均负载量,则计算该数据节点的负载量与所述平均负载量的差值N1,若该差值N1大于预设阈值,则通知该数据节点关闭N1个处于使用状态的ISCSI Target,若该差值N1不大于预设阈值,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量小于所述平均负载量,则计算所述平均负载量与该数据节点的负载量的差值N2,若该差值N2大于预设阈值,通知该数据节点启用N2个处于未使用状态的ISCSI Target,若该差值N2不大于预设阈值,不对该数据节点执行负载均衡操作。
5.根据权利要求3所述的方法,其特征在于,
管理节点中启用ISNS服务器;所有ISCSI Initiator和ISCSI Target启动时均作为ISNS客户端向ISNS服务器注册,以使所述ISNS服务器获知各ISCSI Target的连接状态变化,并将各ISCSI Target变化后的连接状态信息通知给每个ISCSI Initiator,使得每个ISCSI Initiator选择与可用ISCSI Target建立连接;其中可用ISCSI Target是指处于未连接状态的ISCSI Target,且管理节点配置了该ISCSI Initiator对该处于未连接状态的ISCSI Target的chap认证信息。
6.根据权利要求5所述的方法,其特征在于,
管理节点配置或修改ISCSI Initiator对每个ISCSI Target的chap认证信息和读写权限,并将配置或修改的该ISCSI Initiator对该ISCSI Target的chap认证信息和读写权限,作为该ISCSI Initiator对该ISCSI Target的最新的chap认证信息和读写权限通知给所述ISNS服务器;
管理节点将ISCSI Initiator连接ISCSI Target的过程中使用的chap认证信息和该ISCSI Initiator当前对该ISCSI Target的读写权限,作为该ISCSI Initiator最近一次连接该ISCSI Target时的chap认证信息和读写权限通知给所述ISNS服务器;
管理节点接收ISCSI Target发送的针对任一ISCSI Initiator的连接信息请求,向所述ISNS服务器发送chap认证指示请求,接收所述ISNS服务器返回的chap认证指示并将其返回给该ISCSI Target,以使该ISCSI Target确定该chap认证指示表明需要chap认证时,执行对该任一ISCSI Initiator的chap认证和连接流程,确定该chap认证指示表明不需要chap认证时,跳过chap认证阶段,直接执行对该任一ISCSI Initiator的连接流程;其中,该连接信息请求是该ISCSI Target 接收到该任一ISCSI Initiator的连接请求后发向管理节点的;所述ISNS服务器接收到管理节点的chap认证指示请求时,比较该任一ISCSIInitiator对该ISCSI Target的最新的chap认证信息和读写权限以及该任一ISCSIInitiator最近一次连接该ISCSI Target时的chap认证信息和读写权限,如果相同,则返回表明不需要chap认证的chap认证指示,如果不同,则返回表明需要chap认证的chap认证指示。
7.一种分布式存储系统中ISCSI Target负载均衡装置,其特征在于,分布式存储系统包括管理节点和数据节点,每个数据节点中均部署多个ISCSI Target,该装置应用于管理节点,包括:监控单元、负载确定单元、均衡单元;
所述监控单元,用于监控所有数据节点中的ISCSI Target的使用状态;
所述负载确定单元,用于根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量;用于根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量;
所述均衡单元,用于针对每个数据节点,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作。
8.根据权利要求7所述的装置,其特征在于,
所述监控单元,监控各数据节点中的ISCSI Target的使用状态时,用于:接收所有数据节点中的ISCSI Target周期性或该ISCSI Target的连接状态变化时上报的连接状态信息,根据每个ISCSI Target上报的连接状态信息确定该ISCSI Target的使用状态。
9.根据权利要求8所述的装置,其特征在于,
所述使用状态包括使用和未使用;
所述连接状态包括已连接、正连接、未连接、未启动;
所述监控单元,根据每个ISCSI Target上报的连接状态信息确定该ISCSI Target的使用状态时,用于:如果该ISCSI Target的连接状态为已连接或正连接,则确定该ISCSITarget处于使用状态,否则,确定该ISCSI Target处于未使用状态。
10.根据权利要求8所述的装置,其特征在于,
所述负载确定单元,根据每个数据节点中各ISCSI Target的使用状态确定该数据节点的负载量时,用于:将该数据节点中处于使用状态的ISCSI Target的数目确定为该数据节点的负载量;
所述负载确定单元,根据所有数据节点中的ISCSI Target的使用状态确定所有数据节点的平均负载量时,用于:将所有数据节点中处于使用状态的ISCSI Target的数目与数据节点的数目的商确定为所有数据节点的平均负载量;
所述均衡单元,根据该数据节点的负载量和所述平均负载量对该数据节点执行负载均衡操作时,用于:
如果该数据节点的负载量等于所述平均负载量,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量大于所述平均负载量,则计算该数据节点的负载量与所述平均负载量的差值N1,若该差值N1大于预设阈值,则通知该数据节点关闭N1个处于使用状态的ISCSI Target,若该差值N1不大于预设阈值,则不对该数据节点执行负载均衡操作;
如果该数据节点的负载量小于所述平均负载量,则计算所述平均负载量与该数据节点的负载量的差值N2,若该差值N2大于预设阈值,通知该数据节点启用N2个处于未使用状态的ISCSI Target,若该差值N2不大于预设阈值,不对该数据节点执行负载均衡操作。
11.根据权利要求9所述的装置,其特征在于,还包括启用单元;
所述启用单元,用于在管理节点中启用ISNS服务器;所有ISCSI Initiator和ISCSITarget启动时均作为ISNS客户端向ISNS服务器注册,以使所述ISNS服务器获知各ISCSITarget的连接状态变化,并将各ISCSI Target变化后的连接状态信息通知给每个ISCSIInitiator,使得每个ISCSI Initiator选择与可用ISCSI Target建立连接;其中可用ISCSITarget是指处于未连接状态的ISCSI Target,且管理节点配置了该ISCSI Initiator对该处于未连接状态的ISCSI Target的chap认证信息。
12.根据权利要求11所述的装置,其特征在于,还包括配置单元和连接管理单元;
所述配置单元,用于配置或修改ISCSI Initiator对每个ISCSI Target的chap认证信息和读写权限,并将配置或修改的该ISCSI Initiator对该ISCSI Target的chap认证信息和读写权限,作为该ISCSI Initiator对该ISCSI Target的最新的chap认证信息和读写权限通知给所述ISNS服务器;
所述连接管理单元,用于将ISCSI Initiator连接ISCSI Target的过程中使用的chap认证信息和该ISCSI Initiator当前对该ISCSI Target的读写权限,作为该ISCSIInitiator最近一次连接该ISCSI Target时的chap认证信息和读写权限通知给所述ISNS服务器;
所述连接管理单元,用于接收ISCSI Target发送的针对任一ISCSI Initiator的连接信息请求,向所述ISNS服务器发送chap认证指示请求,接收所述ISNS服务器返回的chap认证指示并将其返回给该ISCSI Target,以使该ISCSI Target确定该chap认证指示表明需要chap认证时,执行对该任一ISCSI Initiator的chap认证和连接流程,确定该chap认证指示表明不需要chap认证时,跳过chap认证阶段,直接执行对该任一ISCSI Initiator的连接流程;其中,该连接信息请求是该ISCSI Target接收到该任一ISCSI Initiator的连接请求后发向管理节点的;所述ISNS服务器接收到管理节点的chap认证指示请求时,比较该任一ISCSI Initiator对该ISCSI Target的最新的chap认证信息和读写权限以及该任一ISCSIInitiator最近一次连接该ISCSI Target时的chap认证信息和读写权限,如果相同,则返回表明不需要chap认证的chap认证指示,如果不同,则返回表明需要chap认证的chap认证指示。
CN201711474284.8A 2017-12-29 2017-12-29 一种分布式存储系统中ISCSI Target负载均衡方法和装置 Active CN108200151B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711474284.8A CN108200151B (zh) 2017-12-29 2017-12-29 一种分布式存储系统中ISCSI Target负载均衡方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711474284.8A CN108200151B (zh) 2017-12-29 2017-12-29 一种分布式存储系统中ISCSI Target负载均衡方法和装置

Publications (2)

Publication Number Publication Date
CN108200151A true CN108200151A (zh) 2018-06-22
CN108200151B CN108200151B (zh) 2021-09-10

Family

ID=62585954

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711474284.8A Active CN108200151B (zh) 2017-12-29 2017-12-29 一种分布式存储系统中ISCSI Target负载均衡方法和装置

Country Status (1)

Country Link
CN (1) CN108200151B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108900626A (zh) * 2018-07-18 2018-11-27 中国联合网络通信集团有限公司 一种云环境下数据存储方法、装置及系统
CN112468590A (zh) * 2020-11-27 2021-03-09 杭州海康威视系统技术有限公司 一种存储资源挂载方法和装置
CN114115718A (zh) * 2021-08-31 2022-03-01 济南浪潮数据技术有限公司 分布式块存储系统服务质量控制方法、装置、设备及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101217561A (zh) * 2008-01-15 2008-07-09 杭州华三通信技术有限公司 一种增强网络存储可靠性的方法和一种网络设备
CN102257469A (zh) * 2008-10-10 2011-11-23 株式会社日立制作所 存储系统及用于控制存储系统的方法
US20150293708A1 (en) * 2014-04-11 2015-10-15 Netapp, Inc. Connectivity-Aware Storage Controller Load Balancing

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101217561A (zh) * 2008-01-15 2008-07-09 杭州华三通信技术有限公司 一种增强网络存储可靠性的方法和一种网络设备
CN102257469A (zh) * 2008-10-10 2011-11-23 株式会社日立制作所 存储系统及用于控制存储系统的方法
US20150293708A1 (en) * 2014-04-11 2015-10-15 Netapp, Inc. Connectivity-Aware Storage Controller Load Balancing

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
胡风华: "基于以太网的存储系统研究", 《中国博士学位论文全文数据库信息科技辑》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108900626A (zh) * 2018-07-18 2018-11-27 中国联合网络通信集团有限公司 一种云环境下数据存储方法、装置及系统
CN108900626B (zh) * 2018-07-18 2021-11-19 中国联合网络通信集团有限公司 一种云环境下数据存储方法、装置及系统
CN112468590A (zh) * 2020-11-27 2021-03-09 杭州海康威视系统技术有限公司 一种存储资源挂载方法和装置
CN114115718A (zh) * 2021-08-31 2022-03-01 济南浪潮数据技术有限公司 分布式块存储系统服务质量控制方法、装置、设备及介质
CN114115718B (zh) * 2021-08-31 2024-03-29 济南浪潮数据技术有限公司 分布式块存储系统服务质量控制方法、装置、设备及介质

Also Published As

Publication number Publication date
CN108200151B (zh) 2021-09-10

Similar Documents

Publication Publication Date Title
CN105579960B (zh) 计算会话的管理
KR101916847B1 (ko) 크로스-클라우드식 관리 및 고장수리 기법
US7035919B1 (en) Method for calculating user weights for thin client sizing tool
Chaczko et al. Availability and load balancing in cloud computing
US8719627B2 (en) Cross-cloud computing for capacity management and disaster recovery
CN105637481B (zh) 计算会话的管理
US20080275962A1 (en) Remote access providing computer system and method for managing same
US20130007253A1 (en) Method, system and corresponding device for load balancing
US10498837B1 (en) Highly available private cloud service
CN105025084A (zh) 一种基于同步代理和混合存储的云存储系统
CN108196788A (zh) QoS指标监测方法、装置、存储介质
CN106933548B (zh) 全局信息获取、处理及更新、方法、装置和系统
CN111338773A (zh) 一种分布式定时任务调度方法、调度系统及服务器集群
US10346367B1 (en) Load shedding techniques for distributed services with persistent client connections to ensure quality of service
CN105094897B (zh) 一种虚拟机启动方法、云接入设备及云计算中心
CN109151028A (zh) 一种分布式存储系统容灾方法及装置
CN108200151A (zh) 一种分布式存储系统中ISCSI Target负载均衡方法和装置
CN110138577A (zh) 集群创建方法、第一服务器以及可读存储介质
CA3030504A1 (en) Blockchain network and task scheduling method therefor
Rajalakshmi et al. An improved dynamic data replica selection and placement in cloud
CN110099084A (zh) 一种保证存储服务可用性的方法、系统及计算机可读介质
KR101250881B1 (ko) 클라우드 컴퓨팅의 블럭 스토리지 서비스의 데이터 이중화 방법
EP3349416B1 (en) Relationship chain processing method and system, and storage medium
CN112099991A (zh) 数据备份及访问源数据的方法、装置、系统、存储介质
Kalaiselvan et al. Performance-based QoS for cloud’s infrastructure as a service

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 518057 Shenzhen Software Park, No. 9, 501, 502, Science and Technology Middle Road, Nanshan District, Shenzhen City, Guangdong Province

Applicant after: Shenzhen Innovation Technology Co., Ltd.

Applicant after: Innovation Technology Co., Ltd.

Address before: 518057 Shenzhen Software Park, No. 9, 501, 502, Science and Technology Middle Road, Nanshan District, Shenzhen City, Guangdong Province

Applicant before: UIT Storage Technology (Shenzhen) Co., Ltd.

Applicant before: Innovation and Technology Storage Technology Co., Ltd.

GR01 Patent grant
GR01 Patent grant