CN112083886B - 一种nas设备的存储管理方法、系统及装置 - Google Patents

一种nas设备的存储管理方法、系统及装置 Download PDF

Info

Publication number
CN112083886B
CN112083886B CN202010939215.5A CN202010939215A CN112083886B CN 112083886 B CN112083886 B CN 112083886B CN 202010939215 A CN202010939215 A CN 202010939215A CN 112083886 B CN112083886 B CN 112083886B
Authority
CN
China
Prior art keywords
heterogeneous
virtual storage
node
nas device
domain
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010939215.5A
Other languages
English (en)
Other versions
CN112083886A (zh
Inventor
吴小鹏
夏伟强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision System Technology Co Ltd
Original Assignee
Hangzhou Hikvision System Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision System Technology Co Ltd filed Critical Hangzhou Hikvision System Technology Co Ltd
Priority to CN202010939215.5A priority Critical patent/CN112083886B/zh
Publication of CN112083886A publication Critical patent/CN112083886A/zh
Application granted granted Critical
Publication of CN112083886B publication Critical patent/CN112083886B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种网络附属存储NAS设备的存储管理方法、系统及装置,本发明实施例在云存储系统中设置中心管理节点,通过中心管理节点对NAS设备的存储空间进行切分,在NAS设备中形成相互独立的虚拟存储卷,将不同的虚拟存储卷分散到不同的异构网关节点挂载。这样,本发明实施例在进行NAS设备存储管理时,实现同一NAS设备存储容量的分散管理。

Description

一种NAS设备的存储管理方法、系统及装置
技术领域
本发明涉及互联网中的数据存储技术,特别涉及一种网络附属存储(NAS,NetworkAttached Storage)设备的存储管理方法、系统及装置。
背景技术
云存储系统为海量数据提供存储空间,数据需要分散到所属异构域内的所有NAS设备中进行分散存储。在云存储系统中,NAS设备接入到异构网关节点上,异构网关节点再接入到核心网络上,控制进行NAS设备中数据的写入或读取。NAS设备作为一个独立的存储设备,其挂载过程及存储管理过程都是由其挂载的异构网关节点控制实现的,与云存储系统中的其他异构网关节点无关。具体地说,异构网关节点挂载NAS设备时根据用户配置将NAS设备挂载到异构网关节点上;在异构网关节点对NAS设备进行存储管理时,如图1所示,图1为现有技术中NAS设备切分存储区域示意图,异构网关节点控制将NAS设备切分为不同存储区域,不同存储区域进行不同数据类型的数据读写。
采用上述云存储系统实现数据存储管理存在缺点:无法实现同一NAS设备存储容量的分散管理。
发明内容
有鉴于此,本发明实施例提供一种NAS设备的存储管理方法,该方法能够在进行NAS设备存储管理时,实现同一NAS设备存储容量的分散管理。
本发明实施例还提供一种管理NAS设备的存储管理系统,该系统能够在进行NAS设备存储管理时,实现同一NAS设备存储容量的分散管理。
本发明实施例是这样实现的:
一种网络附属存储NAS设备的存储管理方法,包括:
设置中心管理节点,所述中心管理节点将异构域内的每个所述NAS设备的存储空间切分为多个虚拟存储卷;
所述中心管理节点将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
较佳地,在所述中心管理节点将异构域内的每个所述NAS设备的存储空间切分为多个虚拟存储卷之前,还包括:
所述中心管理节点通过互联网络接收NAS设备的配置信息,根据NAS设备的配置信息在异构域内接入所述NAS设备。
较佳地,所述方法还包括:
所述中心管理节点接收到异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在虚拟存储卷的心跳超时、状态异常或离线的情况时,向挂载出现情况的虚拟存储卷的异构网关节点发送重新挂载请求,以使所述异构网关节点重新挂载所述虚拟存储卷。
较佳地,所述方法还包括:
所述中心管理节点检测到异构域内有NAS设备接入时,对接入的NAS设备的存储空间进行切分,切分为多个虚拟存储卷;
所述中心管理节点将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
较佳地,所述切分为多个虚拟存储卷包括:
所述中心管理节点根据所述NAS设备的存储容量及设置的虚拟存储卷的存储容量确定切分虚拟存储卷的个数,将每个所述NAS设备的存储空间切分为所确定个数的虚拟存储卷。
所述中心管理节点将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载包括:
所述中心管理节点根据设置的规则将所述多个虚拟存储卷分散到不同的所述异构网关节点挂载,所述规则为:
保证异构域内的每个异构网关节点挂载虚拟存储卷的个数均衡,且同一NAS设备的不同虚拟存储卷挂载在同一异构域内的不同的异构网关节点上。
一种NAS设备的存储系统,包括:中心管理节点、异构网关节点及NAS设备,异构网关节点及NAS设备分别接入到中心管理节点上,其中,
中心管理节点,用于将每个所述NAS设备的存储空间切分为多个虚拟存储卷,将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载;
异构网关节点,用于在中心管理节点的控制下挂载虚拟存储卷,对所挂载的虚拟存储卷进行数据读写管理;
NAS设备,用于在中心管理节点的控制下将存储空间切分为多个虚拟存储卷,将所切分的不同虚拟存储卷挂载到不同的异构网关节点上。
较佳地,所述异构网关节点,还用于定时向所述中心管理节点发送自身挂载的虚拟存储设备状态信息;接收重新挂载请求后,重新挂载所述请求挂载的虚拟存储卷;
所述中心管理节点,还用于接收到异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在虚拟存储卷的心跳超时、状态异常或离线的情况时,向挂载所述虚拟存储卷的异构网关节点发送重新挂载请求;
或者,所述中心管理节点,还用于检测到异构域内有NAS设备接入时,控制对接入的NAS设备的存储空间进行切分,切分为多个虚拟存储卷;控制将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
较佳地,所述中心管理节点,还用于将所述多个虚拟存储卷分散到不同的所述异构网关节点挂载是根据设置的规则进行的,所述规则为:
保证异构域内的每个异构网关节点挂载虚拟存储卷的个数均衡,且同一NAS设备的不同虚拟存储卷挂载在同一异构域内的不同的异构网关节点上。
所述中心管理节点,还用于根据定时接收异构网关节点上报的数据负载状态信息确定有异构网关节点的数据负载出现变化时,或当检测到有异构网关节点离线时,或当检测到有NAS设备接入到异构域中时,进行挂载更新。
一种NAS设备的存储装置,包括:接入单元、切分单元及挂载单元,其中,
接入单元,用于接入异构域内的异构网关节点及NAS设备;
切分单元,用于将异构域内的每个所述NAS设备的存储空间切分为多个虚拟存储卷;
挂载单元,用于将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
较佳地,所述装置还包括检测单元及更新单元,其中,
检测单元,用于接收到异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在虚拟存储卷的心跳超时、状态异常或离线的情况;
更新单元,用于向挂载出现情况的虚拟存储卷的异构网关节点发送重新挂载请求,以使对出现情况的虚拟存储卷进行重新挂载;
或者,检测单元,用于检测到异构域内有NAS设备接入;
更新单元,用于控制对接入的NAS设备的存储空间进行切分,切分为多个虚拟存储卷;控制将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
较佳地,所述挂载单元,还用于将所述多个虚拟存储卷分散到不同的所述异构网关节点挂载是根据设置的规则进行的,所述规则为:
保证异构域内的每个异构网关节点挂载虚拟存储卷的个数均衡,且同一NAS设备的不同虚拟存储卷挂载在同一异构域内的不同的异构网关节点上。
如上所见,本发明实施例在云存储系统中设置中心管理节点,通过中心管理节点对NAS设备的存储空间进行切分,在NAS设备中形成相互独立的虚拟存储卷,将不同的虚拟存储卷分散到不同的异构网关节点挂载,在选择异构网关节点进行虚拟存储卷挂载时,采用的规则为:不同异构网关节点的挂载虚拟存储卷的个数均衡,及同一NAS设备的不同虚拟存储卷分散挂载到不同的异构网关节点。更进一步地,中心管理节点确定有异构网关节点的数据负载发生变化时或当检测到有异构网关节点离线时,按照所设置的规则重新将不同的虚拟存储卷分散到不同的异构网关节点上挂载。这样,本发明实施例在进行NAS设备存储管理时,实现同一NAS设备存储容量的分散管理,进一步保证了异构网关节点的数据负载均衡。
附图说明
图1为现有技术中NAS设备切分存储区域示意图;
图2为本发明实施例提供的NAS设备的存储管理方法流程图;
图3为本发明实施例提供的NAS设备的虚拟化管理示意图;
图4为本发明实施例提供的对象数据的条带化处理过程示意图;
图5为本发明实施例提供的中心管理节点分散挂载从NAS设备所切分的虚拟存储卷的方法流程图;
图6为本发明实施例提供的云存储系统的异构域内在出现故障恢复时的中心管理节点的处理方法流程图;
图7为本发明实施例提供的NAS设备的存储管理系统结构示意图;
图8为本发明实施例提供的NAS设备的存储管理装置结构示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚明白,以下参照附图并举实施例,对本发明进一步详细说明。
从背景技术可以看出,造成云存储系统中的同一异构域内的NAS设备存储容量无法分散管理的主要原因是:NAS设备作为独立的存储设备,其挂载和存储管理都是由其直接挂载到的异构网关节点进行,而与云存储系统中的同一异构域内的其他异构网关节点无关。
采用上述方式管理NAS设备的存储,还存在以下缺陷:第一,云存储系统的NAS设备挂载需要人工干预,不具备易用性;第二,无法保证云存储系统中的异构网关节点的数据负载均衡。
因此,为了克服上述问题,本发明实施例在云存储系统进行数据读写管理时,从整体性考虑,将云存储系统的同一异构域内的NAS设备及异构网关节点都不作为独立的实体考虑,而整体上进行挂载及存储管理。即本发明实施例在云存储系统中设置中心管理节点,通过中心管理节点对NAS设备的存储空间进行切分,在NAS设备中形成相互独立的虚拟存储卷,将不同的虚拟存储卷分散到不同的异构网关节点挂载,在选择异构网关节点进行虚拟存储卷挂载时,采用的规则为:不同异构网关节点的挂载虚拟存储卷的个数均衡,及同一NAS设备的不同虚拟存储卷分散挂载到不同的异构网关节点。
更进一步地,中心管理节点确定有异构网关节点的数据负载发生变化时或当检测到有异构网关节点离线时,按照所设置的规则重新将不同的虚拟存储卷分散到不同的异构网关节点上挂载。
这样,本发明实施例在进行NAS设备存储管理时,实现同一NAS设备存储容量的分散管理,更进一步保证了异构网关节点的数据负载均衡,且不需要人工干预,更具备易用性。
在本发明实施例中,一个云存储系统中,可以具有一个或多个异构域。在一个异构域中包括了多个异构网节点及多个NAS设备,设置一个中心管理节点进行管理。
图2为本发明实施例提供的NAS设备的存储管理方法流程图,其具体步骤为:
步骤201、设置中心管理节点,所述中心管理节点分别接入异构域内的所有异构网关节点及所有NAS设备;
步骤202、所述中心管理节点将每个所述NAS设备的存储空间切分为多个虚拟存储卷;
步骤203、所述中心管理节点将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
在该方法中,所述中心管理节点在将每个所述MAS设备的存储空间切分时,根据NAS设备的存储容量及设置的虚拟存储卷的存储容量确定,当NAS设备的切分后的剩余存储容量小于所设置的虚拟存储卷的存储容量的设定百分比数量后,比如,设定的百分比数量为50%,则不再进行切分。
在该方法中,所述中心管理节点将所述多个虚拟存储卷分散到不同的所述异构网关节点挂载是根据设置的规则进行的,所述规则为:
保证异构域内的每个异构网关节点挂载虚拟存储卷的个数均衡,且同一NAS设备的不同虚拟存储卷挂载在同一异构域内的不同的异构网关节点上。
采用这样的规则,更进一步保证了在一个异构域内的所有异构网关节点的数据负载均衡,且实现同一NAS设备的不同存储空间的分散管理。
如图3所示,图3为本发明实施例提供的NAS设备的虚拟化管理示意图,异构域内的异构网络节点和异构域内的NAS设备处于同一网络中,互相通信正常,通过中心管理节点对NAS设备进行存储空间切分形成独立的虚拟存储卷,将虚拟存储卷分散到同一异构域内的不同异构网关节点中进行挂载及后续进行数据的存储管理。
在该方法中,所述中心管理节点接入异构域内的NAS设备包括:
所述中心管理节点通过互联网(web)接收NAS设备的配置信息,根据NAS设备的配置信息接入NAS设备。所述信息可以包括NAS设备的地址链接及存储容量等信息。这样,就可以动态地将扩充异构域的存储容量。同时,采用这种方式也不需要人工将添加的NAS设备一一配置到不同的异构网关节点上,减少人工干预,提高易用性。
在本发明实施例中,所述方法还包括:
所述中心管理节点接收到异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在虚拟存储卷的心跳超时、状态异常或离线的情况时,向挂载所述虚拟存储卷的异构网关节点发送重新挂载请求,以使所述异构网关节点重新挂载所述虚拟存储卷。
在本发明实施例中,所述方法还包括:所述中心管理节点检测到异构域内有NAS设备接入时,对接入的NAS设备的存储空间进行切分,切分为多个虚拟存储卷;
所述中心管理节点将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
在上述两种方案中,采用的规则为:保证异构域内的每个异构网关节点挂载虚拟存储卷的个数均衡,且同一NAS设备的不同虚拟存储卷挂载在同一异构域内的不同的异构网关节点上。这样,本发明实施例就可以动态地调整云存储系统的异构域内的每个异构网络节点的负载均衡。
当然,在所述中心管理节点根据定时接收异构网关节点上报的数据负载状态信息确定有异构网关节点的数据负载出现变化时,或当检测到有异构网关节点离线时,或当检测到有NAS设备接入到异构域中时,还有可能涉及所切分的虚拟存储卷的变化,这时,对虚拟存储卷进行切分更新。
在云存储系统中,数据采用对象的形式存储,对象包括对象标识(ID)、对象数据及对象元数据,其中对象ID是对象的全局唯一标识符,对象数据是指存储的具体数据,对象元数据用于描述对象数据的信息,如数据的时间、大小、索引及拥有者等描述性的信息。云存储系统将数据读写前需要进行条带化处理,并将条带化处理后的数据读写到NAS设备中。对象数据的条带化处理过程如图4所示,将对象数据分割为多个条带(stripe),每一个条带中包含了多个数据单元(unit),一个数据单元可以为1MB大小的数据块。同一条带中的不同数据单元分布式存储于不同NAS设备的不同存储区中。在背景技术中,采用异构网络节点对整个NAS设备进行统一挂载处理,但随着云存储系统存储容量的扩展,NAS设备接入云存储系统个数增多,所以采用将不同数据单元分布式存储在NAS设备所切分的虚拟存储卷中。
也就是说,在云存储系统的异构域内存储的数据采用对象的形式存储,NAS设备所切分的虚拟存储卷存储了不同的数据单元,所述数据单元是采用条带化处理的。
以下具两个具体实施例对本发明进行详细说明。
实施例一
图5为本发明实施例提供的中心管理节点分散挂载从NAS设备所切分的虚拟存储卷的方法流程图,其具体步骤包括:
步骤501、添加NAS设备到云存储系统的一个异构域中,中心管理节点保存该NAS设备的配置信息到所设置的自身数据库中;
在本步骤中,添加NAS设备时是用户通过网络访问异构域中的中心管理节点,发起添加NAS设备的请求,该请求携带有NAS设备的配置信息,中心管理节点基于该请求携带的配置信息添加的;
步骤502、中心管理节点设置切分的后台任务,所述后台任务负责处理进行该NAS设备的存储容量切分;
步骤503、中心管理节点执行所述切分的后台任务,根据该NAS设备的总存储容量及配置的虚拟存储卷默认存储容量,进行该NAS设备的存储容量切分;对每个切分的虚拟存储卷设置唯一ID;
在本步骤中,虚拟存储卷默认的存储容量可以设置为30T,在切分时如果NAS设备的剩余存储容量小于虚拟存储卷默认存储容量的50%时,则不再对该NAS设备的剩余存储空间进行切分,完成切分过程;
在本步骤中,在对每个切分的虚拟存储卷设置的唯一ID的生成规则为:NAS设备的局域网地址(MAC)的最后3字节+切分的时间+自增ID,切分的时间单位为微秒,采用后7个字节,自增ID为3个字节,数字部分均记录为十六进制;
步骤504、中心管理节点针对每一个所切分的虚拟存储卷,选择异构网关节点进行挂载;
该步骤具体执行过程包括:中心管理节点针对每一个所切分的虚拟存储卷,遍历异构域内的异构网关节点,从中选择挂载不同虚拟存储卷的异构网关节点;
步骤505、中心管理节点判断为当前所切分的虚拟存储卷,所选择的异构网关节点是否成功,如果是,则执行步骤506;如果否,则执行步骤507;
在本步骤中,选择挂载的异构网关节点需要满足以下条件:1、处于可用状态,所述可用状态包括所选择的异构网关节点在线、异构网关节点的中央处理器/内存/网络的负载没有越限,所选择的异构网关节点处于非维护态;2、所选择的异构网关节点已挂载的虚拟存储卷个数尽量少;
步骤506、中心管理节点将当前所切分的虚拟存储卷的挂载状态设置为挂载成功,存储到自身的数据库中,返回步骤504,继续下一个虚拟存储卷的挂载处理;
步骤507、中心管理节点判断当前所切分的虚拟存储卷选择挂载异构网关节点的次数是否超过所设置的选择次数,如果否,则返回步骤504,则排除挂载失败的当前所切分的虚拟存储卷后,对当前所切分的虚拟存储卷继续选择所挂载的异构网关节点;如果是,执行步骤508;
步骤508、中心管理节点判断是否处理完所有切分的虚拟存储卷,如果是,则执行步骤510;如果否,执行步骤509;
步骤509、中心管理节点选择当前所切分的虚拟卷后的下一个虚拟存储卷,作为当前所切分的虚拟存储卷,返回步骤504继续执行,直到该NAS设备所切分的虚拟存储卷都被挂载;
步骤510、中心管理节点等待设定的等待时限后,启动下一次的处理。
实施例二
图6为本发明实施例提供的云存储系统的异构域内在出现故障恢复时的中心管理节点的处理方法流程图,其具体步骤为:
步骤601、异构域内的每个异构网关节点在设置的间隔时间上报数据负载状态信息,中心管理节点基于该信息进行故障处理;
在本步骤中,数据负载状态信息包括:挂载的虚拟存储卷ID、心跳时间以及异构网关节点ID等;
步骤602、中心管理节点建立故障处理的后台任务,该故障处理的后台任务遍历每一个虚拟存储卷,判断所遍历到的当前虚拟存储卷的挂载异构网关节点ID及心跳更新时间是否异常,如果否,执行步骤604,如果是,执行步骤603;
步骤603、中心管理节点进行故障异常处理后,将当前虚拟存储卷的下一个虚拟存储卷作为当前存储卷,返回步骤602继续执行;
在本步骤中,例如中心管理节点记录虚拟存储卷A不属于异构网关节点N挂载的,但是异构网关节点N上报了该虚拟存储卷A的挂载状态信息,则属于异常,向异构网关节点发送虚拟存储卷A卸载请求;
在本步骤中,还例如虚拟存储卷属于异构网关节点N挂载,但是异构网关节点N超过所设置的时间没有上报虚拟存储卷B的加载信息,则中心管理节点向异构网关节点发送虚拟存储卷B的在线探测请求,异构网关节点尝试启动虚拟存储卷B的输入输出端口(IO)请求,如果IO请求不成功,则说明虚拟存储卷B离线,返回步骤602,继续遍历下一个虚拟存储卷;如果IO请求成功,则说明虚拟存储卷B在线,需要重新向异构网关节点N下发虚拟存储卷B的挂载请求,更新心跳时间后,返回步骤602,继续遍历下一个虚拟存储卷;
步骤604、中心管理节点判断是否遍历完异构域内所有的虚拟存储卷,如果是,则执行步骤606;如果否,则执行步骤605;
步骤605;中心管理节点将当前虚拟存储卷的下一个虚拟存储卷作为当前存储卷,返回步骤602继续执行;
步骤606,中心管理节点遍历完所有的虚拟存储卷,结束本过程,等待设定的时间后进行下一次任务的处理。
图7为本发明实施例提供的NAS设备的存储管理系统结构示意图,包括:中心管理节点、异构网关节点及NAS设备,异构网关节点及NAS设备接入到中心管理节点上,其中,
中心管理节点,用于将每个所述NAS设备的存储空间切分为多个虚拟存储卷,将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载;
异构网关节点,用于在中心管理节点的控制下挂载虚拟存储卷,对所挂载的虚拟存储卷进行数据读写管理;
NAS设备,用于在中心管理节点的控制下将存储空间切分为多个虚拟存储卷,将所切分的不同虚拟存储卷挂载到不同的异构网关节点上。
在该系统中,所述异构网关节点,还用于定时向所述中心管理节点发送自身挂载的虚拟存储设备状态信息;接收重新挂载请求后,重新挂载所述请求挂载的虚拟存储卷;
所述中心管理节点,还用于接收到异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在虚拟存储卷的心跳超时、状态异常或离线的情况时,向挂载所述虚拟存储卷的异构网关节点发送重新挂载请求。
在该系统中,所述中心管理节点,还用于检测到异构域内有NAS设备接入时,控制对接入的NAS设备的存储空间进行切分,切分为多个虚拟存储卷;控制将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
在上述系统中,所述中心管理节点,还用于将所述多个虚拟存储卷分散到不同的所述异构网关节点挂载是根据设置的规则进行的,所述规则为:
保证异构域内的每个异构网关节点挂载虚拟存储卷的个数均衡,且同一NAS设备的不同虚拟存储卷挂载在同一异构域内的不同的异构网关节点上。
在该系统中,所述中心管理节点,还用于根据定时接收异构网关节点上报的数据负载状态信息确定有异构网关节点的数据负载出现变化时,或当检测到有异构网关节点离线时,或当检测到有NAS设备接入到异构域中时,进行挂载更新。
图8为本发明实施例提供的NAS设备的存储管理装置结构示意图,该装置为中心管理节点,包括:接入单元、切分单元及挂载单元,其中,
接入单元,用于接入异构域内的所有异构网关节点及所有NAS设备;
切分单元,用于将异构域内的每个所述NAS设备的存储空间切分为多个虚拟存储卷;
挂载单元,用于将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
在该装置中,所述装置还包括检测单元及更新单元,其中,
检测单元,用于接收到异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在虚拟存储卷的心跳超时、状态异常或离线的情况;
更新单元,用于向挂载出现情况的虚拟存储卷的异构网关节点发送重新挂载请求,以使对出现情况的虚拟存储卷进行重新挂载。
在该装置中,所述装置还包括检测单元及更新单元,其中,
检测单元,用于检测到异构域内有NAS设备接入;
更新单元,用于控制对接入的NAS设备的存储空间进行切分,切分为多个虚拟存储卷;控制将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
在上述装置中,进一步地,所述挂载单元,还用于将所述多个虚拟存储卷分散到不同的所述异构网关节点挂载是根据设置的规则进行的,所述规则为:
保证异构域内的每个异构网关节点挂载虚拟存储卷的个数均衡,且同一NAS设备的不同虚拟存储卷挂载在同一异构域内的不同的异构网关节点上。
可以看出,本发明实施例通过云存储系统的异构域内的中心管理节点对NAS设备进行存储空间切分形成各个互相独立的虚拟存储卷,并将不同的虚拟存储卷分散到不同的异构网关节点上进行挂载处理、数据读写管理及故障恢复。具备以下的优势:首先,将NAS设备切分为不同的虚拟存储卷,具备类似普通硬盘的数据读写功能,满足云存储系统下采用对象形式存储数据的需求;其次,中心管理节点可以定时或实时地对虚拟存储卷进行状态检测,当虚拟存储卷出现挂载故障后可以及时恢复,具备高可用特性;最后,虚拟存储卷分散到不同的异构网关节点进行挂载,数据读写也会被分散到不同异构网关节点的不同虚拟存储卷内进行,实现NAS设备及异构网关节点的数据读写负载均衡。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (12)

1.一种网络附属存储NAS设备的存储管理方法,其特征在于,包括:
在云存储系统中设置一中心管理节点,所述中心管理节点将所述云存储系统中的一异构域内的每个NAS设备的存储空间切分为多个虚拟存储卷,所述云存储系统中包括至少一个异构域,且一个异构域中包括多个异构网关节点及多个NAS设备;
所述中心管理节点将所述多个虚拟存储卷分散到所述异构域中的不同的异构网关节点进行挂载,以使不同的所述异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理,以实现所述NAS设备存储容量的分散管理。
2.如权利要求1所述的存储管理方法,其特征在于,在所述中心管理节点将所述云存储系统中的一异构域内的每个NAS设备的存储空间切分为多个虚拟存储卷之前,还包括:
所述中心管理节点通过互联网络接收所述NAS设备的配置信息,根据所述NAS设备的配置信息在所述异构域内接入所述NAS设备。
3.如权利要求1所述的存储管理方法,其特征在于,所述方法还包括:
所述中心管理节点接收到所述异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在所述虚拟存储卷的心跳超时、状态异常或离线的情况时,向挂载出现情况的所述虚拟存储卷的所述异构网关节点发送重新挂载请求,以使所述异构网关节点重新挂载所述虚拟存储卷。
4.如权利要求1所述的存储管理方法,其特征在于,所述方法还包括:
所述中心管理节点检测到所述异构域内有NAS设备接入时,对接入的所述NAS设备的存储空间进行切分,切分为多个虚拟存储卷;
所述中心管理节点将所述多个虚拟存储卷分散到所述异构域中的不同的所述异构网关节点进行挂载,以使不同的所述异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
5.如权利要求1或4所述的管理方法,其特征在于,所述切分为多个虚拟存储卷包括:
所述中心管理节点根据所述NAS设备的存储容量及设置的虚拟存储卷的存储容量确定切分虚拟存储卷的个数,将所述NAS设备的存储空间切分为所确定个数的虚拟存储卷。
6.如权利要求1、3或4所述的存储管理方法,其特征在于,所述中心管理节点将所述多个虚拟存储卷分散到所述异构域中的不同的所述异构网关节点进行挂载包括:
所述中心管理节点根据设置的规则将所述多个虚拟存储卷分散到所述异构域中的不同的所述异构网关节点挂载,所述规则为:
保证所述异构域内的每个所述异构网关节点挂载所述虚拟存储卷的个数均衡,且同一所述NAS设备的不同所述虚拟存储卷挂载在所述异构域内的不同的所述异构网关节点上。
7.一种NAS设备的存储系统,其特征在于,包括:中心管理节点、异构网关节点及NAS设备,异构网关节点及NAS设备分别接入到中心管理节点上,其中,
所述中心管理节点,用于将云存储系统中的一异构域内的每个所述NAS设备的存储空间切分为多个虚拟存储卷,将所述多个虚拟存储卷分散到所述异构域中的不同的异构网关节点进行挂载;
所述异构网关节点,用于在所述中心管理节点的控制下挂载所述虚拟存储卷,对所挂载的所述虚拟存储卷进行数据读写管理;
所述NAS设备,用于在所述中心管理节点的控制下将存储空间切分为多个所述虚拟存储卷,将所切分的不同的所述虚拟存储卷挂载到不同的所述异构网关节点上,以实现存储容量的分散管理。
8.如权利要求7所述的存储系统,其特征在于,所述异构网关节点,还用于定时向所述中心管理节点发送自身挂载的虚拟存储设备状态信息;接收重新挂载请求后,重新挂载所述请求挂载的虚拟存储卷;
所述中心管理节点,还用于接收到所述异构网关节点定时上报的自身挂载的所述虚拟存储设备状态信息,根据所述状态信息确定存在所述虚拟存储卷的心跳超时、状态异常或离线的情况时,向挂载所述虚拟存储卷的所述异构网关节点发送重新挂载请求;
或者,所述中心管理节点,还用于检测到所述异构域内有NAS设备接入时,控制对接入的所述NAS设备的存储空间进行切分,切分为多个虚拟存储卷;控制将所述多个虚拟存储卷分散到不同的所述异构网关节点进行挂载,以使不同的所述异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
9.如权利要求7或8所述的存储系统,其特征在于,所述中心管理节点,还用于将所述多个虚拟存储卷分散到不同的所述异构网关节点挂载是根据设置的规则进行的,所述规则为:
保证所述异构域内的每个所述异构网关节点挂载所述虚拟存储卷的个数均衡,且同一所述NAS设备的不同的所述虚拟存储卷挂载在所述异构域内的不同的所述异构网关节点上;
所述中心管理节点,还用于根据定时接收所述异构网关节点上报的数据负载状态信息确定有所述异构网关节点的数据负载出现变化时,或当检测到有所述异构网关节点离线时,或当检测到有所述NAS设备接入到异构域中时,进行挂载更新。
10.一种NAS设备的存储装置,其特征在于,所述装置实现同一NAS设备存储容量的分散管理,包括:接入单元、切分单元及挂载单元,其中,
所述接入单元,用于接入一异构域内的异构网关节点及所述NAS设备;
所述切分单元,用于将所述异构域内的每个所述NAS设备的存储空间切分为多个虚拟存储卷;
所述挂载单元,用于将所述多个虚拟存储卷分散到所述异构域内的不同的异构网关节点进行挂载,以使不同的所述异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
11.如权利要求10所述的装置,其特征在于,所述装置还包括检测单元及更新单元,其中,
所述检测单元,用于接收到所述异构网关节点定时上报的自身挂载的虚拟存储设备状态信息,根据所述状态信息确定存在所述虚拟存储卷的心跳超时、状态异常或离线的情况;
所述更新单元,用于向挂载出现情况的所述虚拟存储卷的所述异构网关节点发送重新挂载请求,以使对出现情况的所述虚拟存储卷进行重新挂载;
或者,所述检测单元,用于检测到所述异构域内有NAS设备接入;
所述更新单元,用于控制对接入的所述NAS设备的存储空间进行切分,切分为多个虚拟存储卷;控制将所述多个虚拟存储卷分散到所述异构域内不同的异构网关节点进行挂载,以使不同的所述异构网关节点对所挂载的所述虚拟存储卷进行数据读写管理。
12.如权利要求10或11所述的装置,其特征在于,所述挂载单元,还用于将所述多个虚拟存储卷分散到所述异构域内的不同的所述异构网关节点挂载是根据设置的规则进行的,所述规则为:
保证所述异构域内的每个所述异构网关节点挂载所述虚拟存储卷的个数均衡,且同一所述NAS设备的不同所述虚拟存储卷挂载在所述异构域内的不同的所述异构网关节点上。
CN202010939215.5A 2020-09-09 2020-09-09 一种nas设备的存储管理方法、系统及装置 Active CN112083886B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010939215.5A CN112083886B (zh) 2020-09-09 2020-09-09 一种nas设备的存储管理方法、系统及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010939215.5A CN112083886B (zh) 2020-09-09 2020-09-09 一种nas设备的存储管理方法、系统及装置

Publications (2)

Publication Number Publication Date
CN112083886A CN112083886A (zh) 2020-12-15
CN112083886B true CN112083886B (zh) 2022-11-25

Family

ID=73733119

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010939215.5A Active CN112083886B (zh) 2020-09-09 2020-09-09 一种nas设备的存储管理方法、系统及装置

Country Status (1)

Country Link
CN (1) CN112083886B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117056150B (zh) * 2023-10-10 2024-01-26 宁波银行股份有限公司 一种网络附属存储检测方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105677703A (zh) * 2015-12-25 2016-06-15 曙光云计算技术有限公司 Nas文件系统及其访问方法和装置
CN111209259A (zh) * 2018-11-22 2020-05-29 杭州海康威视系统技术有限公司 Nas分布式文件系统及数据处理方法
CN111339059A (zh) * 2020-03-25 2020-06-26 星辰天合(北京)数据科技有限公司 基于分布式存储系统Ceph的NAS存储系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160004460A1 (en) * 2013-10-29 2016-01-07 Hitachi, Ltd. Computer system and control method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105677703A (zh) * 2015-12-25 2016-06-15 曙光云计算技术有限公司 Nas文件系统及其访问方法和装置
CN111209259A (zh) * 2018-11-22 2020-05-29 杭州海康威视系统技术有限公司 Nas分布式文件系统及数据处理方法
CN111339059A (zh) * 2020-03-25 2020-06-26 星辰天合(北京)数据科技有限公司 基于分布式存储系统Ceph的NAS存储系统

Also Published As

Publication number Publication date
CN112083886A (zh) 2020-12-15

Similar Documents

Publication Publication Date Title
CN109597567B (zh) 一种数据处理方法和装置
US8386744B2 (en) Thin provisioning migration and scrubbing
US8566550B2 (en) Application and tier configuration management in dynamic page reallocation storage system
US7966470B2 (en) Apparatus and method for managing logical volume in distributed storage systems
US8001324B2 (en) Information processing apparatus and informaiton processing method
CN110096220B (zh) 一种分布式存储系统、数据处理方法和存储节点
US11314454B2 (en) Method and apparatus for managing storage device in storage system
US10708355B2 (en) Storage node, storage node administration device, storage node logical capacity setting method, program, recording medium, and distributed data storage system
JP6511795B2 (ja) ストレージ管理装置、ストレージ管理方法、ストレージ管理プログラムおよびストレージシステム
CN106126374B (zh) 数据写入方法、数据读取方法及装置
US8161008B2 (en) Information processing apparatus and operation method thereof
JP2002091804A (ja) ストレージ・デバイス上でのスペースの割振りを管理する方法、システム、およびプログラム記憶媒体
CN104067240A (zh) 块级存储
US10712974B2 (en) Virtual disk processing method and apparatus
US11861196B2 (en) Resource allocation method, storage device, and storage system
US8392610B2 (en) Method, apparatus and system to dynamically manage logical path resources
US20080229131A1 (en) Storage System and Management Information Acquisition Method for Power Saving
US8516070B2 (en) Computer program and method for balancing processing load in storage system, and apparatus for managing storage devices
US7849264B2 (en) Storage area management method for a storage system
US11188258B2 (en) Distributed storage system
CN111638853A (zh) 数据存储方法、装置、存储集群、网关设备及主设备
CN111782135A (zh) 数据存储方法、系统、数据节点和计算机可读存储介质
US7441009B2 (en) Computer system and storage virtualizer
CN112083886B (zh) 一种nas设备的存储管理方法、系统及装置
CN110275772B (zh) 一种数据处理方法及其相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant