CN105068771A - 一种统一存储方法及系统 - Google Patents
一种统一存储方法及系统 Download PDFInfo
- Publication number
- CN105068771A CN105068771A CN201510594470.XA CN201510594470A CN105068771A CN 105068771 A CN105068771 A CN 105068771A CN 201510594470 A CN201510594470 A CN 201510594470A CN 105068771 A CN105068771 A CN 105068771A
- Authority
- CN
- China
- Prior art keywords
- data
- stored
- block device
- virtual block
- kept
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种统一存储方法,包括:获取待存储的数据;将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中;将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中,本申请中,将待存储的数据保存在虚拟块设备中,将保存在虚拟块设备中的数据均保存在NAS和SAN中,同时支持NAS服务和SAN服务,这样可以在逻辑上实现对待存储数据的统一管理,实现双活的SAN服务和NAS服务。
Description
技术领域
本发明涉及统一存储技术领域,更具体地说,涉及一种统一存储方法及系统。
背景技术
随着技术的发展,人们对双控存储系统同时支持NAS存储服务和SAN存储服务越来越关注。
现有的双控存储系统中只能实现单个控制器对应单个存储服务,而不能实现同时对应NAS存储服务和SAN存储服务。
因此,如何有效的实现双控存储系统同时支持NAS存储服务和SAN存储服务是本领域技术人员亟需解决的技术问题。
发明内容
本发明的目的在于提供一种统一存储方法及系统,可有效的实现双控存储系统同时支持NAS存储服务和SAN存储服务。
为实现上述目的,本发明实施例提供了如下技术方案:
一种统一存储方法,该方法包括:
获取待存储的数据;
将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中;
将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中。
上述的方法,可选的,在所述将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中之前,还包括:
对所述待存储的数据进行缓存。
上述的方法,可选的,在对所述待存储的数据进行缓存之后,还包括:
对所述缓存的待存储的数据进行镜像处理。
上述的方法,可选的,还包括:
从所述NAS和SAN中获取目标数据;
将所述目标数据保存在所述数据管理模块提供的虚拟块设备中;
将所述虚拟块设备中的目标数据均保存在磁盘阵列中。
上述的方法,可选的,所述将所述虚拟块设备中的目标数据均保存在磁盘阵列中之前,还包括:
将所述虚拟块设备中的目标数据均进行缓存;
对所述缓存的目标数据进行镜像处理。
一种统一存储系统,该系统包括:
第一获取单元,用于获取待存储的数据;
第一保存单元,用于将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中;
第二保存单元,用于将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中。
上述的系统,可选的,还包括:
第一缓存单元,用于对所述待存储的数据进行缓存。
上述的系统,可选的,还包括:
第一镜像处理单元,用于对所述缓存的待存储的数据进行镜像处理。
上述的系统,可选的,还包括:
第二获取单元,用于从所述NAS和SAN中获取目标数据;
第三保存单元,用于将所述目标数据保存在所述数据管理模块提供的虚拟块设备中;
第四保存单元,用于将所述虚拟块设备中的目标数据均保存在磁盘阵列中。
上述的系统,可选的,还包括:
第二缓存单元,用于将所述虚拟块设备中的目标数据均进行缓存;
第二镜像处理单元,用于对所述缓存的目标数据进行镜像处理。
通过以上方案可知,本发明实施例提供的一种统一存储方法中,获取待存储的数据;将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中;将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中,本申请中,将待存储的数据保存在虚拟块设备中,将保存在虚拟块设备中的数据均保存在NAS和SAN中,同时支持NAS服务和SAN服务,这样可以在逻辑上实现对待存储数据的统一管理,实现双活的SAN服务和NAS服务。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例1公开的一种统一存储方法的流程图;
图2为本发明实施例2公开的一种统一存储方法的流程图;
图3为本发明实施例公开的一种统一存储系统实现的架构图;
图4为本发明实施例公开的一种统一存储系统中缓存镜像过程图;
图5为本发明实施例公开的一种统一存储系统中掉电保护示意图;
图6为本发明实施例公开的一种统一存储系统中DaM模块功能示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,本发明实施例1公开了一种统一存储方法,可以包括以下步骤:
S101、获取待存储的数据。
本申请中待存储的数据可以是从磁盘中获取的数据,也可以是机器内存中的数据,还可以是控制器中的数据,这些数据均是需要进行存储的数据。
S102、将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中。
将所述从磁盘中获取的数据,或者内存中的数据,或者控制器中的数据均保存在虚拟设备中,以便其他服务均可以从虚拟设备中获取所有的数据,在逻辑上实现数据的统一管理。
S103、将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中。
将数据保存在虚拟块设备中,NAS和SAN可以获取虚拟设备中的所有数据,而不是只保存部分数据,解决了现有技术中用户只能选择一种存储设备的问题,可以整合企业在存储设施上的不同需求。
通过以上方案可知,本发明实施例提供的一种统一存储方法中,将待存储的数据保存在虚拟块设备中,将保存在虚拟块设备中的数据均保存在NAS和SAN中,同时支持NAS服务和SAN服务,这样可以在逻辑上实现对待存储数据的统一管理,实现双活的SAN服务和NAS服务。
在实施例1的基础上,参见图2,本发明实施例2公开了一种统一存储方法,可以包括以下步骤:
S201、获取待存储的数据。
本申请中待存储的数据可以是从磁盘中获取的数据,也可以是机器内存中的数据,还可以是控制器中的数据,这些数据均是需要进行存储的数据。
S202、对所述待存储的数据进行缓存。
将这些待存储的数据进行缓存。
S203、对所述缓存的待存储的数据进行镜像处理。
将所述缓存后的数据进行镜像处理,然后将镜像后的数据分别保存在两个不同的控制器中,以防止一个控制器出现故障时,数据丢失。
S204、将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中。
S205、将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中。
本方法中,对缓存的待存储的数据进行镜像处理,可以防止数据丢失,保证数据的一致性。
本申请中,还包括:
从所述NAS和SAN中获取目标数据。
从所述NAS和SAN中获取待进行磁盘写入的数据。
将所述目标数据保存在所述数据管理模块提供的虚拟块设备中。
将待写入磁盘的数据保存在虚拟块设备中,可以保证两个控制器可以同时访问NAS和SAN中的数据。
将所述虚拟块设备中的目标数据均进行缓存。
对所述缓存的目标数据进行镜像处理。
将所述虚拟块设备中的目标数据均保存在磁盘阵列中。
与图1中一种统一存储方法实施例1相对应,本申请还提供了一种统一存储系统的实施例,包括:
第一获取单元,用于获取待存储的数据。
第一保存单元,用于将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中。
第二保存单元,用于将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中。
本申请中,还包括:
第一缓存单元,用于对所述待存储的数据进行缓存。
第一镜像处理单元,用于对所述缓存的待存储的数据进行镜像处理。
本申请中,还包括:
第二获取单元,用于从所述NAS和SAN中获取目标数据;
第三保存单元,用于将所述目标数据保存在所述数据管理模块提供的虚拟块设备中;
第四保存单元,用于将所述虚拟块设备中的目标数据均保存在磁盘阵列中。
本申请中,还包括:
第二缓存单元,用于将所述虚拟块设备中的目标数据均进行缓存;
第二镜像处理单元,用于对所述缓存的目标数据进行镜像处理。
参考图3,示出了本申请中统一存储系统具体实现架构图,在该系统架构下双控存储系统可以同时支持NAS存储服务和SAN存储服务。
从图3中可知,系统底层由存储池组成,中层有缓存管理模块CaM和数据管理模块DaM组成,上层实现NAS共享和SAN的共享应用。
存储系统将底层磁盘创建存储池,存储池中可以对底层磁盘进行创建raid,存储池主要向上层CaM缓存管理模块提供使用。
缓存管理模块CaM负责维护两个控制器之间的缓存数据,使缓存数据始终保持一致。
CaM将DaM模块传过来的数据做一份镜像,分别存放到两个不同的控制器中,这样,当一个控制器发生故障切换时,缓存数据不会丢失。CaM模块缓存镜像过程如附图4所示。每个控制器均有一个CaM和一个DaM,当控制器发生异常断电时,缓存硬件模块由于有一个临时供电的电池,缓存模块会将缓存数据拷贝到Flash中,等机器再次重启,缓存模块会将Flash中的缓存数据进行恢复,完成掉电保护的功能。CaM模块掉电保护功能示意图如附图5所示。
DaM向上层提供虚拟块设备,基于该虚拟块设备,系统可以向上层提供SAN服务和NAS服务。双控系统下,由于控制器创建存储资源需要绑定控制器,即控制器A创建的存储资源,控制器B是无法直接访问的。利用DaM提供的逻辑虚拟块设备,不同控制器可以同时访问虚拟块设备信息,DaM会对数据进行管理,负责将数据正确路由到不同的控制器,逻辑上实现了统一管理。因此DaM可以使系统可以向上层提供双活的SAN服务和NAS服务。DaM模块功能示意图如附图6所示。
本系统架构设计方案,通过DaM模块和CaM模块的协同管理,双控存储系统不仅可以向上层提供双活的SAN服务和NAS服务,同时在支持缓存镜像和掉电保护功能的基础上简化了系统缓存数据的管理。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种统一存储方法,其特征在于,该方法包括:
获取待存储的数据;
将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中;
将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中。
2.根据权利要求1所述的方法,其特征在于,在所述将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中之前,还包括:
对所述待存储的数据进行缓存。
3.根据权利要求2所述的方法,其特征在于,在对所述待存储的数据进行缓存之后,还包括:
对所述缓存的待存储的数据进行镜像处理。
4.根据权利要求1至3任一项所述的方法,其特征在于,还包括:
从所述NAS和SAN中获取目标数据;
将所述目标数据保存在所述数据管理模块提供的虚拟块设备中;
将所述虚拟块设备中的目标数据均保存在磁盘阵列中。
5.根据权利要求4所述的方法,其特征在于,所述将所述虚拟块设备中的目标数据均保存在磁盘阵列中之前,还包括:
将所述虚拟块设备中的目标数据均进行缓存;
对所述缓存的目标数据进行镜像处理。
6.一种统一存储系统,其特征在于,该系统包括:
第一获取单元,用于获取待存储的数据;
第一保存单元,用于将所述待存储的数据均保存在数据管理模块提供的虚拟块设备中;
第二保存单元,用于将所述虚拟块设备中的待存储的数据均保存在NAS和SAN中。
7.根据权利要求6所述的系统,其特征在于,还包括:
第一缓存单元,用于对所述待存储的数据进行缓存。
8.根据权利要求7所述的系统,其特征在于,还包括:
第一镜像处理单元,用于对所述缓存的待存储的数据进行镜像处理。
9.根据权利要求6至8任一项所述的系统,其特征在于,还包括:
第二获取单元,用于从所述NAS和SAN中获取目标数据;
第三保存单元,用于将所述目标数据保存在所述数据管理模块提供的虚拟块设备中;
第四保存单元,用于将所述虚拟块设备中的目标数据均保存在磁盘阵列中。
10.根据权利要求9所述的系统,其特征在于,还包括:
第二缓存单元,用于将所述虚拟块设备中的目标数据均进行缓存;
第二镜像处理单元,用于对所述缓存的目标数据进行镜像处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510594470.XA CN105068771A (zh) | 2015-09-17 | 2015-09-17 | 一种统一存储方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510594470.XA CN105068771A (zh) | 2015-09-17 | 2015-09-17 | 一种统一存储方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105068771A true CN105068771A (zh) | 2015-11-18 |
Family
ID=54498152
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510594470.XA Pending CN105068771A (zh) | 2015-09-17 | 2015-09-17 | 一种统一存储方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105068771A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106843749A (zh) * | 2016-12-14 | 2017-06-13 | 华为技术有限公司 | 写入请求处理方法、装置及设备 |
CN106997274A (zh) * | 2016-01-25 | 2017-08-01 | 中兴通讯股份有限公司 | 一种实现存储空间管理的架构及方法 |
CN109634522A (zh) * | 2018-12-10 | 2019-04-16 | 北京百悟科技有限公司 | 一种资源管理的方法、装置及计算机存储介质 |
CN110674539A (zh) * | 2019-09-09 | 2020-01-10 | 浙江大华技术股份有限公司 | 一种硬盘保护设备、方法及系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102103518A (zh) * | 2011-02-23 | 2011-06-22 | 运软网络科技(上海)有限公司 | 一种在虚拟化环境中管理资源的系统及其实现方法 |
CN103731508A (zh) * | 2014-01-23 | 2014-04-16 | 易桂先 | 一种基于云存储的网络硬盘装置及其管理方法 |
-
2015
- 2015-09-17 CN CN201510594470.XA patent/CN105068771A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102103518A (zh) * | 2011-02-23 | 2011-06-22 | 运软网络科技(上海)有限公司 | 一种在虚拟化环境中管理资源的系统及其实现方法 |
CN103731508A (zh) * | 2014-01-23 | 2014-04-16 | 易桂先 | 一种基于云存储的网络硬盘装置及其管理方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106997274A (zh) * | 2016-01-25 | 2017-08-01 | 中兴通讯股份有限公司 | 一种实现存储空间管理的架构及方法 |
WO2017128802A1 (zh) * | 2016-01-25 | 2017-08-03 | 中兴通讯股份有限公司 | 一种实现存储空间管理的架构及方法 |
CN106997274B (zh) * | 2016-01-25 | 2021-04-30 | 中兴通讯股份有限公司 | 一种实现存储空间管理的架构及方法 |
CN106843749A (zh) * | 2016-12-14 | 2017-06-13 | 华为技术有限公司 | 写入请求处理方法、装置及设备 |
CN106843749B (zh) * | 2016-12-14 | 2020-01-21 | 华为技术有限公司 | 写入请求处理方法、装置及设备 |
CN109634522A (zh) * | 2018-12-10 | 2019-04-16 | 北京百悟科技有限公司 | 一种资源管理的方法、装置及计算机存储介质 |
CN110674539A (zh) * | 2019-09-09 | 2020-01-10 | 浙江大华技术股份有限公司 | 一种硬盘保护设备、方法及系统 |
CN110674539B (zh) * | 2019-09-09 | 2021-04-16 | 浙江大华技术股份有限公司 | 一种硬盘保护设备、方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11036397B2 (en) | Unified addressing and hierarchical heterogeneous storage and memory | |
CN101923499B (zh) | 执行防电源故障高速缓存而无需原子元数据的技术 | |
KR102519904B1 (ko) | 영구 메모리 할당 및 구성 | |
US9256527B2 (en) | Logical to physical address mapping in storage systems comprising solid state memory devices | |
US8407182B1 (en) | Systems and methods for facilitating long-distance live migrations of virtual machines | |
US8214610B2 (en) | Managing backup device metadata in a high availability disk subsystem | |
CN102521147B (zh) | 一种使用高速非易失介质做缓存的管理方法 | |
CN105068771A (zh) | 一种统一存储方法及系统 | |
US20140006687A1 (en) | Data Cache Apparatus, Data Storage System and Method | |
CN105138292A (zh) | 磁盘数据读取方法 | |
CN105630405B (zh) | 一种存储系统及采用该存储系统的读写方法 | |
US10754785B2 (en) | Checkpointing for DRAM-less SSD | |
CN102763091A (zh) | 将闪存高速缓存集成到大型存储系统 | |
CN103795801A (zh) | 一种基于实时应用集群的元数据集群设计方法 | |
CN105786400A (zh) | 一种异构混合内存组件、系统及存储方法 | |
CN102402622A (zh) | 嵌入式内存数据库的内存页面管理调度方法 | |
CN109164981A (zh) | 磁盘管理方法、装置、存储介质和设备 | |
CN107241444A (zh) | 一种分布式缓存数据管理系统、方法及装置 | |
US10031844B2 (en) | NVS thresholding for efficient data management | |
CN106919339B (zh) | 一种硬盘阵列及硬盘阵列处理操作请求的方法 | |
Hahn et al. | SOS: Software-based out-of-order scheduling for high-performance NAND flash-based SSDs | |
CN104182281A (zh) | 一种gpgpu寄存器缓存的实现方法 | |
CN101807212B (zh) | 嵌入式文件系统的缓存方法及嵌入式文件系统的缓存装置 | |
CN102708062A (zh) | 基于数据块的多媒体存储方法和装置 | |
US9697097B2 (en) | Storage system and method for controlling storage system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20151118 |