CN102591751A - 一种存储系统的自主热备保护方法 - Google Patents
一种存储系统的自主热备保护方法 Download PDFInfo
- Publication number
- CN102591751A CN102591751A CN2012100016513A CN201210001651A CN102591751A CN 102591751 A CN102591751 A CN 102591751A CN 2012100016513 A CN2012100016513 A CN 2012100016513A CN 201210001651 A CN201210001651 A CN 201210001651A CN 102591751 A CN102591751 A CN 102591751A
- Authority
- CN
- China
- Prior art keywords
- data
- host apparatus
- storage
- fault
- memory device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
本发明涉及数据存储技术领域,尤其是涉及一种存储系统的自主热备保护方法,该方法采用系统的方式提供高可靠性、高速的、具备不间断访问能力的热备网络存储数据冗余保护方法,通过数据并行操作、数据冗余保护、数据恢复等方法,解决了现有技术中存在的问题。
Description
技术领域
本发明涉及数据存储技术领域,尤其是涉及一种存储系统的自主热备保护方法。
背景技术
随着信息技术的发展,数据量呈爆炸性增长,存储的专业化已经成为趋势,在存储专业化领域中,数据的可靠性是一项重要的要求。一种传统的数据存储安全可靠性的提升方法是进行单台设备中各个部件提升进而设备的整体可靠性提升,这种方式在数据可靠性要求不高的时候,可以做到不错的效果,但随着数据可靠性要求的提高,单台设备中各部件的可靠性提升就遇到了瓶颈,再次进行提升投入产出比很低,因此这种方法不适宜当今数据可靠性要求很高的领域;另一种方法是使用多台设备构建存储系统,并由存储系统进行数据可靠性的保证,这种方法的好处在于由部件的可靠性瓶颈带来的存储设备可靠性瓶颈可以通过系统整体应用的方式突破,但目前使用存储系统在多台存储设备突然损坏的情况下难以完全保证上层应用的连续性和实时性。
发明内容
本发明为克服上述的不足之处,目的在于针对数据存储设备,采用系统的方式提供高可靠性、高速的、具备不间断访问能力的热备网络存储数据冗余保护方法,通过数据并行操作、数据冗余保护、数据恢复等方法,解决了现有技术中存在的问题。
本发明是通过以下技术方案达到上述目的:一种存储系统的自主热备保护方法,包括系统架构过程、数据存储过程、数据读取过程、故障后新主用设备决定过程、故障后数据存储过程、故障后数据读取过程、故障修复后数据恢复过程;
系统架构过程包括如下步骤:
1)使用m台互为冗余的存储设备构成存储系统;
2)所述的m台存储设备均各自至少包含一个数据同步控制模块、一个接口模块和一个存储实体;
3)选取所述的m台存储设备其中一台作为主用设备,共同通过其接口模块对外提供1个虚拟IP地址进行数据存储与读取;
数据存储过程包括以下步骤:
1)从主用设备接口模块通过虚拟IP地址进来的数据经过数据同步控制模块的重新组织,复制为m份同样的数据,分别编号为0至(m-1);
2)主用设备的数据同步控制模块将这m份同样的数据并行写入m台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
1号数据写入存储设备1的存储实体;
……
(m-1)号数据写入存储设备(m-1)的存储实体;
数据读取过程包括以下步骤:
1)主用设备的数据同步模块根据访问虚拟IP地址的读取请求,将主用设备中存储实体的相应数据送入接口模块;
2)接口模块将数据送至读取请求端;
故障后新主用设备决定过程包括如下步骤:
1)如果原主用设备并未故障,主用设备不变;
2)如果原主用设备故障,指定编号最接近原主用设备的无故障设备接替主用设备的位置,若编号最接近的有两台,则选择编号大的那台接替主用设备的位置;
故障后数据存储过程包括以下步骤:
设n台(n<m)存储设备故障后,
1)故障后新主用设备决定过程选择的接替主用设备数据同步模块标记故障设备;
2)从主用设备接口模块通过虚拟IP地址进来的数据经过数据同步控制模块的重新组织,复制为(m-n)份同样的数据,分别编号为0至(m-n-1);
3)数据同步控制模块将这(m-n)份同样的数据并行写入(m-n)台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
1号数据写入存储设备1的存储实体;
……
(m-n-1)号数据写入存储设备(m-n-1)的存储实体;
故障后数据读取过程包括以下步骤:
设n台(n<m)存储设备故障后,
1)故障后新主用设备决定过程选择的接替主用设备数据同步模块标记故障设备;
2)主用设备的数据同步模块根据访问虚拟IP地址的读取请求,将主用设备中的存储实体相应数据送入接口模块;
3)接口模块将数据送至读取请求端;
故障修复后数据恢复过程包括以下步骤:
1)故障后新主用设备决定过程选择的接替主用设备数据同步模块取消标记故障设备;
2)数据同步模块以主用设备的数据为准,复制为n份同样的数据,分别编号为0至n-1;
3)数据同步控制模块将这n份同样的数据并行写入n台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
1号数据写入存储设备1的存储实体;
……
n-1号数据写入存储设备n-1的存储实体;
其中:上述m、n为正整数。
作为优选,所述的m为20。
作为优选,所述的n为10。
作为优选,每台存储设备的存储实体空间大小一致。
本发明的有益效果:本发明采用冗余的机制进行数据保护,能够很大限度的提高数据的可靠性,即使多个存储设备故障时也能存储和读取正确的数据;而且在实现数据恢复时基本上没有增加额外开销,是很高效的实现方式。
附图说明
图1:存储系统的自主热备保护方法示意图。
具体实施方式
下面结合附图通过实施例对本发明作进一步阐述:
如图1所示,一种存储系统的自主热备保护方法,包括系统架构过程、数据存储过程、数据读取过程、故障后新主用设备决定过程、故障后数据存储过程、故障后数据读取过程、故障修复后数据恢复过程;
系统架构过程包括如下步骤:
1)使用3台互为冗余的存储设备构成存储系统;
2)所述的3台存储设备均各自包含一个数据同步控制模块、一个接口模块和一个存储实体;
3)选取所述的3台存储设备其中存储设备1作为主用设备,共同通过其接口模块对外1个虚拟IP地址进行数据存储与读取;
数据存储过程包括以下步骤:
1)从主用设备接口模块通过虚拟IP地址进来的数据经过数据同步控制模块的重新组织,复制为3份同样的数据,分别编号为0至2;
2)作为主用设备的存储设备1的数据同步控制模块将这3份同样的数据并行写入3台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
1号数据写入存储设备1的存储实体;
2号数据写入存储设备2的存储实体;
数据读取过程包括以下步骤:
1)作为主用设备的存储设备1的数据同步模块根据访问虚拟IP地址的读取请求,将存储设备1中存储实体的相应数据送入接口模块;
2)接口模块将数据送至读取请求端;
故障后新主用设备决定过程包括如下步骤:
1)如果原主用设备的存储设备1并未故障,主用设备不变;
2)假设存储设备1故障,指定编号最接近原主用设备的无故障设备接替主用设备的位置,若编号最接近的有两台,则选择编号大的那台接替主用设备的位置,因此选择存储设备2作为主用设备。
故障后数据存储过程包括以下步骤:
存储设备1故障后,
1)故障后新主用设备决定过程选择的接替主用设备的存储设备2数据同步模块标记故障的存储设备1;
2)从存储设备2接口模块通过虚拟IP地址进来的数据经过数据同步控制模块的重新组织,复制为2份同样的数据,分别编号为0至1;
5)数据同步控制模块将这2份同样的数据并行写入2台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
2号数据写入存储设备2的存储实体;
故障后数据读取过程包括以下步骤:
存储设备1故障后,
1)故障后新主用设备决定过程选择的接替主用设备的存储设备2数据同步模块标记故障的存储设备1;
2)存储设备2的数据同步模块根据访问虚拟IP地址的读取请求,将存储设备2中的存储实体相应数据送入接口模块;
3)接口模块将数据送至读取请求端;
故障修复后数据恢复过程包括以下步骤:
1)故障后新主用设备决定过程选择的接替主用设备存储设备2的数据同步模块取消标记故障的存储设备1;
2)数据同步模块以存储设备2的数据为准,复制为1份同样的数据,编号为0;
3)数据同步控制模块将这1份同样的数据并行写入存储设备1的存储实体:
以上的所述乃是本发明的具体实施例及所运用的技术原理,若依本发明的构想所作的改变,其所产生的功能作用仍未超出说明书及附图所涵盖的精神时,仍应属本发明的保护范围。
Claims (4)
1.一种存储系统的自主热备保护方法,其特征在于,包括系统架构过程、数据存储过程、数据读取过程、故障后新主用设备决定过程、故障后数据存储过程、故障后数据读取过程、故障修复后数据恢复过程;
系统架构过程包括如下步骤:
1)使用m台互为冗余的存储设备构成存储系统;
2)所述的m台存储设备均各自至少包含一个数据同步控制模块、一个接口模块和一个存储实体;
3)选取所述的m台存储设备其中一台作为主用设备,共同通过其接口模块对外1个虚拟IP地址进行数据存储与读取;
数据存储过程包括以下步骤:
1)从主用设备接口模块通过虚拟IP地址进来的数据经过数据同步控制模块的重新组织,复制为m份同样的数据,分别编号为0至(m-1);
2)主用设备的数据同步控制模块将这m份同样的数据并行写入m台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
1号数据写入存储设备1的存储实体;
……
(m-1)号数据写入存储设备(m-1)的存储实体;
数据读取过程包括以下步骤:
1)主用设备的数据同步模块根据访问虚拟IP地址的读取请求,将主用设备中存储实体的相应数据送入接口模块;
2)接口模块将数据送至读取请求端;
故障后新主用设备决定过程包括如下步骤:
1)如果原主用设备并未故障,主用设备不变;
2)如果原主用设备故障,指定编号最接近原主用设备的无故障设备接替主用设备的位置,若编号最接近的有两台,则选择编号大的那台接替主用设备的位置;
故障后数据存储过程包括以下步骤:
设n台(n<m)存储设备故障后,
1)故障后新主用设备决定过程选择的接替主用设备数据同步模块标记故障设备;
2)从主用设备接口模块通过虚拟IP地址进来的数据经过数据同步控制模块的重新组织,复制为(m-n)份同样的数据,分别编号为0至(m-n-1);
3)数据同步控制模块将这(m-n)份同样的数据并行写入(m-n)台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
1号数据写入存储设备1的存储实体;
……
(m-n-1)号数据写入存储设备(m-n-1)的存储实体;
故障后数据读取过程包括以下步骤:
设n台(n<m)存储设备故障后,
1)故障后新主用设备决定过程选择的接替主用设备数据同步模块标记故障设备;
2)主用设备的数据同步模块根据访问虚拟IP地址的读取请求,将主用设备中的存储实体相应数据送入接口模块;
3)接口模块将数据送至读取请求端;
故障修复后数据恢复过程包括以下步骤:
1)故障后新主用设备决定过程选择的接替主用设备数据同步模块取消标记故障设备;
2)数据同步模块以主用设备的数据为准,复制为n份同样的数据,分别编号为0至n-1;
3)数据同步控制模块将这n份同样的数据并行写入n台存储设备的存储实体:
0号数据写入存储设备0的存储实体;
1号数据写入存储设备1的存储实体;
……
n-1号数据写入存储设备n-1的存储实体;
其中:上述m、n为正整数。
2.根据权利要求1所述的一种存储系统自主热备保护方法,其特征在于所述的m为20。
3.根据权利要求2所述的一种存储系统自主热备保护方法,其特征在于所述的n为10。
4.根据权利要求1、2或3任一权利要求所述的一种存储系统自主热备保护方法,其特征在于,每台存储设备的存储实体空间大小一致。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012100016513A CN102591751A (zh) | 2012-01-05 | 2012-01-05 | 一种存储系统的自主热备保护方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012100016513A CN102591751A (zh) | 2012-01-05 | 2012-01-05 | 一种存储系统的自主热备保护方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102591751A true CN102591751A (zh) | 2012-07-18 |
Family
ID=46480449
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012100016513A Pending CN102591751A (zh) | 2012-01-05 | 2012-01-05 | 一种存储系统的自主热备保护方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102591751A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104461385A (zh) * | 2014-12-02 | 2015-03-25 | 国电南瑞科技股份有限公司 | 一种端口流量自适应的多硬盘均衡存储方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030182329A1 (en) * | 2002-03-20 | 2003-09-25 | Hitachi, Ltd. | File backup method and storage apparatus, computer program therefor and computer-readable medium containing the same |
CN1489052A (zh) * | 2002-10-11 | 2004-04-14 | 鸿富锦精密工业(深圳)有限公司 | 多节点文件同步系统及方法 |
CN1812345A (zh) * | 2006-03-08 | 2006-08-02 | 杭州华为三康技术有限公司 | 虚拟化网络存储系统及其网络存储设备 |
CN101587453A (zh) * | 2009-06-18 | 2009-11-25 | 成都市华为赛门铁克科技有限公司 | 数据备份处理方法、数据存储节点设备及数据存储装置 |
CN101907879A (zh) * | 2010-03-12 | 2010-12-08 | 大连理工大学 | 工业控制网络冗余容错系统 |
CN102033794A (zh) * | 2011-01-10 | 2011-04-27 | 中国电子科技集团公司第五十二研究所 | 一种flash固态盘数据冗余保护方法 |
-
2012
- 2012-01-05 CN CN2012100016513A patent/CN102591751A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030182329A1 (en) * | 2002-03-20 | 2003-09-25 | Hitachi, Ltd. | File backup method and storage apparatus, computer program therefor and computer-readable medium containing the same |
CN1489052A (zh) * | 2002-10-11 | 2004-04-14 | 鸿富锦精密工业(深圳)有限公司 | 多节点文件同步系统及方法 |
CN1812345A (zh) * | 2006-03-08 | 2006-08-02 | 杭州华为三康技术有限公司 | 虚拟化网络存储系统及其网络存储设备 |
CN101587453A (zh) * | 2009-06-18 | 2009-11-25 | 成都市华为赛门铁克科技有限公司 | 数据备份处理方法、数据存储节点设备及数据存储装置 |
CN101907879A (zh) * | 2010-03-12 | 2010-12-08 | 大连理工大学 | 工业控制网络冗余容错系统 |
CN102033794A (zh) * | 2011-01-10 | 2011-04-27 | 中国电子科技集团公司第五十二研究所 | 一种flash固态盘数据冗余保护方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104461385A (zh) * | 2014-12-02 | 2015-03-25 | 国电南瑞科技股份有限公司 | 一种端口流量自适应的多硬盘均衡存储方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101727299B (zh) | 连续数据存储中面向raid5的写操作优化设计方法 | |
US9477565B2 (en) | Data access with tolerance of disk fault | |
CN104583930B (zh) | 数据迁移的方法、控制器和数据迁移装置 | |
CN106557145A (zh) | 断电保护系统及其方法 | |
CN106155943B (zh) | 一种双控存储设备的掉电保护的方法及装置 | |
CN104331254A (zh) | 一种基于双活逻辑卷的存储双活系统设计方法 | |
CN104133740A (zh) | 异常掉电数据恢复的方法 | |
CN102761615A (zh) | 一种实现远程复制系统数据同步的方法及装置 | |
WO2012177515A3 (en) | System and method of protecting metadata from nand flash failures | |
TW201107981A (en) | Method and apparatus for protecting the integrity of cached data in a direct-attached storage (DAS) system | |
CN103049400A (zh) | 一种磁盘重构方法及其装置 | |
US9405669B2 (en) | Recovery from cache and NVS out of sync | |
CN106919473A (zh) | 一种数据灾备系统及业务处理方法 | |
CN103092778B (zh) | 一种存储系统的缓存镜像方法 | |
CN104008069B (zh) | 一种数据保护方法、装置及设备 | |
CN106415503A (zh) | 硬功率故障架构 | |
US8499133B2 (en) | Cache management for increasing performance of high-availability multi-core systems | |
CN104699550B (zh) | 一种基于lockstep架构的错误恢复方法 | |
CN105550230B (zh) | 分布式存储系统节点故障的侦测方法和装置 | |
CN105138280A (zh) | 数据写入方法、装置及系统 | |
CN102591751A (zh) | 一种存储系统的自主热备保护方法 | |
CN104636082B (zh) | 磁盘阵列raid的控制方法及装置 | |
CN101118519A (zh) | 对缓存内容进行保护的方法和装置以及缓存控制器 | |
CN102624537A (zh) | 一种数据恢复系统及方法 | |
CN105068896B (zh) | 基于raid备份的数据处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120718 |