CN107153589B - 一种镜像数据的读写方法 - Google Patents
一种镜像数据的读写方法 Download PDFInfo
- Publication number
- CN107153589B CN107153589B CN201710448320.7A CN201710448320A CN107153589B CN 107153589 B CN107153589 B CN 107153589B CN 201710448320 A CN201710448320 A CN 201710448320A CN 107153589 B CN107153589 B CN 107153589B
- Authority
- CN
- China
- Prior art keywords
- storage pool
- main storage
- host
- preset time
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000001360 synchronised effect Effects 0.000 claims description 3
- 238000012790 confirmation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2069—Management of state, configuration or failover
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2082—Data synchronisation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种镜像数据的读写方法,应用于存储系统,方法包括以下步骤:当主机向主存储池和备份存储池写入数据时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间;当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;当主机向主存储池发送读请求时,记录主存储池的响应时间,当主存储池的响应时间大于第二预设时间时,在第二预设时间段内将读请求切换至备份存储池进行响应;在第二预设时间段后,将读请求切换至主存储池进行响应。本发明能够有效的进行镜像数据的读写,保证数据镜像能够保持稳定性能。
Description
技术领域
本发明涉及存储系统技术领域,更具体地说,涉及一种镜像数据的读写方法。
背景技术
数据镜像使得主机数据能够实时存放于两个不同的存储池,一个是主存储池,一个是备份存储池,是一种更可靠的数据容灾方法。在数据镜像过程中设计到数据的读写策略,如何保证主机能够及时收到数据写入成功的确认信息以及保证两份镜像数据能够及时正确地处理主机的读请求是镜像数据读写策略的核心内容。
目前,镜像数据的读写策略一般为,在读过程中,镜像数据都会有一个默认的主存储池,主存储池负责优先处理主机的读请求,在主存储池无法访问后,主机读请求会转移到备份存储池处理。即使主存储池恢复正常,主机读请求依然会由备份存储池处理,只有等到备份存储池无法访问或者手动切换后,主存储池才能再次接管读请求。
在写过程中,主机数据同时写入两个存储池,当都写入成功后,主机才会认为数据写请求被正确响应。当一方数据写入失败,主机就会再次发起写请求,直到数据成功写入两个存储池。
由此可以看出,现有技术存在以下缺陷:在读过程中,由于备份存储池性能较低,在主存储池正常时读请求却无法接管读请求,导致系统处理性能下降。在写过程中,主机只有在数据成功写入两个存储池后才会认为写操作成功,如果有个存储池性能一直处于低水平,则会严重影响系统性能。因此,如何有效的实现镜像数据的读写操作是一项亟待解决的问题。
发明内容
有鉴于此,本发明的目的在于提供一种镜像数据的读写方法,能够有效的进行镜像数据的读写,保证数据镜像能够保持稳定性能。
为实现上述目的,本发明提供如下技术方案:
一种镜像数据的读写方法,应用于存储系统,所述方法包括以下步骤:
当主机向主存储池和备份存储池写入数据时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间;
当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;
当主机向主存储池发送读请求时,记录所述主存储池的响应时间,当所述主存储池的响应时间大于第二预设时间时,在第二预设时间段内将所述读请求切换至备份存储池进行响应;
在第二预设时间段后,将读请求切换至所述主存储池进行响应。
优选地,所述方法还包括:
在第一预设时间段后,镜像数据开始同步;
在镜像数据同步过程中,当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求。
优选地,所述方法还包括:
判断主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数是否超过第一预设阈值;
当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,生成第一警告信息。
优选地,所述方法还包括:
当主存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,转换所述主存储池和备份存储池的角色。
优选地,所述方法还包括:
判断所述主存储池响应读请求的次数是否超过第二预设阈值;
当所述主存储池响应读请求的次数超过第二预设阈值时,转换所述主存储池和备份存储池的角色,并成第二警告信息。
从上述技术方案可以看出,本发明公开了一种镜像数据的读写方法,当需要进行镜像数据的读写操作时,当主机向主存储池和备份存储池写入数据时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间;当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;当主机向主存储池发送读请求时,记录主存储池的响应时间,当主存储池的响应时间大于第二预设时间时,在第二预设时间段内将读请求切换至备份存储池进行响应;在第二预设时间段后,将读请求切换至所述主存储池进行响应。相对于现有技术,能够有效的进行镜像数据的读写,保证数据镜像能够保持稳定性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1为本发明公开的一种镜像数据的读写方法实施例1的流程图;
图2为本发明公开的一种镜像数据的读写方法实施例2的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
如图1所示,为本发明公开的一种镜像数据的读写方法的实施例1的流程图,本方法应用于存储系统,可以包括以下步骤:
S101、当主机向主存储池和备份存储池写入数据时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间;
对于主机的写请求,当主机写请求到达时会同时向主存储池和备份存储池写入数据,当主机向主存储池和备份存储池写入数据时开始计时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间。
S102、当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;
默认超时时间为第一预设时间t,当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,就会结束写操作,然后被置为故障状态,并记下数据非同步点。例如,当主存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,将主存储池置为故障状态;当备份存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,将备份存储池置为故障状态。
S103、当主机向主存储池发送读请求时,记录主存储池的响应时间,当主存储池的响应时间大于第二预设时间时,在第二预设时间段内将读请求切换至备份存储池进行响应;
对于主机读请求,主存储池会优先处理读请求,如果在处理读请求时相应时间超过第二预设时间,则会将读请求转到备份存储池上进行处理,并且在接下来的第二预设时间段T2内,主机的读请求都会由备份存储池持续处理。
S104、在第二预设时间段后,将读请求切换至主存储池进行响应。
当过了第二预设时间段t2后,读请求再次转到主存储池进行响应。
综上所述,在上述实施例中,当需要进行镜像数据的读写操作时,当主机向主存储池和备份存储池写入数据时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间;当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;当主机向主存储池发送读请求时,记录主存储池的响应时间,当主存储池的响应时间大于第二预设时间时,在第二预设时间段内将读请求切换至备份存储池进行响应;在第二预设时间段后,将读请求切换至所述主存储池进行响应。相对于现有技术,能够有效的进行镜像数据的读写,保证数据镜像能够保持稳定性能。
如图2所示,为本发明公开的一种镜像数据的读写方法的实施例2的流程图,本方法应用于存储系统,可以包括以下步骤:
S201、当主机向主存储池和备份存储池写入数据时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间;
对于主机的写请求,当主机写请求到达时会同时向主存储池和备份存储池写入数据,当主机向主存储池和备份存储池写入数据时开始计时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间。
S202、当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;
默认超时时间为第一预设时间t,当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,就会结束写操作,然后被置为故障状态,并记下数据非同步点。例如,当主存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,将主存储池置为故障状态;当备份存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,将备份存储池置为故障状态。
S203、在第一预设时间段后,镜像数据开始同步;
在第一预设时间段T1后,开始进行镜像数据同步。
S204、在镜像数据同步过程中,当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;
在镜像数据同步的过程中,当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,就会结束写操作,然后被置为故障状态,并记下数据非同步点。例如,当主存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,将主存储池置为故障状态;当备份存储池向主机返回数据写入成功信息的时间大于第一预设时间t时,将备份存储池置为故障状态。
S205、判断主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数是否超过第一预设阈值;
在整个数据写入过程中,记录主存储池和备份存储池返回数据写入成功信息的时间大于第一预设时间的次数,并判断主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数是否超过第一预设阈值。
S206、当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,生成第一警告信息;
当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,说明主存储池或备份存储池所在的磁盘系统出现了性能问题,此时系统会向用户发出第一警告信息。
S207、当主存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,转换所述主存储池和备份存储池的角色;
如果主存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,系统将转换主存储池和备份存储池的角色。
S208、当主机向主存储池发送读请求时,记录主存储池的响应时间,当主存储池的响应时间大于第二预设时间时,在第二预设时间段内将读请求切换至备份存储池进行响应;
对于主机读请求,主存储池会优先处理读请求,如果在处理读请求时相应时间超过第二预设时间,则会将读请求转到备份存储池上进行处理,并且在接下来的第二预设时间段T2内,主机的读请求都会由备份存储池持续处理。
S209、在第二预设时间段后,将读请求切换至主存储池进行响应;
当过了第二预设时间段t2后,读请求再次转到主存储池进行响应。
S210、判断所述主存储池响应读请求的次数是否超过第二预设阈值;
S211、当主存储池响应读请求的次数超过第二预设阈值时,转换主存储池和备份存储池的角色,并成第二警告信息。
综上所述,本发明能够根据故障发生的频率动态转换镜像数据的主存储池和备份存储池,保证系统读写io性能的最大化;系统在故障处理后能够自动还原初始最优配置,有效防止系统在最优配置处于正常状态下而使用备用配置的情况发生;在故障频繁发生,系统性能受到影响时,用户能够及时得到相关警告信息,为用户提供决策依据。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (5)
1.一种镜像数据的读写方法,其特征在于,应用于存储系统,所述方法包括以下步骤:
当主机向主存储池和备份存储池写入数据时,记录主存储池和备份存储池向主机返回数据写入成功信息的时间;
当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求;
当主机向主存储池发送读请求时,记录所述主存储池的响应时间,当所述主存储池的响应时间大于第二预设时间时,在第二预设时间段内将所述读请求切换至备份存储池进行响应;
在第二预设时间段后,将读请求切换至所述主存储池进行响应。
2.根据权利要求1所述的方法,其特征在于,还包括:
在第一预设时间段后,镜像数据开始同步;
在镜像数据同步过程中,当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间时,结束写操作,且在第一预设时间段内,发生故障的存储池不再接收写请求。
3.根据权利要求2所述的方法,其特征在于,还包括:
判断主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数是否超过第一预设阈值;
当主存储池或备份存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,生成第一警告信息。
4.根据权利要求3所述的方法,其特征在于,还包括:
当主存储池向主机返回数据写入成功信息的时间大于第一预设时间的次数超过第一预设阈值时,转换所述主存储池和备份存储池的角色。
5.根据权利要求4所述的方法,其特征在于,还包括:
判断所述主存储池响应读请求的次数是否超过第二预设阈值;
当所述主存储池响应读请求的次数超过第二预设阈值时,转换所述主存储池和备份存储池的角色,并成第二警告信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710448320.7A CN107153589B (zh) | 2017-06-14 | 2017-06-14 | 一种镜像数据的读写方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710448320.7A CN107153589B (zh) | 2017-06-14 | 2017-06-14 | 一种镜像数据的读写方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107153589A CN107153589A (zh) | 2017-09-12 |
CN107153589B true CN107153589B (zh) | 2020-08-04 |
Family
ID=59796679
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710448320.7A Active CN107153589B (zh) | 2017-06-14 | 2017-06-14 | 一种镜像数据的读写方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107153589B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111381770B (zh) * | 2018-12-30 | 2021-07-06 | 浙江宇视科技有限公司 | 一种数据存储切换方法、装置、设备及存储介质 |
CN110032536A (zh) * | 2019-03-28 | 2019-07-19 | 北京龙鼎源科技股份有限公司 | 两系mcu数据同步方法、装置及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103605618A (zh) * | 2013-11-20 | 2014-02-26 | 浪潮电子信息产业股份有限公司 | 一种缓存镜像系统无写回的镜像和直写切换方法 |
CN105338078A (zh) * | 2015-10-26 | 2016-02-17 | 北京百度网讯科技有限公司 | 用于存储系统的数据存储方法和装置 |
CN106383756A (zh) * | 2016-10-12 | 2017-02-08 | 郑州云海信息技术有限公司 | 一种实现存储容灾切换Linux系统业务不中断的方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8990263B2 (en) * | 2012-03-15 | 2015-03-24 | International Business Machines Corporation | Policy-based management of storage functions in data replication environments |
US9411698B2 (en) * | 2014-05-28 | 2016-08-09 | International Business Machines Corporation | Determining an availability score based on available resources of different resource types in a distributed computing environment of storage servers to determine whether to perform a failure operation for one of the storage servers |
US9703649B2 (en) * | 2014-12-18 | 2017-07-11 | Infinidat Ltd. | Automatic failover and failback between primary and secondary storage systems |
US10133643B2 (en) * | 2015-05-05 | 2018-11-20 | International Business Machines Corporation | Resynchronizing to a first storage system after a failover to a second storage system mirroring the first storage system |
-
2017
- 2017-06-14 CN CN201710448320.7A patent/CN107153589B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103605618A (zh) * | 2013-11-20 | 2014-02-26 | 浪潮电子信息产业股份有限公司 | 一种缓存镜像系统无写回的镜像和直写切换方法 |
CN105338078A (zh) * | 2015-10-26 | 2016-02-17 | 北京百度网讯科技有限公司 | 用于存储系统的数据存储方法和装置 |
CN106383756A (zh) * | 2016-10-12 | 2017-02-08 | 郑州云海信息技术有限公司 | 一种实现存储容灾切换Linux系统业务不中断的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN107153589A (zh) | 2017-09-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7724643B2 (en) | Recovery of duplex data system after power failure | |
EP3435604A1 (en) | Service processing method, device, and system | |
CN107506266B (zh) | 一种数据恢复方法及系统 | |
WO2016095372A1 (zh) | 实现事务日志镜像备份的方法及装置 | |
CN107918568B (zh) | 一种防止Linux系统重启失败的方法 | |
US20160110127A1 (en) | Enabling non-volatile random access to data | |
CN107153589B (zh) | 一种镜像数据的读写方法 | |
JP2011028430A (ja) | 情報処理装置、情報処理装置の制御方法及びプログラム | |
CN110780816B (zh) | 一种数据同步方法、装置及介质 | |
CN101281452A (zh) | 硬盘自动重建方法 | |
US9311189B2 (en) | Method and device for inputting data in multimedia service database on embedded device | |
CN110908613A (zh) | 一种数据写命令处理方法、装置、电子设备及存储介质 | |
CN112269772A (zh) | 一种文件部署方法、系统、设备及计算机可读存储介质 | |
CN110597660A (zh) | 一种虚拟机的数据备份方法、装置、设备及介质 | |
CN103049407B (zh) | 数据存储方法、装置及系统 | |
US8677178B2 (en) | Recovery control in mirrored disks | |
CN107621994B (zh) | 一种数据快照创建的方法及装置 | |
CN104636082B (zh) | 磁盘阵列raid的控制方法及装置 | |
CN110532134B (zh) | Nas数据备份容灾方法及装置 | |
CN107526652B (zh) | 一种数据同步方法及存储设备 | |
CN109032536B (zh) | 基于分布式集群系统的数据存储方法、装置、系统及设备 | |
CN111177104A (zh) | 一种nas存储系统的日志下刷方法及装置 | |
CN107045426B (zh) | 一种多副本读取方法和系统 | |
CN115562593A (zh) | 一种异常raid成员盘处理方法、装置及介质 | |
CN111104256A (zh) | 一种数据读取方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20200623 Address after: 215100 No. 1 Guanpu Road, Guoxiang Street, Wuzhong Economic Development Zone, Suzhou City, Jiangsu Province Applicant after: SUZHOU LANGCHAO INTELLIGENT TECHNOLOGY Co.,Ltd. Address before: 450018 Henan province Zheng Dong New District of Zhengzhou City Xinyi Road No. 278 16 floor room 1601 Applicant before: ZHENGZHOU YUNHAI INFORMATION TECHNOLOGY Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |