CN101206595A - 以快照指针进行磁盘快照的方法 - Google Patents
以快照指针进行磁盘快照的方法 Download PDFInfo
- Publication number
- CN101206595A CN101206595A CNA2006101687257A CN200610168725A CN101206595A CN 101206595 A CN101206595 A CN 101206595A CN A2006101687257 A CNA2006101687257 A CN A2006101687257A CN 200610168725 A CN200610168725 A CN 200610168725A CN 101206595 A CN101206595 A CN 101206595A
- Authority
- CN
- China
- Prior art keywords
- disk
- data
- capacity
- hard disk
- volume
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 230000010076 replication Effects 0.000 claims abstract description 38
- 238000011084 recovery Methods 0.000 claims abstract description 4
- 238000012986 modification Methods 0.000 claims description 17
- 230000004048 modification Effects 0.000 claims description 17
- 238000004364 calculation method Methods 0.000 claims description 3
- 230000002159 abnormal effect Effects 0.000 abstract 1
- 238000005516 engineering process Methods 0.000 description 5
- 230000014759 maintenance of location Effects 0.000 description 2
- 230000007812 deficiency Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000002574 poison Substances 0.000 description 1
- 231100000614 poison Toxicity 0.000 description 1
- 231100000572 poisoning Toxicity 0.000 description 1
- 230000000607 poisoning effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种以快照指针进行磁盘快照的方法。该方法应用在服务器中,当服务器进行磁盘快照时,将硬盘所有磁盘区块规划为一磁盘卷册,另在硬盘中规划出第一部分及第二部分,且于存储器的内核空间中建立一快照指针,快照指针指向第一部分的启始位置,每当原始数据需要被修改时,先将其复制到第二部分的磁盘区块,并作为备份数据,再对原始数据进行修改,并作为修改数据,再于写入同步复制对照表写入对照信息,当服务器欲对磁盘卷册进行数据恢复时,自写入同步复制对照表读取对照信息,取得备份数据,及将备份数据覆盖到相应的磁盘区块,即可恢复磁盘卷册。通过本发明,可以解决内核空间耗尽所导致操作系统异常崩溃的问题。
Description
技术领域
本发明关于服务器,特别关于一种以快照指针进行磁盘快照的方法。
背景技术
当前一般操作系统皆支持一种磁盘快照(Snapshot)技术,又可称作为磁盘区阴影复制服务(Volume Shadow Copy Services),所谓磁盘快照是属于一种档案系统(file system)的保留数据技术,不同于一般的数据备份技术需要复制的动作,磁盘快照是在任意时间点,将硬盘的磁盘卷册(磁盘卷册(Volume)是指硬盘目前有数据的磁盘区块(chunk))进行快速的档案系统备份,且当进行磁盘快照时,并不牵涉到任何档案复制动作。且将目前使用中的档案系统的数据结构中的整个目录结构保留下来。如此,以实时性地对硬盘建立不同时间点版本的磁盘卷册的磁盘快照,不仅可以弥补传统备份机制的不足,此外,即使硬盘发生损毁或中毒等意外,管理者可以选择发生损毁或中毒前的磁盘快照,取代原先的磁盘卷册(Volume)让损害降至最低。
承上所述,当硬盘在进行磁盘快照时,并不会实际进行档案的复制动作,而是当磁盘卷册的磁盘区块有所变动时,先复制磁盘卷册的磁盘区块内的原始数据到硬盘中不属于磁盘卷册的其它可用的磁盘区块中,再修改磁盘卷册的磁盘区块内的原始数据成为修改数据,另在服务器的一存储器提供操作系统(如:Linux)内部核心(kernel)所使用的存储器空间(以下简称内核空间)中,建立一写入同步复制对照表(Copy-On-Write(简称:COW)Table),写入同步复制对照表记录每一个磁盘区块的原始数据被写入到硬盘中的那一个磁盘区块中的信息。而前述技术被称作为写入同步复制(Copy-On-Write,COW )技术。
然而,操作系统的核心的存储器空间有限,且不会因为系统存储器增加而变大,当磁盘卷册更动的磁盘区块越多时,写入同步复制对照表占用操作系统的核心的存储空间就越大。当磁盘卷册分别在不同的时间进行磁盘快照,或磁盘卷册的容量急速增加后,内核空间将会被大量的写入同步复制对照表所占用,使得内核空间被耗尽,进而导致操作系统异常崩溃。因此,如何设计出一种以快照指针进行磁盘快照的方法,以有效地解决上述的诸多问题,实乃目前刻不容缓而亟待解决的一重要课题。
发明内容
有鉴于前述现有磁盘快照的诸多问题,发明人经过长久努力研究与实验,终于开发设计出本发明的一种以快照指针进行磁盘快照的方法,期通过本发明有效地解决内核空间耗尽所导致操作系统异常崩溃的问题。
本发明的一目的,提供一种以快照指针进行磁盘快照的方法,该方法应用在一服务器中,服务器包含有一存储器及一硬盘,其中存储器至少规划出提供操作系统内部核心所使用的一内核空间,硬盘目前具有数据的所有磁盘区块(chunk)则规划为一磁盘卷册,当服务器对磁盘卷册进行磁盘快照时,于硬盘中规划出第一部分及第二部分,另于内核空间中建立一快照指针,快照指针指向第一部分的启始位置,此后,每当磁盘卷册的磁盘区块内的原始数据需要被修改时,先将原始数据复制到第二部分中作为备份数据,再将磁盘卷册的原始数据进行修改成修改数据,再于第一部分的写入同步复制对照表写入对照信息,而对照信息包含该备份数据地址及对应该备份数据的修改数据地址。
其中,所述第一部分的容量,等于所述写入同步复制对照表的最大需求容量;所述写入同步复制对照表提供储存复数个对照信息;所述第二部分的容量大小,则等于磁盘卷册所有的磁盘区块的原始数据被复制到硬盘中作为备份数据所需的容量大小。
对于所述的方法,其中,所述服务器在硬盘规划出第一部分及第二部分的步骤,包括:
根据所述磁盘卷册的容量大小,用以计算出所述写入同步复制对照表的最大需求容量大小;在所述硬盘中不属于所述磁盘卷册的剩余空间中规划出所述第一部分;及在所述硬盘中不属于所述磁盘卷册及所述第一部分的剩余空间中规划出所述第二部分。
其中,所述写入同步复制对照表的最大需求容量大小的计算方法包括:
写入同步复制对照表的最大需求容量=磁盘卷册的磁盘区块数量×一个对照信息的容量大小;及磁盘区块数量=磁盘卷册的容量/磁盘区块容量。
另外,所述第一部分规划在所述硬盘中的位置在所述第二部分在所述硬盘中的位置之前;所述硬盘的所述第一部分最末端的部分,直接接续所述第二部分最前端的部分。
当所述服务器对所述磁盘卷册中已被写入所述修改数据的磁盘区块进行修改时,直接对所述修改数据的磁盘区块进行修改。
本发明的另一目的,当服务器对磁盘卷册进行数据恢复时,先自写入同步复制对照表读取对应该修改数据的对照信息,取得在第二部分的备份数据,及将备份数据覆盖到其原本储存的磁盘区块内,即可恢复磁盘卷册。
综上所述,由于地址指针仅占用内核空间极小部分的储存空间,而写入同步复制对照表被储存在储存容量远大于内核空间的硬盘中,使得内核空间不再被写入同步复制对照表所占用,即可达到节省内核空间的储存容量的目的,同时,服务器在进行磁盘快照时,不会导致服务器异常,用以达到稳定服务器的目的。
附图说明
图1是本发明的架构示意图;
图2是本发明进行磁盘快照的动作流程图;
图3是本发明在硬盘规划出第一部分及第二部分的动作流程图。
主要元件符号说明:
服务器.........5 存储器.........6
内核空间......60 硬盘.........7
磁盘卷册......70 第一部分...72
第二部分......74
具体实施方式
以下结合附图对本发明进行详细说明。
本发明提供一种以快照指针进行磁盘快照的方法,请参阅图1、2所示,该方法应用在一服务器5中,该服务器5包含有至少一个存储器6及至少一个硬盘7,其中该存储器6规划出一内核空间60(Kernel Space),当服务器5对硬盘7进行磁盘快照时,依下列步骤进行处理:
步骤1:硬盘7目前具有数据的所有磁盘区块(chunk)规划为一磁盘卷册70(Volume);
步骤2:硬盘7中规划出第一部分72及第二部分74,其中第一部分72的容量,等于写入同步复制对照表(Copy-On-Write(简称:COW)Table)的最大需求容量,写入同步复制对照表包括复数个对照信息,每一个对照信息分别为包含备份数据地址及对应备份数据的修改数据地址,而第二部分74的容量大小,则等于磁盘卷册70所有的磁盘区块的原始数据被复制到硬盘7中作为备份数据所需的容量大小;在本发明的一实施例中,请参阅图3所示,服务器5在硬盘7规划出第一部分72及第二部分74的步骤,包括:
步骤20:先根据磁盘卷册70的容量大小,用以计算出磁盘卷册70所需的写入同步复制对照表的最大需求容量;而在本发明中,写入同步复制对照表的最大需求容量的计算方程式如下:
写入同步复制对照表的最大需求容量=磁盘卷册70的磁盘区块数量×一个对照信息的容量大小...(公式1)
磁盘区块数量=磁盘卷册70的容量/磁盘区块容量...(公式2)
其中,公式2中的“/”表示除号。
举例而言,假设磁盘卷册70的容量为100GB,磁盘卷册70的每一个磁盘区块的容量大小为64KB,写入同步复制对照表记录的每一个对照信息的容量大小为16byte,则写入同步复制对照表的最大需求容量即为(100GB/64KB)*16byte=25MB。
步骤21:在硬盘7中不属于磁盘卷册70的剩余空间中规划出第一部分72;及
步骤22:在硬盘7中不属于磁盘卷册70及第一部分72的剩余空间中规划出第二部分74,即结束。
另外,为了能提高在备份数据被读取的速度,在该实施例中,第一部分72规划在硬盘7的位置在第二部分74在硬盘7的位置之前,尤其是,在硬盘7的第一部分72最末端的部分,直接接续第二部分74最前端的部分,备份数据被读取的速度最快。
步骤3:内核空间60中建立一快照指针,快照指针指向写入同步复制对照表在硬盘7中的启始地址,即第一部分72在硬盘7中的启始地址;及
步骤4:每当磁盘卷册70的任一个磁盘区块内的原始数据需要被修改时,先将原始数据复制到第二部分74中的其中一个磁盘区块中作为备份数据,再将磁盘卷册70的原始数据修改成为修改数据,并将包含备份数据地址及对应备份数据的修改数据地址的对照信息写入第一部分72的写入同步复制对照表中,即结束。
由上述可知,硬盘7储存写入同步复制对照表,由于硬盘7的储存容量远大于内核空间60,因此,硬盘7将不会被写入同步复制对照表所占满,另一方面,内核空间60只储存地址指针,而地址指针通常只会占用到极小部分的储存空间,使得内核空间60不再被写入同步复制对照表所占用,即可达到节省内核空间60的储存容量的目的,同时,服务器5在进行磁盘快照时,写入同步复制对照表写在硬盘7中,使得服务器5不易发生异常,用以达到稳定服务器5的目的。
在该实施例中,当服务器5欲对磁盘卷册70中已被写入修改数据的磁盘区块进行修改时,直接对已被写入修改数据的磁盘区块进行修改,并无需将修改数据储存到第二部分74中,藉以保留磁盘卷册70中已被写入修改数据的磁盘区块的备份数据,如此,当服务器5欲对磁盘卷册70进行数据恢复时,自写入同步复制对照表读取对应该修改数据的该对照信息,取得在第二部分74的备份数据,及将备份数据覆盖到该修改数据的磁盘区块,即可恢复磁盘卷册70。
以上所述,仅为本发明的一具体实施例,然而本发明的特征并不局限于此,任何熟悉该项技艺者在本发明领域内,可轻易思及的变化或修饰,皆应涵盖在以下本发明的申请专利范围中。
Claims (10)
1.一种以快照指针进行磁盘快照的方法,应用在一服务器中,所述服务器包含有一存储器及一硬盘,其特征在于,所述存储器规划出一内核空间,当服务器对硬盘进行磁盘快照时,依下列步骤进行处理:
所述硬盘目前具有数据的所有磁盘区块规划为一磁盘卷册;
所述硬盘中规划出一第一部分及一第二部分;
所述内核空间中建立一快照指针,所述快照指针指向所述第一部分在所述硬盘中的启始地址;及
每当所述磁盘卷册的任一个磁盘区块内的原始数据需要被修改时,先将所述原始数据复制到所述第二部分中的其中一个磁盘区块中作为一备份数据,再对所述原始数据修改成为一修改数据,并将一包含所述备份数据地址及对应所述备份数据的修改数据地址的对照信息,写入所述第一部分的写入同步复制对照表中。
2.根据权利要求1所述的方法,其特征在于,所述第一部分的容量,等于所述写入同步复制对照表的最大需求容量。
3.根据权利要求2所述的方法,其特征在于,所述写入同步复制对照表提供储存复数个对照信息。
4.根据权利要求3所述的方法,其特征在于,所述第二部分的容量大小,则等于磁盘卷册所有的磁盘区块的原始数据被复制到硬盘中作为备份数据所需的容量大小。
5.根据权利要求1所述的方法,其特征在于,所述服务器在硬盘规划出第一部分及第二部分的步骤,包括:
根据所述磁盘卷册的容量大小,用以计算出所述写入同步复制对照表的最大需求容量大小;
在所述硬盘中不属于所述磁盘卷册的剩余空间中规划出所述第一部分;及
在所述硬盘中不属于所述磁盘卷册及所述第一部分的剩余空间中规划出所述第二部分。
6.根据权利要求2或5所述的方法,其特征在于,所述写入同步复制对照表的最大需求容量大小的计算方法包括:
写入同步复制对照表的最大需求容量=磁盘卷册的磁盘区块数量×一个对照信息的容量大小;及
磁盘区块数量=磁盘卷册的容量/磁盘区块容量。
7.根据权利要求5所述的方法,其特征在于,所述第一部分规划在所述硬盘中的位置在所述第二部分在所述硬盘中的位置之前。
8.根据权利要求7所述的方法,其特征在于,所述硬盘的所述第一部分最末端的部分,直接接续所述第二部分最前端的部分。
9.根据权利要求1所述的方法,其特征在于,当所述服务器对所述磁盘卷册中已被写入所述修改数据的磁盘区块进行修改时,直接对所述修改数据的磁盘区块进行修改。
10.根据权利要求9所述的方法,其特征在于,当所述服务器欲对所述磁盘卷册进行数据恢复时,自所述写入同步复制对照表读取对应所述修改数据的对照信息,取得已被在所述第二部分的所述备份数据,及将所述备份数据覆盖到所述修改数据的磁盘区块,即可恢复磁盘卷册。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2006101687257A CN100504799C (zh) | 2006-12-19 | 2006-12-19 | 以快照指针进行磁盘快照的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2006101687257A CN100504799C (zh) | 2006-12-19 | 2006-12-19 | 以快照指针进行磁盘快照的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101206595A true CN101206595A (zh) | 2008-06-25 |
CN100504799C CN100504799C (zh) | 2009-06-24 |
Family
ID=39566826
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB2006101687257A Expired - Fee Related CN100504799C (zh) | 2006-12-19 | 2006-12-19 | 以快照指针进行磁盘快照的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100504799C (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101814044A (zh) * | 2010-04-19 | 2010-08-25 | 中兴通讯股份有限公司 | 元数据处理方法及装置 |
CN102216985A (zh) * | 2008-11-21 | 2011-10-12 | 国际商业机器公司 | 磁带记录装置中的数据覆写控制方法、覆写控制程序以及磁带记录装置 |
CN102456354A (zh) * | 2010-10-22 | 2012-05-16 | 山东新北洋信息技术股份有限公司 | 磁信息记录方法及装置、磁票 |
CN103559103A (zh) * | 2013-11-06 | 2014-02-05 | 华为技术有限公司 | 数据复制方法和装置 |
CN103838647A (zh) * | 2014-02-17 | 2014-06-04 | 中国科学院计算技术研究所 | 一种基于快照重映射的数据状态转换的方法及系统 |
CN107046811A (zh) * | 2015-12-03 | 2017-08-15 | 华为技术有限公司 | 一种源存储设备发送源文件和源文件的克隆文件至备份存储设备的方法、源存储设备以及备份存储设备 |
CN107704332A (zh) * | 2017-09-28 | 2018-02-16 | 努比亚技术有限公司 | 冻屏解决方法、移动终端及计算机可读存储介质 |
CN110008197A (zh) * | 2019-04-12 | 2019-07-12 | 苏州浪潮智能科技有限公司 | 一种数据处理方法、系统及电子设备和存储介质 |
CN110765036A (zh) * | 2018-07-27 | 2020-02-07 | 伊姆西Ip控股有限责任公司 | 在控制设备处管理元数据的方法、设备和计算机程序产品 |
CN111324295A (zh) * | 2018-12-17 | 2020-06-23 | 中国移动通信集团四川有限公司 | 数据迁移的方法、装置、设备及介质 |
-
2006
- 2006-12-19 CN CNB2006101687257A patent/CN100504799C/zh not_active Expired - Fee Related
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102216985A (zh) * | 2008-11-21 | 2011-10-12 | 国际商业机器公司 | 磁带记录装置中的数据覆写控制方法、覆写控制程序以及磁带记录装置 |
CN102216985B (zh) * | 2008-11-21 | 2014-04-09 | 国际商业机器公司 | 磁带记录装置中的数据覆写控制方法以及磁带记录装置 |
CN101814044B (zh) * | 2010-04-19 | 2013-03-20 | 中兴通讯股份有限公司 | 元数据处理方法及装置 |
CN101814044A (zh) * | 2010-04-19 | 2010-08-25 | 中兴通讯股份有限公司 | 元数据处理方法及装置 |
CN102456354A (zh) * | 2010-10-22 | 2012-05-16 | 山东新北洋信息技术股份有限公司 | 磁信息记录方法及装置、磁票 |
CN102456354B (zh) * | 2010-10-22 | 2015-05-20 | 山东新北洋信息技术股份有限公司 | 磁信息记录方法及装置、磁票 |
CN103559103A (zh) * | 2013-11-06 | 2014-02-05 | 华为技术有限公司 | 数据复制方法和装置 |
CN103838647B (zh) * | 2014-02-17 | 2018-02-06 | 中国科学院计算技术研究所 | 一种基于快照重映射的数据状态转换的方法及系统 |
CN103838647A (zh) * | 2014-02-17 | 2014-06-04 | 中国科学院计算技术研究所 | 一种基于快照重映射的数据状态转换的方法及系统 |
CN107046811A (zh) * | 2015-12-03 | 2017-08-15 | 华为技术有限公司 | 一种源存储设备发送源文件和源文件的克隆文件至备份存储设备的方法、源存储设备以及备份存储设备 |
US11030048B2 (en) | 2015-12-03 | 2021-06-08 | Huawei Technologies Co., Ltd. | Method a source storage device to send a source file and a clone file of the source file to a backup storage device, a source storage device and a backup storage device |
CN107704332A (zh) * | 2017-09-28 | 2018-02-16 | 努比亚技术有限公司 | 冻屏解决方法、移动终端及计算机可读存储介质 |
CN107704332B (zh) * | 2017-09-28 | 2021-06-15 | 努比亚技术有限公司 | 冻屏解决方法、移动终端及计算机可读存储介质 |
CN110765036A (zh) * | 2018-07-27 | 2020-02-07 | 伊姆西Ip控股有限责任公司 | 在控制设备处管理元数据的方法、设备和计算机程序产品 |
CN110765036B (zh) * | 2018-07-27 | 2023-11-10 | 伊姆西Ip控股有限责任公司 | 在控制设备处管理元数据的方法和设备 |
CN111324295A (zh) * | 2018-12-17 | 2020-06-23 | 中国移动通信集团四川有限公司 | 数据迁移的方法、装置、设备及介质 |
CN111324295B (zh) * | 2018-12-17 | 2023-09-19 | 中国移动通信集团四川有限公司 | 数据迁移的方法、装置、设备及介质 |
CN110008197A (zh) * | 2019-04-12 | 2019-07-12 | 苏州浪潮智能科技有限公司 | 一种数据处理方法、系统及电子设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN100504799C (zh) | 2009-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100504799C (zh) | 以快照指针进行磁盘快照的方法 | |
CN103765393B (zh) | 存储系统 | |
US8250033B1 (en) | Replication of a data set using differential snapshots | |
US9996557B2 (en) | Database storage system based on optical disk and method using the system | |
CN101777016B (zh) | 一种连续数据保护系统的快照存储和数据恢复方法 | |
CN106354582B (zh) | 一种连续数据保护方法 | |
JP6033241B2 (ja) | データー重複排除のためのバックアップおよび復元方策 | |
CN101777017B (zh) | 一种连续数据保护系统的快速恢复方法 | |
US8280858B2 (en) | Storage pool scrubbing with concurrent snapshots | |
CN100504800C (zh) | 磁盘快照的方法 | |
US20110106768A1 (en) | Backup using metadata virtual hard drive and differential virtual hard drive | |
US20080177961A1 (en) | Partial Backup and Restore with Backup Versioning | |
US20120179655A1 (en) | Method and system of performing incremental sql server database backups | |
CN106662981A (zh) | 存储设备、程序和信息处理方法 | |
CN104881371A (zh) | 持久性内存事务处理缓存管理方法与装置 | |
CN104156172A (zh) | 数据存储装置的数据管理 | |
US11663160B2 (en) | Recovering the metadata of data backed up in cloud object storage | |
US8825653B1 (en) | Characterizing and modeling virtual synthetic backup workloads | |
CN105302488B (zh) | 一种存储系统的数据写入方法及系统 | |
CN106709014A (zh) | 一种文件系统转换方法及装置 | |
CN105094711B (zh) | 一种实现写时复制文件系统的方法及装置 | |
US20220404987A1 (en) | Storage system, storage control device, and storage control method | |
CN109164988A (zh) | 基于处理器的虚拟机快照方法和系统 | |
CN110457163A (zh) | 一种分布式块存储的数据恢复方法、装置及存储介质 | |
KR100775141B1 (ko) | 저널링이 적용된 fat 파일 시스템의 구현 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
CB03 | Change of inventor or designer information |
Inventor after: Wang Juan Inventor before: Chen Zhiwei |
|
COR | Change of bibliographic data | ||
TR01 | Transfer of patent right |
Effective date of registration: 20170301 Address after: Tianjin City, Hongqiao, China Garden Water Garden 12-211-214 Patentee after: Wang Juan Address before: Taipei City, Taiwan Chinese Shilin District Hougang Street No. 66 Patentee before: Inventec Corporation |
|
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20090624 Termination date: 20171219 |