CN106326034A - 一种数据备份的存储方法及装置 - Google Patents
一种数据备份的存储方法及装置 Download PDFInfo
- Publication number
- CN106326034A CN106326034A CN201610665411.1A CN201610665411A CN106326034A CN 106326034 A CN106326034 A CN 106326034A CN 201610665411 A CN201610665411 A CN 201610665411A CN 106326034 A CN106326034 A CN 106326034A
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- written
- write
- tape
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1469—Backup restoration techniques
Abstract
本发明公开了一种数据备份的存储方法及装置,通过接收数据备份请求;将待存储的数据写入到SSD磁盘中,SSD磁盘作为磁带库备份的中间缓存;将写入SSD磁盘中的数据写入到磁带库进行存储。当外部相关备份软件发起备份策略后,数据开始向带库端写入,首先会写入到SSD磁盘为载体的虚拟带库中,做暂时短期存储,最后再由SSD上的数据最终写入到磁带上进行保存。通过数据缓存,最终使得该带库具有高速读写的性能,满足当下环境中大数据量高并发的数据备份环境,加快了备份的速率,减少由备份时间过长带来的对正常业务的影响。
Description
技术领域
本发明涉及数据备份技术领域,特别是涉及一种数据备份的存储方法及装置。
背景技术
随着信息化系统的蓬勃发展,每一年各行业单位所产生的数据量以指数形式增长,数据的安全问题影响越来越大,目前针对数据备份的存储部分大体上可以分为两种:物理带库和虚拟带库。
传统的物理带库的控制系统一直都是以机械作为主导,通过机械手完成磁带的抓取、移动和填充过程。利用专门的备份软件,通过连接到磁带库的SCSI或者基于SAN的FC网络连接,实现数据备份。虚拟带库采用的是Storage-on-Chip架构或基于PC架构方案,采用大规模、高密度的FPGA实现,其功能固化在一片可编程芯片中,使得整机集成度、性能、扩展性、易用性都有了很大提高。但由于磁带相对于硬盘所特有的稳定性、便捷性、性价比以及其低功耗,使得物理带库仍为当今重要行业企业的首项选择。如何使物理带库具有更高的备份性能的同时还保留其原有优势,是本领域技术人员亟待解决的技术问题。
发明内容
本发明的目的是提供一种数据备份的存储方法及装置,目的在于解决现有物理带库备份过程中性能较差的问题。
为解决上述技术问题,本发明提供一种数据备份的存储方法,包括:
接收数据备份请求;
将待存储的数据写入到SSD磁盘中,所述SSD磁盘作为磁带库备份的中间缓存;
将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
可选地,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
当写入所述SSD磁盘中的数据达到预设容量阈值时,将所述数据写入到所述磁带库进行存储。
可选地,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
当写入所述SSD磁盘中的数据存放超过预设时间阈值时,将所述数据写入到所述磁带库进行存储。
可选地,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
当检测到系统空闲时,将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
可选地,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
通过机械臂从Magzine中抓取磁带,移动放入对应驱动器中完成读写;再把磁带放回原位置。
可选地,所述移动放入对应驱动器中完成读写包括:
在当前磁带容量已满且未完成所有数据的读写时,按预设顺序抓取下个磁带继续去驱动器中完成读写,直至数据完全写入为止。
本发明还提供了一种数据备份的存储装置,包括:
接收模块,用于接收数据备份请求;
中间缓存模块,用于将待存储的数据写入到SSD磁盘中,所述SSD磁盘作为磁带库备份的中间缓存;
磁带写入模块,用于将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
可选地,所述磁带写入模块具体用于:
当写入所述SSD磁盘中的数据达到预设容量阈值时,将所述数据写入到所述磁带库进行存储。
可选地,所述磁带写入模块具体用于:
当写入所述SSD磁盘中的数据存放超过预设时间阈值时,将所述数据写入到所述磁带库进行存储。
可选地,所述磁带写入模块具体用于:
当检测到系统空闲时,将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
本发明所提供的数据备份的存储方法及装置,通过接收数据备份请求;将待存储的数据写入到SSD磁盘中,SSD磁盘作为磁带库备份的中间缓存;将写入SSD磁盘中的数据写入到磁带库进行存储。当外部相关备份软件发起备份策略后,数据开始向带库端写入,首先会写入到SSD磁盘为载体的虚拟带库中,做暂时短期存储,最后再由SSD上的数据最终写入到磁带上进行保存。通过数据缓存,最终使得该带库具有高速读写的性能,满足当下环境中大数据量高并发的数据备份环境,加快了备份的速率,减少由备份时间过长带来的对正常业务的影响。
附图说明
为了更清楚的说明本发明实施例或现有技术的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明所提供的数据备份的存储方法的一种具体实施方式的流程图;
图2为本发明所提供的数据备份的存储方法的另一种具体实施方式的示意图;
图3为本发明实施例提供的数据备份的存储装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明所提供的数据备份的存储方法的一种具体实施方式的流程图如图1所示,该方法包括:
步骤S101:接收数据备份请求;
步骤S102:将待存储的数据写入到SSD磁盘中,所述SSD磁盘作为磁带库备份的中间缓存;
步骤S103:将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
本发明所提供的数据备份的存储方法,通过接收数据备份请求;将待存储的数据写入到SSD磁盘中,SSD磁盘作为磁带库备份的中间缓存;将写入SSD磁盘中的数据写入到磁带库进行存储。当外部相关备份软件发起备份策略后,数据开始向带库端写入,首先会写入到SSD磁盘为载体的虚拟带库中,做暂时短期存储,最后再由SSD上的数据最终写入到磁带上进行保存。通过数据缓存,最终使得该带库具有高速读写的性能,满足当下环境中大数据量高并发的数据备份环境,加快了备份的速率,减少由备份时间过长带来的对正常业务的影响。
在上述实施例的基础上,本发明所提供的数据备份的存储方法中,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储的过程可以具体为:
当写入所述SSD磁盘中的数据达到预设容量阈值时,将所述数据写入到所述磁带库进行存储。
可选地,上述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储的过程还可以具体为:
当写入所述SSD磁盘中的数据存放超过预设时间阈值时,将所述数据写入到所述磁带库进行存储。
另外,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储还可以为:
当检测到系统空闲时,将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
在上述任一实施例的基础上,本发明所提供的数据备份的存储方法中,将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
通过机械臂从Magzine中抓取磁带,移动放入对应驱动器中完成读写;再把磁带放回原位置。
具体地,在当前磁带容量已满且未完成所有数据的读写时,按预设顺序抓取下个磁带继续去驱动器中完成读写,直至数据完全写入为止。
如图2本发明所提供的数据备份的存储方法的另一种具体实施方式的示意图所示,SSD虚拟带库中间过渡存储部分,外部备份数据由前段传输过来后,首先经过SSD磁盘的缓冲区域,它是SSD磁盘与外部进行数据交换的地方,磁盘的读写过程是将磁信号与电信号之间相互转化,通过缓冲区域一次次地填充与清空,再填充,再清空,可以大大提高次磁盘的读写速率与数据交换速率,因为如果没有缓冲区域,就要求每传一个字(4个字节)就要读写一次磁盘,大大减慢了读写效率。再加上SSD磁盘本身就超高的读写能力,使得备份速率在这个环节得以较传统物理带库可大幅度提高。
数据在SSD中存放一定时间或达到一定容量后,开始正式通过驱动器写入到磁带盘中,通过机械臂从Magzine中抓取磁带,移动放入对应驱动器中完成读写,然后再把磁带放回原位置。如若未完成所有数据的读写,则将按一定顺序抓取下个磁带继续去驱动器中完成读写,直至数据完全写入。本过程属于磁带库内部完成,故对外部网络无任何影响。
由于在备份存储过程中,写入到SSD磁盘中具有的高速读取速率是当前主流磁带的4-5倍,因此本申请可以满足当下较高的数据备份速率,减少对正常业务的影响。
由于数据恢复的过程中,中间的缓存对于数据恢复效率不会产生影响,故数据恢复过程将跳过中间缓存,把数据还原到需要还原的位置。
下面对本发明实施例提供的数据备份的存储装置进行介绍,下文描述的数据备份的存储装置与上文描述的数据备份的存储方法可相互对应参照。
图3为本发明实施例提供的数据备份的存储装置的结构框图,参照图3数据备份的存储装置可以包括:
接收模块100,用于接收数据备份请求;
中间缓存模块200,用于将待存储的数据写入到SSD磁盘中,所述SSD磁盘作为磁带库备份的中间缓存;
磁带写入模块300,用于将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
在上述实施例的基础上,本发明所提供的数据备份的存储装置,中,上述磁带写入模块300可以具体用于:
当写入所述SSD磁盘中的数据达到预设容量阈值时,将所述数据写入到所述磁带库进行存储。
可选地,上述磁带写入模块300可以具体用于:
当写入所述SSD磁盘中的数据存放超过预设时间阈值时,将所述数据写入到所述磁带库进行存储。
作为一种具体实施方式,上述磁带写入模块300具体用于:
当检测到系统空闲时,将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
本发明所提供的数据备份的存储装置,通过接收数据备份请求;将待存储的数据写入到SSD磁盘中,SSD磁盘作为磁带库备份的中间缓存;将写入SSD磁盘中的数据写入到磁带库进行存储。当外部相关备份软件发起备份策略后,数据开始向带库端写入,首先会写入到SSD磁盘为载体的虚拟带库中,做暂时短期存储,最后再由SSD上的数据最终写入到磁带上进行保存。由于在备份存储过程中,写入到SSD磁盘中具有的高速读取速率是当前主流磁带的4-5倍,因此本申请可以满足当下较高的数据备份速率,减少对正常业务的影响。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的数据备份的存储方法以及装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。
Claims (10)
1.一种数据备份的存储方法,其特征在于,包括:
接收数据备份请求;
将待存储的数据写入到SSD磁盘中,所述SSD磁盘作为磁带库备份的中间缓存;
将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
2.如权利要求1所述的数据备份的存储方法,其特征在于,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
当写入所述SSD磁盘中的数据达到预设容量阈值时,将所述数据写入到所述磁带库进行存储。
3.如权利要求1所述的数据备份的存储方法,其特征在于,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
当写入所述SSD磁盘中的数据存放超过预设时间阈值时,将所述数据写入到所述磁带库进行存储。
4.如权利要求1所述的数据备份的存储方法,其特征在于,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
当检测到系统空闲时,将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
5.如权利要求1至4任一项所述的数据备份的存储方法,其特征在于,所述将写入所述SSD磁盘中的数据写入到所述磁带库进行存储包括:
通过机械臂从Magzine中抓取磁带,移动放入对应驱动器中完成读写;再把磁带放回原位置。
6.如权利要求5所述的数据备份的存储方法,其特征在于,所述移动放入对应驱动器中完成读写包括:
在当前磁带容量已满且未完成所有数据的读写时,按预设顺序抓取下个磁带继续去驱动器中完成读写,直至数据完全写入为止。
7.一种数据备份的存储装置,其特征在于,包括:
接收模块,用于接收数据备份请求;
中间缓存模块,用于将待存储的数据写入到SSD磁盘中,所述SSD磁盘作为磁带库备份的中间缓存;
磁带写入模块,用于将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
8.如权利要求7所述的数据备份的存储装置,其特征在于,所述磁带写入模块具体用于:
当写入所述SSD磁盘中的数据达到预设容量阈值时,将所述数据写入到所述磁带库进行存储。
9.如权利要求7所述的数据备份的存储装置,其特征在于,所述磁带写入模块具体用于:
当写入所述SSD磁盘中的数据存放超过预设时间阈值时,将所述数据写入到所述磁带库进行存储。
10.如权利要求7所述的数据备份的存储装置,其特征在于,所述磁带写入模块具体用于:
当检测到系统空闲时,将写入所述SSD磁盘中的数据写入到所述磁带库进行存储。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610665411.1A CN106326034A (zh) | 2016-08-12 | 2016-08-12 | 一种数据备份的存储方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610665411.1A CN106326034A (zh) | 2016-08-12 | 2016-08-12 | 一种数据备份的存储方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106326034A true CN106326034A (zh) | 2017-01-11 |
Family
ID=57739332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610665411.1A Pending CN106326034A (zh) | 2016-08-12 | 2016-08-12 | 一种数据备份的存储方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106326034A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107589911A (zh) * | 2017-09-05 | 2018-01-16 | 郑州云海信息技术有限公司 | 一种ssd缓存的io处理方法及装置 |
CN109918399A (zh) * | 2018-08-13 | 2019-06-21 | 新华三大数据技术有限公司 | 数据写入方法及装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040044842A1 (en) * | 2002-08-30 | 2004-03-04 | Alacritus, Inc. | System and method for exporting a virtual tape |
CN101118508A (zh) * | 2007-08-24 | 2008-02-06 | 成都索贝数码科技股份有限公司 | 一种数据的安全存储方法 |
US20080222344A1 (en) * | 2007-03-08 | 2008-09-11 | Upadhyayula Shivarama Narasimh | Facilitating Integration of a Virtual Tape Library System with a Physical Tape Library System |
CN101739307A (zh) * | 2008-11-04 | 2010-06-16 | 北京众志和达信息技术有限公司 | 基于嵌入式一体化虚拟磁带库的数据归档保护系统和方法 |
CN101968722A (zh) * | 2010-09-28 | 2011-02-09 | 天津火星科技有限公司 | 基于闪存的磁带仿真方法 |
US20120084501A1 (en) * | 2010-10-05 | 2012-04-05 | Fujitsu Limited | Information processing apparatus, tape device, and computer-readable medium storing program |
CN103076993A (zh) * | 2012-12-28 | 2013-05-01 | 北京思特奇信息技术股份有限公司 | 一种密集型系统中的存储系统及方法 |
CN103605587A (zh) * | 2013-11-20 | 2014-02-26 | 上海爱数软件有限公司 | 一种磁带库数据备份归档方法 |
-
2016
- 2016-08-12 CN CN201610665411.1A patent/CN106326034A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040044842A1 (en) * | 2002-08-30 | 2004-03-04 | Alacritus, Inc. | System and method for exporting a virtual tape |
US20080222344A1 (en) * | 2007-03-08 | 2008-09-11 | Upadhyayula Shivarama Narasimh | Facilitating Integration of a Virtual Tape Library System with a Physical Tape Library System |
CN101118508A (zh) * | 2007-08-24 | 2008-02-06 | 成都索贝数码科技股份有限公司 | 一种数据的安全存储方法 |
CN101739307A (zh) * | 2008-11-04 | 2010-06-16 | 北京众志和达信息技术有限公司 | 基于嵌入式一体化虚拟磁带库的数据归档保护系统和方法 |
CN101968722A (zh) * | 2010-09-28 | 2011-02-09 | 天津火星科技有限公司 | 基于闪存的磁带仿真方法 |
US20120084501A1 (en) * | 2010-10-05 | 2012-04-05 | Fujitsu Limited | Information processing apparatus, tape device, and computer-readable medium storing program |
CN103076993A (zh) * | 2012-12-28 | 2013-05-01 | 北京思特奇信息技术股份有限公司 | 一种密集型系统中的存储系统及方法 |
CN103605587A (zh) * | 2013-11-20 | 2014-02-26 | 上海爱数软件有限公司 | 一种磁带库数据备份归档方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107589911A (zh) * | 2017-09-05 | 2018-01-16 | 郑州云海信息技术有限公司 | 一种ssd缓存的io处理方法及装置 |
CN109918399A (zh) * | 2018-08-13 | 2019-06-21 | 新华三大数据技术有限公司 | 数据写入方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103049222B (zh) | 一种raid5的写io优化处理方法 | |
CN104881371A (zh) | 持久性内存事务处理缓存管理方法与装置 | |
CN105760113B (zh) | 基于nand闪存的高速存储设备及文件管理方法 | |
US9274865B2 (en) | Implementing enhanced buffer management for data storage devices | |
CN105339910B (zh) | 在混合驱动器中的虚拟nand容量扩展 | |
CN106527987B (zh) | 一种不带dram的ssd主控可靠性提升系统及方法 | |
CN103985393B (zh) | 一种多光盘数据并行管理方法及装置 | |
CN108845768A (zh) | 一种数据存储方法、装置、设备及存储介质 | |
CN104268088A (zh) | 车载dvr硬盘数据存储方法 | |
CN106445405A (zh) | 一种面向闪存存储的数据访问方法及其装置 | |
CN104679442A (zh) | 一种提高磁盘阵列性能的方法及装置 | |
CN102033793A (zh) | 快照方法和固态硬盘 | |
CN109032517A (zh) | 一种数据落盘的方法、装置和计算机可读存储介质 | |
CN109491605A (zh) | 一种基于cow的数据存储方法、装置和介质 | |
CN107273056A (zh) | 一种Ceph文件系统的数据存储方法及装置 | |
CN101354906A (zh) | 应用于固态硬盘的闪存控制器 | |
JP2006178923A5 (zh) | ||
CN105260139B (zh) | 一种磁盘管理方法以及系统 | |
CN106326034A (zh) | 一种数据备份的存储方法及装置 | |
CN104898989A (zh) | 一种大容量数据存储设备、方法及装置 | |
CN107273306A (zh) | 一种固态硬盘的数据读取、数据写入方法及固态硬盘 | |
CN108491166B (zh) | 面向光盘库的读数据缓存管理方法 | |
CN101324899A (zh) | 一种快速写nand型flash的方法 | |
CN108647157A (zh) | 一种基于相变存储器的映射管理方法及固态硬盘 | |
US6532513B1 (en) | Information recording and reproduction apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170111 |