CN101635746B - 一种数据保护方法及装置 - Google Patents
一种数据保护方法及装置 Download PDFInfo
- Publication number
- CN101635746B CN101635746B CN 200910169602 CN200910169602A CN101635746B CN 101635746 B CN101635746 B CN 101635746B CN 200910169602 CN200910169602 CN 200910169602 CN 200910169602 A CN200910169602 A CN 200910169602A CN 101635746 B CN101635746 B CN 101635746B
- Authority
- CN
- China
- Prior art keywords
- file
- application server
- data
- daily record
- described application
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Storage Device Security (AREA)
Abstract
本发明公开了一种数据保护方法,包括:应用服务器获取文件日志信息;所述应用服务器判断是否有文件所对应的文件日志信息发生变化;当有文件所对应的文件日志信息发生变化时,所述应用服务器将所述文件拷贝到SAN存储资源上。本发明中,在进行数据恢复时,如果是少量文件的恢复,可以直接从网络存储设备上读取到对应的文件,并以文件拷贝的方式将该文件复制到应用服务器上,从而节省了恢复时间、提高了用户的使用体验。
Description
技术领域
本发明涉及存储技术领域,特别是涉及一种数据保护方法及装置。
背景技术
随着Internet迅速发展以及对数据安全观念的加强,对数据的保护提出越来高的要求,而使用存储设备进行数据保护的方法得到了重视;对于一个企业来说,需要存储更多的数据,也要求更大的存储容量,而且企业数据的安全性极为重要,一旦重要的数据被破坏或丢失,就会对企业日常生产造成重大的影响,甚至是难以弥补的损失,因此,提供可靠的数据存储保证是至关重要的。
现有技术中,如图1所示,通过在应用服务器上安装数据保护软件,将应用服务器本身的数据保护到存储设备上,并不断的将应用服务器上变化的数据保护到存储设备上。其中,在被保护的应用服务器上安装的数据保护软件中,包括一个initiator(发起者)和一张表格,通过使用该initiator可以连接到存储设备;并通过使用该表格记录数据块的变化情况。例如,应用服务器的硬盘disk-A的大小为70G,而存储设备上有足够大的空间(大于70G);当需要对硬盘disk-A上的数据进行保护时,数据保护软件利用initiator与存储设备建立连接,并在存储设备上分配一个与disk-A同样大小的资源(即70G的资源,以下称为ST-A),此时,可以将disk-A中的数据拷贝到ST-A中,如图2所示,数据保护软件将disk-A中的每个数据块的数据拷贝(数据块级的拷贝)到ST-A相对应的数据块中;例如,将disk-A中数据块1的数据拷贝到ST-A的数据块1中。
此外,当第一次数据拷贝完成后,数据保护软件将使用上述用于记录数据块变化情况的表格将disk-A被改动的数据块编号记录下来,并每隔一段时间(例如,10分钟)后,将改变过的数据块中的内容同步到ST-A中,使得ST-A中的数据与disk-A中的数据近似保持一致(10分钟内变化的数据不能一致);如表1所示:
表1
被改变的数据块编号 |
1 |
2 |
3 |
通过上述的数据拷贝过程,一旦disk-A出现损坏时,应用服务器可以通过initiator与存储设备建立会话,并将disk-A中对应的数据从ST-A中读取出来,从而获取到disk-A丢失的数据。
基于上面的分析,现有技术是基于数据块级的数据保护,当disk-A出现损坏时,需要将ST-A的全部数据拷贝到新的disk-B(对应于disk-A)上,从而恢复原disk-A上的数据;此时,如果有文件的改变跨越了2次时间间隔(例如,超过20分钟),使得一部分文件拷贝到disk-B,另一部分文件没有拷贝到disk-B时,将导致该文件不可读,进一步的,如果该文件是系统文件时,会导致大量文件不可读,使得disk-B上的数据有很多不完整的情况。
此外,如果disk-A上只是有一些文件出现了损坏,现有技术中需要通过全盘拷贝的方法进行数据恢复,不能对损坏的文件进行数据恢复,使得恢复的时间很长,影响用户的使用。
发明内容
本发明提供一种数据保护方法及装置,以对数据进行文件级别的数据保护,提高效率。
为了达到上述目的,本发明提出了一种数据保护方法,应用于包括应用服务器和网络存储设备的系统中,所述应用服务器与所述网络存储设备通过网络进行数据传输,所述应用服务器需要在所述网络存储设备上至少申请两块SAN存储资源,第一SAN存储资源用于存储所述应用服务器的本地数据,第二SAN存储资源用于存储所述应用服务器所对应的应用数据,所述应用数据包括不需要存储到所述应用服务器,但需要通过所述应用服务器存储到网络存储设备上的数据;所述方法包括以下步骤:
所述应用服务器获取文件日志信息,所述文件日志信息包括文件名、文件包含的地址块、修改的地址块,用以实现文件级的数据保护;
所述应用服务器判断是否有文件所对应的文件日志信息发生变化;所述文件为所述本地数据的文件;
当有文件所对应的文件日志信息发生变化时,所述应用服务器将所述文件中修改的数据块拷贝到所述第一SAN存储资源上。
所述应用服务器获取文件日志信息之前,还包括:
所述应用服务器将所述本地数据以数据块的形式拷贝到所述第一SAN存储资源上。
所述应用服务器判断是否有文件所对应的文件日志信息发生变化具体包括;
所述应用服务器判断所述文件日志信息与自身存储的日志表项是否相同,所述日志表项用于存储所述文件日志信息;
当所述文件日志信息与日志表项相同时,所述应用服务器判断没有文件所对应的文件日志信息发生变化;
当所述文件日志信息与日志表项不同时,所述应用服务器判断有文件所对应的文件日志信息发生变化。
当有文件所对应的文件日志信息发生变化时,所述方法还包括:
所述应用服务器根据变化后的文件日志信息更新自身的日志表项。
所述应用服务器将所述文件拷贝到第一SAN存储资源上具体包括:
所述应用服务器将自身日志表项中所述文件所对应的内容标记为未处理日志;
所述应用服务器将所述未处理日志所对应的文件作为一个事务,并将该文件中修改的数据块保存到所述第一SAN存储资源上;
当保存完成时,所述应用服务器将自身日志表项中所述文件所对应的内容标记为处理日志。
当所述应用服务器的硬盘出现损坏时,所述方法还包括:
所述应用服务器从所述第一SAN存储资源上获取本地数据;
所述应用服务器以数据块拷贝的方式将所述本地数据拷贝到所述应用服务器所使用的新硬盘中;
当所述应用服务器的文件出现损坏时,所述方法还包括:
所述应用服务器从所述第一SAN存储资源上查找损坏文件所对应的本地数据;
所述应用服务器以文件拷贝的方式将对应的本地数据拷贝到所述应用服务器中。
所述应用服务器通过自身的数据保护软件与所述网络存储设备中的第一SAN存储资源进行数据传输。
一种数据保护装置,应用于包括应用服务器和网络存储设备的系统中,所述应用服务器与所述网络存储设备通过网络进行数据传输,所述应用服务器需要在所述网络存储设备上至少申请两块SAN存储资源,第一SAN存储资源用于存储所述应用服务器的本地数据,第二SAN存储资源用于存储所述应用服务器所对应的应用数据,所述应用数据包括不需要存储到所述应用服务器,但需要通过所述应用服务器存储到网络存储设备上的数据;所述装置包括:
获取模块,用于获取文件日志信息,所述文件日志信息包括文件名、文件包含的地址块、修改的地址块,用以实现文件级的数据保护;
判断模块,用于判断是否有文件所对应的文件日志信息发生变化;所述文件为所述本地数据的文件;
处理模块,用于当所述判断模块判断有文件所对应的文件日志信息发生变化时,将所述文件中修改的数据块拷贝到所述第一SAN存储资源上。
所述处理模块还用于:
将所述本地数据以数据块的形式拷贝到所述第一SAN存储资源上。
所述判断模块具体用于:
判断所述文件日志信息与自身存储的日志表项是否相同,所述日志表项用于存储所述文件日志信息;
当所述文件日志信息与日志表项相同时,判断没有文件所对应的文件日志信息发生变化;
当所述文件日志信息与日志表项不同时,判断有文件所对应的文件日志信息发生变化。
当有文件所对应的文件日志信息发生变化时,所述处理模块还用于:
根据变化后的文件日志信息更新自身的日志表项。
所述处理模块具体用于:
将自身日志表项中所述文件所对应的内容标记为未处理日志;将所述未处理日志所对应的文件作为一个事务,并将该文件中修改的数据块保存到所述第一SAN存储资源;当保存完成时,将自身日志表项中所述文件所对应的内容标记为处理日志。
当所述应用服务器的硬盘出现损坏时,所述获取模块还用于:
从所述网络存储设备上获取存储资源,所述存储资源为所述应用服务器在所述网络存储设备上所保护的数据;
并以数据块拷贝的方式将所述存储资源拷贝到所述应用服务器所使用的新硬盘中;
当所述应用服务器的文件出现损坏时,所述获取模块还用于:
从所述网络存储设备上查找损坏文件所对应的存储资源;
并以文件拷贝的方式将对应的存储资源拷贝到所述应用服务器中。
所述数据保护装置通过自身的数据保护软件与所述网络存储设备中的第一SAN存储资源进行数据传输。
与现有技术相比,本发明具有以下优点:通过使用应用服务器上文件系统的日志信息,将日志信息中发生变化的文件获取出来,并将该发生变化的文件拷贝到网络存储设备中,从而实现数据的保护。而在进行数据恢复时,如果是少量文件的恢复,可以直接从网络存储设备上读取到对应的文件,并以文件拷贝的方式将该文件复制到应用服务器上,从而节省了恢复时间、提高了用户的使用体验。
附图说明
图1为现有技术中在应用服务器上安装数据保护软件,将应用服务器本身的数据保护到存储设备示意图;
图2为现有技术中数据保护软件将disk-A中的每个数据块的数据拷贝到ST-A相对应的数据块中示意图;
图3为本发明提出的一种数据保护方法流程图;
图4为本发明应用场景下提出的一种数据保护方法流程图;
图5为本发明提出的一种数据保护装置结构图。
具体实施方式
如背景技术所述,现有技术中在对应用服务器上的数据进行保护时,需要将整个数据块上的数据拷贝到存储设备上,在对数据进行恢复时,也需要将存储设备的整个数据块上的数据恢复到应用服务器上;从而导致大量文件不可读、恢复时间长、影响用户使用等问题。为了解决上述问题,本发明提供一种基于文件级别的数据保护方法,不需要对整个数据块上的数据进行拷贝,节省了恢复时间、提高了用户的使用体验。
本发明的主要思想是对于日志文件系统,通过分析日志文件系统的日志信息,获知被改动文件,并将被改动文件的数据块拷贝到网络存储设备上,每次拷贝均是以文件为单位进行拷贝的,从而实现了文件级别的数据保护。
本发明提出的一种数据保护方法,应用于包括应用服务器和网络存储设备的系统中,所述应用服务器与所述网络存储设备通过网络进行数据传输,该网络可以为IP(Internet Protocol,网络互连协议)网络,或FC(Fiber Channel,光纤通道)网络等,所述应用服务器需要在所述网络存储设备上至少申请两块SAN(Storage Area Network,存储局域网络)存储资源,第一SAN存储资源用于存储所述应用服务器的本地数据,第二SAN存储资源用于存储所述应用服务器所对应的应用数据;其中,所述应用服务器的本地数据包括但不限于本地的系统文件;本地的驱动程序;本地的应用程序等;所述应用数据为不需要存储到所述应用服务器,但需要通过所述应用服务器存储到第二SAN存储资源的数据;如图3所示,所述方法包括以下步骤:
步骤S301,所述应用服务器获取文件日志信息。
步骤S302,所述应用服务器判断是否有文件所对应的文件日志信息发生变化;所述文件为所述本地数据的文件。
步骤S303,当有文件所对应的文件日志信息发生变化时,所述应用服务器将所述文件拷贝到所述第一SAN存储资源上。即所述应用服务器通过所述IP网络,或FC网络将述文件拷贝到第一SAN存储资源中。
需要说明的是,在本发明中,当所述应用服务器通过IP网络将文件拷贝到第一SAN存储资源时,所述应用服务器与所述第一SAN存储资源将采用iSCSI(Internet Small Computer System Interface,互联网小型计算机系统接口)协议完成拷贝过程,当所述应用服务器通过FC网络将文件拷贝到第一SAN存储资源时,所述应用服务器与所述第一SAN存储资源将采用FC协议完成拷贝过程。
如图4所示,以下结合一种具体的应用场景对本发明所提出的数据保护方法进行详细描述,对于应用服务器,需要保护到网络存储设备上的数据包括本地数据和应用程序,其中,该本地数据包括但不限于本地的系统文件(该应用服务器的系统文件);本地的驱动程序(该应用服务器的各种驱动程序,例如,主板驱动程序等);本地的应用程序(即该应用服务器提供应用时所使用的程序,例如,当该应用服务器需要提供邮件服务时,则该应用程序可以为邮件服务所必须使用的程序)等,而该应用数据为不需要存储到所述应用服务器,但需要通过所述应用服务器存储到网络存储设备上的数据,继续以应用服务器提供邮件服务为例,则该应用数据可以为邮件交互过程中直接存储到网络存储设备上的邮件数据。本发明中,应用服务器需要在网络存储设备上申请两块SAN存储资源(当然,根据实际的需要,也可以申请超过两块SAN存储资源,在此不再赘述),其中一块存储资源用于存储本地数据,另一块存储资源用于存储应用数据,而该应用数据的存储过程本发明中不再详加赘述。本发明中所提出的数据保护方法是针对该本地数据的数据保护过程。
具体的,该数据保护方法应用在日志文件系统中,对于每个日志文件系统,都会有日志信息,通过使用该日志信息记录文件的更改情况,如表2所示的一种日志信息的结构;当然,表2所示的日志信息结构只是一种示例情况,根据实际的需要还可以对表2中的内容进行修改,在此不再赘述。
表2
其中,在该日志信息包括记录号、文件名、包含的地址块、修改的地址块、是否更新完毕和修改时间等内容,例如,对于File-1,包含的地址块为1-100;102、150-160,而在2009-7-2进行了更新,对地址块35、46、90、155进行了修改,而且更新完毕。
可以看出,在日志文件系统中,当文件发生更新时,修改的内容均可以在日志信息中显示出来,基于这一情况,本发明中,应用服务器可以通过该日志信息获取到发生更改的文件,从而对该文件进行数据保护,以实现文件级别的数据保护。
本发明中,应用服务器可以获取到自身的日志信息,并在数据保护软件中维护日志表项。其中,该日志表项与上述日志信息结构所对应的表2相比,只增加了一项,即增加了是否已经处理该日志信息;可知,应用服务器在获取到日志信息后,可以直接在数据保护软件中维护日志表项。如表3所示的一种日志表项;当然,表3所示的日志表项只是一种示例情况,根据实际的需要还可以对表3中的内容进行修改,在此不再赘述。
表3
具体的,上述的数据保护方法包括以下步骤:
步骤S401,应用服务器与网络存储设备建立会话,并在网络存储设备上为该应用服务器分配不小于被保护硬盘的资源。其中,在数据保护软件中包含有initiator,而应用服务器是通过使用数据保护软件中的initiator与网络存储设备建立会话,该会话的建立过程本发明中不再详加描述。
具体的,为了保证应用服务器上的所有数据均能够在网络存储设备进行存储保护,该网络存储设备需要为该应用服务器分配不小于被保护硬盘的资源。例如,当应用服务器上需要有60G的资源需要被保护时,则该网络存储设备在为该应用服务器分配资源时,预留的资源应不小于60G。
步骤S402,应用服务器将所有需要保护的数据以数据块的形式拷贝到网络存储设备上。其中,在第一次进行数据拷贝时,需要将应用服务器中所有的数据(需要保护的数据)拷贝到网络存储设备上时,本步骤中,由于需要拷贝的数据很多,应用服务器是采用全盘拷贝的方式将数据拷贝到网络存储设备的。
具体的,该应用服务器中所有需要保护的数据包括但不限于本地的系统文件;本地的驱动程序;本地的应用程序;应用数据等。当然,本发明中,应用服务器中需要保护到所述网络存储设备上的数据并不局限于此,应用服务器上所有的数据均可以保护到所述网络存储设备上,在此不再赘述。
需要说明的是,在上述所有需要保护到网络存储设备上的数据中,应用数据与本地数据(本地的系统文件、本地的驱动程序、本地的应用程序等)的拷贝位置并不相同,而且二者的拷贝方式也不一定相同,对于应用数据的保护过程本发明中不再赘述,本发明是针对本地数据的保护过程的。
步骤S403,应用服务器根据预设的周期收集自身的日志信息。其中,在该应用服务器上有用于记录文件更改情况的日志信息,即当文件发生更改时,日志信息中均会有相应的记录,如表2所示的情况,当文件发生更改时,则对应的修改的地址块中则会发生变化,例如,在上个周期File-1对应的修改的地址块内容为空,而本周期内File-1对应的修改的地址块内容位25、26时,可知,File-1发生了变化,日志信息中有相应的记录。
具体的,在第一次将应用服务器上所有的数据均拷贝到网络存储设备之后,后续过程中只需要对更改的文件进行拷贝即可,可能不再需要对数据进行大规模的拷贝;当然,根据实际的需要,当应用服务器上的数据短时间内大规模变化时,也需要进行全盘数据块的整体复制,本发明中不再赘述。
进一步的,由于应用服务器需要通过使用数据保护软件将数据拷贝到网络存储设备上,即本步骤中,应用服务器是通过使用数据保护软件收集该日志信息的,该数据保护软件需要根据预设的周期,从应用服务器中获取到日志信息。其中,该预设的周期为根据实际需要任意选择的,例如,将该预设周期设置为10分钟,则每经过10分钟,数据保护软件收集一次日志信息。
步骤S404,应用服务器判断该日志信息中是否有文件发生变化。其中,应用服务器将通过使用数据保护软件判断该日志信息中是否有文件发生变化,本步骤中,由于在该数据保护软件中已经存储了表3所示的日志表项,而该日志表项与表2所示的日志信息是有着紧密的对应关系的,当日志信息中有文件发生变化时,则必然导致日志信息和日志表项不一致的情况;该数据保护软件通过判断该日志信息与自身存储的日志表项是否一致,从而获取到日志信息中是否有文件发生变化;即当日志信息与日志表项一致时,日志信息中没有文件发生变化;当日志信息与日志表项不一致时,日志信息中有文件发生变化。本步骤中,当日志信息中有文件发生变化时,转到步骤S405,当日志信息中没有文件发生变化时,则不需要进行后续步骤,只需要到下个周期继续进行判断即可。
步骤S405,应用服务器更新自身存储的日志表项。其中,当数据保护软件获知日志表项发生变化时,需要更新自身的日志表项,该更新过程具体为使用发生变化的日志信息替换日志表项中对应的内容,并将是否已经处理该日志中对应的内容设置为否。例如,当日志信息中的File-1发生变化时,则使用该File-1替换日志表项中File-1的内容,将File-1的是否已经处理该日志设置为否。
步骤S406,应用服务器根据该日志表项将发生变化的文件拷贝到网络存储设备中。其中,数据保护软件通过查看自身日志表项中的是否已经处理该日志的内容,获知该日志所对应的文件是否已经拷贝到网络存储设备中,当该是否已经处理该日志的内容为否时,则该日志所对应的文件没有拷贝到网络存储设备中,此时,应用服务器需要将该日志所对应的文件拷贝到网络存储设备中;当该是否已经处理该日志的内容为是时,则该日志所对应的文件已经拷贝到网络存储设备中,此时,应用服务器不需要将该日志所对应的文件进行处理。本步骤中,数据保护软件需要将变化文件中修改的数据块拷贝到网络存储设备上的相应数据块中,该过程本发明中不再赘述。
需要说明的是,将变化文件中修改的数据块拷贝到网络存储设备上的相应数据块的过程是一个事务过程,即每个文件是由多个数据块所组成的,当对该文件进行拷贝时,需要将文件中的所有数据块均分别拷贝到网络存储设备上,若有一个数据块拷贝出现错误时,则整个文件的拷贝不能成功,需要对所有的数据块重新拷贝。
当发生变化的文件已经拷贝到网络存储设备中时,该数据保护软件还需要将自身存储的日志表项中是否已经处理该日志的内容更改为是,在后续步骤中不再需要对该文件进行拷贝。
可见,通过上述的流程,可以实现数据的保护过程,即当文件发生变化时,可以直接将变化后的文件拷贝到网络存储设备上,而不需要将整个数据块(硬盘所对应的数据块)拷贝到网络存储设备上。
进一步的,上述过程只是将应用服务器中的数据拷贝到网络存储设备上,此外,当应用服务器出现故障时,需要从网络存储设备上恢复数据。此时,还包括:
步骤S407,应用服务器从网络存储设备上获取到所需的数据,并将该数据存储到自身的硬盘中。
具体的,当应用服务器本身的硬盘损坏时,此时,应用服务器需要获取整个硬盘上的数据,即从网络存储设备上该硬盘所对应的存储资源上获取到该整个硬盘的数据。其中,该应用服务器需要通过数据保护软件中的initiator软件连接网络存储设备上对应的资源,并直接使用网络存储设备上的资源;当为应用服务器更换了新的硬盘时,将网络存储设备上的数据整个拷贝到应用服务器的新硬盘中,即采用数据块拷贝的方式将网络存储设备上的资源拷贝到应用服务器的新硬盘中。
进一步的,当应用服务器上的个别文件出现损坏时,由于数据保护软件所进行的是文件级别的数据保护,即在网络存储设备中的每个文件都是完整的,此时,数据保护软件可以使用initiator连接到网络存储设备上对应的资源,将损坏文件的源文件找出来,并通过文件拷贝的方式将对应的源文件拷贝到应用服务器上,从而达到数据恢复的目的。
需要说明的是,在本发明中,应用服务器所连接的网络存储设备可以是IP SAN,也可以是FC SAN,即数据保护软件中的initiator与网络存储设备之间可以使用IP网络进行传输,也可以使用FC网络进行传输,其中,当使用IP网络进行传输时,将采用iSCSI协议;在使用FC网络进行传输时,将采用FC协议。
为了更加清楚的说明本发明提供的方案,以下通过一个具体的例子进行详细说明。例如,当应用服务器的硬盘大小为70G时,则网络存储设备上需要为该应用服务器预留不小于70G的空间,第一次是进行全盘拷贝的,即将70G硬盘中的内容通过数据块的方式整个拷贝到网络存储设备上。在第一次全盘拷贝完成后,有2个文件进行了更新,对应的日志信息如表2所示。在初始时,该数据保护软件中的日志表项是空的,第一次更新时(上述的全盘拷贝过程),首先读取文件系统的日志信息,并将该日志信息(即2条记录)写入到数据保护软件的日志表项中,如表4所示,可知,在初始时刻,需要将是否已经处理该日志设置为否。
表4
当数据保护软件获知File-1所对应的是否已经处理该日志的内容为否时,需要将记录1中File-1更新的地址块中的数据拷贝到网络存储设备中(其中,一条记录将作为一个事务进行处理),拷贝完成后,需要将是否已经处理该日志中的内容修改为“是”;再处理记录2,即File-2,该处理过程与File-1相同,在此不再赘述。
本发明提出的一种数据保护装置,应用于包括应用服务器和网络存储设备的系统中,所述应用服务器与所述网络存储设备通过网络进行数据传输,所述应用服务器需要在所述网络存储设备上至少申请两块SAN存储资源,第一SAN存储资源用于存储所述应用服务器的本地数据,第二SAN存储资源用于存储所述应用服务器所对应的应用数据;如图5所示,所述装置包括:
获取模块51,用于根据预设的周期获取文件日志信息。
其中,当所述应用服务器的硬盘出现损坏时,所述获取模块51还用于从所述网络存储设备上获取存储资源,所述存储资源为所述应用服务器在所述网络存储设备上所保护的数据;并以数据块拷贝的方式将所述存储资源拷贝到所述应用服务器所使用的新硬盘中。
当所述应用服务器的文件出现损坏时,所述获取模块51还用于从所述网络存储设备上查找损坏文件所对应的存储资源;并以文件拷贝的方式将对应的存储资源拷贝到所述应用服务器中。
判断模块52,用于判断所述获取模块51获取的文件日志信息中是否有文件所对应的文件日志信息发生变化。所述文件为所述本地数据的文件。
其中,所述判断模块52具体用于判断所述文件日志信息与自身存储的日志表项是否相同,所述日志表项用于存储所述文件日志信息;当所述文件日志信息与日志表项相同时,判断没有文件所对应的文件日志信息发生变化;当所述文件日志信息与日志表项不同时,判断有文件所对应的文件日志信息发生变化。
处理模块53,用于当所述判断模块52判断有文件所对应的文件日志信息发生变化时,将所述文件拷贝到所述第一SAN存储资源上。其中,在第一次拷贝本地数据时,所述处理模块53需要将所述本地数据以数据块的形式拷贝到所述第一SAN存储资源上。而当有文件所对应的文件日志信息发生变化时,所述处理模块53还用于根据变化后的文件日志信息更新自身的日志表。
进一步的,所述处理模块53具体用于将自身日志表项中所述文件所对应的内容标记为未处理日志;将所述未处理日志所对应的文件作为一个事务,并将该文件保存到所述第一SAN存储资源;当保存完成时,将自身日志表项中所述文件所对应的内容标记为处理日志。
需要说明的是,在本发明中,所述数据保护装置通过自身的数据保护软件与所述网络存储设备中的第一SAN存储资源进行数据传输。
其中,本发明装置的各个模块可以集成于一体,也可以分离部署。上述模块可以合并为一个模块,也可以进一步拆分成多个子模块。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可以通过硬件实现,也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
本领域技术人员可以理解附图只是一个优选实施例的示意图,附图中的模块或流程并不一定是实施本发明所必须的。
本领域技术人员可以理解实施例中的装置中的模块可以按照实施例描述进行分布于实施例的装置中,也可以进行相应变化位于不同于本实施例的一个或多个装置中。上述实施例的模块可以合并为一个模块,也可以进一步拆分成多个子模块。
上述本发明序号仅仅为了描述,不代表实施例的优劣。
以上公开的仅为本发明的几个具体实施例,但是,本发明并非局限于此,任何本领域的技术人员能思之的变化都应落入本发明的保护范围。
Claims (14)
1.一种数据保护方法,其特征在于,应用于包括应用服务器和网络存储设备的系统中,所述应用服务器与所述网络存储设备通过网络进行数据传输,所述应用服务器需要在所述网络存储设备上至少申请两块SAN存储资源,第一SAN存储资源用于存储所述应用服务器的本地数据,第二SAN存储资源用于存储所述应用服务器所对应的应用数据,所述应用数据包括不需要存储到所述应用服务器,但需要通过所述应用服务器存储到网络存储设备上的数据;所述方法包括以下步骤:
所述应用服务器获取文件日志信息,所述文件日志信息包括文件名、文件包含的地址块、修改的地址块,用以实现文件级的数据保护;
所述应用服务器判断是否有文件所对应的文件日志信息发生变化;所述文件为所述本地数据的文件;
当有文件所对应的文件日志信息发生变化时,所述应用服务器将所述文件中修改的数据块拷贝到所述第一SAN存储资源上。
2.如权利要求1所述的方法,其特征在于,所述应用服务器获取文件日志信息之前,还包括:
所述应用服务器将所述本地数据以数据块的形式拷贝到所述第一SAN存储资源上。
3.如权利要求1所述的方法,其特征在于,所述应用服务器判断是否有文件所对应的文件日志信息发生变化具体包括;
所述应用服务器判断所述文件日志信息与自身存储的日志表项是否相同,所述日志表项用于存储所述文件日志信息;
当所述文件日志信息与日志表项相同时,所述应用服务器判断没有文件所对应的文件日志信息发生变化;
当所述文件日志信息与日志表项不同时,所述应用服务器判断有文件所对应的文件日志信息发生变化。
4.如权利要求3所述的方法,其特征在于,当有文件所对应的文件日志信息发生变化时,所述方法还包括:
所述应用服务器根据变化后的文件日志信息更新自身的日志表项。
5.如权利要求1所述的方法,其特征在于,所述应用服务器将所述文件中修改的数据块拷贝到所述第一SAN存储资源上具体包括:
所述应用服务器将自身日志表项中所述文件所对应的内容标记为未处理日志;
所述应用服务器将所述未处理日志所对应的文件作为一个事务,并将该文件中修改的数据块保存到所述第一SAN存储资源上;
当保存完成时,所述应用服务器将自身日志表项中所述文件所对应的内容标记为处理日志。
6.如权利要求1所述的方法,其特征在于,当所述应用服务器的硬盘出现损坏时,所述方法还包括:
所述应用服务器从所述第一SAN存储资源上获取本地数据;
所述应用服务器以数据块拷贝的方式将所述本地数据拷贝到所述应用服务器所使用的新硬盘中;
当所述应用服务器的文件出现损坏时,所述方法还包括:
所述应用服务器从所述第一SAN存储资源上查找损坏文件所对应的本地数据;
所述应用服务器以文件拷贝的方式将对应的本地数据拷贝到所述应用服务器中。
7.如权利要求1-6任一项所述的方法,其特征在于,所述应用服务器通过自身的数据保护软件与所述网络存储设备中的第一SAN存储资源进行数据传输。
8.一种数据保护装置,其特征在于,应用于包括应用服务器和网络存储设备的系统中,所述应用服务器与所述网络存储设备通过网络进行数据传输,所述应用服务器需要在所述网络存储设备上至少申请两块SAN存储资源,第一SAN存储资源用于存储所述应用服务器的本地数据,第二SAN存储资源用于存储所述应用服务器所对应的应用数据,所述应用数据包括不需要存储到所述应用服务器,但需要通过所述应用服务器存储到网络存储设备上的数据;所述装置包括:
获取模块,用于获取文件日志信息,所述文件日志信息包括文件名、文件包含的地址块、修改的地址块,用以实现文件级的数据保护;
判断模块,用于判断是否有文件所对应的文件日志信息发生变化;所述文件为所述本地数据的文件;
处理模块,用于当所述判断模块判断有文件所对应的文件日志信息发生变化时,将所述文件中修改的数据块拷贝到所述第一SAN存储资源上。
9.如权利要求8所述的装置,其特征在于,所述处理模块还用于:
将所述本地数据以数据块的形式拷贝到所述第一SAN存储资源上。
10.如权利要求8所述的装置,其特征在于,所述判断模块具体用于:
判断所述文件日志信息与自身存储的日志表项是否相同,所述日志表项用于存储所述文件日志信息;
当所述文件日志信息与日志表项相同时,判断没有文件所对应的文件日志信息发生变化;
当所述文件日志信息与日志表项不同时,判断有文件所对应的文件日志信息发生变化。
11.如权利要求10所述的装置,其特征在于,当有文件所对应的文件日志信息发生变化时,所述处理模块还用于:
根据变化后的文件日志信息更新自身的日志表项。
12.如权利要求8所述的装置,其特征在于,所述处理模块具体用于:
将自身日志表项中所述文件所对应的内容标记为未处理日志;将所述未处理日志所对应的文件作为一个事务,并将该文件中修改的数据块保存到所述第一SAN存储资源;当保存完成时,将自身日志表项中所述文件所对应的内容标记为处理日志。
13.如权利要求8所述的装置,其特征在于,当所述应用服务器的硬盘出现损坏时,所述获取模块还用于:
从所述网络存储设备上获取存储资源,所述存储资源为所述应用服务器在所述网络存储设备上所保护的数据;
并以数据块拷贝的方式将所述存储资源拷贝到所述应用服务器所使用的新硬盘中;
当所述应用服务器的文件出现损坏时,所述获取模块还用于:
从所述网络存储设备上查找损坏文件所对应的存储资源;
并以文件拷贝的方式将对应的存储资源拷贝到所述应用服务器中。
14.如权利要求8-13任一项所述的装置,其特征在于,所述数据保护装置通过自身的数据保护软件与所述网络存储设备中的第一SAN存储资源进行数据传输。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200910169602 CN101635746B (zh) | 2009-08-27 | 2009-08-27 | 一种数据保护方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200910169602 CN101635746B (zh) | 2009-08-27 | 2009-08-27 | 一种数据保护方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101635746A CN101635746A (zh) | 2010-01-27 |
CN101635746B true CN101635746B (zh) | 2013-01-16 |
Family
ID=41594804
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200910169602 Expired - Fee Related CN101635746B (zh) | 2009-08-27 | 2009-08-27 | 一种数据保护方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101635746B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103716174A (zh) * | 2012-10-09 | 2014-04-09 | 鸿富锦精密工业(深圳)有限公司 | 测试日志撷取系统及方法 |
CN103019886B (zh) * | 2012-12-11 | 2016-03-30 | 曙光信息产业(北京)有限公司 | 多元数据服务器下日志系统的恢复方法和装置 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101436207A (zh) * | 2008-12-16 | 2009-05-20 | 浪潮通信信息系统有限公司 | 一种基于日志快照的数据恢复和同步方法 |
-
2009
- 2009-08-27 CN CN 200910169602 patent/CN101635746B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101436207A (zh) * | 2008-12-16 | 2009-05-20 | 浪潮通信信息系统有限公司 | 一种基于日志快照的数据恢复和同步方法 |
Also Published As
Publication number | Publication date |
---|---|
CN101635746A (zh) | 2010-01-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7350043B2 (en) | Continuous data protection of block-level volumes | |
CN101777062B (zh) | 场境感知的实时计算机保护系统和方法 | |
CN103246595B (zh) | 应用程序管理方法、装置、服务器及终端设备 | |
US8856467B2 (en) | Management of metadata in a storage subsystem | |
CN1842789A (zh) | 用于在数据库恢复期间快照查询的系统和方法 | |
US20060200500A1 (en) | Method of efficiently recovering database | |
CN1702627A (zh) | 执行拷贝操作的方法和系统 | |
US20080282355A1 (en) | Document container data structure and methods thereof | |
US8655847B2 (en) | Mirroring data changes in a database system | |
CN104636375A (zh) | 一种自动备份应用数据且按需恢复的方法及装置 | |
US20220091876A1 (en) | System and method of selectively restoring a computer system to an operational state | |
CN103092718A (zh) | 测试数据备份系统及方法 | |
CN105068885B (zh) | 一种jpg碎片文件恢复与重组的方法 | |
CN109496292A (zh) | 一种磁盘管理方法、磁盘管理装置及电子设备 | |
CN103617260A (zh) | 重复数据删除的索引生成方法及装置 | |
CN103198122A (zh) | 重启内存数据库的方法和装置 | |
CN104899114A (zh) | 一种固态硬盘上的连续时间数据保护方法 | |
CN105867962A (zh) | 系统升级的方法和装置 | |
CN105550071B (zh) | 系统文件升级及检测方法、通信设备 | |
US10613923B2 (en) | Recovering log-structured filesystems from physical replicas | |
CN101635746B (zh) | 一种数据保护方法及装置 | |
CN104903865A (zh) | 恢复虚拟机映像的在前版本 | |
CN101937378A (zh) | 一种对存储设备的数据进行备份保护的方法及计算机系统 | |
CN104391760B (zh) | 一种数据备份的方法、服务器和系统 | |
CN109325005A (zh) | 一种数据处理方法和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CP03 | Change of name, title or address |
Address after: 310052 Binjiang District Changhe Road, Zhejiang, China, No. 466, No. Patentee after: Xinhua three Technology Co., Ltd. Address before: 310053 Hangzhou hi tech Industrial Development Zone, Zhejiang province science and Technology Industrial Park, No. 310 and No. six road, HUAWEI, Hangzhou production base Patentee before: Huasan Communication Technology Co., Ltd. |
|
CP03 | Change of name, title or address | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130116 Termination date: 20200827 |
|
CF01 | Termination of patent right due to non-payment of annual fee |